Как делить строку для парсинга JSON?

Question

[Espio]

Всем привет!
Делаю проект по анализу метрик из Pyrus с помощью DataLens. На данный момент реализация идёт с помощью онлайн гугл-таблиц в дальнейшем переедем на БД.
В гугл таблицах есть встроенные скрипты, с помощью которых я вытаскиваю данные из Pyrus.

Выпадает следующая ошибка при попытке вызвать функцию JSON.parse(response.getContentText());

let response = UrlFetchApp.fetch(integration_url,options);
let content = JSON.parse(response.getContentText()); 

ошибка 
SyntaxError: Unterminated string in JSON at position 41007906

У меня есть 2 подозрения почему такое может происходить:
- В параметр response передаётся не вся запрошенная информация, из-за чего строка где-то обрубается и невозможно спарсить такую строку, как JSON.
- В response передаётся корректная строка, но она настолько длинная, что стандартная функция JSON.parse не справляется.

Подскажите куда и как лучше копать, чтобы решить данную проблему?
(P.s я могу с помощью фильтров уменьшить список получаемых данных, но в таком случае мне придётся делать очень много запросов к Pyrus, чего хочется избежать)

Comments

[calculator212]

а вы дожидаетесь пока ваши данные придут из промиса? Обычно же пишут что-то типа

response = fetch();
let data = await response.json();

[Espio]

calculator212, спасибо сейчас проверю

[Espio]

calculator212, та же самая ошибка

[Alexander Ivanov]

Зачем нам ваши подозрения? Что пишет в response.getContentText()? Вы из Питона пришли, что ль?

[Espio]

Alexander Ivanov,
Я пытался вывести полный лог response.gerContentText(). В этом логе строка JSON.
Но полный лог я не смог вывести, так как он слишком огромный (было написано Log is too large). Если подскажите как средствами Apps Srcipt вывести полный лог, буду также очень рад, так как я смогу всю принятую строку увидеть.

[Alexander Ivanov]

Espio, идеально так

1. Создайте файл json. Любой текстовый файл
   
2. Загрузите его на Диск Гугл
   
3. Найдите по ссылке общего доступа к этому файлу его id
   
4. Вместо лога у себя вызовите команду

   DriveApp.getFileById('тут id вашего текстового файла').setContent(response.getContent())

   
   

[Espio]

Alexander Ivanov, Спасибо большое, попробую

Answer 1

[Alexander Ivanov]

Вероятно, у вас некачественный JSON. Скрипты могут быть ни при чем.

Ошибка интерпретатора https://developer.mozilla.org/en-US/docs/Web/JavaS...

Comments

[Espio]

Как и предполагалось, от сервиса приходит не полная JSON строка из-за чего её невозможно спарсить. Придётся делить запрос с помощью фильтров

[Alexander Ivanov]

Espio, вроде, Apps Script не обрезает контент. Он должен вернуть ошибку "слишком большой контент".

[Espio]

Alexander Ivanov, Это проблема самого Pyrus из которого я данные забираю.
Например в отделе СТО за 1 месяц более 10000 записей записалось. При этом по запросу мне приходят все данные из формы, а не только необходимые. По итогу сервис просто не может отдать столько данных одним запросом, есть ограничения по количеству знаков.