Почему останавливается загрузка в expo-file-system?

Question

[pcdesign]

Вот код, он нормально работает для небольшого кол-ва файлов:

for (const filename of this.state.iconFiles) {
      const apiUrl = Config.siteURL;
      const result = await FileSystem.downloadAsync(
        `${apiUrl}/${filename}`,
        `${FileSystem.documentDirectory}${filename}`
      );
}

Но когда мне нужно скачать и сохранить 374 файла, то все время замирает.
Скачивает примерно 290 или 301 файл, останавливается и висит.



Перезапускал, очищал, перезагружал. Ничего не помогает. Примерно в районе 300-го файла останавливается и все.

Comments

[Роман Александрович]

может тайм аут ?

[pcdesign]

Роман Александрович, у меня такое ощущение, что есть лимит на кол-во файлов в expo, хотя я нигде не могу нагуглить ничего по этому поводу.

А в каком месте timeout? На сервере за логами я смотрю. Пришел запрос на 300 файлов, 300 файлов сервер отдал.
А 301-ый файл приложение уже даже просить не хочет.

[Роман Александрович]

pcdesign, вам в дебагере видны все запросы с телефона?

[pcdesign]

Роман Александрович, да, в какой-то момент просто останавливается и все.
Я в console.log вывожу статус загрузки
console.log(result);
И в какой-то момент останавливается и дальше не хочет. Вот последний запрос и все на этом:

Object {
  "headers": Object {
    "Accept-Ranges": "bytes",
    "Connection": "keep-alive",
    "Content-Length": "5139",
    "Content-Type": "image/jpeg",
    "Date": "Fri, 07 Jun 2019 07:59:01 GMT",
    "ETag": "\"5cfa17a2-1413\"",
    "Last-Modified": "Fri, 07 Jun 2019 07:52:02 GMT",
    "Server": "nginx/1.12.1",
    "Strict-Transport-Security": "max-age=604800",
  },
  "status": 200,
  "uri": "file:///data/user/0/host.exp.exponent/files/ExperienceData/%2540aimo%252FIconData/24-10.jpg",
}

[pcdesign]

Причем приложение не падает, просто чего-то ждет.

[Роман Александрович]

pcdesign, напишите простой счетчик и сравните с количеством всех файлов. Я не вижу причины не загружать все файлы со стороны клиента. Это простой цикл. Я больше склоняюсь что с сервером может быть проблемы, но для этого надо быть уверенным что запросы пошли на сервер.

[pcdesign]

Роман Александрович, вы были правы сервер удаленный думает, что его ддосят и просто банальная защита срабатывает.
Я все же отследил эту ошибку в консоли приложения:

[Unhandled promise rejection: Error: Failed to connect to myserver.com/1.1.1:443:443]
* Error: Failed to connect to myserver.com/1.1.1:443:443 in <unknown>

Как замедлить все это и закрывать соединения?
Ну или ждать или повторно запрашивать?

[Роман Александрович]

pcdesign, ну тут уже вам решать что делать. Если поставить задержку между запросами увеличится время ожидания загрузки. Если сервер выкидывает тоже увеличивается время. По хорошему нужно как то делать такие циклические запросы без прерывания но при этом не отрубая систему контроля дедоса.

[pcdesign]

Роман Александрович, я внес IP в белый список, не помогло, опять на 300-ом получил Unhandled promise rejection: Error: Failed to connect to ...

[pcdesign]

Роман Александрович, а засунул в try cath c рестартом получи
Unhandled promise rejection: Error: Unable to create application data

[pcdesign]

Роман Александрович, попробовал на другом телефоне. Там все 374 файла без проблем скачались. В общем не ясно, что делать.

[Роман Александрович]

pcdesign, а что за телефоН?

[pcdesign]

Роман Александрович, ситуация такая: Huawei Honor 8 - проблемный телефон и эмулятор андроида BlueStacks тоже проблемный, доходит до 305 файлов и вообще падает.
Нормально отрабатывает на Huawei Honor 10.

[Роман Александрович]

pcdesign, а место под эти все файлы хватает?Посмотрите оперативку не забиваете ли вы и хватает ли место на устройстве.

[pcdesign]

Роман Александрович, дискового пространства и оперативы - полно.
И на эмуляторе и на телефоне.
И я исключил проблему с сервером. То есть просто подгружаю картинки из яндекса, беру одну и туже картинку 400 раз.
https://avatars.mds.yandex.net/get-pdb/1105309/b26...
И падает.

for (const filename of this.state.iconFiles) {
      const result = await FileSystem.downloadAsync(
       'https://avatars.mds.yandex.net/get-pdb/1105309/b26948f0-22ce-41a3-a690-770e9cbf92ce/s1200',
        `${FileSystem.documentDirectory}${filename}`
      );
}

Это похоже на какой-то баг в expo filesystem

[Роман Александрович]

pcdesign, попробуйте написать  issue в expo по этому вопросу. Я не вижу здесь место где вы сделали ошибку по написанию кода. Если сервер вы исключили значит проблема в expo. Как еще один вариант вы можете скачать файл не используя expo, а сторонними методами.

[pcdesign]

Роман Александрович, спасибо! Пока сделал такой костыль. Проверяю успела загрузится картинка или нет, и повторно скачиваю, если не успела. Так с двух попыток все файлы скачиваются.