Проблемы с загрузкой файлов через S3 API на Backblaze B2 (Laravel, Timeweb хостинг). Большие файлы прерываются во время загрузки, кто сталкивался?

Question

[Илья]

У меня возникли трудности с загрузкой больших файлов (более 100 МБ) на Backblaze через их S3-совместимый интерфейс. Сайт размещен на Timeweb и использует Laravel, а также скрипт MTDb (Ultimate Movie/TV Database). Я настроил подключение к Backblaze для хранения файлов через S3 API.

Есть два варианта загрузки:

Прямая загрузка через API (без использования сервера): файл не загружается полностью. В хранилище создаётся пустой файл с нулевым размером.
Загрузка через сервер: файл загружается на сервер полностью, но при передаче на Backblaze загрузка прерывается на уровне 200-250 МБ.
Проблем с файлами меньшего размера нет, они загружаются корректно. Подозреваю, что это может быть связано с серверными ограничениями или особенностями работы Backblaze с S3 API.

Ссылка для подробного разбора проблемы

https://trahelovo.sentry.io/share/issue/07885ee8c0...

Прошу помочь в решении данной проблемы.

Answer 1

[mayton2019]

Лет 5 назад использовал.

Не знаю что такое Backblaze B2. Но в Amazon S3 реализации, любая загрузка
длинного файла шла через массив байт который передавался единоразово.
Почему так странно сделано - непонятно. Почему не было streamable-API - ХЗ.

Но если вы допустим захотите загрузить файл в 1Г то сервис у себя должен аллоцировать
буфер такого-же размера. Возможно у сервера просто не хватает памяти для этого буфера.

Comments

[Илья]

Да у амазона то же самое Один в один протоколы они по-моему ничем не отличаются хостинги я пробовал разные проблема всегда одна и та же попробуй установить скрипт меньше версии и понаблюдать из логов видно что запрос использует функцию которой нет [2024-10-13 11:36:11] production.ERROR: Call to undefined method League\Flysystem\Filesystem::getClient() {"userId":1,"exception":"[object] (Error(code: 0): Call to undefined method League\\Flysystem\\Filesystem::getClient() at /home/i/ilya88/trahelovo/vendor/laravel/framework/src/Illuminate/Filesystem/FilesystemAdapter.php:987)

[mayton2019]

Ну тут по стеку другая ошибка. Надо разбираться что это за
Filesystem::getClient()
и зачем он тебе нужен.