Почему из запроса к s3 вырезается us-east-1?

Question

[jazzus]

2 Laravel сайта хранят картинки и файлы в одном аккаунте. У всех в env свои регионы остальные настройки одинаковые. На сайте, где в настройках
AWS_DEFAULT_REGION= us-east-1
для картинок из урл автоматом вырезается us-east-1 и соответственно картинок нет. Т.е. вместо
https://s3.us-east-1.amazonaws.com
получаю https://s3.amazonaws.com

Проблемный сайт не менялся.
Сайты полностью одинаковые, отличаются настройками
Файлы-не картинки в теге img на проблемном сайте загружаются без ошибок.
Даже на локалхосте ставлю регион us-east-1 и он также автоматом вырезается из запроса картинки. Т.е. просто прописываю разные регионы и в одном случае вырезает, в другом нет. Пишу аброкадабра и она есть, а us-east-1 вырезается. Видел в доках сообщение, что у них были какие-то ошибки с днс и сейчас исправлены. Что не так с Amazon? Вот так и храни файлы во всяких бакетах..

Answer 1

[Иван Шумов]

У данного региона для s3 два эндпоинта. Это Легаси и у них это отдельно указано в документации. Фиксить не собираются

Comments

[jazzus]

Т.е. в какой-то период времени этот регион с файлами просто берет и отваливается?

[jazzus]

Если я руками дописываю us-east-1 в урл то получаю досутп к файлу. Но из урла который генерирует Laravel через temporaryUrl вырезается автоматом

[Иван Шумов]

jazzus, те кто работают с AWS больше одной недели знают что N.Virginia это первый регион в котором происходит запуск всех альфа-релизов и держать там продакшн нельзя

[Иван Шумов]

jazzus, То что там генерирует Laravel это проблема Laravel. Вообще объект должен быть доступен по обоим адресам

[jazzus]

Иван Шумов, из-за чего это происходит? Почему из урл вырезается, а руками я проставляю и получаю доступ?

[Иван Шумов]

jazzus, По тому что внутри ларавела где-то кривой эндпоинт зашит в библиотеке же, ну. Вообще использовать для работы с AWS не из нативные пакеты - самоубийство

[jazzus]

Иван Шумов, Laravel генерирует с помощью драйвера s3. Для него настройка из конфига просто строка. Все без ошибок до сегодняшнего дня и сайт не обновлялся. Плюс я же говорю на соседнем сайте с бакетом в другом регионе все работает (а они полностью идентичны отличаются только конфигами). Проблема с aws 100%

[Иван Шумов]

jazzus, Так другой регион же. Это только Вирджиния имеет такую особенность с двумя адресами. И только она имеет привычку работать через всем известное место. Тут две проблемы: нельзя держать в этом регионе продакшн и нельзя доверять вендору)

И через какой он там драйвер s3 работает я не знаю. Если это не AWS sdk то выкини в помойку

[jazzus]

Иван Шумов, какой регион в сша рабочий? Попробую еще раз если отвалится перенесу картинки на сервер

[Иван Шумов]

jazzus, us-east-2. А смысл? Cloudfront забыли завезти?

[jazzus]

Иван Шумов, не думаю что в ларавел написали херню или я напишу лучше. Скорее всего есть тонкости и не так просто внедрить.

[jazzus]

Иван Шумов, ладно буду разбираться. Спасибо)

[jazzus]

Иван Шумов, картинки просто взяли и появились. Амазон стоимостью в 1трл без причин отрубил мне картинки на полдня. Такое можно сделать только специально

[Иван Шумов]

jazzus, нефиг использовать legacy адреса и получать изображения не через CDN

[jazzus]

Иван Шумов, опять вернулись к баранам. Ларавел по твоему херню написал и из всех способов предложил самый косячный? На другом сайте все работает. При чем тут способ запроса если амазон физически отрубил свой функционал

[Иван Шумов]

jazzus, при том что если вендор говорит "чуваки, это легаси, не надо так" то может надо слушать вендора?

[jazzus]

Иван Шумов, ну ты подумай логически. Есть один из крупнейших в мире фреймворков, отлаженный программистами со всего мира. И они предлагают временную ссылку из всех способов для s3. Плюс какие гарантии, что предложенный тобой функционал также не отрубится амазон. Вот ты я так понимаю специалист в этой области. По какой причине кроме "так бывает" они отключили временные ссылки?

[Иван Шумов]

jazzus, специально для справки тебе - ни один сервис в мире не работает с аптаймом в 100% и у AWS S3 SLA 99.9% (гарантированно), а спроектирован он для 99.99%. То есть в год он говорит что мы суммарно больше часа по идее не должны простаивать, но в редких случаях это может продлиться почти до 9 часов

[jazzus]

Иван Шумов, он не простаивал. Прямое обращение методом downloads для файлов в том же регионе продолжало работать. Не работал пол дня минимум temp ссылка. Я понимаю, что ее не рекомендуют использовать и все такое. Но это предложенный функционал лары, на основе функционала амазона. Это не простаивали. Они скорее всего пилили какой-то функционал, который затронул темп ссылку в этом регионе. И это не косяк лары/драйвера вообще. Т.к. темпссылка запрашивается у амазон, он ее тебе отдает, чтобы ты вставил в имг и сам амазон выпилил регион из своего урл

[Иван Шумов]

jazzus, Это все входит в понятие SLA по availability

[Иван Шумов]

jazzus, и ещё - каждый регион независимый и деплоятся они независимо. То есть проблема одного региона не влияет на другой

[jazzus]

Иван Шумов, они изически в разных местах находятся, но дока с апи у них одна. Я понимаю, что отрубилось в этом регионе я про него и писал. Напишу им в тп посмотрим что скажут. А так думаю уже запилить скрипт переноса файлов на сервер + грузиться картинки будут быстрее и роскомнадзор не заблокирует)