Как хранить PDF файлы в базе данных и получить на него ссылку?

Question

[zilevsky]

Есть большое количество пдф файлов со сканами.
Предполагается что для хранения в базе данных файлы будут переводиться в байтовый формат.
Вопрос, как получить внешнюю ссылку на эти файлы чтобы при переходе по ней можно было скачать/открыть файл в браузере или другой программе для просмотра пдф.

На счёт формата хранения файлов в базе тоже пока вопрос. Удобно ли хранить в байтовом формате?

Comments

[mayton2019]

Удобно ли хранить в байтовом формате?

Очень странный вопрос. Другого формата как-бы нет.

[zilevsky]

mayton2019, ну мало ли

[Elvis]

А в чем нужда именно в базе хранить? Нет, бесспорно можно, но не проще файлами, а в базе хранить пути к этим файлам и выдавать по запросу.

[mayton2019]

zilevsky, некоторые небольшие кусочки бинарных данных (токены, ключи, сертификаты) хранят в базе в виде строк в кодировке Base64 или BinHex. Это удобно. Они обычно не больше 4к. И есть удобство кидать их через клипборд во время разработки и тестирования.

Но если данные большие и будет нагрузка (много пользователей захотят читать много документов) - то надо хранить в дисковых хранилищах. А в базе просто класть Url на файлик который лежит где-то там.

Вообще база с точки зрения суммарной стоимости владения - всегда дороже чем дисковое хранилище. Базу надо беречь и не пихать в нее нереляционные данные. Исторически базы были созданы для хранения коротких строчек и чисел. И если в них класть блобы - то таблица всегда деградирует по производительности. И бэкапы становятся безумно долгие и малополезные.

Answer 1

[zilevsky]

В итоге решением стало добавление в сервис построенный на fastapi метода который переводит файлы в байтовый вид, дополнительно снабжает запись uuid'ом и дальше через ендпоинт обращается к базе и вытаскивает на лету пдф по ссылке вида

http://127.0.0.1:8009/api/v1/open_file?pdf_uuid=3d0fa9343402412081b2f014da94bfb9

Answer 2

[Николай Савельев]

1. Хранить BLOB-файлы в БД - самая плохая идея из возможных. Базы данных предназначены не для этого. Как вариант - хранить на своём файловом сервере, либо в облаке, например AWS.
2. В базе надо хранить путь/cсылку к месту, где хранится файл
3. Для доступа к файлу через браузер надо писать бэкендовскую часть, API. Браузер обращается к апи, апи обращается к базе, чтобы получить место где хранится файл, апи забирает этот файл и отдаёт клиенту в браузере.

Comments

[beerchaser]

следует заметить, что хранение в базе ссылок на файловую систему, а самих файлов - на файловом ресурсе, это тоже такое себе решение в связи с сложностью реализации требований ACID и обеспечения согласованного бэкапа в данном случае. В связи с этим следует при проектировании оценить что критичнее - согласованность базы/бэкапа или накладные расходы на извлечение данных из СУБД.