Как сохранить 500 млн документов в Mysql или Postgresql?

Необходимо сохранить 500 миллионов текстовых документов (html + text). Объем базы будет достигать 700 Гб. Полагаю, что хранение будет на разных VPS по 60-80 ГБ каждая. Какие есть решения для Mysql или Postgres?
  • Вопрос задан
  • 926 просмотров
Пригласить эксперта
Ответы на вопрос 2
vasilyevmn
@vasilyevmn
DevOps
Хранить текстовые документы в БД не нужно, особенно 700Gb.
Используйте S3 совместимое хранилище, например, Minio.
Ответ написан
ThunderCat
@ThunderCat Куратор тега MySQL
{PHP, MySql, HTML, JS, CSS} developer
500 млн документов в Mysql или Postgresql... Мне нужно их индексировать через Sphinx

However, Sphinx does not depend on nor require any specific database to function.
Если у вас не стоит задача работать с УЖЕ СУЩЕСТВУЮЩЕЙ базой, база сфинксу как таковая не нужна, у него свои индексы и свой движок, хотя и с базами она тоже умеет.

PS: sphinxsearch.com/forum/view.html?id=11964
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы