Какую выбрать БД?

Question

[Андрей Раковский]

Есть боевой сервер на котором используется MySQL.
Текущая нагрузка на сервер



Жесткий диск: 4 x 512 GB SSD Samsung 100k IOPS
RAID: Software RAID1
RAM: 64GB
Процессор: HP ProLiant DL160 Gen9 2x [Xeon E5-2620v3 6 x 2.4 GHz]

Есть необходимость добавлять порядка 20-30 млн. записей в одну таблицу БД за сутки. За неделю собирается около 1 млрд записей.
Если это писать в текущую MySQL БД то диск не выдерживает нагрузки и БД падает.
Сейчас MySQL работает с параметром innodb_flush_method = O_DIRECT

Какую можно выбрать БД, которая будет выдерживать такую нагрузку и не сильно грузить жесткий диск?
99% операций это будет запись, 1% - чтение. Update и Delete не будет вообще.

Comments

[sim3x]

Картинку загрузите на хабрасторадж

[Андрей Раковский]

sim3x, загрузил.

[sim3x]

Андрей Раковский, просто смена субд ничего вам не даст - магии не бывает

Я б советовал найти DBA нормального

[Danil Sapegin]

Смотрите в сторону mongo

[sim3x]

Danil Sapegin, а яндекс уже перестал плеваться после того как они сделали ядиск на монге?
Или может вообще, кто-то большой чделал что-то большое на монге?

[Danil Sapegin]

sim3x, не знаю как там в Яндексе, мой опыт работы на вставку большого кол-во данных в монгу говорит о том, что жить можно :) mysql/postrgres в этом плане гораздо хуже

[sim3x]

Danil Sapegin,
ну у яндекса тоже со вставкой было ок
Вот с сохранностью - очень неок

Answer 1

[sim3x]

postgresq

Comments

[Александр Торопов]

почему PostrgreSQL?

[sim3x]

Александр Торопов, потому что единственная опенсорсная субд
*мускул - обертка для движков субд

[Станислав Бодро́в]

PostrgreSQL интенсивно работает с диском /со слов разработчиков и по личному опыту/, а у топикстартера как раз диски не выдерживают нагрузки.

единственная опенсорсная субд

даже если уточнить что РСУБД, то далеко не единственная. Другой момент, может быть, если хорошо подумать топикстартеру, ему реляционная база не нужна и подойдёт noSQL.

[sim3x]

Станислав Бодро́в, PostgreSQL is an object-relational database management system (ORDBMS)

Поведение настраиваемое

Приведите пример других опенсорсов

Какой именно noSQL требуется и чем придется пожертвовать?

[Станислав Бодро́в]

sim3x,

Приведите пример других опенсорсов

Firebird

Какой именно noSQL требуется

Не знаю. Их много всяких.

Answer 2

[ThunderCat]

в вашем случае что-то типа редис или тарантул, то есть отказаться от релятивистской модели и перейти на кейвалуе инмемори сторэйдж. в случае с тарантул емнип даже основные плюшки релэйшинов сохранятся.

Плюс - скорость и все плюшки кейвалуе.

Минус - кейвалуе и все похерится в случае факапа с выключением/перезагрузкой сервера сервера.

Answer 3

[danforth]

ClickHouse, учитывая что UPDATE/DELETE не будет, и ваш rate на запись/чтение.