Mysql отстает реплика или почему-то сервер работает очень медленно?

Виктор Таран, Вообщем то смотри. Вчера тока допер ночью...

dd if=/dev/zero of=/root/test bs=128k count=10k oflag=dsync ; rm -f /root/test
1342177280 bytes (1,3 GB, 1,2 GiB) copied, 107,936 s, 12,6 MB/s

dd if=/dev/zero of=/tmp/test1.img bs=1G count=1 oflag=dsync
1073741824 bytes (1,1 GB, 1,0 GiB) copied, 2,42738 s, 442 MB/s

То есть проблема появляется когда много мелких записей. 1 ядро проца под завязку. Теперь надо понять что сделать что бы решить этот вопрос...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Потестировал еще, если файл большой, то скорость великолепная

dd if=/dev/zero of=/tmp/test1.img bs=1G count=1 oflag=dsync
1073741824 bytes (1,1 GB, 1,0 GiB) copied, 2,42738 s, 442 MB/s

Походу трабл таки в нехватке прерываний... Можно как то распределить на несколько ядер их? Одно ядро загружено под завязку.
Решение от Fafhrd WriteThrough полностью решит трабл этот, но если можно подключить еще несколько ядер на обработку прерываний то почему бы нет, их там все равно куча свободных пока :)

Mysql отстает реплика или почему-то сервер работает очень медленно?

Ну так да, теперь уже не ищу, не спеша дошел до этого... Вот осталось понять где собака порылась, как то винт тупит и винт ли...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Виктор Таран, Так в первом же сообщении iotop. И остальный тесты в коментах...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Ну как же, на таком же железе на мастере скорость записи 180 мегабайт в секунду.
Для кластера хватает, что там апачи в нем крутяться и раскиданы по 3 сервакам, да и там кэшированы данные все для апачей вот и нет проблем....

Mysql отстает реплика или почему-то сервер работает очень медленно?

Да у меня все в локальной гигабитной сети. При установке innodb_flush_log_at_trx_commit=2 слейв очень быстро догнал мастера. Проблема в том что скорость записи диска 36MB/c...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Fafhrd Почитал, но это по сути то же самое, что я для мускуля сделал innodb_flush_log_at_trx_commit=2 . Штука вся в том, что на мастере(с тем же железом) стоит тот же WriteThrough и скорость записи 180MB/c, а тут 36MB/c. Что то не то, еще где то подвох.

Mysql отстает реплика или почему-то сервер работает очень медленно?

Fafhrd что то ничего подобного не нашел, заодно отрубил все опции экономии электропитания. Не помогло.

Протестировал диски smartctl -a -d megaraid,0 /dev/sda и тп, все впорядке...

megacli -LDInfo -Lall -aAll
                                     

Adapter 0 -- Virtual Drive Information:
Virtual Drive: 0 (Target Id: 0)
Name                :Volume0
RAID Level          : Primary-1, Secondary-0, RAID Level Qualifier-0
Size                : 893.25 GB
Sector Size         : 512
Is VD emulated      : Yes
Mirror Data         : 893.25 GB
State               : Optimal
Strip Size          : 256 KB
Number Of Drives per span:2
Span Depth          : 2
Default Cache Policy: WriteThrough, ReadAhead, Direct, No Write Cache if Bad BBU
Current Cache Policy: WriteThrough, ReadAhead, Direct, No Write Cache if Bad BBU
Default Access Policy: Read/Write
Current Access Policy: Read/Write
Disk Cache Policy   : Disk's Default
Encryption Type     : None
Bad Blocks Exist: No
PI type: No PI

Is VD Cached: No

Mysql отстает реплика или почему-то сервер работает очень медленно?

Не понял ничего...
Если про мускуль, мастер - мастер тоже можно схватить кучу подводных камней, я лучше ручками в случае сбоя переключу и спокойно восстановлю старый мастер...

Трабл в скорости диска, не хочет он писать быстрее 16 мегабайт в секунду. Что то где то зарезано, подозреваю что супермикро где то еще энергию экономит и не дает нормальной производительности для ssd дисков

Mysql отстает реплика или почему-то сервер работает очень медленно?

innodb_flush_log_at_trx_commit везде

Старый
1342177280 bytes (1,3 GB, 1,2 GiB) copied, 38,3443 s, 35,0 MB/s

Новый
1342177280 bytes (1,3 GB, 1,2 GiB) copied, 107,936 s, 12,6 MB/s

Да, явно трабл с записью... Как раз так примерно и отстает. Теперь осталось понять почему...

А вот еще тесты на мастере виртуалка 1342177280 bytes (1,3 GB, 1,2 GiB) copied, 11,1725 s, 120 MB/s
Корневая машинка 1342177280 байт (1,3 GB), 6,49072 c, 207 MB/c

А железо на теперешнем серваке где все медленно точно такое же как на мастере. Явно кто то тормозит запись (((...

innodb_flush_log_at_trx_commit на старом стоит 1. а значение 0 это помоему раз в секунду писать, тоже хорошо вообщем то...

Да вчера тоже подумал на баг, обновил убунту. В итоге упал там кластер consul+nomad. Просидел 2 часа, что то они со своим netplan намудрили. А у меня сервисы на определенный ипишник биндятся. Пришлось выкинуть его нафиг :). Получился почти старый добрый дебиан :)...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Новый 10.1.40-MariaDB-0ubuntu0.18.04.1. Старый 10.0.34-MariaDB-0ubuntu0.16.04.1 та же версия и на мастере. Конфиг тот же...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Сделал innodb_flush_log_at_trx_commit = 2 . Задержка в 4 часа рассосалась за 10 минут. Оно и понятно, что в диск упирается но почему на виртуалках такого нет? Может потом что там запись на железный диск тоже через таймаут идет, а не непрерывно?

Посмотрел количество запросов на изменение данных, где то в районе 200 запросов в секунду...

Mysql отстает реплика или почему-то сервер работает очень медленно?

Вот потестировал скорость еще так:

hdparm -Tt /dev/sda
/dev/sda:
 Timing cached reads:   22230 MB in  1.99 seconds = 11178.21 MB/sec
 Timing buffered disk reads: 1608 MB in  3.00 seconds = 535.62 MB/sec
root@epsilon:/home/kiran# dd if=/dev/zero of=/root/test bs=128k count=10k
10240+0 records in
10240+0 records out
1342177280 bytes (1,3 GB, 1,2 GiB) copied, 0,871777 s, 1,5 GB/s

Результат хороший вроде.

Как правильно делать запрос в graphql с использованием параметров по Ajax?

Фуф это что то совсем сложное :).

На самом деле в доке я вижу пример

query FetchUserByID($id: String)
{
    user(id: $id) {
        id
        email
    }
}

что такое FetchUserByID не ясно, а так же он ругается Variable "$id" is never used in operation "FetchUserByID"

Как правильно делать запрос в graphql с использованием параметров по Ajax?

Дмитрий Шицков, Спасибо. я наткнулся на использование
variables. Но не могу понять как на серверной части это настроить, готовых примеров не вижу (.

Как правильно делать запрос в graphql с использованием параметров по Ajax?

Дмитрий Шицков, Спасибо у меня vuejs . Щас погляжу какой то плагинчик есть вроде

Как правильно делать запрос в graphql с использованием параметров по Ajax?

Дмитрий Шицков, А какую библиотеку использовать? Что то я погуглил но не понял толком ничего :).

Нужна ли PTR запись для отправки почты если я использую SPF/DKIM?

Спасибо!

Нужна ли PTR запись для отправки почты если я использую SPF/DKIM?

Тоесть не важно какие они будут? В смысле будут отличаться от основного домена...

Как в nomad передать каталог с конфигурацией для задачи?

Ну это да :).