Ceph плюс docker swarm?

Question

[kolibomber]

Добрый день
У меня есть задача построить отказоустойчивый postgresql на docker swarm.
В качестве хранилища volume я пытаюсь использовать ceph кластер из 3х виртуалок.
Все более менее запускается.
Когда я проверяю падение одной из ceph нод у меня mount на машинах docker swarm зависает на 1-5 минут.
Это нормально поведение для cephfs? В логах я вижу переподключение к другим mon нодам.
Я то рассчитывал на обработку отказа в несколько секунд.
На gluster такое получилось.

Comments

[Армянское Радио]

А версия Ceph какая?

[kolibomber]

ceph version 15.2.5 (2c93eff00150f0cc5f106a559557a58d3d7b6f1f) octopus (stable)

[kolibomber]

Все три ноды указал. Мониторы на всех.

mount -t ceph 192.168.19.195:6789,192.168.19.46:6789,192.168.19.37:6789:/ /mnt -o name=foo,secret=AQAGY31fjForMRAAibFSAuPcIkshwtmFbXZ/XA==

Answer 1

[Армянское Радио]

Нет, поведение не нормальное, но кластер нужно строить иначе - такие задачи решатся на уровне постгреса.

Кроме того, ceph лучше всего ставить на реальное железо, виртуалки еще больше убивают его и так низкую производительность.

ну и три ноды - это очень мало.

По вашей проблеме - при маунте все мониторы указали?