Как эффективно восстанавливаться к снапшоту?

Question

[Shicoonn]

У нас есть виртуальные машины, которым необходимо откатывать к снапшоту N. На данный момент мы работает с qemu и выполняем эту задачу используя libvirt. Откат происходит при помощи вызова функции virDomainRevertToSnapshot, данная функция является блокирующей. В нашем проекте возможна ситуация, когда необходимо откатить к снапшоту более 10 виртуальных машин одновременно, вопрос как эффективнее это делать не теряя производительность и не блокировать поток пользовательского ввода?

Answer 1

[Армянское Радио]

1) Хранить образы в хранилище с механизмом COW (ceph, ocfs2, btrfs, zfs)
2) вместо отката к снапшоту просто создавать новый образ на базе нужного снапшота, а старый образ - стирать.

Первое и второе вместе дают возможность клонировать машины сотнями в секунду.

Comments

[Shicoonn]

Это не будет создавать дополнительную нагрузку на жесткий диск?

П.С.
Функции создания новой виртуальной машины, все равно являются блокирующими, и пользовательский поток будет заблокирован, а создавать отдельные потоки на каждую виртуальную машину не является оптимальным и только хуже должно сказаться на производительности.

[Армянское Радио]

Shicoonn, виртуальная машина создается за секунды, максимум, десятки секунд.

а создавать отдельные потоки на каждую виртуальную машину не является оптимальным

По какому критерию?

[Shicoonn]

Армянское Радио, на нашем стенде создание виртуальной машины занимает от секунды до 30 секунд в зависимости от нагрузки жесткого диска.

По критерию производительности, система будет тратить полезное время на смену контекста. Нужно ещё учитывать что у CPU ограниченное число потоков.

[Армянское Радио]

Это имеет смысл, если вы занимаетесь интенсивными вычислениями. В случае управления ВМ, потоки будут в основном стоять на дисковых операциях.
При таких масштабах работы, у вас должен быть не жесткий диск, а дисковый массив или даже кластер хранения.

Ну и учтите, что Docker разворачивается за миллисекунды. Возможно, вам стоит пересмотреть архитектуру или требования, потому что сейчас ваш вопрос похож на это

[Shicoonn]

У нас нету возможности использовать Docker(виртуальные машины могут относиться не только к unix подобным), главная проблема что функция virDomainRevertToSnapshot, является блокирующей, она будет блокировать главный поток. Вопрос в том, как можно выполнять эту функцию асинхронно или создавать задание на откат виртуальной машины, а затем получать возвращаемое значение это функции.

[Армянское Радио]

Shicoonn, Вызывайте функцию в мультитреде

[Евгений Шатунов]

Shicoonn,

а создавать отдельные потоки на каждую виртуальную машину не является оптимальным и только хуже должно сказаться на производительности.

А не надо создавать потоки без точного понимания их сути [Ошибка 11]. Посмотри на парадигму Thread Pool, посмотри на Taskflow, посмотри на парадигму Actor Model.

Управляя потоками данных, а не потоками исполнения, ты можешь добиться лучшей производительности именно в области данных за счет снижения простоя в исполнении.