Насколько оправданно держать OpenVZ контейнеры на одинаковом шаблоне ОС?

Question

[Sanes]

Несколько раз слышал, что если держать контейнеры на одинаковом шаблоне ОС, то можно неплохо выиграть в памяти. Есть ли у кого практический опыт?

Comments

[Sanes]

Сергей Бронников: А мы подождем ребят из ISPsystem. Я думаю они запилят Vmmanager.
Цениик на Virtuozzo откровенно говоря, адский. Что-то мне подсказывает, его могут себе позволить компании с огромным парком или дорогими клиентами.

Answer 1

[landergate]

Чем больше RAM потребляют одинаковые процессы (включая системные) между контейнерами и чем больше таких контейнеров, тем выше будет плотность.

Если говорить о чистом OpenVZ, без Virtuozzo, то технология называется KSM (Kernel samepage merging). Доступа в ядре с версии 2.6.32. По умолчанию выключена.
Её можно использовать не только для OpenVZ.

Включить на гипервизоре можно через:
echo 1 > /sys/kernel/mm/ksm/run

Посмотреть эффективность:
cat /sys/kernel/mm/KSM/pages_sharing

Документация в контексте OpenVZ:
https://wiki.openvz.org/KSM_(kernel_same-page_merging)

Answer 2

[Пума Тайланд]

ну меньше чем на сто контейнеров мне кажется вообще особо нет смысла заморачиваться, да и то если вы выделяете контейнера очень мало оперативы, а если много то смысла особого и на сто контейнеров не особо, выигрыш будет мелкие проценты.

Comments

[Пума Тайланд]

lolhunter: дане будет там выигрыша 333 мегабайта на виртуалку.
покажите ка ваш cat /sys/kernel/mm/KSM/pages_sharing

Answer 3

[Lindon_cano]

Использование OpenVZ, в принципе, не осмысленно.
Поделие коммерческой конторки не умеющее работать с памятью. Зачем оно, при наличии нормальных контейнеров(lxc)?

Comments

[Sanes]

Покажите пожалуйста хостинг, где могу арендовать контейнер LXC?

[Пума Тайланд]

блин про lxc вы погорячились , это еще то поделие , смигрировал уже сотку контейнеров со старого опенвз, и реально даже старый опенвз мне уже кажется раем, настолько все адекватно в нем работало, если бы они не затянули с новой версией сидел бы я сейчас на опенвз новом.

[Lindon_cano]

Пума Тайланд: коллега, вот ваше мнение мне интересно, ваше мнение уважаю. В чем возникли проблемы в lxc? Учитывая, что OpenVZ вообще не умел нормально работать с памятью и нужно было постоянно что-то крутить в настройках, вот просто в режиме онлайн, а lxc работает и есть не просит, то что же вас так огорчили в lxc?

[Sanes]

Пума Тайланд: На Virtuozzo7 думаю начнется массовый переход, после того, как запилят вебморды. У нас ISPsystem, за бугром SolusVM. До конца года, как минимум можно расслабиться.

[Пума Тайланд]

Lindon_cano: ав чем не умел, уменя последние лет шесть он по большей части без нареканий работал.
ну как минимум lxc работает как гавно, когда образ системы хранится в файле, такой жести и подвоха яне ожидал от него.

[Sanes]

Пума Тайланд: А ploop разве не файл?

[Сергей Бронников]

Sanes: на самом деле люди уже начали переезжать на OpenVZ 7, а вебморда врядли будет для бесплатной версии.

[Sanes]

Сергей Бронников: А её и сейчас можно сказать нет.

[Сергей Бронников]

Sanes: есть контрольные панели для LinVirt (libvirt.org/apps.html#web) Или вот эта например https://github.com/retspen/webvirtmgr/ Ни одна не подошла?

[Sanes]

Сергей Бронников: И что, прям работает и пилить не надо?

[Сергей Бронников]

Sanes: чтобы ответить на ваш вопрос мне нужно как минимум знать, что вы вообще хотите от панели. Я пробовал только virt-manager (GUI) и webvirtmgr (WEBUI). Базовые операции с контейнерами и виртуальными машинами там есть и работают. Полагаю, что и другие UI для LibVirt тоже должны работать. Реализованные вызовы для драйвера virtuozzo можно посмотреть здесь - https://libvirt.org/hvsupport.html

[Sanes]

Sanes: Я знаю, что V7 поддерживает LibVirt. И что мы там видим? Правильно, Vmmanager.
libvirt.org/apps.html#web

[Sanes]

Сергей Бронников: Да собственно со всеми делами вполне справляется Vmmanager и цена адекватная.
Дело в том, что на сервере будут работать посторонние люди. Для себя я бы может и консолью обошелся или вовсе LXD посмотрел бы еще разок повнимательней.

[Сергей Бронников]

Sanes: а каноникал что предлагает для LXD в качестве управляющей панели?

[Sanes]

Сергей Бронников: Да тот же LibVirt вроде ну и дистрибутивы у них есть под OpenStack и Doсker с мордой. Jujuс Docker вроде работает, может и к LXD прилепят.
У LXD с разграничениями по ресурсам сильно лучше, чем у LXC. Но root в контейнере давать посторонним не рекомендуют.

[Юрий Чудновский]

Сергей Бронников: Не знаю про качую систему вы говорите в ключе "бесплатной вебморды скорее всего не будет", но я давно юзаю "OpenVZ Web Panel".

[Сергей Бронников]

Юрий Чудновский: я писал про OpenVZ 7. Там скорее всего работа "OpenVZ Web Panel" из-за несовместимости версий vzctl. AFAIK эта панель завязана на опции vzctl.

[Sanes]

Юрий Чудновский: Она сейчас без напильника по-локоть не устанавливается. По-крайней мере на Centos 6.6. Она и раньше не айс была в этом плане. Старенькая уже.
Дело даже не в бесплатности, а в адекватной стоимости. Vmmanager цена меньше 500 руб. Вроде нормально. Кстати ценник на 1 контейнер коммерческой Virtuozzo такой же. Если не покупать сразу контейнеровоз неимоверных размеров.

Answer 4

[Сергей Бронников]

Вообще такое имеет смысл только в том случае, если вы хотите иметь высокую плотность контейнеров на большом парке серверов. Потому что на одном сервере овчинка врядли будет стоить выделки.

Одним из решений проблемы расходования памяти при работе с контейнерами можно решить с помощью дедупликации памяти, которая расходуется на хранение бинарных файлов. Суть ее вот в чем: при создании нового контейнера рассчитывать хеш-сумму каждого бинарного файла в этом контейнере, при открытии бинарного файла Linux ядро сверяется с таблицей рассчитанных хеш-сумм и если такая же хеш-сумма присутствует в таблице, то используется уже открытый файл, а не открывается еще его одна копия. Это если на пальцах объяснять :)
Технология называется pfcache и была добавлена в Virtuozzo 6. В рамках OpenVZ 7 она не доступна.
Если интересует больше подробностей, то можно посмотреть слайды с LinuxCon www.slideshare.net/openvz/pfcache-linuxcon-2015.

Небезызвестный товарищ из хостиноговой компании пытался повторить эту технологию на OpenVZ и писал о своих результатах в блоге https://www.stableit.ru/2015/05/openvz-pfcache.html Возможно вам этот вариант подойдет, если нет денег на Virtuozzo.

Comments

[knutov]

У других не менее известных товарищей есть очень удачный опыт использования AUFS с одинаковым изначально шаблоном - все бинарники оказываются сразу в памяти только один раз. (правда в этом случае секонд юзер квоты приносятся в жертву, и возможно не совсем корректно считается используемая память).

[Сергей Бронников]

knutov: почему бы это не описать где-то, чтобы другие тоже могли настроить?

[knutov]

Сергей Бронников: они - видимо не хотят, а мы не стали даже пробовать повторять сетап из-за юзерских квот.

[Sanes]

knutov: Какой-то докер получается.