amarao

`calculate_value()` со скобками - это вызов функции, а не использование функции как значения. В rv попадает то, что возвращает функция `calculate_value`. Что именно эта функция делает и что она возвращает можно понять одним из двух способов: 1) посмотреть на её исходный текст 2) в отладчике (например, pdb) дойти до этого места и сделать интроспекцию для `rv`, команды: dir(rv), type(rv), help(rv).

По поводу NameError - это означает, что функция не найдена. Она должна быть либо импортирована из модуля, либо написана, либо сконструирована динамически где-то в программе до первого своего вызова.

В линуксе самым очевидным индикатором утилизации дисков является flight_time. Если делать замеры каждую секунду, то разница между начальным и конечным значением покажет, сколько секунд в течение секунды диск был занят (значение обычно от нуля до 1).

Находится оно в /sys/block/sdX/device/stat (значение всех этих цифр - в Documentation исходников ядра).

На бытовом уровне - если блочных устройств мало, то просто atop (и дать секунд 11-12 отстояться) - и там будет показана утилизация диска.

Если блочных устройств много и они не влазят в вывод атопа, то я написал отдельно для себя простенький top по блочным устройствам https://github.com/amarao/blktop

Если нужно собирать эти метрики в автоматическом режиме, то обычно у соответствующих приложений (например, munin или ganglia) есть модули, которые эту информацию собирают.

Основное, над чем мы (Селектел) работали — повышение надёжности, увеличение свободы для виртуальной машины. Надеюсь, это заметно. Из минусов — были вынуждены ввести плату за IP, так что минимальный порог вхождения поднялся до ~120р за простаивающую 24/7 машину. Из плюсов — аварии на СХД прекратились.

Метаданные на отдельное устройство вынесите. А вообще, да, у drbd это известная особенность.

Общий совет по отладке зена и системных вещей:

1) Последовательный порт.
2) netconsole в линуксе. Позволит увидеть dmesg на живую. (вешать надо на интерфейс, а не на бридж, актуально для xen'а).

Ну, тут ситуация простая: либо вам логи нужны, либо нет. Если вас access не интересует, то просто отключите.

Для начала не использовать наиболее подверженные заражению ОС.

Умный ответ в стиле «отстаньте» — hadoop.

Если же думать как решить — если проблем с производительностью нет и 5Тб одним файлом устраивает, то надо просто использовать деревья для хранения индекса и обновлять индексы только на порцию пришедших данных.

Вот простейший пример индекса: ключ превращем в хеш (не важно как, либо 1-в-1, либо md5 от него и младшие биты), после этого делаем каталоги с именем первого байта хеша, в нём каталоги с вторым байтом и т.д., до тех пор, пока не остаётся что-то очень компактное. В момент добавления данных при их индексации просто обновляется маленькая порция тех кусочков индекса, которые поменялись.

Это решение «на коленке», если что-то крутое — смотрите в сторону специализированных баз данных.

Хотите иметь минимум пакетов? Ставьтесь с серверной netinst инсталляшки.

Ошибка где-то в ядре dom0 — видно по hunged tasks.

Рассказываю:

1) У FreeBSD были какие-то заморочки с паравиртуализацией.
2) Для FreeBSD нужны отдельные люди, которые её знают. Простейшая экономия ресурсов. Запросов на FreeBSD даже меньше, чем на windows.

Прописать его в interfaces как дополнительный ip. man interfaces.

Кстати, криво прописываете IP в своём примере.

Адекватная поддержка зена пояивлась в ванильном 3.0, так что лучше ставить 3.2 или старше. Более ранние версии плохо работали в xen без патчей.

google: NUMA

Нужно понимать, что если вы точно сами не знаете, что хотите, то это стоит больших денег, чем перечисление того, что вам нужно (что вы сами можете, но лениво).

У нас эта задача сугубо практическая — и решается она практическими методами — балансировкой и линейным ростом по мере роста нагрузки.

Всё равно вы не сможете предсказать, сколько хомячков захотят посмотреть на очередного 'kitten in the box' (http://www.youtube.com/watch?v=vdQj2ohqCBk).

man xargs

Точно параметры не помню, но примерно так:

ls -1|xargs -n 30 cp -d destignation

Ключевое — максимальное число аргументов за заход (-n) и -d для cp (позволяет поменять местами dest и src).

SD/microSD.

github.com/facebook/flashcache

Загружаете block ram disk (brd), используете его в качестве кеширующего устройства.

Если рубанёте питание без sync'а — потеряете содержимое карточки на 100%.