Каким образом измерять производительность системы?

Question

[Vi]

Здравствуйте, подскажите каким образом измерять и сравнивать и собрирать статистику о работе программы или сервиса.

Например как сравнить на сколько виртуальная машина медленее чем реальная, как убедить что на одинакого сконфигурированой машине один и тот же скрип выполняется одинакого в течении 10 или 100 запусков.

Как по мне критей оценки должен быть количество тиков процессора (или что можете посоветовать)

Answer 1

[Армянское Радио]

Измерять в тиках процессора непрактично, тем более, что современные процессоры могут менять свою тактовую частоту по настроению.

Способ измерения производительности зависит от задачи и желаемого результата.

Один из наиболее универсальных подходов - измерение реального времени, за которое была выполнена определенная задача. Если задача выполняется слишком быстро - измерение времени многократного выполнения задачи.

К этому добавляются графики загрузки процессора, сети, дисковой подсистемы, занятости оперативной и виртуальной памяти.

Рассматривается вопрос наличия на графиках загрузки оборудования провалов и пиков, и плоских участков.

Плоский участок под 100% говорит о недостатке данного ресурса - система "упирается" в него.

Чередование провалов и пиков говорит о неоптимальном расходовании ресурса.

Идеальная вычислительная задача должна давать полную загрузку всех вычислительных ресурсов - это означает, что в системе нет ни избытка, ни недостатка вычислительной мощности.

Comments

[Vi]

Как в данном случае измерить предположим обработку статического фалй index.html веб-сервисом, в на виртаульной машине и на реальной, и между виртуальными и между реальными.

Но я пока по правде не знаю как такие измерения сделать, сможете подсказать?

[Армянское Радио]

Vi: Я вам сразу скажу - виртуальная машина окажется медленнее реальной примерно на 3%. Отдача статики - это не та задача, где нужно особо вдумыватсься. Она прекрасно распараллеливается и балансируется.

[Vi]

да я понимаю, что это не та задача, но я хотел бы увидеть это. вот вы ведь знаете это?! вот и я стал задаваться как это анализируется и подтверждается. Тк мне часто ктото чтото говорит, а я не могу проверить это или измерить.

Простой пример я предложил вынести shared hosting систему на виртуальную машину, сейчас он на реальной находится. Мне сразу сказали нет, отвечая что виртуальная машина медленее, я не мог ничего возразить, тк не знаю как это показать что эта медленость не особо мешает

[Vi]

Армянское Радио: Да и хотелось на сравнение разных виртаульных систем увидеть различия, предположим VirtualBox and KVM or QEMU or XEN

[Армянское Радио]

Vi: Если те, кто вам это сказал, прибыли из 2000 года - они правы. Машину времени только у них отберите. Современные виртуалки практически не отличаются от железа по скорости.

А про XEN забудьте как про страшный сон. Этот глюкодром со специальным ядром и шизоидным xenstore надо послать в топку.

Сейчас из серьезной виртуализации остается только KVM. Оракловый виртуалбокс, идет лесом, он не в состоянии PCI прокидывать, да и USB выше 1.0 у него работает только через проприетарный модуль - он представляет интерес только для дремучих казуалов.

Задача решается просто - на раз - вы развертываете вашу конфигурацию на реальном сервере и меряете, как я тут написал. На два - вы развертываете там же KVM и снова меряете. Если у вас получилось больше 3% разницы - вы идете читать мануалы.