Load/Stress/Performance test framework on ruby?

Question

[imps]

Уважаемые хабражители и жительницы, по работе пришлось столкнулся с таким вопросом: Существует ли фреймворк для нагрузочного тестирования, реализованный на Ruby(с условием, что этот фреймворк реализован не на ruby on rails, а именно на ruby)?


После непродолжительного исследования сложилось мнение, что таковых на данный момент не существует.

Comments

[imps]

UPD: на данный момент, единственное что удалось найти это Ruby Web Bench

[imps]

UPD2: так как найти подходящее решение не удалось, было решено написать самим

Answer 1

[mgyk]

А что именно тестировать?
Можно элементарно завернуть спеки в бенчмарк и получить тестирование перфоманса

describe Foo do
  context 'performance' do
  
    it 'takes time' do
      Benchmark.bm do |bm|
        bm.report("test1") {10000.times do;  do_something; end }
      end
    end
  end
end

Comments

[imps]

Можно конечно и бэнчмарком, но все таки хотелось бы делать это мультипоточно.
Тестировать нужно апликейшн сервер как со стороны апи, так и показатели перфоманса бэк-энда.

Цель выявить узкие места.

Answer 2

[sch1z0phr3n1a]

Чем обусловленно такое требование к языку?

Comments

[imps]

Весь фреймворк автоматизации реализован именно на нем.
Обусловленно экономией времени на изучение другого.

[sch1z0phr3n1a]

Я бы, все же, посоветовал не строить велосипеды, а воспользоваться профессиональными решениями для нагрузочного тестирования. В качестве нагрузочных приложений, посмотрите на или yandex-tank. В большинстве случаев, этими инструментами можно воспользоваться не написав вообще ни единой строчки кода.
>Весь фреймворк автоматизации реализован именно на нем.
Даже встроить что-то из apache jmeter или yandex-tank в свой фреймворк будет не так сложно как кажется, а в будущем избавит от ряда проблем, учитывая практически возможности этих инструментов.

Фреймворк для нагрузочного тестирования на ruby, уже, знаете ли, пахнет не хилым извращением=)

[Александр Маслов]

Фреймворк для нагрузочного тестирования на ruby, уже, знаете ли, пахнет не хилым извращением=)

И чем же python так лучше ruby для НТ? :)

[sch1z0phr3n1a]

Причем тут python? Apache JMeter написан на Java, phantom у yandex-tank написан на Си. На питоне написана только обертка.

[imps]

Знаете, все таки хотелось бы сначала убедиться в аргументах против Ruby, прежде чем от него отказываться.

[sch1z0phr3n1a]

Против руби аргументов нет. Ровно как и достойных инструментов на нем. На других же есть. Можете взять уже готовые решения, да на самом деле абсолютно любые, хоть ab или siege и сделать для них обертку на ruby в свой инструмент автоматизации тестирования. Но вы должны понимать, что руки у вас будут развязаны на столько, на сколько это разрешает инструмент. Любой фреймворк будет хуже проф. решений, по точности нагрузки, по фичам, по возможностям, стабильности и производительности работы. Хуже community. Я не думаю что этот список стоит продолжать. Выбор за вами. Если цель понять СЕЙЧАС тянем или нет, ну можете использовать фреймворк. Но что будете делать завтра, когда добавите новый функционал, который не вписывается в фреймворк? Что если упретесь в фреймворк? Вы уверены в нем? В стабильности, в точности? Если что-то сломается, есть community?

[imps]

Видимо выбор будет между собственной разработкой и готовым решением(не руби), жаль, именно этого я и опасался