BDD для Javascript под Windows

Question

[veontomo]

Не думал, что это такая проблема, но не могу найти среду для тестирования (BDD или acceptance test) своего приложения. Хотелось бы:
1. чтобы тесты можно было писать на javascript (для php использую PHPUnit c Behat/Mink, для Ruby - Cucumber),
2. чтобы работало под Windows без танцев с бубнами,
3. чтобы инструменты не были устаревшими на момент написания этого вопроса.

Для TDD использую Jasmine, который в связке с Cucumber.js и Zombie позволяют писать BDD тесты типа

When I open page www.toster.ru
Then I should see answer on my question

Проблема в том, что установить Zombie под Windows почти невозможно, что и признают его авторы.
Другие средства (из тех, что видел) дают возможность лишь тестирования классов/функций, но не имитируют поведение пользователя, как это, например, возможно в Behat или Cucumber.

Собственно, вопрос: знаете ли вы какую-нибудь программу, которая бы удовлетворяла требованиям 1-3?

Answer 1

[magic_ball]

Посмотри на mocha. Сейчас это самый популярный и удобный фреймворк для тестирования js приложений. Замечательно подходит как для client так и для server side.

Поддерживает BDD интерфейс для написания тестов visionmedia.github.io/mocha/#interfaces

Насчет windows на 100% утверждать не могу, не работаю с ним, но у коллег проблем не возникало.

Также советую при выборе моки взять полный стек смежных с ней фреймворков:
mocha - непосредственно для тестов
chai - assertion framework для mocha, позволит использовать все многообразие BDD проверок chaijs.com/api/bdd
sinonjs если необходимы моки для ajax запросв
grunt и плагин для mocka чтобы облегчить запуск тестов, с плагином grunt-contrib-watch позволит автоматически перезапускать тесты при любом изменении js файлов и/или тестов
и karma или testem для запуска тестов сразу в нескольких браузерах

Comments

[veontomo]

Спасибо за ответ! Я присматривался к Mocha, но то ли я чего-то не понимаю, либо там не различают BDD и TDD и иногда второе называют первым, если вдруг тесты выполняются в браузере.
Например, фрагменты тестов с сайта Mocha:
__BDD__
describe('Array', function(){
describe('#indexOf()', function(){
it('should return -1 when not present', function(){
[1,2,3].indexOf(4).should.equal(-1);
});
});
});

__TDD__
suite('Array', function(){
suite('#indexOf()', function(){
test('should return -1 when not present', function(){
assert.equal(-1, [1,2,3].indexOf(4));
});
});
});
Какова принципиальная разница между этими тестами? Почему один из них BDD, а второй TDD? Как по мне, они оба TDD.

В моем понимании, для BDD браузер используется для имитации действий пользователя: т.е. зайти на сайт, заполнить форму, нажать ОК и убедиться, что на выходе требуемый результат. В Mocha я такой возможности не заметил. Если она ускользнула от меня, дайте мне знать, пожалуйста.

[magic_ball]

Разные уровни абстракции. Можно выделить минимум 3 типа тестов:
1. модульные (они же unit) тесты
2. интеграционные - когда несколько модулей (unit'ов) тестируются вместе
3. функциональные - проверяется взаимодействие всех частей системы, полностью имитируются действия пользователя.

BDD не накладывает ограничений на типы тестирования в которых может использоваться. Я описал инструменты для unit и интеграционного тестирования. Более высокоуровневые инструменты js не сможет вам дать сейчас. Как минимум из-за ограничений браузеров. Хороший пример это история selenium - первая версия была написана на чистом js (сервер на java, а клиент на чистом js). Во второй версии selenium отказались от этой идеи и перешли к нативным драйверам для каждого браузера. Как раз из-за ограничений js. Погуглите например назличия в upload file в первом и втором селениумах.

Для имитаций действий пользователя Вы вполне сможете использовать selenium и ранить его через тот-же phpunit.

Ну и пару слов за BDD
BDD - это набор принципов, а не жестких требований, относящихся к стилю оформления тестов. Что еще интереснее - он основан на TDD en.wikipedia.org/wiki/Behavior-driven_development

BDD не накладывает ограничений на типы тестов в которых может примен и подходит для любой группы тестов.
TDD же в свою очередь также не накладывает ограничений на типы тестов. TDD лишь требует сперва писать тесты, а потом код. Поэтому если вы сперва пишете код - это не TDD, а просто тестирование :)

[veontomo]

Наверное, я поспешил с заявлением, что в Mocha нет BDD - я его нашел, с вашей подачи. Забавно, что для этого надо использовать Zombie, которое под Windows 8 x64 не устанавливается.
По поводу BDD: конечно, он тесно связан с TDD. Это своего рода проверка того, что приложение работает так, как задумано. В моем понимании, BDD = функциональный тест.

Answer 2

[fufnf]

Мы у себя используем связку selenium и модулей node.js: cucumber.js + webdriver.io

Answer 3

[hellboy1981]

1) Когда нужно писать спецификации .feature от cucumber.js?
2) Если используется mocha с BDD интерфейсом, то потребность в cucumber отпадает?
3) Какие тогда преимущества у cucumber перед mocha?