Чем тестирование при помощи Test-complete лучше чем использование Auto-It или Python?

Question

[Дмитрий]

День добрый.

Мой уровень автоматизации тестирования где-то на уровне новичка.

Передо мною сейчас стоит вопрос об автоматизированном регрессионном тестировании, а впоследствии и стресс-тестировании для проверки следующего:

* Установки\Удалении MSI-пакетов от продуктов разрабатываемых компанией где «арбайтен»;
* Проверка GUI-интерфейса. Примерные операции: выбрать файл, посмотреть появился ли MessageBox или появилась ли надпись и др.;
* Проверка Консольных утиллит;

Просматривая информацию в инэте увидел что очень популярен на пост-советском пространстве Test-Complete, но меня коллеги убеждают в том что это не имеет смысла и Auto-It будет достаточно, тем более он вроде как бесплатен.

Возникает сабжевый вопрос: А чем конкретно применение Test-Complete будет лучше чем применение Auto-It или Python?

Answer 1

[pletinsky]

Во первых Test-Complete — дорогостоящий продукт.

1) поддерживает кросбраузерное веб тестирование (в том числе и html5).
2) поддерживает распредделенное тестирование на нескольких компьютерах.
3) поддерживает тестирование производительности.
4) поддерживает кроссязыковую интеграцию не привязывая к какому то скриптовому языку, на котором удобно писать сисадминам, но не профессионалам в разработке.
А вообще почитайте на их официальном сайте — там много чего интересного.

Auto-It — тулза для тестирования windows приложений, которая по моему практически потеряла актуальность с развитием Microsoft Automation Framework.
С ним работают только любители конкретно этого продукта, которые продают именно эти свои знания.

Забейте на инструменты. Они не так много тут решают. Реальные вопросы: как сделать так, чтобы тесты окупались, как сделать, чтобы они не требовали изменений при изменении продукта, как их встроить в рабочий процесс.
Вот их придется решать. И законченной теории тут нет — есть только армия любителей — которые считают что они что то умеют.
Так что просто делайте а не инструменты изучайте — и все придет с опытом.

Comments

[Дмитрий]

Спасибо большое за развернутый ответ.

>>>Забейте на инструменты
Не получится. Чем-то же надо забивать гвозди.

Таким образом пока должно хватить Auto-It, но стоит присмотреться к Microsoft Automation Framework все верно?

[pletinsky]

Да — вы правильно поняли.

Используйте конечно то, чего вам будет достаточно. Почему бы не Auto It.

Microsoft Automation Framework — это мощный базовый инструмент, но для того, чтобы с ним работать вам понадобится разработчик, чтобы создать на его базе прослойку к бизнес языку, на котором будут писаться тесты. Механизм довольно новый — скоро такие прослойки будут в интернете — но пока их еще нет. Но новые плюшки виндовса он конечно начинает поддерживать значительно раньше чем Auto It. Ну и вообще более полно поддерживает виндовс — все таки его придумали в Microsoft.

Auto It уже предоставляет язык общения — но это не бизнес язык, а какой то сисадминский скриптовый язык.
Может быть для совсем небольших продуктов это может быть удобно. Но для серьезного тестирования не подойдет, потому что его невозможно привязать к процессу формирования требований.

[Дмитрий]

Спасибо за Ваши мысли! ;)

Answer 2

[Андрей]

С TC не работал, только с AutoIT и python+webdriver.
АвтоИТа мне более чем хватало для выполнения простых действий.
питоном автоматизировал только веб — удобно.

вам TC может быть полезен только для 2 пункта, 1 и 3 решаются питоном или вообще встроенными средствами винды.

GUI-интерфейс — это веб-интерфейс, то и тут лучше взять питон+webdriver
если это десктоп, то или AutoIT, или TC — TC будет удобнее только тем, что там есть хорошие средства записи скриптов, в AutoIT придется все писать чисто руками.