Нужен практический совет по автоматизации тестирования

Question

[Stanislav Sultanov]

Имеется система:

• Множество разнообразных приложений на сервере (планируется постоянное пополнение)
• Kлиент (две версии — java и web/flash), через который пользователь запускает приложения и управляет ими

Задача:

Найти оптимальный (быстрый и надёжный) способ автоматизации процесса тестирования.
Тестируется каждое приложение (грубо говоря, запускается через обе версии клиента и проверяется).
При добавлении нового приложения (одного или сразу десятка) нужно быстро и качественно тестировать их поведение при использовании обоих клиентов. Цель — поведение приложения при запуске через клиент должно быть идентичным (по возможности) его поведению при обычном запуске.

Прошу совета на основе опыта — какие инструменты наиболее практичны и эффективны для такой задачи?
Как лучше организовать работу?

Update: Вопрос касается как конкретных используемых инструментов, так и опыта по организации такого дела.
Если кто-то похожее делал, напишите 2-3 слова, как организовывали это дело. Заранее спасибо!

Answer 1

[cheaTTer]

Берусь посоветоваь:

1. Написать тесты для регрессионого тестирования (ибо автоматизировать такие тесты наиболее практично). Но не все тесты на регресс годятся для автоматизации — выбираем или правим.

2. В качетве инструмента я бы посоветовал TestComplete (первая любовь все-таки :) ).

3. Быстрота и надежность зависит от Вашего потенциала и навыков. Лучше не возится самому, а найти единомышленников.

Comments

[Stanislav Sultanov]

спасибо за ответ!

1. Как я понимаю, никаких тестов там нет. Вообще. Их буду писать я — и для этого я должен доказать, что могу это придумать и организовать (и поначалу делать, если не станет ясно, что нужен ещё кто-то)
2. Спасибо. TestComplete платный, как я вижу… Trial на первое время будет работать? Чем он удобнее/лучше других?
3. Вначале буду я один (если возьмут). Дальше можно будет привлекать народ, если станет ясно, что толковое что-то выходит.

[cheaTTer]

Попробуйте использовать виртуальную машину для того чтобы не было проблем с триалом.
Установил ВМ, забэкапил.
Поставил на нее ТестКомплит.
Кончилось время — поднимаешь из бэкапа машину, опять ставишь ТестКомплит и копируешь исходиники.
Тест комплит можно найти энтерпрайз эдишн. Он без ограничений.

[Stanislav Sultanov]

попробую, спасибо