Тестирование ПО

[DeKa]

В процессе работы возникла следующая проблема: разрабатываемых продуктов становится все больше и больше, да и глюков в них хватает. Исправления глюков ведут к тому, что программу надо заново обкатывать, а это не один день труда тестеров. Поэтому возникает законным вопрос: как процесс тестирования автоматизировать. Сразу хочу предупредить, что Unit Tests здесь не очень подходят. Разрабатываемое ПО является приложениями для CAD-систем. Т.е. при ручном тестировании все проходит через пользовательский интерфейс CAD-системы. Поэтому интересует есть ли хороший софт, позволяющий автоматизировать процесс тестирования через пользовательский интерфейс (Как узнавать прошел тест или нет? На экране должна получится трехмерная модель...). Попробовали Rational Robot - но как-то он не очень хорошо справляется. Возможно есть люди, которые уже сталкивались с такими проблемами - подскажите что еще есть. Заранее спасибо.

[Sommer]

я не знаю че ткое пользовательский интерфейс CAD системы
я занимался например автоматизацией ручного тестирования сотовых телефонов через АТ команды на java

давай подробнее?
я целый год занимался тестированием.... может чем и помогу..

[DeKa]

На самом деле, все очень просто - на экране трехмерная модель какой-нибудь детали. Есть менюшки, тулбары, возможно диалог. При некоторых действиях пользователя (нажатие на пункт меню, кнопку на диалоге и пр.) деталь меняется. Например появляется новый выступ или вырезается канавка и что-нибудь еще происходит. Т.е. при тестировании необходимо один раз записать некоторую последовательность действий (нажатий на кнопки, ввод значений в EditBox-ы), а потом автоматически повторять ее каждый раз, как мне захочется проверить работоспособность. И надо сравнивать результат с заданным (самый простой способ - сравнивать заданные участки экрана. Если они идентичны образцам, то тест пройден).
Еще интересует вопрос, что можно использовать в качестве системы ведения списка ошибок. Основные требования: ведение нескольких проектов, направление ошибки на исправление конкретному человеку (группе), возможность видеть все ошибки, адресованные лично мне и моей группе, текстовые описания ошибок и прикрепленные файлы (демо ошибки), статусы ошибок, логи (кто ошибку зарегестрировал, кто присвоил ей статус и т.д.)

[darkelf]

в таких CAD системах как AUTOCAD, есть встроенный скриптовый язык, в случае AUTOCAD-а - autolisp. При помощи его, я думаю, можно, в том числе, и тестирование реализовать.

[npak]

Не сочтите за рекламу,

но наша группа занимается разработкой коммерческих инструментов тестирования.  Предназначены они в основном для тестирования API, но можно заточить для тестирования GUI.  информацию можно получить на www.unitesk.com

В принципе, вашу задачу можно решить средствами наших инструментов, надо только её несколько иначе сформулировать.  Я сейчас должен идти, поэтому обрываю "на полуслове".  Если вам интересно, можно далее обсудить здесь, в форуме, или по почте.

[Anonymous]

darkelf, Во-первых в работе используется не только Autocad, но и другие CAD-системы. А еще желательно тестировать снаружи системы, а не изнутри. Тем более, что в большинстве систем такой возможности нет.

npak, Естесственно, заказывать вам разработку мы не будем. Сейчас мы используем Rational Robot, Rational TestManager, но они не всегда удобны, и приходится повозится, чтобы создать тест. А тестов надо много. Вопрос стоит в том, существуют ли какие-нибудь готовые системы, позволящие решать вышеописанные задачи.

И еще хотелось бы узнать, какие системы ведения списка багов вы используете?