Отчёты по Тестам

Отчёты по Тестам (здесь и далее по тексту -- Лектио) -- это часть урока Документы Тестов. В Брацкой Школе, уроки делятся на так называемые лектио, каждое из которых состоит из микролекции и одного или нескольких заключительных вопросов. Урок, в свою очередь, относится к практическому семинару Выбор Профессии.

Материалы

Предшественник этого Лектио -- Атрибуты Сценариев.

Текст

Отчёты по Тестам

Тесты не созданы одинаковыми, равно как и отчёты по ним.

Функциональные тесты подразумевают детали. Их ожидаемые результаты измеримы и могут быть чётко выражены. Прогонка каждого сценария функционального теста даёт один из трёх итогов:

1. Тест положителен, то есть фактический результат соответствует ожидаемому.
2. Тест отрицателен когда факт отличается от ожидания.
3. Тест прерван, то есть выполнение теста заблокировано в процессе тестирования.

Любой фактический результат, который не соответствует ожидаемому, свидетельствует об ошибке. Соответственно, отчёт по положительному тесту может ограничиваться одним словом. Если проверяемый функционал продемонстрировал код ошибки, то этот код должен быть включен в отчёт. Для прерванного теста предпочтительно описать, на каком шаге тест был заблокирован, что происходило перед блокировкой и во время её. Описание дополнят изображения, например, снимки экрана.

Напротив, редкие итоги исследовательских и ролевых тестов поддаются измерению; они требуют описания. Отчёты исследовательских тестов излагают найденные идеи и итоги проверок этих идей. Отчёты ролевых тестов документируют обнаруженные проблемы и те шаги, которые привели к их обнаружению.

Возьмём такое задание на ролевое тестирование:

Записывая видео экрана компьютера, на таком-то веб-сайте найти такие-то данные и сообщить о каждом месте, где чувствовалось некомфортно, путано или начиналось думать, что делать дальше.

Ожидаемый результат этого теста -- это нахождение или не нахождение определённых данных. Однако для отчёта более важно видео экрана и описание опыта тестировщика. Квалифицированный тестировщик, скорее всего, воспользуется хронологией видео для идентификации каждого некомфортного места. Описание каждого места начнётся с отметки на временной шкале и веб-адреса страницы.

Вне зависимости от типа теста, для описания любого неожиданного случая задействуется следующий формат:

1. Что было сделано, и что ожидалось получить.
2. Что получено, в каком месте или веб-странице это получено, когда это получено, желательно с приложением изображений.
3. Что предполагается сделать для устранения пробела между тем, что ожидалось и тем, что получилось.

А теперь, выберите, пожалуйста, лучшее завершение следующего предложения. Судя по тексту выше, любой отчёт по тесту должен содержать:

Варианты

один из трёх итогов: положителен, отрицателен, прерван. / описания и изображения. / что сделано и что получено. / ожидаемый результат теста.

Следующее лектио -- Оценки и Замеры

Термины

Требования, Тестовый Пример, Юзабилити-тестирование, Регрессионное Тестирование, Прогрессивное Тестирование

Экзамен

Вопросы экзамена

Судя по прочитанному тексту выше: Регрессионное тестирование вполне возможно для Юзабилити-Тестирования. -- Ложь\Правда