Отчёты по Тестам

Отчёты по Тестам (здесь и далее по тексту -- Лектио) -- это часть урока Документы Тестов. В Брацкой Школе, уроки делятся на так называемые лектио, каждое из которых состоит из микролекции и одного или нескольких заключительных вопросов. Урок, в свою очередь, относится к практическому семинару Выбор Профессии.

Материалы

Предшественник этого Лектио -- Атрибуты Сценариев.

Текст

Отчёты по Тестам

Тесты не созданы одинаковыми, равно как и отчёты по ним.

Функциональные тесты, типично, хорошо детализованы. Прогонка каждого сценария функционального теста даёт один из трёх итогов:

1. Тест положителен, то есть фактический результат соответствует ожидаемому.
2. Тест отрицателен, то есть фактический результат отличается от ожидаемого.
3. Тест прерван, то есть выполнение теста заблокировано в процессе тестирования и тест не окончен.

Любой фактический результат, который не соответствует ожидаемому, свидетельствует об ошибке.

Соответственно, отчёт по функциональному тесту может состоять из одного слова, "положительный" или "отрицательный". Если проверяемый функционал продемонстрировал код ошибки, то этот код должен быть включен в отчёт. Для прерванного теста предпочтительно описать, на каком шаге тест был заблокирован, что происходило перед блокировкой и во время её. Описание всегда хорошо дополнить изображением, например, снимком экрана.

Напротив, сценарии юзабилити-тестов редко детализованы глубоко. Возьмём такой сценарий:

Записывая видео экрана компьютера, на таком-то веб-сайте найти такие-то данные и сообщить о каждом месте, где чувствовалось некомфортно, путано или начиналось думать, что делать дальше.

Ожидаемый результат этого теста -- это нахождение или ненахождение определённых данных. Однако для отчёта более важно видео экрана и описание опыта тестировщика. Квалифицированный тестировщик, скорее всего, воспользуется хронологией видео для идентификации каждого некомфортного места. Описание каждого места начнётся с отметки на временной шкале и веб-адреса страницы.

Исследовательские тесты предпринимаются для нахождения и проверки идей. Их отчёты должны включать изложение этих идей и итогов их проверок.

Вне зависимости от типа теста, для описания любого неожиданного случая задействуется следующий формат:

1. Что было сделано и что ожидалось получить.
2. Что получено, в каком месте или веб-странице это получено, когда это получено, желательно с приложением изображений.
3. Что предполагается сделать для устранения пробела между тем, что ожидалось и тем, что получилось.

Термины

Требования, Тестовый Пример, Юзабилити-тестирование, Регрессионное Тестирование, Прогрессивное Тестирование

Вопрос(ы)

Судя по прочитанному тексту выше: Регрессионное тестирование вполне возможно для Юзабилити-Тестирования. -- Ложь\Правда

Следующее лектио -- Проверка и Приёмка