Стратегия тестирования представляет собой описание общего подхода к тестированию и целей тестирования. Различают несколько уровней (компонент, интеграция и система в целом) и видов (функции, производительность, нагрузка, отказоустойчивость) тестирования.

В состав стратегии входят:

• Технологии и инструменты тестирования.
• Условия завершения и успешного выполнения тестов. Например, можно решить, что после успешного выполнения 95% тестов можно перейти к приемке продукта. Другим примером условия может служить охват кода. Например, в системах безопасности может требоваться стопроцентный охват кода при тестировании.
• Особые обстоятельства, влияющие на требования к ресурсам и график тестирования, например:

В некоторых организациях применяются корпоративные стратегии тестирования, и в этих случаях необходимо адаптировать эти стратегии к конкретным проектам.

Важнейшие обстоятельства для планирования тестирования:

• Какая итерация выполняется в данный момент и каковы ее цели?
• Какой уровень тестирования выполняется в данный момент (тестирование компонентов, интеграции или системы в целом)? Иногда все три уровня выполняются в ходе одной итерации.

Обратите внимание на то, как могут меняться характеристики задач тестирования в зависимости от того, на каком этапе находится тестирование с точки зрения указанных выше параметров. Существует много важных характеристик, например, объем необходимых ресурсов и затраченное время, но в данном случае нужно сконцентрироваться на важнейших факторах с точки зрения разработки стратегии тестирования:

• типы тестов (функциональные тесты, тесты под нагрузкой, тесты объема, производительности, удобства работы, распределения и т.д.)
• критерии оценки результатов (охват кода, охват требований, количество обнаруженных ошибок, средняя продолжительность бесперебойной работы и т.п.)
• применяемые технологии тестирования (автоматического тестирования и тестирования вручную)

Не существует единого шаблона распределения тестов по циклам тестирования. Типы тестов зависят от количества итераций, размера итерации и типа проекта.

При тестировании центральное внимание уделяется охвату всех требований, подлежащих тестированию, то есть выполнению всех предусмотренных тестов. Это значит, что критерии завершения тестирования обычно привязаны к количественному охвату множества тестов, каждый из которых, в свою очередь, напрямую связан с каким-либо требованием. При тестировании компонентов и интеграции удобнее пользоваться критериями завершения на основе охвата кода. На следующем рисунке проиллюстрировано изменение этих двух критериев охвата на разных этапах итерационного процесса разработки программного обеспечения.

• План тестирования должен содержать наборы критериев завершения тестирования для тестирования компонентов, интеграции и системы в целом.
• Для разных итераций могут быть определены разные наборы критериев завершения.

Постарайтесь автоматизировать как можно больше тестов, особенно тех, что выполняются несколько раз (в рамках регрессионного тестирования). Помните о том, что создание и обслуживание автоматизированных тестов требует определенных ресурсов и затрат. В каждом проекте определенный объем тестирования выполняется вручную. На следующем рисунке приведены примеры ситуаций и этапов тестирования, на которых может потребоваться выполнение тестов вручную.

Пример

В следующих таблицах показаны различные типы тестов и примеры условий завершения тестирования. В первой таблице показан типичный пример проекта по разработке управленческой информационной системы.

Во второй таблице показаны типы тестов и критерии завершения для типичной системы безопасности.