Что такое попарное pairwise тестирование

Это метод проверки всех возможных дискретных комбинаций задействованных параметров. Аll-pairs testing — комбинаторный метод тестирование программного обеспечения, который проверяет все возможные дискретные комбинации параметров для каждой пары входных параметров системы. Исходя из этого, мы получим меньшее число комбинаций, чем при использовании ортогональных матриц. Pairwise testing — техника тест-дизайна, а именно метод обнаружения дефектов с использованием комбинационного метода из двух тестовых случаев. Он основан на наблюдениях о том, что большинство дефектов вызвано взаимодействием не более двух факторов (дефекты, которые возникают при взаимодействии трех и более факторов, как правило менее критичны). Следовательно, выбирается пара двух тестовых параметров, и все возможные пары этих двух параметров отправляются в качестве входных параметров для тестирования.

Значения текстового поля можно сократить до трех входных данных (действительное целое число, недействительное целое число, специальный символ альфа). Теперь идея состоит в том, чтобы уменьшить количество тестовых случаев. Сначала попробуем выяснить количество случаев, используя обычную методику тестирования программного обеспечения.

Результат парного тестирования

Например, один человек отвечает за непосредственно тестирование, а другой за анализ проведенных действий, и также он в какой-то мере контролирует/направляет действия первого. А здесь речь пойдёт о нетривиальной методике тестирования, когда формируется пара сотрудников ИТ-компании, которые садятся за один стол и проводят сеанс совместного тестирования, или тестовую сессию. Парное тестирование, хоть и эффективное в большинстве ситуаций, имеет некоторые недостатки. Во-первых, этот метод не подходит для тестирования взаимодействия более чем двух параметров.

Суммируя все вышесказанное, pairwise testing — прекрасный метод для повышения эффективности написания тест-кейсов. Он значительно сокращает количество комбинаций, которые будут покрыты, но остается очень хорошим с точки зрения обнаружения неисправностей. Одно из основных преимуществ pairwise тестирования заключается в его эффективности. Согласно исследованиям, большинство ошибок в программном обеспечении обычно находятся в пределах взаимодействия двух компонентов. То есть, pairwise тестирование позволяет выявить значительное количество ошибок, используя меньшее количество тестовых случаев, по сравнению с более сложными комбинациями. Однако нужно тщательно создать необходимую вам Модель, чтобы тестовое покрытие было удовлетворительным.

Тестирование с помощью ортогональных матриц

Ортогональные матрицы применяются в конфигурационном, регрессионном, производительном, а так же в тестировании пользовательского интерфейса. В крупных корпорациях руководители высшего и среднего звена консервативны и вряд ли будут спешить внедрять непроверенные практики. Менеджеры могут счесть, что такая практика как парное тестирование слишком сложная, и слишком зависит от софт-скиллов участников пары. Тогда сессия парного тестирования сэкономит много времени и усилий команды.

• Товарищеские чувства и постоянная обратная связь по процессу тестирования, которая необходима для координации действий в паре, улучшает климат на рабочем месте.
• Подключение разработчика позволяет тестировщику получить более квалифицированный инсайт, особенно что касается технических подробностей, это помогает тестировщику лучше понять подходы разработчиков при создании этого софта.
• Попарное тестирование — это одна из техник тест-дизайна, основанная на комбинаторике и разделению входных параметров «по парам» (почему и называется pairwise testing).
• Согласуйте таймлайн — сколько времени участники должны посвятить этому не самому простому занятию, которое их скорее всего утомит.
• Тестировщик должен четко понимать конечные цели сессии и ожидаемые результаты, не отклоняться от запланированных целей и не терять время на что-то несущественное.
• Если вы сидите рядом с кем-то, и этот кто-то играет ведущую роль в ваших диалогах в течение сессии тестирования – то это что угодно, только не парное тестирование.

Попарное тестирование — это одна из техник тест-дизайна, основанная на комбинаторике и разделению входных параметров «по парам» (почему и называется pairwise testing). Проводится комбинирование вариантов и подбор нужных, то есть оцениваются все возможные комбинации (сочетания) входных переменных, и из них выбираются только нужные (значимые). Техника основана на том, что 99,9…% дефектов возникают при взаимодействии не более двух факторов одновременно. Такое тестирование будет малоэффективным и потребует большое количество ресурсов. Вот здесь на помощь приходит техника попарного тестирования, которая позволяет сократить количество тестов во много раз.

ЛУЧШИХ ВОПРОСОВ И ОТВЕТОВ НА ИНТЕРВЬЮ О ТЕСТИРОВАНИИ ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ

Точнее результат выполнения теста напрямую зависит от того, какие комбинации данных будут подаваться на входе. Эту технику полезно применять тогда, когда нам не нужны все возможные сочетания значений параметров (особенно когда параметров много), а мы хотим только убедиться, что мы проверим все уникальные пары значений параметров. Давайте возьмем в качестве примера парное тестирование (Pair Testing) популярную классическую игру Super Mario, у нас так много параметров для работы. Мы можем начать с персонажа Марио — Луиджи, у нас есть положительный сценарий прыжка через черепах и отрицательный сценарий падения от удара черепахи. Вы можете видеть, как эти X, L, 5 повторяются, поэтому мы удаляем эти тестовые случаи, чтобы ввести уникальные комбинации.

Вот как метод парного тестирования сокращает количество тестовых случаев без ущерба для тестового покрытия. Парное тестирование — это метод тестирования черного ящика, в котором тестовые примеры разрабатываются таким образом, что мы охватываем все возможные комбинации входных данных. Он основан на наблюдении, что большинство дефектов возникает при взаимодействии двух значений. Поэтому мы используем входные комбинации для лучшего покрытия тестами. ISTQB определяет попарное тестирование как технику тест-дизайна методом черного ящика, при которой тест-кейсы создаются таким образом, чтобы выполнить все возможные отдельные комбинации каждой пары входных параметров.

Примечания[править править код]

Парное тестирование, также известное как Тестирование всех пар, – это подход к тестированию программного обеспечения с использованием комбинаторного метода. Это метод для проверки всех возможных дискретных комбинаций параметров. Техника попарного тестирования помогает существенно уменьшить количество комбинаций проверок, достаточных для обеспечения необходимого уровня качества программного обеспечения.

Методика является как бы «продолжением и дополнением» парного программирования, когда два разработчика пишут код, сидя за одним компьютером. Применение попарного тестирования обеспечивает оптимальное соотношение стоимости и качества. Это означает, что использование попарного тестирования позволяет достигнуть высокого уровня качества программного обеспечения с меньшими затратами по сравнению с другими методами. При выборе метода тестирования важно понимать, почему именно попарное тестирование так популярно и почему другие методы, как, например, тройное или более сложные комбинации, не применяются так широко. Эта техника используется, когда нам необходимо комбинировать очень много различный вариантов входных данных. Цель ее состоит в том, чтобы сократить количество полученных тестов, но при этом сохранить качественное покрытие.

Удалённое (дистанционное) парное программирование[править править код]

Все это нужно расшарить участникам пары, при необходимости включив в ET-хартию также требования, user stories, дизайны, и другие тестовые артефакты. Итак, парное тестирование убирает невидимые барьеры, и этим помогает улучшить качество софта и создать более продуктивную атмосферу в департаменте/компании. Ее стоит использовать в том случае, когда входные данные связаны друг с другом.

Метод попарного тестирования

Три значения в столбце «Марка авто» (переменная с наибольшим количеством значений) напишем дважды каждое (потому что следующая переменная, «Категория заказа», содержит два значения. Тестировщик управляет мышью и клавиатурой, пишет и выполняет тесты. Разработчик надзирает и руководит процессом, задает вопросы, дает подсказки, предлагает идеи по дизайну, и фиксирует текущие результаты сессии. Данная техника тест-дизайна относится к статическим способам тестирование и используется в том случае, когда мы имеем дело с большим количеством входных данных, следовательно, исчерпывающие тестирование является недостижимым.