8. Тестовая комбинаторика

Question 1

Комбинаторные техники или комбинаторное тестирование (combinatorial testing) -

Answer 1

Cпособ выбрать подходящий набор комбинаций тестовых данных для достижения установленного уровня тестового покрытия в случае, когда проверка всех возможных наборов значений тестовых данных невозможна за имеющееся время.

Question 2

Тестовые наборы формируются следующим образом (3):

Answer 2

1. Определяется перечень атрибутов тестируемой функции
2. Для каждого атрибута выписываются все его значения
3. Составляется таблица, в которую нужно выписать все взаимные сочетания значений
   атрибутов тестируемой функции. Это будет полный перечень тестов.

Question 3

Test Suite -

Answer 3

Это комплект тест-кейсов, отобранных для
какой-либо цели, например, для проведения дымового (приёмочного) тестирования.

Question 4

Тестовый набор (комбинация) -

Answer 4

Это сочетание значений для
проведения проверки атрибутов тестируемой функции. Тест-кейс может состоять из тестовых наборов.

Question 5

Негативное тестирование (negative testing, invalid testing) -

Answer 5

Направлено на исследование работы
приложения в ситуациях, когда с ним выполняются (некорректные) операции и/или используются данные, потенциально приводящие к ошибкам. Не надо объединять!

Question 6

Позитивное тестирование (positive testing) -

Answer 6

Направлено на исследование приложения в ситуации, когда все действия выполняются строго по инструкции без каких бы то ни было ошибок, отклонений, ввода неверных данных и т. д. Можно объединять!

Question 7

Исследовательское тестирование (exploratory testing) —

Answer 7

Частично формализованный подход, в
рамках которого тестировщик выполняет работу с приложением по выбранному сценарию, который, в свою очередь, дорабатывается в процессе выполнения с целью более полного исследования
приложения (session-based testing,

Question 8

Session-based testing -

Answer 8

Is a software testing approach where test activities are structured into sessions, which are fixed-duration, uninterrupted periods dedicated to testing

Question 9

Комбинаторные техники (5):

Answer 9

● техника минимальных проверок (Each Choice Testing);
● техника перебора всех значений (All combination testing);
● техника атомарных проверок (Base choice testing);
● попарное тестирование (Pairwise testing);
● метод взаимосвязанных проверок (Cause Effect Graphing).

Question 10

Минимальные проверки (тестирование с выбором значений-представителей, each choice testing) -

Answer 10

Тестирование, при котором по одному значению из каждого набора тестовых данных должно быть использовано хотя бы в одном тест-кейсе.

Question 11

Перебор значений (тестирование всех комбинаций, all combinations testing) -

Answer 11

Тестирование всех возможных комбинаций всех значений всех тестовых данных (например, всех параметров функции).

Question 12

Атомарные проверки (тестирование с выбором базового набора значений, base choice testing) -

Answer 12

Тестирование, при котором выделяется набор значений (базовый набор), который используется для проведения тестирования в первую очередь, а далее тест-кейсы строятся на основе выбора всех базовых значений, кроме одного, которое заменяется значением, не входящим в базовый набор. Общее количество комбинаций можно вычислить по формуле: Количество тестов = сумма значений – сумма параметров.

Question 13

Попарное тестирование (pairwise testing) -

Answer 13

Техника тестирования, в которой тест-кейсы строятся по принципу проверки пар значений параметров (переменных) вместо того, чтобы пытаться проверить все возможные комбинации всех значений всех параметров.

Question 14

Метод взаимосвязанных проверок (тестирование по графу причинно-следственных связей,
cause-effect graphing) -

Answer 14

Техника тестирования, в которой тест-кейсы разрабатываются на основе графа причинно-следственных связей (графического представления входных данных и воздействий со связанными с ними выходными данными и эффектами)