Идеальный тестдизайн: от Сэма Канера до Agile

Максим БогуславскийБанки.ру

О себе

● Руковожу отделом QA в Banki.ru;● Работал в Luxoft, Acronis, Innova,

Superscape (Glu mobile);● Занимаюсь тестированием 8 лет.

Содержание доклада● Реальный опыт;● Сравнение методик;● Негативные примеры;● Положительные примеры.

Традиционный подход● Избыточная тестовая документация;● Работа впрок;● Узкое горлышко.

Agile подход● Разработка документации идет

параллельно;● Нет времени на полный регресс.

Предпосылки для изменений● Более 20 часов на регресс всего сайта;● Необходимость в ежедневных выкладках;● Узнавали об ошибках от собственника;● Обилие красных карточек.

Приоритеты

● Единый подход:○ Блокеры - исправляем немедленно;○ Critical - ждут 1 день;○ Остальные - планово.

● Приоритеты согласованы с бизнесом и закреплены в документе.

Разделение зон ответственности

● Кто последний, тот и владелец;● За командой закреплен участок кода.

Проверка полноты требований

Checklists vs TestRail

Баланс ресурсов

● Feature team (1 QA, 4-6 разработчиков);● Набор QA в команды от 3 разработчиков;● Outsource:

○ автоматизация;○ регресс;○ больничные.

CI 2.0: Deploy

PSQL

bx

srvc1

srvcn

SQL

SQL

PSQL

bx

srvc1

srvcn

SQL

SQL

PSQL

bx

srvc1

srvcn

SQL

SQL

dev test prod

capistrano + puppet + bamboo + 615VM =

CI 2.0: Test.API

● phpUnit + curl:○ отправка запросов;○ верификация и валидация ответа.

CI 2.0: Test.Front

● JMeter (func mode):○ быстрая (~1 минута) проверка 1500 урлов;

● Selenium 2.0 + phpUnit:○ проверка логики и элементов.

Git Workflow

Monitoring

Обратная связь от пользователей

Проблема Анализ Классификация

Исправление

УведомлениеИсправление

Users 1st line 2nd line Feature Team 1st line

Эпилог

КонтактыМакс БогуславскийРуководитель отдела QA

Email: max.bogus@gmail.comFacebook: max.bogus

• Process: Jira, Service Desk, Bamboo, Stash, Confluence, Capture, Jira Agile Board;

• Deploy: capistrano, puppet;• Automation: php, phpUnit, Selenium 2.0, Jmeter.

“Сумма технологий”