Параллелизация тестов, а именно: лучший пхп тулл для автоматизации (Codeception); основы Docker контейнирезации; robo - что это и зачем он нам нужен; profit

1. Codeception + Docker + Robo
Vage Zakaryan

2. О себе
QA Lead in Lovata LLC
QA automation in LLSOFT LLC
QA trainer in Belhard
and just a cool guy

3. Agenda
1. Выбираем php инструмент для автоматизации
∙ Codeception, что ты такое?
∙ Когда он может быть полезен?
∙ Что в нём такого класного?
2. Параллелизация (Docker)
∙ Основы docker контейнирезации
∙ Использование Docker’a для масштабирования
3. Robo
∙ Финальные штрихи для запуска
++ +

4. Codeception

5. Полное покрытие

6. Когда он полезен?
∙ Основной язык проекта - PHP
∙ Multi-Framework and Multi-Backend
∙ Нужны приёмочные тесты и не только
∙ Нужен простой инструмент (BDD)

7. Подробнее о модульности
∙ Удобная среда тестирования для каждого набора
тестов.
∙ Позволяет нам выбирать действия и проверки,
которые могут быть выполнены в тестах.
∙ Все действия и проверки, которые могут быть
выполнены в тесте, определены в модулях.

8. Примеры модулей
WebDriver – для запуска тестов в браузере
REST – для тестирования REST Api
DB, Dbh – для коннекта к базе данных
Yi, Laravel5, Zend – для запуска интегрированных
в фреймворк тестов
В сумме 30+ модулей!

9. Как подключать модули?
{suitename}.suite.yml:

10. Окружение

11. Quick start. Установка
1. Скачиваем
$ composer require "codeception/codeception"
2. Устанавливаем
$ codecept bootstrap
3. Создаём тестовый файл
$ codecept generate:cept acceptance Welcome
4. Пишем тесты
5. Запускаем тесты
$ codecept run

12. Пример теста

13. Использование паттернов
1. PageObject
$ php codecept generate:pageobject Login
Result:
Tests/_support/Page/Login.php
2. StepObject
$ php codecept generate:stepobject acceptance Admin
Result:
Tests/_support/Step/Acceptance/Admin.php

14. Прочие “плюшки”
1. Html/xml-отчёты
2. Возможность разбивать и запускать тесты по
группам
3. Большое количество расширений и аддонов

15. Тупик масштабирования?

16. Решение есть! Docker

17. Какие он решает проблемы?
1. Перевозить разных (несовместимые) друг с другом типов
грузов, например, еду и химикаты или стекло и кирпичи
2. Работать с упаковками различных размеров, используя
один и тот же транспорт

18. Зачем нужен Docker?
∙ Быстрый процесс разворачивания приложения.
∙ Удобная инкапсуляция приложений.
∙ Одинаковое поведение на локальном компьютере и
тестовом/производственном сервере.
∙ Простой и понятный мониторинг.
∙ Масштабируемость.

19. Docker-compose
Инструмент для простого определения и запуска
многоконтейнерных Докер-приложений. В нем есть
файл docker-compose.yml, и с его помощью можно одной
командой поднять приложение с набором сервисов.

20. Пример .yml файла

21. Как с ним работать?
1. Запускаем докер контейнер
$ docker-compose up -d
2. Запускаем тесты
$ docker-compose run --rm codecept run
3. Всё автоматизировано, включаем Quake. Получаем
profit

22. Финальные штрихи

23. Шаги к параллелизации
1. Разбивка всех тестов на группы
2. Паралелльный запуск каждой из групп тестов
3. Слияние отчётов
Для реализации нам понадобятся:
- Robo;
- robo-paracept

24. Установка
$ composer require codeception/robo-paracept:dev-master
-> RoboFile.php

25. 1. Разбивка на группы
$ robo parallel:split-tests

26. 2. Запуск тестов
$ robo parallel:run

27. 3. Слияние репортов
$ robo parallel:merge-results

28. Объединие 3 шагов в 1
$ robo parallel:run

29. Итого
Если мы хотим внедрить автотесты на PHP проекте:
1) Выбираем Codeception, как инструмент автоматизации
2) Пишем тесты (с использованием нужных модулей)
3) Запускаем тесты параллельно с помощью докера и Robo
PS. Если очень хочется - подключаем CI, добавляем триггеры
для запуска, одеваем гавайские шорты и спокойно
отправляемся путешествовать пока все наши тесты
зелёные.