1. Современное функциональное
тестированиес
Codeception

2. Я
• Боднарчук Михаил
• Веб разработчик (PHP с 2004, Ruby с 2008)
• Автор Codeception
• @davert

3. Тестирование
Ручное Автоматизированное

4. Когда автоматизировать?
• Частые изменения в проекте
• Много изменений в проекте
• Много разработчиков, мало
тестировщиков.

5. Пишем тесты?
• Что-что?
• А… Это… Лениво.
• А… Не… Сложно.
• Да, как-то пытался писать юнит-тесты.
• Не, у нас для этого есть QA отдел.
• Да!

6. С чего начать?
• Тестирования функционала.
• Типичные пользовательские сценарии.
• API

7. Противопоказано
• А давайте напишем юнит тест!
• Как же? Юнит тесты это круто!
• Нам надо 100% покрытия кода!

8. Казалось бы…
при чем тут Codeception…

9. Существующие решения
• PHPUnit
• ?
• ?
• ?
• ?
• ?
• Selenium

10. Чего не хватает?
• Простоты написания тестов
• Простоты чтения тестов
• Простоты отладки тестов

11. Codeception
• Простой но мощный фреймворк
• Основан на PHPUnit
• Open Source
• Хорошо документирован
• Версия 1.1.3
• PHP >= 5.3

13. Чуваки
• Тестирование с «человеческим лицом»
• Действия от лица людей.
• Минимум технических терминов.

14. Чуваки
• WebGuy – тестирует работу сайта вцелом
• Приемочное тестирование.
• Олицетворяет менеджера

15. Чуваки
• TestGuy - проверяет работу зная
внутренности системы.
• Обеспечивает функциональное
тестирование.
• Проф. тестировщик.

16. Чуваки
• CodeGuy – тестирует код.
• Юнит-тестирование.
• Разработчик.

17. WebGuy
• Selenium RC
• WebDriver
• ZombieJS
• PhpBrowser

18. Типичный тест
• $I = new WebGuy($scenario);
• $I->click('Login');
• $I->fillField('username','davert');
• $I->fillField('password','gfhjkm');
• $I->click('Submit');
• $I->see('Hello, Davert!');

19. Запускаем…
Codeception PHP Testing Framework v1.1.3
Powered by PHPUnit 3.6.10 by Sebastian Bergmann.
Suite acceptance started
Trying to sign in as a customer (LoginCept.php)
Scenario:
* I click “Login"
=> Moved to page http://login
* I fill field “name",“davert"
* I fill field “password",“gfhjkm"
* I click “Submit"
=> Moved to page http://localhost/user/davert
* I see “Hello, Davert"
OK
Time: 2 seconds, Memory: 10.25Mb
OK (1 test, 1 assertion)

20. Написание теста

21. Как находятся элементы?
• $I->click('Login'); - ?
• $I->fillField('username','davert'); - ?

22. Я же умный, красивый, в меру
упитанный фреймворк ну в полном
расцвете сил!

23. Поиск элемента на странице
• По имени (name, value, alt, …)
• По лейблу
• По CSS селектору
• По Xpath (с версии 1.1)

24. Результаты теста

25. Команды: see..
$I->see (‘text on a page’)
$I->see(‘heading on page’,’h1’);
$I->dontSee(‘Error’);
$I->seeInCurrentUrl(‘/user/davert’);
$I->seeCheckboxIsChecked(‘#terms’);
$I->see(‘XPath’, ‘//h:a/h:span’);

27. TestGuy
• Symfony2
• Zend Framework
• Kohana
• Social Engine
• MySQL, PostgreSQL
• ORM
• Ожидается Drupal 8

28. Интеграция с фреймворками
• Не обращаемся к веб-серверу.
• Работает гораздо быстрее.
• Stack trace и отладочная информация.

29. CodeGuy
• Простые тесты с PHPUnit
• Комплексные тесты в виде сценариев
• Доступны все модули

30. Типичный тест
function testSavingUser()
{
$user = new User();
$user->setName('Miles');
$user->setEmail(‘miles@davis.com');
$user->save();
$this->codeGuy->seeInDatabase('users',array(
'name' => 'Miles‘,
‘email' => ‘miles@davis.com‘,
));
} // интеграционный тест

31. Сценарный тест
function create(CodeGuy $I)
{
$I->wantTo('create new user by name');
$I->haveStub($user =
Stub::makeEmptyExcept('User', 'create')
);
$user->setName('davert');
$I->executeMethod($user, ‘create’);
$I->expect('user is validated and saved')
$I->seeMethodInvoked($user, 'validate')
$I->seeMethodInvoked($user, 'save');
} // юнит тест

32. Отладка
• Все промежуточные данные выводятся на
экран
• При сбое делается скриншот последней
страницы
• Модуль WebDebug

33. Очистка
• Тесты должны работать в изоляции
• Тесты не должны гадить друг другу
• Очистка кеша, данных, сессий…

34. Очистка БД
• перезаливать sql-дамп БД.
• использовать SQLite.
• через rollback в транзакции.

35. Модули
• Веб (Selenium, ZombieJS, PhpBrowser)
• API (REST, SOAP)
• MVC Frameworks (Symfony, Zend, …)
• Database (MySQL, PostgreSQL, …)
• …. всего 19

36. Когда модулей мало
• Пишем свои!
• Helper-код
• public function seeReceivedSms() {
• $messages = $this->_getOutgoingMessages();
• $this->assertGreaterThen(0, $messages->count());
• }
• Тест
• $I->click("Confirm by Sms");
• $I->seeReceivedSms();

37. Continuous Integration
• Автоматический запуск тестов
• «Письма счастья» при поломках
• Раннее выявление ошибок

38. Интеграция с CI
• Экспорт HTML, XML, JSON, TAP
• Jenkins, Bamboo, etc…
• Красивые HTML репорты

39. Репорт

40. Подходит для BDD
// As a new customer
$I->am(‘new customer’);
// I want to buy a notebook
$I->wantTo(‘buy a notebook’);
// In order to spend money faster
$I->lookForwardTo(‘spend money faster’);

41. Hardcore BDD

42. Документация
• http://codeception.com
• Guides – всё о фреймворке (9 глав)
• Модули – все функции
• Reference – команды, опции.

43. Вопросы?
• http://Codeception.com
• https://github.com/codeception/codeception
• Skype: Davert.ua
• davert@ukr.net
• Twitter: @davert