Презентация Макса Богуславского на SQA Days-16 14-15 ноября 2014, Санкт-Петербург, Россия www.sqadays.com

1. 9 релизов в неделю.
Секрет успеха.
Макс Богуславский
Банки.ру

2. О себе

3. Что будет в докладе:
● реальная история развития отдела;
● набор решений, которые нам в этом
помогли;
● devops.

4. Что не будет в докладе:
● котиков;
● “серебрянных пуль”.

5. Почему так часто?
● первое время их было 18, но это был
перебор.
● сильная связанность функционала
требует регресс;
● много маркетинговых задач;
● хотфиксы блокеров и критических задач;
● много мелких проектов.

6. О проекте

7. О проекте

8. Три года назад
● права на деплой есть у всех;
● несоответствие боя и тестовой среды;
● отладка на бою;
● выкладка без тестирования;
● обновление базы под заказ;
● смоук-тест шел 8 часов;
● “красные карточки” лучшему сотруднику.

9. Схема без тестеров

10. Три года назад

11. Схема с тестером

12. 2012 год
● Agile + Feature team + Jira Workflow;
● skype-чат + “Горячий чат”;
● тестовые среды + тестовые прогоны перед выкладкой;
● Bamboo + первые selenium-тесты;
● jmeter (functional mode);
● svn -> git;
● блокировка выкладки.

13. Feature team

14. Новые трудности
● стали нагляднее нарушения рамок
проекта ;
● разное понимание Agile;
● разное понимание приоритетов;
● “очень плохо выкладываемся” vs “очень
хорошо выкладываемся”;
● “это проблема тестовой среды”;
● “а у нас все работало”.

15. Прогнозируемость

16. 2013 год
● регламент выкладки;
● журнал выкладок;
● выделение эксплуатации;
● если не успел, то хотфикс после
выкладки;
● разбор задач из техподдержки;
● четкая приоритезация;
● подключение юнит-тестов;
● быстрые тесты + прогоны < 5 минут.

17. 18 выкладок
● понедельник - четверг:
o 11:00 / 13:00 / 15:00 / 17:00
● пятница:
o 12:00 / 14:00

18. 9 выкладок
● понедельник - четверг:
o 11:00 / 15:00
● пятница:
o 12:00

19. Журнал внеплановых выкладок

20. Новые трудности
● падает инфраструктура;
● 18 деплоев в неделю...

21. И мы добавили еще немножко

22. Журнал внеплановых выкладок II
тестовые среды Бамбу 2.0

23. Up Time

24. 2014 год
● git-workflow + pull-request;
● запрет на коммит в девелоп/master ветку;
● Склянки 2.0 (виртуализация/capistrano + puppet);
● быстрые тесты + прогоны (5 минут) . часть два;
● jmeter -> админка;
● обучение автоматизации всей QA команды;
● упрощенный framework для автоматизации;
● тестирование задач админов/архитектурных задач,
которые были выполнены вне команды.

25. Bamboo 2.0

26. Схема выкладок сейчас

27. Новые проблемы
● долго разворачивать все проекты;
● люди забывают зачем нужны традиции;
● большое количество сред жрут ресурсы;
● умирающие агенты;
● разные ожидания от тестирования;
● разросшийся фреймворк.

28. Пространство для развития
● переход на полный CI;
● единые скрипты выкладки для dev > test >
prod;
● full coverage на всех уровнях;
● нагрузочная среда в облаках.

29. Выводы:
● слепо копировать технологии - зло;
● система должна быть понятна каждому
участнику процесса;
● не все готовы сразу меняться;
● факап - это отличный аргумент “за”;
● система со временем деградирует.

30. Контакты
Макс Богуславский
email: max.bogus@gmail.com
facebook: max.bogus