Андрей Усов, 2ГИС (SQA Days-18, 27-28 ноября 2015)

2. Тестируем мобильное приложение в
суровых реалиях интернета
Усов Андрей
a.usov@2gis.ru usovand@gmail.com techno.2gis.ru

3. • 2 года в тестировании
О себе

4. • 2 года в тестировании
• Автоматизирую тестирование бекендов
О себе

5. • 2 года в тестировании
• Автоматизирую тестирование бекендов
• Разрабатываю инстументы для
тестирования
О себе

6. Мобильное приложение 2ГИС v4
• iOS, Widows Phone, Android (beta)

7. Мобильное приложение 2ГИС v4
• iOS, Widows Phone, Android (beta)
• 3 млн. пользователей

8. Мобильное приложение 2ГИС v4
• iOS, Widows Phone, Android (beta)
• 3 млн. пользователей
• 9 стран
• 288 городов

9. Мобильное приложение 2ГИС v4
• iOS, Widows Phone, Android (beta)
• 3 млн. пользователей
• 9 стран
• 288 городов
• Работает офлайн
Ищи 2ГИС в любом магазине приложений

10. Доставка
данных

11. Нагрузка
• Пиковый трафик 4 Gbps

12. Нагрузка
• Пиковый трафик 4 Gbps
• Максимум 400 rps

13. Нагрузка
• Пиковый трафик 4 Gbps
• Максимум 400 rps
• Объем данных 512 Tb в месяц

14. Нагрузка
• Пиковый трафик 4 Gbps
• Максимум 400 rps
• Объем данных 512 Tb в месяц
Но ещё не вышло обновление для Android (65% пользователей)

15. Критичность
• Всегда актуальные данные

16. Критичность
• Всегда актуальные данные
• Обязательства перед партнерами

17. Критичность
• Всегда актуальные данные
• Обязательства перед партнерами
• Доставка фич

18. Технология
доставки

19. Устройство

20. Приложение

21. Сеть

22. Серверы

23. Nginx

24. Хранилище

25. Связь

26. Выбирает клиент

27. Требования
• Выбор стабильных серверов для загрузки

28. Требования
• Выбор стабильных серверов для загрузки
• Устойчивость к отказам даже в процессе закачки

29. Требования
• Выбор стабильных серверов для загрузки
• Устойчивость к отказам даже в процессе закачки
• Нативные методы фоновой загрузки (iOS, Windows Phone)

30. Требования
• Выбор стабильных серверов для загрузки
• Устойчивость к отказам даже в процессе закачки
• Нативные методы фоновой загрузки (iOS, Windows Phone)
Оказалось, что эти пункты плохо уживаются

31. Точки отказа

32. Нет доступа к сети

33. Нет связи с сервером

34. Встроенная реклама
Кончился Интернет

35. Сервер упал

36. Нет связи с хранилищем

37. Хранилище упало

38. Плохая связь
Обрывы

39. Сломалось все

40. И еще
• Перегрузки на сервере

41. И еще
• Перегрузки на сервере
• Редиректы от провайдера

42. И еще
• Перегрузки на сервере
• Редиректы от провайдера
• Ошибки DNS

43. И еще
• Перегрузки на сервере
• Редиректы от провайдера
• Ошибки DNS
• Баги в самом web-сервере

44. И еще
• Перегрузки на сервере
• Редиректы от провайдера
• Ошибки DNS
• Баги в самом web-сервере
Все эти сценарии необходимо проверить

45. Проблемы

46. Сложная настройка окружения
• Изменение конфигурации web-сервера (Nginx, Apache)

47. Сложная настройка окружения
• Изменение конфигурации web-сервера (Nginx, Apache)
• Выполнение команд в хост-системе

48. Сложная настройка окружения
• Изменение конфигурации web-сервера (Nginx, Apache)
• Выполнение команд в хост-системе
• Запуск произвольного скрипта на сервере

49. Большое количество работы
• Серверов несколько

50. Большое количество работы
• Серверов несколько
• Платформы три

51. Большое количество работы
• Серверов несколько
• Платформы три
• Релизов много

52. Ограничение по ресурсам
• Времени мало

53. Ограничение по ресурсам
• Времени мало
• Людей мало

54. Ограничение по ресурсам
• Времени мало
• Людей мало
• Людей с экспертизой очень мало

55. Ограничение по ресурсам
• Времени мало
• Людей мало
• Людей с экспертизой очень мало
Но тестировать все равно надо

56. Решение

57. Требования к инструменту
• Минимум операций

58. Требования к инструменту
• Минимум операций
• Простота использования

59. Требования к инструменту
• Минимум операций
• Простота использования
• Простота реализации

60. Требования к инструменту
• Минимум операций
• Простота использования
• Простота реализации
• Надежность

61. Декомпозиция задачи
• Копирование файлов на сервер

62. Декомпозиция задачи
• Копирование файлов на сервер
• Конфигурационный файл

63. Декомпозиция задачи
• Копирование файлов на сервер
• Конфигурационный файл
• Скрипт

64. Декомпозиция задачи
• Копирование файлов на сервер
• Конфигурационный файл
• Скрипт
• Выполнение команд на сервере

65. Декомпозиция задачи
• Копирование файлов на сервер
• Конфигурационный файл
• Скрипт
• Выполнение команд на сервере
• Перезапуск сервера

66. Декомпозиция задачи
• Копирование файлов на сервер
• Конфигурационный файл
• Скрипт
• Выполнение команд на сервере
• Перезапуск сервера
• Запуск скрипта

67. Ansible

68. Аналоги

69. Ansible

70. Почему Ansible?

71. Почему Ansible?

72. Почему Ansible?

73. Про Ansible

74. Про Ansible

75. Про Ansible

76. Про Ansible

77. Про Ansible

78. Про Ansible

79. Примеры

80. Inventory. Список серверов
[hosts]
host1 ansible_ssh_host=127.0.0.1
ansible_ssh_user=user ansible_ssh_pass=123
host2 ansible_ssh_host=127.0.0.2
ansible_ssh_user=user ansible_ssh_pass=456

81. Inventory. Задаем переменные
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted

82. Playbook. Запускаем команду
- name: run-script | Run script
command: tc --help
async: 2678400
poll: 0

83. Playbook. Копируем файлы
- name: configure-nginx | Configure nginx
template: src=../resources/config.j2
dest=./your-server.conf
owner=root group=root mode=0644

84. Шаблоны
#содержимое config.j2
...
return {{return_for_files}};
...

85. Эта переменная в inventory
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted

86. Вернемся в playbook
- name: configure-nginx | Configure nginx
template: src=../resources/config.j2
dest=./your-server.conf
owner=root group=root mode=0644

87. Полученный файл
#содержимое your-server.conf
...
return 502;
...

88. Playbook. Перезапускаем сервер
- name: restart-nginx | Restart nginx
service: name=nginx state=restarted
when: nginx_apply_method == "restarted"

89. Та самая переменная в inventory
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted

90. Реализация
• Разбиваем на классы конфигураций

91. Реализация
• Разбиваем на классы конфигураций
• Коды состояния HTTP

92. Реализация
• Разбиваем на классы конфигураций
• Коды состояния HTTP
• Лимиты скорости

93. Реализация
• Разбиваем на классы конфигураций
• Коды состояния HTTP
• Лимиты скорости
• Определяем набор параметров для каждого класса

94. Реализация
• Разбиваем на классы конфигураций
• Коды состояния HTTP
• Лимиты скорости
• Определяем набор параметров для каждого класса
• Пишем playbook'и

95. Важные моменты
• Каждая операция должна быть обратима

96. Важные моменты
• Каждая операция должна быть обратима
• Нужно уметь приводить серверы в исходное состояние

97. Важные моменты
• Каждая операция должна быть обратима
• Нужно уметь приводить серверы в исходное состояние
• Пишем мониторинг состояния

98. Профит

99. Ранее
• Подлючаемся к каждому серверу

100. Ранее
• Подлючаемся к каждому серверу
• Копируем файлы

101. Ранее
• Подлючаемся к каждому серверу
• Копируем файлы
• Редактируем конфигурацию

102. Ранее
• Подлючаемся к каждому серверу
• Копируем файлы
• Редактируем конфигурацию
• Запускаем команды

103. Ранее
• Подлючаемся к каждому серверу
• Копируем файлы
• Редактируем конфигурацию
• Запускаем команды
И так каждый раз

104. Сейчас
• Меняем пару параметров в inventory

105. Сейчас
• Меняем пару параметров в inventory
• Запускаем нужный playbook

106. Сейчас
• Меняем пару параметров в inventory
• Запускаем нужный playbook
И всё

107. Интерфейс

108. Делаем web интерфейс
• Интегрируем в Jenkins

109. Делаем web интерфейс
• Интегрируем в Jenkins
• Используем стандартные средства SCM

110. Делаем web интерфейс
• Интегрируем в Jenkins
• Используем стандартные средства SCM
• Пишем что-то своё

111. Результаты

112. Результаты
• Тестирование обновления данных стало простым

113. Результаты
• Тестирование обновления данных стало простым
• Найдено большое количество дефектов

114. Результаты
• Тестирование обновления данных стало простым
• Найдено большое количество дефектов
• Изучено поведение мобильных платформ

115. Ссылки
• http://www.ansible.com/ - Ansible
• http://habrahabr.ru/post/211306/ - "Обзор: Puppet, Chef, Ansible, Salt"
• https://jenkins-ci.org/ - Jenkins

116. Вопросы?
Усов Андрей
a.usov@2gis.ru
usovand@gmail.com