— Краткий экскурс в предыдущие доклады; -‌ Описание нашей системы сбора статистики с контейнеров и рассказ почему мы решили отказаться от cadvisord; -‌ Автоматическая система сборки контейнеров и интеграция с teamcity; — Наброс о системе генерации и хранения конфигураций.

1. Мониторь,
автоматизируй Docker
Раудсепп Илья

2. 300М пользователей
3000+ серверов
3 дата центра
150+ стран
250+ docker

3. Что смотрели
● DataDog
○ Все так же отплавляет в облако
● Dockerana
● Collectd + graphite
● Zabbix
● Prometheus

4. Что смотрели
● DataDog
● Dockerana
○ Никаких обновлений 2 года
● Collectd + graphite
● Zabbix
● Prometheus

5. Что смотрели
● DataDog
● Dockerana
● Collectd + graphite
○ До сих пор работает
● Zabbix
● Prometheus

6. Что смотрели
● DataDog
● Dockerana
● Collectd + graphite
● Zabbix
○ сложно сделать динамические графики
○ не тривиально связать метрики хоста и контейнера
● Prometheus

7. Что смотрели
● DataDog
● Dockerana
● Collectd + graphite
● Zabbix
● Prometheus
○ еще один датасторадж
○ замена zabbix

8. Что было
Server
Host OS
ContainerA
ContainerB
ContainerC
cAdvisor
container
InfluxDBHttp/Https protocol
Grafana
Host Container
CPU ⃘ ⃘
Mem ⃘ ⃘
Disk ⃘ ⃘
Network ⃘ ⃘

9. Что не понравилось
● InfluxDB
○ переписали на go
○ убрали репликацию*
● сadvisor
○ добавили больше storage engine
○ меньше стали отправлять в storage engine
*осталась в платной версии

10. Что попробовали
https://github.com/dockermeetupsinbordeaux/docker-zabbix-sender
Server
Host OS
ContainerA
ContainerB
ContainerC
docker-zabbix
container
zabbixzabbix_sender
Host Container
CPU ⃘
Mem ⃘
Disk ⃘
Network ⃘

11. Что поменяли
Server
Host OS
ContainerA
ContainerB
ContainerC
docker-graphite
container
graphiteHttp protocol
Grafana
Host Container
CPU ⃘ ⃘
Mem ⃘ ⃘
Disk ⃘ ⃘
Network ⃘ ⃘

12. Как работает

13. Как интегрируется

18. Сборка контейнеров
● cteam
○ bin files
○ environment files for daemon
● itops
○ base image
○ configs
○ common environment files

19. base image
● ОС - sles12
● сервисы:
○ s6-init
○ log collecting system
○ cron
● libs
● common fs tree

20. Как работает

21. Как работает

22. Как работает

25. Как работает
● environment files
● configs
● common files
● dirs tree
● Dockerfile_source
● getconfigs.sh

26. Как работает
● check if previous run success
● download configs
● check configs
● replace configs
● save previous

27. Как работает ● create tmp dir
● take files from teamcity
● generate Dockerfile
● run docker build
● push image

28. Что не нравится

29. Что не нравится

30. К чему стемимся

31. Спасибо!
i.raudsepp@corp.badoo.com
Skype: i.raudsepp
https://tech.badoo.com
https://habrahabr.ru/company/badoo