Презентация Игоря Шубовича "Масштабирование социальных приложений с помощью AWS" с конференции Z-Tech 9.02.2013

1. МАСШТАБИРОВАНИЕСОЦИА
ЛЬНЫХ ПРИЛОЖЕНИЙ С
ПОМОЩЬЮ AWS
Igor Shubovych @ Stuzo

8. AWS
 Amazon Web
Services
 Инфраструктура как
сервис (IaaS)
 Индивудальное
решение

9. IAAS vsPaaSvsSaaS
Базовые понятие

10. IaaS
 Infrastructure As A
Service
 Самостоятельное
управление
ресурсами
 Сеть, сервера,
системы хранения
данных и т.д.
 API

11. PaaS
 Platform As A
Service
 Готовое решение для
разработки,
тестирования,
 Типичные сервисы:
приложение, БД,
планировщик задач,
очередии т.д.
 API

12. SaaS
 Software As A
Service
 Готовое развернутое
приложение
 Google Docs
 API?

13. IaaS, PaaS, SaaS

14. IaaS, PaaS, SaaS – для кого

15. Я хочу сделать стартап
 Используйте PaaS
 Ruby – Heroku
 Python - GAE
 PHP – AppFog,
Jelastic
 Java – Jelastic,
GAE

16. Социальные приложения?
 Маркетинговые
приложения
 Для больших
брендов (P&G,
Coca-Cola,
BudLight etc.)
 Социальная природа
– быстрый,
скачкообразный рост
 100тзапросов/сек

17. В чем сложность?
 Запутанная  Поэтому мы выбрали
архитектура IaaSот Amazon
 Большая нагрузка
 Непредсказуемость
роста
 Незрелость
PaaSрешений в
2011

18. Причины выбора AWS
 Надежность
 Производительность
 Масштабирование
 Утилизация

19. Amazon Web Services
Краткое описание

20. AWS сервисы

21. Management Console

22. API
 HTTPRESTful API
 Обвязки для
основных языков
(Ruby, Java, C#,
Python, PHP)
 Command-line
interface
 Web-console

23. Пример использования API

24. Основные сервисы
 EC2 – виртуальные сервера
 S3 – хранилище файлов по ключу
 EBS – виртуальный HDD
 Elastic IP – static IP в облаке
 ELB – балансировщик нагрузки
 RDS – MySQLБД с репликацией

25. Как мы строили свой кластер?

26. Отдельный сервер на хостинге
 Все приложения –
на 1 сервере
 Все БД –
на 1 сервере
 Веб-сервер Apache
 БД – MySQL

27. Проблемы
 Не масштабируется
 SPoF

28. SPoF?
 Single Point Of
Failure
 Единая Точка Отказа
 Слабое Звено

29. ОдиночныйAWS сервер
 Масштабируется –
переключением на
больший сервер
Проблемы:
 Масштабирование -
занимает время
 SPoF

30. Изоляция веби БДсервера
 Веб-сервер – больше
CPU
 БД сервер – больше
памяти
 Масштабировать по-
разному
Проблемы:
 Масштабирование -
занимает время
 SPoF

31. Масштабируем Веб-сервера
 Авто-
масштабирование
Веб-серверов
 Штатный
балансировщик
нагрузки (ELB)
 Надежность
Проблемы:
 БД - SPoF

32. Добавляем кеширование
 Меньше нагрузка на
БД
 Быстрый ответ
Недостатки:
 БД - SPoF

33. Добавляем репликацию
 Master-
slaveрепликация
 Горячая замена (hot
standby)
 БД – не SPoF

34. Мониторинг
 Выявление проблем
на ранних стадиях
 Предупреждение о
потенциальных
проблемах
 Анализ данных на
больших объемах
 AWS CloudWatch

35. CDN – для статики
 CDN = Content
Delivery Network
 Статика (JS, CSS,
images, Flash)
 AWS S3/CloudFront
 Единое хранилище
 Дешево
 Меньше нагрузка

36. Мы начали с ...

37. И пришли к ...

38. Вопросы?