Презентация из серии украденные мысли. Рассказывает о том, на что обращать внимание при анализе данных нагрузочного тестирования

1. Анализ Результатов Нагрузочного
Тестирования: Чурозавр и Холера
Своровано у John Rauser
Velocity 2011 и 2012 Web Performance & Operations Conference
Использованы результаты обработки данных ЦИК РФ несколькими авторами
Иосиф Иткин, Exactpro Systems

2. Своровано у John Rauser

3. Виды обработки данных
• Агрегация
• Распределение
• Детали

4. Население Лондона
http://geopub.narod.ru/student/agapova/1/4.htm

5. Холера
Andrea Resmini, 5th Italian IA Summit, Milano 2011
The Broad Street Pump Or Where The Frenzy of Orlando Met Pulp Fiction

6. John Snow / Ваня Снежок
15 March 1813 – 16 June 1858
Один из основателей
эпидемиологии

7. Агрегация

8. Вывод
Работа Ивана Снежного была принята
со скепсисом в 1849 году
Корреляция не является
доказательством причинно
следственной связи

9. Примеры
Работа Ивана Снежного была принята со
скепсисом в 1849 году
Корреляция не является доказательством
причинно следственной связи:
Корреляция между результатом ЕР и
наличием КОИБ-ов
Корреляция между результатом ЕР и явкой
Корреляция между результатом ЕР и
присутствие наблюдателей на участке

10. Что это за цифры?
Корреляция?
58 из 180 = 32%
11 из 24 = 46%

11. Что это означает?
Корреляция?
58 из 180 = 32%
11 из 24 = 46%
10.6% vs. 19.0%

12. Какие Вам еще нужны
доказательства?
Корреляция?
58 из 180 = 32%
11 из 24 = 46%
10.6% vs. 19.0%
Красивых – 100%

13. Рекомендация для Ивана
London Medical Gazette, 1849
«The experimentum crucis would be, that the water
conveyed to a distant locality produced the disease in
all who used it, while those who did not use it,
escaped»
Correlation is not causation

14. Эпидемия Холеры 1854 в Сохо
The
majority of
the deaths
occurred
during this
period
Pump
handle
removed

15. Распределение

16. Распределение

17. Распределение

18. Кто такие Бины?

19. Кто такие Бины?

20. Кто такие Бины?

21. Гаусс?

22. Не совсем. А почему?

23. Что такое медиана?

24. Распределение по бинам
http://www.pnas.org/content/early/2012/12/19/1206770110.full.pdf

25. Turquoise MTF – Latency
Latency Distribution Average and Consistency
Metric uS
Average 100% 108
Average 99.9% 103
Max 99.9% 381
Max 99 191
Phil Penhaligan, EXTENT Trading Technology Trends & Quality Assurance 2012, Kostroma, Romanov Les
http://extentconf.com

26. И снова Холера

27. И снова Холера
People
evacuated
early
Workhouse
535 people
Bad Private bore
water
Brewery
Pump
70+
handle people
removed BROAD ST Private
PUMP bore
Free beer
Street
pattern an
obstacle

28. А при чем тут HФТ?

29. Самый быстрый и самый
медленный сайты

30. Самый быстрый и самый
медленный сайты

31. Система под нагрузкой

32. Выборы, выборы…

33. Наш друг Чурозавр
http://oude-rus.livejournal.com/542295.html

34. Лекцию обещали про
Менеджмент…

35. Always Look for the Outliers

36. А теперь с другой стороны
шкалы

37. А теперь с другой стороны
шкалы
Вывод: детально изучая отстоящие случаи можно легко
понять означает ли корреляция причинно
следственную связь или нет
Disclaimer: Exactpro Systems and group companies, including Innovative Trading
Systems and ITS-EXPERT are Equal Opportunity Employers

38. Спасибо