Smirnov Memcached High Load 2008

•Als PPT, PDF herunterladen•

4 gefällt mir•988 views

Ontico

Business Technologie

Web, кэширование и memcached Андрей Смирнов (НетСтрим)

Кэширование ,[object Object],[object Object],[object Object],[object Object]

memcached ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],Brad Fitzpatrick

Общая схема кэширования Backend : БД, и т.п. memcached Frontend

Архитектура memcached ,[object Object],[object Object],[object Object],[object Object]

Потеря ключей ,[object Object],[object Object],[object Object]

Применение memcached ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Задачи ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Ключ кэширования ,[object Object],[object Object],[object Object],[object Object]

Кластеризация memcached ,[object Object],[object Object],[object Object],[object Object],[object Object],memc2 memcN Frontend memc1

Распределение ключей ,[object Object],[object Object],[object Object]

Атомарность операци й ,[object Object],[object Object],[object Object]

Счетчики в memcached ,[object Object],[object Object],[object Object],[object Object],[object Object]

Счетчик онлайнеров 450 580 434 497 101 503 0 1 2 3 4 5 Текущий изменяемый ключ Значение счетчика =  (5,0,1,2,3) Онлайнеры – кол-во уникальных сессий за последние 5 минут Время жизни каждого ключа – 5 минут

Одновременное перестроение кэшей ,[object Object],[object Object],[object Object],[object Object]

Решение проблемы ,[object Object],[object Object],[object Object],[object Object]

Пример ,[object Object],[object Object],[object Object],срок годности : 2008-10-07 21:00 данные кэша : [ id: 159 login: ‘user’ nick: ‘Hello’ … ] Ключ user_info_id_159:

Пример ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Блокировки в memcached ,[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object],[object Object]

Сброс группы кэшей ,[object Object],[object Object],[object Object]

Тэгирование кэшей ,[object Object],[object Object],[object Object]

Тэгирование кэшей ,[object Object],[object Object],[object Object],[object Object]

Пример Было : Записали в кэш: tag1  25 tag2  63 срок годности : 2008-10-07 21:00 данные кэша : [ … ] тэги : [ tag1 : 25 tag2 : 63 ]

Пример Стало : Лежит в кэше: tag1  25 tag2  6 4 срок годности : 2008-10-07 21:00 данные кэша : [ … ] тэги : [ tag1 : 25 tag2 : 63 ] кэш устарел!

Версия тэга и слейвы БД ,[object Object],[object Object],[object Object],[object Object],[object Object]

Статистика memcached ,[object Object],[object Object],[object Object],[object Object],[object Object]

slab- аллокатор ,[object Object],[object Object],[object Object],[object Object]

Отладка memcached ,[object Object],[object Object],[object Object],[object Object]

Дополнительные вопросы ,[object Object],[object Object],[object Object]

Всё! ,[object Object],[object Object],[object Object],[object Object]

Empfohlen

Максим Дунин, Nginx, Inc.Ontico

Разработка высокопроизводительных серверных приложений для Linux/Unix (Алекса...Ontico

Что нового в nginx? / Максим Дунин (Nginx, Inc.)Ontico

Механика DDoS (Александр Крижановский)Ontico

Что особенного в СУБД для данных в оперативной памяти / Константин Осипов (Ta...Ontico

Защита данных и датацентров от катастроф. Подход Nutanix / Максим Шапошников ...Ontico

Mysql vs postgresqlDaniel Podolsky

Спасение 6 млн файлов в условиях полного хецнера (Даниил Подольский, Дмитрий ...Ontico

Empfohlen

Максим Дунин, Nginx, Inc.Ontico

Разработка высокопроизводительных серверных приложений для Linux/Unix (Алекса...Ontico

Что нового в nginx? / Максим Дунин (Nginx, Inc.)Ontico

Механика DDoS (Александр Крижановский)Ontico

Что особенного в СУБД для данных в оперативной памяти / Константин Осипов (Ta...Ontico

Защита данных и датацентров от катастроф. Подход Nutanix / Максим Шапошников ...Ontico

Mysql vs postgresqlDaniel Podolsky

Спасение 6 млн файлов в условиях полного хецнера (Даниил Подольский, Дмитрий ...Ontico

Что нового в nginx? / Максим Дунин (Nginx, Inc.)Ontico

Ilia kantor паттерны серверных comet решенийrit2010

(1 часть) 1С-Битрикс. Как настроить двухуровневую конфигурацию веб-приложения...ForkConf

Chronicle Map — key-value хранилище для трейдинга на Java / Левентов Роман (C...Ontico

За гранью NoSQL: NewSQL на Cassandraodnoklassniki.ru

Cache in web (Secon 2008)Stanislav Korchagin

Отладка и устранение проблем в PostgreSQL Streaming Replication.Alexey Lesovsky

Оптимизация программ для современных процессоров и Linux, Александр Крижановс...Ontico

Практическое применение HTML5 в Я.ПочтеAlexey Androsov

Константин Осипов (Mail.Ru)Ontico

Отказоустойчивый микрокластер своими руками, Виталий Гаврилов (Ленвендо)Ontico

мои модули и патчи для Nginx. максим дунин. зал 1rit2011

Linuxvirt seminar-csc-2015OSLL

Базы данных. Hash & CacheVadim Tsesko

Highload Begun PankovOntico

VDS: обнаружение, выявление причин и устранение проблемных ситуаций. Диагнос...Oleg Lipin

Базы данных. HaystackVadim Tsesko

Вячеслав Бирюков - HTTP и HTTPSYandex

Базы данных. CassandraVadim Tsesko

Управление памятью контейнеров в проекте OpenVZ -- Владимир ДавыдовOpenVZ

Apache Cassandra. Ещё одно NoSQL хранилище (Владимир Климонтович)Ontico

Интервью с Анатолием Кузнецовым, автором библиотеки BitMagic C++ LibraryTatyanazaxarova

Weitere ähnliche Inhalte

Was ist angesagt?

Что нового в nginx? / Максим Дунин (Nginx, Inc.)Ontico

Ilia kantor паттерны серверных comet решенийrit2010

(1 часть) 1С-Битрикс. Как настроить двухуровневую конфигурацию веб-приложения...ForkConf

Chronicle Map — key-value хранилище для трейдинга на Java / Левентов Роман (C...Ontico

За гранью NoSQL: NewSQL на Cassandraodnoklassniki.ru

Cache in web (Secon 2008)Stanislav Korchagin

Отладка и устранение проблем в PostgreSQL Streaming Replication.Alexey Lesovsky

Оптимизация программ для современных процессоров и Linux, Александр Крижановс...Ontico

Практическое применение HTML5 в Я.ПочтеAlexey Androsov

Константин Осипов (Mail.Ru)Ontico

Отказоустойчивый микрокластер своими руками, Виталий Гаврилов (Ленвендо)Ontico

мои модули и патчи для Nginx. максим дунин. зал 1rit2011

Linuxvirt seminar-csc-2015OSLL

Базы данных. Hash & CacheVadim Tsesko

Highload Begun PankovOntico

VDS: обнаружение, выявление причин и устранение проблемных ситуаций. Диагнос...Oleg Lipin

Базы данных. HaystackVadim Tsesko

Вячеслав Бирюков - HTTP и HTTPSYandex

Базы данных. CassandraVadim Tsesko

Управление памятью контейнеров в проекте OpenVZ -- Владимир ДавыдовOpenVZ

Was ist angesagt? (20)

Что нового в nginx? / Максим Дунин (Nginx, Inc.)

Ilia kantor паттерны серверных comet решений

(1 часть) 1С-Битрикс. Как настроить двухуровневую конфигурацию веб-приложения...

Chronicle Map — key-value хранилище для трейдинга на Java / Левентов Роман (C...

За гранью NoSQL: NewSQL на Cassandra

Cache in web (Secon 2008)

Отладка и устранение проблем в PostgreSQL Streaming Replication.

Оптимизация программ для современных процессоров и Linux, Александр Крижановс...

Практическое применение HTML5 в Я.Почте

Константин Осипов (Mail.Ru)

Отказоустойчивый микрокластер своими руками, Виталий Гаврилов (Ленвендо)

мои модули и патчи для Nginx. максим дунин. зал 1

Linuxvirt seminar-csc-2015

Базы данных. Hash & Cache

Highload Begun Pankov

VDS: обнаружение, выявление причин и устранение проблемных ситуаций. Диагнос...

Базы данных. Haystack

Вячеслав Бирюков - HTTP и HTTPS

Базы данных. Cassandra

Управление памятью контейнеров в проекте OpenVZ -- Владимир Давыдов

Ähnlich wie Smirnov Memcached High Load 2008

Apache Cassandra. Ещё одно NoSQL хранилище (Владимир Климонтович)Ontico

Интервью с Анатолием Кузнецовым, автором библиотеки BitMagic C++ LibraryTatyanazaxarova

C++ весна 2014 лекция 2Technopark

Тестируем производительность распределённых систем, Александр Киров (Parallels)Ontico

Caching data outside Java Heap and using Shared Memory in JavaAndrei Pangin

Ускоряем и разгружаем веб-сервер, прозрачно кэшируя на SSD, Станислав Николов...Ontico

DEV Labs 2013. Can C++ Code Effeciency Be Comparable to That of Middle-Level ...Alex V. Petrov

Горизонтальное масштабирование: что, зачем, когда и как /Александр Макаров (Y...Ontico

Семинар 5. Многопоточное программирование на OpenMP (часть 5)Mikhail Kurnosov

MongoDB первые впечатленияfudz1k

Multithreading in JS. Myth or reality?Alexander Syrotenko

Доклад на Highload-2012Alex Tutubalin

Другая виртуализацияYandex

ZFConf 2012: Кеш без промахов средствами Zend Framework 2 (Евгений Шпилевский)ZFConf Conference

Soft labs. достижима ли в c++ эффективность языка среднего уровняLuxoftTraining

Поговорим про памятьAndrey Akinshin

Александр Соловьёв, Griddynamics.comOntico

Флеш в серверах: работа со скоростью вспышкиКРОК

Как и зачем создавать NginX-модуль — теория, практика, профит. Часть 2 / Васи...Ontico

Евгений Лазин. Неизменяемая структура данных HAMT для создания БД в памятиFProg

Ähnlich wie Smirnov Memcached High Load 2008 (20)

Apache Cassandra. Ещё одно NoSQL хранилище (Владимир Климонтович)

Интервью с Анатолием Кузнецовым, автором библиотеки BitMagic C++ Library

C++ весна 2014 лекция 2

Тестируем производительность распределённых систем, Александр Киров (Parallels)

Caching data outside Java Heap and using Shared Memory in Java

Ускоряем и разгружаем веб-сервер, прозрачно кэшируя на SSD, Станислав Николов...

DEV Labs 2013. Can C++ Code Effeciency Be Comparable to That of Middle-Level ...

Горизонтальное масштабирование: что, зачем, когда и как /Александр Макаров (Y...

Семинар 5. Многопоточное программирование на OpenMP (часть 5)

MongoDB первые впечатления

Multithreading in JS. Myth or reality?

Доклад на Highload-2012

Другая виртуализация

ZFConf 2012: Кеш без промахов средствами Zend Framework 2 (Евгений Шпилевский)

Soft labs. достижима ли в c++ эффективность языка среднего уровня

Поговорим про память

Александр Соловьёв, Griddynamics.com

Флеш в серверах: работа со скоростью вспышки

Как и зачем создавать NginX-модуль — теория, практика, профит. Часть 2 / Васи...

Евгений Лазин. Неизменяемая структура данных HAMT для создания БД в памяти

Mehr von Ontico

Риски, которые необходимо учесть при разработке сложного проекта (Олег Бунин)Ontico

Встреча докладчиков HL++ 2015Ontico

Вебинар о конференции HighLoad++Ontico

Call for papers (2014) ruOntico

Учебный день конференции HighLoad++ 2013Ontico

Как разработать социальную сеть, Олег БунинOntico

Конференции Онтико (2011)Ontico

Программный комитет HighLoad++, 6 октябряOntico

Конференции 2010 / описаниеOntico

Онтико, 2009Ontico

Конференции 2010Ontico

Economy of project developmentOntico

Ok2009 ПленаркаOntico

Highload sites, master-class, OK-2009Ontico

HighLoad Sites, Oleg BuninOntico

I Safety 1c BitrixOntico

Gmr Highload Presentation RevisedOntico

Wonderful World Of Mysql Storage Engines Hl2008 RusOntico

Scaling Web Sites By Sharding And Replication Hl2008 RusOntico

Mehr von Ontico (20)

Риски, которые необходимо учесть при разработке сложного проекта (Олег Бунин)

Встреча докладчиков HL++ 2015

Вебинар о конференции HighLoad++

Call for papers (2014) ru

Учебный день конференции HighLoad++ 2013

Как разработать социальную сеть, Олег Бунин

Конференции Онтико (2011)

Программный комитет HighLoad++, 6 октября

Конференции 2010 / описание

Онтико, 2009

Конференции 2010

Economy of project development

Ok2009 Пленарка

Highload sites, master-class, OK-2009

HighLoad Sites, Oleg Bunin

I Safety 1c Bitrix

Gmr Highload Presentation Revised

Wonderful World Of Mysql Storage Engines Hl2008 Rus

Scaling Web Sites By Sharding And Replication Hl2008 Rus

Smirnov Memcached High Load 2008

1. Web, кэширование и memcached Андрей Смирнов (НетСтрим)

5. Общая схема кэширования Backend : БД, и т.п. memcached Frontend

10.

11.

12.

13.

14.

15. Счетчик онлайнеров 450 580 434 497 101 503 0 1 2 3 4 5 Текущий изменяемый ключ Значение счетчика =  (5,0,1,2,3) Онлайнеры – кол-во уникальных сессий за последние 5 минут Время жизни каждого ключа – 5 минут

16.

17.

18.

19.

20.

21.

22.

23.

24. Пример Было : Записали в кэш: tag1  25 tag2  63 срок годности : 2008-10-07 21:00 данные кэша : [ … ] тэги : [ tag1 : 25 tag2 : 63 ]

25. Пример tag2 ++

26. Пример Стало : Лежит в кэше: tag1  25 tag2  6 4 срок годности : 2008-10-07 21:00 данные кэша : [ … ] тэги : [ tag1 : 25 tag2 : 63 ] кэш устарел!

27.

28.

29.

30. Статистика slab- аллокатора

31.

32.

33.