Weitere ähnliche Inhalte
Ähnlich wie Как устроены сплит-тесты в поиске Рамблера (20)
Как устроены сплит-тесты в поиске Рамблера
- 10. В новых условиях сперва непривычно…
Мы даже это
тестируем? Надо больше
метрик…
!?
- 11. Важно!
Метрики! Записываем
А=↑
B=↓ Планируем
Идея!
Запускаем
Выкатываем
Анализируем
- 12. CTR результатов
Время до первого клика
Запросы без кликов
Средняя позиция кликов
Среднее время на результатах
… ещѐ 25 метрик
- 13. Вытянули мета-данные в одну строку:
Ожидаем:
Изменение средней позиции кликов
Возможен рост сессий (основная метрика)
- 22. 1. Меряем только то, что знаем
2. Тестируем только то, где видим проблему
3. Иногда результаты не дают ответа