Как разбираться в данных когортного анализа. замечать паттерны в анализируемых данных, о чем помнить, используя его. Слайды с доклада на Russian Internet Week 2015

1. Когортный анализ
в работе над интерфейсами
Иван Михайлов
Product Manager, Mail.Ru

2. Какие еще анализы?!

3. Когорта –
группа, выделенная
по определенному
признаку

4. Как изменения в интерфейсе
сказываются на людях, которые
отличаются друг от друга только тем,
сколько времени они с нами?
Когортный анализ: Метрика во времени

5. Retention, Churn, ROI, LTV, NPS,
SUS, и другие слова и аббревиатуры
Когортный анализ: Метрика во времени

6. Когортный анализ: Метрика во времени
Время жизни пользователя >
Время жизни
интерфейса
/

7. Когортный анализ: Метрика во времени
/ Эти ребятами с нами уже
/ 4 недели на момент замера
Вышло
обновление >

8. Когортный анализ: Метрика во времени
Вышло
обновление >
Эффект для тех, кто застал более раннюю
версию, надо искать на этой диагонали и правее.

9. Метрика во времени: Поиск проблем
Пользователи разбиты на когорты по дате
первого контакта. Интервал - неделя.

10. Метрика во времени: Поиск проблем
/ Показатель второй недели все
/ падает и падает… Хм.

11. Метрика во времени: Разница в когортах
В конце июня что-то случилось
с теми, кто пришел в конце мая

12. Метрика во времени: Разница в когортах
Маркетинг тестировал рассылку по
“спящим” клиентам

13. Метрика во времени: Результат релиза
1 сентября
вышло обновление.
Смотрим на
результаты.

14. Интерфейс изменился.
Улучшился ли?
Когортный анализ: Этапы жизненного цикла

15. Когортный анализ: Этапы жизненного цикла
Препятствия на пути к цели
AKA Customer Journey Map
AKA Funnel analysis

16. Когортный анализ: Этапы жизненного цикла
Один человек - одна когорта.
Один человек - один этап.
Состояние когорты меняется во времени.

17. Когортный анализ: Этапы жизненного цикла
Что-то в конце мая
пошло не так...

18. Иван Михайлов
Итого
Гипотеза определяет метрику
Сегментируй до предела, но не дальше
Разницы может и не быть

19. Ваш ход
Расскажите мне о своем опыте:
i.mikhailov@corp.mail.ru
Иван Михайлов
Product Manager, Mail.Ru