Аналитика для больших проектов

Количественные данные для исследований и аналитики массовых сервисов

Виталий Черемисинов www.facebook.com/vit.cheremisinov

Коротко про меня

Более 5-ти лет в отрасли. Работал в крупнейших московских агентствах. Участвовал более чем в 50-ти крупных интернет-проектах.

Facebook: www.facebook.com/vit.cheremisinov

Slideshare: www.slideshare.net/VitCheremisinov/

Типы собираемых данных

Экономика

CAC

LTV

ARPPU

ARPU

ROI в гипотезу

ВоронкиMixpanel Google Analytics

VS

пользователи сеансы

Так будет лучше

Сценарии

Бюджетный вариант

Пишите сюда: facebook.com/vit.cheremisinov Скину код

Основные ошибки при сборе и анализе данных

Ошибка 1: Измеряем воздух

Ошибка 2: Не знаем инструмент

Ошибка 3: измеряем все подряд

Каждый чих пользователя

Думайте, прежде чем делать!

Что отслеживаем Зачем отслеживаем Что покажет Как отслеживаем Примечание

Ошибка 4: Считаем не то и не так

Где лучше?23045

12345

401

23012

13857

434

0

5000

10000

15000

20000

25000

Шаг,1 Шаг,2 Спасибо

А если проверю?!

Магия чисел

Где:

Z — магическое число определяющее кол-во сигм (1,2,3)

p — конверсия/100 (относительный показатель)

n — размер выборки

Так где же лучше?

1,74%

1,89%

0,00%

0,50%

1,00%

1,50%

2,00%

2,50%

1

Что будет, если редизайн начать с аналитики и ею же и закончить? Кейс

Поведение

Карточная сортировкадля навигационной и информационой архитектуры

A/B тестирования до релиза

Победитель

A/B тестирования после релиза

Победитель

Как проводим

Считаем достоверностьОпределяем плотность выборки

Как проводим

ДостоверностьВыборка

Где:

p-текущая конверсия/100

б- планируемое изменение в конверсии (в + и -)

Где:

Z - магическое число определяющее кол-во сигм (1,2,3)

p- Конверсия/100 (относительный показатель):

n- Размер выборки:

Результаты

С1 +60%Средний чек +70%

И это только начало!

Спасибо за внимание!

Виталий Черемисинов www.facebook.com/vit.cheremisinov