SlideShare une entreprise Scribd logo
1  sur  29
Как мы готовим продукты –
     вклад аналитиков




              Михаил Карпов
Михаил Карпов



                2
Разные аналитики
•   Аналитик-стратег
•   Аналитик-математик
•   Региональный аналитик
•   Аналитик сервиса
•   Информационный архитектор
•   Исследователь интерфейсов
•   Аналитик-программист
•   Менеджер-аналитик
                                3
Основные задачи
        аналитиков сервиса
• Подготовка запуска
• Регулярная аналитическая
  поддержка сервиса (через отчеты)
• Сопровождение и анализ крупных РК
  на всех этапах
• Отслеживание рынка
• Ответы на почти любые разовые
  аналитические вопросы
                                      4
• Решение длительной задачи пользователя
• Неидентичность пользователей
• Часто новые




                                           5
История №1:
  «Старт»


              6
«Карта мира»
                  й се рвис
           Новы




                              7
Что внутри
• Создаётся отделом информационных
  архитекторов:
  – Группа пользователей
  – Цели, задачи, проблемы
  – Этапы использования




                                     8
Инструменты
Цель: расставить приоритеты группам
пользователей и их задачам
•открытые источники (исследования, Госкомстат),
•внешние заказные исследования (TNS),
•логи наших сервисов (wordstat, Поиск),
•внешние статистики (LiveInternet,
упоминания, Comscore),
•анализ конкурентов
                                             9
10
История №1, итоги:
• Оценить группы и задачи
  пользователей
• Составить анализ предметной
  области
• Предложить
  долгострочную
  стратегию
                                11
История №2:
  «Запуск»


              12
KPI?
Сильно отличаются в зависимости от задачи:
•охват поисковых запросов
•качество ответа на Поиске,
•аудитория (доля рынка),
•возвращаемость,
•узнаваемость,
•деньги

                                             13
Что оцениваем
• Насколько заметно (по доле людей, например)
• Так ли используется (логи и Метрика)
• Не нашли ли люди дополнительного профита,
  который мы не предполагали
• Как запуск помог
  окружению
  (возвращаемость и пр.)


                                          14
Юзабилити




Проверяем:
  – гипотезы
  – пользовательские сценарии   15
История №2, итоги:
• Получить приборы и гипотезы
• Сделать вывод о запуске
• Выдать рекоммендации




                                16
История №3:
  «Жизнь»


              17
СМИ
Даша (СМИ)
•Как правильно считать (выбросы и прочее)
•[Как?]




                                            18
Маркетинг
Олег (маркетинг)
•Веб-аналитика (конвертация пользователей, ..)
•Какие эксперименты нужны
•[Что?]




                                                 19
Менеджер




• Склад       • Музей
                –   есть гид
                –   понятен порядок
                –   изучают поведение
                –   убирают непросматриваемое
«Карточки персонажей»




• Описание характеристик человека
• Как проводит день
• Какие основные ценности           21
История №3, итоги:
• Обсчёт запусков фич и рекламы
• Обработка данных для СМИ
• Анализ поведения пользователей




                                   22
Подводя итоги
• Аналитик - это НЕ про анализ требований
• Аналитик это тот, кто поможет:
  – формализовать ожидания от запуска и оценить
    его на разных этапах,
  – найти узкие и проблемные места,
  – расставить приоритеты, указать на
    возможности
  – креатив, новые подходы

                                              23
! Хол ивар


История №4:
 «Счастье»


                       24
Как посчитать счастье
            пользователей?
•   Количество просмотренных страниц
•   Густота кликов
•   Используемость фич
•   Длина сессии
•   Количество уникальных посетителей
•   Время между кликами
•   …
            Решил ли он свою задачу?
            Получил ли он ответ?        25
26
Сложности
• Посчитать
  • надо считать по каждой из групп
  • сессии до и после прихода не сервис
  • поведение на сервисе и на других сайтах
  • составить кучу поведенческих случаев
• Очень «дорого»
  • сотни кейсов
  • посчитать-то можем, но вот использовать на
    продакшене – не сможем

                                                 27
История №4, итоги:
• Не знаем что такое «счастье
  пользователей»
• Не знаем что должно
  происходить, когда
  оно случается
• Много/долго/сложно
  считать
                                28
Спасибо за внимание!

             Вопросы?
Карпов Михаил (michail.karpov@ya.ru)


   pmrussia.blogspot.com
   @michailkarpov

                                       29

Contenu connexe

Tendances

Ольга Стратанович - Менеджер будущего
Ольга Стратанович - Менеджер будущегоОльга Стратанович - Менеджер будущего
Ольга Стратанович - Менеджер будущегоIT61
 
Есть ли польза от CJM при отсутствии customer'ов (и услуг)
Есть ли польза от CJM при отсутствии customer'ов (и услуг) Есть ли польза от CJM при отсутствии customer'ов (и услуг)
Есть ли польза от CJM при отсутствии customer'ов (и услуг) Nikita Efimov
 
Елена Саух, Марк Платонов. Как мы стали такими?
Елена Саух, Марк Платонов. Как мы стали такими?Елена Саух, Марк Платонов. Как мы стали такими?
Елена Саух, Марк Платонов. Как мы стали такими?ScrumTrek
 
Владимир Каленов. Перезапуск ретроспективы по модели Коттера
Владимир Каленов. Перезапуск ретроспективы по модели КоттераВладимир Каленов. Перезапуск ретроспективы по модели Коттера
Владимир Каленов. Перезапуск ретроспективы по модели КоттераScrumTrek
 
Антон Сержантов. Эволюция ретроспективы
Антон Сержантов. Эволюция ретроспективыАнтон Сержантов. Эволюция ретроспективы
Антон Сержантов. Эволюция ретроспективыScrumTrek
 
Мааленькая история Стикеров
Мааленькая история СтикеровМааленькая история Стикеров
Мааленькая история СтикеровMike B.
 
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)Ontico
 
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.CEE-SEC(R)
 
Павел Капусткин. Улучшаем ретроспективу шаг за шагом
Павел Капусткин. Улучшаем ретроспективу шаг за шагомПавел Капусткин. Улучшаем ретроспективу шаг за шагом
Павел Капусткин. Улучшаем ретроспективу шаг за шагомScrumTrek
 
Спираль руководителя
Спираль руководителяСпираль руководителя
Спираль руководителяiQSpace
 
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...Alexey Chernyak
 
карьера в IT инжиниринге. Как о ней правильно думать
карьера в IT инжиниринге. Как о ней правильно думатькарьера в IT инжиниринге. Как о ней правильно думать
карьера в IT инжиниринге. Как о ней правильно думатьViktoriya Pridatko
 
Лидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопросЛидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопросSQALab
 
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...Mikhail Payson
 
Индивидуальное и командное сопротивление изменениям.
Индивидуальное и командное сопротивление изменениям.Индивидуальное и командное сопротивление изменениям.
Индивидуальное и командное сопротивление изменениям.Svetlana Mukhina ICP, -ATF, -BVA, - ACC, PSM I, CSPO
 
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...UA Mobile
 

Tendances (20)

Ольга Стратанович - Менеджер будущего
Ольга Стратанович - Менеджер будущегоОльга Стратанович - Менеджер будущего
Ольга Стратанович - Менеджер будущего
 
Есть ли польза от CJM при отсутствии customer'ов (и услуг)
Есть ли польза от CJM при отсутствии customer'ов (и услуг) Есть ли польза от CJM при отсутствии customer'ов (и услуг)
Есть ли польза от CJM при отсутствии customer'ов (и услуг)
 
Елена Саух, Марк Платонов. Как мы стали такими?
Елена Саух, Марк Платонов. Как мы стали такими?Елена Саух, Марк Платонов. Как мы стали такими?
Елена Саух, Марк Платонов. Как мы стали такими?
 
Project.priority
Project.priorityProject.priority
Project.priority
 
Владимир Каленов. Перезапуск ретроспективы по модели Коттера
Владимир Каленов. Перезапуск ретроспективы по модели КоттераВладимир Каленов. Перезапуск ретроспективы по модели Коттера
Владимир Каленов. Перезапуск ретроспективы по модели Коттера
 
Антон Сержантов. Эволюция ретроспективы
Антон Сержантов. Эволюция ретроспективыАнтон Сержантов. Эволюция ретроспективы
Антон Сержантов. Эволюция ретроспективы
 
Мааленькая история Стикеров
Мааленькая история СтикеровМааленькая история Стикеров
Мааленькая история Стикеров
 
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)
Ключевые навыки успешной Agile-команды / Дмитрий Лобасев (lobasev.ru)
 
Qa career how to start
Qa career how to startQa career how to start
Qa career how to start
 
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.
Сопротивление изменениям. Как помочь команде пережить процессную трансформацию.
 
Павел Капусткин. Улучшаем ретроспективу шаг за шагом
Павел Капусткин. Улучшаем ретроспективу шаг за шагомПавел Капусткин. Улучшаем ретроспективу шаг за шагом
Павел Капусткин. Улучшаем ретроспективу шаг за шагом
 
Спираль руководителя
Спираль руководителяСпираль руководителя
Спираль руководителя
 
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...
Мастер-класс «Искусство сочинять мечты, или Основы персональной эффективности...
 
От идеи до рабочей MVP
От идеи до рабочей MVPОт идеи до рабочей MVP
От идеи до рабочей MVP
 
карьера в IT инжиниринге. Как о ней правильно думать
карьера в IT инжиниринге. Как о ней правильно думатькарьера в IT инжиниринге. Как о ней правильно думать
карьера в IT инжиниринге. Как о ней правильно думать
 
Лидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопросЛидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопрос
 
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...
Промышленная разработка ПО. Лекция 8. Особенности работы руководителя проекто...
 
Индивидуальное и командное сопротивление изменениям.
Индивидуальное и командное сопротивление изменениям.Индивидуальное и командное сопротивление изменениям.
Индивидуальное и командное сопротивление изменениям.
 
Деловая Среда, команда
Деловая Среда, командаДеловая Среда, команда
Деловая Среда, команда
 
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...
Алексей Лельчук - От аутсорсинга к продуктам: трансформация компании и ментал...
 

Similaire à (Analyst days2012) Как мы готовим продукты - вклад аналитиков

How to study your audience? End user research
How to study your audience? End user researchHow to study your audience? End user research
How to study your audience? End user researchEugene Kulakov
 
001 аналитик
001 аналитик001 аналитик
001 аналитикYandex
 
Jaga jam анализ конкурентов + статегия
Jaga jam анализ конкурентов + статегияJaga jam анализ конкурентов + статегия
Jaga jam анализ конкурентов + статегияIQBuzz
 
Стратегия работы в социальных медиа
Стратегия работы в социальных медиаСтратегия работы в социальных медиа
Стратегия работы в социальных медиаAnna Rokina
 
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифа
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифаЗакупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифа
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифаDALEE digital agency
 
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...PCampRussia
 
Место аналитики в процессе проектирования интерфейса
Место аналитики в процессе проектирования интерфейсаМесто аналитики в процессе проектирования интерфейса
Место аналитики в процессе проектирования интерфейсаNikita Efimov
 
Маркетинг в социальных сетях
Маркетинг в социальных сетяхМаркетинг в социальных сетях
Маркетинг в социальных сетяхNikolay Krylov
 
10 основных метрик для анализа вашего сайта - 1.12.2014
10 основных метрик для анализа вашего сайта - 1.12.201410 основных метрик для анализа вашего сайта - 1.12.2014
10 основных метрик для анализа вашего сайта - 1.12.2014O K
 
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...Ирина Галкина
 
Интернет-продвижение объектов коммерческой недвижимости. Molinos.Ru.
Интернет-продвижение  объектов коммерческой  недвижимости. Molinos.Ru.Интернет-продвижение  объектов коммерческой  недвижимости. Molinos.Ru.
Интернет-продвижение объектов коммерческой недвижимости. Molinos.Ru.leskov110280
 
3 5 3_miheeva_natalia
3 5 3_miheeva_natalia3 5 3_miheeva_natalia
3 5 3_miheeva_nataliaNika Stuard
 
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджера
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджераМаксим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджера
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджераScrumTrek
 
Аналитика и метрики приложений 29.11.2016 г.
Аналитика и метрики приложений 29.11.2016 г.Аналитика и метрики приложений 29.11.2016 г.
Аналитика и метрики приложений 29.11.2016 г.SPbCoA
 
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"Business incubator HSE
 
Как выбирать задачи, полезные для продукта
Как выбирать задачи, полезные для продуктаКак выбирать задачи, полезные для продукта
Как выбирать задачи, полезные для продуктаSQALab
 
Social insight
Social insightSocial insight
Social insightAlbert
 
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?CodeFest
 

Similaire à (Analyst days2012) Как мы готовим продукты - вклад аналитиков (20)

How to study your audience? End user research
How to study your audience? End user researchHow to study your audience? End user research
How to study your audience? End user research
 
001 аналитик
001 аналитик001 аналитик
001 аналитик
 
Jaga jam анализ конкурентов + статегия
Jaga jam анализ конкурентов + статегияJaga jam анализ конкурентов + статегия
Jaga jam анализ конкурентов + статегия
 
Стратегия работы в социальных медиа
Стратегия работы в социальных медиаСтратегия работы в социальных медиа
Стратегия работы в социальных медиа
 
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифа
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифаЗакупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифа
Закупка digital-услуг. Постановка проблемы. Тендеры. Пример качественного брифа
 
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...
Про построение стартап-лаборатории, процесс тестирования бизнес моделей (Вале...
 
Место аналитики в процессе проектирования интерфейса
Место аналитики в процессе проектирования интерфейсаМесто аналитики в процессе проектирования интерфейса
Место аналитики в процессе проектирования интерфейса
 
Маркетинг в социальных сетях
Маркетинг в социальных сетяхМаркетинг в социальных сетях
Маркетинг в социальных сетях
 
10 основных метрик для анализа вашего сайта - 1.12.2014
10 основных метрик для анализа вашего сайта - 1.12.201410 основных метрик для анализа вашего сайта - 1.12.2014
10 основных метрик для анализа вашего сайта - 1.12.2014
 
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...
Тема 1.Маркетинговое исследование: определение, процедура, планирование, типо...
 
Лекция 8
Лекция 8Лекция 8
Лекция 8
 
Интернет-продвижение объектов коммерческой недвижимости. Molinos.Ru.
Интернет-продвижение  объектов коммерческой  недвижимости. Molinos.Ru.Интернет-продвижение  объектов коммерческой  недвижимости. Molinos.Ru.
Интернет-продвижение объектов коммерческой недвижимости. Molinos.Ru.
 
3 5 3_miheeva_natalia
3 5 3_miheeva_natalia3 5 3_miheeva_natalia
3 5 3_miheeva_natalia
 
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджера
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджераМаксим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджера
Максим Мельников. Как мы меняли ЦИАН. Эволюция продакт-менеджера
 
Аналитика и метрики приложений 29.11.2016 г.
Аналитика и метрики приложений 29.11.2016 г.Аналитика и метрики приложений 29.11.2016 г.
Аналитика и метрики приложений 29.11.2016 г.
 
ЛШ 2016 П1 Форматы и каналы привлечения стартапов - Кист, Авдеев, Шестакова
ЛШ 2016 П1 Форматы и каналы привлечения стартапов - Кист, Авдеев, ШестаковаЛШ 2016 П1 Форматы и каналы привлечения стартапов - Кист, Авдеев, Шестакова
ЛШ 2016 П1 Форматы и каналы привлечения стартапов - Кист, Авдеев, Шестакова
 
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"
HSEsun2016: панельная дискуссия "Форматы и каналы привлечения стартапов"
 
Как выбирать задачи, полезные для продукта
Как выбирать задачи, полезные для продуктаКак выбирать задачи, полезные для продукта
Как выбирать задачи, полезные для продукта
 
Social insight
Social insightSocial insight
Social insight
 
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?
CodeFest 2012. Баркан Г. — Как научиться делать продукт для пользователей?
 

Plus de Michael Karpov

EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...Michael Karpov
 
Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Michael Karpov
 
Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Michael Karpov
 
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Michael Karpov
 
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Michael Karpov
 
Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Michael Karpov
 
Hpc Visualization with WebGL
Hpc Visualization with WebGLHpc Visualization with WebGL
Hpc Visualization with WebGLMichael Karpov
 
Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Michael Karpov
 
сбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesсбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesMichael Karpov
 
Зачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеЗачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеMichael Karpov
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile командеMichael Karpov
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile командеMichael Karpov
 
Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Michael Karpov
 
How to give a great research talk
How to give a great research talkHow to give a great research talk
How to give a great research talkMichael Karpov
 
20090720 writing a_paper
20090720 writing a_paper20090720 writing a_paper
20090720 writing a_paperMichael Karpov
 
суперкомпьютерные технологии в задачах прогноза погоды
суперкомпьютерные технологии в задачах прогноза погодысуперкомпьютерные технологии в задачах прогноза погоды
суперкомпьютерные технологии в задачах прогноза погодыMichael Karpov
 

Plus de Michael Karpov (20)

EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
EdCrunch 2018 - Skyeng - EdTech product scaling: How to influence key growth ...
 
Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)Movement to business goals: Data, Team, Users (4C Conference)
Movement to business goals: Data, Team, Users (4C Conference)
 
Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016 Save Africa: NASA hackathon 2016
Save Africa: NASA hackathon 2016
 
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014) Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
Из третьего мира - в первый: ошибки в развивающихся продуктах (AgileDays 2014)
 
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
Один день из жизни менеджера. Тактика: хорошие практики, скрытые опасности и ...
 
Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)Поговорим про ошибки (Sumit)
Поговорим про ошибки (Sumit)
 
Hpc Visualization with WebGL
Hpc Visualization with WebGLHpc Visualization with WebGL
Hpc Visualization with WebGL
 
Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)Hpc Visualization with X3D (Michail Karpov)
Hpc Visualization with X3D (Michail Karpov)
 
сбор требований с помощью Innovation games
сбор требований с помощью Innovation gamesсбор требований с помощью Innovation games
сбор требований с помощью Innovation games
 
Зачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile командеЗачем нам Это? или Как продать agile команде
Зачем нам Это? или Как продать agile команде
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде
 
"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде"Зачем нам Это?" или как продать Agile команде
"Зачем нам Это?" или как продать Agile команде
 
HPC Visualization
HPC VisualizationHPC Visualization
HPC Visualization
 
Hpc Visualization
Hpc VisualizationHpc Visualization
Hpc Visualization
 
Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010Высоконагруженая команда - AgileDays 2010
Высоконагруженая команда - AgileDays 2010
 
How to give a great research talk
How to give a great research talkHow to give a great research talk
How to give a great research talk
 
20090720 writing a_paper
20090720 writing a_paper20090720 writing a_paper
20090720 writing a_paper
 
Tbb описание
Tbb   описаниеTbb   описание
Tbb описание
 
Tbb лр1
Tbb   лр1Tbb   лр1
Tbb лр1
 
суперкомпьютерные технологии в задачах прогноза погоды
суперкомпьютерные технологии в задачах прогноза погодысуперкомпьютерные технологии в задачах прогноза погоды
суперкомпьютерные технологии в задачах прогноза погоды
 

(Analyst days2012) Как мы готовим продукты - вклад аналитиков

  • 1. Как мы готовим продукты – вклад аналитиков Михаил Карпов
  • 3. Разные аналитики • Аналитик-стратег • Аналитик-математик • Региональный аналитик • Аналитик сервиса • Информационный архитектор • Исследователь интерфейсов • Аналитик-программист • Менеджер-аналитик 3
  • 4. Основные задачи аналитиков сервиса • Подготовка запуска • Регулярная аналитическая поддержка сервиса (через отчеты) • Сопровождение и анализ крупных РК на всех этапах • Отслеживание рынка • Ответы на почти любые разовые аналитические вопросы 4
  • 5. • Решение длительной задачи пользователя • Неидентичность пользователей • Часто новые 5
  • 6. История №1: «Старт» 6
  • 7. «Карта мира» й се рвис Новы 7
  • 8. Что внутри • Создаётся отделом информационных архитекторов: – Группа пользователей – Цели, задачи, проблемы – Этапы использования 8
  • 9. Инструменты Цель: расставить приоритеты группам пользователей и их задачам •открытые источники (исследования, Госкомстат), •внешние заказные исследования (TNS), •логи наших сервисов (wordstat, Поиск), •внешние статистики (LiveInternet, упоминания, Comscore), •анализ конкурентов 9
  • 10. 10
  • 11. История №1, итоги: • Оценить группы и задачи пользователей • Составить анализ предметной области • Предложить долгострочную стратегию 11
  • 12. История №2: «Запуск» 12
  • 13. KPI? Сильно отличаются в зависимости от задачи: •охват поисковых запросов •качество ответа на Поиске, •аудитория (доля рынка), •возвращаемость, •узнаваемость, •деньги 13
  • 14. Что оцениваем • Насколько заметно (по доле людей, например) • Так ли используется (логи и Метрика) • Не нашли ли люди дополнительного профита, который мы не предполагали • Как запуск помог окружению (возвращаемость и пр.) 14
  • 15. Юзабилити Проверяем: – гипотезы – пользовательские сценарии 15
  • 16. История №2, итоги: • Получить приборы и гипотезы • Сделать вывод о запуске • Выдать рекоммендации 16
  • 17. История №3: «Жизнь» 17
  • 18. СМИ Даша (СМИ) •Как правильно считать (выбросы и прочее) •[Как?] 18
  • 19. Маркетинг Олег (маркетинг) •Веб-аналитика (конвертация пользователей, ..) •Какие эксперименты нужны •[Что?] 19
  • 20. Менеджер • Склад • Музей – есть гид – понятен порядок – изучают поведение – убирают непросматриваемое
  • 21. «Карточки персонажей» • Описание характеристик человека • Как проводит день • Какие основные ценности 21
  • 22. История №3, итоги: • Обсчёт запусков фич и рекламы • Обработка данных для СМИ • Анализ поведения пользователей 22
  • 23. Подводя итоги • Аналитик - это НЕ про анализ требований • Аналитик это тот, кто поможет: – формализовать ожидания от запуска и оценить его на разных этапах, – найти узкие и проблемные места, – расставить приоритеты, указать на возможности – креатив, новые подходы 23
  • 24. ! Хол ивар История №4: «Счастье» 24
  • 25. Как посчитать счастье пользователей? • Количество просмотренных страниц • Густота кликов • Используемость фич • Длина сессии • Количество уникальных посетителей • Время между кликами • … Решил ли он свою задачу? Получил ли он ответ? 25
  • 26. 26
  • 27. Сложности • Посчитать • надо считать по каждой из групп • сессии до и после прихода не сервис • поведение на сервисе и на других сайтах • составить кучу поведенческих случаев • Очень «дорого» • сотни кейсов • посчитать-то можем, но вот использовать на продакшене – не сможем 27
  • 28. История №4, итоги: • Не знаем что такое «счастье пользователей» • Не знаем что должно происходить, когда оно случается • Много/долго/сложно считать 28
  • 29. Спасибо за внимание! Вопросы? Карпов Михаил (michail.karpov@ya.ru) pmrussia.blogspot.com @michailkarpov 29

Notes de l'éditeur

  1. Нет внешнего заказчика Есть конкуренты Веб О том как мы пытаемся быстрее сделать продукт, который понравится пользователям.
  2. Аналитики у нас бывают всякие разные. Всех обсудить не сможем, поэтому, поговорим про основную группу – «продуктовых аналитиков» (аналитиков сервиса) и немного обсудим исследователей интерфейсов (юзабилистов, занимающихся проектированием взаимодействия пользователей с сервисом) и информационных архитекторов (занимающихся анализом предметной области).
  3. Таким образом основные задачи аналитиков получаются такими… Эти задачи распределяются у нас между тремя типами аналитиков…
  4. Про Яндекс: Продуктовая разработка – делаем продукты, основная цель – ответить на вопросы пользователей Берем кейс Яндекс.Работы (агрегатор вакансий с работных сайтов). Поиск работы – это длительный процесс, продолжительный вопрос пользователя. Особенность – часто меняется состав пользователей.
  5. Про Яндекс: Продуктовая разработка – делаем продукты, основная цель – ответить на вопросы пользователей Берем кейс Яндекс.Работы (агрегатор вакансий с работных сайтов). Поиск работы – это длительный процесс, продолжительный вопрос пользователя. Особенность – часто меняется состав пользователей.
  6. Значит, придумали мы «зафигачить» сайт на котором будут все объявления о работе с России, Украины, Белоруси и Казахстана. То есть собрать объявления с ведущих сайтов ( hh, superjob,.. ) и показать их в едином интерфейсе. Прикинули, что запросы про работу это примерно 1% от всех запросов в Яндекс (то есть действительно оочень много), решили делать. Нужно было понять состояние работного рынка, поэтому мы пошли к нашей группе информационных архитекторов.
  7. Для Яндекс.Работы, анализ предметной области инфархи разложили по следующим основам-осям.
  8. В результате – получили, например, такой артефакт. Ещё есть артефакты с обзором конкурентов и с фичами для пользователей. По вертикали –ти пы пользователей, по горизонтали – этапы поиска работы, которые они проходят. Итого к «Истории 1»: Получаем общий анализ предметной области. Понимаем с чего начать – важнейшие группы пользователей и базовые фичи для них. Получаем долгострочную стратегию, понимаем куда двигаться дальше.
  9. Собираем фидбэк и «оцениваем волну» Сравниваем с плановыми показателями Сравниваем с рынком (лететь не медленнее)
  10. Нужны не только ключевые показатели, но и понимание как используется запущенная функциональность. Насколько то, что мы сделали заметно, используется (по доле людей например) Насколько то, для чего мы что-то делали так и используется (мы ожидали одного поведения, оказалось ли оно таким?) Не нашли ли люди дополнительного профита, который мы не предполагали Как запуск помог окружению – если это новый функционал в сервисе, то как он помог сервису (вот тут как раз возвращаемость и пр)
  11. Поскольку залезть в голову мы не можем, то мы проводим юзабилити-исследования. Есть гипотезы и вопросы, которые мы не можем проверить релизом или не всегда можем их быстро понять, или просто их так много, что не понятно какую из них стоит проверять рассчётами. Поэтому делаем не только количественную проверку, но и качественную. Например, выкатывали новый элемент функциональности в Яндекс-Поиске – а люди не кликали, - это, видимо, говорило, о том, что они не видят – надобы сделать заметнее, побольше. Ан нет – оказалось, что пользователи просто не доверяли самой функциональности, принимая её за рекламу и спам.
  12. Собираем фидбэк и «оцениваем волну» Сравниваем с плановыми показателями Сравниваем с рынком (лететь не медленнее)
  13. Про Яндекс: Продуктовая разработка – делаем продукты, основная цель – ответить на вопросы пользователей Берем кейс Яндекс.Работы (агрегатор вакансий с работных сайтов). Поиск работы – это длительный процесс, продолжительный вопрос пользователя. Особенность – часто меняется состав пользователей.
  14. Мы сидим на огромной груде информации и время от времени выпускаем исследования, построенные на этой информации. Само собой эту информацию надо уметь правильно и грамотно подсчитывать.
  15. Задача – найти аналитика для решения задач уже готового сервиса. Тут уже несколько другие задачи и требования.
  16. Оценивать запуски, «кнопки докручивать». Сервис растёт, фич становиться всё больше и со временем он уже начинает походить на склад. Фич много, не всем пользователям они нужны, и большая часть пользователей можно спокойно не знать про какую-то полезную функциональность на сервисе. А хочется, чтобы сервис больше походил на музей.
  17. Хочется знать о пользователях больше, чтобы, в иделе, сделать для каждого из них (или хотя бы для каждой из групп) свой персональный гид. Истории: про поведение бухгалтеров и водителей про мультирегиональность По результатам - можем изменять поведение сервиса в зависимости от определяемой группы пользователя Инструменты / что считаем – используемость фич, характер запросов, возвращаемость
  18. Собираем фидбэк и «оцениваем волну» Сравниваем с плановыми показателями Сравниваем с рынком (лететь не медленнее)
  19. Требованиями занимается проектный менеджер, являющийся и продуктовым
  20. CTR и клики невсегда помогают оценить «счастье» пользователей (!! Пример !!), поэтому пробуем найти другие метрики. Оценить получил ли пользователь ответ на свой вопрос в нашем случае достаточно сложно – не ясно как это проверить. Я бы с радостью в кулуарах с кем-нибудь подискутировал на эту тему.
  21. В каких-то случаях можем посчитать дали ли мы ответ, а в каких-то – это проблематично. Кейс 1: например, сделали сниппеты более информативными, - что должно было измениться, должны ли стать по ним чаще кликать? А ничего не изменилось, хотя с продуктовой стороны – это полезная выкатка. Кейс 2: изменили релевантность – тоже не ясно должны дольше листать или нет?
  22. CTR и клики невсегда помогают оценить «счастье» пользователей (!! Пример !!), поэтому пробуем найти другие метрики. Оценить получил ли пользователь ответ на свой вопрос в нашем случае достаточно сложно – не ясно как это проверить. Я бы с радостью в кулуарах с кем-нибудь подискутировал на эту тему. Это действительно сложная задача, которую мы до сих пор пытаемся решить.
  23. Собираем фидбэк и «оцениваем волну» Сравниваем с плановыми показателями Сравниваем с рынком (лететь не медленнее)