Метрики для Яндекс.Браузера

Предложите набор показателей и метрик, на которые нужно смотреть команде Яндекс.Браузера, чтобы следить за его успешностью и удовлетворенностью его пользователей.

Отслеживание различных показателей и метрик нужно в первую очередь для того, чтобы делать выводы о результативности работы над продуктом, а также, чтобы составлять на их основе планы и следить за их выполнением. Поэтому важно подобрать их так, чтобы они давали правильные стимулы для работы всей команды.

Яндекс.Браузер — бесплатный продукт, Яндекс разрабатывает его, чтобы продвигать его пользователям свои сервисы. Яндекс заинтересован в том, чтобы максимально увеличивать аудиторию Яндекс.Браузера, удерживая стоимость привлечения новых пользователей в некоторых пределах.

При этом Яндекс интересуют в первую очередь «качественные» пользователи, т. е. активные. Только среди активных пользователей получится продвигать другие продукты комании, именно они будут генерировать основную часть запросов в Яндекс (и просмотров рекламы Яндекс.Директ); именно активные пользователи реагируют на изменения в браузере и рекомендуют его другим людям.

Активных пользователей можно определять по-разному и для более удачной подстройки этого определения необходимо иметь статистику использования Яндекс.Браузера. Определение должно быть не слишком широким, чтобы исключить случайных пользователей, решивших опробовать Яндекс.Браузер или пользующимся им изредка как вторым браузером, но, в то же время, не слишком узким, чтобы учитывать пользователей, которые регулярно пользуются Яндекс.Браузером, но проводят не очень много времени в интернете.

Возможное определение: активный пользователь — пользователь, который за последние 7 дней хотя бы 3 дня просматривал больше 10 страниц в день или проводил в Яндекс.Браузере больше 30 минут в день.


Для того, чтобы человек стал активным пользователем Яндекс.Браузера, он сначала должен узнать о его существовании, затем перейти на сайт http://browser.yandex.ru, скачать его, установить, начать пользоваться и, наконец, начать пользоваться достаточно интенсивно, чтобы стать активным пользователем.

Этот процесс необходимо рассматривать в целом — как conversion funnel (воронку конверсии). На каждом этапе часть людей будет теряться. Необходимо отслеживать, какой процент и по какой причине не становится в итоге активным пользователем Яндекс.Браузера и что можно предпринять для каждого из этапов, чтобы уменьшить потери (например, делать акцент на разные достоинства Яндекс.Браузера для пользователей разных браузеров, поменять расположение кнопки «Скачать», и т. д.)

Первая группа показателей

1.1 Количество уникальных посетителей страницы http://browser.yandex.ru за сутки/месяц
1.2 Количество скачиваний приложения за сутки/месяц
1.3 Количество первых запусков Яндекс.Браузера за сутки/месяц
1.4 Процент уникальных посетителей, скачавших приложение
1.5 Процент пользователей, скачавших приложение, которые запустили его

Поскольку активные пользователи наиболее важны, их изучению необходимо уделить повышенное внимание. Поведение активных пользователей лучше всего указывает на их удовлетворённость и качество продукта

Вторая группа показателей

2.1 Количество активных пользователей
— успешность браузера в целом, лёгкость использования браузера новыми пользователями

2.2 Процент пользователей, которые были активными неделю/месяц назад и остались активными на этой неделе/в этом месяце
— удовлетворённость существующих активных пользователей, способность удерживать их, принятие ими нововведений

2.3 Среднее за последний месяц количество часов в день, которое активные пользователи используют Яндекс.Браузер
— вовлечённость пользователей

Показатели качества для Яндекс.Такси

Назовите несколько (4-5) ключевых численных показателей качества для сервиса Яндекс.Такси. Обоснуйте ваш выбор.

Поскольку для термина ‘ключевые показатели качества сервиса‘ ни в российской, ни в международной литературе (и интернете) не сложилось однозначного толкования, дадим определение, на которое мы будем опираться в рамках данного вопроса.

Под ключевыми показателями качества сервиса будем понимать наиболее важные однозначно трактуемые измеримые показатели, которые монотонно зависят от качества сервиса и максимально полно покрывают различные аспекты качества сервиса.

Такой подход позволяет объективно отслеживать качество сервиса, ставить цели по достижению определённых показателей и отслеживать достижение этих целей. (Измеримость позволяет сравнивать показатели; однозначная трактуемость гарантирует, что показатели не будут зависеть от того, как их понимает субъект, занимающийся измерениями; за счёт монотонной зависимости можно говорить, что увеличение/уменьшение показателя является индикатором улучшения качества.)

По возможности выбирались те показатели, которые напрямую отражают качество сервиса (а не успешность его рекламной кампании, прибыльность и прочие показатели) и которые можно получить, исходя из данных об использовании приложения.

Яндекс.Такси — сервис для заказа такси с мобильного устройства (iOS или Android) или через сайт. Качество этого сервиса складывается в первую очередь из удобства, надёжности и понятности мобильных приложений и сайта, надёжности серверной компоненты, времени ожидания такси и исполнительности таксопарков.


1. Процент возврата

Наиболее важный показатель. Он характеризует, какой процент пользователей вновь воспользовалось сервисом (т.е. был достаточно доволен качеством сервиса для того, чтобы воспользоваться им вновь). Чтобы рассчитать этот показатель, необходимо иметь возможность связать разные поездки одного и тоже пользователя (это решается за счёт того, что для совершения заказа необходимо указать номер мобильного телефона) и определиться, на каком интервале времени его рассчитывать. Бóльший интервал позволяет учитывать пользователей, которые реже пользуются такси, но при этом данные в меньшей степени отражают текущее качество сервиса. (Чтобы более оптимально выбрать размер интервала, необходимо иметь данные о распределении количества пользователей для каждого интервала между последней и предпоследней поездкой с шагом в 1 день).


2. Среднее время, уходящее на то, чтобы сделать заказ

Время, которое пользователи в среднем затрачивают с момента открытия приложения до момента, когда они заканчивают создание заказа и начинают ожидать предложений таксопарков.

Этот показатель характеризует удобство и интуитивность интерфейса, а также быстродействие приложения или сайта и его серверной компоненты.


3. Процент сбоев по вине таксопарка

Самая неприятная ситуация для пользователя сервиса — когда таксопарк принял заказ, но по какой-то причине такси не выехало на место, не прибыло во время или заказ был отменён таксопарком. Отношение числа заказов не выполненных или задержанных по вине таксопарка к числу принятых и не отменённых пользователем заказов будем называть процентом сбоев по вине таксопарка. Задача сервиса — минимизировать процент таких случаев за счёт отбора более надёжных партнёров и заключения с ними соглашений, мотивирующие их бороться со сбоями.
 

4. Взвешенный рейтинг в магазинах приложений

Средний рейтинг приложений в эпп-сторах с учётом количества пользователей. Данный показатель не всегда подходит для сравнения различных приложений, но важен при анализе изменения качества приложения с течением времени. Также он оперативно отражает реакцию пользователей на новые версии приложений и помогает узнавать о багах, делающих их непригодными к использованию.