Как правильно измерять показатели продукта, чтобы построить то, что действительно нужно пользователям? Основатель аналитической платформы Mixpanel Сухейл Доши (Suhail Doshi) на лекции в Y Combinator делится практическим руководством по работе с метриками для стартапов на ранней стадии. Спикер разбирает три главных вопроса продуктовой аналитики, универсальную формулу роста и опасности избыточного усложнения данных.
📊 От первого коммита до $100 млн ARR: Опыт Mixpanel 0:00
В октябре 2008 года двадцатилетний Сухейл Доши написал первую строчку кода Mixpanel в спальне родительского дома. Спустя десять лет компания выросла до 300 сотрудников, привлекла значительные инвестиции, обслуживает около 7000 платящих клиентов и приближается к отметке в $100 млн годовой повторяющейся выручки (ARR).
Проводя опрос среди аудитории Y Combinator, Сухейл Доши выяснил текущий масштаб проектов начинающих предпринимателей:
- Большинство присутствующих основателей имеют ровно ноль пользователей.
- Значительная часть аудитории имеет от 1 до 100 пользователей.
- Лишь единицы могут похвастаться базой, превышающей 10 000 пользователей.
Платформа Mixpanel помогает визуализировать действия людей внутри приложений — отслеживать воронки конверсии, измерять удержание (retention) и анализировать вовлеченность. Спикер подчеркивает, что все описываемые им принципы универсальны, а для их внедрения на практике подойдет любой современный аналитический инструмент.
🧮 Универсальная формула роста и опасность усложнения 4:48
По мнению Сухейла Доши, долгосрочный рост компании опирается на базовые принципы, которые можно разложить в простую формулу. Спикер выделяет пять основных рычагов, определяющих динамику развития любого стартапа:
- Визиты (Visits): пользователи заходят на посадочную страницу приложения.
- Регистрации (Signups): посетители успешно создают учетную запись.
- Ценные действия (Valuable Actions): пользователи совершают ключевое действие, ради которого создан продукт (например, смотрят видео, готовят по рецепту или арендуют самокат).
- Удержание (Retention): люди возвращаются в продукт через определенный промежуток времени.
- Виральность или Продажи (Spread): пользователи делятся продуктом с друзьями или приложение продвигается силами сейлз-команды.
Спикер настоятельно рекомендует стартапам сосредоточиться на основах, поскольку даже компании с тысячным штатом регулярно совершают здесь ошибки. Главная проблема крупных игроков, по словам гостя, заключается в избыточном усложнении метрик. Когда команда пытается отслеживать 25 различных показателей одновременно, внутри организации наступает управленческий паралич.
Сухейл Доши делится внутренним правилом Mixpanel: любые данные можно оспорить, сославшись на внешние факторы, вроде хорошей погоды на улице. Поскольку выявить истинную причинно-следственную связь крайне тяжело, спикер советует выбрать от 3 до 5 ключевых метрик для ведения команды за собой, разделив их на направляющие (guide) и мониторинговые (monitor).
🧩 Шаг 1: Понимают ли пользователи ваш продукт? 9:30
Главным врагом конверсии на первом этапе Сухейл Доши называет кнопку «Назад» в браузере. Ссылаясь на сооснователя Y Combinator Пола Грэма, спикер отмечает, что рука пользователя всегда занесена над кнопкой отмены, готовая среагировать на малейшую двусмысленность интерфейса.
В качестве примера неудачного позиционирования гость демонстрирует первую посадочную страницу Mixpanel образца 2009 года:
- Слоган компании гласил: «Метрики, от которых потекут слюнки» (Metrics that'll make you drool). Спикер признает, что этот выбор был ошибочным и опирался лишь на его личное мнение о красоте графиков платформы.
- Текст содержал массу грамматических ошибок.
- Вместо четкого позиционирования сайт пытался таргетировать всех подряд: разработчиков, маленькие стартапы и крупные корпорации одновременно. Единственным удачным элементом, по ироничному замечанию Доши, оказалась яркая желтая кнопка регистрации.
Спустя годы и сотни интервью с клиентами компания сменила позиционирование на «Дела важнее страниц» (Actions speak louder than pages). Это позволило четко отстроиться от главного конкурента в лице Google Analytics, который измерял лишь просмотры страниц, в то время как Mixpanel фокусировалась на вовлеченности. Новый слоган успешно проработал более пяти лет.
Для измерения того, насколько понятен продукт аудитории, Сухейл Доши предлагает отслеживать процент людей, которые решились на регистрацию, а также анализировать кликабельность разделов с описанием функций. В сфере B2B спикер выделяет клики по странице с ценами (Pricing page) как один из самых сильных индикаторов явного коммерческого интереса к продукту.
🚀 Шаг 2: Насколько легко начать им пользоваться? 15:43
Если первый шаг воронки не оптимизирован, у стартапа не будет шанса показать клиентам свои продвинутые функции. Сухейл Доши призывает безжалостно отсекать второстепенные технические задачи на раннем этапе. В качестве примера он приводит стартап Zenter (выпускник YC, позже поглощенный Google и превратившийся в Google Slides): разработчики проекта первые 18 месяцев не создавали кнопку «Сохранить», проверяя, станет ли онлайн-редактор презентаций хоть кому-то интересен. Сама Mixpanel первые полтора года работала без функции восстановления забытого пароля, перенаправляя ресурсы на критически важные для клиентов фичи.
Для иллюстрации качественного онбординга спикер приводит два примера:
- Google: абсолютная простота, где пользователь сразу получает доступ к строке поиска без обязательной регистрации и ввода капчи.
- Airbnb: сложный b2c-продукт, скрывающий под капотом комплексный 11-страничный процесс проверки и оплаты недвижимости. На главной странице пользователя встречает лишь лаконичная форма поиска уникального жилья.
Базовым инструментом измерения онбординга выступает классическая воронка, отслеживающая путь от визита сайта до первого ценного действия. Спикер делится наблюдением из индустрии видеоигр: воронки игровых компаний могут состоять из 20–30 шагов и показывать высокую итоговую конверсию в 80–90%, поскольку самый драматичный отток аудитории всегда происходит на первых двух шагах. Второй важнейший показатель здесь — скорость. Спикер рекомендует замерять, сколько минут требуется человеку, чтобы разобраться в интерфейсе и получить первый результат.
Среди тактических советов по онбордингу Доши выделяет следующие правила:
- Отказ от ранней борьбы с фродом: у молодого стартапа нет проблем со спамом, поэтому не нужно усложнять жизнь реальным клиентам.
- Отказ от обязательного подтверждения почты/SMS на старте: по данным спикера, требование подтвердить контакты сразу срезает конверсию на 60–70%, а сами письма часто улетают в спам.
- Максимально открытый доступ: по возможности стоит пускать людей внутрь продукта еще до создания аккаунта.
🦈 Шаг 3: Возвращаются ли они? «Эффект акульего плавника» 22:55
Игнорирование показателей удержания (retention) Сухейл Доши считает главной причиной внезапной смерти стартапов. Спикер утверждает, что лично наблюдал крах около 15 компаний, которые демонстрировали взрывной виральный рост, но полностью вымерли из-за отсутствия повторного интереса со стороны пользователей.
Этот феномен Доши называет «эффектом акульего плавника» (Shark fin effect). График таких проектов показывает резкий вертикальный взлет на волне хайпа в социальных сетях, а затем столь же стремительное падение, напоминающее спинной плавник акулы. Как только скорость оттока старых пользователей превышает темпы привлечения новых, стартап сгорает. Попытки спасти ситуацию с помощью реактивационных email-кампаний, по мнению спикера, практически никогда не приносят успеха. Хрестоматийным примером такой ловушки Доши называет проект LivingSocial, чье виральное приложение на Facebook быстро потеряло аудиторию, вынудив команду экстренно менять бизнес-модель и уходить в сегмент купонных сервисов для конкуренции с Groupon.
Для предотвращения этой проблемы спикер рекомендует три метрики:
- Когортный анализ удержания новых пользователей: необходимо жестко фиксировать процент людей, возвращающихся через 7 и 30 дней после регистрации.
- Ежедневные активные пользователи (DAU): Доши называет метрику ежемесячной активности (MAU) абсолютно бессмысленным и «мусорным» показателем, раздувающим эго основателей, аналогично числу зарегистрированных аккаунтов (как в свое время поступала сеть LinkedIn, заявляя о 200 млн регистраций). Mixpanel выявила прямую корреляцию в B2B-сегменте: удержание платящих клиентов напрямую зависит от уровня их ежедневного использования платформы.
- Ежемесячный отток денег (Monthly Dollar Churn): критически важный показатель для подписочных сервисов.
Сухейл Доши наглядно демонстрирует коварство математики регулярного оттока:
«Если ваш ежемесячный денежный отток составляет 7%, вам может показаться, что все отлично, ведь вы удерживаете 93% выручки каждый месяц. Но если экстраполировать это на 12 месяцев, вы обнаружите, что за год теряете 58% своего дохода. Начиная новый год, вы будете тратить колоссальные ресурсы маркетинга и разработки лишь на то, чтобы закрыть эту дыру и вернуться к прежним показателям, вместо того чтобы расти дальше».
🗣️ Что делать, если у вас меньше 50 пользователей? 31:01
Для стартапов на самом раннем этапе, когда количество клиентов не превышает пятидесяти, стандартные графики и количественный анализ не работают. Единственным верным решением Сухейл Доши называет прямые разговоры со своей аудиторией.
Основатель Mixpanel вспоминает личный опыт работы с первыми 12 клиентами: он буквально засыпал их сообщениями в чатах Gchat и WhatsApp, собирая отзывы в ручном режиме. Когда в компании встал вопрос о редизайне интерфейса воронок (выборе между вертикальным и горизонтальным отображением), у команды из двух сооснователей не было трафика для полноценного A/B-тестирования.
Доши пошел по пути простейшей валидации:
- Создал грубый черно-белый макет горизонтальной воронки, которая казалась более интуитивной.
- Подготовил красивый, детализированный и цветной макет текущей вертикальной воронки в качестве контроля.
- Отправил оба варианта 11 клиентам в мессенджере.
В результате 10 из 11 человек однозначно выбрали горизонтальный вариант. Команда внедрила изменения и больше не возвращалась к этому вопросу. Спикер подчеркивает, что качественное общение дает основателю гораздо больше глубины и развивает продуктовую интуицию эффективнее, чем любая математическая сегментация графиков. Единственное, о чем жалеет Доши — это то, что он не записывал те первые диалоги детально, чтобы новые сотрудники компании могли проникнуться этой историей в будущем.
🎯 Поиск Метрики Полярной звезды (North Star) 33:49
Человеку свойственно усложнять окружающие вещи для иллюзии контроля над ситуацией. Чтобы избежать распыления фокуса, Сухейл Доши рекомендует выбрать одну единственную Метрику Полярной звезды (North Star metric).
Это должен быть показатель, на который основатель готов сделать ставку всей своей компанией. Если эта метрика падает — бизнес заслуживает гибели, если растет — стартап меняет мир. Спикер советует зафиксировать этот показатель минимум на 6 месяцев, распечатать его значение и буквально развесить по всему офису, чтобы команда была маниакально сфокусирована на главном. Усложнять аналитику, копаться в когортах и воронках нужно только тогда, когда требуется ответить на вопрос, почему эта главная метрика пошла вниз. Во всех остальных случаях действует строгое правило: меньше значит больше. В качестве полезного внеклассного чтения для углубления в тему Доши рекомендует статью Эндрю Чена «Заблуждение о следующей фиче» (The Next Feature Fallacy), которая наглядно объясняет, почему создание новых функций редко спасает тонущий продукт.
❓ Ответы на вопросы: Бенчмарки, видеоинструкции и поиск PMF 37:14
📊 Бенчмарки конверсии
Отвечая на вопрос о хороших показателях конверсии на разных этапах воронки, Сухейл Доши отмечает, что цифры жестко привязаны к специфике конкретного бизнеса. По его словам, для B2B-сегмента конверсия из визита в регистрацию на уровне 4–5% считается достойным результатом. Спикер делился этими данными со Стюартом Баттерфилдом, сооснователем мессенджера Slack: показатели их посадочных страниц на тот момент практически совпадали. Детальные отраслевые бенчмарки для e-commerce, игровой индустрии и медиа Доши рекомендует искать в регулярных отчетах блога Mixpanel.
🌐 Кнопки социальной авторизации
На вопрос о том, повышают ли кнопки быстрой авторизации (вроде Facebook Connect или Google Sign-In) итоговую конверсию и снижают ли они отток на этапе ввода паролей, спикер честно ответил, что не располагает точной универсальной статистикой, так как все зависит от контекста. В качестве решения Доши советует не гадать, а напрямую спрашивать коллег из смежных неконкрурирующих стартапов, которые уже проводили подобные тесты.
⚖️ Баланс простоты и сложности: Опыт Airbnb, Amazon и Craigslist
Один из слушателей спросил, как компаниям вроде Amazon или Craigslist удается сохранять перегруженные интерфейсы, в то время как Airbnb стремится к абсолютной пустоте на главной странице. По мнению спикера, все упирается в руководящий принцип и то, что именно команда пытается оптимизировать в данный момент. Если YouTube или Amazon выкатывают сложную главную страницу со множеством элементов, значит, они многократно протестировали этот подход и выявили, что именно такая структура дает максимальный финансовый или поведенческий результат для их модели. Задача молодого стартапа — найти эмпирическим путем минимально необходимое количество элементов для успешного старта пользователя.
📹 Эффективность видеоинструкций: Искусство против науки
Сухейл Доши скептически относится к стандартным видеотуториалам внутри онбординга. Первые тесты Mixpanel показали, что люди банально не смотрят обучающие ролики на этапе знакомства с интерфейсом.
Однако ручной анализ профилей пользователей («подобно тайному шпиону») вскрыл интересную аномалию: клиенты, еще не интегрировавшие код Mixpanel на свой сайт, хаотично кликали по пустым вкладкам «Воронки» или «Удержание». Спикер выдвинул гипотезу: люди делали это из чистого любопытства, желая увидеть продукт в действии. Команда провела эксперимент: вместо сложной переделки сайта они просто разослали этим пользователям короткое видео с демонстрацией возможностей пустых вкладок. Конверсия в интеграцию кода взлетела. Видеоролики были немедленно добавлены во все пустые интерфейсы. Доши подчеркивает, что этот кейс идеально отражает баланс продуктовой работы: сначала идет «искусство» (формирование гипотезы на основе наблюдений), а затем «наука» (точное измерение результатов эксперимента).
💵 Удержание пользователей против денежного оттока
Спикер разделяет удержание аудитории (User Retention) и удержание денег (Revenue Retention). В B2B-сегменте возможна ситуация, когда в компании-клиенте продуктом пользуется всего один человек (низкий User Retention), но сама организация исправно оплачивает счета из своего бюджета из года в год (нулевой Dollar Churn). Тем не менее, потеря 40% денег за год — это критический показатель. В качестве эталона удержания пользователей Доши приводит Slack с его невероятными 80% сохранения аудитории, тогда как у обычных хороших b2b-продуктов этот показатель держится на уровне 60–70%, а у ранней Mixpanel он составлял «кошмарные» 30–40%.
🔌 Аналитика для хардверных стартапов
Методология подходит и для создателей физических устройств. Mixpanel успешно сотрудничала с Jawbone и Fitbit. По словам спикера, если у хардверного стартапа есть подписочная модель или программная часть (как у современных сервисов аренды электросамокатов), их метрики и воронки ничем не отличаются от классического софта.
🎯 Эволюция таргетинга и платные тесты
Разбирая разницу между первыми версиями сайта, Доши признает, что на старте они совершенно не понимали, кто их целевой клиент. Потребовалось около 6 месяцев общения с пользователями, чтобы осознать: крупные корпорации не готовы брать на себя риски работы с сырым продуктом, а вот стартапы соглашаются мгновенно. Спикер использовал хитрый коммерческий трюк: он всегда сразу требовал с клиентов деньги за использование Mixpanel. Если они категорически отказывались, Доши отдавал доступ бесплатно, поскольку качественная обратная связь на ранней стадии была для него ценнее любых чеков.
🔓 Функции комфорта и «магические ссылки» для авторизации
Возвращаясь к теме функции восстановления пароля, Сухейл Доши рассказал, как команда элегантно решила эту проблему, когда она действительно обострилась. Изучая логи действий, спикер заметил, что многие пользователи заходят на страницу авторизации по 5 раз подряд и уходят. Вместо стандартного долгого процесса сброса пароля Mixpanel скопировала механику Facebook: если клиент трижды вводил неверный пароль, система автоматически отправляла ему на почту письмо с «магической ссылкой». Клик по ней мгновенно авторизовывал пользователя в системе без необходимости придумывать новые комбинации. Это решение оказало мощный положительный эффект на удержание.
📉 Как измерить Product-Market Fit
Спикер разделяет качественные признаки соответствия продукта рынку (когда пользователи активно рекомендуют сервис друзьям) и количественные показатели. Главный маркер PMF в цифрах — это стабильная плоская линия на графике когортного удержания (DAU) через 30 дней, показатели которой превышают среднерыночные значения по индустрии. При этом Доши рекомендует вводить максимально жесткие критерии «активности» для North Star: считать активным не того, кто просто зашел на сайт, а того, кто совершил минимум 5 целевых действий (например, посмотрел 5 видеороликов). На этапе запуска удержание Mixpanel составляло около 30%, что, по признанию основателя, свидетельствовало о полном отсутствии Product-Market Fit на тот момент.
🧠 Главное заблуждение основателей стартапов
В финале встречи Сухейл Доши оспорил популярную конвенциональную мудрость предпринимательства. По его мнению, главная ошибка фаундеров заключается в непреодолимом стремлении постоянно все усложнять и бросать задачи на полпути. Создав первую рабочую версию продукта, основатели часто отвлекаются, делегируют процессы и переключаются на создание новых фич, игнорируя дыры в удержании или отрицательную маржинальность базового движка. Доши резюмирует, что среднему предпринимателю невероятно трудно сохранять маниакальный фокус на скучных, рутинных, но фундаментальных проблемах своего бизнеса в течение 4–5 лет, что в конечном итоге и губит большинство перспективных стартапов.
