Метрики марнославства проти дієвих метрик: як відрізнити одні від інших
Метрики марнославства створюють відчуття прогресу, але не дають його. Ось практичний тест, який допоможе їх розрізнити, і довідкова таблиця найпоширеніших «порушників».
Термін «метрика марнославства» популяризував Ерік Ріс у книзі The Lean Startup, але саме поняття існувало за десятиліття до неї: так називають будь-яку метрику, що створює відчуття, що з вашим бізнесом усе добре, але не допомагає ні зрозуміти його, ні покращити. Перегляди сторінок. Загальна кількість завантажень. Валові реєстрації. Згадки в пресі. Покази у Twitter. Ці числа зростають, а зростання схоже на перемогу, і саме це відчуття становить небезпеку, адже зусилля, витрачені на святкування та звітування про метрики марнославства, — це зусилля, не витрачені на цифри, які справді визначають рішення.
Межа між метриками марнославства та дієвими не завжди очевидна, а деякі метрики залежно від контексту можуть належати до обох категорій. Нижче наведено підхід, який допоможе ухвалити рішення, і довідкову таблицю з метриками, щодо яких найчастіше точаться суперечки.
Тест із трьох запитань
Поставте ці три запитання до будь-якої метрики, яку плануєте відстежувати. Якщо вона не проходить більш ніж один тест, це майже напевно метрика марнославства.
Запитання 1: чи може ця метрика знизитися? Метрика, яка лише зростає (загальна кількість зареєстрованих користувачів, накопичені перегляди сторінок, завантаження за весь час), не містить жодної інформації про те, покращується чи погіршується ситуація просто зараз. Дієві метрики можуть рухатися в обидва боки. Саме здатність знижуватися робить метрику змістовним сигналом.
Запитання 2: чи спонукає зміна цієї метрики до конкретної дії? Якби наступного місяця ця метрика впала на 20%, чи знали б ви, що робити інакше? Якщо відповідь «ми б провели додаткове дослідження», метрика надто узагальнена, щоб бути безпосередньо дієвою. Якщо відповідь «ми б збільшили кількість вихідних дзвінків у продажах» або «ми б виправили онбординг на третьому кроці», вона дієва.
Запитання 3: чи важко накрутити цю метрику без реального покращення справ? Загальну кількість зареєстрованих користувачів можна накрутити купівлею списків email-адрес або запуском на Product Hunt. Щотижневих активних користувачів не накрутити, не повернувши користувачів до продукту насправді. Метрики, які легко накрутити без створення реальної цінності, за своєю природою є метриками марнославства.
Метрика марнославства — це не метрика, яка добре виглядає. Це метрика, яка створює відчуття, що ви покращуєтеся, коли насправді це може бути не так. Пастка — саме в цьому відчутті.
Довідкова таблиця
| Метрика | Вердикт | Чому |
|---|---|---|
| Загальна кількість зареєстрованих користувачів | Марнославство | Лише зростає. Нічого не говорить про залученість, надану цінність чи те, чи працює продукт. Замініть на щомісячних активних користувачів або показник активації. |
| Щомісячні активні користувачі (MAU) | Дієва | Може зростати й знижуватися. Показує, чи повертаються користувачі, — це передумова утримання та виручки. Особливо цінна, коли відстежується за когортами. |
| Перегляди сторінок / сесії на сайті | Марнославство | Можна накрутити ботами, сплесками в соцмережах або будь-якими платними витратами. Без прив’язки до конверсії вона описує увагу, а не реальну тягу. Замість цього використовуйте конверсію з трафіку в пробну версію. |
| Конверсія з пробної версії в платну | Дієва | Показує, чи працює ваша воронка залучення клієнтів. Падіння запускає конкретний аналіз онбордингу, ціноутворення чи повідомлень. Складно накрутити без реального покращення конверсії. |
| Підписники в соціальних мережах | Марнославство | Кількість підписників можна купити, вона підпорядковується степеневому закону, не пов’язаному з якістю бізнесу, і погано прогнозує будь-який подальший бізнес-результат. Натомість відстежуйте частку клієнтів, що рекомендують вас, або share of voice у відповідних спільнотах. |
| Розмір бази email-адрес | Залежить | Марнославство, якщо база нецільова й неактивна. Дієва, якщо сегментована за рівнем залученості та пов’язана з подальшою конверсією. Розмір бази має значення лише тоді, коли показники відкриттів і кліків у нормі. |
| Net Promoter Score (NPS) | Залежить | Дієва, коли відстежується регулярно в динаміці, із сегментною розбивкою та процесом роботи з критиками. Марнославство, коли опитування проводять один раз, радіють результату й кладуть у шухляду. Сама оцінка менш цінна, ніж тренд і якісна подальша робота. |
| Виручка (валова) | Залежить | Дієва, коли розбита за когортами, каналами та сегментами. Може вводити в оману, коли подається єдиним усередненим числом, що приховує високий churn за сильного залучення нових клієнтів. Завжди розглядайте разом із чистим утриманням виручки (NRR). |
| Згадки в пресі / висвітлення в медіа | Марнославство | Рідко корелює з бізнес-результатами на ранній стадії. Перевірте, чи приводить преса пробні версії або реєстрації; якщо ні, їй місце в маркетинговому архіві, а не на бізнес-дашборді. |
| Утримання на 30-й день | Дієва | Безпосередньо показує, чи знайшли нові користувачі достатньо цінності, щоб залишатися активними через місяць після реєстрації. Один із найчесніших випереджальних показників довгострокового утримання та LTV, доступних командам на ранній стадії. |
| Рейтинг в App Store / магазині застосунків | Марнославство | Відображає упереджену вибірку, яку формують самі користувачі, — найбільш і найменш задоволені. Корисний для якісного фідбеку, але марний як бізнес-метрика. Щоб виміряти справжню задоволеність продуктом, відстежуйте утримання на 30-й день і churn rate. |
| Вартість залучення клієнта (CAC) | Дієва | Безпосередньо дієва: зростання запускає аналіз ефективності каналу, конверсії та витрат на персонал. Має сенс лише тоді, коли розраховується з урахуванням усіх витрат (люди + рекламний бюджет + інструменти) і відстежується за каналами, а не лише як усереднене значення. |
Категорія «залежить» заслуговує на увагу
Кілька метрик у таблиці — NPS, розмір бази email-адрес, виручка — належать до категорії «залежить», яку варто розібрати. Це метрики, що в одному контексті є дієвими, а в іншому — марнославством. Різниця майже завжди в тому, як їх відстежують, сегментують і що з ними роблять далі, а не в самій метриці.
NPS — найяскравіший приклад. Єдине усереднене значення NPS, яке збирають раз на рік і показують у презентації для ради директорів, — це метрика марнославства. Воно щось повідомляє (оцінку), здається змістовним (значення вище 40 — «добре»), але не показує, які клієнти є критиками, чому вони ними є і що робити, щоб їх переконати. NPS, який відстежують щомісяця за сегментами клієнтів і з послідовним процесом роботи з кожною відповіддю критика, — дієва метрика. Те саме число, але зовсім інша користь.
Майже будь-яка метрика стає дієвішою, коли її сегментують. Виручка, розбита за каналами залучення, сегментами клієнтів і розміром контракту, дає зовсім інші висновки, ніж загальна сума. Робота над тим, щоб зробити метрику дієвою, часто полягає в розбиванні її на сегменти, де сконцентровані відмінності, адже саме там ховаються можливості для ухвалення рішень.
Організаційна ціна метрик марнославства
Метрики марнославства не безневинні. На них витрачається час на підготовку й звітування, а головне — вони дозволяють командам тішитися роботою, яка може не просувати бізнес. Команда, що святкує 100 000 зареєстрованих користувачів, не питає, чому активні лише 4000 із них. Це незадане запитання — різниця між продуктом, який вирішує проблему утримання на 6-му місяці, і тим, який виявляє її на 18-му, коли траєкторія зростання вже визначена.
Практичне рішення — не забороняти будь-які узагальнені метрики на дашборді, а поєднувати кожну метрику, яку приємно святкувати, зі складнішою, що дає їй бракуючий контекст. Загальна кількість зареєстрованих користувачів — разом із щомісячними активними користувачами та показником активації. Трафік сайту — разом із конверсією в пробну версію. Валова виручка — разом із чистим утриманням виручки (NRR). Кожна така пара створює напругу, яка не дає «зручній» метриці породжувати самовдоволення.
Деякі інвестори, особливо на найранніших стадіях, просять показати загальну кількість зареєстрованих користувачів, завантажень застосунку чи підписників у соцмережах як доказ traction. Варто розуміти чому: ці метрики легко порівнювати між компаніями та стадіями, а інвестори без глибокої експертизи в галузі використовують їх як грубі орієнтири. Надавайте їх, коли просять, але завжди починайте з дієвих метрик, які розповідають реальну історію. Засновник, який каже: «У нас 8000 зареєстрованих користувачів, 3400 із них активні щомісяця, а утримання на 30-й день — 72%», демонструє такий рівень операційної чіткості, якого проста кількість користувачів передати не може.
Перехід від метрик марнославства до дієвих — це така сама культурна звичка, як і технічна. У FabricLoop команди, які здійснили цей перехід, часто ведуть одну спільну нотатку з переліком офіційних метрик — тих, що потрапляють до щотижневого огляду, мають відповідальних і породжують завдання, коли рухаються в неправильному напрямку. Цей перелік працює як фільтр: коли хтось пропонує додати до огляду нову метрику, питання «чи проходить вона тест із трьох запитань?» має спільну точку відліку. Перелік не мусить бути довгим, щоб працювати: часто шести-восьми метрик, які відстежують послідовно, достатньо, щоб команда, що росте, рухалася в правильному напрямку.