Metryki próżności a metryki użyteczne: jak odróżnić jedne od drugich
Metryki próżności dają poczucie postępu, a go nie przynoszą. Oto praktyczny test pozwalający je rozpoznać oraz tabela referencyjna najczęstszych „winowajców”.
Termin „vanity metric” (metryka próżności) spopularyzował Eric Ries w książce The Lean Startup, ale sama koncepcja jest starsza o dziesięciolecia: opisuje każdą miarę, dzięki której dobrze się czujesz w swoim biznesie, ale która nie pomaga ani go zrozumieć, ani ulepszyć. Odsłony stron. Łączna liczba pobrań. Surowa liczba rejestracji. Wzmianki w prasie. Wyświetlenia na Twitterze. Te liczby rosną, a wzrost daje poczucie wygranej — i właśnie to poczucie jest zagrożeniem, bo wysiłek włożony w świętowanie i raportowanie metryk próżności to wysiłek, którego nie poświęcasz liczbom naprawdę napędzającym decyzje.
Granica między metryką próżności a użyteczną nie zawsze jest oczywista, a niektóre wskaźniki w zależności od kontekstu naprawdę pasują do obu kategorii. Poniżej znajdziesz ramy pozwalające podjąć tę decyzję oraz tabelę referencyjną z najczęściej dyskutowanymi metrykami.
Test trzech pytań
Zadaj te trzy pytania każdej metryce, którą rozważasz śledzić. Jeśli nie przechodzi więcej niż jednego, to niemal na pewno jest metryką próżności.
Pytanie 1: Czy ta metryka może spaść? Wskaźnik, który tylko rośnie — łączna liczba zarejestrowanych użytkowników, skumulowane odsłony, wszystkie pobrania w historii — nie zawiera żadnej informacji o tym, czy sprawy idą teraz lepiej, czy gorzej. Metryki użyteczne mogą zmieniać się w obu kierunkach. Możliwość spadku sprawia, że wskaźnik ma wartość jako sygnał.
Pytanie 2: Czy zmiana tej metryki skłania do konkretnego działania? Gdyby w przyszłym miesiącu ta wartość spadła o 20%, czy wiedziałbyś, co zrobić inaczej? Jeśli odpowiedź brzmi „zbadalibyśmy sprawę dokładniej”, metryka jest zbyt ogólna, by można było na jej podstawie bezpośrednio działać. Jeśli odpowiedź brzmi „zwiększylibyśmy liczbę telefonów sprzedażowych” albo „poprawilibyśmy onboarding na trzecim kroku”, jest użyteczna.
Pytanie 3: Czy trudno podbić tę metrykę bez poprawy rzeczywistego stanu rzeczy? Łączną liczbę zarejestrowanych użytkowników można zawyżyć, kupując listy mailingowe albo robiąc premierę na Product Hunt. Liczby tygodniowo aktywnych użytkowników nie da się podbić bez faktycznego sprowadzenia ludzi z powrotem do produktu. Wskaźniki, które łatwo zawyżyć bez tworzenia realnej wartości, są metrykami próżności z definicji.
Metryka próżności to nie wskaźnik, który dobrze wygląda. To wskaźnik, który sprawia, że czujesz się, jakbyś się rozwijał, choć może wcale tak nie jest. Pułapką jest samo to uczucie.
Tabela referencyjna
| Metryka | Werdykt | Dlaczego |
|---|---|---|
| Łączna liczba zarejestrowanych użytkowników | Próżność | Tylko rośnie. Nic nie mówi o zaangażowaniu, dostarczonej wartości ani o tym, czy produkt działa. Zastąp ją miesięczną liczbą aktywnych użytkowników lub wskaźnikiem aktywacji. |
| Miesięczna liczba aktywnych użytkowników (MAU) | Użyteczna | Może rosnąć i spadać. Pokazuje, czy użytkownicy wracają — warunek konieczny retencji i przychodów. Szczególnie wartościowa, gdy śledzi się ją w podziale na kohorty. |
| Odsłony stron / sesje w witrynie | Próżność | Można ją zawyżyć ruchem botów, skokami w mediach społecznościowych lub dowolną płatną promocją. Bez powiązania ze współczynnikiem konwersji opisuje uwagę, a nie realną trakcję. Użyj zamiast niej współczynnika konwersji z ruchu na okres próbny. |
| Współczynnik konwersji z okresu próbnego na płatny | Użyteczna | Mierzy, czy Twój lejek pozyskiwania klientów działa. Spadek uruchamia konkretne analizy onboardingu, cennika lub komunikacji. Trudno ją zawyżyć bez faktycznej poprawy konwersji. |
| Obserwujący w mediach społecznościowych | Próżność | Liczbę obserwujących można kupić, rozkłada się według rozkładu potęgowego niezwiązanego z jakością biznesu i słabo przewiduje jakikolwiek późniejszy wynik biznesowy. Śledź zamiast tego wskaźnik poleceń lub udział w rozmowie (share of voice) w istotnych społecznościach. |
| Wielkość listy mailingowej | Zależy | Próżność, jeśli lista jest niewyselekcjonowana i niezaangażowana. Użyteczna, jeśli jest segmentowana według poziomu zaangażowania i skorelowana z późniejszą konwersją. Wielkość listy ma znaczenie tylko wtedy, gdy wskaźniki otwarć i kliknięć są zdrowe. |
| Net Promoter Score (NPS) | Zależy | Użyteczny, gdy jest konsekwentnie śledzony w czasie, z podziałem na segmenty i procesem kontaktu z krytykami (detractors). Próżność, gdy zbadano go raz, uczczono wynik i odłożono do archiwum. Sam wynik jest mniej wartościowy niż trend i jakościowa praca z odpowiedziami. |
| Przychody (brutto) | Zależy | Użyteczne, gdy rozbite według kohort, kanałów i segmentów. Potencjalnie mylące, gdy podawane jako jedna zbiorcza liczba, która maskuje wysoki churn za silnym pozyskiwaniem nowych klientów. Zawsze zestawiaj z retencją przychodów netto (NRR). |
| Wzmianki w prasie / zasięg medialny | Próżność | Na wczesnym etapie rzadko korelują z wynikami biznesowymi. Sprawdź, czy prasa generuje okresy próbne lub rejestracje — jeśli nie, jej miejsce jest w archiwum marketingu, a nie na biznesowym dashboardzie. |
| Retencja po 30 dniach | Użyteczna | Bezpośrednio mierzy, czy nowi użytkownicy znaleźli wystarczającą wartość, by pozostać aktywni miesiąc po rejestracji. Jeden z najuczciwszych wskaźników wyprzedzających długoterminowej retencji i LTV dostępnych dla zespołów na wczesnym etapie. |
| Ocena w sklepie z aplikacjami | Próżność | Odzwierciedla stronniczą, samoselekcjonowaną próbę Twoich najbardziej i najmniej zadowolonych użytkowników. Przydatna jako jakościowy feedback, bezużyteczna jako metryka biznesowa. Aby zmierzyć prawdziwe zadowolenie z produktu, śledź retencję po 30 dniach i wskaźnik churnu. |
| Koszt pozyskania klienta (CAC) | Użyteczna | Bezpośrednio użyteczna — wzrost uruchamia analizę efektywności kanałów, konwersji i kosztów personelu. Ma sens tylko wtedy, gdy uwzględnia pełne koszty (ludzie + wydatki na reklamy + narzędzia) i jest śledzona według kanałów, a nie tylko w ujęciu zbiorczym. |
Kategoria „zależy” zasługuje na uwagę
Kilka metryk z tabeli — NPS, przychody, wielkość listy mailingowej — należy do kategorii „zależy”, którą warto rozwinąć. To wskaźniki, które w jednym kontekście są użyteczne, a w innym stają się próżnością. Różnica prawie zawsze dotyczy tego, jak są śledzone, segmentowane i jak się z nimi dalej pracuje, a nie samej metryki.
NPS to najlepszy przykład. Pojedyncza zbiorcza wartość NPS, badana raz w roku i prezentowana w prezentacji dla zarządu, jest metryką próżności. Coś mówi (wynik), wydaje się znacząca (wartość powyżej 40 to „dobry” wynik), ale nie mówi, którzy klienci są krytykami, dlaczego nimi są ani co zrobić, by ich przekonać. NPS śledzony co miesiąc w podziale na segmenty klientów, z konsekwentnym procesem kontaktu z każdym krytykiem, jest metryką użyteczną. Ta sama liczba, zupełnie inna użyteczność.
Prawie każda metryka staje się bardziej użyteczna po segmentacji. Przychody zbiorcze rozbite według kanału pozyskania, segmentu klientów i wielkości kontraktu dają zupełnie inne wnioski niż suma ogólna. Praca nad uczynieniem metryki użyteczną to często praca nad rozbiciem jej na segmenty, w których kryje się zróżnicowanie — bo to właśnie zróżnicowanie otwiera pole do podejmowania decyzji.
Organizacyjny koszt metryk próżności
Metryki próżności nie są niewinne. Ich przygotowanie i raportowanie zabiera czas, a — co najgorsze — dają zespołom przyzwolenie na dobre samopoczucie z powodu pracy, która może wcale nie posuwa biznesu naprzód. Zespół, który świętuje 100 000 zarejestrowanych użytkowników, to zespół, który nie pyta, dlaczego aktywnych jest tylko 4000 z nich. To niezadane pytanie decyduje o tym, czy produkt rozwiąże problem retencji w 6. miesiącu, czy odkryje go w 18., gdy trajektoria wzrostu jest już zapisana.
Praktyczne rozwiązanie nie polega na wyrzuceniu z dashboardu wszystkich metryk wysokiego poziomu — chodzi o zestawienie każdej łatwej do świętowania metryki z trudniejszą, która dostarcza brakującego kontekstu. Łączna liczba zarejestrowanych użytkowników obok miesięcznej liczby aktywnych użytkowników i wskaźnika aktywacji. Ruch na stronie obok współczynnika konwersji na okres próbny. Przychody brutto obok retencji przychodów netto. Każda taka para tworzy napięcie, które chroni przed tym, by wygodna metryka rodziła samozadowolenie.
Niektórzy inwestorzy, szczególnie na najwcześniejszych etapach, poproszą o łączną liczbę zarejestrowanych użytkowników, pobrań aplikacji lub zasięg w mediach społecznościowych jako dowód trakcji. Warto zrozumieć dlaczego: takie wskaźniki łatwo porównywać między firmami i etapami, a inwestorzy bez głębokiej wiedzy branżowej używają ich jako zgrubnych przybliżeń. Przedstaw je na prośbę — ale zawsze zaczynaj od metryk użytecznych, które pokazują prawdziwy obraz. Założyciel, który mówi „mamy 8000 zarejestrowanych użytkowników, z czego 3400 jest aktywnych miesięcznie, a retencja po 30 dniach wynosi 72%”, pokazuje poziom operacyjnej jasności, jakiego sama liczba użytkowników nie przekaże.
Przejście od metryk próżności do użytecznych to w równym stopniu nawyk kulturowy, co techniczny. W FabricLoop zespoły, które tego dokonały, często prowadzą jedną wspólną notatkę z oficjalnymi metrykami — tymi, które pojawiają się w cotygodniowym przeglądzie, które mają właścicieli i które generują zadania, gdy zmieniają się w złą stronę. Ta lista działa jak filtr: gdy ktoś proponuje dodanie nowej metryki do przeglądu, pytanie „czy przechodzi test trzech pytań?” ma wspólny punkt odniesienia. Lista nie musi być długa, by była skuteczna — często sześć do ośmiu konsekwentnie śledzonych metryk wystarcza, by rosnący zespół zmierzał we właściwym kierunku.