Turhamittarit vs. toimintakelpoiset mittarit: miten erotat ne toisistaan
Turhamittarit tuntuvat edistykseltä mutta eivät tuota sitä. Tässä käytännön testi eron tunnistamiseen sekä vertailutaulukko yleisimmistä syyllisistä.
Termin ”turhamittari” (vanity metric) teki tunnetuksi Eric Ries kirjassaan The Lean Startup, mutta ajatus on kirjaa vuosikymmeniä vanhempi: se tarkoittaa mitä tahansa mittaria, joka saa sinut tuntemaan olosi hyväksi liiketoiminnastasi auttamatta sinua ymmärtämään tai parantamaan sitä. Sivunäytöt. Latausten kokonaismäärä. Rekisteröitymisten bruttomäärä. Lehdistömmaininnat. Twitterin näyttökerrat. Nämä luvut nousevat, nousu tuntuu voitolta, ja juuri tuo tunne on vaara, sillä turhamittarien juhlimiseen ja raportointiin käytetty vaiva on pois niiltä luvuilta, jotka oikeasti ohjaavat päätöksiä.
Ero turhamittarin ja toimintakelpoisen mittarin välillä ei aina ole selvä, ja jotkin mittarit kuuluvat aidosti molempiin luokkiin asiayhteydestä riippuen. Seuraavassa on viitekehys arvion tekemiseen sekä vertailutaulukko eniten pohdituista mittareista.
Kolmen kysymyksen testi
Esitä nämä kolme kysymystä mille tahansa mittarille, jonka seuraamista harkitset. Jos mittari kaatuu useampaan kuin yhteen, se on lähes varmasti turhamittari.
Kysymys 1: Voiko tämä mittari laskea? Mittari, joka vain kasvaa, kuten rekisteröityneiden käyttäjien kokonaismäärä, kumulatiiviset sivunäytöt tai kaikkien aikojen lataukset, ei kerro mitään siitä, onko tilanne juuri nyt paranemassa vai huononemassa. Toimintakelpoiset mittarit voivat liikkua kumpaan suuntaan tahansa. Kyky laskea tekee mittarista merkityksellisen signaalin.
Kysymys 2: Johtaako tämän mittarin muutos tiettyyn toimenpiteeseen? Jos tämä mittari laskisi ensi kuussa 20 %, tietäisitkö, mitä pitäisi tehdä toisin? Jos vastaus on ”selvittäisimme asiaa tarkemmin”, mittari on liian yleisellä tasolla ollakseen suoraan toimintakelpoinen. Jos vastaus on ”lisäisimme lähteviä myyntipuheluita” tai ”korjaisimme käyttöönottopolun kolmannen vaiheen”, se on toimintakelpoinen.
Kysymys 3: Onko tätä mittaria vaikea kasvattaa parantamatta todellista tilannetta? Rekisteröityneiden käyttäjien kokonaismäärää voi paisuttaa ostamalla sähköpostilistoja tai lanseeraamalla Product Huntissa. Viikoittain aktiivisia käyttäjiä ei voi paisuttaa saamatta käyttäjiä aidosti palaamaan tuotteen pariin. Mittarit, joita on helppo paisuttaa luomatta todellista arvoa, ovat turhamittareita jo rakenteensa puolesta.
Turhamittari ei ole mittari, joka näyttää hyvältä. Se on mittari, joka saa sinut tuntemaan, että kehityt, vaikka et ehkä kehittyisikään. Tunne on ansa.
Vertailutaulukko
| Mittari | Arvio | Miksi |
|---|---|---|
| Rekisteröityneet käyttäjät yhteensä | Turhamittari | Kasvaa vain. Ei kerro mitään sitoutumisesta, tuotetusta arvosta tai tuotteen toimivuudesta. Korvaa kuukausittain aktiivisilla käyttäjillä tai aktivointiasteella. |
| Kuukausittain aktiiviset käyttäjät (MAU) | Toimintakelpoinen | Voi nousta tai laskea. Kertoo, palaavatko käyttäjät, mikä on asiakaspysyvyyden ja liikevaihdon edellytys. Erityisen tehokas, kun sitä seurataan kohorteittain. |
| Sivunäytöt / verkkosivuston istunnot | Turhamittari | Botit, sosiaalisen median piikit ja mikä tahansa maksettu mainonta voivat paisuttaa sitä. Ilman liitettyä konversioprosenttia se kuvaa huomiota, ei vetovoimaa. Käytä sen sijaan liikenteen konversiota kokeilijoiksi. |
| Kokeilusta maksavaksi -konversioprosentti | Toimintakelpoinen | Mittaa, toimiiko hankintasuppilosi. Lasku käynnistää tarkemman selvityksen käyttöönotosta, hinnoittelusta tai viestinnästä. Vaikea paisuttaa parantamatta todellista konversiota. |
| Sosiaalisen median seuraajat | Turhamittari | Seuraajamäärän voi ostaa, se noudattaa potenssilakia, jolla ei ole yhteyttä liiketoiminnan laatuun, ja se ennustaa huonosti mitään liiketoiminnan lopputulosta. Seuraa sen sijaan suosittelujen määrää tai äänenosuutta kohdennetuissa yhteisöissä. |
| Sähköpostilistan koko | Riippuu | Turhamittari, jos lista on kohdentamaton eikä sitoutunut. Toimintakelpoinen, jos se on segmentoitu sitoutumisasteen mukaan ja yhdistetty myöhemmän vaiheen konversioon. Listan koolla on merkitystä vain, kun avaus- ja klikkausprosentit ovat terveellä tasolla. |
| Net Promoter Score (NPS) | Riippuu | Toimintakelpoinen, kun sitä seurataan johdonmukaisesti ajan yli segmenttikohtaisin erittelyin ja kun tyytymättömille on seurantaprosessi. Turhamittari, kun kysely tehdään kerran, sitä juhlitaan ja se arkistoidaan. Pistemäärää tärkeämpiä ovat kehityssuunta ja laadullinen jatkotyö. |
| Liikevaihto (brutto) | Riippuu | Toimintakelpoinen, kun se eritellään kohortin, kanavan ja segmentin mukaan. Mahdollisesti harhaanjohtava, kun se esitetään yhtenä yhdistettynä lukuna, joka peittää korkean asiakaspoistuman vahvan uusasiakashankinnan taakse. Yhdistä aina nettoliikevaihdon säilyvyyteen. |
| Lehdistömaininnat / mediahuomio | Turhamittari | Korreloi harvoin liiketoiminnan tulosten kanssa alkuvaiheessa. Mittaa, tuoko lehdistö kokeiluja tai rekisteröitymisiä; jos ei tuo, se kuuluu markkinoinnin arkistoon, ei liiketoiminnan koontinäyttöön. |
| Päivän 30 säilyvyysaste | Toimintakelpoinen | Mittaa suoraan, löysivätkö uudet käyttäjät riittävästi arvoa pysyäkseen aktiivisina kuukauden kuluttua rekisteröitymisestä. Yksi rehellisimmistä ennakoivista indikaattoreista pitkän aikavälin asiakaspysyvyydelle ja LTV:lle alkuvaiheen tiimeille. |
| Sovelluskaupan arvosana | Turhamittari | Kuvastaa puolueellista, itsevalikoitunutta otosta kaikkein tyytyväisimmistä ja tyytymättömimmistä käyttäjistäsi. Hyödyllinen laadulliseen palautteeseen, mutta hyödytön liiketoiminnan mittarina. Mittaa todellista tuotetyytyväisyyttä päivän 30 säilyvyydellä ja asiakaspoistumalla. |
| Asiakashankinnan kustannus (CAC) | Toimintakelpoinen | Suoraan toimintakelpoinen: nousu käynnistää selvityksen kanavan tehokkuudesta, konversioasteesta ja henkilöstökustannuksista. Merkityksellinen vain, kun se lasketaan kaikilla kustannuksilla (henkilöstö + mainoskulut + työkalut) ja sitä seurataan kanavittain, ei pelkästään yhdistettynä. |
”Riippuu”-luokka ansaitsee huomiota
Useat taulukon mittarit, kuten NPS, liikevaihto ja sähköpostilistan koko, kuuluvat ”riippuu”-luokkaan, jota kannattaa avata. Ne ovat mittareita, jotka ovat toimintakelpoisia yhdessä yhteydessä ja turhamittareita toisessa. Ero liittyy lähes aina siihen, miten niitä seurataan, segmentoidaan ja miten niiden perusteella toimitaan, ei itse mittariin.
NPS on selkein esimerkki. Yksittäinen yhdistetty NPS-luku, jota kysellään vuosittain ja esitetään hallituksen esityksessä, on turhamittari. Se kertoo jotain (pistemäärän), se tuntuu merkitykselliseltä (yli 40:n luku on ”hyvä”), mutta se ei kerro, ketkä asiakkaat ovat arvostelijoita, miksi he ovat arvostelijoita tai mitä pitäisi tehdä heidän muuttamisekseen. NPS, jota seurataan kuukausittain asiakassegmenteittäin ja jossa jokaiselle arvostelijavastaukselle on johdonmukainen seurantaprosessi, on toimintakelpoinen mittari. Sama luku, täysin erilainen hyöty.
Lähes mikä tahansa mittari muuttuu toimintakelpoisemmaksi segmentoituna. Yhdistetty liikevaihto eriteltynä hankintakanavan, asiakassegmentin ja sopimuskoon mukaan tuottaa täysin erilaisia oivalluksia kuin yhdistetty kokonaisluku. Mittarin tekeminen toimintakelpoiseksi on usein työtä sen pilkkomiseksi segmentteihin, joissa vaihtelu piilee, koska vaihtelussa on päätöksenteon mahdollisuus.
Turhamittarien organisaatiokustannus
Turhamittarit eivät ole vaarattomia. Niiden tuottaminen ja raportointi vie aikaa, ja kaikkein haitallisimmin ne antavat tiimeille luvan tuntea olonsa hyväksi työstä, joka ei välttämättä vie liiketoimintaa eteenpäin. Tiimi, joka juhlii 100 000 rekisteröitynyttä käyttäjää, ei kysy, miksi heistä vain 4 000 on aktiivisia. Se esittämättä jäänyt kysymys on ero tuotteen välillä, joka ratkaisee asiakaspysyvyysongelman kuukaudessa 6, ja tuotteen, joka huomaa sen vasta kuukaudessa 18, kun kasvun suunta on jo kirjoitettu.
Käytännön korjaus ei ole kieltää kaikkia yleisen tason mittareita koontinäytöstä vaan yhdistää jokainen helposti juhlittava mittari vaikeampaan mittariin, joka tuo puuttuvan kontekstin. Rekisteröityneet käyttäjät yhteensä yhdistettynä kuukausittain aktiivisiin käyttäjiin ja aktivointiasteeseen. Verkkosivuston liikenne yhdistettynä kokeilukonversioon. Bruttoliikevaihto yhdistettynä nettoliikevaihdon säilyvyyteen. Jokainen pari luo jännitteen, joka estää mukavaa mittaria tuottamasta itsetyytyväisyyttä.
Jotkin sijoittajat, erityisesti aivan alkuvaiheessa, pyytävät todisteeksi vetovoimasta rekisteröityneiden käyttäjien kokonaismäärää, sovelluslatauksia tai seuraajamäärää sosiaalisessa mediassa. Syy kannattaa ymmärtää: nämä mittarit on helppo vertailla yritysten ja vaiheiden välillä, ja sijoittajat, joilla ei ole syvää alatuntemusta, käyttävät niitä karkeina korvikkeina. Anna ne pyydettäessä, mutta aloita aina toimintakelpoisilla mittareilla, jotka kertovat todellisen tarinan. Perustaja, joka selittää ”meillä on 8 000 rekisteröitynyttä käyttäjää, joista 3 400 on kuukausittain aktiivisia, ja päivän 30 säilyvyys on 72 %”, osoittaa toiminnan selkeyttä, jota pelkkä käyttäjämäärä ei välitä.
Siirtyminen turhamittareista toimintakelpoisiin mittareihin on yhtä paljon kulttuurinen tapa kuin tekninen asia. FabricLoopissa tiimit, jotka ovat tehneet siirtymän, ylläpitävät usein yhtä jaettua muistiinpanoa, johon on listattu viralliset mittarit: ne, jotka näkyvät viikkokatsauksessa, joilla on omistajat ja jotka luovat tehtäviä, kun ne liikkuvat väärään suuntaan. Lista toimii suodattimena: kun joku ehdottaa uuden mittarin lisäämistä katsaukseen, kysymyksellä ”läpäiseekö tämä kolmen kysymyksen testin?” on yhteinen vertailukohta. Listan ei tarvitse olla pitkä ollakseen tehokas: usein kuudesta kahdeksaan johdonmukaisesti seurattua mittaria riittää pitämään kasvavan tiimin oikeassa suunnassa.