Vanity Metrics sind Kennzahlen, die gut aussehen und sich gut vorzeigen lassen, aber keine Entscheidung nahelegen, etwa die Gesamtzahl der Seitenaufrufe oder der Follower. Engl. vanity heißt Eitelkeit. Bekannt gemacht hat den Begriff Eric Ries, der Vanity Metrics in einem Gastbeitrag von 2009 den Actionable Metrics gegenüberstellt: Kennzahlen, aus denen eine Handlung folgt.
- Vanity Metrics
Kennzahlen, die gut aussehen und gern berichtet werden, aber nicht zeigen, was eine Maßnahme bewirkt hat und was als Nächstes zu tun ist.
Beispiel: „Die 50.000 Aufrufe im Monat waren Vanity Metrics; wie viele Besucher davon angefragt hatten, wusste niemand.“Abgrenzung zu Actionable Metrics: So nennt Ries Kennzahlen, die eine Entscheidung tragen, etwa den Umsatz je Kunde in zwei Testgruppen.
Typische Vanity Metrics
Amplitude nennt im North Star Playbook als Beispiele die täglich aktiven Nutzer, registrierte Nutzer, Werbeeinblendungen, Downloads, Seitenaufrufe und die Verweildauer auf einer Seite. Solche Zahlen können sich kurzfristig gut anfühlen, sagen laut dem Playbook aber wenig über den langfristigen Erfolg eines Produkts.
Ob eine Zahl eitel ist, hängt allerdings vom Geschäft ab. Sean Ellis nennt in einem Beitrag von 2019 monatliche App-Downloads eine Vanity Metric, weil sich Millionen Downloads ohne jede Nutzung erzeugen lassen. Die täglich aktiven Nutzer hält er dagegen für eine gute Leitkennzahl, etwa bei Facebook. Bei Amplitude stehen genau diese auf der Liste der Vanity Metrics.
Warum Vanity Metrics in die Irre führen
Ries beschreibt 2010 in einem Beitrag zu seiner Kolumne für die Harvard Business Review den Mechanismus: Steigen die Seitenaufrufe nach einer Änderung, schreibt sich das Team den Erfolg zu; fallen sie, sucht es die Ursache woanders. Jeder lernt so in seiner eigenen Wirklichkeit, und gemeinsame Entscheidungen werden schwer.
Ries spricht von Erfolgstheater, das für eine Pressemitteilung oder eine schwierige Sitzung taugen mag und als Steuerungsgrundlage gefährlich ist. Als Gegenmittel nennt er die drei A: Kennzahlen sollen actionable sein, also eine Handlung nahelegen, accessible, also für alle zugänglich, und auditable, also nachprüfbar.
Vanity Metrics im Website-Reporting
Im Gastbeitrag von 2009 beschreibt Ries drei Wege zu brauchbaren Kennzahlen: A/B-Tests, Werte je Kunde oder Segment und Kohorten, also Gruppen von Neukunden, deren Verhalten über die Zeit verfolgt wird. Für eine Website heißt das etwa: Anfragen je Kanal statt Besuche insgesamt, die Conversion Rate je Seite statt Aufrufe aller Seiten.
Aus unserer Sicht dürfen Reichweitenzahlen trotzdem im Bericht stehen, als Hintergrund unter der eigentlichen Zielgröße. Gefährlich werden sie erst, wenn sie die Zielgröße ersetzen.