Es gibt jede Menge agile KPIs und Messmethoden. Aber eines musst du immer im Hinterkopf behalten:
„Sage mir, wie du mich misst, und ich sage dir, wie ich mich verhalten werde.“
Dr. Eli Goldratt
Daher muss eine Frage gestellt werden: Sind all diese agilen KPIs relevant? Und dann ist da noch dieses andere Zitat:
„Einfachheit ist die Seele der Effizienz.“
Austin Freeman
Es stellt sich also die nächste Frage: Wenn wir agil so einfach wie möglich messen wollen würden, wie würden wir es dann messen? Welche agilen Metriken und Messungen sind am wichtigsten? Oder wenn wir nur eine einzige Sache messen würden, welche wäre das?
Versteh mich nicht falsch: Natürlich kann man durchaus kompliziertere agile Reifegradmodelle bzw. agile Metriken haben, wie zum Beispiel das Agilometer. Aber das Gedankenexperiment, nur ein KPI messen zu wollen, finde ich ziemlich spannend. Deshalb geht dieser Artikel diesem Ziel nach.
Als Grundlage für diesen Text dienen uns die obigen agilen KPIs.
Bevor wir tiefer gehen, ein kurzer Hinweise. Bald findet ein kostenloses Webinar zum Thema „die besten agilen Metriken“ statt – mit insgesamt 11 internationalen Experten zu Gast! Mehr Infos dazu findest du in dem Teaser Video.
Wenn das interessant klingt, findest du auf der Project Scagile Website mehr Informationen – dort kannst du dich auch kostenlos registrieren (siehe Button oben).
Wollen wir agile Metriken und agile KPIs überhaupt?
Bevor wir tiefer gehen, eine Sache, die ich regelmäßig höre oder auf LinkedIn lese, wenn ich mit agilen Coaches, Scrum Mastern oder Scaled Agile Frameworks Beratern spreche: Wollt ihr agil überhaupt messen?
„Es gibt Lügen, es gibt verdammte Lügen und dann gibt es noch Statistiken.“
Mark Twain
Mark Twain ist ein wenig dramatisch, was das angeht. Aber er hat einen Punkt. Einen Punkt, den Albert Einstein auf den Punkt gebracht hat.
„Nicht alles, was gezählt werden kann, zählt.“
Albert Einstein
Was sind gute „KPIs“ in Agile – Velocity, Burndown-Charts, Anzahl der fehlgeschlagenen Deployments? Sind diese agilen Metriken entscheidend für den agilen Erfolg? Ich bezweifle das.
Aber alle Metriken aufgeben? Auch das wäre ein Fehler.
In der heutigen Welt ändern sich die wirtschaftlichen Rahmenbedingungen schnell. In guten Zeiten denken Entscheider über eine agile Transformation nach, weil sie die nötigen Ressourcen und die Sicherheit haben. Und in schlechten Zeiten?
In wirtschaftlich schlechten Zeiten werden Führungskräfte in traditionelles Denken zurückfallen. Sie werden in alte Verhaltensmustern zurückfallen: z.B. Top-Down-Entscheidungen, die mit modernem agilen Denken nicht wirklich vereinbar sind.
Die meisten Agile Coaches drehen sich im Kreis…
…und behandeln oberflächliche Symptome. Es wird Zeit, die Psychologie zu nutzen – für einen nachhaltigen Mindset Change.
„Wir entdecken zu viele unerwartete Probleme und Bugs zu einem späten Zeitpunkt!“
„Warum brauche ich manchmal Stunden, um eine einfache Retrospektive vorzubereiten?“
Wenn Führungskräfte also keine klaren KPIs haben, nach denen sie in schlechten Zeiten das Boot steuern können, sollten Sie eine agile Transformation gar nicht erst beginnen. Denn dann würde in der Wirtschaftskrise jeder Fortschritt, der innerhalb dieser Transformation gemacht wurde, zerstört werden.
Die vermutlich einzige Chance, dass agile Methoden im skalierten Umfeld schwierige Zeiten überstehen, besteht also darin, das System mit seinen eigenen Waffen zu schlagen: durch die Bereitstellung von Metriken. Metriken, die helfen, in Zeiten der Unsicherheit zu managen.
Und ich bin mir sicher: Es gibt agile Metriken, die Mehrwert stiften.
„Im Nachhinein halte ich es für einen meiner größten Fehler, Metriken für die agile Transformation immer kategorisch abgelehnt zu haben.“
Marcus Raitner
Einstein sagt es in seinem Zitat auch: Es gibt Dinge, die zählen. Um diese geht es in diesem Artikel.
Agilität messen – Was macht eine gute agile Metrik aus?
Nehmen wir an, die Frage, die du in deinem Daily Stand-up stellst, lautet typischerweise: Was habt ihr heute geschafft? Das ist also die Art und Weise, wie du den Fortschritt in deinem Team „misst“.
Gute Frage, richtig? Nein, nicht richtig. Diese Frage drängt das Team dazu, zu zeigen, dass es fleißig ist. Die Frage setzt das Team unter Druck, die „To do-Liste“ zu erledigen, damit es stolz auf die Metrik verweisen kann: Ja, ich war in den letzten 24 Stunden ziemlich busy!
Aber die „To do-Liste“ zu erledigen ist doch gut oder nicht? Nun, es kommt darauf an. Viel wichtiger ist etwas anderes: Nämlich das Ziel des Teams zu erreichen. Das ist typischerweise – im Fall von agilen Teams – das Liefern von Kundennutzen bzw. im Englischen “delivering value”.
Agile KPIs – wie man Agilität misst
Eine bessere Frage (oder Metrik) in deinem Daily Stand-up wäre daher: „Wie hast du deinem Team oder deiner Organisation in den letzten 24 Stunden geholfen, unser (Sprint-)Ziel zu erreichen?“
Ändere deine Frage (oder die Metrik), ändere die Art und Weise, wie Menschen denken und handeln: erst effektiv, dann effizient – um es mit den Worten von Peter Drucker zu sagen.
Ändere die Metrik – ändere die Art und Weise, wie Menschen denken und handeln.
Um es mit Einsteins Worten zu sagen: Wir müssen die eine Sache finden, die man zählen kann – und die wirklich zählt.
Was also zählt wirklich bei einer agilen Transformation?
Der richtige Blick auf agile KPIs und agile Metriken
Das Ziel eurer agilen Transformation ist definitiv nicht eine agile Transformation. Warum macht ihr die agile Transformation? Lass uns die „3-Why-Technik“ anwenden, um das zu verstehen:
Der Kerngrund für eure agile Transformation: Ihr wollt nicht wie das Unternehmen “Blockbuster” enden, die Branchentrends und Kundenbedürfnisse ignoriert haben, nicht offen für Veränderungen waren und denen schließlich das Geld ausgegangen ist.
Ihr wollt wie Netflix enden, die ihr Geschäftsmodell ständig um die Kernbedürfnisse ihrer Kunden herum weiterentwickeln. Schaut einfach in die Fallstudie Blockbuster vs. Netflix.
Wie kannst du das bei einer agilen Transformation in eine Messgröße übersetzen? Tja, das wird schwierig.
Was Unternehmen stattdessen tun: Metriken nutzen, weil sie leicht zu messen sind. Weil die Tools da draußen sie einem sowieso ausspucken. Die Wahrscheinlichkeit, dass dies die richtigen Metriken sind, ist ziemlich gering.
Denn es geht zum Beispiel nicht darum, die Sprint-Geschwindigkeit bzw. Velocity zu verbessern. Das ist ein häufiger Fehler: Aufwand oder Effizienz zu überwachen und zu messen. Stattdessen geht es darum, Kundenbedürfnisse zu befriedigen.
Agile KPIs & Agilität messen – eine wichtige Erkenntnis
Nachdem wir all das festgestellt haben, müssen wir die Gültigkeit unserer “einen Metrik” an etwas messen bzw. ein Korrelat finden.
Wir müssen Outcomes messen, nicht Outputs. Wir müssen unsere agile Transformation daran messen, wie sehr sie uns hilft, unser Ziel zu erreichen. Wir müssen Menschen nicht an ihrem Zeitaufwand messen, sondern an ihrem Beitrag zu einer gemeinsamen Vision oder einem gemeinsamen Ziel – wir müssen an dem Nutzen messen, der für den Kunden geschaffen wurde!
Wenn wir am Kundennutzen messen wollen, müssen wir die Bedürfnisse des Kunden sehr gut verstehen.
Zum Beispiel muss ein Eisenbahnunternehmen verstehen, dass es nicht im Eisenbahngeschäft tätig ist. Es muss verstehen, dass es im Transportgeschäft tätig ist. Denn den Kunden ist es egal, ob sie mit dem Zug oder mit dem Flugzeug transportiert werden.
Ein kurzer Exkurs: Wichtig bei agilen Metriken ist natürlich, sie zu reflektieren. Wie zum Beispiel beim Spotify Health Check, mit der entsprechenden Retrospektive.
Du kannst über unser Echometer Health Check & Retro Tool genau das (bei Bedarf auch teamübergreifend) machen. Mehr Infos dazu findest du unter „Wie es funktioniert„. Du kannst dir auch einfach mal eine Health Check Retro hier anschauen. In diesem Fall ist es eine Retro bzgl. Scrum.
Hinweis: Bei diesem Format wird die Zustimmung zu den Health Check-Items auf einer Skala abgefragt.
- Planung: Das Backlog Refinement in unserem Team läuft effizient und effektiv.
- Kundenorientierung: Die Planung unserer Sprints basiert immer darauf, den größtmöglichen Kundennutzen in der gegebenen Zeit zu erreichen.
- Agile Ausbildung: Teammitglieder, Product Owner und Scrum Master teilen das gleiche Verständnis ihrer jeweiligen Rollen im Team.
- Scrum Events: In letzter Zeit hat sich jedes Daily im Team gelohnt.
Eine weitere Erkenntnis zu agilen Metriken: Timing
Ein weiterer Gedanke ist hier wichtig. Im besten Fall hängen die Metriken vom Timing ab und/oder davon, in welchem Stadium ihr euch in eurer agilen Transformation befindet.
Nehmen wir an, du weißt bereits, dass eine agile Transformation mit dem Scaled Agile Framework (SAFe®) oder anderen agilen Frameworks der richtige Schritt für euch ist (das ist übrigens das erste, was man sich als Unternehmen gut überlegen sollte).
In diesem Fall sollte dein Fokus zu Beginn der agilen Transformation auf einer Sache liegen: Dem agilen Mindset des Führungsteams.
Ist das Führungsteam wirklich bereit, sich zu verändern? Versteht es die Implikationen einer Transformation? Ist es bereit, als erstes Team des Unternehmens agile Methoden ernsthaft einzuführen – inklusive Kanban, agiler Retrospektiven & kontinuierlicher Selbstreflexion?
Theoretisch sollte sich also eine erste agile Metrik auf die „Bereitschaft der Geschäftsleitung oder des Führungsteams“ konzentrieren. Mein Kollege Jean gibt in seinem Artikel 7 Tipps zur Rolle von Führungskräften in agilen Transformationen.
Die nächste wichtige Frage, die du dir bei eurer Transformation stellen solltest: Haben wir die richtigen Prozesse, um die Bedürfnisse unserer Kunden zu verstehen und kontinuierlich zu monitoren? Hier könnte die nächste agile Metrik ansetzen.
Aber halt. Das hilft uns nicht, das Ziel dieses Textes zu erreichen – nur eine Sache zu messen.
Nein. Es dient dazu, dir für deine agile Transformation ein wenig Inspiration bzgl. eines sinnvollen agilen Reifegradmodells zu geben.
Schauen wir uns also jetzt mal an, welche typischen agilen Metriken es gibt und inwieweit sie mit den wichtigsten Outcomes korrelieren, um die es bei eurer agilen Transformation geht: Kundennutzen.
Die wichtigsten agilen Metriken – ein Ranking
Du findest oben eine Tabelle mit den häufigsten agilen Metriken, die in skalierten agilen Frameworks und agilen Transformationen eine Rolle spielen. Ich habe sie nach fünf Bereichen geordnet, fünf Zielen, die man im Allgemeinen mit einer agilen Transformation erreichen anvisiert:
- Kundennutzen: Erfüllen die Metriken die Bedürfnisse des Kunden?
- Vorhersagbarkeit: Liefern wir pünktlich und mit reibungslosen Prozessen?
- Produktivität: Erledigen wir mehr und mehr Aufgaben in der gleichen Zeit und mit den gleichen Ressourcen?
- Qualität: Liefern wir ein Produkt, das frei von Fehlern und anderen Problemen ist?
- Kultur: Sind die Mitarbeiter in unserer Organisation zufrieden, lernen sie kontinuierlich dazu und können so innovativ sein, so dass die anvisierte Lieferungsgeschwindigkeit langfristig gehalten werden kann?
Agile KPIs – wie Sie den agilen Erfolg messen
Die Tabelle gibt auch einen Hinweis darauf
- wie einfach es ist, die Metrik zu messen (basierend auf meiner persönlichen Erfahrung)
- wie sehr diese Metrik mit unserem langfristigen Kernziel korreliert: Zukünftiger Kundennutzen (basierend auf meiner Erfahrung).
Also, welche ist aus der Tabelle oben die agile Metrik? Was ist ein guter KPI im agilen Bereich?
Interessant ist, dass es keine agile Metrik zu geben scheint, die einfach zu messen ist und gleichzeitig den maximalen Kundennutzen liefert. Schade aber auch.
Ich würde sagen, dass die „Einfachheit der Messung“ nicht so wichtig ist wie die „Korrelation zum zukünftigen Kundennutzen“. Daher scheinen die validesten Metriken „Usage Index“, „Customer Satisfaction“ oder der „Net Promoter Score“ zu sein.
Übrigens, ein kurzer Hinweis im Kontext agile Transformation: Willst du sicher gehen, dass ihr aktuell die richtigen Prioritäten in eurer agilen Transformation setzt?
Dann mach unseren Reifegrad-Check für eure agile Transformation – dauert nur 3 Minuten. Du bekommst sogar einen Benchmark auf Basis der über dreihundert anderen Teilnehmer*innen. Siehe Button 
Scaled agile Frameworks – der wichtigste agile KPI ist…?
Es spielt keine Rolle, ob du das Scaled Agile Framework (SAFe®) verwendest oder ein anderes Modell, um euren agilen Reifegrad zu erhöhen.
Angesichts dieser drei Metriken ist das, was am meisten mit dem zukünftigen Kundennutzen korreliert, wahrscheinlich die Kundenzufriedenheit bzw. “Customer Satisfaction”. Oder, um genauer zu sein, die Top-Box-Kundenzufriedenheit. Mehr zu diesem Thema findest du unter diesem Link.
Die Kundenzufriedenheit hat wahrscheinlich auch die höchste Korrelation von all diesen Metriken mit dem ROI eurer agilen Transformation. Sie zeigt dir, ob ihr etwas verändern oder auf Kurs bleiben solltet.
Agile KPIs: Eine simple Kennzahl reicht – oder doch nicht?
Aber halt! Wenn ihr euch nur auf die Kundenzufriedenheit fokussiert, wie stellt ihr sicher, dass ihr euren Wettbewerbern langfristig voraus seid? Wie macht ihr es möglich, dass innovative und disruptive Ideen in eurem Unternehmen wachsen und gedeihen können? Was schließlich euer langfristiges Ziel ist…
Angesichts dieser Fragen denke ich, dass wir zurück zu den Grundlagen kommen sollten: Um kontinuierlich Kundennutzen zu schaffen und um innovativ zu sein, braucht ihr zwei weitere Dinge: reibungslose agile Prozesse und eine gesunde Unternehmenskultur.
Eure Unternehmenskultur sorgt dafür, dass sich die Mitarbeiter psychologisch sicher fühlen, offen sind zu scheitern, ihre Stimme erheben und ihre Ideen teilen. Und eure agilen Prozesse sorgen dafür, dass ihr eure Ideen schneller umsetzt als eure Wettbewerber.
Agile, wie eine Führungskraft, zielt auf einen People-First-Ansatz ab; sie stellt die Menschen über die Dinge.
Vikram Verma
Die folgende Grafik veranschaulicht dies auf einfache Art und Weise. Wenn Kundennutzen euer langfristiges Ziel ist, dann ist der Input dafür “agile Prozesse” mal “Unternehmenskultur”.
Ich habe einmal gelesen, dass „die agile Transformation einen Kulturwandel erfordert, nicht einen Prozesswandel.“
Dem kann ich nicht zustimmen. Es erfordert beides.
Drei agile KPIs im agilen Reifegradmodell
Wenn du also nur eine Sache im Scaled Agile Frameworks (SAFe®) oder anderen Frameworks messen möchtet, dann wäre es die Kundenzufriedenheit. Aber ehrlich gesagt kann ich nicht empfehlen, nur eine Sache zu messen – tut mir leid, dass ich dich enttäuschen muss.
Wenn du es mit euren Metriken wirklich so einfach wie möglich halten möchtest, empfehle ich dir, mindestens drei Dinge für eine Indikation eures agilen Reifegrads zu messen:
- Miss den Kundennutzen bzw. Value – durch Kundenzufriedenheit.
- Miss eure Unternehmenskultur – durch psychologische Sicherheit als Indikator für Lernen und Innovation.
- Miss die Etablierung agiler Methoden – mithilfe der „planned-to-done-ratio“ als Indikator dafür, wie gut ihr in der Lage seid, inkrementell Kundennutzen zu liefern.
Nach dem Messen, entwickelt etwas. Dann lernt daraus. Und dann iteriere bzgl. deiner Metriken… Build. Measure. Learn…
Einfach, oder? Nein, natürlich nicht. Aber meinst du es ernst damit, agile Frameworks in deiner Organisation zu etablieren?
Was ist ein guter agiler KPI und was nützt mir das in meiner agilen Transformation?
Wir befragen derzeit Dutzende von Experten – Release Train Engineers, Agile Coaches, Scaled Agile Framework Berater – zum Thema KPIs und Metriken im Kontext Scaled Agile Frameworks und agiler Methoden.
Basierend auf diesen Interviews haben wir Project Scagile entwickelt: 7 Webinare, die dabei helfen die 7 typischen Fehler in agilen Transformationen zu vermeiden. Eines der Webinare ist zum Thema „Agile Metriken“.
Wenn du noch nach einem geeigneten Retro Board Ausschau hältst, kann dir übrigens unser Artikel weiterhelfen mit dem Thema: Die besten Retro Boards im Vergleich.
