ROTI bzw. "Return On Time Invested" als agile Metrik

Welcher Agile Coach oder Scrum Master kennt es nicht. Die Teilnehmer in den Retrospektiven oder anderen Meetings hinterlassen den Anschein, als wäre die Zeit außerhalb des Meetings besser investiert als im Meeting selbst. Um die Meetings jedoch lohnend zu machen, muss man klar erkennen können, wann die Teilnehmer die Meetings gut finden und wann eher weniger. Und genau dafür gibt es den sogenannten roti score (return on time invested).

Roti beziehungsweise der Roti-Score ist eine subjektive Kennzahl, die angibt, wie gut sich die Zeit in einem Meeting oder bei einer Aktivität angefühlt hat. 

Oder einfacher: Bist du der Meinung, ein Meeting ist sehr ergiebig für die Zeit, die es in Anspruch genommen hat, dann  hat es einen hohen Roti-Score. War das Meeting eher so “naja”, dann bekommt es einen eher geringen Roti-Score.

Wie man in diesem Bild sehen kann, findet es bei uns automatisiert statt und gibt auch nochmal an, wie lange die Retrospektive denn gedauert hat. - So erinnert man sich gegebenenfalls auch noch an untergegangene Gespräche, die vielleicht zum Zeitfresser im Meeting wurden. Am Ende lautet die Frage dann nämlich immer: Wie lange hat das Meeting gedauert und was konnte ich daraus mitnehmen? 

Wenn an der Retro beispielsweise 5 Personen teilgenommen haben und folgende Roti-Scores abgegeben haben (5,7,7,8,8) dann kann man hier den Mittelwert bestimmen ((5+7+7+8+8)/5 = 7) und erhält dann den durchschnittlichen Roti-Score.

So arbeitet man richtig mit dem Roti-Score (return on time invested):

An dieser Stelle will ich dir mal einen interessanten Einblick in die Interpretation des Roti-Score geben. Denn glaub mir, mit Kennzahlen gut zu arbeiten ist alles andere als einfach.

Nehmen wir jetzt mal wieder unser Beispiel Ergebnis (5,7,7,8,8) durch unsere Roti-Abfrage.
Was kann man hier heraus interpretieren? - Nichts!

Ja, es stimmt, dass eine Person dem ganzen eine “5” gegeben hat, das heißt aber noch nicht, dass er die Retro wirklich schlechter fand, als jemand, der dieser Retro eine 7 gegeben hat. 

Klingt erst einmal unlogisch, aber bei der subjektiven Wahrnehmung ist es ein fataler Fehler, die verschiedenen Leute miteinander zu vergleichen. - Ich habe beispielsweise selbst mit verschiedenen Teams diese Kennzahl erarbeitet und was ich hier herausgefunden habe, war höchst interessant:

Du kannst es dir vielleicht schon denken, aber jeder Charakter ist anders und es gibt die einen, für die eine “7” im Roti-Score schon eine eher schlechte Retro war und diejenigen, für die alles über “5” ein absoluter Erfolg ist. Und genau deshalb spreche ich auch sehr gerne am Ende der Retro jeweils eine Minute mit jedem Teilnehmer, um ein Gefühl dafür zu entwickeln, was eine gewisse Zahl bei dieser Person eigentlich bedeutet. - Das gleiche gilt übrigens auch für verschiedene Teams. Nimm den Roti-Score bitte nicht, um Teams untereinander zu vergleichen, da auch hier so viele Parameter mit einspielen, dass man nicht sagen kann, ob eine “8” bei dem einen Team jetzt besser, gleich oder sogar schlechter ist als eine “7” beim anderen Team. 

Schauen wir uns jetzt aber mal an, was man für interessante Informationen aus dem Roti-Score entnehmen kann.

Wie entwickeln sich das Team und die einzelnen Teamplayer?

Wie man in diesem Bild sehen kann, messen wir den Roti-Score in jeder Retro und können so wirklich langfristige Trends in den Teams erkennen. Hier sehen wir beispielsweise, dass das Team bereits so gut eingespielt ist, dass wir eine ziemlich stabile Performance abliefern können und uns immer ca. im Bereich einer 9/10 bewegen.

In dem zweiten Bild wiederum sieht man ein Team, das erst seit kurzer Zeit Retrospektiven in der Routine verankert hat. Und was man hier schnell sehen kann, ist, dass das erste Team im Schnitt einen ganzen Punkt mehr vergibt als das Zweite. Das witzige ist jedoch, dass hier tatsächlich das oben benannte Phänomen eintritt, dass die Retros de facto nicht schlechter Laufen, sondern Team #2 Einfach etwas konserativer mit der Punktevergabe umgeht. - Was man jedoch wirklich bei Team #2 sehen kann, ist dass die Retros von Monat zu Monat als etwas weniger wertvoll wahrgenommen werden. Der “return on time invested” sinkt.

Ab hier beginnt die wahre Magie: denn nun muss man herausfinden, was dafür gesorgt hat, dass Team #2 einen Abwärtstrend erkennt. 

Spoiler: Die Dauer der Retrospektiven hat zugenommen. - Es scheint also so zu sein, als würde die zunehmende Dauer der retros bei Team #2 dafür sorgen, dass der Return on time invested abnimmt.
Wichtig: Dies ist erst einmal eine Hypothese, die wiederum getestet werden muss. Wir haben in dem Team also den Schluss gezogen, die Meeting-Zeit zu restriktieren und werden in den kommenden Retros sehen, was es für eine Auswirkung auf den Roti-Score haben wird.

Mit diesem Verfahren haben wir bei Echometer insgesamt schon mehr als 30.000 Retrospektiven von mehr als 100 Unternehmen analysiert und unglaublich interessante Beobachtungen machen können.

Eine ist beispielsweise, dass die meisten Retrospektiven an einem Mittwoch gehalten werden, obwohl der Roti-Score an Freitagen am höchsten ist:

Falls dich die Auswertung und die daraus entstandenen Learnings interessieren, lies doch gerne unseren Artikel: “ Analyse von 30k Retros: 4 Tipps für agile Teams %E2%80%9D

Für Führungskräfte: ROTI von 1-zu-1 Meetings

Viele Führungskräfte führen regelmäßige Eins-zu-Eins-Meetings mit ihren Mitarbeitenden durch - holen aber nicht alles aus den Gesprächen raus. Der ROTI für dieses Meeting fällt nach hunderten von Interviews, die wir zu dem Thema geführt haben, eher gering aus.

Deshalb möchte ich dich an dieser Stelle auf unser 1:1 Meeting Tool Echometer aufmerksam machen (siehe Website). Es kombiniert kurze Health Check Umfragen mit einem KI-Assistenten, der dir die Mitarbeiterentwicklung wesentlich vereinfacht.

Die folgende Vorlage gibt dir ein Gefühl dafür, welche Art von Fragen du mit Echometer in deinen 1-zu-1 Meetings reflektieren und messbar machen kannst. Probier es gerne mal über den Knopf ohne Login aus:

⁉️ Stimmungscheck (Zustimmung von 1-7): Persönliche Entwicklung

• "Meine Arbeitsaufgaben machen in der Regel sehr schnell Fortschritte, auch wenn externes Feedback notwendig ist."
• "Wenn ich suboptimales Verhalten beobachte, weiß ich, wie ich Kollegen konstruktiv darauf aufmerksam machen kann."
• "Ich erhalte konstruktives Feedback sowohl zu meiner Arbeit als auch zu meiner persönlichen Entwicklung."
• "Ich sehe einen attraktiven Karriereweg im Unternehmen vor mir." #Growth
• "In den letzten Wochen konnte ich sehr oft meine Stärken bei der Arbeit einsetzen."

So sieht diese Umfrage in Echometer aus:

Vorlage im 1:1 Tool öffnen

Schlusswort zu Roti (Return on time invested)

Ich hoffe ich konnte dir mit diesem Artikel etwas mehr Klarheit im Umgang mit dem Roti-Score geben.
Wenn du jedoch keine Lust darauf hast, den Roti-Score oder die vielen anderen Kennzahlen zu tracken, die dir mehr Aufschluss über deine Teams und deren Entwicklungsmöglichkeiten geben, dann probier doch gerne mal Echometer aus. Du kannst das Tool in vollem Umfang völlig kostenlos testen und ohne Mehraufwand einen einfachen Überblick über Beispielsweise den Roti-Score und viele weitere Kennzahlen bekommen.

How to

Segelboot Retro ⛵️: So läuft die Retro ab

1. Random Icebreaker (2-5 Minuten)

   Echometer stellt euch einen Generator für zufällige Check-in-Fragen bereit.

2. Review der offenen Maßnahmen (2-5 Minuten)

   Bevor man mit neuen Themen loslegt, sollte man einmal zur Wirksamkeitskontrolle darüber sprechen, was aus den Maßnahmen aus vergangenen Retrospektiven geworden ist. Echometer listet automatisch alle offenen Action Items aus vergangenen Retros auf.

3. Retro-Themen besprechen

   Nutzt die folgenden offenen Fragen, um eure wichtigsten Erkenntnisse zu sammeln. Zuerst verdeckt jeder für sich. Echometer erlaubt es jede Spalte des Retro-Boards einzeln aufzudecken, um das Feedback dann anschließend zu präsentieren und zu gruppieren.

   • ⛵️ ⚓️ Anker: Was hält uns zurück?
   • 🦈🧊 Hai/Eisberg: Welche Gefahren oder Hindernisse kommen auf uns zu?
   • 💨 Rückenwind: Was treibt uns vorwärts?
   • 🏝💰 Paradies: Auf welche Ziele oder Meilensteine arbeiten wir hin?

4. Catch-all Frage (Empfohlen)

   Damit auch sonstige Themen einen Platz haben:

   • Über was möchtest du sonst noch in der Retro reden?

5. Priorisierung / Voting (5 Minuten)

   Auf dem Retro-Board in Echometer könnt ihr das Feedback ganz einfach mit dem Voting priorisieren. Das Voting ist natürlich anonym.

6. Maßnahmen definieren (10-20 Minuten)

   Über das Plus-Symbol an einem Feedback kann man eine verlinkte Maßnahmen erstellen. Noch nicht sicher welche Maßnahme die richtige wäre? Dann öffne über das Plus-Symbol stattdessen ein Whiteboard zu dem Thema um Kernursachen und mögliche Maßnahmen zu brainstormen.

7. Checkout / Closing (5 Minuten)

   Echometer ermöglicht euch anonymes Feedback vom Team einzusammeln, wie hilfreich die Retro war. Daraus entseht der ROTI-Score ("Retrun On Time Invested"), den ihr über die Zeit tracken könnt.

Segelboot Retro ⛵️

⛵️ ⚓️ Anker: Was hält uns zurück?

🦈🧊 Hai/Eisberg: Welche Gefahren oder Hindernisse kommen auf uns zu?

💨 Rückenwind: Was treibt uns vorwärts?

🏝💰 Paradies: Auf welche Ziele oder Meilensteine arbeiten wir hin?

Diese Retro jetzt öffnen