ROTI of "Return On Time Invested" als een agile meetmethode
Welke Agile Coach of Scrum Master weet het niet. De deelnemers aan retrospectives of andere bijeenkomsten laten de indruk achter dat de tijd buiten de bijeenkomst beter wordt geïnvesteerd dan in de bijeenkomst zelf. Maar om de bijeenkomsten de moeite waard te maken, moet je duidelijk kunnen vaststellen wanneer de deelnemers de bijeenkomsten goed vinden en wanneer wat minder. En dat is precies waar de zogenaamde roti-score (return on time invested) voor bedoeld is.
Roti (rendement op geïnvesteerde tijd) kort uitgelegd:
Wat is Roti (rendement op geïnvesteerde tijd)?
Roti, of Roti-score, is een subjectieve maatstaf voor hoe goed het voelde om tijd door te brengen in een vergadering of activiteit.
Of eenvoudiger: Als je vindt dat een vergadering erg productief was voor de tijd die hij duurde, dan heeft hij een hoge Roti-score. Als de vergadering meer “goed” was, dan krijgt het een vrij lage Roti-Score.

Zoals te zien is in deze afbeelding, gebeurt het bij ons geautomatiseerd en wordt ook aangegeven hoe lang de retrospectieve heeft geduurd. - Zo herinnert men zich eventueel ook nog aan verloren gegane gesprekken, die misschien de tijdvreter in de meeting zijn geworden. Aan het einde is de vraag dan namelijk altijd: Hoe lang heeft de meeting geduurd en wat kon ik eruit meenemen?
Als bijvoorbeeld 5 mensen deelnamen aan de retro en de volgende Roti-scores gaven (5,7,7,8,8) dan kun je hier de gemiddelde waarde bepalen ((5+7+7+8+8)/5 = 7) en dan de gemiddelde Roti-score krijgen.
Zo werk je op de juiste manier met de Roti-Score (return on time invested):
Op dit punt wil ik je een interessant inzicht geven in de interpretatie van de Roti-Score. Want geloof me, goed werken met kengetallen is allesbehalve gemakkelijk.
Laten we nu ons voorbeeldresultaat (5,7,7,8,8) nog eens door onze roti-query halen.
Wat kunnen we hieruit interpreteren? - Niets!
Ja, het is waar dat één persoon het een “5” gaf, maar dat betekent niet dat hij de retro echt slechter vond dan iemand die het een 7 gaf.
Klinkt eerst onlogisch, maar bij de subjectieve waarneming is het een fatale fout om de verschillende mensen met elkaar te vergelijken. - Ik heb bijvoorbeeld zelf met verschillende teams deze kengetal uitgewerkt en wat ik hieruit heb gevonden, was hoogst interessant:
Je kunt het je misschien al bedenken, maar elk karakter is anders en er zijn mensen voor wie een “7” in de ROTI-score al een eerder slechte retro was, en mensen voor wie alles boven de “5” een absoluut succes is. En precies daarom spreek ik ook heel graag aan het einde van de retro telkens een minuut met elke deelnemer, om een gevoel te ontwikkelen voor wat een bepaald getal bij deze persoon eigenlijk betekent. - Hetzelfde geldt trouwens ook voor verschillende teams. Gebruik de ROTI-score alsjeblieft niet om teams onderling te vergelijken, omdat ook hier zo veel parameters meespelen, dat men niet kan zeggen of een “8” bij het ene team nu beter, gelijk of zelfs slechter is dan een “7” bij het andere team.
Maar laten we nu eens kijken welke interessante informatie je uit de Roti-Score kunt halen.
Hoe ontwikkelen het team en de individuele teamspelers zich?

Zoals je in deze afbeelding kunt zien, meten we de Roti-score in elke retro en kunnen we echt langetermijntrends in de teams zien. Hier zien we bijvoorbeeld dat het team al zo goed geoefend is dat we een vrij stabiele prestatie kunnen leveren en altijd rond een 9/10 zitten.

In de tweede afbeelding ziet men daarentegen een team, dat pas sinds korte tijd retrospectieven in de routine heeft verankerd. En wat men hier snel kan zien, is dat het eerste team gemiddeld een heel punt meer toekent dan het tweede. Het grappige is echter, dat hier daadwerkelijk het bovengenoemde fenomeen intreedt, dat de retro’s de facto niet slechter verlopen, maar team #2 gewoon iets conservatiever met de puntentoekenning omgaat. - Wat men echter werkelijk bij team #2 kan zien, is dat de retro’s van maand tot maand als iets minder waardevol worden waargenomen. De “return on time invested” daalt.
Hier begint de echte magie: want nu moet je erachter komen wat de oorzaak was van de dalende trend bij Team #2.
Spoiler: De duur van de retrospectieven is toegenomen. - Het lijkt er dus op dat de toenemende duur van de retro’s bij team #2 ervoor zorgt dat de Return on time invested afneemt.
Belangrijk: Dit is slechts een hypothese die getest moet worden. Daarom hebben we in het team besloten om de vergadertijd te beperken en we zullen de komende tijd zien welk effect dit heeft op de Roti-score.
Bij Echometer hebben we met deze methode al meer dan 30.000 retrospectives van meer dan 100 bedrijven geanalyseerd en ongelooflijk interessante observaties kunnen doen.
Een voorbeeld is dat de meeste terugblikken op een woensdag worden gehouden, hoewel de Roti-score het hoogst is op vrijdag:

Als je geïnteresseerd bent in de evaluatie en de daaruit voortvloeiende lessen, lees dan ons artikel: “ 30k retros analyseren: 4 tips voor Agile teams %E2%80%9D
Voor managers: ROTI van 1-op-1 vergaderingen
Veel leidinggevenden voeren regelmatige een-op-een gesprekken met hun medewerkers - maar halen niet alles uit de gesprekken. De ROTI voor deze meeting valt na honderden interviews die we over dit onderwerp hebben afgenomen, eerder gering uit.
Daarom wil ik van deze gelegenheid gebruik maken om jullie aandacht te vestigen op onze 1:1 vergadertool Echometer (zie website). Het combineert korte Health Check-enquêtes met een AI-assistent die de ontwikkeling van medewerkers veel gemakkelijker maakt.
Het volgende sjabloon geeft je een idee over wat voor soort vragen je kunt nadenken en meten met Echometer in je 1-op-1 bijeenkomsten. Probeer het uit met de knop zonder in te loggen:
⁉️ Stimmingscheck (Zustimmung von 1-7): Persönliche Entwicklung
- "Meine Arbeitsaufgaben machen in der Regel sehr schnell Fortschritte, auch wenn externes Feedback notwendig ist."
- "Wenn ich suboptimales Verhalten beobachte, weiß ich, wie ich Kollegen konstruktiv darauf aufmerksam machen kann."
- "Ich erhalte konstruktives Feedback sowohl zu meiner Arbeit als auch zu meiner persönlichen Entwicklung."
- "Ich sehe einen attraktiven Karriereweg im Unternehmen vor mir." #Growth
- "In den letzten Wochen konnte ich sehr oft meine Stärken bei der Arbeit einsetzen."
So sieht diese Umfrage in Echometer aus:
Conclusie over Roti (Rendement op geïnvesteerde tijd)
Ik hoop dat ik je met dit artikel wat meer duidelijkheid heb kunnen geven in het omgaan met de Roti-Score.
Maar als je geen zin hebt om de Roti-Score of de vele andere kengetallen bij te houden die je meer informatie geven over je teams en hun ontwikkelingsmogelijkheden, waarom probeer je Echometer dan niet eens? Je kunt de tool helemaal gratis uitproberen en zonder extra moeite een eenvoudig overzicht krijgen van bijvoorbeeld de Roti-Score en vele andere kengetallen.
Zeilboot Retro ⛵️