25 KPIs do Agile em um relance - 1 KPI simples é suficiente!

Há muitos KPIs ágeis e métodos de medição. Mas você sempre deve ter uma coisa em mente:

Diga-me como você me mede e eu lhe direi como me comportarei.

Dr. Eli Goldratt

Portanto, é preciso fazer uma pergunta: Todos esses KPIs ágeis são relevantes? E ainda há esta outra citação:

Simplicidade é a alma da eficiência.

Austin Freeman

Portanto, a próxima pergunta é: se quisermos medir a agilidade da forma mais simples possível, como faríamos isso? Quais métricas e medições ágeis são mais importantes? Ou, se tivéssemos que medir apenas uma coisa, o que seria?

Visão geral: Métricas e KPIs ágeis típicos

Existem muitas maneiras de coletar métricas e KPIs ágeis. Aqui está uma visão geral das opções (não exaustiva):

KPI ágil	Explicação	Baseado em…	Correlação com o valor para o cliente	Simplicidade para medir	Visa…
Gráfico de Burndown da Sprint	Mostra o progresso dentro da sprint para atingir o objetivo da sprint	Esforço estimado subjetivamente	Baixo 🔴	Parcialmente manual ⚠️	Produtividade 🏃
Velocidade	Indicador de quanto trabalho foi feito durante uma sprint	Soma dos story points estimados subjetivamente (User Stories completas)	Baixo 🔴	Parcialmente manual ⚠️	Produtividade 🏃
Burndown de Épico e Release	Monitoramento do progresso em várias tarefas em direção a um épico	Esforço estimado subjetivamente	Médio ⚠️	Parcialmente manual ⚠️	Produtividade 🏃
Gráfico de Controle	Duração do tempo desde o status “Em Andamento” até “Concluído” das tarefas	Medição de tempo objetiva	Baixo 🔴	Automatizado ✅	Produtividade 🏃
Diagrama de Fluxo Cumulativo	Número de tarefas no backlog em relação ao tempo restante	Número objetivo de tarefas vs. tempo	Médio ⚠️	Automatizado ✅	Produtividade 🏃
Lead Time	Período de tempo entre o pedido de um produto e sua entrega	Medição de tempo objetiva	Médio ⚠️	Automatizado ✅	Produtividade 🏃
Valor Entregue ou Benefício ao Cliente Entregue	Benefício ao cliente de um requisito em € ou pontos	Estimado e atribuído subjetivamente pelo Product Owner	Médio ⚠️	Parcialmente manual ⚠️	Benefício ao cliente 🔍
Pontuação do Net Promoter	Disposição para recomendar o produto	Subjetivo pelo cliente	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Benefício ao cliente 🔍
Work Item Age	Indicação de quanto tempo leva desde o início até a conclusão de uma tarefa	Objetivo através de uma ferramenta	Baixo 🔴	Automatizado ✅	Produtividade 🏃
Throughput	Tarefas concluídas em média dentro de um determinado tempo	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Produtividade 🏃
Blocked Time	Número e duração de tarefas que não podem ser processadas devido a dependências internas	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Previsibilidade 🎲
Defeitos escapados	Indicação do número de erros de software quando uma release é publicada	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Qualidade 🏆
Failed Deployments	Número de Deployments	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Qualidade 🏆
Code Coverage	Extensão em que o código-fonte de um programa é executado (indica a qualidade do software)	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Qualidade 🏆
Quality Intelligence	Ajuda na identificação de mudanças recentes no código (indica a qualidade do software)	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Qualidade 🏆
Cycle Time	“Work in progress” dividido pela taxa média de conclusão de tarefas (indica quão bem o fluxo de trabalho funciona)	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Produtividade 🏃
Satisfação do cliente	Satisfação do cliente ou usuário com o produto ou serviço	Subjetivo pelo cliente	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Benefício ao cliente 🔍
Planned-to-done-ratio	Relação entre User Stories planejadas e concluídas	Objetivo através de uma ferramenta	Médio ⚠️	Automatizado ✅	Previsibilidade 🎲
Índice de uso	Mostra quais recursos são realmente usados pelos clientes e com qual intensidade	Objetivo através de uma ferramenta	Alto ✅	Parcialmente manual ⚠️	Benefício ao cliente 🔍
Taxa de Inovação	Capacidade das equipes de desenvolver recursos valiosos vs. corrigir trabalhos “ruins” (correções de bugs e solicitações de suporte)	Objetivo através de uma ferramenta	Médio ⚠️	Parcialmente manual e ferramentas necessárias 🔴	Qualidade 🏆
Valor da Empresa	O valor da empresa (área)	Objetivo ou subjetivo pelos stakeholders	Médio ⚠️	Parcialmente manual ⚠️	Benefício ao cliente 🔍
Segurança psicológica	Probabilidade de que os funcionários expressem abertamente suas opiniões e ideias	Subjetivo através de uma ferramenta (de pesquisa)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Propósito	Uma razão emocional para a existência da sua empresa ou departamento	Subjetivo através de uma ferramenta (de pesquisa)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Visão	Uma imagem emocional de como a sua empresa ou departamento será no futuro	Subjetivo através de uma ferramenta (de pesquisa)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Satisfação / Felicidade dos Colaboradores	Satisfação dos colaboradores com o seu trabalho	Subjetivo através de uma ferramenta (de pesquisa)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑

Não me entenda mal: é claro que você pode ter modelos de maturidade ágil mais complicados ou métricas ágeis, como o Agilômetro. Mas acho muito interessante o experimento mental de querer medir apenas um KPI. É por isso que este artigo explora essa meta. 

Usamos os KPIs ágeis acima como base para este texto.

Uma observação prévia: uma métrica ágil simples, pragmática e muito útil é a mostrada no vídeo aqui. Agustina até compartilha publicamente os dados da equipe de todo o ano passado:

Play

Rejeitar métricas e KPIs ágeis?

Será que você quer métricas ágeis e KPIs ágeis?

Antes de nos aprofundarmos, uma coisa que ouço ou leio regularmente no LinkedIn quando converso com coaches ágeis, scrum masters ou consultores do Scaled Agile Frameworks: você quer medir o ágil?

Existem mentiras, existem mentiras deslavadas e depois existem as estatísticas.

Mark Twain

Mark Twain é um pouco dramático em relação a isso. Mas ele tem razão. Um ponto que Albert Einstein resumiu em poucas palavras.

Nem tudo o que pode ser contado conta.

Albert Einstein

O que são boas “KPIs” em Agile - Velocidade, gráficos de burndown, número de implementações falhadas? Estas métricas ágeis são cruciais para o sucesso ágil? Eu duvido. 

Mas você desiste de todas as métricas? Isso também seria um erro.

Vantagens dos KPIs e métricas ágeis

No mundo de hoje, o ambiente de negócios muda rapidamente. Em tempos de bonança, os tomadores de decisão pensam na transformação ágil porque têm os recursos e a segurança. E em tempos ruins?

Em tempos de crise econômica, os líderes voltam ao pensamento tradicional. Eles voltarão a adotar velhos padrões de comportamento: por exemplo, decisões de cima para baixo que não são realmente compatíveis com o pensamento ágil moderno.

Portanto, se os líderes não tiverem KPIs claros para orientar o barco em tempos ruins, nem sequer iniciem uma transformação ágil. Porque então, na crise econômica, qualquer progresso feito nessa transformação seria destruído.

Portanto, provavelmente a única chance de os métodos ágeis sobreviverem a tempos difíceis no ambiente de escala é vencer o sistema com suas próprias armas: fornecendo métricas. Métricas que ajudam a gerenciar em tempos de incerteza.

E tenho certeza: existem métricas ágeis que agregam valor. 

Em retrospectiva, considero um dos meus maiores erros sempre categoricamente métricas para a transformação ágil **ter recusado.

Marcus Raitner

Einstein também diz isso em sua citação: “Há coisas que contam”. É sobre elas que este artigo trata.

Medir a agilidade - O que faz uma boa métrica ágil?

Digamos que a pergunta que você faz em seu Daily Stand-up é tipicamente: O que você realizou hoje? Então, essa é a maneira como você “mede” o progresso em sua equipe.

Boa pergunta, certo? Não, não está certo. Essa pergunta está pressionando a equipe a mostrar que está trabalhando duro. A pergunta pressiona a equipe a concluir a “lista de tarefas” para que possa se referir com orgulho à métrica: Sim, estive bastante ocupado nas últimas 24 horas!

Mas concluir a “lista de tarefas” é bom ou não? Bem, depende. Algo mais é muito mais importante: Nomeadamente, alcançar o objetivo da equipa. Este é tipicamente - no caso de equipas ágeis - a entrega de valor ao cliente ou, em inglês, “delivering value”.

KPIs ágeis - como medir a agilidade

Uma pergunta (ou métrica) melhor em seu Daily Stand-up seria, portanto: “Como você ajudou sua equipe ou organização a atingir nossa meta (de Sprint) nas últimas 24 horas?”

Mude sua pergunta (ou a métrica), mude a maneira como as pessoas pensam e agem: primeiro eficaz, depois eficiente - parafraseando Peter Drucker para dizer.

Mude a métrica - mude a maneira como as pessoas pensam e agem.

Parafraseando Einstein: Precisamos encontrar a única coisa que pode ser contada - e que realmente importa.

Então, o que realmente conta em uma transformação ágil?

A visão correta dos KPIs e métricas ágeis

O objetivo da sua transformação ágil definitivamente não é uma transformação ágil. Por que você está fazendo a transformação ágil? Vamos usar a “técnica dos 3 porquês” para entender isso:

O principal motivo para sua transformação ágil: você não quer acabar como a empresa Blockbuster, que ignorou as tendências do setor e as necessidades dos clientes, não estava aberta a mudanças e acabou ficando sem dinheiro.

Você quer acabar como a Netflix, que está constantemente evoluindo seu modelo de negócios em torno das principais necessidades de seus clientes. Basta você olhar para o Estudo de caso Blockbuster vs. Netflix.

Como você pode traduzir isso em uma métrica em uma transformação ágil? Bem, isso vai ser difícil.

O que as empresas fazem em vez disso: Usam métricas porque elas são fáceis de medir. Porque as ferramentas que existem por aí as cospem de qualquer maneira. A probabilidade de que essas sejam as métricas corretas é muito baixa.

Por exemplo, não se trata de melhorar a velocidade ou a rapidez do sprint. Esse é um erro comum: monitorar e medir o esforço ou a eficiência. Em vez disso, trata-se de satisfazer as necessidades do cliente. 

KPIs ágeis e medição da agilidade - uma descoberta importante

Tendo estabelecido tudo isso, precisamos medir a validade de nossa “métrica única” em relação a algo ou encontrar um correlato.

Precisamos medir os resultados, não os outputs. Precisamos medir nossa transformação ágil com base em quanto ela nos ajuda a atingir nosso objetivo. Não devemos medir as pessoas pelo tempo que gastam, mas por sua contribuição para uma visão ou objetivo comum - devemos medir o valor criado para o cliente!

Se quisermos medir o valor do cliente, precisamos entender muito bem as necessidades do cliente.

Por exemplo, uma empresa ferroviária precisa entender que não está no negócio de ferrovias. Ela precisa entender que está no negócio de transporte. Porque os clientes não se importam se são transportados de trem ou de avião.

Uma breve digressão: o importante com as métricas ágeis é, obviamente, refletir sobre elas. Como, por exemplo, com o Spotify Health Check com a retrospectiva correspondente. 

Você pode fazer exatamente isso (também entre equipes, se necessário) usando nossa ferramenta de Health Check & Retrospectiva. Mais informações podem ser encontradas em “Como funciona”. Você também pode simplesmente dar uma olhada em uma retrospectiva de Health Check aqui. Neste caso, é uma retrospectiva sobre Scrum.

A medição de métricas culturais (como a segurança psicológica) pode, portanto, ocorrer em retrospectivas ágeis, onde as medidas também podem ser obtidas imediatamente.

Uma alternativa a isso são as reuniões individuais entre gerentes e funcionários. 

Mesmo nessa rotina, pesquisas de pulso curtas e reflexões regulares podem ajudar a coletar métricas culturais significativas e, ao mesmo tempo, implementar um processo de melhoria contínua.

Nossa ferramenta Echometer também pode ajudar você com isso. O modelo a seguir contém algumas perguntas sobre saúde que você pode refletir individualmente com os membros da sua equipe. Você pode respondê-las em uma escala de 1 a 7. 

Experimente sem fazer login usando o botão:

Outra visão das métricas ágeis: Tempo

Outra reflexão é importante aqui. Na melhor das hipóteses, as métricas dependem do tempo e/ou do estágio em que você se encontra na transformação ágil. 

Digamos que você já saiba que uma transformação ágil com a Estrutura Scaled Agile (SAFe®) ou outras estruturas ágeis é a etapa certa para você (a propósito, essa é a primeira coisa em que você deve pensar como empresa).

Nesse caso, você deve se concentrar em Início da transformação ágil se baseia em uma coisa: A mentalidade ágil da equipe de liderança.

A equipa de gestão está realmente disposta a mudar? Compreende as implicações de uma transformação? Está disposta a ser a primeira equipa da empresa a introduzir seriamente métodos ágeis - incluindo Kanban, retrospetivas ágeis e autorreflexão contínua?

Teoricamente, uma primeira métrica ágil deve, portanto, concentrar-se na “disponibilidade da gestão ou da equipa de gestão”. O meu colega Jean dá no seu artigo 7 dicas sobre o papel dos líderes nas transformações ágeis .

A próxima pergunta importante que você deve fazer a si mesmo em sua transformação: Temos os processos certos para entender e monitorar continuamente as necessidades de nossos clientes? Essa pode ser a próxima métrica ágil.

Mas espera. Isso não nos ajuda a atingir o objetivo deste texto - apenas a coisa a ser medida.

Não. Ele serve para que você se inspire na transformação ágil em termos de um modelo de maturidade ágil significativo.

Então, vamos dar uma olhada nas métricas ágeis típicas e como elas se correlacionam com os resultados mais importantes da sua transformação ágil: o valor do cliente.

As métricas ágeis mais importantes - um ranking

Você encontrará uma tabela acima com os Métricas ágeis mais comunsEssas são as metas que desempenham um papel nas estruturas ágeis em escala e nas transformações ágeis. Eu as agrupei de acordo com cinco áreas, cinco metas que você pode em geral com uma transformação ágil:

• Benefícios para o clienteAs métricas atendem às necessidades do cliente?
• PrevisibilidadeVocê sabe o que está fazendo: Entregamos no prazo e com processos tranquilos?
• ProdutividadeEstamos realizando mais e mais tarefas no mesmo tempo e com os mesmos recursos?
• QualidadeVocê sabe o que é um produto: Entregamos um produto livre de defeitos e outros problemas?
• CulturaOs funcionários de nossa organização estão satisfeitos, aprendem continuamente e podem ser inovadores para que a velocidade de entrega desejada possa ser mantida a longo prazo?

KPIs ágeis - como medir o sucesso ágil

A tabela também fornece uma indicação de

• quão fácil é medir a métrica (com base em minha experiência pessoal)
• O quanto essa métrica se correlaciona com nosso objetivo principal de longo prazo: Valor futuro do cliente (com base em minha experiência).

Então, qual deles é o da tabela acima? o métrica ágil? O que é um bom KPI em Agile?

É interessante que parece não haver uma métrica ágil que seja fácil de medir e que, ao mesmo tempo, proporcione o máximo de valor para o cliente. Mas isso também é uma pena.

Eu diria que a “simplicidade da medição” não é tão importante como a “correlação com o futuro benefício para o cliente”. Portanto, as métricas mais válidas parecem ser o “Índice de Utilização”, a “Satisfação do Cliente” ou o “Net Promoter Score”.

A propósito, você pode começar a coletar 11 KPIs em sua equipe hoje mesmo, realizando o chamado Spotify Health Check com sua equipe. Dê uma olhada neste vídeo e nos outros vídeos mencionados para ver como ele funciona:

Play

Scaled agile Frameworks - o KPI ágil mais importante é…?

Não importa se você usa a estrutura Scaled Agile (SAFe®) ou outro modelo para aumentar sua maturidade ágil.

Considerando essas três métricas, o que mais se correlaciona com o valor futuro do cliente é provavelmente a satisfação do cliente. Ou, para ser mais exato, a satisfação do cliente de primeira linha. Você pode encontrar mais informações sobre esse tópico neste link.

A satisfação do cliente provavelmente também tem a maior correlação de todas essas métricas com o ROI de sua transformação ágil. Ela informa se você deve mudar algo ou manter o curso.

KPIs ágeis: Uma métrica simples é suficiente - ou não?

Mas pare! Se você se concentrar apenas na satisfação do cliente, como terá certeza de que poderá superar seus concorrentes? longo prazo à frente? Como é que tornam possível que ideias inovadoras e disruptivas cresçam e prosperem na vossa empresa? Qual é, afinal, o vosso objetivo a longo prazo…

Diante dessas perguntas, acho que devemos voltar ao básico: Para criar continuamente valor para o cliente e inovar, você precisa de duas outras coisas: processos ágeis e suaves e uma cultura corporativa saudável.

Sua cultura corporativa garante que os funcionários se sintam Psicologicamente seguro Você não precisa se preocupar com o que sente, está aberto ao fracasso, fala e compartilha suas ideias. E seus processos ágeis garantem que você implemente suas ideias mais rapidamente do que seus concorrentes.

**O Agile, como líder, visa uma abordagem People-First; coloca as pessoas acima das coisas.**Vikram Verma

O gráfico a seguir ilustra isso de forma simples. Se o valor do cliente for sua meta de longo prazo, então a entrada para isso é “processos ágeis” vezes “cultura corporativa”.

Cultura × Processos ágeis = Benefício a longo prazo para o cliente

Uma vez li que “a transformação ágil requer uma mudança cultural, não uma mudança de processo.”

Não posso concordar com isso. Você precisa de ambos.

Três KPIs ágeis no modelo de maturidade ágil

Portanto, se quiser medir apenas uma coisa no Scaled Agile Frameworks (SAFe®) ou noutros frameworks, seria a satisfação do cliente. Mas, honestamente, não posso recomendar medir apenas uma coisa - lamento desapontá-lo.

Se você realmente quiser manter as métricas o mais simples possível, recomendo medir pelo menos três coisas para ter uma indicação da sua maturidade ágil:

• Perder o Benefício ou valor para o cliente - através da satisfação do cliente. 
• Sinto falta de você Cultura corporativa - através de segurança psicológica como um indicador de aprendizado e inovação. 
• Perder o Estabelecimento de métodos ágeis - usando a “planned-to-done-ratio” como um indicador de quão bem são capazes de fornecer valor incremental ao cliente.

Depois de medir, desenvolva algo. Depois, aprenda com isso. E, em seguida, repita suas métricas… Construa. Medir. Aprenda…

É simples, não é? Não, é claro que não. Mas você está pensando seriamente em estabelecer estruturas ágeis em sua organização?

O que é um bom KPI ágil e como ele me beneficia em minha transformação ágil?

Atualmente, estamos a entrevistar dezenas de especialistas - Release Train Engineers, Agile Coaches, Scaled Agile Framework Consultants - sobre KPIs e métricas no contexto de Scaled Agile Frameworks e métodos ágeis.

Com base nessas entrevistas, desenvolvemos o Projeto Scagile: 7 webinars que ajudarão você a 7 erros típicos em transformações ágeis a evitar. Um dos webinars é sobre “Métricas ágeis”.

Se você ainda estiver procurando por um quadro retrô adequado, nosso artigo poderá ajudá-lo com o assunto: As melhores placas retrô em comparação.