Medindo o impacto de programas de L&D com People Analytics

Kirkpatrick (1959): Modelo clássico, 4 níveis. Nível 1 - Reação: "Você gostou do curso?" (satisfação). Nível 2 - Aprendizado: "Você aprendeu??" (teste pós-curso). Nível 3 - Comportamento: "Você usa no dia a dia?" (observação/entrevista). Nível 4 - Resultados: "Seu trabalho melhorou?" (métricas de negócio). Vantagem: framework claro, fácil de entender. Desvantagem: níveis 1-2 são muito fraco (satisfação não = aprendizado = comportamento = resultado).

Beyond Kirkpatrick (Kirkpatrick Partners, 2016): Versão moderna que enfatiza comportamento/resultados. Começa com objetivos de negócio ("queremos melhorar retenção de gerentes"), depois desenha treinamento. Medição foca em níveis 3-4, não 1-2. Mais prático.

ROI Institute (Phillips): Modelo que calcular ROI de L&D. ROI = (Valor criado - Custo) / Custo * 100%. Exemplo: treinamento custou $100k, criou $300k em valor (redução de turnover), ROI = 200%. Requer quantificação rigorosa de "valor criado".

Recomendação: Começar com Beyond Kirkpatrick (simples, pragmático). Escalar para ROI modelo se volume/importância justificar.

Dados de treinamento: Qual curso? Quando (data)? Quem completou? Qual é a duração? Custo? Objetivo (comportamental, skill, conhecimento?). Sem isso, não consegue identificar quem foi treinado.

Dados de desempenho: Performance rating (1-5 star), goals completados (%), feedback qualitativo. Coletado antes e depois do treinamento. Se desempenho sobe após treinamento, é sinal de impacto.

Dados de retenção: Quem saiu, quando, qual é o tempo de permanência (tenure). Treinamento em liderança reduz turnover de gerente? Comparar turnover de quem fez vs. quem não fez.

Dados de promoção: Quem foi promovido, quando, qual era seu histórico de treinamento. Treinamento de "next level skills" leva à promoção?

Dados de salário: Treinamento em skill X leva a aumento salarial? Comparar aumento de quem treinou vs. quem não treinou.

Dados demográficos: Idade, sexo, nível, depto, tenure. Para análise de heterogeneidade (qual tipo de pessoa se beneficia?)

Problema da causalidade: "Pessoa que fez treinamento foi promovida. Logo, treinamento levou a promoção." Não necessariamente! Pessoa pode ser naturalmente talentosa, então teria sido promovida mesmo sem treinamento. Ou pode ser que gerente oferece treinamento só a pessoas com potencial (viés de seleção).

Solução: comparar com grupo controle: Grupo tratado = pessoas que fizeram treinamento. Grupo controle = pessoas similares que NÃO fizeram. Se tratado tem promoção 30% e controle tem 20%, diferença de 10% é atribuível a treinamento (assumindo grupos são comparáveis).

Métodos para garantir comparabilidade: Matching (encontrar pessoa em controle com mesmo nível, depto, performance antes de treinamento). Propensity score (calcular probabilidade de fazer treinamento baseado em atributos, depois comparar dentro de mesma probabilidade). Regression discontinuity (se treinamento é oferecido baseado em threshold de scores, comparar logo acima vs. logo abaixo).

Confoundentes a controlar: Tenure, nível, depto, feedback histórico, outras trainings feitas, mudança de gestor/depto. Se não controla, resultado pode ser enviesado.

Treinamento técnico (ex: Excel, programação): Métrica: desempenho em task técnica (velocidade, qualidade, bug count). Fácil de medir. Impacto é geralmente rápido (semanas/meses).

Treinamento de liderança: Métrica: retenção de diretos (turnover de pessoas gerenciadas por alguém que completou liderança training vs. não). Engagement de diretos (pesquisa de satisfação com gestor). Promoção (quem treina em liderança é promovido?). Impacto é lento (6-12 meses).

Soft skills (ex: comunicação, criatividade): Métrica: 360 feedback, auto-avaliação, feedback de gestor. Difícil de medir objetivamente. Impacto é lento e difuso.

Compliance/conformidade (ex: LGPD, segurança): Métrica: incidentes de não-conformidade (antes/depois). Sim/não sim completou treinamento. Impacto é objetivo mas pode levar tempo (violação é evento raro).

ROI = (Valor - Custo) / Custo * 100%

Custo: Custo de programa (instrutor, material, venue), custo de tempo dos participantes (salário * horas gastas), custo de oportunidade (se alguém estava desenvolvendo projeto, não desenvolvimento). Típico: $500-5000 por pessoa.

Valor criado (mais complexo): Redução de turnover (quanto custa contratar? Multiplicar por número de desligamentos evitados). Aumento de produtividade (quanto produção aumenta? Multiplicar por preço/valor). Aumento salarial (quanto o colaborador passa a ganhar? Multiplicar por diferença). Promoção (quanto value adicional traz gestor promovido?).

Exemplo: Treinamento de liderança custa $100k (50 pessoas * $2k). Reduz turnover de gerentes em 20% (evita 5 contratações). Custo de contratar = $40k (recrutamento, onboarding, ramp-up). Valor = 5 * $40k = $200k. ROI = ($200k - $100k) / $100k * 100% = 100%.

Desafios: Quantificar "valor" é impreciso. "Quanto vale um gerente mais engajado?" Usar estimates conservadores para ter credibilidade.

Pergunta chave: Treinamento funciona para todos igualmente? Ou tem grupos onde funciona muito bem e outros onde não funciona?

Segmentação comum: Por nível (junior vs. sênior), por depto (tech vs. vendas), por performance histórica (low performer vs. high performer), por tenure (novo vs. veterano).

Exemplo: Treinamento de comunicação. Para vendedor já experiente, impacto é zero (já é comunicador). Para junior inexperiente, impacto é alto. Conclusão: oferecer treinamento para juniors, não seniors.

Implicação: Dados orientam quem treinar (targeting), não apenas treinar todo mundo. Mais eficiente.

Questões que dados respondem: Qual tipo de treinamento tem maior ROI? Deve treinar mais disso. Qual tipo é perda de tempo? Descontinuar ou redesenhar. Qual grupo se beneficia mais? Treinar mais esses grupos. Quando treinar funciona melhor (antes/depois de mudança? Com suporte pós-treinamento?).

Feedback para instrutores/consultores: Dados de impacto permitem avaliar efetividade de instrutor. Instrutor X tem bom impacto? Replicar abordagem. Instrutor Y tem baixo impacto? Treinar ou substituir.

Comunicação para liderança: Dados permitem justificar orçamento de L&D ("investir $500k em liderança training criou $1M em valor, ROI 100%"). Aumenta confiança em L&D como investimento.