Por Pedro Sonda, dooop
Para medir se um treinamento de IA funcionou, avalie quatro níveis: a reação dos participantes; o que eles aprenderam, testado com exercícios práticos de uso e verificação; se passaram a usar a IA nas tarefas reais, semanas depois; e se isso mudou indicadores do trabalho, como tempo, erros e qualidade. Presença e satisfação, os indicadores mais usados, medem só o primeiro nível. Um painel mínimo de oito indicadores, medido antes e depois, mostra se o investimento funcionou e onde ajustar.
Atualizado em outubro de 2026.
Por que presença não é resultado
O Gartner registrou que 77% dos funcionários fazem o treinamento de IA quando ele é oferecido, mas 88% dos líderes de RH dizem que as organizações ainda não obtiveram valor de negócio significativo com ferramentas de IA (Gartner, 2025). Participação alta e valor baixo convivem.
Interpretação: medir só participação dá uma falsa sensação de progresso.
A referência: os 4 níveis de avaliação
O modelo de Kirkpatrick, usado há décadas em educação corporativa, avalia treinamentos em quatro níveis: reação, aprendizagem, comportamento e resultados (Kirkpatrick Partners). Ele se aplica bem à IA, desde que cada nível seja adaptado.
Framework dooop: os 4 níveis adaptados à IA
| Nível | Pergunta | Como medir em IA | Quando |
|---|---|---|---|
| 1. Reação | O treinamento foi útil e aplicável? | Pesquisa curta: utilidade para o trabalho, clareza, confiança para aplicar | Ao final |
| 2. Aprendizagem | As pessoas sabem usar e verificar? | Exercício prático: produzir um resultado com IA e encontrar erros plantados em um texto gerado | Ao final e um mês depois |
| 3. Comportamento | Passaram a usar nas tarefas reais, com critério? | Uso nas tarefas definidas; amostras de entregas revisadas; relato do gestor | 4 a 8 semanas depois |
| 4. Resultados | O trabalho melhorou? | Tempo, erros, retrabalho, volume e qualidade nas tarefas escolhidas | 2 a 3 meses depois |
Nível 2: medir verificação, e não só uso
O teste mais revelador é pedir aos participantes que encontrem erros em um texto ou tabela gerados por IA. Quem passa nesse teste usa IA com mais segurança do que quem apenas sabe escrever pedidos.
Nível 3: onde a maioria dos programas falha
O BCG observou que funcionários com mais de cinco horas de treinamento, especialmente presencial e com acompanhamento, mostram uso regular significativamente maior (BCG, 2025). Se o comportamento não muda, o problema raramente é o conteúdo: costuma ser falta de prática, de apoio do gestor ou de tarefas definidas. Veja Como transformar treinamento em mudança de comportamento.
O painel mínimo de 8 indicadores
| # | Indicador | Nível |
|---|---|---|
| 1 | Percentual de participantes que consideram o conteúdo aplicável ao trabalho | 1 |
| 2 | Percentual que passa no exercício prático de uso | 2 |
| 3 | Percentual que encontra os erros plantados | 2 |
| 4 | Percentual que usa a IA nas tarefas definidas após 30 dias | 3 |
| 5 | Qualidade das entregas com IA, em amostra revisada | 3 |
| 6 | Tempo médio nas tarefas escolhidas, antes e depois | 4 |
| 7 | Erros e retrabalho nas tarefas escolhidas, antes e depois | 4 |
| 8 | Incidentes de uso inadequado (dados, revisão ausente) | 3 e 4 |
Condição essencial: medir os indicadores 6 e 7 antes do treinamento. Sem linha de base, não há como saber se houve mudança.
Cuidados na interpretação
- Tempo economizado só vira resultado com destino definido. O Gartner observou que só 7% das organizações orientam os funcionários sobre como usar o tempo liberado pela IA.
- Compare grupos semelhantes, quando possível, para separar o efeito do treinamento de outras mudanças.
- Não confunda uso com bom uso: mais uso com mais incidentes é um problema.
O que fazer agora
- Escolha as tarefas em que o treinamento deve gerar efeito e meça a linha de base.
- Inclua o exercício de erros plantados na avaliação de aprendizagem.
- Agende a medição de comportamento para 30 a 60 dias depois do treinamento.
Para avaliar a evolução das equipes de forma estruturada, conheça o trabalho de maturidade de times da dooop em dooop.com.br/maturidade-de-times-em-ia.
Perguntas frequentes
Vale medir o retorno financeiro do treinamento? Vale estimar, a partir dos indicadores do nível 4, desde que o tempo liberado tenha destino e a comparação seja feita com cuidado. Evite números de retorno sem base.
Com que frequência medir? Níveis 1 e 2 ao final; nível 3 entre 30 e 60 dias; nível 4 entre dois e três meses, e depois a cada ciclo do programa.
Leia também
- Como criar um programa corporativo de letramento em IA
- Como criar uma jornada de adoção de IA por equipes
Sobre a dooop
A dooop é uma consultoria de Caxias do Sul (RS) que prepara lideranças e organizações para transformar inteligência artificial em capacidade de negócio, com estratégia, governança e capacitação.
Conversar com a dooop
Compartilhe seu contexto, suas restrições e a decisão que sua organização precisa avaliar.
Conteúdo de Pedro Sonda. Leve os critérios desta leitura para uma conversa sobre a decisão da sua organização.