Como saber se a IA está dando resultado (sem planilha mágica)

Uma clínica odontológica tinha 35% de faltas nas consultas marcadas. Cadeira parada, agenda furada, dinheiro evaporando. O dentista montou um sistema simples: a IA cruzava o histórico pra prever quais pacientes tinham mais chance de faltar e disparava lembrete personalizado pros casos de risco. Três meses depois, as faltas tinham caído de 35% pra 12%. Nas palavras dele, aquilo fez mais diferença no faturamento do que qualquer campanha de marketing que ele já tinha pago.

Essa história me serve de régua pra falar de ROI de inteligência artificial, porque ela tem tudo que os projetos sem resultado não têm: um número antes (35%), um número depois (12%), um prazo (três meses) e uma ligação direta com dinheiro. A resposta pra quem quer saber se a IA está dando resultado é desconfortável de tão simples: você só sabe se definiu, antes de começar, qual número deveria mudar, de quanto pra quanto, até quando. Sem isso não existe planilha mágica que salve, porque não dá pra medir a distância percorrida sem saber o ponto de partida.

A frase que separa projeto de desejo

Quando uma empresa me diz “queremos usar IA pra melhorar o atendimento”, eu devolvo a frase que uso há anos: isso é intenção, não projeto. Projeto tem quatro elementos, e recomendo escrever os quatro numa linha antes de gastar o primeiro real. O quê: reduzir o tempo de primeira resposta ao cliente. Baseline: hoje são 4 horas em média. Meta: chegar a 30 minutos. Prazo: 90 dias.

Escrever essa linha custa dez minutos e dói, porque obriga a escolher. E é exatamente por doer que quase ninguém escreve, preferindo a confortável vagueza de “melhorar com IA”, que nunca falha porque nunca promete nada. Empresa que não define baseline está comprando o direito de discutir opinião na reunião de resultados. Quem define, discute número.

As três moedas do retorno

Todo retorno de IA que eu já vi de perto se paga em alguma destas moedas, e vale conhecer as três porque cada uma se mede de um jeito.

Tempo: a tarefa que tomava 3 horas passa a tomar 40 minutos. A medição é direta (horas economizadas vezes custo da hora), com uma armadilha que trato já já.

Erro: retrabalho que some, multa que deixa de acontecer, cliente que não se perde por falha boba. A clínica do no-show está aqui. É a moeda mais subestimada, porque erro evitado é invisível: ninguém comemora a multa que deixou de chegar.

Receita: proposta que sai em dois dias em vez de duas semanas e ganha o negócio, vendedor que atende mais leads com a mesma equipe, análise que encontra margem escondida. Uma transportadora que eu gosto de citar colocou três anos de dados de frete numa IA e perguntou quais rotas davam prejuízo; em 40 segundos descobriu que o problema era um caminhão específico, e ajustou a operação. A moeda mais difícil de atribuir só à IA, e a que mais anima diretoria.

A armadilha do tempo economizado

Aqui vai o alerta que eu faço em toda palestra sobre o tema. “Economizamos 200 horas por mês” só vira retorno se essas horas forem reinvestidas em algo que gera valor: mais clientes atendidos, mais propostas na rua, projeto que estava parado por falta de braço. Se a tarefa que tomava 3 horas passou a tomar 40 minutos e as 2 horas liberadas escorreram pro celular, o resultado líquido da sua automação foi zero.

Por isso, todo projeto de eficiência precisa de uma segunda linha na definição: pra onde vai o tempo liberado. Sem essa linha, o ganho vira slide e nunca encosta no caixa. É também por isso que medir uso da ferramenta (“80% do time usa IA!”) não mede nada; uso é meio, e a moeda é o que muda na ponta.

Dez melhorias de 10% ganham de uma de 100%

No varejo do Magalu eu vi de perto uma filosofia que mudou como eu avalio projeto de IA: dez melhorias de 10% valem mais que uma melhoria de 100% que nunca sai do papel. A melhoria pequena entra em produção, gera aprendizado, financia a próxima e vai compondo. O projeto grandioso fica dois anos em desenvolvimento, e quando chega o mundo já mudou. Transparência: trabalho na Magalu Cloud, então tenho viés declarado ao citar a casa. Mas eu defenderia essa filosofia de qualquer palanque, porque ela bate com tudo que eu vivi como empreendedor.

A consequência prática pro seu ROI: prefira um portfólio de apostas pequenas e mensuráveis a uma aposta épica. Cinco projetos de seis semanas, cada um com sua linha de baseline-meta-prazo, te dão cinco medições reais e provavelmente dois ou três acertos compostos. O projeto épico te dá uma apresentação bonita e a torcida pra dar certo. O formato de ciclo curto que eu recomendo está detalhado em como levar IA pro seu time.

O outro lado da fração: o custo completo

ROI é uma fração, e até agora falamos do numerador. No denominador, a honestidade exige contar tudo: as licenças, claro, e também as horas de implantação, o treinamento do time, e principalmente o custo permanente da revisão humana. Se a IA redige as propostas em um décimo do tempo e um analista sênior gasta uma hora revisando cada uma, essa hora entra na conta pra sempre, porque revisão em saída de IA não é fase de transição. Já vi projeto comemorado como sucesso que, com o denominador completo, empatava com o processo antigo. E vi o contrário: projeto de aparência modesta que, custando quase nada além de licenças que a empresa já pagava, entregava retorno de dois dígitos por mês. A fração inteira na mesa protege você dos dois enganos.

E quando o resultado não vem?

Medir de verdade tem um preço: às vezes o número mostra que não funcionou. Aí a disciplina é fazer a autópsia certa, porque “a IA falhou” quase nunca é o diagnóstico completo. Foi a tarefa errada pra automatizar? O critério de escolha está em automatizar tarefas com IA. Foi falta de treino do time? Foi meta irreal? Processo bagunçado por baixo? Cada diagnóstico pede um remédio diferente, e todos são mais baratos que a alternativa clássica: cancelar o assunto IA por dois anos e assistir o concorrente compor as melhorias de 10% dele.

Faça isso agora

Pegue a iniciativa de IA mais importante da sua empresa agora (ou a que está pra começar) e escreva a linha dela: o quê, baseline, meta, prazo. Se você não souber o baseline, sua primeira tarefa acabou de se definir sozinha: medir o hoje durante duas semanas. Se a iniciativa não sobreviver ao exercício da linha, você economizou o orçamento dela, e esse talvez seja o primeiro ROI concreto da sua jornada com IA.

Definir essas métricas, montar o portfólio de apostas e criar o ritual de medição é o coração do trabalho que eu faço com empresas em consultoria, e o tema mais pedido nas minhas palestras pra diretoria. Escreve pra contato@thiagocaserta.com contando qual número do seu negócio você quer mover. Os outros erros que costumam andar junto com a falta de medição estão em os erros que vejo empresas cometendo com IA.