Parar de contar token, começar a contar o que entrega

O MIT Technology Review publicou em 2 de novembro um argumento simples e incômodo: contar token deixou de dizer alguma coisa. Segundo o texto, quando alguém dá uma tarefa de código a um agente, ele não responde uma vez — ele planeja, gera o código, roda os testes e repete o processo para corrigir erros. Uma única tarefa pode consumir muito mais do que a conta ingênua sugeriria.

O problema de medir pelo insumo

Token é insumo, não resultado. Medir trabalho por token é parecido com medir uma obra por saco de cimento: diz quanto entrou, não o que ficou de pé. A diferença é que a fatura chega em token, e por isso a unidade errada acaba virando a unidade de gestão.

Para quem decide, a consequência prática é que duas equipes podem gastar o mesmo e entregar coisas muito diferentes — e o painel não mostra isso. O que mostra é o que foi para produção, o que passou nos testes, o que deixou de ser refeito.

Onde isto encosta na gente

É uma discussão que o Referências acompanha de dentro: o próprio portal usa IA para pesquisar e rascunhar, e a conta que interessa aqui não é quantos tokens uma matéria consumiu, e sim quanto custou por matéria publicada — depois da revisão humana, incluindo o que foi descartado.

Este texto é análise, e está na editoria de pensamento por isso. O fato de partida é o artigo do MIT Technology Review; a leitura sobre gestão é do Referências.