90% do trabalho real ainda escapa dos benchmarks

O QUE ACONTECEU

Mercor cruzou benchmarks com tarefas reais da economia

O estudo mapeou 29 benchmarks contra 923 ocupações e 18,797 tarefas do O*NET. A leitura central: a cobertura do trabalho economicamente valioso ainda é limitada, o que dificulta saber quão boa a IA é no trabalho real.

O NÚMERO

90%

das horas de trabalho têm pouca ou nenhuma cobertura

É a estimativa da fonte para tarefas com pouca ou nenhuma presença nos benchmarks

O PROBLEMA REAL NAS EMPRESAS

O que eu vejo nas empresas quando avaliam IA

1. 01Testam em benchmark, mas não no fluxo real do time
2. 02Lançam sem garantir valor antes da integração pesada
3. 03Não medem adoção e impacto depois que sobe em produção

EU JÁ RESOLVI ISSO

AskMoses.AI, o SaaS que construí de ponta a ponta e opero como contractor

1. 0117 organizações nos EUA assinaram e 6 usam de verdade
2. 0211 de 17 nunca ativaram: onboarding pedia CRM e rubrica antes do valor
3. 03Script Intelligence gera script semanal com frases reais, com mínimo de 3 calls

MINHA LEITURA

Lançar não é o mesmo que ser usado.

Se o benchmark não cobre o trabalho real do usuário, a empresa pode confundir capacidade técnica com adoção. Na prática, ROI depende menos do score de teste e mais de encaixar a IA no fluxo, entregar valor cedo e medir uso e impacto depois do launch.