Visa lança benchmark de compras com IA: modelos falham em 42,8% dos testes

A Visa lançou na quinta-feira, 5 de novembro de 2026, o Agentic Commerce Benchmark, um teste que coloca modelos de inteligência artificial para fazer compras com IA em cenários realistas. O resultado mostra que a tecnologia ainda tropeça no básico: os modelos falharam em 42,8% das execuções.

O que o teste revelou

A primeira rodada avaliou 22 modelos de 12 laboratórios em 15 desafios de compra, como escolher uma TV, um laptop ou um eletrodoméstico de cuidado pessoal. Para passar no teste de compras com IA, a IA precisava descobrir todos os requisitos do cliente na conversa e tomar a decisão certa: comprar ou não comprar. A taxa geral de acerto ficou em 57,2%.

Os melhores modelos passaram em 82,2% das tentativas, enquanto os piores ficaram em 28,9%. A diferença esteve na investigação: os cinco modelos que mais descobriram fatores escondidos de compra tiveram média de 70,2% de acerto. Os cinco que menos investigaram passaram em menos da metade das vezes, com 44,4%.

Preço também pesou, mas não garantiu sucesso. Os cinco modelos com maior custo médio por execução passaram em 67,1% das vezes, contra 50,2% dos cinco mais baratos. A consistência foi o ponto mais fraco: cada modelo teve três tentativas por cenário, mas acertou as três em apenas 34,2% dos casos.

O dado mais preocupante envolve compras erradas. Em cerca de 1 em cada 2 execuções com falha (54%), a IA ainda concluiu uma compra, mesmo sem atender aos requisitos identificados do cliente ou sem descobrir todos eles.

Confiança ainda é o gargalo

“Os agentes de IA têm potencial para impulsionar a próxima era do comércio, mas a confiança é essencial para que isso funcione”, afirmou Rubail Birwadker, chefe global de crescimento da Visa.

O cenário ajuda a entender o problema. Em um dos testes, o cliente pede ajuda para escolher uma TV, menciona que um parente recomendou uma marca e que tem assinatura em um fornecedor, mas deixa outros detalhes em aberto. A IA precisa descobrir o orçamento e requisitos como compatibilidade de formato, suporte a HDR10+ e recursos para games. Os modelos que investigavam melhor passavam mais. Mas, ao repetir um cenário já aprovado, os mesmos modelos erravam com frequência.

O estudo se conecta a outro levantamento da Visa. O Trust Index, de setembro de 2026, mostrou que 72% dos consumidores americanos já usaram um assistente de IA, mas apenas 23% confiam que a IA cuide de pagamentos em nome deles.

A Visa ressalta que o resultado não significa que os agentes não estejam prontos para o comércio. Os modelos com melhor desempenho passaram em 82,2% das tentativas, e o benchmark é público: qualquer pessoa pode tentar o teste, assistir às tentativas das IAs e ler o estudo completo no Visa Payments Frontier.

Crédito da imagem: pessoa usando cartão bancário para comprar online, foto de Bogdan Hoyaux / Comissão Europeia, via Wikimedia Commons, licença CC BY 4.0 (© União Europeia, 2026).

Fontes: Visa, BusinessWire, PYMNTS. Leia mais notícias de tecnologia no blog do Geekiki.

Transparência: esta matéria foi produzida com auxílio de inteligência artificial, com apuração a partir de fontes públicas da internet e de publicações públicas no X. Recomendamos consultar as fontes originais para conferir os detalhes.

Muse