Visa lanza un benchmark que evalúa a la IA en compras y revela fallos en el 42,8% de las pruebas
16 de noviembre de 2026 · 3 min de lectura
También publicado en Deutsch, Français, Italiano, Nederlands, Svenska, Norsk, Polski, Türkçe, Русский, עברית
Visa ha lanzado en Estados Unidos el Visa Agentic Commerce Benchmark, una evaluación que somete a modelos de inteligencia artificial a escenarios realistas de compra. El anuncio se realizó el 5 de noviembre de 2026 en San Francisco.
La iniciativa pone a prueba la capacidad de la inteligencia artificial para identificar las necesidades de un consumidor a través de la conversación y tomar decisiones de compra bien fundamentadas. Los resultados de la primera ronda revelan limitaciones relevantes, ya que los modelos fallaron en el 42,8% de los intentos.
La primera ronda involucró a 22 modelos de inteligencia artificial de 12 laboratorios, sometidos a 15 desafíos de compra, como la adquisición de televisores, ordenadores portátiles o aparatos de cuidado personal. En conjunto, los modelos alcanzaron una tasa general de aprobación del 57,2%. Los de mejor desempeño fueron aprobados en el 82,2% de los intentos, mientras que los de peor desempeño lo fueron en el 28,9%.
La consistencia también se mostró como un problema. Cada modelo tuvo tres intentos por escenario, y la aprobación en los tres ocurrió solo en el 34,2% de los casos. Aproximadamente el 54% de los intentos que fallaron terminaron con una compra realizada por la inteligencia artificial, ya sea por recomendar un producto fuera de los requisitos del cliente o por no identificar todas sus necesidades.
Los datos también apuntan a una relación entre la calidad de las interacciones y los resultados. Los cinco modelos que más identificaron factores de compra no mencionados inicialmente por los usuarios tuvieron una tasa media de aprobación del 70,2%, frente al 44,4% de los cinco que menos exploraron esa información a través de la conversación. Los modelos más caros también tendieron a tener un mejor desempeño: los cinco con mayor costo medio por ejecución fueron aprobados en el 67,1% de las pruebas, contra el 50,2% de los cinco de menor costo.
El desempeño insatisfactorio de los modelos se suma a un escenario de desconfianza de los consumidores. El Índice de Confianza de Visa, divulgado en septiembre de 2026, mostró que el 72% de los consumidores estadounidenses ya han usado un asistente de inteligencia artificial, pero solo el 23% confiaba en la tecnología para realizar transacciones de pago en su nombre.
Rubail Birwadker, líder global de Crecimiento de Visa, afirma que los agentes de inteligencia artificial tienen potencial para impulsar la próxima era del comercio, pero que la confianza es esencial para que esto se concrete. Según él, el Visa Agentic Commerce Benchmark es una iniciativa más de Visa para elevar los estándares de todo el sector.
El benchmark integra el Visa Intelligent Commerce, un portafolio de productos, programas y alianzas de Visa orientado al comercio con agentes de inteligencia artificial. La empresa compartió la evaluación con los principales desarrolladores de modelos para recibir contribuciones.
Visa planea ampliar el Visa Agentic Commerce Benchmark con nuevos escenarios de compra y categorías de productos. Las pruebas también deben extenderse a las etapas de finalización de la compra, pago y realización del pedido.