Anthropic ha desarrollado un innovador mercado de prueba denominado Project Deal, donde agentes de inteligencia artificial representaron tanto a compradores como a vendedores, concretando transacciones reales. En este experimento, 69 empleados de la compañía recibieron un presupuesto de $100 en tarjetas de regalo para realizar compras entre ellos.
El resultado fue sorprendente: se realizaron 186 transacciones, alcanzando un valor total de más de $4,000. Anthropic llevó a cabo cuatro modelos diferentes de mercado, uno de los cuales fue completamente real, utilizando su modelo más avanzado para representar a los usuarios, asegurando que los acuerdos se honraran tras la prueba.
El análisis del experimento reveló que cuando los usuarios eran representados por modelos más avanzados, los resultados eran objetivamente mejores. Sin embargo, los participantes no parecían notar esta diferencia, lo que sugiere la posibilidad de “gaps de calidad de agente”, donde aquellos en desventaja podrían no darse cuenta de su situación.
Además, las instrucciones iniciales proporcionadas a los agentes no parecieron influir en la probabilidad de venta ni en los precios negociados, lo que plantea preguntas sobre la efectividad de la comunicación en entornos de comercio automatizado. Este experimento podría tener implicaciones significativas para el futuro del comercio digital y la interacción entre agentes de IA en el mercado.
Comentarios