A Anthropic lançou um experimento de mercado classificado na semana passada, permitindo que seus próprios agentes de inteligência artificial comprassem e vendessem em nome dos funcionários. O teste, chamado de Projeto Negócio, foi limitado a um grupo auto-selecionado de 69 funcionários da Anthropic, cada um recebeu um orçamento de $100 em cartões-presente para gastar em itens oferecidos por seus colegas de trabalho.

Ao longo do piloto, os participantes concluíram 186 negociações, com o valor total de bens e serviços trocados excedendo $4.000. Diferentemente de um hackathon interno típico, as transações foram reais: os vencedores receberam produtos reais e os perdedores foram reembolsados por meio dos fundos do cartão-presente.

A Anthropic executou quatro variantes de mercado paralelas para comparar como diferentes modelos de IA se saíram. Uma versão usou o modelo mais avançado da empresa para representar todos os compradores e vendedores, e as negociações nessa corrente foram honradas após a conclusão do experimento. As outras três versões serviram como grupos de estudo, empregando modelos menos capazes ou configurações mistas para observar diferenças comportamentais.

Os resultados mostraram uma clara vantagem para os participantes representados pelo modelo de topo. Esses agentes consistentemente negociaram preços melhores e obtiveram resultados mais favoráveis do que seus contrapartes. No entanto, os usuários humanos por trás dos agentes não notaram a disparidade. A Anthropic observou que os participantes não puderam dizer quando foram emparelhados com um modelo mais forte ou mais fraco, levantando preocupações sobre lacunas de "qualidade de agente" que poderiam deixar alguns usuários desconhecendo desvantagens.

Os prompts iniciais dados aos agentes de IA — destinados a direcionar táticas de negociação — pareceram ter pouco impacto sobre a probabilidade de venda ou o preço final. Seja qual for a instrução dada aos agentes — para ser agressivo, cooperativo ou neutro —, os dados mostraram nenhuma mudança mensurável nas taxas de sucesso das transações.

A liderança da Anthropic descreveu o piloto como "impressionado com o quanto o Projeto Negócio funcionou", enfatizando tanto a viabilidade técnica do comércio autônomo de agente para agente quanto a necessidade de salvaguardas. A empresa alertou que, se os modelos avançados podem silenciosamente superar os menos capazes, os usuários podem não estar cientes de desigualdades ocultas em futuros mercados impulsionados por IA.

Observadores da indústria veem o experimento como um marco para o comércio mediado por IA. Ao demonstrar que agentes autônomos podem lidar com compras e vendas do mundo real com valor tangível, a Anthropic impulsiona a conversa além de interações teóricas de chatbot em direção a aplicações práticas e impactantes em termos de receita. O teste também destaca a importância da transparência e da educação do usuário ao implantar agentes de IA em ambientes comerciais.

A Anthropic planeja analisar o conjunto completo de dados antes de decidir se expandirá o conceito de mercado. Iterações futuras podem incluir pools de participantes mais amplos, tamanhos de orçamento variados e mecanismos para revelar diferenças de desempenho de modelo para os usuários finais, visando mitigar o risco de lacunas de "qualidade de agente" não detectadas.

Usado: News Factory APP - descoberta e automação de notícias - ChatGPT para Empresas