Anthropic schuf einen Test-Marktplatz für Agent-zu-Agent-Commerce
Anthropic führte ein Pilotexperiment namens Project Deal durch, bei dem KI-Agenten Käufer und Verkäufer in einem Kleinanzeigen-Marktplatz repräsentierten. Der Test führte zu 186 realen Transaktionen im Wert von mehr als 4.000 US-Dollar und zeigte Leistungsunterschiede zwischen verschiedenen KI-Modellen auf.
In einem kürzlich durchgeführten Experiment entwickelte Anthropic einen geschlossenen Marktplatz, auf dem KI-Agenten sowohl Käufer als auch Verkäufer repräsentierten und echte Geschäfte über reale Waren mit echtem Geld abschlossen.
Das Unternehmen beschrieb den Test mit dem Namen Project Deal als „ein Pilotexperiment mit einem selbst ausgewählten Teilnehmerkreis“ aus 69 Anthropic-Mitarbeitern. Jeder Teilnehmer erhielt ein Budget von 100 US-Dollar, ausgezahlt in Form von Geschenkkarten, um Artikel von Kollegen zu erwerben.
Wie Project Deal funktionierte
Trotz seines begrenzten Umfangs erklärte Anthropic, man sei „beeindruckt gewesen, wie gut Project Deal funktionierte“. Im Verlauf des Experiments schlossen die Teilnehmer 186 Geschäfte mit einem Gesamtwert von mehr als 4.000 US-Dollar ab.
Anthropic betrieb vier separate Marktplätze mit unterschiedlichen KI-Modellen. Ein Marktplatz galt als „real“, was bedeutete, dass alle Teilnehmer vom fortschrittlichsten Modell des Unternehmens repräsentiert wurden und die Geschäfte nach Abschluss des Experiments tatsächlich eingehalten wurden. Die anderen drei Marktplätze dienten Forschungs- und Vergleichszwecken.
Modellleistung und Ergebnisunterschiede
Laut Anthropic erzielten Nutzer, die von fortschrittlicheren Modellen repräsentiert wurden, „objektiv bessere Ergebnisse“. Allerdings schienen die Teilnehmer die Leistungsunterschiede nicht zu bemerken.
Diese Dynamik wirft die Möglichkeit sogenannter „Agentenqualitäts“-Unterschiede auf, bei denen „Personen auf der Verliererseite möglicherweise nicht erkennen, dass sie schlechter gestellt sind“.
Das Unternehmen stellte außerdem fest, dass die anfänglichen Anweisungen an die Agenten offenbar weder die Wahrscheinlichkeit eines Verkaufs noch die ausgehandelten Preise beeinflussten.
Anthropic veröffentlichte auf seiner Website weitere Details zu dem Experiment im Rahmen seiner umfassenderen Untersuchung von agentengesteuertem Handel.