Deus ex MaKIna

KI zwischen Schlagzeile, Forschung und Wirklichkeit

Ein kuratierter Blick auf die Welt
der kĂŒnstlichen Intelligenz

đŸ€– Mehr KI-Agenten, höhere Kosten – aber kaum bessere Ergebnisse?

Wenn mehrere KI-Agenten gemeinsam an einer Aufgabe arbeiten, mĂŒsste das Ergebnis eigentlich besser werden als bei einem einzelnen Agenten. Eine neue Untersuchung zeigt allerdings, dass zusĂ€tzliche KI-Helfer vor allem eines verursachen können: deutlich höhere Kosten.

Quelle:
https://www.vals.ai/blogs/multi-agent-vibe-code-bench

🔎 Was ist passiert?

Das Unternehmen Vals AI untersuchte, ob Teams aus mehreren KI-Agenten bessere Ergebnisse erzielen als einzelne Agenten. DafĂŒr wurden GPT-6 Sol und Claude Opus 5.5 bei der Entwicklung von 50 Webanwendungen getestet – jeweils allein oder im Team und mit unterschiedlichem Denkaufwand.

Die Agententeams kosteten zwischen 1,8- und 5,1-mal so viel. Von vier direkten Vergleichen zeigte nur einer eine statistisch signifikante Verbesserung. Bei Claude Opus 5.5 mit maximalem Denkaufwand erreichte der einzelne Agent 89,8 Prozent fĂŒr durchschnittlich 23,77 US-Dollar; das Team 93,2 Prozent fĂŒr 122 US-Dollar. Der QualitĂ€tsunterschied war statistisch nicht signifikant.

⚖ Der RealitĂ€tscheck

Die Untersuchung bedeutet nicht, dass KI-Agententeams grundsĂ€tzlich unnĂŒtz sind. Bei GPT-6 Sol mit mittlerem Denkaufwand verbesserte ein Team das Ergebnis um 7,3 Prozentpunkte – ein statistisch signifikanter Vorteil.

Auch die Bearbeitungszeit entwickelte sich unterschiedlich: Sol arbeitete im Team teilweise schneller, wĂ€hrend Claude-Teams bei den getesteten Aufgaben lĂ€nger benötigten. Außerdem handelt es sich um einen Benchmark mit 50 Webanwendungen, nicht um einen allgemeingĂŒltigen Nachweis fĂŒr sĂ€mtliche KI-Anwendungen. Jede Konfiguration wurde pro Aufgabe einmal ausgefĂŒhrt.

💡 Warum ist das interessant?

KI-Agententeams werden zunehmend so organisiert, dass ein Agent plant und andere recherchieren, programmieren oder kontrollieren. Doch die Koordination benötigt zusÀtzlichen Rechenaufwand, und Agenten können sich gegenseitig behindern.

Die Untersuchung zeigt: Mehr eingesetzte KI bedeutet nicht automatisch bessere Ergebnisse. Entscheidend ist, ob sich die Aufgabe sinnvoll aufteilen lÀsst und ob der mögliche QualitÀts- oder Zeitgewinn die Mehrkosten rechtfertigt.



Entdecke mehr von Deus ex maKIna

Jetzt abonnieren, um weiterzulesen und auf das gesamte Archiv zuzugreifen.

Weiterlesen