Die Wahl des Software-Frameworks hat einen signifikanten Einfluss auf die Kosten und die Effizienz von KI-Modellen. Laut dem KI-Tooling-Unternehmen Composio wurde Deepseek V4 Flash in vier unterschiedlichen Agenten-Frameworks getestet: Claude Code, Codex, OpenCode und Oh My Pi. Im Rahmen dieser Untersuchung wurden 30 Aufgaben unter Verwendung realer Tools wie Gmail, GitHub, Slack und Notion bearbeitet.
Die Ergebnisse zeigen, dass kein Framework in allen Kategorien überlegen war. Oh My Pi erzielte die höchste Erfolgsquote mit 17 von 30 erfolgreich gelösten Aufgaben, benötigte jedoch mit 272 Sekunden pro Aufgabe die meiste Zeit. OpenCode hingegen war das kostengünstigste Framework mit einem Preis von 0,073 Dollar pro erfolgreicher Aufgabe, während Claude Code die schnellste Bearbeitungszeit von 122 Sekunden aufwies, jedoch mit 0,195 Dollar pro Aufgabe auch die höchsten Kosten verursachte. Trotz dieser Unterschiede in der Effizienz und den Kosten lagen die Erfolgsquoten der Frameworks insgesamt nah beieinander, wobei OpenCode mit 14 gelösten Aufgaben leicht abfiel. Die Wahl des Frameworks beeinflusste die Kosten um nahezu das Dreifache und die Geschwindigkeit um das 2,2-Fache, was die Bedeutung der richtigen Auswahl unterstreicht. Neues Framework zeigt: KI-Modelle benötigen menschliche Unterstützung beim Roboter-Coding und Fable 5 von Anthropics übertrifft Konkurrenz in KI-Benchmarks, bleibt jedoch teuer sind Beispiele für die Relevanz der Auswahl des richtigen Frameworks.
Zusätzlich hat Anthropic kostensparende Strategien für Claude Fable 5 präsentiert, die ebenfalls in Betracht gezogen werden sollten.
„`
Quellen: the-decoder
Bildquelle: KI generiert
Dieser Text wurde mit Hilfe von künstlicher Intelligenz in Zusammenarbeit mit unserer Redaktion erstellt.
🚀