Das Unternehmen Augment hat seine neueste KI-Modell GPT-5 vorgestellt und zum ersten Mal eine Modellauswahl-Funktion eingeführt, die Benutzern ermöglicht, zwischen Claude Sonnet4 und GPT-5 zu wählen. Dieser innovative Schritt markiert einen bedeutenden Fortschritt von Augment im Bereich der künstlichen Intelligenz und bietet den Nutzern mehr Flexibilität und Auswahlmöglichkeiten.
In internen Tests der letzten Wochen haben sich Augment zwei Modelle streng verglichen, wobei es Aufgaben wie Einzeldatei-Editierung, Mehrdatei-Rekonstruktion, Testgenerierung und Fehlerbehebung in großen Code-Bibliotheken betraf. Die Testergebnisse zeigten, dass obwohl Claude Sonnet4 etwas schneller war und eher direkte und schnelle Antworten bevorzugte, GPT-5 bei komplexen Aufgaben mehr Vorsicht und Umfassendheit zeigte, einschließlich detaillierterer Schlussfolgerungen und Fragen zur Klärung in unklaren Situationen.
Laut Präferenzrate lag GPT-5 mit etwa 47 % leicht über Claude Sonnet4 mit etwa 44 %, während beide bei Unentschieden jeweils 4 % erreichten. GPT-5 zeigte stärkere Fähigkeiten in der Überlegung über Dateien hinweg und der Analyse von Abhängigkeiten, während Claude Sonnet4 bei kleineren oder mittleren Änderungen schneller arbeitete. In Bezug auf Code-Qualitätsbewertungen waren die Bewertungen von Claude Sonnet4 kürzer und konzentrierten sich auf die Hauptänderungen, während die Bewertungen von GPT-5 umfassender waren und auch Randfälle abdeckten.
Der Grund dafür, dass Augment die Modellauswahl-Funktion einführt, ist, um den Nutzern die Wahl zwischen Genauigkeit und Geschwindigkeit zu bieten. Einige Nutzer bevorzugen möglicherweise Präzision und die Abdeckung von Randfällen, während andere lieber schnell iterieren möchten. Darüber hinaus können die Nutzer bei Verzögerungen oder Schwankungen der Qualität eines Modellanbieters problemlos zwischen den Modellen wechseln, was für den Arbeitsablauf zusätzliche Flexibilität bietet. Zudem liefert das Verhalten der Nutzer wertvolle Rückmeldungen für die zukünftige Optimierung und Anpassung der Modelle.
Obwohl Claude Sonnet4 weiterhin das Standardmodell von Augment bleibt, bietet GPT-5 den Nutzern eine weitere Option, insbesondere wenn eine andere Herangehensweise an die Aufgaben erforderlich ist. Augment wird die Nutzung der beiden Modelle weiterhin beobachten, die Arten von Aufgaben, bei denen die Einführung von GPT-5 stark zunahm, sowie die zeitliche Entwicklung von Verzögerungen und Fehlern. Nutzerrückmeldungen sind entscheidend für die Gestaltung der nächsten Anpassungen.
