La société Augment a annoncé le lancement de son dernier modèle d'intelligence artificielle, GPT-5, et a introduit pour la première fois une fonctionnalité de sélection de modèle, permettant aux utilisateurs de choisir entre Claude Sonnet4 et GPT-5. Cette innovation marque un progrès important pour Augment dans le domaine de l'intelligence artificielle, offrant aux utilisateurs plus de flexibilité et de choix.
Lors des tests internes menés ces dernières semaines, Augment a effectué des tests comparatifs rigoureux entre les deux modèles, portant sur des tâches de codage telles que l'édition d'un seul fichier, la restructuration de plusieurs fichiers, la génération de tests et la correction d'erreurs dans de grands jeux de code. Les résultats des tests ont montré que bien que Claude Sonnet4 soit légèrement plus rapide et préfère des réponses rapides et directes, GPT-5 montre plus de prudence et de profondeur lorsqu'il traite des tâches complexes, y compris une réflexion plus détaillée et la formulation de questions de clarification en cas de situation ambiguë.
En termes de préférence, GPT-5 obtient environ 47 % contre environ 44 % pour Claude Sonnet4, tandis que les matchs nuls se situent à 4 % pour les deux. GPT-5 s'exprime mieux dans les raisonnements trans-fichiers et l'analyse des dépendances, alors que Claude Sonnet4 est plus rapide lorsqu'il traite des changements de petite ou moyenne taille. En ce qui concerne les commentaires sur la qualité du code, ceux de Claude Sonnet4 sont plus succincts et se concentrent sur les principaux changements, tandis que ceux de GPT-5 sont plus complets, incluant la couverture des cas limites.
Augment a décidé de lancer le sélecteur de modèle afin d'offrir aux utilisateurs le choix entre la précision et la vitesse. Certains utilisateurs privilégieront peut-être la précision et la couverture des cas limites, tandis que d'autres souhaiteront un itératif rapide. De plus, si un fournisseur de modèle rencontre un retard ou une variation de qualité, les utilisateurs peuvent basculer gratuitement de modèle, ce qui apporte une flexibilité supplémentaire à leur flux de travail. En outre, les choix des utilisateurs fournissent à Augment des retours précieux, utiles pour l'optimisation et l'ajustement futurs des modèles.
Même si Claude Sonnet4 reste le modèle par défaut d'Augment, GPT-5 offre aux utilisateurs une autre option, particulièrement lorsqu'une approche différente est nécessaire pour traiter certaines tâches. Augment continuera à surveiller la distribution d'utilisation entre les deux modèles, les types de tâches qui provoquent une augmentation rapide de l'adoption de GPT-5, ainsi que les tendances de délai et les schémas d'échec au fil du temps. Les retours des utilisateurs sont essentiels pour façonner les prochaines ajustements.
