A empresa Augment anunciou o lançamento de seu novo modelo de inteligência artificial, o GPT-5, e introduziu pela primeira vez a função de seleção de modelo, que permite aos usuários escolher entre o Claude Sonnet4 e o GPT-5. Essa inovação marca um grande avanço da Augment no campo da inteligência artificial, oferecendo aos usuários maior flexibilidade e opções.
Em testes internos nas últimas semanas, a Augment realizou testes comparativos rigorosos entre os dois modelos, envolvendo tarefas de codificação como edição de arquivos únicos, reestruturação de múltiplos arquivos, geração de testes e correção de erros em grandes bases de código. Os resultados dos testes mostraram que, embora o Claude Sonnet4 tenha uma ligeira vantagem em velocidade, preferindo respostas rápidas e diretas, o GPT-5 demonstrou mais cuidado e profundidade ao lidar com tarefas complexas, incluindo raciocínio mais detalhado e perguntas de esclarecimento em situações ambíguas.
Em termos de preferência, o GPT-5 obteve cerca de 47%, ligeiramente acima dos cerca de 44% do Claude Sonnet4, enquanto em empates, ambos obtiveram 4%. O GPT-5 apresentou melhor desempenho em raciocínio entre arquivos e análise de dependências, enquanto o Claude Sonnet4 foi mais rápido ao lidar com alterações pequenas ou médias. Em comentários sobre qualidade de código, os comentários do Claude Sonnet4 foram mais concisos, focando nas principais alterações, enquanto os do GPT-5 foram mais completos, incluindo cobertura de casos marginais.
A Augment decidiu lançar o seletor de modelo para dar aos usuários a opção entre precisão e velocidade. Alguns usuários podem preferir precisão e cobertura de casos marginais, enquanto outros podem querer iterações rápidas. Além disso, caso algum provedor de modelo tenha atrasos ou variações na qualidade, os usuários poderão trocar de modelo sem custo, fornecendo maior elasticidade ao fluxo de trabalho. Além disso, as escolhas dos usuários fornecem feedback valioso à Augment, ajudando na otimização e ajustes futuros dos modelos.
Ainda que o Claude Sonnet4 continue sendo o modelo padrão da Augment, o GPT-5 oferece outra opção aos usuários, especialmente quando é necessário abordar tarefas com métodos diferentes. A Augment continuará monitorando a distribuição de uso entre os dois modelos, os tipos de tarefas em que o GPT-5 tem crescido rapidamente e as tendências de latência e padrões de falhas ao longo do tempo. O feedback dos usuários é essencial para moldar os próximos ajustes.