À peine le bac 2025 terminé, une expérience pratique pour tester si l'IA peut résoudre les questions de mathématiques du bac a eu lieu en parallèle. Dans deux évaluations menées par des médias professionnels, Quark a obtenu respectivement 145 et 146 points, se classant premier et surpassant DouBao pour devenir un nouveau repère pour la capacité mathématique des IA chinoises.
Les modèles en compétition incluaient Quark, DouBao, YuanBao ainsi que ChatGPT, tous utilisant les mêmes sujets de maths du baccalauréat national de 2025, sans accès à internet pour les recherches, mais avec le mode de réflexion approfondie activé.
Dans l’évaluation menée par le média Blue Whale Finance, Quark a réussi à atteindre 145 points pour s’imposer en première place. En ce qui concerne les questions de choix et de remplissage, Quark a obtenu un taux de réussite de 93%, arrivant en tête. Parmi les huit questions à choix multiples, aucun des produits d'IA n'a répondu correctement à la sixième question. En analysant les chaînes de raisonnement, on a découvert que l'erreur était due à une déviation dans la reconnaissance des coordonnées vectorielles et des directions des flèches par Quark.
Quant à l'évaluation réalisée par "Quadruple Wood Relative Theory", Quark a encore une fois atteint 146 points, remportant la première place. Concernant la vitesse de réponse, Quark est arrivé premier, tandis que DouBao est second. Par exemple, pour les questions de réponse détaillée, Quark peut répondre à une question en moins de 4 minutes, alors que les autres produits mettent environ 6 minutes en moyenne.
La capacité de résolution des problèmes de Quark repose sur le modèle "Quark Learning Lingzhi". Basé sur Qwen, ce modèle s'appuie sur une base de données d'apprentissage de plus de cent milliards d'éléments et sur une capacité d'entraînement ultérieur, il excelle particulièrement dans la résolution de problèmes complexes en sciences, offrant aux utilisateurs une nouvelle expérience d'apprentissage heuristique.
