Code
Les gros fichiers et les réorganisations de code restent difficiles.
Modifier du code existant et réorganiser un projet demandent encore de la prudence. Une tâche de code peut prendre plusieurs minutes.
Transparence
Ce que SophIA ne sait pas encore faire.
La confiance vient aussi de la place laissée aux limites. Voici les points à surveiller au 10 octobre 2026.
Mise à jour du 10 octobre 2026
Culture
Sans source, elle peut encore se tromper.
Sur les questions de culture reformulées de plusieurs façons, 86 % avec aide extérieure et 78 % sans aide extérieure sont justes (10/10/2026 ; source : mesure interne SophIA). SophIA doit citer une source ou dire qu'elle ne sait pas.
Maths rédigées
Les problèmes écrits en français sont désormais dans la fourchette publiée du spécialiste.
Sur MGSM, SophIA obtient 72,8 % le 10 octobre 2026 : elle atteint le bas de la fourchette publiée pour Qwen2.5 7B (62 à 75 %), dans la fourchette publiée du spécialiste. Quand elle n'est pas sûre, elle le dit plutôt que d'affirmer un nombre. Le détail
Diagnostic
Elle n'identifie pas encore seule la cause d'un bug.
Elle applique très bien un diagnostic qu'on lui donne ; elle ne le trouve pas encore seule.
La bonne attente
Une réponse honnête peut ralentir la conversation.
SophIA demande la donnée manquante, demande quel sens choisir quand plusieurs sont possibles et dit « je ne sais pas » quand elle ne sait pas. C'est parfois moins immédiat, mais plus vérifiable.
À SAVOIR
Les notes ne sont pas une garantie
Vérifiez toujours une réponse avant une décision importante.
Pour aller plus loin
Lire les preuves, pas seulement les promesses.
Le détail des notes et la façon générale dont elles sont obtenues sont publics.