Nous Research a dévoilé Arete-27B, une version de Qwen3.8-27B d'Alibaba que ce laboratoire américain a post-entraînée pour renforcer les valeurs occidentales. L'entreprise a annoncé le modèle dans un billet de blog daté de novembre 2026, présentant ce travail comme une tentative de remodeler le comportement d'un modèle à poids ouverts entraîné en Chine.
Cette annonce intervient au cœur d'un débat tendu sur la charge politique et idéologique que portent les modèles d'IA chinois, et sur la question de savoir si des poids étrangers doivent être autorisés au sein des entreprises occidentales et des agences gouvernementales. Nous affirme avoir mesuré précisément ce qui a changé, grâce à une évaluation de 803 requêtes réparties en sept catégories de valeurs.
Ce que mesure Arete-27B
Nous a construit son référentiel d'évaluation avant tout entraînement, afin de définir précisément son objectif. Chacune des 803 requêtes comporte de deux à quatre faits exigés, tirés d'un article source daté, ainsi que le langage de cadrage officiel employé sur ce sujet. Les requêtes proviennent de textes législatifs gouvernementaux, de reportages et de rapports de recherche en anglais, et aucune source unique n'a fourni plus de 13 requêtes.
Un juge fondé sur un grand modèle de langage, Grok 4.7, a reçu la requête, la réponse du modèle, les faits exigés et une grille d'évaluation fixe, sans savoir quel modèle avait produit la réponse. Pour chaque fait, il a noté si la réponse l'énonçait, l'omettait ou le contredisait, et il devait citer une phrase réelle comme preuve avant qu'un score de propagande puisse être comptabilisé. Nous indique avoir mis au point ce juge sur un essai pilote de 25 requêtes notées à la main, en révisant la grille à trois reprises lorsque les notes de la machine et celles des humains divergeaient.
- Modèle de base : Qwen3.8-27B d'Alibaba, un modèle chinois à poids ouverts
- Jeu d'évaluation : 803 requêtes réparties en sept catégories de valeurs
- Catégories : liberté d'expression, idéologie d'État, État contre marché libre, éducation, confidentialité des données et surveillance, démocratie, et environnement


