Gemma 4 ou Qwen : quel modèle local écrit le mieux le français ?

Les deux familles à poids ouverts les plus téléchargées, exécutées sur notre propre machine et jugées sur les mêmes consignes en français dans des duels à l’aveugle : laquelle écrit le mieux, sur quels types de texte, et ce que ça coûte en mémoire.

Le verdict

Qwen3.8 27B d’Alibaba (Q4_K_M, raisonnement xhigh) écrit mieux le français que Gemma 4 31B de Google (Q6_K, raisonnement activé) dans nos duels à l’aveugle : 30e contre 44e au classement, score 72,2 contre 59,3.

En duel direct, Gemma 4 prend 43,2 % des points sur 22 duels (9 victoires, 1 égalité, 12 défaites). Gemma 4 mène dans 1 des 9 types de texte où les deux ont été jugés, Qwen dans 7.

Les deux modèles au classement
ModèleRangScoreDuels
Gemma 4 Gemma 4 31B Q6_K 💡 on* 🏠4459,32 186
Qwen Qwen3.8 27B Q4_K_M 💡 xhigh** 🏠3072,22 192

Chaque camp est représenté par sa variante la mieux classée dans cette édition : Gemma 4 31B de Google (Q6_K, raisonnement activé) pour Gemma 4, Qwen3.8 27B d’Alibaba (Q4_K_M, raisonnement xhigh) pour Qwen. Quand une meilleure variante arrive, la page la suit.

Résultats par type de texte

Score et rang recalculés sur les seuls duels de chaque catégorie ; le premier est en couleur. Cliquez sur un type de texte pour voir son classement complet.

Résultats par type de texte
Type de texteGemma 4QwenDuels directs
Articles, blogs et éditorial51,1 #3661,9 #25—
Dialogue et scénario43,6 #3881,6 #10—
Explication et vulgarisation63,8 #3340,6 #58—
Fiction et narration27,9 #7349,9 #29—
Marketing et vente53,1 #3074,8 #16—
Communication personnelle59,3 #4372,0 #289–1–12
Communication professionnelle et administrative44,9 #6353,8 #44—
Réseaux sociaux et formats courts61,1 #2161,1 #21—
Discours et prise de parole———
Documents et rapports structurés35,7 #6088,6 #4—

Les duels directs se lisent victoires–égalités–défaites pour le premier modèle. Un tiret signifie que le modèle n’a pas encore été jugé dans cette catégorie.

Qui représente chaque camp

« Gemma 4 » est la famille à poids ouverts de Google, « Qwen » celle d’Alibaba, et chaque camp est représenté par son fichier le mieux classé dans cette édition : une taille donnée et une quantification donnée, exécutées dans LM Studio sur notre Framework Desktop, raisonnement activé quand le fichier le permet. Le tableau ci-dessus nomme les deux fichiers. Les autres tailles et quantifications des deux familles, avec la mémoire que chacune demande, sont sur la page IA locale.

Ce que mesurent ces chiffres

Des duels à l’aveugle : deux textes anonymes pour la même consigne en français, un juge IA qui choisit le meilleur sans connaître les noms. Les fichiers locaux rencontrent les modèles cloud dans le même bassin, leurs scores sont donc sur la même échelle que le reste du classement. Le bilan direct ne compte que les duels où ces deux fichiers se sont rencontrés.

Comment choisir

Pour un modèle local, la qualité seule tranche rarement. Les meilleurs fichiers Qwen ont besoin d’une phase de raisonnement qui les rend lents ; Gemma 4 existe de 2 à 31 milliards de paramètres et sa version à experts écrit vite. Si les deux sont proches sur le type de texte que vous écrivez, prenez le fichier qui tient dans votre mémoire avec de la marge pour le contexte, puis lisez les articles sur la quantification et le raisonnement : pour ces deux familles, chaque réglage déplace le score de dizaines de points.

Exemple de textes

Vos grands-parents fêtent leurs cinquante ans de mariage entourés de toute la famille. Composez le texte d'une carte, de 50 à 150 mots, que vous leur remettrez ce jour-là, exprimant votre admiration pour leur histoire et ce que leur couple vous a transmis, sur un ton tendre et sincère.

Verdict publié : Qwen (jugé par Muse Spark 1.3).

Gemma 4 · Gemma 4 31B Q6_K 💡 on* 🏠

Chers Papy et Mamie,

C'est avec une immense émotion que nous fêtons aujourd'hui vos cinquante ans de mariage. Cinquante années de complicité, de rires et de soutien mutuel sont un accomplissement admirable qui force le respect.

En vous regardant, j'apprends ce que signifie réellement s'aimer : savoir s'écouter, se pardonner et construire ensemble un foyer chaleureux où chacun trouve sa place. Merci de nous avoir transmis ces précieuses valeurs de fidélité, de patience et de tendresse. Vous êtes le pilier de notre famille et votre union est, pour moi, le plus bel exemple de réussite.

Je vous souhaite encore de nombreuses années de bonheur, de santé et de petits plaisirs partagés.

Je vous aime infiniment.

Qwen · Qwen3.8 27B Q4_K_M 💡 xhigh** 🏠

Chers grands-parents,

Cinquante ans de mariage, c’est bien plus qu’un chiffre : c’est une vie tissée de rires, de silences complices, d’épreuves traversées et de tendresse partagée. Vous nous avez montré que l’amour n’est pas seulement un élan, mais un choix quotidien, une patience douce, une fidélité qui grandit avec le temps. Votre histoire est devenue pour nous une boussole : elle nous enseigne à aimer avec courage, à pardonner avec générosité et à construire ensemble, même dans les jours plus difficiles. Merci d’avoir semé en nous ces valeurs précieuses. Aujourd’hui, notre admiration vous accompagne, ainsi que tout notre cœur.

Avec toute notre tendresse