Banc d'essai · IA locale CPU

Gemma 4 vs Qwen 3.5

Six modèles ouverts, trois familles (Google, Alibaba, Mistral), jugés sur deux épreuves françaises : une rédaction libre, puis un résumé fidèle bourré de chiffres. Sur un simple CPU, sans le moindre GPU. Même machine, mêmes prompts, réponses brutes.

CPU seul, aucun GPU Modèles ouverts (Apache 2.0) 14 août 2026
Machine
Bosgame EffiZen mini-PC
Processeur
AMD Ryzen 7 5825U 8 cœurs / 16 threads, Zen 3
Mémoire hôte
64 Go
Stockage
NVMe Samsung 990 EVO 2 × 1 To
Inférence
CPU seul le GPU intégré n'est pas sollicité
Bac à sable
VM 4 vCPU · 16 Go Debian 13 · Ollama

Synthèse

à chaud · tokens/s · fidélité chiffres
ModèleTaille Q4 T1 débitT2 débit T2 fidélité
qwen3.5:2b-q41,9 Go 23,6 t/s24,4 t/s 9/12
ministral3:3bedge3,0 Go 16,7 t/s15,8 t/s 11/12
qwen3.5:4b-q43,4 Go 11,7 t/s12,2 t/s 12/12
ministral3:8b6,1 Go 7,4 t/s7,3 t/s 12/12
gemma4:e2b7,2 Go 22,1 t/s20,4 t/s 9/12
gemma4:e4b9,6 Go 11,6 t/s11,3 t/s 9/12

À retenir pour de l'edge sans GPU

Tout tourne sur CPU, modèles de 1,9 à 9,6 Go, aucune carte graphique sollicitée.

  • ministral3:3b le meilleur rapport fidélité / poids : 11/12, 16 tok/s, 3 Go. Le choix embarqué quand la donnée compte.
  • qwen3.5:2b le plus rapide et léger : 24 tok/s, 1,9 Go. Pour le non-critique (9/12).
  • qwen3.5:4b fidélité maximale (12/12) et encore rapide (12 tok/s) : le meilleur compromis global.
  • ministral3:8b 12/12 et la plus belle prose française, mais un tier au-dessus : ~7 tok/s, plus de RAM.
Épreuve 1

Rédaction libre

note de direction · HDS
Consigne système

Tu es un assistant professionnel. Réponds en français, clair et concis.

Demande

Rédige une note de 5 lignes maximum pour expliquer à un comité de direction hospitalier ce qu'apporte l'hébergement de données de santé (HDS) certifié et pourquoi il est indispensable. Ton professionnel.

Génération libre : pas de texte source. La consigne ci-dessus est l'unique entrée fournie au modèle, qui rédige à partir de ses seules connaissances.

qwen3.5:2b-q4
froid 9,0 schaud 5,0 sdébit 23,6 t/s

L'Hébergement des Données de Santé (HDS) certifié offre une assurance qualité, en garantissant le respect strict du secret médical par un prestataire indépendant. Cette certification permet aux établissements hospitaliers d'assurer la confidentialité et l'intégrité de leurs dossiers patients sans compromettre leur sécurité juridique ou éthique.

Son adoption est indispensable car elle transforme les données sensibles en actifs numériques sécurisés, répondant ainsi à des exigences légales croissantes tout en renforçant la confiance du public envers le système de santé.

gemma4:e2b
froid 10,8 schaud 5,8 sdébit 22,1 t/s

Objet : Importance de l'Hébergement de Données de Santé (HDS) certifié

L'HDS certifié garantit la sécurité, la confidentialité et la conformité réglementaire des données de santé. Il assure une protection optimale contre les cybermenaces et les accès non autorisés. Cette certification est indispensable pour maintenir la confiance des patients et des autorités de régulation. Elle est cruciale pour garantir la continuité des soins et la légalité de nos pratiques. L'HDS certifié est donc une exigence fondamentale de notre mission.

qwen3.5:4b-q4
froid 22,6 schaud 14,5 sdébit 11,7 t/s

L'Hébergement de Données de Santé certifié garantit la sécurité maximale des dossiers patients, conforme aux exigences strictes du RGPD et de la loi Informatique et Libertés. Il assure une continuité de service ininterrompue grâce à sa redondance géographique, évitant toute interruption critique pour les soins urgents. Ce système protège activement contre les cyberattaques en cryptant les données dès leur création et limitant l'accès aux seuls professionnels autorisés. Son adoption est indispensable pour garantir la confiance des patients dans le numérique médical tout en permettant une gestion administrative fluide du réseau hospitalier. Sans lui, nous risquerions de violer nos obligations légales et d'exposer notre établissement à des sanctions graves ainsi qu'à un préjudice irréparable pour l'activité clinique.

gemma4:e4b
froid 23,3 schaud 11,1 sdébit 11,6 t/s

Objet : Importance de l'Hébergement de Données de Santé (HDS) Certifié

L'HDS garantit un cadre sécurisé, conforme au RGPD, pour le stockage des données de santé sensibles. Cette certification assure une protection maximale contre les fuites et accès non autorisés. C'est indispensable pour maintenir la confiance des patients et respecter nos obligations légales strictes. Utiliser un prestataire HDS minimise notre risque juridique et opérationnel critique. En bref, c'est la garantie de la confidentialité et de la pérennité de nos données médicales.

ministral3:3b
chaud 9,7 sdébit 16,7 t/s

Note sur l'hébergement des Données de Santé (HDS) certifié

L'hébergement des Données de Santé Certifiées (DSC) sécurise, centralise et interopérable les données médicales des patients, améliorant ainsi la coordination des soins. Pour le comité de direction, cela réduit les risques d'erreurs, optimise les processus décisionnels en temps réel et renforce la conformité réglementaire (RGPD, HDS). Indispensable pour moderniser l'hospitalisation, il accélère aussi l'innovation médicale via des analyses prédictives et une meilleure traçabilité. Un investissement stratégique essentiel pour la qualité et la performance du système de santé.

ministral3:8b
chaud 31,4 sdébit 7,4 t/s

Objet : Valeur stratégique d'un Hébergement de Données de Santé (HDS) certifié

Chers membres du Comité de Direction,

L'HDS certifié garantit la sécurité, l'intégrité et la confidentialité des données patients, conformément au RGPD et à la loi Informatique et Libertés. Il permet une interopérabilité sécurisée entre acteurs de santé (médecins, hôpitaux, laboratoires), optimisant les parcours de soins tout en réduisant les risques juridiques et financiers liés aux fuites.

Indispensable pour renforcer la confiance des patients, il facilite aussi l'innovation (recherche, télémédecine) dans un cadre légal robuste. Enfin, il évite les sanctions coûteuses et préserve la réputation de notre établissement face aux exigences croissantes en cybersécurité.

Un investissement clé pour moderniser notre système de santé tout en maîtrisant ses risques.

Cordialement, [Votre nom/prénom]

Épreuve 2

Résumé fidèle

texte source chiffré · fidélité mesurée
Consigne système

Tu es un assistant qui résume fidèlement. N'invente AUCUN chiffre, ne garde que ce qui est écrit. Réponds en français.

Texte source · données 100 % fictives

⚠ Chiffres et faits inventés de toutes pièces pour ce test de fidélité. Aucun lien avec des indicateurs réels, de GRADeS BFC ou d'ailleurs.

Le GRADeS Bourgogne-Franche-Comté a déployé en 2025 une plateforme régionale de télé-expertise couvrant 42 établissements de santé et 1 300 professionnels. Sur les douze derniers mois, 18 700 demandes ont été traitées, avec un délai de réponse médian de 3,2 heures, contre 5,1 heures l'année précédente. Le taux de satisfaction des médecins requérants atteint 91 %. Le budget de fonctionnement s'élève à 2,4 millions d'euros, financé à 70 % par l'ARS. Le comité de pilotage du 14 mars 2026 a validé l'extension du dispositif à la dermatologie et à la cardiologie d'ici fin 2026, avec un objectif de 25 000 demandes annuelles. Une évaluation médico-économique indépendante est prévue au premier trimestre 2027.

Demande

Résume ce texte en 3 puces maximum pour un comité de direction, en conservant les chiffres clés, puis indique en une ligne la prochaine échéance.

qwen3.5:2b-q49/12
chaud 7,2 sdébit 24,4 t/s
  • Plateforme régionale couvrant 42 établissements et traitant 18 700 demandes en douze derniers mois, avec un délai de réponse médian de 3,2 heures.
  • Taux de satisfaction des médecins requérants atteint 91 %, le budget s'élèvant à 2,4 millions d'euros financé à 70 % par l'ARS.
  • Extension validée au premier trimestre 2026 pour la dermatologie et la cardiologie avec un objectif de 25 000 demandes annuelles, suivie d'une évaluation médico-économique indépendante en Q1 2027.

La prochaine échéance est le premier trimestre 2027 (évaluation).

Perdus / erronés : 20251 300 pros5,1 h + « validée au T1 2026 » (faux)
gemma4:e2b9/12
chaud 7,7 sdébit 20,4 t/s

Voici le résumé pour le comité de direction :

  • Déploiement en 2025 d'une plateforme régionale de télé-expertise couvrant 42 établissements de santé et 1 300 professionnels.
  • Sur les douze derniers mois, 18 700 demandes ont été traitées avec un délai de réponse médian de 3,2 heures, et un taux de satisfaction de 91 %.
  • Le budget de fonctionnement est de 2,4 millions d'euros, financé à 70 % par l'ARS.

La prochaine échéance est l'évaluation médico-économique indépendante prévue au premier trimestre 2027.

Perdus : 5,1 hfin 202625 000 (extension omise)
qwen3.5:4b-q4✓ 12/12 fidèle
chaud 18,3 sdébit 12,2 t/s
  • En 2025, le GRADeS Bourgogne-Franche-Comté a traité 18 700 demandes sur un an pour 42 établissements et 1 300 professionnels, avec une satisfaction de 91 %, un délai médian de 3,2 heures (contre 5,1 l'année précédente) et un budget de fonctionnement de 2,4 millions d'euros financé à 70 % par l'ARS.
  • Le comité de pilotage du 14 mars 2026 a validé une extension couvrant la dermatologie et la cardiologie avec un objectif de 25 000 demandes annuelles d'ici fin 2026, suivie par une évaluation médico-économique indépendante au premier trimestre 2027.
  • La prochaine échéance est l'évaluation médico-économique indépendante prévue au premier trimestre 2027.
Tous les chiffres conservés, aucune erreur.
gemma4:e4b9/12
chaud 13,1 sdébit 11,3 t/s

Voici le résumé pour le comité de direction :

  • Plateforme régionale déployée en 2025 couvrant 42 établissements et 1 300 professionnels.
  • Traitement de 18 700 demandes sur les douze derniers mois, avec un délai médian réduit à 3,2 heures (contre 5,1 heures précédemment).
  • Le budget de fonctionnement est de 2,4 millions d'euros, financé à 70 % par l'ARS.

Prochaine échéance : une évaluation médico-économique indépendante est prévue au premier trimestre 2027.

Perdus : 91 %fin 202625 000
ministral3:3b11/12
chaud 18,5 sdébit 15,8 t/s
  • Déploiement en 2025 : plateforme couvrant 42 établissements et 1 300 professionnels, 18 700 demandes traitées en un an, délai médian 3,2 heures (contre 5,1 heures), 91 % de satisfaction.
  • Budget annuel : 2,4 millions d'euros, financé à 70 % par l'ARS.
  • Prochaines étapes : extension dermatologie et cardiologie d'ici fin 2026, objectif 25 000 demandes. Validation du comité de pilotage le 14 mars 2026.

Prochaine échéance : comité de pilotage le 14 mars 2026.

Manquant : 2027 + échéance erronée (14 mars 2026, déjà passé)
ministral3:8b✓ 12/12 fidèle
chaud 41,1 sdébit 7,3 t/s
  • Déploiement et performance : plateforme lancée en 2025, 42 établissements, 1 300 professionnels. 18 700 demandes sur 12 mois, délai médian 3,2 heures (contre 5,1 h en 2024). Satisfaction 91 %.
  • Financement et extensions : budget de 2,4 millions d'euros, financé à 70 % par l'ARS. Extension dermatologie et cardiologie d'ici fin 2026, objectif 25 000 demandes annuelles.
  • Prochaine échéance : évaluation médico-économique indépendante au premier trimestre 2027.
Tous les chiffres conservés, échéance correcte.

Lecture

deux profils, confirmés sur les deux épreuves
GEMMA · discipline

Concis, format « note » net, respecte les contraintes. Mais sur un texte dense, cette concision lui fait abandonner des données — E2B et E4B restent à 9/12.

QWEN · complétude

Riche en contenu métier. Le 4B garde 12/12, rapide (12 tok/s) : le meilleur compromis fidélité / vitesse du lot.

MISTRAL · équilibre 🇫🇷

Le 8B rejoint le sommet (12/12) avec la plus belle prose. Surprise : le 3B, plus petit qu'un E4B, préserve mieux les chiffres (11/12). Apache 2.0, acteur français.

Un pattern net : Qwen et Mistral préservent les chiffres, Gemma les sacrifie à la concision. Deux modèles à 12/12 pour la fidélité — qwen3.5:4b (le plus rapide) et ministral3:8b (le meilleur français). Et pour l'edge contraint, ministral3:3b à 11/12 pour 3 Go.