Compar:IA : le comparateur d’IA gratuit créé par l’État français

Quel modèle d’IA répond le mieux à vos questions ? La plupart des gens se fient aux classements techniques, aux tests de performance ou au bouche-à-oreille. Ces méthodes reflètent pourtant mal un usage réel, et encore moins la qualité des réponses en français.

Compar:IA répond à ce problème. Ce comparateur, lancé en octobre 2024 dans le cadre du programme beta.gouv.fr, vous fait poser une question à deux modèles en même temps, sans savoir lequel est lequel. Vous votez ensuite pour la meilleure réponse. Le service est gratuit, ne demande aucune inscription et fonctionne directement dans le navigateur.

Comment fonctionne Compar:IA

Rendez-vous sur comparia.beta.gouv.fr et tapez une question, quelle qu’elle soit. Deux réponses apparaissent côte à côte, identifiées comme « Modèle A » et « Modèle B ». Vous les lisez puis vous votez pour celle que vous préférez, ou vous déclarez une égalité. L’identité des modèles n’apparaît qu’après votre vote, avec leurs caractéristiques et une estimation de leur consommation d’énergie.

Ce principe du vote à l’aveugle vient de LMArena, l’ancien Chatbot Arena, le classement de référence dans la recherche en IA. Compar:IA s’en distingue par sa place donnée au français et aux usages réels des francophones : selon ses concepteurs, 89 % des questions posées sur la plateforme sont rédigées en français.

Plus de 100 modèles disponibles

En février 2026, Compar:IA proposait 104 modèles, dont 29 propriétaires, les autres étant ouverts. On y trouve les grands noms comme OpenAI, Anthropic, Google, Mistral AI, Meta, Alibaba ou DeepSeek, ainsi que des modèles moins connus. L’équipe les choisit selon leur popularité, leur diversité et leur intérêt pour les utilisateurs. Elle veille aussi à proposer des modèles dont les poids sont publics et des tailles variées, du petit modèle rapide au gros modèle de raisonnement.

Un classement fondé sur les préférences des utilisateurs

Le 3 novembre 2025, Compar:IA a publié son premier classement, mis à jour chaque semaine. Il convertit les votes en scores grâce à un modèle statistique (Bradley-Terry), avec une marge d’incertitude pour chaque modèle. La première édition réunissait 60 modèles de 15 éditeurs, dont deux tiers de modèles ouverts.

Ce classement réserve quelques surprises. Des modèles compacts, comme Gemma 3 de Google en version 12 ou 27 milliards de paramètres, se placent dans le top 10 face à des modèles bien plus gros. L’équipe rappelle que le classement mesure une préférence subjective des utilisateurs, pas l’exactitude des réponses. Il donne surtout une image des modèles qui plaisent aux francophones dans leurs usages réels.

Pourquoi ce projet compte

Un bien commun pour le français

Chaque vote alimente un jeu de données de préférences humaines, publié librement sous licence ouverte sur Hugging Face et data.gouv.fr. En février 2026, la plateforme avait recueilli plus de 600 000 questions et plus de 250 000 votes. Les développeurs peuvent utiliser ces données pour améliorer le français de leurs modèles, ce qui fait de chaque vote une contribution concrète.

La transparence sur l’énergie

Après chaque vote, le service affiche une estimation de l’énergie consommée par chaque modèle. Selon l’équipe, l’écart entre le modèle le plus sobre et le plus gourmand atteint un rapport de 1 à 80. Ces chiffres restent des estimations, mais ils rappellent qu’un petit modèle suffit souvent pour une question simple.

Un outil pédagogique

Tester les modèles à l’aveugle montre vite que les écarts de qualité ne se trouvent pas toujours là où on les attend. Un modèle ouvert peut battre un géant américain sur une tâche précise, et un petit modèle peut suffire sur une question simple. L’exercice démystifie l’IA et développe l’esprit critique. Via la plateforme PIX, plus d’un million et demi d’élèves doivent d’ailleurs l’utiliser en 2026.

Comment l’utiliser concrètement

Rendez-vous d’abord sur comparia.beta.gouv.fr, sans créer de compte ni donner de données personnelles. Posez ensuite une vraie question, celle que vous poseriez à votre assistant habituel dans votre travail : plus elle est réaliste, plus les données recueillies sont utiles. Lisez les deux réponses avant de voter pour la meilleure, ou déclarez une égalité. Prenez enfin quelques secondes pour regarder l’identité des modèles et leur consommation, car c’est là que l’on apprend le plus. Vous pouvez enchaîner autant de comparaisons que vous le souhaitez.

Une ouverture européenne

Compar:IA s’ouvre progressivement à d’autres pays. La Lituanie, la Suède et le Danemark testent leur propre version, sous les noms palyginti:AI, jämföra:AI et AI-Arenaen. L’objectif est de construire un bien commun européen pour l’évaluation humaine des IA conversationnelles, ce qui donnerait à l’Europe une voix face aux classements américains.

Les limites à connaître

Aucun modèle n’a accès à Internet. Une question sur l’actualité du jour obtiendra une réponse inventée ou un refus, puisque vous testez le modèle brut.

Les fonctions avancées manquent. Le service ne permet pas d’importer des documents, de générer des images ni de parler à voix haute. Il se concentre sur la conversation écrite.

L’impact environnemental reste estimé. Les chiffres affichés donnent un ordre de grandeur, sans mesure précise.

La qualité des votes dépend des utilisateurs. Un vote au hasard ou sans lecture attentive dégrade les données. Si vous participez, prenez le temps de lire les deux réponses.

Ce qu’il faut retenir

Compar:IA est un outil discret mais utile. Il permet de tester gratuitement plus de 100 modèles d’IA à l’aveugle, sans compte, et de consulter un classement fondé sur de vrais usages en français. Sa valeur est surtout collective, car chaque vote enrichit des données ouvertes qui serviront à améliorer les IA en français. Pour aller plus loin dans le choix d’un assistant, notre comparatif entre ChatGPT, Claude et Gemini compare les applications complètes, avec leurs outils et leurs offres.