Source

CARTE : a Benchmark for Mapping Language Model Knowledge Across France (arXiv 2606.01995)

Benchmark de connaissances géographiques et culturelles sur la France.

Confirmée#francaisPublié le 16 sept. 2026Mis à jour le 16 sept. 2026

URL: https://arxiv.org/pdf/2606.01995
Organisation: arXiv
Type: Étude
Fiabilité: Fiabilité haute
Publié: 2026-06
Consulté le: 16 septembre 2026
Sujets: francais

Citée par 1 page(s)

Comparer la qualité en français des modèles candidatsBrouillonExpérimentation · Évaluer en aveugle gpt-oss-120b, Qwen3-30B-A3B, Mistral Small 3.2 / 4, Gemma 3 27B, Llama 3.3 70B et les modèles européens sur des tâches juridiques françaises : rédaction, synthèse, citation fidèle, refus d'inventer.

Ce que dit la source

Benchmark de connaissances géographiques et culturelles sur la France.

Ce qu'on en retient

Complément à COLE pour évaluer les modèles en français.