Les questions de ce site ont été posées par des modèles de langage d'IA ; les textes explicatifs et les traductions ont eux aussi été rédigés par des modèles d'IA. Qui a vérifié quoi est indiqué à côté. → À propos des questions
Un catalogue de modèles qui s’étoffe : ce qui figure déjà dans les études, quelles exécutions ont été signalées et ce qui pourrait être testé ensuite.
Mise à jour en date du · 2026-10-30
Run states and new technical specifications are a supplied working update, not a completed evaluation. Variants of the same model can appear in more than one environment.
Mis à jour automatiquement: 2026-11-04T15:20:55+00:00
Answers per report
9,247 archive entries with all available model outputs. Entries without model answers are included. Available AI summaries appear in the detail view. Missing data is not a substantive answer.
Loading the list of reports …
Answers as of: Study 2, 2026-10-30; other models from the import of 2026-11-03.
Questions version v4.6
41 entrées
Aucun modèle correspondant.
Issus des études · 17
Cloudflareévalué
clef:27b
Type
Decision model
Taille
27B
Étude
2
AA intelligence – · code – · agent –
Partial · 8,678 of 9,247 entries with all 35 answers.
Mise à jour des exécutions GrokBot fournie en date du 2026-10-30
Nace.AIévalué
Drex Max v1.1
Type
Decision model
Contexte / texte
262,144 tokens · par requête
Prix du modèle
0.03 USD / 1M input tokens
AA intelligence – · code – · agent –
Reported complete for all 2,253 reports (follow-up run 1 Nov 2026 added the 384 DeepMind reports). Technical specifications come from the run registration.
Partial · 8,602 of 9,247 entries with all 35 answers.
Reported complete for all 2,253 reports (follow-up run 1 Nov 2026 added the missing reports and the 384 DeepMind reports). The text in the state is shortened to 32,000 characters.
Partial · 6,402 of 9,247 entries with all 35 answers.
Mise à jour des exécutions GrokBot fournie en date du 2026-10-30
Environnement signalé : T4 avec Ollama. Les tailles de contexte en tokens diffèrent de la limite de requête supplémentaire de 64 KiB pour le texte et les questions. La réduction nécessaire est consignée dans l’exécution.
Cloudflareen cours
clef-flash:9b
Type
Decision model
Taille
9B
Contexte / texte
64K tokens · contexte
AA intelligence – · code – · agent –
Fallback to 32K or 16K is possible; the actual value is recorded.
Partial · 2,253 of 9,247 entries with all 35 answers.
Comme pour les modèles de langage : scores AA issus des données de ce site (état des modèles de langage). Uniquement les modèles que AA liste sous exactement ce nom ; sinon “–”. Les données de ce site ne contiennent pas encore de scores de code ni d’agent pour aucun modèle.
Modèle
Fournisseur
Intelligence AA
Code AA
Agent AA
état au
clef:27b
Cloudflare
–
–
–
–
Jev 1.14.0
TypeSafe
–
–
–
–
GPT-6 Luna
OpenAI
37
–
–
2026-10-01
Jev 1.13
TypeSafe
–
–
–
–
Clef Flash 9B
Cloudflare
–
–
–
–
Nimble 9B
Bespoke Labs
–
–
–
–
Tev1 4B
Together AI
–
–
–
–
Tev1 0.8B
Together AI
–
–
–
–
Laya 0.3.25
ConvAI
–
–
–
–
Drex Max v1.1
Nace.AI
–
–
–
–
d3-ultra
vLLM Semantic Router
–
–
–
–
d3-flash
vLLM Semantic Router
–
–
–
–
Mercury Decide
Inception Labs
–
–
–
–
amos-1-large
Scira · Amos
–
–
–
–
clef-flash:9b
Cloudflare
–
–
–
–
kev:9b-q4_K_M
–
–
–
–
–
nimble:9b
–
–
–
–
–
d1-omni:600m
–
–
–
–
–
nimble-v3:9b
–
–
–
–
–
d1:3b
–
–
–
–
–
d1-ultra
Liquid AI
–
–
–
–
d1.1
Liquid AI
–
–
–
–
clef-flash
Cloudflare
–
–
–
–
clef-omni
Cloudflare
–
–
–
–
joey-1
Baseten
–
–
–
–
elephant-1
Baseten
–
–
–
–
mammoth-1
Baseten
–
–
–
–
d3
–
–
–
–
–
tev1
–
–
–
–
–
laya
–
–
–
–
–
Ollaya
–
–
–
–
–
strands-decider:2b
–
–
–
–
–
subq-snap-1.1
Subq.ai
–
–
–
–
GLM-5.3-Flash
Z.ai
42
–
–
2026-10-01
Claude Haiku 5.5 · high
Anthropic
–
–
–
–
Claude Haiku 5.5 · max
Anthropic
–
–
–
–
d3:2b · lokal
vLLM Semantic Router
–
–
–
–
Claude Haiku 5.5 · low
Anthropic
–
–
–
–
kev:9b-q4_K_M · Kaggle
–
–
–
–
–
nimble-v3:9b · Kaggle
–
–
–
–
–
nimble:9b · Kaggle · Batch 5
–
–
–
–
–
Prétraitement, pas un modèle décisionnel
OpenDataLab
MinerU 4.1.3
Prepares PDFs as text before classification; not a decision model.
Données et interprétation
Les résultats achevés restent dans les études individuelles. Les nouveaux rapports d’état sont des mises à jour intermédiaires datées. Sans étiquettes de référence humaines, la concordance n’est pas l’exactitude.