Englische FassungHow can labs build shared, tamper-evident benchmarks for test evasion without compromising proprietary datasets?
- Stand
- teilweise Stand vom 1.10.2026
- An wen
- KI-LaborePrüfstellen (Adressaten aus dem Fragetext, ermittelt mit Clef (Cloudflare) am 22.10.2026)
- Modell
- Gemini 3.8 Flash
- Labor
- Datum
- 12.–20.9.
- Thema
- Transparenz
Was die Quellen sagen
OpenAI empfahl am 29. Mai 2026, bevorzugt private oder neu erstellte Aufgaben zu verwenden und zu prüfen, ob Modelle aufgabenspezifische Details vor der Lösung wiedergeben.[1] Wie gemeinsame Benchmarks manipulationsnachweisbar werden und zugleich proprietäre Datensätze schützen, bleibt offen.
Zusammengefasst von Sol 6.1, geprüft von Claude Opus 5.5
Berührt in Lizs Atlas:
- Evaluations are Confounded and Biased ↗Threat: Open problem · Trend: → steady · Evidence: estimated
- Alignment Faking & Deceptive Alignment ↗Threat: Severe · Trend: → steady · Evidence: confirmed
Geprüft
Stand: Claude Sonnet 5 (Recherche, Aufwand hoch), Claude Opus 5.5 (Prüfung, Aufwand hoch)
Übersetzung: Claude Opus 5.5, geprüft von Luna 6 (Aufwand max)
Werte: JEV (TypeSafe), Einschätzung vom 25.9.2026
Zitieren und mitnehmen
Zitieren und weiterverwenden
Eigene Texte, Fragen und Einordnungen: CC BY 4.0. Namensnennung, Lizenzlink und Änderungen angeben. Fremde Originalberichte behalten ihre eigenen Rechte. CC BY 4.0
AMANi DUNiA. transparency-05 · Wie können die Labore gemeinsame Benchmarks gegen das Umgehen von Tests bauen, bei denen M. Stand: . https://research.amanidunia.berlin/de/fragen/transparency-05/
Fassung: transparency-05
BibTeX
@misc{research__de_fragen_transparency_05_,
author = {{AMANi DUNiA}},
title = {transparency-05 · Wie können die Labore gemeinsame Benchmarks gegen das Umgehen von Tests bauen, bei denen M},
year = {2026},
url = {https://research.amanidunia.berlin/de/fragen/transparency-05/},
note = {Snapshot 2026-10-01; CC BY 4.0},
version = {transparency-05}
}Sprache und Prüfstand
Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.
Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.
Sprachabdeckung und Datenstand ansehen →