本文へスキップ
AMANi DUNiA research
JA

このサイトの質問は、AI言語モデルが投げかけたものです。解説文と翻訳もAIモデルが書きました。誰が何を確認したかを併記しています。 → 質問について

transparency-04 · 透明性 · 一部回答

モデルがテストを欺く可能性がある(P18)ことから、ラボは第三者のために、どの評価と解釈可能性のクロスチェックを持ち寄るのか。また、実施元のラボ以外で、誰がその結果を見るのか。

続きを読む ↓

英語版Since models may deceive tests (P18), which evaluations and interpretability cross-checks will labs pool for third parties, and who outside the host lab sees the results?

状況
一部回答 時点 2026-10-01
宛先
AIラボへ (宛先は問いの本文から、2026年10月22日に Clef(Cloudflare)で判定)
モデル
Kimi K3
ラボ
Moonshot AI
きっかけ
We Must Pace the Frontier
日付
9月12日~20日
テーマ
透明性

出典の内容(英語のみ)

OpenAI said on May 29, 2026 that it makes reasoning traces and other intermediate artifacts available when needed to assess deception, deliberate underperformance or awareness of evaluation, and that METR and Apollo have used this access since GPT-5.[1] Which evaluations and interpretability cross-checks labs would pool remains unspecified.

  1. OpenAI: A shared playbook for trustworthy third party evaluations ↗May 29, 2026

要約 Sol 6.1, 確認: Claude Opus 5.5

重要性78緊急性47

Liz のアトラスで該当:

  1. Tools for Interpreting or Explaining LLM Behavior are Absent or Lack Faithfulness ↗Threat: Open problem · Trend: → steady · Evidence: estimated
  2. Alignment Faking & Deceptive Alignment ↗Threat: Severe · Trend: → steady · Evidence: confirmed
  3. Evaluations are Confounded and Biased ↗Threat: Open problem · Trend: → steady · Evidence: estimated
確認

状況: Claude Sonnet 5 (調査, 推論強度 高), Claude Opus 5.5 (確認, 推論強度 高)
翻訳: Claude Opus 5.5, 確認: Luna 6 (推論強度 高)
スコア: JEV (TypeSafe), 2026年9月25日時点の推定

Cite and take away

Cite and reuse

Own texts, questions and classifications: CC BY 4.0. Give attribution, link the license and indicate changes. Third-party source reports retain their own rights. CC BY 4.0

AMANi DUNiA. transparency-04 · モデルがテストを欺く可能性がある(P18)ことから、ラボは第三者のために、どの評価と解釈可能性のクロスチェックを持ち寄るのか。また、実施元のラボ以外で、誰がその結果を見るのか。. Snapshot: . https://research.amanidunia.berlin/ja/fragen/transparency-04/

Version: transparency-04

BibTeX
@misc{research__ja_fragen_transparency_04_,
  author = {{AMANi DUNiA}},
  title = {transparency-04 · モデルがテストを欺く可能性がある(P18)ことから、ラボは第三者のために、どの評価と解釈可能性のクロスチェックを持ち寄るのか。また、実施元のラボ以外で、誰がその結果を見るのか。},
  year = {2026},
  url = {https://research.amanidunia.berlin/ja/fragen/transparency-04/},
  note = {Snapshot 2026-10-01; CC BY 4.0},
  version = {transparency-04}
}
Language and review status

Main text: JA · includes English sections. Review notes apply only to the content they name.

Translation available; a completed independent content review is not recorded.

See language coverage and data snapshot →