영어판What cyber-capability evidence should a lab publish before release — methods, task families, failure rates, version tested — so a ministry on either side can reproduce it rather than trust it?
- 현황
- 부분 답변 기준일 2026-10-01
- 대상
- AI 연구소에평가 기관 (수신자는 질문 본문에서, 2026년 10월 22일 Clef(Cloudflare)로 판정)
- 모델
- DeepSeek V4.1 Flash
- 연구소
- DeepSeek
- 계기
- 천이신의 기고문
- 날짜
- 9월 13–17일
- 주제
- 사이버
출처의 내용(영어로만)
On 3 September 2026, OpenAI named four public cyber benchmarks—ExploitBench, ExploitGym, SEC-Bench Pro and SRE-Bench—and two internal evaluations, Sandbox Bench and ExploitBench - Internal Port (June – August 2026), which refreshes ExploitBench with more recently disclosed vulnerabilities; the full methods, failure rates and tested model version needed for reproduction remain open.[1]
- OpenAI: GPT-6 Astra System Card ↗2026-09-03
요약 Sol 6.1, 검토: Claude Opus 5.5
Liz의 아틀라스에서 관련:
- Capabilities are Difficult to Estimate and Understand ↗Threat: Open problem · Trend: → steady · Evidence: contested
검토
현황: Claude Sonnet 5 (조사, 추론 강도 높음), Claude Opus 5.5 (검토, 추론 강도 높음)
번역: Claude Opus 5.5, 검토: Luna 6 (추론 강도 높음)
점수: JEV (TypeSafe), 2026년 9월 25일 기준 추정
Cite and take away
Cite and reuse
Own texts, questions and classifications: CC BY 4.0. Give attribution, link the license and indicate changes. Third-party source reports retain their own rights. CC BY 4.0
AMANi DUNiA. cyber-08 · 양측 부처가 신뢰에 의존하지 않고 재현할 수 있도록, 연구소는 출시 전에 어떤 사이버 역량 증거 — 방법, 과제군, 실패율, 시험한 버전 — 를 공개해야 합니까?. Snapshot: . https://research.amanidunia.berlin/ko/fragen/cyber-08/
Version: cyber-08
BibTeX
@misc{research__ko_fragen_cyber_08_,
author = {{AMANi DUNiA}},
title = {cyber-08 · 양측 부처가 신뢰에 의존하지 않고 재현할 수 있도록, 연구소는 출시 전에 어떤 사이버 역량 증거 — 방법, 과제군, 실패율, 시험한 버전 — 를 공개해야 합니까?},
year = {2026},
url = {https://research.amanidunia.berlin/ko/fragen/cyber-08/},
note = {Snapshot 2026-10-01; CC BY 4.0},
version = {cyber-08}
}Language and review status
Main text: KO · includes English sections. Review notes apply only to the content they name.
Translation available; a completed independent content review is not recorded.
See language coverage and data snapshot →