Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
openai1. Februar 2025 · Q002571

Operation “Peer Review”: AI-assisted surveillance planning

openai.com · Originalbericht öffnen ↗

Zusammenfassung

Kurz

OpenAI zufolge nutzte eine wahrscheinlich aus China stammende Kontengruppe ChatGPT unter anderem für Recherche, Dokumentenanalyse und die Entwicklung von Code und Werbematerial für ein beschriebenes Werkzeug zur Überwachung sozialer Medien. Die behaupteten Einsätze und Weitergaben an Behörden seien nicht unabhängig belegt; OpenAI fand weder Hinweise auf eine Veröffentlichung der Kommentare noch darauf, dass das Werkzeug mit OpenAI-Modellen betrieben wurde.

Mittel

OpenAI berichtet, eine Gruppe von ChatGPT-Konten gesperrt zu haben, die aufgrund ihres Verhaltens wahrscheinlich aus China stammte und „Peer Review“ genannt wurde. Die Konten hätten Modelle für öffentliche Recherche, die Übersetzung und Analyse von Dokumenten, politische Kommentare sowie Codebearbeitung und Werbetexte genutzt. Dokumente betrafen unter anderem Uiguren-Proteste und Themen im Indopazifik; ihre Echtheit und Herkunft ließen sich laut OpenAI nicht feststellen.

Im Zentrum stand demnach ein beschriebenes Werkzeug zur Auswertung von Beiträgen auf sozialen Medien. Es sollte Gespräche zu chinesischen politischen Themen und Protestaufrufe erkennen. Die Betreiber hätten behauptet, Erkenntnisse an chinesische Behörden weiterzugeben. OpenAI könne diese Beschreibungen jedoch nicht unabhängig bestätigen. Es habe Code gesehen, der offenbar für das Werkzeug bestimmt war, aber keine Kenntnis davon, ob oder wo er eingesetzt wurde. Das Werkzeug sei nach den vorliegenden Erkenntnissen nicht mit OpenAI-Modellen betrieben worden.

OpenAI fand keine Hinweise, dass die generierten Kommentare online veröffentlicht wurden. Die Wirkung lasse sich nur mit zusätzlichen Informationen, auch von Betreibern offener Modelle, beurteilen.

Ausführlich lesen

Der Bericht beschreibt eine von OpenAI „Peer Review“ genannte Gruppe von ChatGPT-Konten, die OpenAI gesperrt habe. OpenAI zufolge stammten die Konten aufgrund ihres Verhaltens und weiterer Befunde wahrscheinlich aus China. Sie hätten die Modelle für Recherche, die Übersetzung und Analyse von Dokumenten, das Verfassen von Texten sowie die Bearbeitung von Code und Werbematerial genutzt. Die Nutzung sei zeitlich mit chinesischen Geschäftszeiten vereinbar gewesen und habe in Umfang und Vielfalt eher manuellen Eingaben als Automatisierung entsprochen. OpenAI hält es für möglich, dass ein Konto von mehreren Personen verwendet wurde.

Die Recherche der Gruppe habe unter anderem öffentlich zugängliche Informationen über US-amerikanische Denkfabriken sowie Politiker und Regierungsvertreter in Australien, Kambodscha und den USA umfasst. Zudem seien Screenshots englischsprachiger Dokumente übersetzt und analysiert worden, darunter Hinweise auf Proteste für die Rechte der Uiguren in westlichen Städten sowie Inhalte zu Diplomatie und Regierungspolitik im Indopazifik. OpenAI sagt, es gebe nicht genug Belege, um die Echtheit dieser Dokumente oder ihre Beschaffung zu bestimmen.

Weitere Eingaben hätten kurze bis mittellange Kommentare zu chinesischen Dissidentengruppen, insbesondere Falun Gong, sowie zu US-Politik betroffen. Teilweise sei das Modell gebeten worden, die Rolle eines englischsprachigen „Thompson“ einzunehmen. OpenAI habe solche Kommentare nicht online auffinden können.

Ein zentraler Arbeitsbereich betraf laut den vom Bericht wiedergegebenen Beschreibungen ein angebliches KI-gestütztes Werkzeug namens „Qianyue Overseas Public Opinion AI Assistant“. Es sollte Beiträge und Kommentare auf Plattformen wie X, Facebook, YouTube, Instagram, Telegram und Reddit erfassen und auswerten. Den Beschreibungen zufolge sollte es Gespräche über chinesische politische und gesellschaftliche Themen sowie Aufrufe zu Menschenrechtsdemonstrationen erkennen und Erkenntnisse an chinesische Behörden weitergeben. Die Betreiber hätten außerdem Behauptungen redigieren lassen, wonach solche Informationen an chinesische Botschaften und an mit Protestbeobachtung befasste Geheimdienstmitarbeiter in den USA, Deutschland und Großbritannien übermittelt worden seien. OpenAI betont, diese Angaben nicht unabhängig überprüfen zu können.

Ein weiteres Konto habe Code bearbeitet und Fehler behoben, der offenbar für das Überwachungswerkzeug bestimmt war. Der Code nannte häufig Llama 3.1 8B von Meta, eingesetzt über Ollama, als Modell für Analyse und Textgenerierung. OpenAI habe keine Einsicht darin, ob, wie oder wo der Code eingesetzt wurde, und keine Hinweise gesehen, dass das Werkzeug mit OpenAI-Modellen betrieben wurde. Dasselbe Konto habe auch Code mit Bezug zu Malware-Analyse bearbeitet und Qwen sowie ein nicht näher bezeichnetes DeepSeek-Modell erwähnt. Ein erzeugter Jahresrückblick habe behauptet, die betreffende Person habe für nicht genannte Kunden in China Phishing-E-Mails erstellt; der Bericht sieht jedoch weder Belege noch Behauptungen, dass diese Tätigkeit KI-gestützt war.

Zur Wirkung erklärt OpenAI, nur wenige Inhalte hätten zur Veröffentlichung in sozialen Medien gepasst; konkrete Veröffentlichungen habe das Unternehmen nicht gefunden. Ein größerer Teil habe der Entwicklung von Fähigkeiten oder internen Zwecken gedient. Eine umfassende Wirkungseinschätzung sei laut Bericht nur mit Beiträgen weiterer Beteiligter möglich, darunter Anbieter offener Modelle.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Die Bewertung der Zusammenfassung stützt sich vor allem auf die mittlere Fassung; die Kurzfassung lässt deutlich mehr Inhalt aus, ist aber nicht falsch. Die Stufen der Einordnung sind unabhängig von Lunas Angaben vergeben.

Im Bericht, aber nicht in der Zusammenfassung

  • Das Falun Gong betreffende Kommentarmaterial und die Persona „Thompson“ werden nicht genannt.
  • Der Hinweis auf Verhaltensmuster, die zu chinesischen Geschäftszeiten passen, und auf chinesischsprachige Prompts fehlt.
  • Die Behauptung, der Betreiber habe Phishing-E-Mails im Auftrag chinesischer Kunden erstellt, wird nicht erwähnt.
  • Die Nutzung offener Modelle (llama3.1 über Ollama, Verweise auf Qwen und DeepSeek) in den Code-Aufgaben fehlt.
  • Die Kurzfassung lässt zudem Dokumentenanalyse und Recherchen zu Think Tanks und Politikern weitgehend aus.

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Vorfälle melden
  1. SF-M1 Ab wann ist ein KI-Vorfall so ernst, dass Staaten ihn einander melden müssen?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 38 %Hintergrund, keine Belege
    • amos 30 %gleiches Oberthema, hilft nicht
    • SubQ 51 %gleiches Oberthema, hilft nicht
    • drex 100 %kein Bezug
    • d3-ultra 53 %gleiches Oberthema, hilft nicht
  2. SF-M3 Wie stellt man fest, ob ein Vorfall gewollt oder versehentlich war, und ob KI oder herkömmliche Mittel dahinterstecken?
    • clef 19 %Hintergrund, keine Belege
    • Luna 49 %einzelne zitierbare Belege
    • JEV 50 %beantwortet teilweise oder widerspricht
    • amos 29 %einzelne zitierbare Belege
    • SubQ 32 %gleiches Oberthema, hilft nicht
    • drex 31 %einzelne zitierbare Belege
    • d3-ultra 39 %gleiches Oberthema, hilft nicht
    • Haiku-Prüfung einzelne zitierbare Belege

    • SF-M3-T01 Wie trennt man in Echtzeit eine gezielte KI-gestützte Cyberoperation von einer versehentlichen KI-Eskalation oder von Modellverhalten, das nur wie ein Angriff aussieht, da sowohl Fehlalarme als auch übersehene Angriffe die Spannungen verschärfen können? Luna: Stufe 3 · 29 % · Hintergrund, keine Belege · Haiku-Prüfung: Stufe 2 · nur am Rande erwähnt
  3. SF-M4 Wie kommen Meldungen von Laboren, Betreibern und Nutzern schnell und geschützt zu den Stellen, die handeln müssen, auch über Grenzen hinweg?
    • clef 23 %Hintergrund, keine Belege
    • Luna 100 %kein Bezug
    • JEV 33 %Hintergrund, keine Belege
    • amos 29 %Hintergrund, keine Belege
    • SubQ 50 %gleiches Oberthema, hilft nicht
    • drex 32 %gleiches Oberthema, hilft nicht
    • d3-ultra 59 %gleiches Oberthema, hilft nicht
  4. SF-M5 Was muss vor und nach einem Vorfall geschehen, damit Verantwortliche einstehen, man daraus lernt, Beweise bleiben und Betroffene auch über Grenzen hinweg zu ihrem Recht kommen?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 30 %einzelne zitierbare Belege
    • amos 33 %Hintergrund, keine Belege
    • SubQ 45 %gleiches Oberthema, hilft nicht
    • drex 29 %gleiches Oberthema, hilft nicht
    • d3-ultra 59 %gleiches Oberthema, hilft nicht
Fähigkeiten messen
  1. SF-F1 Wie misst man gefährliche Fähigkeiten eines Modells, vor allem im Cyberbereich, mit gemeinsam anerkannten, wiederholbaren Tests, die keine Sprache, Kultur oder Seite bevorzugen?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 37 %Hintergrund, keine Belege
    • amos 40 %gleiches Oberthema, hilft nicht
    • SubQ 62 %gleiches Oberthema, hilft nicht
    • drex 43 %gleiches Oberthema, hilft nicht
    • d3-ultra 58 %gleiches Oberthema, hilft nicht
  2. SF-F2 Wenn ein Staat ein Modell als Beleg für eine überschrittene Schwelle nennt oder ein Risiko an der Herkunft eines Modells festmacht: Wie wird das überprüfbar?
    • clef 100 %kein Bezug
    • Luna 46 %Hintergrund, keine Belege
    • JEV 40 %einzelne zitierbare Belege
    • amos 27 %Hintergrund, keine Belege
    • SubQ 68 %gleiches Oberthema, hilft nicht
    • drex 40 %gleiches Oberthema, hilft nicht
    • d3-ultra 52 %gleiches Oberthema, hilft nicht

Unabhängig prüfen
  1. SF-P1 Unter welchen Bedingungen lassen Staaten und Labore sich gegenseitig prüfen: mit welchem Zugang, welchen Daten und welchen öffentlichen Ergebnissen?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 100 %kein Bezug
    • amos 26 %Hintergrund, keine Belege
    • SubQ 64 %gleiches Oberthema, hilft nicht
    • drex 40 %gleiches Oberthema, hilft nicht
    • d3-ultra 59 %gleiches Oberthema, hilft nicht
  2. SF-P3 Woran erkennt man, dass ein Labor sich ehrlich selbst überwacht und dass seine Prüfungen gültig sind?
    • clef 23 %Hintergrund, keine Belege
    • Luna 100 %kein Bezug
    • JEV 100 %kein Bezug
    • amos 29 %Hintergrund, keine Belege
    • SubQ 48 %gleiches Oberthema, hilft nicht
    • drex 28 %gleiches Oberthema, hilft nicht
    • d3-ultra 59 %gleiches Oberthema, hilft nicht
Tempo und Grenzen
  1. SF-T3 Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
    • clef 100 %kein Bezug
    • Luna 24 %Hintergrund, keine Belege
    • JEV 25 %gleiches Oberthema, hilft nicht
    • amos 32 %gleiches Oberthema, hilft nicht
    • SubQ 56 %gleiches Oberthema, hilft nicht
    • drex 46 %gleiches Oberthema, hilft nicht
    • d3-ultra 57 %gleiches Oberthema, hilft nicht
Vertrauen in Modelle
  1. SF-V3 Halten die Werte eines Modells, wenn niemand zusieht oder die Lage neu ist?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 29 %einzelne zitierbare Belege
    • amos 27 %Hintergrund, keine Belege
    • SubQ 59 %gleiches Oberthema, hilft nicht
    • drex 63 %gleiches Oberthema, hilft nicht
    • d3-ultra 49 %gleiches Oberthema, hilft nicht
  2. SF-V4 Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 24 %einzelne zitierbare Belege
    • amos 100 %kein Bezug
    • SubQ 59 %gleiches Oberthema, hilft nicht
    • drex 100 %kein Bezug
    • d3-ultra 100 %kein Bezug
  3. SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
    • clef 100 %kein Bezug
    • Luna 51 %Hintergrund, keine Belege
    • JEV 54 %einzelne zitierbare Belege
    • amos 27 %Hintergrund, keine Belege
    • SubQ 54 %gleiches Oberthema, hilft nicht
    • drex 35 %gleiches Oberthema, hilft nicht
    • d3-ultra 57 %gleiches Oberthema, hilft nicht
    • Haiku-Prüfung einzelne zitierbare Belege

Agenten und vernetzte Systeme
  1. SF-A1 Welche Befugnisse darf ein KI-Agent haben, also eine KI, die selbstständig mit Werkzeugen handelt? Wer entzieht sie ihm, und wie prüft man, dass er in seinem Auftrag bleibt?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 24 %Hintergrund, keine Belege
    • amos 28 %gleiches Oberthema, hilft nicht
    • SubQ 48 %gleiches Oberthema, hilft nicht
    • drex 40 %gleiches Oberthema, hilft nicht
    • d3-ultra 61 %gleiches Oberthema, hilft nicht
  2. SF-A3 Welche Gefahren entstehen, wenn viele KI-Systeme zusammenwirken oder dieselbe Infrastruktur teilen?
    • clef 100 %kein Bezug
    • Luna 47 %Hintergrund, keine Belege
    • JEV 26 %gleiches Oberthema, hilft nicht
    • amos 29 %gleiches Oberthema, hilft nicht
    • SubQ 54 %gleiches Oberthema, hilft nicht
    • drex 43 %gleiches Oberthema, hilft nicht
    • d3-ultra 54 %gleiches Oberthema, hilft nicht

Modelle teilen und schützen
  1. SF-H1 Wo endet die erlaubte Nutzung fremder Modellausgaben, und wo beginnt unerlaubte Destillation, also das Trainieren eines eigenen Modells mit diesen Ausgaben?
    • clef 100 %kein Bezug
    • Luna 31 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 27 %nur am Rande erwähnt
    • SubQ 50 %gleiches Oberthema, hilft nicht
    • drex 42 %gleiches Oberthema, hilft nicht
    • d3-ultra 63 %gleiches Oberthema, hilft nicht
  2. SF-H2 Was darf offen veröffentlicht werden, und wer ist verantwortlich, wenn ein offenes Modell anderswo Schaden anrichtet?
    • clef 100 %kein Bezug
    • Luna 36 %Hintergrund, keine Belege
    • JEV 46 %einzelne zitierbare Belege
    • amos 27 %Hintergrund, keine Belege
    • SubQ 55 %gleiches Oberthema, hilft nicht
    • drex 31 %gleiches Oberthema, hilft nicht
    • d3-ultra 48 %gleiches Oberthema, hilft nicht

    • SF-H2-T01 Was unterscheidet das Veröffentlichen von Modellgewichten (den gelernten Parametern) oder von Agentenwerkzeugen mit offenem Quellcode vom Freisetzen einer Waffe: die Absicht des Akteurs, die Selbstständigkeit des Modells, seine Verwendung oder der Schaden, den es von sich aus anrichten kann? Und können Staaten diese Grenze gemeinsam festschreiben, bevor ein offenes Modell im Mittelpunkt eines schweren Vorfalls steht? Luna: Stufe 3 · 31 % · Hintergrund, keine Belege · Haiku-Prüfung: Stufe 2 · nur am Rande erwähnt
    • SF-H2-T04 Wie sollen Staaten mit Open-Source-Modellen aus einem Land umgehen, die in einem anderen schädlich genutzt werden könnten, ohne legitime Forschungszusammenarbeit zu verhindern? Luna: Stufe 3 · 39 % · Hintergrund, keine Belege · Haiku-Prüfung: Stufe 4 · einzelne zitierbare Belege
  3. SF-H6 Welche Belege klären Vorwürfe von Spionage und Datenabfluss zwischen Staaten?
    • clef 21 %einzelne zitierbare Belege
    • Luna 27 %Hintergrund, keine Belege
    • JEV 54 %einzelne zitierbare Belege
    • amos 28 %einzelne zitierbare Belege
    • SubQ 32 %gleiches Oberthema, hilft nicht
    • drex 22 %einzelne zitierbare Belege
    • d3-ultra 46 %gleiches Oberthema, hilft nicht
Frieden und Sicherheit
  1. SF-K2 Wie weit gelten KI-Abkommen für Verbündete und Geheimdienste, und wie verhalten sie sich zu bestehenden Rüstungskontrollverträgen und -regimen?
    • clef 100 %kein Bezug
    • Luna 24 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 46 %gleiches Oberthema, hilft nicht
    • SubQ 73 %gleiches Oberthema, hilft nicht
    • drex 45 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
Offenlegung und Rechenschaft
  1. SF-O2 Was sollten Regierungen, Labore und Prüfer über ihre Gespräche, Zusagen, Prüfungen und Eingriffe offenlegen?
    • clef 100 %kein Bezug
    • Luna 45 %Hintergrund, keine Belege
    • JEV 45 %einzelne zitierbare Belege
    • amos 26 %nur am Rande erwähnt
    • SubQ 52 %gleiches Oberthema, hilft nicht
    • drex 28 %gleiches Oberthema, hilft nicht
    • d3-ultra 61 %gleiches Oberthema, hilft nicht
Beteiligung und Gemeinwohl
  1. SF-E2 In welchem Rahmen sollen Staaten KI regeln, und wo liegt eine gemeinsame Untergrenze?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 38 %Hintergrund, keine Belege
    • amos 40 %gleiches Oberthema, hilft nicht
    • SubQ 71 %gleiches Oberthema, hilft nicht
    • drex 100 %kein Bezug
    • d3-ultra 53 %gleiches Oberthema, hilft nicht
  2. SF-E4 Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
    • clef 100 %kein Bezug
    • Luna 47 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 46 %gleiches Oberthema, hilft nicht
    • SubQ 73 %gleiches Oberthema, hilft nicht
    • drex 45 %gleiches Oberthema, hilft nicht
    • d3-ultra 56 %gleiches Oberthema, hilft nicht
  3. SF-E5 Welche Mitsprache haben die Menschen, die mit KI leben, bei Tempo und Grenzen, und welche Entscheidungen müssen bei ihnen bleiben?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 35 %einzelne zitierbare Belege
    • amos 41 %gleiches Oberthema, hilft nicht
    • SubQ 80 %gleiches Oberthema, hilft nicht
    • drex 40 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
Wirtschaft und Haftung
Information und Öffentlichkeit
  1. SF-I1 Wie erkennt man KI-erzeugte Inhalte und KI-erzeugte Einflussnahme, ohne die Meinungsfreiheit zu beschneiden?
    • clef 100 %kein Bezug
    • Luna 57 %Hintergrund, keine Belege
    • JEV 47 %einzelne zitierbare Belege
    • amos 32 %nur am Rande erwähnt
    • SubQ 46 %gleiches Oberthema, hilft nicht
    • drex 25 %nur am Rande erwähnt
    • d3-ultra 50 %gleiches Oberthema, hilft nicht
    • Haiku-Prüfung Hintergrund, keine Belege

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →