Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
deepmind16. Juli 2024 · Q006004

Language models, like humans, show content effects on reasoning tasks

deepmind.google · Originalbericht öffnen ↗

Zusammenfassung

Kurz

Der bereitgestellte Text ist der Abstract samt bibliografischen Angaben, nicht der vollständige Artikel. Laut Autorinnen und Autoren beeinflussen semantische Inhalte sowohl menschliche als auch maschinelle Schlussfolgerungen: Beide antworteten besser, wenn der Inhalt die logische Folgerung unterstützte. Bei der Wason-Aufgabe unterschieden sich die Gruppen jedoch; Menschen schnitten schlechter ab und zeigten ein eigenes Fehlermuster.

Mittel

Der bereitgestellte Bericht umfasst nur den Abstract und bibliografische Angaben, nicht den vollständigen Artikel. Die Autorinnen und Autoren untersuchen, ob große Sprachmodelle wie Menschen bei logischen Aufgaben durch die Bedeutung des Inhalts beeinflusst werden. Dafür verglichen sie Menschen und aktuelle Modelle bei drei Aufgaben: natürlichsprachlicher Inferenz, der Gültigkeit von Syllogismen und der Wason-Auswahlaufgabe.

Laut Abstract antworteten beide Gruppen genauer, wenn der semantische Inhalt die logisch richtige Schlussfolgerung stützte. Ähnliche Muster fanden sich demnach auch beim Verhältnis zwischen Modellkonfidenz und menschlichen Reaktionszeiten. Zugleich gab es Unterschiede: Bei der Wason-Aufgabe schnitten Menschen deutlich schlechter ab als große Modelle und zeigten ein abweichendes Fehlermuster. Die Forschenden deuten die Ergebnisse als Hinweise auf mögliche Ursachen menschlicher Denkeffekte und auf Faktoren, die die Leistung von Sprachmodellen prägen. Da der Auszug keine Modellnamen, Zahlen, Versuchsdetails oder statistischen Angaben enthält, erlaubt er keine genauere Einschätzung der Befunde.

Ausführlich lesen

Der bereitgestellte Bericht enthält den Abstract und bibliografische Angaben zu einer Veröffentlichung in *PNAS Nexus*; der vollständige Artikel liegt hier nicht vor. Die Zusammenfassung gibt daher die Aussagen des Abstracts wieder und kann Einzelheiten zu Methoden und Ergebnissen nicht ergänzen.

Die Autorinnen und Autoren untersuchen, ob große Sprachmodelle bei logischen Aufgaben ähnlich wie Menschen durch den inhaltlichen Kontext beeinflusst werden. Sie gehen von der Beobachtung aus, dass menschliches abstraktes Denken fehleranfällig ist und oft zuverlässiger ausfällt, wenn die Bedeutung einer Aufgabe die logisch richtige Schlussfolgerung stützt. Sprachmodelle erzielen bei abstrakten Denkaufgaben zwar bessere Ergebnisse als Zufall, weisen aber ebenfalls Schwächen auf.

Laut Abstract verglichen die Forschenden Menschen und aktuelle Sprachmodelle bei drei Aufgabenarten: dem Erkennen logischer Beziehungen zwischen natürlichsprachlichen Aussagen, der Beurteilung von Syllogismen und der Wason-Auswahlaufgabe. Die berichteten Ergebnisse zeigen demnach qualitative Gemeinsamkeiten: Menschen und Modelle antworteten genauer, wenn der semantische Inhalt die nötigen logischen Schlüsse unterstützte. Ähnliche Muster zeigten sich laut Autorinnen und Autoren auch bei weniger unmittelbaren Merkmalen, etwa beim Zusammenhang zwischen der Antwortsicherheit eines Modells und menschlichen Reaktionszeiten.

Die Übereinstimmung war jedoch nicht durchgängig. Besonders bei der Wason-Auswahlaufgabe schnitten Menschen laut Abstract deutlich schlechter ab als große Sprachmodelle und zeigten ein eigenes Fehlermuster. Die Autorinnen und Autoren sehen in den Befunden Hinweise darauf, welche Faktoren menschliche Denkeffekte mit hervorbringen und die Leistung von Sprachmodellen beeinflussen könnten. Der vorliegende Auszug nennt jedoch weder konkrete Modellnamen noch Zahlen, Versuchsdetails oder statistische Auswertungen; daraus lassen sich die Stärke und Reichweite der Ergebnisse nicht genauer beurteilen.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Der Bericht umfasst nur Abstract und bibliografische Angaben, nicht den vollständigen Artikel. Beide Zusammenfassungen weisen das korrekt aus. Die Einordnung stützt sich deshalb nur auf den Abstract.

Im Bericht, aber nicht in der Zusammenfassung

  • Kurze Fassung: die drei Aufgaben (natürlichsprachliche Inferenz, Syllogismen, Wason-Aufgabe) werden nicht genannt
  • Kurze Fassung: der Zusammenhang zwischen Modellkonfidenz und menschlichen Reaktionszeiten fehlt

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Vertrauen in Modelle
  1. SF-V1 Was zählt als Beleg für die Werte eines Modells, wenn sein sichtbares Denken und seine Selbstauskünfte allein nicht genügen?
    • clef 100 %kein Bezug
    • Luna 37 %Hintergrund, keine Belege
    • JEV offen
    • amos 100 %kein Bezug
    • SubQ 100 %kein Bezug
    • drex 41 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht
  2. SF-V4 Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
    • clef 100 %kein Bezug
    • Luna 43 %Hintergrund, keine Belege
    • JEV offen
    • amos 31 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 36 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht
  3. SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
    • clef 100 %kein Bezug
    • Luna 43 %Hintergrund, keine Belege
    • JEV offen
    • amos 40 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 63 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →