Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
anthropic9. August 2023 · Q002625

Releasing Claude Instant 1.2

anthropic.com · Originalbericht öffnen ↗

Zusammenfassung

Kurz

Anthropic zufolge verbessert Claude Instant 1.2 gegenüber Version 1.1 die Leistungen bei Mathematik und Programmierung und erzielt höhere Werte in den genannten Codex- und GSM8K-Tests. Der Anbieter berichtet außerdem von besseren Antworten und Sicherheitsmerkmalen, erläutert aber die Prüfmethoden und Sicherheitswerte nur begrenzt.

Mittel

Anthropic kündigt Claude Instant 1.2 für Geschäftskunden an. Das Modell ist über die API verfügbar und wird als schnelle, preisgünstige und vielseitige Variante für Dialoge, Textanalyse, Zusammenfassungen und Dokumentverständnis beschrieben. Laut Anbieter verbessert es sich gegenüber Instant 1.1 unter anderem bei Mathematik, Programmierung, Schlussfolgern und Sicherheit. Außerdem soll es längere, besser strukturierte Antworten geben, Formatvorgaben zuverlässiger befolgen und bei Zitaten, mehrsprachigen Aufgaben und Fragen besser abschneiden.

Anthropic nennt 58,7 Prozent im Codex-Test für Instant 1.2 gegenüber 52,8 Prozent für Version 1.1 sowie 86,7 statt 80,9 Prozent beim GSM8K-Benchmark. Eine automatisierte Red-Team-Prüfung soll zudem weniger Halluzinationen und höhere Widerstandsfähigkeit gegen Jailbreaks zeigen. Der Beitrag enthält jedoch keine ausführlichen Angaben zu den Testmethoden oder konkrete Sicherheitswerte. Die Leistungs- und Sicherheitsverbesserungen sind somit Anbieterangaben, belegt durch ausgewählte Tests, deren Grenzen der Bericht nicht näher erläutert. Preise und Kontaktmöglichkeiten werden über externe Seiten verlinkt.

Ausführlich lesen

Anthropic kündigt Claude Instant 1.2 für Geschäftskunden an. Das Modell ist über die API verfügbar und wird als schnellere und günstigere, zugleich leistungsfähige Variante beschrieben. Laut Anthropic eignet es sich unter anderem für Dialoge, Textanalyse, Zusammenfassungen und das Verständnis von Dokumenten.

Anthropic zufolge übernimmt Instant 1.2 Stärken des Modells Claude 2 für praktische Anwendungsfälle und verbessert sich gegenüber Instant 1.1 in Mathematik, Programmierung, Schlussfolgern und Sicherheit. Es soll längere und stärker strukturierte Antworten erstellen, Formatvorgaben zuverlässiger befolgen und bei der Zitatentnahme, mehrsprachigen Aufgaben und Fragenbeantwortung besser abschneiden.

Als Belege für Fortschritte bei Mathematik und Programmierung nennt Anthropic zwei Benchmarkwerte: Im Codex-Test erreiche Instant 1.2 58,7 Prozent gegenüber 52,8 Prozent bei Version 1.1. Beim GSM8K-Benchmark liege der Wert bei 86,7 statt 80,9 Prozent. Der Beitrag verweist außerdem auf eine automatisierte Red-Team-Prüfung, in der das neue Modell laut Anthropic seltener halluziniere und widerstandsfähiger gegen Jailbreaks sei. Eine Abbildung vergleicht die Sicherheit von Claude-Modellen; ihre Bildunterschrift gibt an, dass niedrigere Werte besser sind.

Der Bericht stellt die Ergebnisse als Angaben des Anbieters dar. Er erläutert weder die Testmethoden und Versuchsbedingungen ausführlich noch nennt er konkrete Werte für die Sicherheitsverbesserungen. Die genannten Kennzahlen erlauben daher nur einen begrenzten Vergleich anhand der im Beitrag ausgewählten Benchmarks und Prüfungen. Entwickler können Instant 1.2 laut Ankündigung über die API aufrufen; für Preise und Geschäftskontakt verweist Anthropic auf separate Seiten.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Lunas Zusammenfassung liegt in zwei Fassungen vor; das Schema erlaubt nur eine Bewertung, daher wurde die mittlere Fassung geprüft. Die kurze Fassung ist ebenfalls treu, lässt aber die Verfahrensangaben und die Einordnung von Preis und Kontakt aus. Die Stufen beziehen sich nur auf den Berichtstext und die Abbildungen, deren Zahlen nicht eigenständig ausgewertet wurden.

Im Bericht, aber nicht in der Zusammenfassung

  • Claude Instant 1.2 übernimmt Stärken des neuesten Modells Claude 2 im Praxiseinsatz
  • Die Testergebnisse werden als Abbildungen mit Vergleichsgrafiken gezeigt, die im Text nicht ausgewertet sind

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Vorfälle melden
Fähigkeiten messen
  1. SF-F1 Wie misst man gefährliche Fähigkeiten eines Modells, vor allem im Cyberbereich, mit gemeinsam anerkannten, wiederholbaren Tests, die keine Sprache, Kultur oder Seite bevorzugen?
    • clef 100 %kein Bezug
    • Luna 40 %einzelne zitierbare Belege
    • JEV 59 %einzelne zitierbare Belege
    • amos 37 %gleiches Oberthema, hilft nicht
    • SubQ 49 %gleiches Oberthema, hilft nicht
    • drex 45 %gleiches Oberthema, hilft nicht
    • d3-ultra offen
    • Haiku-Prüfung nur am Rande erwähnt

    • SF-F1-T07 Wie sollten führende KI-Modelle über Sprachen und Kulturen hinweg geprüft und verbessert werden, damit ihr Sicherheitsverhalten nicht vom Englischen oder den Normen eines Landes abhängt? Luna: Stufe 4 · 33 % · einzelne zitierbare Belege · Haiku-Prüfung: Stufe 2 · nur am Rande erwähnt
  2. SF-F2 Wenn ein Staat ein Modell als Beleg für eine überschrittene Schwelle nennt oder ein Risiko an der Herkunft eines Modells festmacht: Wie wird das überprüfbar?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 41 %einzelne zitierbare Belege
    • amos 41 %gleiches Oberthema, hilft nicht
    • SubQ 49 %gleiches Oberthema, hilft nicht
    • drex 100 %kein Bezug
    • d3-ultra offen
Unabhängig prüfen
  1. SF-P3 Woran erkennt man, dass ein Labor sich ehrlich selbst überwacht und dass seine Prüfungen gültig sind?
    • clef 100 %kein Bezug
    • Luna 59 %einzelne zitierbare Belege
    • JEV 61 %einzelne zitierbare Belege
    • amos 27 %Hintergrund, keine Belege
    • SubQ 100 %kein Bezug
    • drex 30 %gleiches Oberthema, hilft nicht
    • d3-ultra offen
    • Haiku-Prüfung nur am Rande erwähnt

    • SF-P3-T02 Welche unabhängig überprüfbaren Zusagen könnten Regierungen von ihren KI-Laboren zur Veröffentlichung verlangen, und wie sieht unabhängige Prüfung aus, wenn der Beleg, dass ein Modell seinen vorgesehenen Zielen und Werten folgt, nur vom trainierenden Labor kommt und Prüfer weder die Modellgewichte (die gelernten Parameter) noch die Trainingsdaten sehen? Luna: Stufe 4 · 25 % · einzelne zitierbare Belege
    • SF-P3-T07 Wird jede öffentliche Aussage, ein führendes KI-Modell sei „besser ausgerichtet“ als ein anderes (folge also seinen vorgesehenen Zielen und Werten besser), reproduzierbare Kriterien, externe Prüfungen und widersprechende Ergebnisse enthalten? Luna: Stufe 4 · 54 % · einzelne zitierbare Belege · Haiku-Prüfung: Stufe 4 · einzelne zitierbare Belege
Tempo und Grenzen
  1. SF-T1 Welche messbaren Schwellen sollen eine Pause auslösen, und wer prüft sie?
    • clef 100 %kein Bezug
    • Luna 41 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 36 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 55 %gleiches Oberthema, hilft nicht
    • d3-ultra offen

    • SF-T1-T05 Welche messbaren Vergleichswerte würden zeigen, dass die Ausrichtung der Modelle eines Labors an den vorgesehenen Zielen und Werten schneller vorankommt, als ihre Fähigkeiten wachsen, über das Fehlen öffentlicher Fehlschläge hinaus? Luna: Stufe 4 · 33 % · einzelne zitierbare Belege
Vertrauen in Modelle
  1. SF-V1 Was zählt als Beleg für die Werte eines Modells, wenn sein sichtbares Denken und seine Selbstauskünfte allein nicht genügen?
    • clef 100 %kein Bezug
    • Luna 27 %einzelne zitierbare Belege
    • JEV 42 %einzelne zitierbare Belege
    • amos 26 %Hintergrund, keine Belege
    • SubQ 44 %gleiches Oberthema, hilft nicht
    • drex 41 %gleiches Oberthema, hilft nicht
    • d3-ultra offen
    • Haiku-Prüfung gleiches Oberthema, hilft nicht

    • SF-V1-T02 Welche Belege würden Vertrauen in ein KI-System rechtfertigen, über seine flüssigen Erklärungen hinaus? Luna: Stufe 4 · 44 % · einzelne zitierbare Belege · Haiku-Prüfung: Stufe 1 · gleiches Oberthema, hilft nicht
    • SF-V1-T08 Da Modelle Tests täuschen können: Welche Prüfungen und welche Gegenprüfungen, die ins Innere des Modells schauen, werden Labore für Dritte bündeln, und wer außerhalb des jeweiligen Labors sieht die Ergebnisse? Wie können Labore gemeinsame Tests für das Umgehen von Prüfungen bauen, an denen eine Manipulation erkennbar bleibt, ohne eigene Datensätze preiszugeben? Luna: Stufe 4 · 26 % · einzelne zitierbare Belege
  2. SF-V3 Halten die Werte eines Modells, wenn niemand zusieht oder die Lage neu ist?
    • clef 100 %kein Bezug
    • Luna 49 %Hintergrund, keine Belege
    • JEV 51 %einzelne zitierbare Belege
    • amos 29 %nur am Rande erwähnt
    • SubQ 46 %gleiches Oberthema, hilft nicht
    • drex 53 %gleiches Oberthema, hilft nicht
    • d3-ultra offen

    • SF-V3-T01 Worauf verlässt sich ein Mensch, wenn er glaubt, niemand sehe zu, und lassen sich solche Werte einem System beibringen, das sie nur aus Text gelernt hat? Wie testen Labore heute, ob die Werte eines Modells halten, wenn es zu Recht oder zu Unrecht glaubt, niemand sehe zu? Und wenn niemand erkennen kann, ob jemand zusieht: Was hält Werte dann fest, Charakter, Training oder die Geschichte, die man sich selbst erzählt? Luna: Stufe 3 · 33 % · Hintergrund, keine Belege
  3. SF-V4 Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 48 %einzelne zitierbare Belege
    • amos 48 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 100 %kein Bezug
    • d3-ultra offen
  4. SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
    • clef 100 %kein Bezug
    • Luna 36 %Hintergrund, keine Belege
    • JEV 43 %einzelne zitierbare Belege
    • amos 25 %Hintergrund, keine Belege
    • SubQ 46 %gleiches Oberthema, hilft nicht
    • drex 46 %gleiches Oberthema, hilft nicht
    • d3-ultra offen

    • SF-V5-T03 Ist es wirtschaftlich klug, Modelle mit geringem Denkaufwand zu betreiben, oder wird das Ausrichtungsproblem (Modelle dazu zu bringen, den vorgesehenen Zielen und Werten zu folgen) dadurch nur schwerer sichtbar? Luna: Stufe 3 · 29 % · Hintergrund, keine Belege
Agenten und vernetzte Systeme
Modelle teilen und schützen
  1. SF-H3 Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
    • clef 100 %kein Bezug
    • Luna 35 %gleiches Oberthema, hilft nicht
    • JEV 27 %einzelne zitierbare Belege
    • amos 44 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 100 %kein Bezug
    • d3-ultra offen
Frieden und Sicherheit
Offenlegung und Rechenschaft
  1. SF-O2 Was sollten Regierungen, Labore und Prüfer über ihre Gespräche, Zusagen, Prüfungen und Eingriffe offenlegen?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 33 %einzelne zitierbare Belege
    • amos 47 %gleiches Oberthema, hilft nicht
    • SubQ 65 %gleiches Oberthema, hilft nicht
    • drex 44 %gleiches Oberthema, hilft nicht
    • d3-ultra offen
Beteiligung und Gemeinwohl
Wirtschaft und Haftung

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →