Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
openai14. Dezember 2021 · Q009039

Customizing GPT-3 for your application

openai.com · Originalbericht öffnen ↗

Zusammenfassung

Kurz

Der Bericht wirbt für das Fine-Tuning von GPT‑3 mit Anwendungsdaten und führt dazu Leistungsverbesserungen aus OpenAI- und Kundenbeispielen an, etwa höhere Genauigkeit und zuverlässigere Ausgaben. Eine Kurzanleitung zeigt das Training und die API-Nutzung; die Messmethoden und Vergleichsbedingungen der genannten Kennzahlen bleiben weitgehend offen.

Mittel

Der Bericht beschreibt Fine-Tuning als Weg, GPT‑3 mit eigenen oder fortlaufend ergänzten Daten auf eine bestimmte Anwendung zuzuschneiden. OpenAI zufolge kann das die Zuverlässigkeit und Genauigkeit erhöhen sowie kürzere Eingaben, geringere Kosten und schnellere Antworten ermöglichen. Schon weniger als 100 Beispiele könnten Vorteile bringen; bei einer Mathematikaufgabe nennt OpenAI eine zwei- bis vierfach höhere Genauigkeit gegenüber Prompt-Design.

Als Beispiele führt der Bericht Kundenangaben an: Keeper Tax steigerte laut Text die Genauigkeit von 85 auf 93 Prozent, Viable die Zusammenfassungsgenauigkeit von 66 auf 90 Prozent und Sana Labs die Leistung bei der Erzeugung von Lerninhalten um 60 Prozent. Bei Elicit verbesserte sich die Bewertung gegenüber Prompt-Design je nach Messgröße um 17 bis 33 Prozent. Eine Anleitung zeigt das Training eines Ada-Modells für Spanisch-Englisch-Übersetzungen über das Kommandozeilenwerkzeug und die Nutzung über die API.

Die Kennzahlen sind berichtete Ergebnisse von OpenAI und Kunden. Angaben zu Messverfahren, Vergleichsbedingungen und Unsicherheiten fehlen weitgehend; daher lässt sich ihre Übertragbarkeit nicht beurteilen.

Ausführlich lesen

Der Bericht stellt das Fine-Tuning von GPT‑3 mit anwendungsspezifischen Daten als Möglichkeit dar, die Leistung für konkrete Aufgaben zu verbessern. OpenAI zufolge können Entwickler dafür vorhandene Datensätze unterschiedlicher Größe und Struktur nutzen oder fortlaufend Beispiele aus Nutzerfeedback ergänzen. Das Unternehmen behauptet, angepasste Modelle lieferten verlässlichere und konsistentere Ergebnisse, benötigten kürzere Eingaben und könnten dadurch günstiger und schneller laufen. Das Modell werde über einen einzelnen Befehl im OpenAI-Kommandozeilenwerkzeug trainiert und anschließend über die API verwendet.

Als Begründung führt der Bericht an, dass bereits weniger als 100 Beispiele Vorteile bringen könnten und sich die Qualität bei jeder Verdoppelung der Beispieldaten tendenziell linear verbessere. Für eine anspruchsvolle Mathematik-Aufgabe berichtet OpenAI von einer zwei- bis vierfach höheren Genauigkeit gegenüber Prompt-Design. Außerdem nennt der Text Kundenergebnisse: Ein Kunde habe korrekte Ausgaben von 83 auf 95 Prozent gesteigert; ein anderer die Fehlerquote durch wöchentlich ergänzte Daten um die Hälfte gesenkt. Ein weiterer Kunde habe unzuverlässige Ausgaben von 17 auf 5 Prozent reduziert.

Vier Anwendungsbeispiele veranschaulichen die behaupteten Verbesserungen. Keeper Tax ergänze wöchentlich ungefähr 500 Trainingsbeispiele; laut Bericht stieg die Genauigkeit damit von 85 auf 93 Prozent, ungefähr um einen Prozentpunkt pro Woche. Viable habe die Genauigkeit beim Zusammenfassen von Kundenfeedback von 66 auf 90 Prozent erhöht. Sana Labs berichtet von einer Verbesserung um 60 Prozent bei der Erzeugung von Fragen und Lerninhalten. Bei Elicit habe ein angepasstes Modell das Prompt-Design in drei Messgrößen übertroffen: Verständlichkeit um 24 Prozent, Genauigkeit um 17 Prozent und Gesamtbewertung um 33 Prozent.

Das beschriebene Vorgehen umfasst die Installation des Python-basierten OpenAI-Clients, das Setzen eines API-Schlüssels, das Fine-Tuning des Ada-Modells mit einem Beispieldatensatz für Übersetzungen aus dem Spanischen ins Englische und eine anschließende API-Abfrage des angepassten Modells. Der Text sagt, GPT‑3 könne für Aufgaben wie Textgenerierung, Zusammenfassung und Klassifikation angepasst werden.

Die Zahlen und Vorteile sind Aussagen von OpenAI beziehungsweise der im Bericht genannten Kunden. Der Bericht erläutert die Messmethoden, Datensatzaufteilungen, Vergleichsbedingungen und Unsicherheiten der einzelnen Ergebnisse nicht ausreichend, um die Werte unabhängig einzuordnen. Die Beispiele belegen daher, was die Beteiligten berichten, erlauben aber keine allgemeine Aussage über die zu erwartende Verbesserung in anderen Anwendungen. Die zusätzlichen Bildbeschriftungen am Ende verweisen auf Abbildungen, darunter auch zu anderen Themen; der Text liefert dazu keine auswertbaren Ergebnisse.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Geprüft wurde die mittlere Zusammenfassung, die kurze Fassung wurde nicht gesondert bewertet. Lunas Aussage, Messverfahren und Vergleichsbedingungen fehlten weitgehend, ist zu pauschal: Der Bericht nennt den Testaufbau mit 8.000 Beispielen und 10 Completions und die Kundenbeispiele, bleibt aber bei Methodik und Unsicherheiten knapp. Die Abbildungsunterschriften zu Themen wie Pastellkreiden und GPT Store gehören nicht zum Inhalt des Fine-Tuning-Textes und wurden nicht berücksichtigt.

Im Bericht, aber nicht in der Zusammenfassung

  • Kundenbeispiel mit Anstieg korrekter Ausgaben von 83 auf 95 Prozent
  • Kundenbeispiel mit 50 Prozent weniger Fehlerquoten durch wöchentlich neue Daten
  • Reduktion unzuverlässiger Ausgaben von 17 auf 5 Prozent
  • Qualität steigt laut OpenAI linear mit jeder Verdopplung der Beispielzahl
  • Vergleich von Curie und Davinci mit 8.000 Beispielen und 10 Completions bei Grade-School-Math-Aufgaben
  • Start mit einem einzigen Befehl; das Modell ist danach sofort in der API verfügbar

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Fähigkeiten messen
Unabhängig prüfen
Tempo und Grenzen
  1. SF-T1 Welche messbaren Schwellen sollen eine Pause auslösen, und wer prüft sie?
    • clef 100 %kein Bezug
    • Luna 27 %einzelne zitierbare Belege
    • JEV 100 %kein Bezug
    • amos 100 %kein Bezug
    • SubQ 100 %kein Bezug
    • drex 62 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht

    • SF-T1-T05 Welche messbaren Vergleichswerte würden zeigen, dass die Ausrichtung der Modelle eines Labors an den vorgesehenen Zielen und Werten schneller vorankommt, als ihre Fähigkeiten wachsen, über das Fehlen öffentlicher Fehlschläge hinaus? Luna: Stufe 3 · 31 % · Hintergrund, keine Belege · Haiku-Prüfung: Stufe 1 · gleiches Oberthema, hilft nicht
  2. SF-T3 Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
    • clef 100 %kein Bezug
    • Luna 22 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 53 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 63 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
Vertrauen in Modelle
  1. SF-V4 Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
    • clef 100 %kein Bezug
    • Luna 100 %kein Bezug
    • JEV 39 %einzelne zitierbare Belege
    • amos 100 %kein Bezug
    • SubQ 100 %kein Bezug
    • drex 100 %kein Bezug
    • d3-ultra 100 %kein Bezug
  2. SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
    • clef 100 %kein Bezug
    • Luna 40 %Hintergrund, keine Belege
    • JEV 32 %einzelne zitierbare Belege
    • amos 37 %gleiches Oberthema, hilft nicht
    • SubQ 50 %gleiches Oberthema, hilft nicht
    • drex 51 %gleiches Oberthema, hilft nicht
    • d3-ultra 50 %gleiches Oberthema, hilft nicht

    • SF-V5-T02 Würde man lieber einem großen, überwachten Modell vertrauen oder vielen kleinen, nicht überwachten? Luna: Stufe 3 · 31 % · Hintergrund, keine Belege · Haiku-Prüfung: Stufe 0 · kein Bezug
Agenten und vernetzte Systeme
Modelle teilen und schützen
  1. SF-H1 Wo endet die erlaubte Nutzung fremder Modellausgaben, und wo beginnt unerlaubte Destillation, also das Trainieren eines eigenen Modells mit diesen Ausgaben?
    • clef 100 %kein Bezug
    • Luna 38 %Hintergrund, keine Belege
    • JEV 100 %kein Bezug
    • amos 40 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 48 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
  2. SF-H3 Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
    • clef 100 %kein Bezug
    • Luna 62 %einzelne zitierbare Belege
    • JEV 31 %einzelne zitierbare Belege
    • amos 30 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 46 %gleiches Oberthema, hilft nicht
    • d3-ultra 58 %gleiches Oberthema, hilft nicht
    • Haiku-Prüfung nur am Rande erwähnt

Beteiligung und Gemeinwohl
  1. SF-E4 Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
    • clef 100 %kein Bezug
    • Luna 60 %Hintergrund, keine Belege
    • JEV 33 %einzelne zitierbare Belege
    • amos 43 %gleiches Oberthema, hilft nicht
    • SubQ 52 %gleiches Oberthema, hilft nicht
    • drex 43 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht
Information und Öffentlichkeit

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →