Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
frank-andrade.medium.com12. Dezember 2023 · Q009994

A Hands-On Comparison: Gemini Pro vs GPT-3.5

frank-andrade.medium.com · Originalbericht öffnen ↗

Zusammenfassung

Kurz

Frank Andrade findet Gemini Pro und GPT‑3.5 bei allgemeinen Aufgaben ähnlich gut, sieht GPT‑3.5 aber bei seinen Denk- und Programmieraufgaben leicht bis deutlich vorn. Bard punktet für ihn mit Google-App-Verbindungen; die Einschätzung beruht auf wenigen Einzeltests und ist nicht umfassend.

Mittel

Frank Andrade vergleicht Gemini Pro in Googles Bard mit GPT‑3.5 bei Schreib- und Assistenzaufgaben, drei Denkaufgaben sowie Code-Erklärung und -Erzeugung. Bei allgemeinen Anfragen sieht er ähnliche Leistungen. Bard bietet in seinem Test durch Verbindungen zu Google-Diensten Zugriff auf Reiseinformationen und persönliche Apps; den humorvollen Text von Gemini Pro bewertet Andrade etwas höher.

Bei den Denkaufgaben lösen beide eine einfache Frage. GPT‑3.5 bewältigt eine Zahlenfolge, an der Gemini Pro scheitert; bei einer schwierigeren Buchstabenfolge scheitern beide. Der Autor hält GPT‑3.5 deshalb für leicht überlegen, betont aber, dass weitere Tests nötig seien. Beide erklären ein Python-Skript gut. Bei der Bitte um Code zum E-Mail-Versand verweigert Bard zunächst teils die Ausgabe und liefert nach geänderten Prompts laut Andrade nicht alle gewünschten Details. GPT‑3.5 erfüllt die Bitte; in diesem Bereich sieht er es vorn.

Insgesamt bewertet Andrade die Modelle als ähnlich leistungsfähig und würde je nach Bedarf GPT‑3.5 zum Programmieren oder Bard für Google-App-Verbindungen wählen. Seine Schlüsse beruhen auf wenigen Beispielen und persönlicher Einschätzung, nicht auf einem umfassenden Test.

Ausführlich lesen

Der Autor Frank Andrade vergleicht Gemini Pro, damals über Googles Bard verfügbar, mit GPT‑3.5. Er prüft beide bei allgemeinen Schreib- und Assistenzaufgaben, bei Denkaufgaben und beim Erklären beziehungsweise Erzeugen von Python-Code. Gemini Ultra ist laut Artikel zu diesem Zeitpunkt noch nicht verfügbar und gehört nicht zum Vergleich.

Bei allgemeinen Anfragen lässt Andrade beide Systeme eine Reise planen, eine Rolle übernehmen und einen humorvollen Blogbeitrag verfassen. Er berichtet von insgesamt ähnlichen Leistungen. Bard könne durch Verbindungen zu Google-Diensten wie Flights und Hotels aktuelle Reiseinformationen abrufen und über Gmail oder Drive Antworten persönlicher gestalten; GPT‑3.5 habe in seinem Vergleich weder Internetzugriff noch solche App-Verbindungen. Die humorvollen Texte beider Systeme hätten ihm gefallen, der von Gemini Pro etwas besser. Für diese erste Runde würde er deshalb Gemini Pro wählen.

Die Denkfähigkeiten prüft der Autor anhand von drei Aufgaben. Eine einfache Aufgabe zu Preisverhältnissen lösen beide. Bei einer Zahlenfolge scheitert Gemini Pro, während GPT‑3.5 nach seiner Darstellung die richtige Fortsetzung findet. Eine weitere, schwierigere Buchstabenfolge lösen beide nicht; laut Andrade geben sie dieselbe falsche Antwort. Er merkt an, dass GPT‑4 die richtige Lösung gefunden habe. Aus diesen wenigen Beispielen schließt er vorsichtig, GPT‑3.5 sei beim Schlussfolgern etwas besser, betont aber, dass mehr Tests nötig wären. Zusätzlich verweist er auf eine Google-Studie, der zufolge Gemini Pro bei Grundschulmathematik besser als GPT‑3.5 und bei einem breiteren Mathematikvergleich ungefähr auf dessen Niveau liege.

Beim Programmieren erklären beide ein vorgegebenes Python-Skript zur Webseitenauswertung verständlich. Bei einer Bitte, Code zum Versenden einer E-Mail zu schreiben, verweigere Bard die Ausgabe zunächst gelegentlich. Andrade habe die Eingabeaufforderung anpassen müssen; der schließlich erzeugte Code habe die gewünschten Angaben zu Betreff und Nachricht nicht vollständig übernommen. GPT‑3.5 habe die ursprüngliche Bitte dagegen umgesetzt. In diesem Teil sieht der Autor GPT‑3.5 klar vorn.

Sein Gesamturteil lautet, die Modelle lägen insgesamt auf ähnlichem Niveau, ihre Unterschiede ergäben sich auch aus den Funktionen und Einschränkungen von Bard und ChatGPT. Als Programmierer würde er GPT‑3.5 bevorzugen, weil ChatGPT nach seiner Erfahrung kaum die Codeausgabe verweigere; für den Zugang zu Google-Apps würde er Bard nutzen. Er sagt außerdem, beide seien GPT‑4 deutlich unterlegen, räumt aber dessen höheren Preis als wesentlichen Nachteil ein. Die Bewertung beruht auf den im Artikel beschriebenen Einzelaufgaben und persönlichen Eindrücken; sie ist kein umfassender oder systematischer Leistungstest.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Luna gibt die Inhalte des Berichts im Wesentlichen treu wieder; es fehlen vor allem Andrades Verweis auf eigene GPT-4-Nutzung und der Kontext des Google-Papers. Die Einordnung der Sammelfragen erfolgt unabhängig von Lunas Stufen und stützt sich nur auf den Bericht.

Im Bericht, aber nicht in der Zusammenfassung

  • Andrade nutzt selbst GPT-4 und hält es für deutlich überlegen; er würde Gemini Pro und GPT-3.5 deshalb nicht verwenden.
  • Gemini Ultra war noch nicht verfügbar; Andrade kündigt einen späteren Vergleich an.
  • Der Bericht bezieht sich auf Googles eigene Paper-Angaben, wonach Gemini Pro bei Grundschulmathematik überlegen sein soll; Andrades Tests bestätigen das nicht.

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Vorfälle melden
Fähigkeiten messen
Unabhängig prüfen
Tempo und Grenzen
Vertrauen in Modelle
Agenten und vernetzte Systeme
Modelle teilen und schützen
Offenlegung und Rechenschaft
Beteiligung und Gemeinwohl
  1. SF-E4 Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
    • clef 100 %kein Bezug
    • Luna 36 %Hintergrund, keine Belege
    • JEV offen
    • amos 47 %gleiches Oberthema, hilft nicht
    • SubQ 100 %kein Bezug
    • drex 50 %gleiches Oberthema, hilft nicht
    • d3-ultra 100 %kein Bezug
    • Haiku-Prüfung gleiches Oberthema, hilft nicht
Wirtschaft und Haftung
Information und Öffentlichkeit

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →