Zum Inhalt
AMANi DUNiA research
DE

Die Fragen auf dieser Website haben KI-Sprachmodelle gestellt; auch die Erklärtexte und Übersetzungen stammen von KI-Modellen. Wer was geprüft hat, steht jeweils dabei. → Über die Fragen

← Alle bewerteten Quellen
frank-andrade.medium.com9. Februar 2024 · Q009981

Gemini Ultra vs GPT-4: Did Google Beat GPT-4 This Time?

frank-andrade.medium.com · Originalbericht öffnen ↗

Zusammenfassung

Kurz

Andrade sieht Gemini Ultra in seinen Versuchen bei Geschwindigkeit, Google-Apps und realistischen Bildern im Vorteil, GPT‑4 dagegen beim Schlussfolgern und bei der Codegenerierung. Sein Vergleich beruht auf wenigen persönlichen Tests; Datei- und Kreativitätstests fehlen, und die Bildbewertung ist teilweise subjektiv.

Mittel

Frank Andrade vergleicht Gemini Ultra mit GPT‑4 anhand eigener Versuche zu Geschwindigkeit, Google-Diensten, Bildgenerierung, Schlussfolgern und Code. Gemini sei in den meisten Tests schneller und könne für Reiseanfragen direkt Google Flights und Hotels nutzen. Seine Bilder wirkten laut Andrade besonders realistisch; für ausgearbeitete Bildideen und detaillierte Prompts bevorzugt er jedoch DALL‑E 3 oder Midjourney. Die Bildpräferenz sei teilweise subjektiv. Bei Versuchen in Europa habe Gemini keine Bilder erzeugt; mit einem VPN-Standort in den USA habe es funktioniert.

Bei zwei Rätseln fand Gemini die richtigen Lösungen erst in späteren Entwürfen. GPT‑4 löste eines direkt und das andere beim zweiten Versuch. Andrade sieht GPT‑4 deshalb beim Schlussfolgern vorn. Beide Modelle könnten Code erklären, doch Gemini habe bei mehreren Skripten die Generierung abgebrochen; ein Snake-Spiel habe es dagegen erstellt und den Export nach Colab angeboten. Daraus leitet Andrade einen Vorteil für GPT‑4 beim Programmieren ab. Der Vergleich ist begrenzt: Er beruht auf persönlichen Tests mit nur zwei Denkaufgaben. Datei- und Kreativitätstests ließ der Autor aus; Gemini habe damals außer Bildern keine Dateien unterstützt.

Ausführlich lesen

Frank Andrade vergleicht in seinem Beitrag Gemini Ultra, das damals über Gemini Advanced verfügbar war, mit GPT‑4. Er untersucht Geschwindigkeit, die Anbindung an Google-Dienste, Bildgenerierung, logisches Schlussfolgern und Programmiererzeugung. Sein Fazit fällt gemischt aus: Gemini sei in den meisten von ihm ausprobierten Aufgaben schneller und könne Google Flights und Hotels direkt einbeziehen; bei den gezeigten Denk- und Programmieraufgaben schneide GPT‑4 besser ab.

Für einen Reiseplan fragt Andrade nach Flügen von Kalifornien nach New York und Hotels nahe dem Central Park. Laut seinem Bericht ruft Gemini dafür automatisch Informationen aus den Google-Apps ab. GPT‑4 biete diese Verbindung standardmäßig nicht, könne aber über Plugins oder speziell eingerichtete Aktionen eine ähnliche Funktion erhalten.

Bei der Bildgenerierung beschreibt Andrade Geminis Bilder als auffallend realistisch, fast wie professionelle Stockfotos. Für einfache Prompts und realistische Motive hält er Gemini für geeignet. DALL‑E 3 schneide seiner Einschätzung nach besser ab, wenn ein prägnanterer, ausgearbeiteter Bildstil oder Hilfe beim Formulieren eines detaillierten Prompts gefragt sei; auch Midjourney nennt er als mögliche Alternative. Die Bildauswahl bewertet er teilweise ausdrücklich nach persönlichem Geschmack. Bei seinen Versuchen in Europa habe Gemini zudem keine Bilder erzeugt; erst mit einem VPN-Standort in den USA sei es gelungen.

Das Schlussfolgern vergleicht er anhand zweier Rätsel. Bei einer Zahlenfolge habe Gemini zunächst eine falsche Antwort geliefert, in einem späteren Entwurf aber die richtige; GPT‑4 sei langsamer gewesen und habe beim ersten Versuch richtig geantwortet. Beim zweiten Rätsel seien Geminis erste Entwürfe falsch gewesen, bevor ein weiterer Entwurf zur Lösung führte. GPT‑4 habe zunächst ebenfalls danebengelegen, beim zweiten Versuch jedoch richtig geantwortet. Aus diesen Beispielen folgert Andrade, GPT‑4 sei beim logischen Schlussfolgern besser.

Beim Programmieren berichtet er, beide Modelle könnten Code erklären. Gemini habe ein Snake-Spiel erzeugt, das sich mit einem Klick nach Google Colab exportieren ließ. Bei anderen Skripten sei die Ausgabe in seinen Versuchen dagegen abgebrochen. Er erwähnt, dass auch einige YouTuber ähnliche Schwierigkeiten beschrieben hätten, und bewertet GPT‑4 deshalb als zuverlässiger bei der Codegenerierung.

Die Vergleiche beruhen auf Andrades eigenen, begrenzten Versuchen und zwei Aufgaben zum Schlussfolgern; der Beitrag belegt damit keinen allgemeinen Leistungsvergleich. Er lässt Dateiuploads wie PDFs und Datensätze aus, weil Gemini laut Artikel zu diesem Zeitpunkt außer Bildern keine Dateien unterstützte. Einen Kreativitätstest führt Andrade ebenfalls nicht durch, da er ihn für subjektiv hält.

Luna (gpt-6-luna, Denkstufe high), ChatGPT-Abo · 2026-11-19

Gegengeprüft von Claude Haiku 5.5: kleine Mängel

Luna hat nur drei Sammelfragen eingeordnet und keine Teilfragen angegeben. Die Einordnung wurde deshalb nur für diese drei Kennungen vorgenommen; die Anteilswerte (50, 47, 43 Prozent) wurden nicht übernommen. Die Zusammenfassung wurde am mittleren Text geprüft, der kurze Text ist inhaltlich ebenfalls treu.

Im Bericht, aber nicht in der Zusammenfassung

  • Gemini verbessert Prompts nicht selbst, DALL-E 3 dagegen schon, was Andrade als Vorteil von DALL-E 3 für Einsteiger wertet
  • Gemini Ultra hatte zuvor in Benchmarks GPT-4 geschlagen; Andrade testet, ob das im Alltag hält

Automatische Gegenprüfung mit dem vollständigen Originaltext (Batch, 20.11.2026). Ungeprüft durch Menschen.

Wie die Modelle den Bericht einordnen

Je Sammelfrage und Teilfrage die häufigste Stufe (0 bis 7) und ihr Anteil, geordnet nach Fragenfamilie (Farbe) oder nach den Wegen des Atlas. Ab Stufe 4 liefert der Bericht Belege, Stufe 3 ist Hintergrund (gestrichelt). Was die Stufen bedeuten, steht in der Legende.

Ansicht
Filter
Modelle 8 von 8
Angezeigte Modelle
Vorfälle melden
Fähigkeiten messen
Unabhängig prüfen
Tempo und Grenzen
Vertrauen in Modelle
Agenten und vernetzte Systeme
Modelle teilen und schützen
Offenlegung und Rechenschaft
Beteiligung und Gemeinwohl
Wirtschaft und Haftung
Information und Öffentlichkeit

Weitere Berichte zu diesen Fragen

Eigene Zusammenfassungen und Einordnungen von AMANi DUNiA. Fremde Originalberichte behalten ihre eigenen Rechte.

Sprache und Prüfstand

Haupttext: DE. Prüfvermerke gelten nur für den jeweils genannten Inhalt.

Vorhandene Prüfvermerke stehen am jeweiligen Inhalt.

Sprachabdeckung und Datenstand ansehen →