Power requirements of leading AI supercomputers have doubled every 13 months
Zusammenfassung
Kurz
Laut Epoch-AI-Bericht verdopple sich der geschätzte Leistungsbedarf führender KI-Supercomputer etwa alle 13 Monate; Colossus wird mit 280 MW gegenüber 13 MW für Summit im Jahr 2019 angegeben. Die zugehörige Tabelle kombiniert Betreiberangaben, Studien und Schätzungen zu bestehenden und geplanten Systemen, wobei viele GPU-Zahlen, Zeitpunkte und Projektumsetzungen unsicher oder indirekt hergeleitet sind.
Mittel
Die Notizen beschreiben einen Epoch-AI-Bericht, dessen zentrale Aussage lautet: Der geschätzte Leistungsbedarf führender KI-Supercomputer verdopple sich etwa alle 13 Monate. Als Beispiele nennt der Bericht Summit mit 13 MW im Januar 2019 und xAI Colossus mit 280 MW. Für die Analyse betrachtet Epoch 502 ab 2019 gestartete Systeme aus einem größeren Datensatz. Betreiberangaben werden, sofern vorhanden, genutzt; fehlende Spitzenwerte schätzt Epoch aus Chip-TDP, Chipzahl, System-Overhead und PUE. TOP500-Durchschnittswerte werden zur Schätzung des Spitzenbedarfs hochgerechnet.
Die Tabelle versammelt bestehende, geplante und stillgelegte Systeme sowie Trainingscluster. Sie nennt konkrete Hardwaregrößen für Arbeiten wie PaLM, Falcon 180B, BLOOM und CodeFuse-13B, aber auch für große Systeme von NVIDIA, Google, AMD und Cerebras. Die Belastbarkeit der Angaben variiert: Statusmarkierungen unterscheiden bestätigte von wahrscheinlichen oder unwahrscheinlichen Vorhaben; zahlreiche GPU-Zahlen, Betriebsdaten und Leistungswerte sind abgeleitet oder geschätzt. Bei anonymisierten chinesischen Einträgen fehlen oft Identität und Hardwaredetails. Auch geplante Kapazitäten belegen nicht, dass Hardware installiert wurde oder einen einzelnen Cluster bildet. Der Bericht weist somit auf stark wachsende Anforderungen hin, während viele Tabellenwerte mit ausdrücklicher Unsicherheit zu lesen sind.
Ausführlich lesen
Die Notizen fassen einen Epoch-AI-Bericht über den Strombedarf großer KI-Supercomputer und eine umfangreiche Systemtabelle zusammen. Die zentrale Aussage des Berichts lautet, dass sich die geschätzte Leistungsanforderung führender KI-Supercomputer etwa alle 13 Monate verdoppelt habe. Als Größenvergleich nennt er Summit mit 13 MW im Januar 2019 und xAI Colossus mit 280 MW. Der Bericht führt außerdem an, Colossus nutze mobile Generatoren, weil das örtliche Stromnetz die nötige Kapazität nicht bereitstelle. Als mögliche künftige Lösung erwähnt er Training über geografisch verteilte Supercomputer und verweist auf Gemini 1.0.
Epochs Datensatz umfasst laut Notizen 728 Supercomputer mit dedizierten KI-Beschleunigern aus dem Zeitraum 2010 bis heute. Geschätzt deckt er 10–20 Prozent der bis 2025 erzeugten KI-Chip-Leistung ab. Für die Analyse der Leistungsentwicklung betrachtet Epoch 502 Systeme, die ab 2019 in Betrieb gingen. Wo Betreiberwerte fehlen, schätzt Epoch den theoretischen Spitzenbedarf anhand von Chip-TDP, Chipzahl, einem pauschalen System-Overhead und PUE. Der Overhead-Faktor von 1,82 beruht auf NVIDIA-DGX-H100-Spezifikationen. Die PUE-Werte stammen aus einer Studie von Shehabi et al. (2024), angepasst um einen angenommenen Vorteil spezialisierter Rechenzentren. Durchschnittswerte aus TOP500-Benchmarks werden mit 1,5 multipliziert, um den Spitzenbedarf abzuschätzen. Für manche chinesischen Chips und kundenspezifische Beschleuniger fehlen öffentliche TDP-Angaben; solche Systeme bleiben deshalb teilweise unberücksichtigt.
Die Tabelle dokumentiert bestehende, geplante und stillgelegte Systeme sowie Trainingscluster aus Forschungsarbeiten. Sie nennt unter anderem große NVIDIA-, AMD-, Google-TPU- und Cerebras-Systeme. Für einzelne Trainings werden konkrete Größen angegeben: etwa 6.144 TPU-v4-Chips für PaLM, bis zu 4.096 A100-GPUs für Falcon 180B und 512 A100-GPUs für BLOOM oder CodeFuse-13B. Weitere Beispiele betreffen GPT-4, Gemini, Movie Gen und Gemma 2. Solche Angaben beschreiben teils die für ein Training genutzte Hardware, nicht zwingend einen dauerhaft zusammenhängenden Cluster.
Die Evidenz ist uneinheitlich. Einträge tragen Statusangaben wie „Confirmed“, „Likely“ oder „Unlikely“. Manche Chipzahlen werden aus Knotenangaben, TOP500-Daten oder vagen Beschreibungen wie „Tausende“ errechnet. Betriebsdaten können auf Ankündigungen, Trainingszeiträumen oder indirekten Quellen beruhen. Bei geplanten Vorhaben sind Kapazität, Hardwaretyp, Standort und tatsächliche Umsetzung häufig nicht gesichert. So gelten mehrere Condor-Galaxy-Anlagen als geplant, während offenbleibt, ob CS-2 oder CS-3 eingesetzt wird; die angekündigten 36 ExaFLOPS beziehen sich auf das Netzwerk aus neun Systemen. Auch Schätzungen zu sehr großen Campusprojekten und Stargate Abilene sind laut Tabelle besonders unsicher.
Die Notizen warnen außerdem vor Doppelzählungen und falscher Genauigkeit: Anonymisierte chinesische Einträge lassen sich oft nicht bestimmten Maschinen zuordnen und können Wiederholungen oder Varianten darstellen. Geplante Kapazität ist nicht gleich installierte Hardware, und ähnliche Systemnamen können verschiedene Cluster bezeichnen. Der Datensatz ist daher eine Zusammenstellung dokumentierter Angaben und Schätzungen; viele Einzelwerte sind ausdrücklich keine bestätigten Messungen oder vollständigen Bestandsnachweise.
Gegengeprüft von Claude Haiku 5.5: kleine Mängel
Die Einordnung bezieht sich auf die drei genannten Sammelfragen; Teilfragen wurden nicht angegeben, daher gibt es dazu keine Bewertungen.
Im Bericht, aber nicht in der Zusammenfassung
- Colossus wird mit mobilen Generatoren betrieben, weil das lokale Netz nicht genug Leistung liefert
- Ausblick, dass Spitzenmodelle künftig über geografisch verteilte Supercomputer trainiert werden könnten
- Der Datensatz umfasst 728 Supercomputer, von denen Epoch schätzt, dass sie rund 10–20 % der bis 2025 produzierten KI-Chipleistung ausmachen
Wie die Modelle den Bericht einordnen
Ansicht
Filter
Vorfälle melden
- SF-M4 Wie kommen Meldungen von Laboren, Betreibern und Nutzern schnell und geschützt zu den Stellen, die handeln müssen, auch über Grenzen hinweg?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 44 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Fähigkeiten messen
- SF-F1 Wie misst man gefährliche Fähigkeiten eines Modells, vor allem im Cyberbereich, mit gemeinsam anerkannten, wiederholbaren Tests, die keine Sprache, Kultur oder Seite bevorzugen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 45 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-F2 Wenn ein Staat ein Modell als Beleg für eine überschrittene Schwelle nennt oder ein Risiko an der Herkunft eines Modells festmacht: Wie wird das überprüfbar?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 39 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 38 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-F4 Für welche Modelle, Entwickler und Einsätze gelten Prüfregeln, und wann muss neu geprüft werden?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 45 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 52 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-F5 Wie gehen Staaten gemeinsam gegen KI-gestützte Cyberangriffe vor und verhindern Eskalation zwischen autonomen Systemen, ohne die Verteidigung zu behindern?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 48 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Unabhängig prüfen
- SF-P1 Unter welchen Bedingungen lassen Staaten und Labore sich gegenseitig prüfen: mit welchem Zugang, welchen Daten und welchen öffentlichen Ergebnissen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 36 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-P3 Woran erkennt man, dass ein Labor sich ehrlich selbst überwacht und dass seine Prüfungen gültig sind?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 44 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 38 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-P4 Wie lässt sich die Größe von Trainingsläufen überprüfen, ohne Modelldetails offenzulegen?
- clef 24 %Hintergrund, keine Belege
- Luna 44 %Hintergrund, keine Belege
- JEV
- amos 32 %einzelne zitierbare Belege
- SubQ 100 %kein Bezug
- drex 24 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-P5 Wie überprüft man, ob Zusagen zwischen Staaten eingehalten werden, auch über Jahre und Regierungswechsel hinweg?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 48 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 36 %gleiches Oberthema, hilft nicht
- d3-ultra
Tempo und Grenzen
- SF-T1 Welche messbaren Schwellen sollen eine Pause auslösen, und wer prüft sie?
- clef 100 %kein Bezug
- Luna 53 %Hintergrund, keine Belege
- JEV
- amos 28 %Hintergrund, keine Belege
- SubQ 100 %kein Bezug
- drex 40 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-T2 Woran erkennen andere, dass ein Labor wirklich bremst?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 30 %Hintergrund, keine Belege
- SubQ 100 %kein Bezug
- drex 37 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-T3 Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
- clef 100 %kein Bezug
- Luna 27 %Hintergrund, keine Belege
- JEV
- amos 40 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 54 %gleiches Oberthema, hilft nicht
- d3-ultra
Vertrauen in Modelle
- SF-V3 Halten die Werte eines Modells, wenn niemand zusieht oder die Lage neu ist?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 48 %gleiches Oberthema, hilft nicht
- d3-ultra
- SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
- clef 100 %kein Bezug
- Luna 60 %Hintergrund, keine Belege
- JEV
- amos 43 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 47 %gleiches Oberthema, hilft nicht
- d3-ultra
- Haiku-Prüfung gleiches Oberthema, hilft nicht
Agenten und vernetzte Systeme
- SF-A3 Welche Gefahren entstehen, wenn viele KI-Systeme zusammenwirken oder dieselbe Infrastruktur teilen?
- clef 100 %kein Bezug
- Luna 36 %Hintergrund, keine Belege
- JEV
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Modelle teilen und schützen
- SF-H3 Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
- clef 100 %kein Bezug
- Luna 34 %einzelne zitierbare Belege
- JEV
- amos 50 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- Haiku-Prüfung kein Bezug
- SF-H4 Was geschieht mit Modellen und Sicherheitspflichten, wenn ein Labor verkauft, aufgelöst oder ein Modell stillgelegt wird?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 43 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-H5 Wann sind Chip- und Exportkontrollen eine Sicherheitsmaßnahme, und wann ein dauerhafter Vorteil?
- clef 100 %kein Bezug
- Luna 53 %Hintergrund, keine Belege
- JEV
- amos 27 %Hintergrund, keine Belege
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Frieden und Sicherheit
- SF-K2 Wie weit gelten KI-Abkommen für Verbündete und Geheimdienste, und wie verhalten sie sich zu bestehenden Rüstungskontrollverträgen und -regimen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 44 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 39 %gleiches Oberthema, hilft nicht
- d3-ultra
Offenlegung und Rechenschaft
- SF-O2 Was sollten Regierungen, Labore und Prüfer über ihre Gespräche, Zusagen, Prüfungen und Eingriffe offenlegen?
- clef 100 %kein Bezug
- Luna 38 %Hintergrund, keine Belege
- JEV
- amos 53 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Beteiligung und Gemeinwohl
- SF-E1 Welche echte Stimme bekommen weitere Staaten, kleine Labore, Hochschulen und Zivilgesellschaft bei den Regeln für KI?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 40 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-E2 In welchem Rahmen sollen Staaten KI regeln, und wo liegt eine gemeinsame Untergrenze?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 39 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-E3 Welche Stellen sind in einem Staat für KI-Sicherheit und Prüfungen zuständig, und was davon gibt es schon?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 35 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- SF-E4 Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
- clef 100 %kein Bezug
- Luna 58 %Hintergrund, keine Belege
- JEV
- amos 32 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
- Haiku-Prüfung gleiches Oberthema, hilft nicht
- SF-E5 Welche Mitsprache haben die Menschen, die mit KI leben, bei Tempo und Grenzen, und welche Entscheidungen müssen bei ihnen bleiben?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 50 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Wirtschaft und Haftung
- SF-W2 Wie wirken sich Wettbewerbsrecht und öffentliche Beschaffung auf die KI-Sicherheit aus?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV
- amos 37 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra
Weitere Berichte zu diesen Fragen
- Wie lässt sich die Größe von Trainingsläufen überprüfen, ohne Modelldetails offenzulegen?
- Welche messbaren Schwellen sollen eine Pause auslösen, und wer prüft sie?
- Woran erkennen andere, dass ein Labor wirklich bremst?
- Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
- Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
- Welche Gefahren entstehen, wenn viele KI-Systeme zusammenwirken oder dieselbe Infrastruktur teilen?
- Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
- Wann sind Chip- und Exportkontrollen eine Sicherheitsmaßnahme, und wann ein dauerhafter Vorteil?
- Was sollten Regierungen, Labore und Prüfer über ihre Gespräche, Zusagen, Prüfungen und Eingriffe offenlegen?
- Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
- Alle Berichte im Archiv