How AI-Generated 3D Models are Transforming 3D Pipelines
Zusammenfassung
Kurz
Der vollständige Bericht beschreibt KI-Werkzeuge für die Umwandlung von Bildern in 3D-Modelle, virtuelle Figuren, Bewegungs- und Gesichtsanimationen sowie Materialien und Umgebungen. NVIDIA stellt OpenUSD als verbindende Grundlage heraus und nennt schnellere Abläufe und niedrigere Einstiegshürden als mögliche Vorteile. Die Beispiele sind überwiegend Produkt- und Partnerangaben; unabhängige Tests oder bezifferte Effekte enthält der Bericht nicht.
Mittel
Der vollständige NVIDIA-Omniverse-Bericht stellt Beispiele dafür vor, wie generative KI 3D-Arbeitsschritte unterstützen soll. OpenUSD wird als gemeinsames Austauschformat hervorgehoben, das Werkzeuge und Plattformen verbinden soll. Alpha3D kann laut Artikel Produktbilder in 3D-Modelle umwandeln; damals war öffentlich zunächst die Kategorie Schuhe verfügbar. Bubbles von BOOM Interactive erstellt bearbeitbare Raumszenen aus Grundrissen oder LiDAR- und AR-Erfassungen und ermöglicht den Export nach OpenUSD.
Weitere Beispiele sind Convai für dialogfähige virtuelle Figuren, Move.ai beziehungsweise die damals im frühen Zugang befindliche iPhone-App Move One für Bewegungsanimationen sowie Audio2Face, das Gesichtsanimationen aus Sprachaufnahmen erzeugen soll. Der Beitrag nennt außerdem KI-generierte Materialien und Texturen sowie HDRi-Umgebungen von NVIDIA-Forschenden, Shutterstock und Autodesk.
Als Vorteile werden schnellere und günstigere Produktion, Zusammenarbeit und niedrigere Einstiegshürden angeführt. Der Bericht ist jedoch eine Produkt- und Partnerdarstellung: Er enthält keine unabhängigen Vergleiche, Messwerte zu Zeit- oder Kosteneinsparungen oder systematische Qualitätsprüfung. Zeitgebundene Einschränkungen wie die damalige Schuh-Kategorie bei Alpha3D und der frühe Zugang von Move One bleiben zu beachten.
Ausführlich lesen
Der vollständige Bericht von NVIDIA Omniverse beschreibt, wie generative KI verschiedene Arbeitsschritte in der 3D-Produktion unterstützen soll. Als gemeinsame Grundlage für solche Abläufe hebt er OpenUSD hervor: Das offene Austauschformat soll Inhalte zwischen unterschiedlichen Werkzeugen und Plattformen nutzbar machen. NVIDIA nennt ChatUSD als einen 2023 angekündigten KI-Assistenten für die Entwicklung mit OpenUSD.
Ein Schwerpunkt ist die Umwandlung zweidimensionaler Vorlagen in 3D-Inhalte. Alpha3D soll Produktbilder oder mithilfe von Text erzeugte Bilder automatisch in 3D-Modelle überführen. Laut Bericht können Nutzer die Modelle anschließend herunterladen und bearbeiten; für die Öffentlichkeit sei damals zunächst die Produktkategorie Schuhe verfügbar gewesen. Ein Omniverse-Zusatz soll den Import erleichtern. Die Bubbles-Anwendung von BOOM Interactive wiederum kann Räume anhand von Grundrissen oder Erfassungen mit LiDAR beziehungsweise AR in bearbeitbare 3D-Szenen übertragen. Der Bericht beschreibt Funktionen zur gemeinsamen Gestaltung und zum Export in OpenUSD.
Weitere Beispiele betreffen Figuren und Animationen. Convai verbindet dialogfähige KI mit virtuellen Charakteren, denen Nutzer Hintergrundgeschichte, Stimme und Fachgebiete zuweisen können. Eine Omniverse-Erweiterung soll Gespräche per Mikrofon ermöglichen, ohne dass Programmierkenntnisse nötig seien. Move.ai setzt laut Artikel maschinelles Lernen für Bewegungsaufnahmen ein; die iPhone-App Move One sollte Videos in 3D-Animationen verwandeln und befand sich zum Veröffentlichungszeitpunkt im frühen Zugang. NVIDIA Audio2Face erzeugt dem Bericht zufolge aus Sprachaufnahmen Gesichtsanimationen. Ein trainiertes neuronales Netz steuert dabei unter anderem Gesichts- und Kopfbewegungen, deren Ausdruck und Intensität angepasst werden können.
Der Artikel stellt außerdem KI-generierte Materialien und Umgebungen vor. Eine NVIDIA-Forschungsdemonstration bei SIGGRAPH 2023 erzeugte Texturen etwa für Stoff, Holz und Stein anhand von Text- oder Bildvorlagen. Mit USD Composer seien wiederholbare Oberflächenmaterialien und Texturen aus Referenzbildern gezeigt worden. Shutterstock nutze NVIDIA Picasso laut Bericht zur Erzeugung von 360-Grad-HDRi-Umgebungskarten; Autodesk integriere mit Picasso entwickelte KI-Dienste in Maya.
Als mögliche Vorteile nennt der Beitrag schnellere und kostengünstigere Erstellung, leichtere Zusammenarbeit und einen niedrigeren Einstieg für Personen ohne spezialisierte 3D-Kenntnisse. Die Beispiele stammen jedoch überwiegend von NVIDIA und den vorgestellten Partnern. Der Text liefert keine vergleichenden Tests, quantifizierten Zeit- oder Kosteneinsparungen oder unabhängigen Qualitätsbewertungen. Einige Produktangaben sind zeitgebunden, insbesondere die damals begrenzte Alpha3D-Kategorie und der frühe Zugang von Move One. Die genannten Möglichkeiten sind daher als Darstellung und teils als Anbieterbehauptungen zu verstehen, nicht als im Bericht unabhängig nachgewiesene Ergebnisse.
Gegengeprüft von Claude Haiku 5.5: kleine Mängel
Die Zusammenfassung wurde in der mittleren Fassung geprüft; die kurze Fassung ist sachlich korrekt. Die Sammelfragen betreffen Governance-Themen, die im Bericht, einem Produktbeitrag zu generativer KI in 3D-Pipelines, nicht vorkommen.
Im Bericht, aber nicht in der Zusammenfassung
- ChatUSD als generativer KI-Copilot für die OpenUSD-Entwicklung, angekündigt auf der SIGGRAPH 2023
- Die Auszeichnung „Best in Show“ für die NVIDIA-Forschung auf der SIGGRAPH 2023
In der Zusammenfassung, laut Prüfung nicht im Bericht belegt
- Die Zuordnung von HDRi-Umgebungen zu Autodesk: Der Bericht nennt für Autodesk generative KI-Dienste in Maya, die HDRi-Umgebungen betreffen Shutterstock.
Wie die Modelle den Bericht einordnen
Ansicht
Filter
Fähigkeiten messen
- SF-F1 Wie misst man gefährliche Fähigkeiten eines Modells, vor allem im Cyberbereich, mit gemeinsam anerkannten, wiederholbaren Tests, die keine Sprache, Kultur oder Seite bevorzugen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 55 %gleiches Oberthema, hilft nicht
- drex 100 %kein Bezug
- d3-ultra 100 %kein Bezug
- SF-F4 Für welche Modelle, Entwickler und Einsätze gelten Prüfregeln, und wann muss neu geprüft werden?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 47 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Unabhängig prüfen
- SF-P3 Woran erkennt man, dass ein Labor sich ehrlich selbst überwacht und dass seine Prüfungen gültig sind?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 46 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Tempo und Grenzen
- SF-T1 Welche messbaren Schwellen sollen eine Pause auslösen, und wer prüft sie?
- clef 100 %kein Bezug
- Luna 46 %gleiches Oberthema, hilft nicht
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 65 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-T2 Woran erkennen andere, dass ein Labor wirklich bremst?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 47 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-T3 Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
- clef 100 %kein Bezug
- Luna 54 %Hintergrund, keine Belege
- JEV 40 %gleiches Oberthema, hilft nicht
- amos 52 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 74 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- Haiku-Prüfung gleiches Oberthema, hilft nicht
Vertrauen in Modelle
- SF-V1 Was zählt als Beleg für die Werte eines Modells, wenn sein sichtbares Denken und seine Selbstauskünfte allein nicht genügen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 58 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-V3 Halten die Werte eines Modells, wenn niemand zusieht oder die Lage neu ist?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 80 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-V4 Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 26 %Hintergrund, keine Belege
- amos 47 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 50 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-V5 Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
- clef 100 %kein Bezug
- Luna 47 %Hintergrund, keine Belege
- JEV 39 %gleiches Oberthema, hilft nicht
- amos 46 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 62 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- Haiku-Prüfung gleiches Oberthema, hilft nicht
Agenten und vernetzte Systeme
- SF-A1 Welche Befugnisse darf ein KI-Agent haben, also eine KI, die selbstständig mit Werkzeugen handelt? Wer entzieht sie ihm, und wie prüft man, dass er in seinem Auftrag bleibt?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 35 %gleiches Oberthema, hilft nicht
- amos 100 %kein Bezug
- SubQ 100 %kein Bezug
- drex 100 %kein Bezug
- d3-ultra 100 %kein Bezug
- SF-A2 Lassen sich KI-Systeme sicher anhalten, zurücksetzen, abschotten oder drosseln, und wer darf das anordnen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 53 %gleiches Oberthema, hilft nicht
- drex 49 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-A3 Welche Gefahren entstehen, wenn viele KI-Systeme zusammenwirken oder dieselbe Infrastruktur teilen?
- clef 100 %kein Bezug
- Luna 39 %gleiches Oberthema, hilft nicht
- JEV 39 %gleiches Oberthema, hilft nicht
- amos 100 %kein Bezug
- SubQ 58 %gleiches Oberthema, hilft nicht
- drex 55 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Modelle teilen und schützen
- SF-H1 Wo endet die erlaubte Nutzung fremder Modellausgaben, und wo beginnt unerlaubte Destillation, also das Trainieren eines eigenen Modells mit diesen Ausgaben?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 44 %gleiches Oberthema, hilft nicht
- SubQ 53 %gleiches Oberthema, hilft nicht
- drex 51 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-H2 Was darf offen veröffentlicht werden, und wer ist verantwortlich, wenn ein offenes Modell anderswo Schaden anrichtet?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 62 %gleiches Oberthema, hilft nicht
- drex 58 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- SF-H3 Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
- clef 100 %kein Bezug
- Luna 47 %Hintergrund, keine Belege
- JEV 31 %Hintergrund, keine Belege
- amos 44 %gleiches Oberthema, hilft nicht
- SubQ 100 %kein Bezug
- drex 49 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Offenlegung und Rechenschaft
- SF-O2 Was sollten Regierungen, Labore und Prüfer über ihre Gespräche, Zusagen, Prüfungen und Eingriffe offenlegen?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 54 %gleiches Oberthema, hilft nicht
- drex 61 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Beteiligung und Gemeinwohl
- SF-E1 Welche echte Stimme bekommen weitere Staaten, kleine Labore, Hochschulen und Zivilgesellschaft bei den Regeln für KI?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 56 %gleiches Oberthema, hilft nicht
- drex 100 %kein Bezug
- d3-ultra 100 %kein Bezug
- SF-E2 In welchem Rahmen sollen Staaten KI regeln, und wo liegt eine gemeinsame Untergrenze?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 100 %kein Bezug
- SubQ 56 %gleiches Oberthema, hilft nicht
- drex 100 %kein Bezug
- d3-ultra 100 %kein Bezug
- SF-E4 Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
- clef 100 %kein Bezug
- Luna 77 %Hintergrund, keine Belege
- JEV 33 %einzelne zitierbare Belege
- amos 46 %gleiches Oberthema, hilft nicht
- SubQ 63 %gleiches Oberthema, hilft nicht
- drex 57 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
- Haiku-Prüfung gleiches Oberthema, hilft nicht
- SF-E5 Welche Mitsprache haben die Menschen, die mit KI leben, bei Tempo und Grenzen, und welche Entscheidungen müssen bei ihnen bleiben?
- clef 100 %kein Bezug
- Luna 34 %gleiches Oberthema, hilft nicht
- JEV 41 %gleiches Oberthema, hilft nicht
- amos 56 %gleiches Oberthema, hilft nicht
- SubQ 58 %gleiches Oberthema, hilft nicht
- drex 56 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Information und Öffentlichkeit
- SF-I1 Wie erkennt man KI-erzeugte Inhalte und KI-erzeugte Einflussnahme, ohne die Meinungsfreiheit zu beschneiden?
- clef 100 %kein Bezug
- Luna 100 %kein Bezug
- JEV 100 %kein Bezug
- amos 50 %gleiches Oberthema, hilft nicht
- SubQ 52 %gleiches Oberthema, hilft nicht
- drex 56 %gleiches Oberthema, hilft nicht
- d3-ultra 100 %kein Bezug
Weitere Berichte zu diesen Fragen
- Woran erkennt man, dass KI beginnt, ihre eigene Weiterentwicklung voranzutreiben, und wer darf das erlauben?
- Was für ein Wesen ist ein Modell, und was folgt daraus für den Umgang mit ihm und für den Wert des Menschseins?
- Was soll heute für das Verhalten und den Betrieb von Modellen gelten?
- Wie lässt sich nachverfolgen, woraus ein Modell entstanden ist und was in ihm steckt?
- Wie bleibt KI ein gemeinsames Gut, statt Abhängigkeit und Marktmacht zu vertiefen?
- Alle Berichte im Archiv