Dieser neue Text

Text-to-3D wird gut.

Die Text-zu-3D-KI wird von Tag zu Tag besser, so fühlt es sich an. Während generative 2D-KI wie Midjourney und Stable Diffusion für Schlagzeilen gesorgt haben, ist die 3D-Modellierung unter dem Radar verschwunden. Aber jetzt haben die Forscher Junzhe Zhu und Peiye Zhuang HiFA entwickelt und es ist bereits in diesem frühen Stadium ein beeindruckender 3D-KI-Generator.

HiFA kann hochauflösende 3D-Modelle zur Verwendung in Videospielen, 3D-Szenen und Animationen erstellen. Einige mögen darüber diskutieren, welche Spiele diese Ressourcen nutzen können, aber diese KI liefert gute Ergebnisse. Die Kontroverse um den Einsatz von KI dauert immer noch an. Der Künstler Greg Rutkowski sagte mir kürzlich, es sei „erschreckend“, wenn seine Arbeiten ohne Erlaubnis in einer KI verwendet würden. Aber die Technologie schreitet schnell voran.

Der Unterschied zwischen HiFA und seinen Konkurrenten liegt in der Verwendung und Optimierung vorab trainierter generativer Text-zu-Bild-KI wie Stable Diffusion. Während einige Text-zu-3D-KI Modelle erstellen können, basieren sie auf 2D-trainierten Renderings und können daher Inkonsistenzen aufweisen. Im Folgenden beschreibt HiFA seinen Ansatz und warum seine 3D-KI-Modelle besser aussehen als die meisten anderen.

„Um diese Einschränkungen zu beseitigen, schlagen wir eine Neuformulierung des Optimierungsverlusts unter Verwendung des Diffusions-Priori vor. Darüber hinaus führen wir einen neuartigen Trainingsansatz ein, der das Potenzial des Diffusions-Priori erschließt. Um die 3D-Geometriedarstellung zu verbessern, wenden wir eine zusätzliche Tiefenüberwachung für NeRF an. gerenderte Bilder und regulieren das Dichtefeld von NeRFs. Umfangreiche Experimente zeigen die Überlegenheit unserer Methode gegenüber früheren Arbeiten, was zu einem fortgeschrittenen Fotorealismus und einer verbesserten Konsistenz bei mehreren Ansichten führt.“

Ich persönlich bin beeindruckt, die 3D-Modelle, die von dieser KI generiert werden, sehen gut aus. Wenn Sie das endgültige Modell nicht verwenden möchten, können Sie einfach das 3D-Netz übernehmen und anpassen und es polieren oder daraus etwas Neues erstellen.

Unser aktuelles Tutorial „So verwenden Sie Adobe Firefly“ enthüllte, dass unser Künstler Ken Coleman KI verwendet, um Elemente für Konzeptzeichnungen zu generieren und sie in ZBrush und Procreate in seinen Workflow einfügt. Ich konnte sehen, dass von der Text-zu-3D-KI generierte Modelle gut mit diesem Workflow funktionieren. Diese KI von Adobe gilt als das ethischere Modell. Wenn Sie mehr erfahren möchten, lesen Sie unsere Funktion „Adobe Firefly erklärt“.

Wenn Sie tiefer in die generative KI eintauchen möchten, lesen Sie unsere Leitfäden zu den besten KI-Generatoren und entdecken Sie auch, wie KI-Generatoren im Vergleich abschneiden. Aber keines davon liefert wirklich Text-zu-3D-Modelle wie dieser von HiFA vorgeschlagene neue KI-Generator. Weitere in dieser KI-App erstellte Modelle können Sie unten sehen oder auf der HiFA-Website entdecken, wie das alles funktioniert.

Vielen Dank, dass Sie diesen Monat 5 Artikel gelesen haben* Melden Sie sich jetzt an, um uneingeschränkten Zugriff zu erhalten

Genießen Sie Ihren ersten Monat für nur 1 £ / 1 $ / 1 €

*Lesen Sie 5 kostenlose Artikel pro Monat ohne Abonnement

Melden Sie sich jetzt an, um unbegrenzten Zugang zu erhalten

Versuchen Sie es im ersten Monat für nur1 £ / 1 $ / 1 €

Tägliche Design-News, Rezensionen, Anleitungen und mehr, ausgewählt von den Redakteuren.

Ian Dean ist Redakteur für Kunst und Design bei Creativebloq und ehemaliger Herausgeber vieler führender Zeitschriften. Zu diesen Titeln gehörten ImagineFX, 3D World und der führende Videospieltitel Official PlayStation Magazine. In seiner frühen Karriere schrieb er für Musik- und Filmmagazine, darunter Uncut und SFX. Ian hat das Xbox-Magazin X360 herausgebracht und PlayStation World herausgegeben. Für Creative Bloq kombiniert Ian seine Erfahrungen, um die neuesten Nachrichten zu KI, digitaler Kunst und Videospielkunst und -technologie und mehr zu Creative Bloq zu bringen. In seiner Freizeit kritzelt er in Procreate, ArtRage und Rebelle und findet dabei Zeit zum Spielen Xbox und PS5. Er ist außerdem ein begeisterter Cricut-Benutzer und Laserschneider-Fan und bastelt derzeit mit Glowforge und xTools M1.