Von einem 3D-Blockout zu einem texturierten 3D-Modell mit KI: Konzept, Form und Textur

Verwandle ein grobes 3D-Blockout eines Panzers mit Flux in Concept Art, dann mit Hunyuan3D und TRELLIS auf Hugging Face in ein texturiertes 3D-Modell, und zurück in Blender. Dazu ein Vergleich von ChatGPT und Gemini für den Konzeptschritt.

Anton Tenitsky13. Oktober 20264 Min. LesezeitVideoversion unten

Diese Anleitung wurde mit KI aus dem Englischen übersetzt und kann Fehler enthalten. Zum Original.

Ein texturierter gelber Science-Fiction-Panzer, mit KI erzeugt, auf dem grauen 3D-Blockout, aus dem er stammt, in Blender

Ein 3D-Blockout ist der schnellste Weg, eine Idee zu kontrollieren: Proportionen, Silhouette und Kamera gehören dir. Dieser Leitfaden führt ein Blockout aus einfachen Formen bis zu einem detaillierten, texturierten 3D-Modell, mit KI für die Schritte dazwischen:

  1. Vom Blockout zur Concept Art, geführt von der Tiefe eines Screenshots.
  2. Von der Concept Art zur 3D-Form mit Hunyuan3D.
  3. Von der Concept Art zum texturierten Modell mit TRELLIS.
  4. Zurück in Blender, wo es sich mit dem ursprünglichen Blockout deckt.

Kurz gefasst

  • Konzeptschritt: Flux in ComfyUI schlug ChatGPT, und Gemini war bei demselben Screenshot viel schlechter.
  • Form: Hunyuan3D-2 auf Hugging Face: etwa 20 Sekunden, hohe Qualität, keine Texturen.
  • Textur: TRELLIS auf Hugging Face: etwa 30 Sekunden, mit einer 2K-Textur.
  • Ergebnis: ein symmetrisches, texturiertes GLB, das zu den Proportionen des Blockouts passt.

1. Beginne mit einem Screenshot des Blockouts

Mache in Blender einen Screenshot deines Blockouts. Eine Skizze funktioniert auch. Es als 3D-Blockout zu behalten, hat einen echten Vorteil: Du kannst jeden Teil ändern, größer oder kleiner machen und es erneut ausführen.

Ein graues 3D-Blockout eines Panzers aus einfachen Kisten und Zylindern
Der Ausgangspunkt: ein Panzer, aus einfachen Formen geblockt.

2. In Concept Art verwandeln

Welches Werkzeug du auch nutzt, die Idee ist dieselbe: Es liest die Tiefe des Screenshots und erzeugt Concept Art, geführt von deinem Prompt. Ich habe drei probiert, mit demselben Prompt („cyberpunk tank, sci-fi tank“).

ChatGPT: einfach den Screenshot und den Prompt einfügen. Das Ergebnis war ziemlich gut, aber nichts, was mir wirklich gefiel.

Die Version von ChatGPT: ein dunkelgrauer Science-Fiction-Panzer mit orangefarbenen Lichtern
ChatGPT: ordentlich, aber nicht das, was ich suchte.

Gemini: derselbe Prompt, und das Ergebnis war viel schlechter als das von ChatGPT.

Die Version von Gemini: ein schlichter grauer Panzer mit wenig hinzugefügtem Detail
Gemini: bei demselben Prompt viel schwächer.

Flux in ComfyUI leistete mit demselben Screenshot eine viel bessere Arbeit. Der Haken ist die Lernkurve: Flux mit einem Depth-ControlNet einzurichten ist viel aufwendiger, als einen Chatbot zu prompten. Meine Blender-+-KI-Leitfäden zeigen, wie. Wenn du den Workflow lieber ausprobieren möchtest, ohne etwas zu installieren: Er liegt bei RunComfy, fertig eingerichtet, mit etwa 15 kostenlosen Minuten; bring deinen eigenen Screenshot mit.

Die Version von Flux: ein detaillierter gelb-schwarzer Science-Fiction-Panzer in einer Wüste
Flux mit einem Depth-ControlNet: der beste der drei.

3. Die 3D-Form mit Hunyuan3D erzeugen

Hugging Face hostet viele Open-Source-Modelle als Spaces, mit Weboberfläche und meist einigen kostenlosen Generierungen. Die meisten lassen sich auch auf deinem eigenen Computer installieren.

Ziehe im Hunyuan3D-2-Space dein Konzeptbild hinein. Es entfernt den Hintergrund automatisch, mit einem separaten KI-Modell. Lege die Ziel-Face-Anzahl fest. Ich habe sie bei etwa 30.000 Dreiecken gehalten; mehr dauert länger und sieht vielleicht nicht viel besser aus. Klicke dann auf Generate Shape.

Der Hunyuan3D-2-Space mit dem erzeugten grauen 3D-Panzer-Mesh
Hunyuan3D: Form in hoher Qualität in etwa 20 Sekunden, aber keine Textur.

Es dauerte etwa 20 Sekunden, und die Qualität war hoch. Es hat sogar die Antenne gut interpretiert. Eine kleine Figur auf dem Panzer kam als Glitch heraus; in meinem endgültigen Render habe ich sie in Photoshop wegretuschiert. Der Haken: keine Texturen.

4. Ein texturiertes Modell mit TRELLIS erhalten

Für Texturen habe ich TRELLIS genutzt, ebenfalls auf Hugging Face. Lade dasselbe Bild hoch: Es entfernt den Hintergrund und macht das Bild automatisch quadratisch. Die Generierungseinstellungen habe ich in Ruhe gelassen, in den GLB-Extraktionseinstellungen die Texturgröße auf 2K gesetzt und auf Generate & Extract GLB geklickt.

Das von TRELLIS erzeugte texturierte gelbe Panzermodell, mit seiner Texturkarte gezeigt
TRELLIS: ein texturiertes, symmetrisches Modell in etwa 30 Sekunden.

In etwa 30 Sekunden hatte ich ein schön aussehendes, symmetrisches Modell mit Texturen. TRELLIS kann auch mehrere Bilder eines Objekts (vorn, seitlich, oben) für ein besseres Modell aufnehmen; das einzelne Bild reichte mir, auch wenn ich es noch aufräumen wollen würde.

5. Zurück in Blender

Lade das GLB herunter, ein Format, das sowohl das Mesh als auch seine Textur enthält, und ziehe es in Blender. Meines kam winzig an und musste neu skaliert werden, aber das Mesh war gut.

Der erzeugte texturierte Panzer in Blender neben dem grauen Original-Blockout, mit übereinstimmenden Proportionen
Die Proportionen passen zum Blockout, weil das Konzept aus seiner Tiefe erzeugt wurde.

Die Proportionen passen eng zum ursprünglichen Blockout, weil die Concept Art aus der Tiefe des Blockouts erzeugt wurde. Das ist der Sinn der ganzen Pipeline: Du kontrollierst das Design in 3D, und die KI füllt das Detail aus.

Bild-zu-3D hat sich seit meiner Aufnahme schnell weiterentwickelt. Um viele texturierte Modelle auf einmal zu erzeugen, siehe meinen neueren Leitfaden zu TRELLIS 2 in ComfyUI.

Der RunComfy-Link ist ein Empfehlungslink.

Die Videoversion ansehen (4:54)

Alles oben steht auch im Video, falls du lieber am Bildschirm mitmachst. Das Video ist auf Englisch.

Häufige Fragen

Was ist besser für Concept Art aus einem 3D-Blockout: ChatGPT, Gemini oder Flux?

In meinem Test leistete Flux in ComfyUI die beste Arbeit, ChatGPT war ordentlich, und Gemini war viel schlechter. Flux braucht mehr Einarbeitung.

Warum brauche ich zwei Modelle, Hunyuan3D und TRELLIS?

Damals lieferte Hunyuan3D die bessere Form, aber keine Texturen, während TRELLIS ein texturiertes Modell lieferte. Ich habe Hunyuan3D für die Formqualität und TRELLIS für die texturierte Version genutzt.

In welchem Dateiformat kommen die 3D-Modelle?

GLB, das sowohl das Mesh als auch seine Textur enthält und sich direkt in Blender ziehen lässt.

Anton Tenitsky ist 3D-Artist mit mehr als 15 Jahren Erfahrung in der Computergrafik, tätig für Nickelodeon, Gameloft, Marvel Rivals und viele weitere Kunden. Mehr über mich

Ähnliche Anleitungen