3Dブロックアウトは、アイデアを制御する最も速い方法です。プロポーション、シルエット、カメラのすべてを自分で決められます。このガイドでは、シンプルな形で作ったブロックアウトを、間の工程にAIを使って、詳細でテクスチャ付きの3Dモデルまで持っていきます。
- スクリーンショットの深度に導かれた、ブロックアウトからコンセプトアート。
- Hunyuan3Dによる、コンセプトアートから3D形状。
- TRELLISによる、コンセプトアートからテクスチャ付きモデル。
- Blenderに戻すと、元のブロックアウトとぴったり重なります。
ポイント
- コンセプトの工程: 同じスクリーンショットで、FluxがChatGPTを上回り、Geminiはずっと劣りました。
- 形状: Hugging Face上のHunyuan3D-2:約20秒、高品質、テクスチャなし。
- テクスチャ: Hugging Face上のTRELLIS:約30秒、2Kテクスチャ付き。
- 結果: ブロックアウトのプロポーションに合った、左右対称でテクスチャ付きのGLB。
1. ブロックアウトのスクリーンショットから始める
Blenderでブロックアウトのスクリーンショットを撮ります。スケッチでも構いません。3Dブロックアウトのままにしておくと、実際の利点があります。どの部分でも変更し、大きくしたり小さくしたりして、もう一度実行できるのです。
2. コンセプトアートにする
どのツールを使っても考え方は同じで、ツールがスクリーンショットの深度を読み取り、プロンプトに導かれてコンセプトアートを作ります。同じプロンプト(「cyberpunk tank, sci-fi tank」)で、3つを試しました。
ChatGPT:スクリーンショットとプロンプトを貼り付けるだけです。結果はかなり良かったものの、気に入ったとまでは言えませんでした。
Gemini:同じプロンプトで、結果はChatGPTよりずっと悪くなりました。
ComfyUIのFluxは、同じスクリーンショットで、はるかに良い仕事をしました。欠点は学習曲線です。深度ControlNetを使ったFluxのセットアップは、チャットボットにプロンプトを入力するよりずっと手間がかかります。方法はBlender + AIガイドで説明しています。何もインストールせずにこのワークフローを試したいなら、設定済みで約15分の無料枠があるRunComfyにあります。スクリーンショットは自分で用意してください。
3. Hunyuan3Dで3D形状を生成する
Hugging Faceは、多くのオープンソースモデルをSpacesとしてホストしていて、ウェブインターフェースと、たいてい無料の生成枠があります。多くは自分のコンピューターにもインストールできます。
Hunyuan3D-2 Spaceで、コンセプト画像をドラッグします。別のAIモデルを使って、背景を自動で除去します。target face countを設定します。私は3万三角形前後にしました。それより増やすと時間がかかるうえ、見た目はあまり良くならないかもしれません。その後、Generate Shapeをクリックします。
約20秒かかり、品質は高いものでした。アンテナもうまく解釈しました。戦車の上の小さな人物像は不具合で出てしまったので、最終レンダリングではPhotoshopで消しました。欠点は、テクスチャがないことです。
4. TRELLISでテクスチャ付きモデルを作る
テクスチャには、同じくHugging Face上のTRELLISを使いました。同じ画像をアップロードすると、背景の除去と画像の正方形化を自動で行います。生成の設定はそのままにして、GLB抽出設定でテクスチャサイズを2Kにし、Generate & Extract GLBをクリックしました。
約30秒で、見栄えの良い、テクスチャ付きの左右対称なモデルができました。TRELLISは、1つのオブジェクトの複数の画像(正面、側面、上面)を受け取って、より良いモデルを作ることもできます。私には1枚の画像で十分でしたが、それでも整える必要はあるでしょう。
5. Blenderに戻す
メッシュとテクスチャの両方を保持する形式のGLBをダウンロードし、Blenderにドラッグします。私のものは小さく入ってきたのでスケールの調整が必要でしたが、メッシュは良好でした。
コンセプトアートがブロックアウトの深度から生成されたため、プロポーションは元のブロックアウトとほぼ一致します。それがこのパイプライン全体の狙いです。デザインは3Dで自分が制御し、ディテールはAIが埋めます。
画像から3Dは、私がこれを作ってから急速に進歩しました。一度に多くのテクスチャ付きモデルを生成するなら、新しいガイドComfyUIのTRELLIS 2をご覧ください。
RunComfyのリンクは紹介リンクです。
動画版を見る (4:54)
上の内容はすべて動画でも説明しています。画面を見ながら進めたい方はこちらをどうぞ。 動画は英語です。
よくある質問
3Dブロックアウトからのコンセプトアートには、ChatGPT、Gemini、Fluxのどれが良いですか?
私のテストでは、ComfyUIのFluxが最も良い仕事をし、ChatGPTはまずまず、Geminiはずっと劣りました。Fluxはセットアップに学習が必要です。
Hunyuan3DとTRELLISの2つのモデルが必要なのはなぜですか?
当時、Hunyuan3Dは形状は良いもののテクスチャがなく、TRELLISはテクスチャ付きのモデルが得られました。形状の品質にはHunyuan3Dを、テクスチャ付きのバージョンにはTRELLISを使いました。
3Dモデルはどんなファイル形式ですか?
GLBです。メッシュとテクスチャの両方を保持し、そのままBlenderにドラッグできます。
Anton Tenitsky は コンピュータグラフィックスで15年以上の経験を持つ3Dアーティストで、Nickelodeon、Gameloft、Marvel Rivalsをはじめ多くのクライアントと仕事をしてきました。 プロフィールを見る