【Tripo3D×StableDiffusion】三面図(四面図)から理想の3Dモデルを出力する【やめとけ】

三面図で生成したっていう記事全然出てこないけど誰も使ってないんか?なんでやろなあ



  • こちらは『生成AIでゲームを作る』シリーズの1つとなっております。他にも気になる記事があればご覧ください。

まず、Tripoでテキストだけの生成はお勧めしない

私は今、かっこいいイケメンサラリーマンが爆走するゲームを制作しようとしています。というわけで先立つのはモデル!早速課金したTripo3Dにイケサラリーマンを生成してもらいましょう。

ワクワク!

結果

……。PS3ぐらいで出てきそうなクオリティですね。まあフリーゲームとかだったら十分かもしれませんが、ちょっとこれでは満足できません。

四面図を用意する

想像通りのイケメンサラリーマンにするため、画像を用意して生成することにします。
ですがちょっと待ってください✋。

通常のテキストから生成、画像から生成のほかに、「マルチビューから3D化」という機能があります。

なんと前・左・右・裏面の4枚の画像からHDモデルを出力できるとのこと。というわけで、三面図ならぬ四面図を用意します。詳しい手順は前回の記事で紹介しています。


↓別にチャッピーやStableDiffusionで作らなければいけないというわけではないので、すでに四面図をお持ちの方はスルーしてください。

で、用意ができているので早速投入しようかと思ったのですが、ちょっと待ってください。

画質を上げないで「マルチビューから3D化」

【宣伝】
RN8YWM

招待コードRN8YWMを入れていただくとあなたと私に300クレジットずつ入ります!
何卒!何卒!!!🥺✨🙏


今の画像だと拡大すると顔がぼやけていますが、まあ案外Tripo3Dが何とかしてくれるかもしれません。

Tripoに切り出した画像をポイ!いざ生成!



!?

ボロボロですね。ひどすぎます。
StableDiffusionでスケールアップしたらマシにできないでしょうか…?

あまり意味がない気がしますが、とりあえずやってみましょう。

画質を上げて再挑戦

画質を良くするのはimg2imgではない

というわけで画像をスケールアップします。

途中まで気が付かなかったのですが、img2imgでJust resizeを選択した場合、めっちゃ時間がかかるのに本当に画像が大きくなるだけで全然画質が上がりません

img2imgのプロパティ。すげえ時間かかるのに画質よくならないの罠すぎる

なので大きくしたければExtrasという別のタブの機能を使います。

Extrasの使い方

こちらを選択します。

画像を入れて、UpscalerをR-ESRGAN 4x+ Anime6Bにします。(アニメ系におすすめらしいとのこと)

そうすると高画質になります。顔がくっきり。

はっきりくっきり

というわけで再挑戦です。Extrasで高画質化して4分割しました。

Tripo3Dにポイ!頼む……!



うんち

…はい、今のTripo3Dの最高峰モデルTripo 3.1をもってしても、これが限界みたいです。

どうして4面図から立体にしてみたという記事がないのかわかりました。正直使い物にならんからです。ぶっちゃけ最初にテキストから生成したモデルのほうがよほど綺麗です。

人の形をしている

一応単体画像から試してみる

まさか単体の画像のほうが結果が良いなんてことはないと思いますが、一応試してみます。

先ほど使用した、高画質化した四面図の正面のものだけを使用してみます。



わずかですがこっちのほうが綺麗です。ますます「マルチビューから3D化」、必要なさすぎます

次回:しょうがないから顔だけ生成する

思ったのですが、顔だけで生成したらちゃんとした顔にならないでしょうか
体は後でBlenderでくっつければいいですし。

というわけで次の記事で挑戦します。よろしくお願いいたします。