画像生成AIを併用して、3Dアバターの衣服制作を省力化した。
メッシュの寸法・形状を微調整する手間は省けなかったが、画像生成AIに出力された任意の衣装の画像から３Ｄモデルを起こすことはできるようになった。
- youtube.com
- 画像生成AIで、衣装の画像を生成する
- 素体メッシュを改変して、衣服メッシュを作成する
- 表と裏の画像をテクスチャブラシにして、衣服（素体）メッシュに転写
- 中途半端に出来上がったテクスチャを画像生成AIで補正
衣服を画像生成AIで引き伸ばす
画像生成AIで、衣服の丈を伸ばしたテクスチャを生成する。
- 丈が短すぎて、おへそが出てしまった
- アウトペイントで丈を伸ばした
- 1回目は、裾と、大きなバックル付きのベルト（図略）
- 2回目は、裾だけ
- 3回目は、左右の袖
- もしかして、背中側も生成できるのでは？
- 衣服テクスチャはコモディティとなった
それのみならず、正面の画像をインペイントして背面のテクスチャを生成させることすら可能である。
続きを読む衣服の画像を3Dアバターに転写
画像生成AIで柄だけ量産して、モデルに転写する。
- 画像生成AIで衣服の画像を適当数、生成する
- 利用しているDCC向けの素体を入手する
- 衣服に転写したい参照画像を追加
- 衣服の参照画像に、モデルのポーズを合わせる
- テクスチャペイントモードに切り替え、モデルに転写するためのブラシを作成
- とても格好よく出来上がった（正面だけは）
- 塗った部分のテクスチャは上書きされた（正面だけは）
- 参照画像を引き延ばし、もっと下まで塗り、背中側も塗る
- ほとんど同様の手法で、部屋内の3Dモデルに適当な室内画像を転写できる
３D人物モデルの見た目を、テクスチャアトラス魔改造で変更する
３D人物モデルの見た目を魔改造したい。
テクスチャアトラスが標準化されたモデルなら、画像差し替えで可能は可能。
- ザ・シムズ、テクスチャは全身で１枚
- 差し替え画像は、Fooocus で生成
- 背景はGIMP2で除去
- エクスポート、久しぶりだと忘れる
- 下絵のテクスチャ見ながら、色んな技で補正
- 背中と袖は、色だけ合わせれば誤魔化せる
- カラーマッピングの色交換で置き換え
- けっこういい感じに出来た
3Dアバターの衣装を自作しよう
3Dアバター衣装の課題
衣装は、こだわりポイントだが購入するとキリがない。
ピッタリの柄がないことが多い。
- 3Dアバター衣装の課題
- 対策
- メッシュ、UVマップは全部流用
- 衣服モデルのテクスチャとUVマップを確認
- 画像編集ツールなどの DCC ツールで何とかして修正
- 参照画像を正射影で投影する方法を併用
対策
制作工数は抑えたいから、テクスチャの張り替えでしのぐ。
続きを読むCharacter Creator モデリング＆モーフ Modeling & Morphs
併用する3D制作ツールの種類に依存しない頭部撮影プラグインなどの解説と、制作ツールのパイプラインにより異なる解説がある。
https://courses.reallusion.com/jp/home/character-creator/modeling-and-skeleton/
続きを読むCharacter Creator 入門ガイド
Reallusion Courses の Character Creator 入門ガイドより
https://courses.reallusion.com/jp/home/character-creator/getting-started/
