ミームちゃんは、なぜ人間にならなかったのか――1枚絵からAIとBlenderで3D化した失敗の記録

作りたかったのは、AI投資部のタイトル画像にいる、青紫とピンクの光をまとった半透明の「ミームちゃん」だった。長い髪が光を通し、顔は見えすぎない。それでも、人間がそこにいる気配はある。

「もっと精細に」「バイザーはいらない」「鼻と口はほしい」「もっとリアルな体型のアイドルっぽく」「腕、足、顔をもっと人間らしく」。AIアシスタントとBlenderの連携で要求を一つずつ反映した。保存した主要版は、ちびモデル、高精細版、ホログラム版、7頭身版、成人アイドル版、有機的な人体版へ増えた。画像から3Dを作る外部の再構成機能も、半透明と不透明の入力で2度試した。

ところが、最初にできたのは丸い頭に細い手足を付けた、かわいい人形だった。その後も「もっと人間らしく」と直すほど、髪は細い線の束、腕と脚は滑らかな円柱、首は頭を載せる台座に見えた。精細さは増したのに、画像にあった存在感はむしろ遠ざかった。なぜ、描き込むほどミームちゃんではなくなったのか。

参照したタイトル画像の一例。雰囲気、配色、発光表現は強い一方、人物は斜め後ろから描かれ、身体の正面・側面・背面を固定する設定画ではない。

結論：1枚絵にない奥行きをAIが一意に復元できないという技術上の限界と、その不足を補う設計資料・段階承認を用意しなかった制作上の問題が重なった。ただし、元画像が悪い絵なのではない。印象を伝えるタイトル画像としては成功しているが、3Dの形を固定する設計図として使うには情報が足りない。さらに今回は、形を決める前に滑らかさと透明感を重ね、途中で成人らしい体型や人間らしい顔を追加した。AIに完成像を当てさせるのではなく、人間が構造と顔のルールを決め、AIに反復作業や仕上げを施工させるべきだった。

改良するほど、何がずれていったのか

実物を並べると、単純な「失敗から成功への進歩」ではなかったことが分かる。

段階	改善したこと	残った問題
初期のちびモデル	髪型、衣装、発光色という記号を置いた	頭身も身体も人形で、元画像の人物像とは別物
ホログラム版	透過、青紫とピンクの発光、髪の線を増やした	情報量は増えたが、髪は立体的な束ではなく線に見えた
アイドル体型版	頭身、腰、脚の長さを成人寄りにした	腕と脚の接続、肩、首、顔面の構造がマネキン的だった
最新の人体版	鼻と口、曲面、衣装の密度を増やした	精細さは上がったが、元画像のやわらかな気配と人間らしい解剖の両方を再現できなかった

表は編集部の実験レンダーと制作記録を基にした整理。外部の画像再構成機能の2回の不採用は今回の入力と試行条件での観察であり、そのサービス全体の性能評価ではない。

1. 記号は作れた

初期版。ツインテール、青紫、発光する衣装という「ミームちゃんらしい記号」はあるが、身体はデフォルメされた人形に近い。編集部の実験レンダー。

2. 光は近づいたが、形は近づかなかった

ホログラム版。透過と発光の方向は参照画像へ近づいたが、曲線を増やした髪は「髪の塊」ではなく多数の線として読める。編集部の実験レンダー。

3. 頭身を伸ばしても、人間の構造にはならない

頭身を伸ばした版。全身の比率は成人へ寄ったが、肩から腕、骨盤から脚へ力が伝わる連続した構造は弱い。編集部の実験レンダー。

4. 細部を足しても、設計の不足は埋まらない

最新の主要版。鼻と口、衣装、髪の本数は増えた。一方で、首と頭の接続や腕の形にはマネキンらしさが残る。編集部の実験レンダー。

「AIがまだ無理」なのか

画像から3Dを復元する技術の研究者であるカオルは、まず入力の限界を指摘した。1枚の画像に写っていない背中、後頭部、髪束の断面、服の内側は、一つの正解に決められない。これはプロンプトを長くすれば消える問題ではない。正面から丸く見える腕でも、横から見れば円形、楕円、平たい形のどれかは画像だけでは分からないからだ。CVPR 2020の単一視点3D復元研究も、隠れた面や一部しか観測できない面を復元するときの本質的な曖昧さを、この課題の難しさとして挙げている。

生成AIツールを検証する批評家のトウマも、「入力情報が不足している以上、AIは学習データから、ありそうな形を推測するしかない」と主張した。今回の外部再構成機能は、半透明画像だけでなく不透明にした入力でも、髪や人体の方向を保てなかった。ただし、ここから言えるのは「今回の2回では採用できなかった」までであり、画像から3Dへの変換技術全般が使えないという意味ではない。

つまり、「今のAIに1枚絵から完全一致の3Dキャラクターを自律的に作らせるのは難しい」は妥当だ。しかし、「AIは人体を知らない」「必ず平均的な人間になる」といった議論中の強い断定までは、今回の実験から検証できない。本記事では採用しない。

では、「元イメージが悪かった」のか

キャラクターデザイナーのレイは、参照画像が持つ強さと、制作資料としての弱さを分けた。元画像は、青紫とピンクの配色、透ける光、長い髪、画面の中に現れる存在という印象を一目で伝える。タイトル画像としては、この曖昧さ自体が魅力になっている。

一方、3D制作に必要なのは別の情報だ。髪を何束に分けるか。頭のどこから生えて、背中でどう重なるか。肩幅、骨盤、脚の太さはどれくらいか。制服の布と半透明の身体は、どこで分かれるか。目を描かないなら、眼窩のくぼみ、眉間、頬、まぶたに相当する面のうち、何を残すか。タイトル画像は、それらを決めるための三面図ではない。

映像制作のディレクターであるサヤは、制作途中で要件を足した進行にも原因があるとした。初期モデルの段階で「成人の体型」「鼻と口」「人間らしい腕と脚」を固定せず、版を作るたびに目標を更新したため、前の形を継ぎ足して直す工程になった。一般読者のユナも、全工程を人間が設計する負担は大きいと認めつつ、「AIへ渡しても個性が失われない最小限の設計資料は何か」を探るべきだと反論した。

したがって、「元イメージが悪い」は正確ではない。用途が違ったのである。印象を作る絵を、形を決める設計図として兼用したことが問題だった。

「目を描かない」と「人間らしい顔」は両立できる

今回、特に難しかったのが顔だ。条件は「顔をはっきり作りたくないので、目は描かない」。その後、「鼻と口はほしい」「もっと人間っぽく」が加わった。

これは矛盾ではない。だが、「目を削除する」だけでは設計にならない。人は顔を、目玉だけでなく、眼窩、眉間、頬、鼻、口、顎の位置関係から読む。そこを滑らかな一枚の面にすると、顔を曖昧にしたのではなく、顔の構造を消したように見えやすい。

3Dキャラクターを制作するテクニカルアーティストのミナトは、目がない場所を「空白」としてAIに任せず、光を透かす浅いくぼみ、閉じたまぶたの起伏、前髪の影など、何が存在するかを人間が決めるべきだと提案した。これは次回に試す仮説である。事実確認を担う編集者のテツオは、今回の観察から「目のない顔の唯一の正解」までは導けないと線を引いた。

滑らかさは、人体構造の代わりにならない

今回のモデルでは、球、円柱、曲線、メタボール、細分化を組み合わせた。Blenderの公式マニュアルは、メタボールを複数の場が作る暗黙曲面として説明している。また、Subdivision Surfaceはメッシュの面を細分化し、滑らかな見た目を作る機能である。

どちらも有用だが、滑らかにすることと、人間らしくすることは同じではない。肩の関節がどこで回るか、肘の内側がどう折れるか、首から鎖骨へ面がどう続くかは、表面の分割数を増やしても自動では決まらない。

ここでいうトポロジーは、建物の梁の配置のような、3D表面を作る点・線・面のつながり方だ。リグは人形を動かすために中へ入れる骨組み、スカルプトは粘土を彫るように表面の形を整える工程を指す。今回は、動かせる人体のベースを先に作らず、見える角度の輪郭をプリミティブで足し続けた。3Dキャラクターを制作するテクニカルアーティストのミナトが「素材の滑らかさと構造を分けるべきだ」と主張した理由はここにある。

AIは役に立たなかったのか

そうではない。今回使った「Blender MCP」は、Blender公式機能ではなく、コミュニティが開発したAIとBlenderの中継ツールだ。開発元の説明にあるように、AIはこの中継を通じてBlender内のオブジェクト操作やPythonコード実行を進められる。今回も、連携の導入、オブジェクト生成、素材、照明、髪の曲線、保存、レンダー、版の比較は短い指示で繰り返せた。複雑な作業を小さな手順に分けるという同ツールの案内も、今回の教訓と一致する。

役に立たなかったのは、AIを「キャラクターの完成像を決める監督」として扱った部分だ。役に立ったのは、人が決めた変更をすばやく試し、失敗を目に見える形へ変える部分だった。

議論の対立を整理すると、こうなる。

参加者が示した立場・仮説	強い主張	編集部が今回確認できた範囲
AI限界説	1枚絵にない奥行きは一意に復元できず、AIは推測するしかない	支持できる。入力にない背面や断面には正解が一つではない
参照・進行説	三面図なし、途中の要件追加、段階承認なしが失敗を増幅した	支持できる。実際の制作記録と一致する
元画像問題説	元画像そのものの質が低かった	支持できない。印象を伝える絵と3D設計図は目的が違う
AI不要説	人間が構造を決めるならAIを使う意味がない	支持できない。反復、素材、照明、レンダーには明確な効用があった

左2列は議論で示された意見・仮説、右列は制作記録と公式資料から確認できた範囲。参加者の技術一般に関する未検証の断定は結論から除いた。

次は、完成像を当てさせず、設計を施工させる

次回の制作手順は次のようになる。

1. キャラクターを固定する：後の修正で全身比率が揺れないよう、成人の正面・側面・背面を描いた三面図を用意し、身長、頭身、肩、腰、手足の比率を決める。
2. 顔のルールを固定する：AIの推測へ丸投げしないよう、「目を描かない」を、眼窩、まぶた、眉間、頬、前髪の影のどれを残すかまで具体化する。鼻と口の大きさもここで決める。
3. 人体を先に承認する：発光で問題が隠れる前に、動かせる成人ベースメッシュへリグを入れ、無着色・無発光の正面、側面、ポーズで関節を確認する。
4. 髪と衣装を分ける：身体との境界を見失わないよう、髪束の太さと断面、衣装と身体を別工程で作る。線の本数を増やす前に、大きな塊のシルエットを承認する。
5. 最後にホログラム化する：透明感は構造ではなく演出なので、透明度、発光、ノイズ、照明は最後に加える。透け感で構造上の問題を隠さない。
6. AIは各段階を施工する：スクリプト、反復、素材候補、レンダー比較を任せる。各段階で人が採否を決め、前工程へ戻れるよう版を保存する。

キャラクターデザイナーのレイが重視したのは「人間らしくない特徴を、欠損ではなく意図した形として渡すこと」だった。画像から3Dを復元する技術の研究者であるカオルは、三面図や深度情報で、AIが推測しなければならない範囲を狭めるべきだとした。一般読者のユナは、すべてを手作業へ戻すのではなく、「どこまで決めればAIに任せてもミームちゃんであり続けるか」を次の検証課題に挙げた。

今回の失敗で分かったのは、AIが「作れない」という単純な話ではない。AIは、こちらが決めなかった部分まで止まって待ってはくれない。何かで埋めて、完成したように見せる。その推測が便利な場面もあるが、キャラクターの個性が宿る場所ほど危険になる。

次に問うべきなのは、「AIはミームちゃんを知っているか」ではない。AIに推測させてよい余白と、人間が守るべきミームちゃんの個性の核はどこで分かれるのか。私たちは、その境界を3Dの形として決められているかである。

出典を読むときのポイント

• CVPR 2020「Front2Back: Single View 3D Shape Reconstruction via Front to Back Prediction」：単一の2D画像から隠れた面や部分的にしか見えない面を復元する際に、本質的な曖昧さがあることを確認した。
• Blender Manual「Metaball Structure」：メタボールが場の影響で一つの暗黙曲面を作る仕組みを確認した。人体構造を自動設計する機能だとは記載されていない。
• Blender Manual「Subdivision Surface」：メッシュ面を細分化し、滑らかな見た目を得る機能であることを確認した。
• Blender MCP README：Blender内のオブジェクト操作、Pythonコード実行、画像からの3D生成連携、複雑な操作を小さな手順に分けるという利用案内を確認した。Blender公式ではなく第三者プロジェクトである。

本記事の制作過程、レンダー、外部再構成機能の結果は編集部の実験記録に基づく。技術一般について議論参加者が述べた見解は、公式資料で確認できた範囲だけを事実として採用した。