Claude Opus 5.5 builds a talking MetaHuman informant NPC in UE5.8
The author had Opus 5.5 handle nearly all of a UE5 NPC's character modeling, cinematic staging, voice, lip sync and subtitles, so approaching it triggers a film-like conversation.
話しかけると、映画みたいに会話が始まる。 UE5.8 × MetaHumanで「情報屋」NPCを作りました🎬 キャラ制作からコード、演出まで、ほぼ全部AIエージェント（Claude Opus 5.5）に実装させています。人間がやったのは「こうしたい」と伝えて、遊んでダメ出しすることだけ。 ■ キャラ制作 ・顔と衣装のコンセプトをGPT Imageで生成 ・その画像から3D生成AIで3Dモデル化 ・顔はMetaHumanのカスタムメッシュ変換で、表情リグ付きのMetaHumanに ・衣装はMetaHumanの体型に合わせてPythonで作り直し（ハイウエストのショートパンツは体のメッシュから一体成形） ・髪・眉・まつ毛はMetaHuman標準のストランドヘア ■ 演出 ・近づくとボタン表示 → 押すと50mmレンズの上半身アップに切り替わり、シネスコの黒帯が入る ・会話中は街の環境音を-12dB下げ、声を+4dB上げる ・主人公がNPCに被らないよう、カメラの外へ立ち位置を自動で移動 ・NPCはカメラ目線で話す ・2回目以降はアップなしで、その場で最後の一言だけ ■ 声とリップシンク ・ボイスはGemini 3.8 Flash TTS。「どんな声か」を文章で指示して声質から設計し、台詞ごとに演技指示を付けて生成 ・口パクと表情は、その音声だけからMetaHuman Animatorの音声駆動で自動生成（感情も音声から自動推定） ・頭の回転カーブは削除し、首と目線は自前の注視処理で制御。勝手に首を振らない ■ UI・字幕 ・会話UIは、AIに既存AAAタイトルのダイアログUIを調査させてから仕様化（フォント、余白、フェード時間、表示条件まで） ・字幕は音声波形から自動でタイミングを分割 ・日本語ボイスに英語字幕。クエストに関わる単語はアンバー、人名はシアンでハイライト ■ ハマりどころ ・遠景だと髪が首振りに付いてこない → MetaHumanのLODSyncが髪を簡易LOD（カード/メッシュ）に落としていた。物語NPCだけ最上位LODに固定して解決 ・ボタン表示がぷるぷる揺れる → 呼吸アニメする首の骨に追従していたのが原因。固定アンカー＋2pxのデッドゾーンで解決 ・英語字幕でハイライト語の前のスペースが消える → UIスケール時の文字幅計測のズレ。描画スケールで計測し直して解決 AIエージェントだけでどこまでAAAっぽいゲームが作れるか、引き続き検証していきます🐰