3D数字人实时对话 Demo

项目定位

围绕 3D 数字人的真实可演示链路做系统打通，让角色生成、音频驱动面部动画、交互状态切换和实时对话能够在一个 Demo 里连续工作。

Unreal Engine MetaHuman Live Link Pixel Streaming Realtime Dialogue

技术链路

  • 以 Unreal Engine + MetaHuman 为渲染与角色基础，确认角色资产、装配和运行时控制接口。
  • 围绕音频输入与面部动画驱动，打通音频到口型/面部表情的响应链路。
  • 设计对话状态机，支持 Idle、Listening、Thinking、Talking 等交互状态切换。
  • 结合 Pixel Streaming / Web 对话界面，验证网页侧触发、角色响应与演示展示的一致性。

效果展示

最新 3D 数字人 Demo 视频，可直接在页面内播放。也可单独打开查看原视频。

3D数字人实时对话演示 GIF

实时对话数字人演示。角色能够完成基础对话响应与可视化展示。

3D数字人系统控制界面

系统控制界面，包含背景切换、动作状态控制和对话面板。

3D数字人系统架构图

项目链路涉及语音、对话、驱动与渲染模块协同。

结果

  • 完成可对话 3D 数字人 Demo，覆盖角色接入、面部语音驱动、交互状态和展示界面。
  • 验证了 Character Assembly、Live Link、交互控制等关键模块可以作为后续工程化扩展基础。
  • 为后续“图片到 3D 角色”和“动作驱动体系”项目提供统一的目标承载平台。