Runtime MetaHuman Lip Sync v1.18|Unreal 运行时口型同步插件(MetaHuman / CC4 / ARKit)

资源下载夸克网盘 · 永久有效 · 登录后转存

📦 资源下载含 Runtime MetaHuman Lip Sync.zip 原始安装包(约 564.7 MB)+ README-中文.txt;登录夸克网盘即可转存下载

Runtime MetaHuman Lip Sync —— Unreal 运行时口型同步插件 封面

Runtime MetaHuman Lip Sync 是 Georgy Treshchev 开发的 Unreal 运行时口型同步插件。它的做法与常见的「语音转文字再对嘴型」不同:跳过文本转写,直接分析原始音频里的音素,再把结果映射成面部动画。因为不经过语言模型,它对中文、英文、日文等语言一视同仁,换语种不需要换模型,也不会因为识别出错而丢字。

插件把整条链路都放在运行时:音频输入可以是麦克风、在线 TTS(ElevenLabs、OpenAI、Azure、Google Cloud)或本地音频文件与音频流;分析完成后直接输出 viseme 或 81 个面部控制器数值,实时驱动骨骼与形态键,不需要预先烘焙动画。模型在本地离线推理,支持 Windows / macOS / iOS / Linux / Android / Quest,常用于 NPC 对白、语音驱动的过场动画与直播虚拟形象。

主要功能

  • 直接音频驱动:跳过语音转文字,直接分析原始音频的音素,天然语言无关,中英日等语种无需切换模型
  • 三种同步模型:Standard(14 个 viseme,含笑声检测,面向 Windows / Android / Quest)、Realistic(81 个面部控制器,适配 MetaHuman 与 ARKit,额外支持 Mac / iOS)、Mood-Enabled(12 种情绪并带强度调节)
  • 三路音频输入:麦克风实时采集、TTS 服务(ElevenLabs / OpenAI / Azure / Google Cloud)、本地音频文件与音频流
  • 角色兼容:MetaHuman、Daz Genesis 8/9、Reallusion CC3/CC4/CC5、Mixamo,以及任何带 morph target 的角色
  • 音素体系兼容:FACS、ARKit、Preston Blair、3ds Max phoneme,可直接对接既有面部绑定
  • 离线本地运行:模型在本地推理,不依赖云端接口,可在 Windows / macOS / iOS / Linux / Android / Quest 上运行
  • 蓝图与 C++ 双接口:Blueprints 可直接连线使用,C++ 层开放 API 便于集成进自定义动画系统
  • 实时播放:分析结果实时驱动骨架与形态键,随音频持续更新,无需预烘焙动画

安装方法

  1. 打开 Unreal Engine 5.0 – 5.8 的工程
  2. 把插件目录复制到工程的 Plugins 文件夹(或引擎的 Engine/Plugins 目录)
  3. 重新打开工程,在「编辑 → 插件」中勾选 Runtime MetaHuman Lip Sync 并重启编辑器
  4. 确认依赖插件(如 Runtime Audio Importer 与 ONNX 运行时 NNERuntimeORT)已启用
  5. 把口型同步组件挂到角色蓝图,指定面部骨骼或 morph target 映射后即可播放音频驱动口型

兼容性

要求 Unreal Engine 5.0 – 5.8,支持 Blueprints 与 C++,运行平台 Windows / macOS / iOS / Linux / Android / Quest。其中 Standard 模型适用于 Windows / Android / Quest,Realistic 模型额外支持 Mac / iOS;依赖 NNERuntimeORT 提供 ONNX 推理。

资源信息

  • 资源版本:1.18
  • 文件大小:约 564.7 MB
  • 开发作者:Georgy Treshchev(georgy.dev)
  • 授权:商业插件(Fab 平台商业授权)
  • 官方页面:fab.com/listings/b514294e-e78b-4b8b-ad21-78ce51dc7e8c

原产品页:https://www.fab.com/listings/b514294e-e78b-4b8b-ad21-78ce51dc7e8c

包内为按 UE 版本分卷的压缩包(v1.0 面向 UE5.3/5.4/5.5/5.6,v1.18 面向 UE5.7),本站侧栏版本取包内 uplugin 声明的最新版本 1.18。插件 CreatedBy 为 Georgy Treshchev,官方文档 docs.georgy.dev/runtime-metahuman-lip-sync/overview。

封面图片来自作者官方发布页。本文为中文整理,功能与兼容性信息以作者官方页面与包内说明为准。资源仅供学习交流,商业使用请购买正版授权。

© 版权声明
THE END
喜欢就支持一下吧
点赞14 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容