style="color:#fe2c24">「2026快速生成虚拟形象(简单版
日本人做)」
/>链接:https://pan.quark.cn/s/d68311cd48d7
MotionPNGTuber
是一个让创作者能够以相对简单的准备流程,制作出具有生动肢体动作和实时口型互动能力的虚拟形象的工具。
这是一个
MotionPNGTuber
一个基于视频的实时口型同步系统。
🎯
PNGTuber
之间的解决方案,具有以下特点:
- 🎤
实时口型同步
通过麦克风输入让角色嘴部动起来
- 🎭
情感自动识别
使用循环视频实现自然的头发和衣物摆动效果
- 🌐
浏览器版本
可通过按钮瞬间切换多个动作
- 🍎
macOS
如何运行
前提条件
需要安装:
- Python
3.10
- uv
(包管理器)
快速开始(3
步)
1.
mouth_track_gui.py
3.
使用示例文件测试
在
中选择:
- 视频:
assets/assets03/loop.mp4- 口部:
assets/assets03/mouth
/>
然后按顺序操作:
- ①
解析→校准
对着麦克风说话,嘴就会动了!
/>
说话效果
说话效果
说话效果
/>
循环视频
- 短视频(几秒左右)
- 脸部不能被遮挡
2.
口部精灵图(5
图片)
文件 说明 open.png张嘴状态 closed.png闭嘴状态 half.png半张开 e.png任意形状 u.png任意形状
- 图片格式:PNG(支持透明)
- 推荐尺寸:约
128px
mouth_sprite_extractor_gui.py
/>
📝
注意事项
- 这个项目使用特定版本的依赖包组合
- Windows
10/11
支持(实验性)
- 需要特定版本的
PyTorch
生态系统
BAT 文件
功能 启动口型追踪GUI.bat 主程序 实时口型同步(最常用)
启动多视频切换GUI.bat 多视频切换系统 启动口部擦除调整器.bat 调整口部擦除参数 启动口部精灵图提取器.bat 从视频中自动提取口部图片
📖
快速上手指南
- 双击
启动口型追踪GUI.bat启动主程序- 在
GUI
中选择:
- 视频文件:
assets/assets03/loop.mp4- 口部目录:
assets/assets03/mouth- 按顺序操作:
- ①
"解析→校准"
对着麦克风说话,角色嘴部就会动了!
📁
项目结构
bbb-MotionPNGTuber-main/├──
依赖锁定文件



