口型同步功能详解
什么是口型同步
口型同步(Lip Sync)是让角色的嘴部动作和语音内容匹配的技术。你录制或上传一段语音,AI 会分析音频里的音节和停顿,自动让角色的嘴巴做出对应的开合动作。
AniFlow 的口型同步在 2025 年底的版本加入,是让它从「AI 绘画」转向「AI 动漫视频」的关键功能之一。
操作流程
- 先生成一段视频(文字转或图片转都行)
- 在编辑器里找到口型同步入口
- 选择语音来源:录制或上传
- 录制:点按钮直接说一段话,App 会处理时长和音量
- 上传:选一个音频文件(MP3 / WAV,最大 10 MB)
- 等待 AI 处理(通常 10~30 秒)
- 预览效果,不满意可以换语音重试
语音的技术要求
| 项目 | 建议值 |
|---|---|
| 时长 | 与视频长度匹配(6 秒或 10 秒) |
| 采样率 | 16kHz 或以上 |
| 单 / 双声道 | 单声道即可 |
| 人声清晰度 | 无背景音乐、无混响、人声居中 |
效果预期
口型同步的效果取决于几个因素:
语音清晰度。 干净的人声(比如直接对着手机麦克风录)比带背景音乐或环境音的录音效果好很多。
角色面部可见度。 如果角色在画面里脸部被遮挡、角度太偏、或者太远,口型同步会很难准确捕捉。最好选正面或轻微侧面、面部清晰的画面。
语言。 英文、日文、韩文、中文的口型数据都支持,但多语言混合的语音可能出问题。
常见问题
口型和语音对不上。 最常见原因是语音有背景噪音。试试重新录制一段干净的人声,或者用剪辑软件先把背景音乐去掉。
口型太夸张。 AI 在发音时可能会过度张大嘴巴。目前没有手动调节参数的入口,试试换一段语音——不同的语音特征 AI 的处理方式不同。
生成卡死。 如果语音文件太大或格式不对,AI 处理可能会卡住。用音频工具把文件压缩到 3 MB 以内、转成 MP3 格式再试。
