动漫角色口型同步 AI:让角色照着 MP3 音频开口
Spicy Lip Sync 接收一张角色面部静态图和最长 60 秒的 MP3,生成嘴巴跟着录音动起来的视频。声音由你提供,所以每句台词都和你录制或获得授权的音频完全一致;可选的提示词能微调表情和氛围。
坦白说,这个模型是为真人说话视频做的:它的文档默认的是让真人动起来的用法,没有提到画出来的角色,SpicyHub AI 也还没有在动漫风格的脸上做过验证。偏写实的脸、嘴巴画得清楚的图更容易成功;很小或高度简化的嘴,可能几乎不动,或者动得不自然。生成长的 Pro 视频之前,请先用 Standard 试 5 秒(50 积分)。
让角色开口的步骤
准备一张脸部清楚的图
正脸或稍微侧一点,嘴巴完整可见、闭合或微张,头到肩膀占画面的大部分。别让头发、手或道具挡住嘴巴。支持 JPEG、PNG、GIF、WebP,不超过 50 MB。
剪好音频
只支持 MP3,最长 60 秒、25 MB。按音频秒数计费并向上取整,所以先剪掉首尾的静音;不足 5 秒按 5 秒算。
选 Standard 或 Pro,提示词写短一点
Standard 输出 480p,每秒 10 积分;Pro 输出 720p,每秒 18 积分。提示词可以不填;模型文档建议用简短的英文提示词,比如 “calm smile, small nods, soft studio light”。
先试 5 秒,再做长的
用 Standard 跑一句 5 秒的台词,仔细看嘴型。对得上就生成完整长度;对不上,先换一张脸部图再试,别急着加钱。开始前会显示价格,失败会退回积分,“复用输入”可以用同样的图和音频再来一次。
两档画质,外加一个替代方案
Spicy Lip Sync Standard
480p,每秒 10 积分。所有测试都用它,之后要放大的片段也适合。
Spicy Lip Sync Pro
720p,每秒 18 积分。等 Standard 测试证明角色的脸可行之后,再用来出最终版。
Seedance 2.5(视频工坊)
还没有录音?Seedance 2.5 默认开启声音,可以让角色动起来,最长 30 秒。台词必须对上你已有的录音时,再选口型同步。
所有模型的价格都在AI 模型页面。
什么样的脸更容易对上口型
- 正脸或稍微侧一点。纯侧脸、大幅仰头或低头的脸,能给模型用的嘴部信息更少。
- 嘴巴要真的画出来:有嘴唇或清楚的嘴形,闭合或微张最好。只有一道短线的嘴、或没有嘴的脸,几乎没什么可动的。
- 嘴边不要有遮挡:手、扇子、口罩、杯子、发丝都别横过嘴巴。
- 脸要大。用头到肩膀的裁切图,而不是整张全身立绘。
- 只用你自己的原创角色,或获得许可使用的脸。别人作品里的角色,不能随意替它配台词。
费用怎么算
按音频时长计费,向上取整到整秒,最低按 5 秒算。
- 5 秒:Standard 50 积分,Pro 90 积分。
- 30 秒:Standard 300,Pro 540。
- 60 秒:Standard 600,Pro 1,080。
- 测试期间新账号赠送 50 积分,够做 1 次本指南建议的 5 秒 Standard 试做(每次 50 积分)。更多积分将通过价格方案提供,支付即将开放。
声音的权利
只能用你有权使用的声音:你自己的声音、同意这一用途的配音演员,或许可证允许这样用的语音合成。不得在未经本人同意的情况下模仿真人的声音,也不得让真人看起来说了什么话。用属于你的、虚构的或已获授权的脸和声音来做,就在服务条款(英文)允许的范围内。
和其他工具搭配
详细教程
相关工具
动漫角色口型同步常见问题
音频最长可以多长?
MP3 格式,最长 60 秒、25 MB。更长的台本,在自然停顿处拆开,用同一张脸部图逐段生成。
中文台词可以吗?
没有语言设置,嘴型跟的是录音本身的声音,而不是文字稿。我们没有逐个语言测过准确度,请先用你需要的语言录一句短台词试试。
可以用语音合成代替自己的声音吗?
可以,前提是该语音合成服务的许可允许这种用途。找配音演员也一样,要就这个用途取得对方同意。未经本人同意,不要使用克隆真人声音的音频。
30 秒要多少积分?
Standard 是 300 积分,Pro 是 540 积分。生成前会显示准确数字。
我的角色画风也能动得好吗?
我们无法保证。这个模型是为真人肖像做的,动漫风格的脸还没验证过,最可靠的办法是用你自己的图跑一次 Standard 5 秒。正脸、嘴巴画得清楚的脸,成功率最高。
生成的视频能商用吗?
按服务条款(英文),你生成的内容归你,但须遵守底层模型的许可。脸部图和音频的权利需要你自己确认。
上传的图片和音频会怎么处理?
由 SpicyHub AI 和运行模型的第三方服务商处理。上传的文件会保存在你账号的存储空间里,方便再次使用,也可能用于改进服务;除非你发邮件到 [email protected] 选择退出,生成内容也可能用于营销。删除账号时文件一并删除,想提前删掉某些文件,可以联系客服。详情见隐私政策(英文)。