找到三个开源的 AI 工具,搭配使用,可以流水线搞定“短剧出海”问题😂
1)视频换脸工具 roop,
github.com,提供一张图片就行了,不需要数据集,也不需要训练
2)翻译+配音工具 pyvideotrans,
github.com,支持切换不同的语音识别、文字翻译、文字合成语音工具
3)唇形同步工具 wa2lip,
github.com,唇形同步之后,嘴巴会变得有些奇怪,可以用另外一个开源工具 GFPGAN 进行面部修复,
github.com,有点类似老照片修复技术
这几款工具都能够离线使用,因此也可以通过简单的工程流搭建,实现程序化批量产出。调研完,有点手痒了……