即刻App年轻人的同好社区
下载
App内打开
Frank.Lin
10月前
这周末研究多Agent协作的副产品《完全免费一键生成新闻视频》,源码在这里:
gist.github.com

本次特意尝试了谷歌的PaLM的API,毕竟完全依赖OpenAI也是比较大的风险,从最近的情况来看是这样的。

流程:
1、给出事件,让LLM规划搜索关键词
2、使用DuckDuckGO搜索API搜索关键词返回结果
3、LLM总结搜索结果
4、LLM撰写新闻稿
5、使用Azure TTS服务转语音
6、使用Segmind API生成主播图片(模型是SDXL)
7、使用3年前爆火的开源项目Wav2Lip让图片说话

最后一步是比较粗糙了,应该用Heygen之类的比较先进的方案,这不是为了快速实现完全免费一键生成吗🤣.....有兴趣的同学可以将视频生成这一块加强一下!

整个流程用到的服务:
Google Colab 免费版
PaLM API,目前免费
Azure TTS,免费额度内
Segmind API,每日一千张免费
01:08
06

来自圈子

圈子图片

AI探索站

75200人已经加入