分享
自动生成批量视频openAI+SD
输入“/”快速插入内容
自动生成批量视频openAI+SD
文章来源晓雅聊AI知乎:
https://zhuanlan.zhihu.com/p/641710870
小说推文的福利来了
之前有看到过做小说推文的副业, 根据小说内容生成吸引人的图片, 配以小说的文字或音频。用户使用你提供的链接进行下载, 赚取拉新费。刚好看到了这个全自动生成视频工具, 分享给大家。
正常情况下做一篇小说的视频推广, 最简单的就是把文本转成语音, 再配一段与文本不相关的视频, 比如一段解压视频, 或者一段王者荣耀视频。如果想要剪辑的匹配度高一点, 就要到处找素材, 进行情节匹配, 再进行编辑修改, 耗时耗力。
那有没有简单一点的方法呢?
今天就来介绍一个工具, 导入文本, 就能根据文本一键生成视频。
先来看看原作者 B站UP西装革律直出的效果!
很棒对不对, 经过我的探索, 使用这个工具文本跟模型的匹配度很重要! !!
接下来我来教你怎么做
工具说明
工具使用Pyth on 进行编写, 利用 Python 自动化执行文本处理工作及音、视频生成。整合包已经集成工具所需的运行环境, 不需要再进行运行环境的部署, 解压即用。
工作流程如下:
1.
使用segtok 工具对长文本进行语义分割
2.
通过使用OpenAI 的自然语言大模型对文本进行翻译和进一步处理后生成用于绘图的关键词
3.
使用 EDGE TTS生成文本所对应的音频文件
4.
利用 Stable Diffusion 的 API 接口输入绘图所需的 prompts 和参数生成图片
5.
最后使用 Moviepy 对已经编码的图片、音频文件进行对齐合成视频文件
生成视频文件后, 我们需要导入视频编辑软件进行调整, 可以调整图片的视角, 让图片动起来等等。
到此就生成了一个小说推广视频, 就可以发布各个平台啦。
下面是脚本的执行过程
下载文件
作者的整合包下载地址: 1.1版整合包获取链接
需要替换文件step2, 不然生成图片会报404错误:
step2_txt_to_image. py
将解压后的文件放到D盘根目录! ! !
将解压后的文件放到D盘根目录! ! !