安利一个视频开源的工具 open-chat-video-editor
安利一个视频开源的工具。这个开源的短视频生成和编辑工具名叫open-chat-video-editor。它采用ChatGPT、stable diffusion 以及多模态搜索等人工智能技术,可以实现短句转短视频、网页链接转短视频以及长视频转短视频等功能
主要功能如下:
1)一键生成可用的短视频,包括:配音、背景音乐、字幕等。
2)算法和数据均基于开源项目,方便技术交流和学习
3)支持多种输入数据,方便对各种各样的数据,一键转短视频,目前支持:
短句转短视频(Text2Video): 根据输入的简短文字,生成短视频文案,并合成短视频
网页链接转短视频(Url2Video): 自动对网页的内容进行提取,生成视频文案,并生成短视频
长视频转短视频(Long Video to Short Video): 对输入的长视频进行分析和摘要,并生成短视频
4)涵盖生成模型和多模态检索模型等多种主流算法和模型,如: Chatgpt,Stable Diffusion,CLIP 等
文本生成上,支持:
ChatGPT
BELLE
Alpaca
Dolly 等多种模型
视觉信息生成上,支持图像和视频两种模态,生成方式上,支持检索和生成两种模型,目前共有6种模式:
图像检索
图像生成(stable diffusion)
先图像检索,再基于stable diffusion 进行图像生成
视频检索
视频生成(stable diffusion)
视频检索后,再基于stable diffusion 进行视频生成
GitHub 传送门 网站有教程,感兴趣的可以自己去研究下。