点击上方卡片关注 不要错过精彩文章
持续更新有关Agent的最新搭建思路和工作流分享，希望能给您带来帮助，点一点上方的🔵蓝色小字关注，你的支持是我最大的动力！🙏谢谢啦！🌟"
大家好！我是舰长
目前最强的视频模型，肯定不要舰长多说吧！
出来当天，舰长跑了几十个视频都没有限制，而现在简简单单跑个30个就不够了
真的太难受了，想要继续还要花费很多才可以，同样制作出来的视频有水印也是一个大麻烦，这几天关去水印的软件都花不少钱，免费的去除的有瑕疵。
说到这很多就不得不提一下，open AI的发布会公布了这款最强视频模型的API价格
这些价格可谓是不便宜，但同样国内的一些中转网站就很便宜了，5毛左右视频。借助这些平台舰长也直接制作一款Coze插件方便大家调用。
借助这款插件，舰长搭建了一套工作流，是可以产出儿童绘本故事视频的工作流；通过这个案例来尝试sora模型接入到Coze中的效果。
整套流程是可以做到根据主题，生成绘本的画面，生成AI视频。以及合并为一个完整的视频并添加一些字幕。
接下来舰长把完整的流程、思路、节点配置分享给大家。
开始节点
设置一个变量即可，整个工作流就根据提供的一个主题或者简单的故事线索进行运行工作流
1.大模型节点：生成绘本的故事分镜
输入引用开始节点
系统提示词
用户提示词
输出：需要把变量类型改为Array<string>，因为目前sora的视频只有10s，一个儿童绘本的时间在40到1分钟左右。所以需要以数组的形式输出。
批处理
批处理的输入模块只需要引用第一个模型节点的输出
2.Sora2_text_to_video
这款工具是舰长开发的插件，需要在插件商店搜索"杰克船长视频生成"即可
插件一共有两个工具：视频都无水印
Sora2_pic_to_video：为图生视频，图生视频的效果还不是非常高，APi接口目前还存在一定的限制。但视频清晰度已经提高很多，等待一段时间，图生视频的质量会上来。
Sora2_text_to_video：为文生视频，效果十分不错。舰长团队的小伙伴，通过一段简单的提示词，制作的视频（6个视频4个破10w+，直接起号成功）
这两款工具，平均在2分钟左右一个视频，批处理不影响视频返回速度，也就是10个也是2分钟左右。
继续回到工作流中，工作流主要用的就是Sora2_text_to_video文生视频的插件
api_key：需要去平台上获取这个密钥，网址：https://api.kafeiai.cn
aspect_ratio:视频的尺寸，目前只有16:9和9:16
Hd:视频是否高清
prompt：就是生成视频的提示词，直接引用批处理的input
3.generate_video_captions_sync
在插件搜索"字幕获取"是官方开发的，主要就是提取视频中的声音文字
url：需要引用节点2，前面一个节点的输出video_url
批处理的输出
一个是节点2的输出
另一个为字幕获取的输出
4.concat_videos
官方出品的视频剪辑插件，在插件商店搜索"视频剪辑工具"
选择合并视频片段的工具进行添加
videos：是视频的片段列表；引用批处理节点的output，也就是视频的输出
transitions：是视频拼接的转场，可设置也可以不设置，需要自行编写格式
5.时间线生成代码
比较关键的一个节点，代码节点；生成后面节点要用到的一些参数
但因为格式问题，代码舰长已经打包好，文章结尾有领取方式
输入参数名为input；引用的批处理节点字幕的输出
输出配置：输出的变量一定要和舰长的一致
time_intervals：类型为Array<object>
start和end是time_intervals的子项：类型多少number
text：类型为Array<string>
6.create_draft
创建草稿插件，需要在插件商店搜索"剪映小助手"找到名称为"create_draft"
设置如图设置视频的尺寸
7.str_to_list
在插件商店搜索"剪映小助手数据生成器"，然后找到名称为"str_to_list"的工具，主要功能就是将单个的string格式转位Array<string>格式进行输出
需要引用节点4的输出url
8.timelines
在插件商店搜索"剪映小助手数据生成器"，然后找到名称为"timelines"的工具，主要功能就是生成时间线
因为舰长设定的是4个视频，那时间就是40s，在图中显示的是40000000；是时间单位微秒
9.视频数据生成video_infos
在插件商店搜索"剪映小助手数据生成器"，然后找到名称为"video_infos"的工具，主要功能就是生成视频的数据格式
timelines：引用节点8的输出
video_urls：引用节点7的输出
height和width和创建草稿插件保持一致
10.视频导入剪映add_videos
视频导入剪映插件，需要在插件商店搜索"剪映小助手"找到名称为"add_videos"
draft_url：引用节点6的draft_url
video_infos：引用节点9的输出
11.字幕数据生成caption_infos
在插件商店搜索"剪映小助手数据生成器"，然后找到名称为"caption_infos"的工具，主要功能就是生成字幕的数据格式
texts：引用节点5的输出text
timelines：引用节点5的输出time_intervals
font_size：5
12.字幕导入剪映add_captions
视频导入剪映插件，需要在插件商店搜索"剪映小助手"找到名称为"add_captions"
captions：引用节点11的输出
draft_url：引用节点6的输出
font_size：5
transform_y：-800
13.云渲染视频gen_video
视频导入剪映插件，需要在插件商店搜索"剪映小助手"找到名称为"gen_video"
这款插件可以将视频直接渲染出来，但是需要用到速推的api，获取地址为：https://ts.fyshark.com/#/userInfo
draft_url：引用节点6的输出
结束节点
引用节点6的输出为草稿地址，需要下载速推的提取视频的本地软件
还有一个是云渲染视频，也就是节点13的输出video_url；这个链接可以直接拿到完整的视频
目前的sora视频效果还有很大的进步空间，目前已经看到圈内人制作完整的AI漫剧了，一度让我怀疑是找到完整的漫剧，加上sora的水印。
先接入到工作流中，让视频的产出达到自动化，以及生成效率的提升。
本次的分享就到，您有收获请麻烦您一键三连,搭建卡点可以加入舰长的交流群进行交流，有关本文中的代码资料的，评论"1013"添加下方二维码领取🙏
关注公众号并添加舰长微信，领取智能体学习资料，并参与智能体技术直播讲解
另外非常欢迎大家加入[唐舰长AI落地智能体交流群],主要交流群每周都会进行公益直播教大家搭建AI智能体工作流
没有评论:
发表评论