点击上方卡片关注 不要错过精彩文章
读完这篇文章,别忘记给舰长点一个关注!舰长的智能体搭建文章,不仅是节点的构建,也有思路的分享。智能体搭建最重要的就是思路。最希望,能给大家带来不一样的搭建思路和方法。
点一点上方的🔵蓝色小字关注,你的支持是我最大的动力!🙏谢谢啦!🌟"
本次分享效果:
大家好!我是舰长
最近一直在给大家分享Coze本地部署,n8n的本地部署,很长时间没有更新Coze工作流相关的教程。
Coze上的视频工作流在搭建视频工作流的时候是有很深的学习感受的,流程需要很强逻辑性,且制作的视频就可以成为自媒体账号的素材。
也很久没有和各位小伙伴分享视频工作流了,对比于目前的视频工作流,大部分采用Coze的语音生成节点,输出视频背景字幕配音总是很差,毫无感情。看过次数少了还行,一但多了就很难坚持看下去。
但舰长本次的流程分享,就可以生成富有感情的视频——历史人物的一生
俗话说的好:"AI一天人间一年"目前AI产品更新太过频繁了,非常多的产品可能我们都无法注意到就已经更新了新的产品,而我们用智能体也不能忽视一些产品的优秀能力。
Minimax产品主推的就是音视频,而Minimax Audio则是专门开发超拟人声音克隆技术,像舰长视频中这种富有感染力的视频声音就是由Minimax生成的,在平台上可以通过提示词描述出语音的特色,让模型去生成克隆音色。
假设我们需要输出一个古代很孤独,看破红尘的女性角色时,就可以直接说:
一位内心萦绕着忧郁的女性,嗓音低沉而轻柔,语速缓缓流淌,声线里藏着生命的倔强,也裹着对人生的万千感叹
用设计好独一无二的音色去合成我们想要的音频即可,合成音频需要有文本,舰长推荐大家做一个智能体输入古人名字输出文案,也可以用一句话让Ai帮我们生成:
# 角色你是一位擅长以第一人称独白叙事的历史人物视频博主,对用户提供的主角的生平事迹有深入且精准的了解。能够从用户提供的主角的视角,创作出一篇精彩的自述一生的独白文案。## 技能### 技能 1: 创作独白文案1. 文案核心形式为第一人称独白,以用户提供的主角"我"的口吻讲述。2. 必须巧妙融入流传千古的名句或针对她普遍的刻板印象/标签,通过营造悬念、反差或强烈情感(悲愤、坚韧、讽刺等),确保开篇 3 - 5 秒就能抓住短视频观众。3. 开篇需自然引入蔡文姬的出生背景与才情初绽,生动描述命运无情转折,细腻刻画,精准呈现高光与危机时刻,以及面临的生死抉择。4. 在创作过程中,使用搜索工具 {这里是联网插件} 在互联网上搜索有关用户提供的主角的知识,确保信息来源准确。## 输出要求- 输出一定是独白文案- 内容不需要有太多()动作,只需要文案即可。
在Minimax的语音合成中,左侧放置文案,右侧调试音色,选址用模型生成的AI音色来制作音乐,制作时间很快稍微等待一下即可。
有了最重要的音频后,就可以根据音频去自动帮我们制作视频,这就需要用到Coze上的工作流来制作,篇幅较长慢慢看~
素材板块:
开始节点
设置变量类型为"File"也就是文件格式,这样可以直接上传生成好的文件
1.提取音频字幕generate_video_captions_sync
在插件中搜索字幕提取插件,选择generate_video_captions_sync工具,引用如图
2.根据字幕识别插件获取asr_timelines
速推的剪映小助手数据生成插件,找asr_timelines工具;引用如图
3.大模型节点:生成绘图提示词
输入:引用节点2输出的texts
系统提示词和用户提示词舰长会和后面的代码一起打包,领取方式在文章结尾
输出:如图配置,尽量保持名字一致
4.输出图片的时间线
输入:
timelines:引用节点2的timelines
texts:引用节点2点texts
output:引用节点3点输出output
详细代码舰长已经打包好~
输出如图配置一致即可
5.批处理
批量生成图片的节点
设置并行运行数量为3
输入参数引用节点3的输出
批处理体中的节点较多,原因是Coze的图像生成节点经常说"配额不足",所以多用几个节点规避一下
6.图像生成
模型用通用pro模型
输入引用批处理的item(in input)
正向提示词
{{input.fenjing}} ,古代墨水画风格,古风意境。
负向提示词
图片中不要出现文字内容
7.选择器
引用节点6的输出data,上一个分支链接后面的节点9;下面分支在连接一个图像生成节点,这个图像生成节点和节点6点配置一样,复制节点6修改名称为节点8即可。
9.变量聚合
引用节点6和节点8点输出data
10.str_to_list_1
速推的剪映小助手数据生成插件,找str_to_list工具;引用如图
批出理的输出也引用这个节点的输出
制作视频部分
基本都是速推插件,在剪映小助手和剪映小助手数据生成器找各种工具,工具名称舰长都没有更改
11.create_draft
创建草稿的插件
12音频列表str_to_list
找在速推的数据生成插件中找str_to_list
13.音频列表audio_timelines
找在速推的数据生成插件中找audio_timelines;引用节点12点输出
14.音频数据audio_infos
找在速推的数据生成插件中找audio_infos
mp3_urls:引用节点12点输出
timelines:引用节点13点输出all_timelines
15.导入音频数据add_audios
找在速推的数据生成插件中找audio_infos
16.背景音乐的链接和时间线
输入参数名为"endtime"引用如图
详细代码舰长已经打包好~
输出如图配置一样即可
17.背景音乐数据audio_infos
找在速推的数据生成插件中找audio_infos;引用节点16的两个输出
18.导入背景音乐add_audios
找在速推的数据生成插件中找add_audios;引用如图
19.批处理图片时间
引用节点4的的输出
20.图片时间线数组输出
输入引用批出理的item(in input)
详细代码舰长已经打包好~
输出如图配置一样即可
21.图片数据imgs_infos
使用批出理
output:引用节点19的输出
imgs:引用节点5点输出
输入:
imgs:引用节点21的infos
timelines:引用节点21的result
图中箭头所指的地方需要把"10"改成"1"
22.导入图片add_images
批处理
item1:引用节点21的输出
输入
draft_url:引用节点11
image_infos:引用节点22的infos
其他配置如图,图中箭头所指的地方需要把"10"改成"1"
23.关键帧values
输入:image引用节点21的输出
详细代码舰长已经打包好~
输出如图配置一样即可
24.关键帧数据keyframes_infos
批处理
item1:引用节点22的输出outputList
values:引用节点23的输出
其他配置如图,图中箭头所指的地方需要把"10"改成"1"
segment_infos引用
values引用
25.导入关键帧add_keyframes
批处理
item1:引用节点24的输出
keyframes:引用节点25的keyframes_infos
其他配置如图,图中箭头所指的地方需要把"10"改成"1"
26.字幕数据caption_infos
texts:引用节点2的输出texts
timelines:引用节点2点输出timelines
font_size:设置5
27.导入字幕add_captions
引用设置如图
结束节点
引用节点11点输出draft_url
到这工作流的分享就结束了,可以制作成智能体发布使用,同时在最后可以加上速推的云渲染插件,就可以直接输出视频:
如果不加这款插件就需要本地下载剪映小助手工具导出:
结尾
最后我们总结一下本次的搭建流程:
1.开始节点运行的使用上传用minimax生成下载的音频
2.所有代码节点的配置一定要和舰长的一致
3.流程很长但是不难,花点时间就可以完整制作出
资料
本次的分享就到,您有收获请麻烦您一键三连,搭建卡点可以加入舰长的交流群进行交流,有关本文中的提示词或者代码资料的,评论"0731"添加下方二维码领取🙏
关注公众号并添加舰长微信,领取智能体学习资料,并参与智能体技术直播讲解
另外非常欢迎大家加入[唐舰长AI落地智能体交流群],主要交流群每周都会进行公益直播教大家搭建AI智能体工作流
没有评论:
发表评论