coze 实战:手把手搭建宠物打工短视频工作流,自动生成趣味视频
大家吼,我是专注于AI的Piupiu!
我不是高手,但是想和大家分享自己学到的好玩好用的工作流~
大家在某抖有没有刷到过小猫咪打工的短视频,类似于人类打工vlog快剪。按照视频的内容,如果是普通人估计没啥人看,换成萌宠真的就太可爱,忍不住的想看下去。
如此好的流量,工作流必须得学一下!

实打实的分享,自己是跑了一遍全流程的,有什么坑都会和大家说。
先一起看一下我生成的效果再上手也不迟~
01 效果展示
小猫奶茶店1
02 工作流截图



节点看上去略多了些,其实都是老朋友了,而且在涉及到视频的工作流也经常用到,也很简单,熟悉了就好。你可以的!
03 搭建教程
3.0 流程思考
【一定要先梳理一下流程,不要想一步搭一步,很容易漏流程】
-> 定义萌宠的外在形象,打工场景
-> 依据形象、场景生成生图提示词,并生成场景图
-> 依据场景图、打工场景生成视频提示词,并生成视频
-> 草稿的前期工作,确定时间线、选择背景音乐、时间线对齐
-> 创建草稿与添加数据
-> 输出草稿id
3.1 搭建工作流
登录网站:https://www.coze.cn/
按照图中的1、2、3、4的步骤创建。名称不能是中文嗷。

3.2 开始节点
appearance:宠物的外在形象,比如带一个红色帽子,穿一个白色围裙。【这个工作流目前基础宠物是一只小胖橘猫,在后面的提示词中也可以修改形象】
scene:打工的地点
key:后续生图生视频需要的插件密钥

3.3 大模型节点-生图提示词生成器
目前的设定是25s的视频,分为5个分视频组成,则需要生成5张图,每张图代表一个分镜头的内容
引用开始节点的appearance与scene,让大模型生成五张图的提示词,并且具有故事性

系统提示词太长啦,需要同学留言滴滴,不发我是小猪

用户提示词与输出就很简单,注意输出是一个字符串数组类型

3.4 图像生成
因为有5张图,调用循环节点实现处理

3.4.1 循环
引用1-大模型的输出,字符串数组可以作为循环的依据,output那里可以先不填,等到后面循环体搭建好再添加

3.4.2 生图插件
我使用的是即梦生图插件,检索即梦图像生成
这里需要引用key(额外付费的密钥,不做推荐)、每次循环的提示词,确定模型的版本与图片的比例

3.5 批处理生成视频提示词
调用批处理节点

3.5.1 批处理
引用1-大模型的提示词与2-循环节点生成的5张图片作为处理内容

3.5.2 批处理体
调用大模型节点,进行每个分镜的视频提示词生成

同样系统提示词太长啦,就不在这里放完了,需要同学留言,我发你~

用户提示词与输出如下
3.6 生成视频
采用循环来实现5个分镜视频生成

3.6.1 循环
两个变量,一个是生成的5张图一个是视频的提示词

3.6.2 视频生成
这里调用的是即梦的视频生成插件,也是需要额外的资源点,不做推荐哈

3.7 剪映草稿前处理
这里放一起说了,这些节点也是常客了,在剪映小助手中添加

下图框住的都是一些常用的插件

先定义视频的时间长度,引用timelines插件
duration是总时长,num是有记者分镜视频片段
有两个输出,一个是总时间,一个是包含每个分镜时间段的数组

将分镜和时间线对齐,一个分镜对应一个时间段
注意这里引用的是时间线的timelines数据

这里引用了一个大模型生图背景音乐选择的提示词【当然也可以不要,直接用关键词检索】

提示词很短,放这里啦

用户提示词与输出

添加检索背景音乐插件,引用生成的提示词,自动匹配一个合适的BGM

同样,要将BGM与时间线对齐

3.8 创建草稿与添加内容
这里就更简单啦!没有太多的技巧,同样用到的都是剪映小助手的插件

添加create_draft插件,输入匹配的宽高

添加add_video与add_audio来添加视频与音频


3.9 结束节点
引用创建草稿的id就可以喽

至此工作流就搭建完成啦~
04 工作流测试
测试案例

输出

打开剪映小助手工具,输入output的草稿id,自动下载到本地

下载完成,打开剪映就能开看,或者自己将文件夹导入到里面

直接点击进入就能看到所有的轨道了!有什么不满意的地方调整一下就好~

这个视频我不是用了额外的资源嘛,其实还是有点贵的,生图和视频分镜都要算钱。中间再遇到生成失败真的哭死
以后还是和大家多分享一些图文的工作流吧
今天的学习就结束啦!辛苦了各位!一起加油!

创作不易可以给我点个赞嘛 ლ(′◉3◉`ლ)
AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。
更多推荐

所有评论(0)