大家吼,我是专注于AIPiupiu

我不是高手,但是想和大家分享自己学到的好玩好用的工作流~

大家在某抖有没有刷到过小猫咪打工的短视频,类似于人类打工vlog快剪。按照视频的内容,如果是普通人估计没啥人看,换成萌宠真的就太可爱,忍不住的想看下去。

如此好的流量,工作流必须得学一下!

实打实的分享,自己是跑了一遍全流程的,有什么坑都会和大家说。

先一起看一下我生成的效果再上手也不迟~

01 效果展示

小猫奶茶店1

02 工作流截图

节点看上去略多了些,其实都是老朋友了,而且在涉及到视频的工作流也经常用到,也很简单,熟悉了就好。你可以的!

03 搭建教程

3.0 流程思考

【一定要先梳理一下流程,不要想一步搭一步,很容易漏流程】

-> 定义萌宠的外在形象,打工场景

-> 依据形象、场景生成生图提示词,并生成场景图

-> 依据场景图、打工场景生成视频提示词,并生成视频

-> 草稿的前期工作,确定时间线、选择背景音乐、时间线对齐

-> 创建草稿与添加数据

-> 输出草稿id

3.1 搭建工作流

登录网站:https://www.coze.cn/

按照图中的1234的步骤创建。名称不能是中文嗷。

3.2 开始节点

appearance:宠物的外在形象,比如带一个红色帽子,穿一个白色围裙。【这个工作流目前基础宠物是一只小胖橘猫,在后面的提示词中也可以修改形象】

scene:打工的地点

key:后续生图生视频需要的插件密钥

3.3 大模型节点-生图提示词生成器

目前的设定是25s的视频,分为5个分视频组成,则需要生成5张图,每张图代表一个分镜头的内容

引用开始节点的appearancescene,让大模型生成五张图的提示词,并且具有故事性

系统提示词太长啦,需要同学留言滴滴,不发我是小猪

用户提示词与输出就很简单,注意输出是一个字符串数组类型

3.4 图像生成

因为有5张图,调用循环节点实现处理

3.4.1 循环

引用1-大模型的输出,字符串数组可以作为循环的依据,output那里可以先不填,等到后面循环体搭建好再添加

3.4.2 生图插件

我使用的是即梦生图插件,检索即梦图像生成

这里需要引用key(额外付费的密钥,不做推荐)、每次循环的提示词,确定模型的版本与图片的比例

3.5 批处理生成视频提示词

调用批处理节点

3.5.1 批处理

引用1-大模型的提示词与2-循环节点生成的5张图片作为处理内容

3.5.2 批处理体

调用大模型节点,进行每个分镜的视频提示词生成

同样系统提示词太长啦,就不在这里放完了,需要同学留言,我发你~

用户提示词与输出如下

3.6 生成视频

采用循环来实现5个分镜视频生成

3.6.1 循环

两个变量,一个是生成的5张图一个是视频的提示词

3.6.2 视频生成

这里调用的是即梦的视频生成插件,也是需要额外的资源点,不做推荐哈

3.7 剪映草稿前处理

这里放一起说了,这些节点也是常客了,在剪映小助手中添加

下图框住的都是一些常用的插件

先定义视频的时间长度,引用timelines插件

duration是总时长,num是有记者分镜视频片段

有两个输出,一个是总时间,一个是包含每个分镜时间段的数组

将分镜和时间线对齐,一个分镜对应一个时间段

注意这里引用的是时间线的timelines数据

这里引用了一个大模型生图背景音乐选择的提示词【当然也可以不要,直接用关键词检索】

提示词很短,放这里啦

用户提示词与输出

添加检索背景音乐插件,引用生成的提示词,自动匹配一个合适的BGM

同样,要将BGM与时间线对齐

3.8 创建草稿与添加内容

这里就更简单啦!没有太多的技巧,同样用到的都是剪映小助手的插件

添加create_draft插件,输入匹配的宽高

添加add_videoadd_audio来添加视频与音频

3.9 结束节点

引用创建草稿的id就可以喽

至此工作流就搭建完成~ 

04 工作流测试

测试案例

输出

打开剪映小助手工具,输入output的草稿id,自动下载到本地

下载完成,打开剪映就能开看,或者自己将文件夹导入到里面

直接点击进入就能看到所有的轨道了!有什么不满意的地方调整一下就好~


这个视频我不是用了额外的资源嘛,其实还是有点贵的,生图和视频分镜都要算钱。中间再遇到生成失败真的哭死

以后还是和大家多分享一些图文的工作流吧

今天的学习就结束啦!辛苦了各位!一起加油!

创作不易可以给我点个赞嘛 ლ(′◉3◉ლ)

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐