大家吼,我是专注于AI的Piupiu!
我不是高手,但是想和大家分享自己学到的好玩好用的工作流~
大家在某抖有没有刷到过小猫咪打工的短视频,类似于人类打工vlog快剪。按照视频的内容,如果是普通人估计没啥人看,换成萌宠真的就太可爱,忍不住的想看下去。
如此好的流量,工作流必须得学一下!
实打实的分享,自己是跑了一遍全流程的,有什么坑都会和大家说。
先一起看一下我生成的效果再上手也不迟~
01 效果展示
小猫奶茶店1
02 工作流截图
节点看上去略多了些,其实都是老朋友了,而且在涉及到视频的工作流也经常用到,也很简单,熟悉了就好。你可以的!
03 搭建教程
3.0 流程思考
【一定要先梳理一下流程,不要想一步搭一步,很容易漏流程】
->定义萌宠的外在形象,打工场景
->依据形象、场景生成生图提示词,并生成场景图
->依据场景图、打工场景生成视频提示词,并生成视频
->草稿的前期工作,确定时间线、选择背景音乐、时间线对齐
->创建草稿与添加数据
->输出草稿id
3.1 搭建工作流
登录网站:https://www.coze.cn/
按照图中的1、2、3、4的步骤创建。名称不能是中文嗷。
3.2 开始节点
appearance:宠物的外在形象,比如带一个红色帽子,穿一个白色围裙。【这个工作流目前基础宠物是一只小胖橘猫,在后面的提示词中也可以修改形象】
scene:打工的地点
key:后续生图生视频需要的插件密钥
3.3 大模型节点-生图提示词生成器
目前的设定是25s的视频,分为5个分视频组成,则需要生成5张图,每张图代表一个分镜头的内容
引用开始节点的appearance与scene,让大模型生成五张图的提示词,并且具有故事性
系统提示词太长啦,需要同学留言滴滴,不发我是小猪
用户提示词与输出就很简单,注意输出是一个字符串数组类型
3.4 图像生成
因为有5张图,调用循环节点实现处理
3.4.1 循环
引用1-大模型的输出,字符串数组可以作为循环的依据,output那里可以先不填,等到后面循环体搭建好再添加
3.4.2 生图插件
我使用的是即梦生图插件,检索即梦图像生成
这里需要引用key(额外付费的密钥,不做推荐)、每次循环的提示词,确定模型的版本与图片的比例
3.5 批处理生成视频提示词
调用批处理节点
3.5.1 批处理
引用1-大模型的提示词与2-循环节点生成的5张图片作为处理内容
3.5.2 批处理体
调用大模型节点,进行每个分镜的视频提示词生成
同样系统提示词太长啦,就不在这里放完了,需要同学留言,我发你~
用户提示词与输出如下
3.6 生成视频
采用循环来实现5个分镜视频生成
3.6.1 循环
两个变量,一个是生成的5张图一个是视频的提示词
3.6.2 视频生成
这里调用的是即梦的视频生成插件,也是需要额外的资源点,不做推荐哈
3.7 剪映草稿前处理
这里放一起说了,这些节点也是常客了,在剪映小助手中添加
下图框住的都是一些常用的插件
先定义视频的时间长度,引用timelines插件
duration是总时长,num是有记者分镜视频片段
有两个输出,一个是总时间,一个是包含每个分镜时间段的数组
将分镜和时间线对齐,一个分镜对应一个时间段
注意这里引用的是时间线的timelines数据
这里引用了一个大模型生图背景音乐选择的提示词【当然也可以不要,直接用关键词检索】
提示词很短,放这里啦
用户提示词与输出
添加检索背景音乐插件,引用生成的提示词,自动匹配一个合适的BGM
同样,要将BGM与时间线对齐
3.8 创建草稿与添加内容
这里就更简单啦!没有太多的技巧,同样用到的都是剪映小助手的插件
添加create_draft插件,输入匹配的宽高
添加add_video与add_audio来添加视频与音频
3.9 结束节点
引用创建草稿的id就可以喽
至此工作流就搭建完成啦~
04 工作流测试
测试案例
输出
打开剪映小助手工具,输入output的草稿id,自动下载到本地
下载完成,打开剪映就能开看,或者自己将文件夹导入到里面
直接点击进入就能看到所有的轨道了!有什么不满意的地方调整一下就好~
这个视频我不是用了额外的资源嘛,其实还是有点贵的,生图和视频分镜都要算钱。中间再遇到生成失败真的哭死
以后还是和大家多分享一些图文的工作流吧
今天的学习就结束啦!辛苦了各位!一起加油!
创作不易可以给我点个赞嘛ლ(′◉3◉`ლ)