火爆全网的灵魂画手类视频怎么做?教你只用ComfyUI和剪映就能做!
一、灵魂画手爆火视频制作教程
1. 确定转绘风格

风格选择:在抖音搜索"灵魂画手"获取多种风格参考,以@AI小马剧场账号风格为例
素材收集:需要同时保存转绘前后的图片组,保持文件名一致(如001.png)
2. 素材处理


去水印方法:
使用ComfyUI工作流去除文字/logo
上传截图后运行"去除水印logo"命令
示例提示词:"Remove watermarks, logos and text from the image"
3. 模型训练
1)数据集准备

分组要求:
目标组:转绘后的效果图(需统一打标)
控制组:原始影视截图
标签规范:"Remove watermarks...convert into rough line drawing"
2)训练配置

核心参数:
训练轮数=总步数/素材量(450素材×10轮=4500步)
采样设置:可设置每1000步生成效果预览
3)训练监控
质量检查:
通过Loss曲线观察收敛情况
实时查看采样输出的转绘效果
终止条件:一般3000步即可达到理想效果
4)模型应用


使用流程:
将训练好的LORA模型(如LHHS_V1.safetensors)放入ComfyUI/models/loras
在工作流中加载模型并输入标准提示词
上传测试图片运行转换


4. 视频剪辑

制作步骤:
导入原始影视片段到剪映
导出关键帧图片进行转绘
将转绘结果重新导入时间线
添加背景音乐和特效(如故障干扰效果)
最终导出成片


5. 注意事项
素材匹配:确保原图与转绘图严格对应(同名不同文件夹)
训练效率:450张素材建议训练10轮(约4500步)
效果优化:可通过调整CFG值(推荐1.0)控制转绘风格强度
二、知识小结
|
步骤 |
核心操作 |
关键工具 |
技术要点 |
|
素材准备 |
确定转绘风格并截图保存 |
抖音平台 |
需区分转绘前/后两组素材 |
|
素材处理 |
去除水印和文字 |
comfyui工作流 |
使用图片编辑流程 |
|
模型训练 |
创建数据集并训练LoRA模型 |
lora训练大师 |
需设置目标组/控制组450张素材训练10轮 |
|
效果测试 |
加载训练模型进行转换 |
comfyui工作流 |
提示词需包含"线稿风格" |
|
视频剪辑 |
导入片段并替换关键帧 |
剪映 |
需逐帧处理精彩画面 |
|
成品输出 |
添加背景音乐和特效 |
剪映 |
推荐使用古风BGM |
|
参数项 |
设置值 |
注意事项 |
效果影响 |
|
基础模型 |
flux 2 klein base 9b |
需匹配画风类型 |
决定风格上限 |
|
训练步数 |
4500步 |
素材量×轮数 |
3000步即达标 |
|
采样频率 |
每1000步 |
可监控训练过程 |
影响显存占用 |
|
图像尺寸 |
512×512 |
需统一输入尺寸 |
分辨率决定细节 |
|
标签词 |
"去除水印+线稿" |
需与提示词一致 |
控制输出风格 |
|
处理阶段 |
传统方式 |
AI工作流 |
效率提升 |
|
去水印 |
PS手动修图 |
comfyui自动处理 |
10倍提速 |
|
风格转换 |
手绘临摹 |
LoRA模型转换 |
质量更稳定 |
|
视频合成 |
AE逐帧制作 |
剪映批量替换 |
降低操作门槛 |
可点击下方原文链接观看视频教程👇
AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。
更多推荐
所有评论(0)