一、灵魂画手爆火视频制作教程

1. 确定转绘风格

图片

风格选择:在抖音搜索"灵魂画手"获取多种风格参考,以@AI小马剧场账号风格为例

素材收集:需要同时保存转绘前后的图片组,保持文件名一致(如001.png)

2. 素材处理

图片

图片

去水印方法:

使用ComfyUI工作流去除文字/logo

上传截图后运行"去除水印logo"命令

示例提示词:"Remove watermarks, logos and text from the image"

3. 模型训练

1)数据集准备

图片

分组要求:

目标组:转绘后的效果图(需统一打标)

控制组:原始影视截图

标签规范:"Remove watermarks...convert into rough line drawing"

2)训练配置

图片

核心参数:

训练轮数=总步数/素材量(450素材×10轮=4500步)

采样设置:可设置每1000步生成效果预览

3)训练监控

质量检查:

通过Loss曲线观察收敛情况

实时查看采样输出的转绘效果

终止条件:一般3000步即可达到理想效果

4)模型应用

图片

图片

使用流程:

将训练好的LORA模型(如LHHS_V1.safetensors)放入ComfyUI/models/loras

在工作流中加载模型并输入标准提示词

上传测试图片运行转换

图片

图片

4. 视频剪辑

图片

制作步骤:

导入原始影视片段到剪映

导出关键帧图片进行转绘

将转绘结果重新导入时间线

添加背景音乐和特效(如故障干扰效果)

最终导出成片

图片

图片

5. 注意事项

素材匹配:确保原图与转绘图严格对应(同名不同文件夹)

训练效率:450张素材建议训练10轮(约4500步)

效果优化:可通过调整CFG值(推荐1.0)控制转绘风格强度

二、知识小结

步骤

核心操作

关键工具

技术要点

素材准备

确定转绘风格并截图保存

抖音平台

需区分转绘前/后两组素材

素材处理

去除水印和文字

comfyui工作流

使用图片编辑流程

模型训练

创建数据集并训练LoRA模型

lora训练大师

需设置目标组/控制组450张素材训练10轮

效果测试

加载训练模型进行转换

comfyui工作流

提示词需包含"线稿风格"

视频剪辑

导入片段并替换关键帧

剪映

需逐帧处理精彩画面

成品输出

添加背景音乐和特效

剪映

推荐使用古风BGM

参数项

设置值

注意事项

效果影响

基础模型

flux 2 klein base 9b

需匹配画风类型

决定风格上限

训练步数

4500步

素材量×轮数

3000步即达标

采样频率

每1000步

可监控训练过程

影响显存占用

图像尺寸

512×512

需统一输入尺寸

分辨率决定细节

标签词

"去除水印+线稿"

需与提示词一致

控制输出风格

处理阶段

传统方式

AI工作流

效率提升

去水印

PS手动修图

comfyui自动处理

10倍提速

风格转换

手绘临摹

LoRA模型转换

质量更稳定

视频合成

AE逐帧制作

剪映批量替换

降低操作门槛

可点击下方原文链接观看视频教程👇

https://comfyit.cn/blog/237/?invite_code=TSH

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐