上次我们详细介绍了如何在 ModelScope 上"白嫖"训练基于 Qwen-Image 模型 的 LoRA，整个流程可以归纳为三个核心步骤：
LoRA的整个训练环节中最耗精力的就是素材收集，我在上期文章中详细讲解过素材收集的方法以及打标的注意事项。今天我们再来讲一讲如何在ModelScope上免费训练Wan2.1视频模型lora的方法。训练Wan2.1模型loRA的流程和Qwen-image的大同小异，为了节省时间，我将直接复用上期训练Qwen-image LoRA时准备好的素材。ModelScope会将我们之前训练过的素材以数据集的形式保存起来，我们打开之前的数据集。这里为了方便没看过上期文章的同学理解，下面我将简要演示一次素材准备的完整流程。我们首先要准备好一张基准素材作为人物原型。我会借助Qwen-image-edit-plus工作流强大的图片一致能力，通过提示词让人物调整角度、姿势等方式，生成大约10-15张左右同一个人的不同角度和姿势的图片。Qwen-image-edit-plus工作流地址：
https://www.runninghub.cn/post/1971563492245499905今天我们用姿势参考的方法再为数据集增加一张全身图片素材。这个工作流默认加载了三张图片，我们直接删掉下图红圈中的图片加载节点，选择中直接按下键盘上的删除键即可。提示词为：保持图1人物的一致性，让图1的女人做出和图2女人一样的姿势宽：1080，高：1920（与参考图保持一致，确保生成效果自然）另外，还可以提高图片的批次，我这里设置为4，代表一次生成4张图片，这样可以有4张图片供我们进行挑选。从VAE解码节点的输出端拖拽出一根连接线，在弹出的菜单中选择"预览图像"节点。预览图像节点生成的图片没有水印，可直接用于训练。选中满意的图像后，从此节点保存即可。
素材准备好后，回到ModelScope工作台的数据管理中，打开我们的数据集，拉到最底面，从本地添加我们刚刚生成的图片。数据集里的其它图片在上期文章里都已经打过标了，现在现在只需要处理新加入的图像。1、鼠标点击新添加的图片，会弹出一个图片详情页面，点击右下角的"获取AI推荐提示词"按钮。2、将生成的自然语言提示词点选至左侧，并翻译成中文。3、删除提示词中所有关于人物外貌和服饰的描述（避免过拟合）。打标原则：只保留人物姿态、动作、场景等通用信息，剔除身份特征描写。2、设置模型中英文名字和触发词，其它参数默认即可。训练结束后，系统默认保存4个模型，我们可以选取其中一个进行效果测试。视频生成设置：选择wan2.1模型，文生视频的模式，配合刚刚训练出来的lora，提示词注意要加上触发词：liyuegirl，点击生成视频。
继续观看
0元0代码，让你的角色"活"过来！Wan2.1 视频 LoRA 训练指南
,
0元0代码，让你的角色"活"过来！Wan2.1 视频 LoRA 训练指南
删除所有提示词，提示词只留"触发词+一个女孩"，也能比较好的还原人物形象。
继续观看
0元0代码，让你的角色"活"过来！Wan2.1 视频 LoRA 训练指南
,
0元0代码，让你的角色"活"过来！Wan2.1 视频 LoRA 训练指南
当然，我们还可以将这个lora加载到comfyui中随意使用。https://modelscope.cn/models/erdoncn/wan2.1-liyuegirl/summary?version=ckpt-20
----------我是分割线----------
【如何获取工作流】
目前RunningHUB可以说是插件和模型更新最快的网站了，如果想体验 ComfyUI最新版的功能，可以到RunningHUB上面去体验。如果通过我的邀请码注册，可以获得1000点积分，这些积分可以白嫖很长时间了，每日登录还能再获得100积分。https://www.runninghub.cn/?inviteCode=3qo65owt我的很多工作流也都上传到了RunningHUB平台上面，在平台上面搜索"青橙"就能搜到，这些工作流可以免费下载到本地，也可以用刚刚注册时送的积分免费在平台上面体验。
感谢您的阅读，麻烦点个赞+在看吧！
没有评论:
发表评论