最近在网上看到一些风格可爱的卡通毛毡效果图片,非常喜欢,于是萌生了制作一个能生成此类效果的 LoRA 模型的想法。
本次我们要训练的是一个图像编辑类 LoRA。训练的数据需要以成对的图像形式提供:每组包含一张原始图像和一张经过毛毡风格编辑后的对应图像。以最新的 Qwen-image-edit-Plus 作为底模基础进行训练。
先看下我训练好的 LoRA 效果:
在线AI应用:
在线工作流:
https://www.runninghub.cn/post/1979394793413447682
再回到LoRA训练,这次用的训练平台还是ModelScope,它每天可以免费训练2个LoRA。关于训练LoRA的一些原理和注意事项,我在下面这篇文章中有涉及,大家有兴趣可以两篇文章结合在一起看:这次我们用即梦来制作素材。即梦每天登陆都送积分,这些积分用于制作10多个素材图片基本够用了。请创作一个以红色为背景的插画设计,风格融合皮克斯动画与儿童读物插图的特点,采用毛毡材质作为主要表现手法。画面聚焦于一个3/4侧面视角的头部特写,角色应面向相机方向,表现出可爱和有趣的特质。该设计需具有羊毛毛毡织物艺术的感觉,并受到艺术家莫威廉姆斯(Mo Willems)风格的影响。请确保最终作品为高清格式。即梦会生成4张毛毡效果的图片,从中挑选一张作为目标图片。一共需要制作10-20组左右的素材图片,每组对应一张原始图片,一张目标图片。下面是我制作的素材:上面一行是制作好的毛毡效果图,下面一行是原图。打开ModelScope工作台,打开"模型训练"-->"数据管理"-->"创建数据集"首先为数据集起个名字,然后在类型那里选择"图像编辑数据集"注意:这里每组有两张图片,分别是原图和目标图,分别将我们准备好的原图片和目标图片传到此处。如果图片比较多,你也可以将图片打包成压缩包再上传。
在进行压缩时,请遵循下面的格式命名:例如图片组为1_start.jpg和1_end.jpg,对应标注文本为1.txt。我在上传压缩包的时候,打标内容随便写了"maozhan",现在我们统一在平台上对打标文件进行修改一下。将鼠标停在每组图片上面,会弹出一个"编辑"按钮,点击它就可以对打标内容进行编辑。将提示词更改成"Transform into a wool felt fabric style."(转换成羊毛毛毡织物风格)然后通过复制粘贴,将所有组的打标词全部进行更改,然后点击右上角的开始训练。进入训练设置页面后,专业参数我们一般默认不用去修改,只需要设置好LoRA的中英文名字和触发词,再点击"开始免费训练"就可以了。因为我们是免费用户,所以可能还会出现排队的情况,此时你什么事情也不用去做,关掉页面去做其它事情就可以了。经过漫长的等待,LoRA终于训练好了,一共保留了4个模型, 我们选择其中一个模型去测试效果。https://modelscope.cn/models/erdoncn/maozhan
我把这个LoRA上传到了RunningHUB上面,利用Qwen-edit-2059的工作流跑了几张图,效果也非常棒。
----------我是分割线----------
【如何获取工作流】
目前RunningHUB可以说是插件和模型更新最快的网站了,如果想体验 ComfyUI最新版的功能,可以到RunningHUB上面去体验。如果通过我的邀请码注册,可以获得1000点积分,这些积分可以白嫖很长时间了,每日登录还能再获得100积分。https://www.runninghub.cn/?inviteCode=3qo65owt我的很多工作流也都上传到了RunningHUB平台上面,在平台上面搜索"青橙"就能搜到,这些工作流可以免费下载到本地,也可以用刚刚注册时送的积分免费在平台上面体验。
感谢您的阅读,麻烦点个赞+在看吧!
没有评论:
发表评论