deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 18426|回复: 141

跟着我一步步做,你也能练出好的模型

  [复制链接]

6

主题

68

帖子

395

积分

初级丹师

Rank: 3Rank: 3

积分
395
 楼主| 发表于 2023-3-12 16:56:45 | 显示全部楼层 |阅读模式
本帖最后由 serenitychou 于 2023-3-20 23:55 编辑

我花了整整一下午整理这些东西,希望能帮你们顺利的用好这个软件。文章后面有自己的技巧和方法,或许能帮你解决生成的图片不像的问题。


无私奉献,我做贡献

需要的下载阅读吧,求个回复和点赞




3月15日补充:基于这个方法,虽然人像达到复刻的级别,但我又发现新的问题,那就是模型的泛化程度不高,没有关键字限定的情况下,与源素材相比变化不大。谁可以告诉我原因,怎么解决?我的素材图有180张。
3月19日问题已解决:泛化不高的情况下,加一些具体的TAG就可以了,但尽量不要用重复的TAG和冲突的TAG,比如有TAG高跟鞋,你又加个TAG凉鞋,你叫它怎么画?经过尝试,好像可以用or连接相关的词语,它就会在几者之间选择。
补充:过犹不及,画黑图无需太勤快,每类一两张就OK了。


AI 绘图经验分享.pdf

340.42 KB, 下载次数: 2155

评分

参与人数 38贡献 +36 收起 理由
木头人 + 1 非常牛!
stonemvp + 1 太棒辣!
meeff + 1
dfllearner + 1 太棒啦!
perryfans + 1 很给力!
li5152 + 1 质量很不错
rv333 + 1 很给力!
Xat + 1 赞一个!
longyf + 1 很给力!
Hulio666 + 1 很给力!
ss47 + 1
boooood + 1
deeplab + 1 很给力!
帅气的咸鱼 + 1
嘎嘎嘎 + 1
binstyleman + 1
668360 + 1
qq396860865 + 1 赞一个!
nacl1415 + 1 很给力!
狗蛋儿快跑 + 1 很给力!

查看全部评分

回复

使用道具 举报

6

主题

68

帖子

395

积分

初级丹师

Rank: 3Rank: 3

积分
395
 楼主| 发表于 2023-3-12 20:08:39 | 显示全部楼层
有一点我补充说明一下,我提供的那个最新版的模型chill被修改了,已经没有SQ方面的内容了,如果有需要的,请自行下载老版本。
回复 支持 反对

使用道具 举报

4

主题

54

帖子

335

积分

初级丹师

Rank: 3Rank: 3

积分
335
发表于 2023-3-27 16:22:51 | 显示全部楼层
首先我得告诉你 你这画黑脸的方法就是错误的 然后再根据原来跟你扯一扯过拟合问题
1 原理:首先你得明白一个基本原理  lora学习是做减法的  就是把你画面内容减去生成的tag剩下的东西如果有固定tag就会学到tag中(这就是tag为啥要唯一不重复)其他的会学到这个lora的画风中 你的画面中出现黑脸原因就在这儿了
根据以上理论很容易推论出如何训练好一个lora
1.素材质量高,角度广,动作多(属于废话)
2.画面里你想保存的tag手动删除,例如人物的眼睛 头发 脸型等固有特征
3.不要的内容就要尽量描述tag打上,
4.如果是人物的话 还需要把人物姿态,构图,动作也要手动补齐,不然训练出来的角度会和你原始素材过拟合
至于其他小妙招到底可行不可行 自己根据原来推理

再来说你动作什么的过拟合问题

那就是因为你没有吧你照片里的动作  镜头 构图 等加到tag里  结果就是被学习了

回复 支持 1 反对 0

使用道具 举报

3

主题

38

帖子

1778

积分

初级丹圣

Rank: 8Rank: 8

积分
1778
发表于 2023-3-19 23:56:18 | 显示全部楼层
我用楼主的方法第一次训练用上了一百来张切了脸的素材加二十来张半身或全身的素材,然后在全身或半身素材里面挑了十来张画黑脸遮罩删tag。结果效果很不错,怼脸的图非常像,上半身出图效果也还好,但是全身就不太像。于是想再挑一些全身的素材在第一次的lora模型上训练,结果再挑三四十张全身的素材,再挑十几张张画遮罩,结果效果非常不好,出的图里面脸直接变黑遮罩。后来重新炼了一份,把两次素材加一起再一起炼,结果虽然没第一次像,但脸没有变黑,也不太会出古神脸,而且全身的情况比第一次练得好一些。
回复 支持 1 反对 0

使用道具 举报

11

主题

684

帖子

4101

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4101
发表于 2023-3-17 23:01:49 | 显示全部楼层
用了楼主方法,训练出来的脸一模一样…,合成512:768,32步就够了。用ck模型,素材五十张左右(不够就换头),扣掉背景,只保留人物。tag里去掉面部信息,每张tag不要太多。分享一个照片风格tag
指令:(lora:模型名称:0.7),tag关键词,
modelshoot style,(best quality, masterpiece:1.1), (realistic:1.4), photo of the most beautiful artwork in the world,intricate elegant, (highly detailed),sharp focus, dramatic,photorealistic,1girl,描绘画面,(High Detail ), 你想要的服装,(Fashion:1.1),((Mottled light and shadow,warm light ,depth of field)),Wide angle view

反向指令:
(((canvas frame))), cartoon, 3d, ((disfigured)), ((bad art)), ((deformed)),((extra limbs)),((close up)),((b&w)), wierd colors, blurry, (((duplicate))), ((morbid)), ((mutilated)), [out of frame], extra fingers, mutated hands, ((poorly drawn hands)), ((poorly drawn face)), (((mutation))), (((deformed))), ((ugly)), blurry, ((bad anatomy)), (((bad proportions))), ((extra limbs)), cloned face, (((disfigured))), out of frame, ugly, extra limbs, (bad anatomy), gross proportions, (malformed limbs), ((missing arms)), ((missing legs)), (((extra arms))), (((extra legs))), mutated hands, (fused fingers), (too many fingers), (((long neck))), Photoshop, video game, ugly, tiling, poorly drawn hands, poorly drawn feet, poorly drawn face, out of frame, mutation, mutated, extra limbs, extra legs, extra arms, disfigured, deformed, cross-eye, body out of frame, blurry, bad art, bad anatomy, 3d render
回复 支持 1 反对 0

使用道具 举报

6

主题

68

帖子

395

积分

初级丹师

Rank: 3Rank: 3

积分
395
 楼主| 发表于 2023-3-13 19:32:27 | 显示全部楼层
aeoluszan 发表于 2023-3-13 16:31
目录名用3,epoch用20真的可行?
很多up都说目录的话真人用100,二次元用10,

目录名的那个3代表的是软件重复读取图片3次,当你图片数量达到要求时,你觉得重复的去学习有必要吗?与其天天学1+1=2,还不如多准备一些1+2=3,2+3=5这样的东西给机器学习。重复一下,以我的经验,高质量的照片100张就够了,我步数大多时间在3000-5000
回复 支持 1 反对 0

使用道具 举报

5

主题

43

帖子

343

积分

初级丹师

Rank: 3Rank: 3

积分
343
发表于 2023-3-12 20:42:18 | 显示全部楼层
我没太懂,为什么要把一些照片挑出来,然后把脸涂黑,放到另一个文件夹,楼主能说说为啥么?这样做有什么好处?
回复 支持 1 反对 0

使用道具 举报

6

主题

68

帖子

395

积分

初级丹师

Rank: 3Rank: 3

积分
395
 楼主| 发表于 2023-3-12 18:49:11 | 显示全部楼层
如果大家都只拿,而连回复一下的欲望都没有,那我还是删了吧
回复 支持 1 反对 0

使用道具 举报

0

主题

50

帖子

2074

积分

初级丹圣

Rank: 8Rank: 8

积分
2074
发表于 2023-3-12 16:57:30 | 显示全部楼层
谢谢分享
回复

使用道具 举报

0

主题

13

帖子

215

积分

初级丹师

Rank: 3Rank: 3

积分
215
发表于 2023-3-12 17:00:53 | 显示全部楼层
谢谢~非常详细的教程。
回复 支持 反对

使用道具 举报

22

主题

244

帖子

2230

积分

初级丹圣

Rank: 8Rank: 8

积分
2230
发表于 2023-3-12 18:23:05 | 显示全部楼层
感谢 感谢  原来是训练底模型不好 所以我练的都不像真人   这论坛的大佬之前都没一个把这个说清楚的 更是没推荐链接  
回复 支持 反对

使用道具 举报

1

主题

57

帖子

1001

积分

初级丹圣

Rank: 8Rank: 8

积分
1001

万事如意节日勋章开心娱乐节日勋章

发表于 2023-3-12 19:33:29 | 显示全部楼层
谢谢楼主 ,收藏学习
回复 支持 反对

使用道具 举报

0

主题

10

帖子

65

积分

高级丹童

Rank: 2

积分
65
发表于 2023-3-12 19:36:39 | 显示全部楼层
jiayou   好好学习
回复 支持 反对

使用道具 举报

6

主题

60

帖子

1669

积分

初级丹圣

Rank: 8Rank: 8

积分
1669

万事如意节日勋章节日欢乐之星勋章

发表于 2023-3-12 20:01:02 | 显示全部楼层
感谢分享,比较详细,适合新手
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27057

万事如意节日勋章

发表于 2023-3-12 20:02:15 | 显示全部楼层
感谢分享。
回复

使用道具 举报

0

主题

72

帖子

865

积分

高级丹师

Rank: 5Rank: 5

积分
865

万事如意节日勋章

发表于 2023-3-12 20:05:22 | 显示全部楼层
谢谢分享。
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-24 11:18 , Processed in 0.204060 second(s), 68 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表