deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: sinksky

发现补角度的绝佳方法!

[复制链接]

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-26 00:49:55 | 显示全部楼层
本帖最后由 fengjunwei 于 2025-5-26 01:35 编辑
WaveBedo 发表于 2025-5-26 00:26
即梦或者可灵可以使src变成光头吗
src有刘海

这有什么难的,不过就像我说的这种在线平台一致性会出现细微差别,而且这些平台可能对某些有限制,有些图片会告诉你违规生成。

如果你不在乎一致性(也就是不在乎像不像)非要在线生成,你就告诉AI,你说图片中男人脱掉了自己的假发,他其实是个光头。

原图.png    和尚.png


说实话这种在线平台生成的效果细节真不能细看
回复 支持 反对

使用道具 举报

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-26 00:53:54 | 显示全部楼层
本帖最后由 fengjunwei 于 2025-5-26 01:22 编辑
国际狄拉克 发表于 2025-5-26 00:41
hunyuan的图片lora练几个epoch有说法吗?我看配置文件默认是1000epoch

轮数默认也行,达到你需要的步数你就可以手动停止,不是说要训练到1000轮,不改的话训练到1000轮会自动停止,设置里比如save_every_n_epochs = 10 也就是10轮保存一次训练出的模型,训练10轮会创建一个对应的文件夹里面有你当前轮次的模型,所以可以按你硬盘大小自己修改成1到100等,你最终主要是关心你的总步数,也就是跑的时候输出显示step=XXXXX就行

训练完你觉得跑少了之后也可以继续训练,设置里checkpoint_every_n_minutes = 60 的话就是60分钟保存一次可恢复训练的训练进度文件,你可以改成你想要的时间

(NCCL_P2P_DISABLE="1" NCCL_IB_DISABLE="1" deepspeed --num_gpus=1 train.py --deepspeed --config examples/hunyuan.toml --resume_from_checkpoint "20250526_xx-xx-xx")


把上面括号里的命令最后那个日期和后面数字换成你训练输出文件夹下面你这次训练产生的那个文件夹,然后直接输入整段命令,就可以继续恢复训练了
回复 支持 反对

使用道具 举报

48

主题

890

帖子

6783

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6783

万事如意节日勋章开心娱乐节日勋章

发表于 2025-5-26 04:43:14 | 显示全部楼层
fengjunwei 发表于 2025-5-26 00:49
这有什么难的,不过就像我说的这种在线平台一致性会出现细微差别,而且这些平台可能对某些有限制,有些图 ...

用真人才能看得出是否会严重降低相似度
我怀疑相似度应该是不行的
我用豆包的ai生成,去掉女子的刘海,真人去掉刘海之后,CG感太重,已经没有相似度了
回复 支持 反对

使用道具 举报

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-26 05:01:08 | 显示全部楼层
WaveBedo 发表于 2025-5-26 04:43
用真人才能看得出是否会严重降低相似度
我怀疑相似度应该是不行的
我用豆包的ai生成,去掉女子的刘海,真 ...

所以要自己练LORA,AI没见过的东西都是自己脑补的,你只有一张图的话AI存粹就是脑补后面所有画面,只有把一个人各种角度喂给AI,也就是变成一个LORA,然后AI才能给你生成符合逻辑的视频。
回复 支持 反对

使用道具 举报

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-26 05:33:19 | 显示全部楼层
本帖最后由 fengjunwei 于 2025-5-26 06:04 编辑
WaveBedo 发表于 2025-5-26 04:43
用真人才能看得出是否会严重降低相似度
我怀疑相似度应该是不行的
我用豆包的ai生成,去掉女子的刘海,真 ...

试了下,果然没LORA也就这样了,不过好在头部角度变化不大,要是头转动以后差距就更大了。

不过你和AI说的也有问题,这种在线平台,一张图作为参考,不要做太复杂的,因为你生成时间只有几秒,这么短的时间里AI要去掉刘海,那直接导致的就是AI注意力都去想怎么去掉了刘海了,比如ai会思考是剪掉还是什么,如果是剪掉那么还要加上复杂的手部和头发交互剪头发的动作和刘海变化的物理过程,最后结果要么就是刘海去的不怎么好,要么脸部注意力下降导致变得不像了,不过这你脸部不崩就说明这AI底模不错了,小概率或许能出好结果,但是如果只是脱掉假发,那么ai只会把头发变成一个整体部分,直接拿下来,那么AI出好结果的概率就很大了。

想要做复杂的内容,就得本地自己练各种场景,动作,人物等,想让AI干什么就能干什么

王祖贤有头发.png 王祖贤光头.png


回复 支持 反对

使用道具 举报

9

主题

59

帖子

2432

积分

初级丹圣

Rank: 8Rank: 8

积分
2432
 楼主| 发表于 2025-5-27 02:45:37 | 显示全部楼层
fengjunwei 发表于 2025-5-26 05:33
试了下,果然没LORA也就这样了,不过好在头部角度变化不大,要是头转动以后差距就更大了。

不过你和AI说 ...

这个效果蛮好了,人物头动的幅度不大的话一致性挺好的
回复 支持 反对

使用道具 举报

48

主题

890

帖子

6783

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6783

万事如意节日勋章开心娱乐节日勋章

发表于 2025-5-27 05:24:13 | 显示全部楼层
fengjunwei 发表于 2025-5-26 05:33
试了下,果然没LORA也就这样了,不过好在头部角度变化不大,要是头转动以后差距就更大了。

不过你和AI说 ...

v2-4599e6c9c324b21873edb24bf8bd987b_720w.jpg

试试这个,
额头有刘海的,才有必要做成光头,
用来练DFL专丹的,有刘海会导致额头黑,
有些刘海很长的

回复 支持 反对

使用道具 举报

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-27 11:59:08 | 显示全部楼层
WaveBedo 发表于 2025-5-27 05:24
试试这个,
额头有刘海的,才有必要做成光头,
用来练DFL专丹的,有刘海会导致额头黑,

额头是不会变黑的,不过还是我之前说的,你如果只在线,就不要给AI太多负担,这图眼睛单眼闭着,我只能让AI保持表情不变来增加注意力,但依然还是会影响一致性。


原图.png 和尚.png

评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 非常好

查看全部评分

回复 支持 反对

使用道具 举报

48

主题

890

帖子

6783

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6783

万事如意节日勋章开心娱乐节日勋章

发表于 2025-5-28 02:41:20 | 显示全部楼层
本帖最后由 WaveBedo 于 2025-5-28 02:49 编辑
fengjunwei 发表于 2025-5-27 11:59
额头是不会变黑的,不过还是我之前说的,你如果只在线,就不要给AI太多负担,这图眼睛单眼闭着,我只能让 ...

效果挺好的,
如果刘海接近眉毛的src,也可以有这个质量,
那就可以用了


另外,lora也可以达到这样的质量吗?
我之前看过不少人做的lora,
相似度似乎很低,而且像3D动漫人物的感觉,都不像真人了

回复 支持 反对

使用道具 举报

0

主题

39

帖子

826

积分

高级丹师

Rank: 5Rank: 5

积分
826

万事如意节日勋章

发表于 2025-5-28 04:14:14 | 显示全部楼层
本帖最后由 fengjunwei 于 2025-5-28 04:31 编辑
WaveBedo 发表于 2025-5-28 02:41
效果挺好的,
如果刘海接近眉毛的src,也可以有这个质量,
那就可以用了

LORA的话没有参考图,直接用文字生成视频,目前人物相似度训练的好整体95%左右吧,3D人物和动漫可以做到99%,有参考图的情况下,那自然是无限接近原人物了,比我上面发的图生视频强很多,不过缺点自然是你所有生成的视频都是以这张图为起点,而且训练的时候你要把这张图加进去效果才最佳,也就是说以后有新的图,你得再训练。所以我更喜欢直接文生视频用LORA,配合动作和场景的LORA,可以实现你所有想象。

你说的不少人做的LORA不像很正常,他们训练用的是FP8精度来训练,而且很多用的是wan2.1这种单注意力模型,wan2.1只适合图生视频的LORA,更有人训练器用的都不对,用汤团猪这些训练器那自然是不行的,还有训练时候的参数也很重要,这帖子上面楼我有简单介绍过

评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 十分给力!

查看全部评分

回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-8-31 13:44 , Processed in 0.108995 second(s), 36 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表