【水贴】2024/9/15随记

奇奇怪怪的ID

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

我经常听人说，几千张素材就能练一个很好的模型，素材不是越多越好，



说一下自己未经证实的想法，同一角度下缺失的表情、光影、肤质细节，模型并不能凭空生成，


几千张能练出很好是因为在相同参数（四维、bs）相同迭代的情况下，


同一素材受训次数比素材量多的模型经历更多次的训练，


以纯扭曲为例：


   因为纯扭曲存在（Epoch）这玩意儿


   src or dst 单素材受训次数 = 迭代数 × bs ÷ src or dst素材总量
（400=1000000×8÷20000）


   模型效果 = src or dst单素材 - src or dst单素材受训次数的效果（素材自身、设备等不同因素的影响，单次受训效果也不一样）


   


所以很轻易就得到了一个”很好“的模型


好了，纯纯吐槽，认知不同，不干扰各位自己的想法，因为我自己也不确定，懒得看论文（看不懂）和源码


玛德  炼丹太痛苦了


.

dfl9999

炼丹怎么会痛苦，痛苦的是显卡，用mve切脸、画遮罩、训练遮罩才是地狱，我手动画了一晚上遮罩，结果内存duan了，一晚上白费力气，还要重置mve，现在4点，昨天晚上9点开始画的，现在重新来过

奇奇怪怪的ID

dfl9999 发表于 2024-9-15 04:19
炼丹怎么会痛苦，痛苦的是显卡，用mve切脸、画遮罩、训练遮罩才是地狱，我手动画了一晚上遮罩，结果内存dua ...

我都是一帧一帧地在电视剧里取帧（很费劲，主要是那会儿也闲），然后导出后直接用快切切图，因为是取帧的缘故，不存在模糊和错图，可能会有多余的人脸出现，但是快切能解决，导出特征点一集查看一遍，有问题的手切（很少，通常不到10张），再然后就上万能遮罩了，然后遮罩差错的话通常我都不会批量导出查，而是训练过程中看到了就标记出来重新手画

天光脑震荡

想人物唱歌说话时对得上嘴型，这方面的素材还是多点好，个人认为

奇奇怪怪的ID

天光脑震荡 发表于 2024-9-15 07:15
想人物唱歌说话时对得上嘴型，这方面的素材还是多点好，个人认为

只要不是重复的、特征点错的、模糊的，其实都可以，但是会耗费更多的时间

天光脑震荡

奇奇怪怪的ID 发表于 2024-9-15 08:13
只要不是重复的、特征点错的、模糊的，其实都可以，但是会耗费更多的时间 ...

我就看过一些单纯只会张口闭口嘴型对不上的deepface换脸视频，看着都觉得尴尬

whyan

dfl9999 发表于 2024-9-15 04:19
炼丹怎么会痛苦，痛苦的是显卡，用mve切脸、画遮罩、训练遮罩才是地狱，我手动画了一晚上遮罩，结果内存dua ...

太可了

zhengma96

【老鸟进阶】练就超清Src素材的必要事项
https://dfldata.cc/forum.php?mod=viewthread&tid=1612
(出处: deepfacelab中文网)

总结：全角度光影表情丰富的任何资源（分辨率最好达到2-8K，含多极限角度）
             数量没有要求！图片质量和电脑配置有要求，越多越好，越清晰越好，电脑配置越强越好

pasanonic

如果只要求角度，其实图 6000张左右足以，并不是每一个连贯帧都要，1 3可以学2，46可以学5，以此类推，模型训练会补脑，但是涉及到表情就复杂了，嘴、眼、鼻、眉毛、皱纹有变态点的再来个舌头、牙齿，那图量恐怖的吓人，还有换脸视频的时间长短 。

奇奇怪怪的ID

pasanonic 发表于 2024-9-15 11:00
如果只要求角度，其实图 6000张左右足以，并不是每一个连贯帧都要，1 3可以学2，46可以学5，以此类推，模型 ...

所以我有一个29万8的素材包，现在删剩20万4了