用底丹练专人模型应该选用什么样的DST

w7315511

有人投票回答：D岛国+F遮挡（疑问：那这意思是除了遮罩处理遮挡以外，模型本身还需要学习好遮挡素材效果才能更好吗）论坛就没人详细提过DST大多数都是用岛国的。

遮挡素材不是很考验遮罩吗 要是处理不好听说会影响模型。我之前大多都选用没有什么遮挡的dst，我哭死

pasanonic

专丹也不是万能，你看看成龙的新神话，他自己的素材都那么木讷
我们自己能做的就是，尽量多收集角度图和表情图，正脸只需要收集总量20％就足够，其他70％甚至更多全部堆角度和表情，这里面要高清、表情，收集起来相当相当难
怎么看缺什么角度，很简单
用补角度工具，对比dst和src，src缺什么图就收集补什么，死亡角度就别想了，只能用相近的人脸代替
后期confyui一步步发展起来，应该可以完美起来  

iCode

范冰冰现在在泰国做名媛

wtxx8888

w7315511 发表于 2024-7-14 05:46
大佬，说的是用底丹练专人丹啊，不是直接合成效果不好才跑目标DST...还请解答一二 ...

练专丹呗？
懒人的话，DST就是知名数据集。
玩的久，就是自己凑的DST数据集（这看自己喜好，并知道DST数据集的标准，全角度只是最基本，脸型，表情等越全越好，靠平日的筛选与积累）。

avtopalang

其实，就是正训选择什么样的dst数据集呗。
楼上有说，正训不需要数据集，不敢苟同，数据集是为了泛化性，正训采用数据集，后期换dst的时候，可以更多的情况下直接合成而不需要再训练。
如果有时间，当然可以正训预训练用过的数据集，因为正训也可以学到更泛化的颜色转移。为了更快，如果目的是换岛国的，那就切几百位不同樱花明星的影片脸做数据集（别用明星套图），几部几十部影片不会很理想，那就失去泛化性意义了。分辨率不用追求1024什么的，相信你的模型尺寸也不会超过512.
脸部遮挡这个事情，樱花你随便切一段就知道了，樱花基本都是有刘海了，而且切出来的脸，基本也会被认为是垃圾脸图。遮挡的，半块的，黑乎乎的，白森森的，糊成一团的，但是，这是脸图，的确是你要替换的，你不训练怎么办？
表情，细节都还好说，我觉得最需要训练的是，遮挡脸下的颜色迁移。一缕头发垂下来，头发两边的颜色能一致吗？合成脸和头发丝融合的自然吗？

三先天

avtopalang 发表于 2024-7-14 15:42
其实，就是正训选择什么样的dst数据集呗。
楼上有说，正训不需要数据集，不敢苟同，数据集是为了泛化性，正 ...

没错 樱花最爱流海 而且喜欢束状头发挡脸修饰脸型 动起来 经常头发挡脸 现场灯光差的切出来 脸黑颗粒一大片 颜色是灾难性的 怪不得国外deepfake不喜欢用樱花dst 或者只用明亮场景的

w7315511

wtxx8888 发表于 2024-7-14 13:20
练专丹呗？
懒人的话，DST就是知名数据集。
玩的久，就是自己凑的DST数据集（这看自己喜好，并知道DST数据 ...

有人说DST数量太多了不好，那日积月累岂不是越来越多吗

wtxx8888

w7315511 发表于 2024-7-19 02:14
有人说DST数量太多了不好，那日积月累岂不是越来越多吗

多，意味着难练，耗时越久而已。
理论上是无限的，谁达得到？
一般几万张，就特么受不了了！