技术疑问：SRC补齐疑问+死亡角度

csmkp

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

1.在训练模型时候经常会发现SRC练出来的DST不满意，可是有些角度练出来还可以接受，而练出来的这部分觉得还可以的素材，可否不用合成后重新提取，直接输出头像，然后筛选结果，这样就可以不断补充SRC的死亡角度，也不会像反练那样太影响到输出质量！也貌似只有这样，模型才能随着素材变化越练越好！

2.模型预训练大多为了动作电影，为啥不直接用很多动作片的素材来预训练呢，毕竟动作片头像清晰，少剪辑的话，死亡角度无比多？我看很多用数据集预训练的，但是数据集头像角度看起来貌似很一般，还是因为软件本身对死亡角度识别和训练就不给力，我看过很多素材，角度一大吧，软件识别就不是很好来着，各位大神如何解决死亡角度问题的呢？

moweijun

路过帮顶

lalakia2012

动点脑筋就能解决啦！

fx83924

应该是可以的  楼主似乎说过这个问题

koeikongxu

论坛里有几个帖子貌似就有将怎么解决角度不够的问题，其中之一是用blender + facebuilder插件，把不齐的角度都建模补出来。
另外一个方法是论坛一个大牛随风的帖子里教的，他弄了一套极限角度的图，你拿去直接训练，然后软件会自己补齐细节。
这两个方法我还没试，但是理论行可行。
然后还有一个方法是论坛其他几个大牛也说过的，就是训练的时候，先把dst和src的切脸图对换训练一小段时间，然后再对调回来。这个方法我试了，必须控制好第一次对调图片训练的时间。
第一次训练的时间过长了，容易把dst的特征加到src上面去，时间短了，src还没学会某些缺少的角度该怎么呈现。这个也是个技术活，要多次试验才能找准时间点，既让src学会dst的一些极限角度，又不会把dst的脸部特征覆盖src。
如果你第一次对调的训练时间过长了，那么你后面训练完，合成出来的效果就会像dst和src两个脸混合出来的四不像。

csmkp

koeikongxu 发表于 2021-6-1 09:40
论坛里有几个帖子貌似就有将怎么解决角度不够的问题，其中之一是用blender + facebuilder插件，把不齐的角 ...

我的意思大咖ishi这样，没换次脸，不都会有训练好的dst吗？然而这些训练好的dst很多不是src缺少的角度吗，怎么筛选出这部分来，然后通过多次循环优化，不就等于慢慢补齐了src角度吗?

koeikongxu

csmkp 发表于 2021-6-1 15:43
我的意思大咖ishi这样，没换次脸，不都会有训练好的dst吗？然而这些训练好的dst很多不是src缺少的角度吗 ...

这个得看你训练出来的结果啊。如果效果好的，我觉得可以！

csmkp

koeikongxu 发表于 2021-6-1 15:46
这个得看你训练出来的结果啊。如果效果好的，我觉得可以！

关键就在于dst这个数量太大，不好筛选，怎么筛选出来，这样每次换脸都可以丰富一波src，然后模型就自动进化了

koeikongxu

csmkp 发表于 2021-6-1 17:58
关键就在于dst这个数量太大，不好筛选，怎么筛选出来，这样每次换脸都可以丰富一波src，然后模型就自动进 ...

但是你得知道，训练出来的始终不是真正的src的脸，这个只是AI根据数据推测出来的，会跟实际的多少有些不一样的。这个手段只适合实在没有相关角度图片的情况下才用。

demonash

路过帮顶~！