探讨训练多表情的方法

petrel

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

我在想，在src不够的情况下，如果我找几部高清电影，选取一些各种各样的表情、痛苦、开心、皱眉、吐舌、挑逗、恶作剧等表情以及侧脸、极限角度作为dst
一直训练下去，发现效果好的就就、合成加入到src里面，重复按照方案能否最终补全？


如果可以，我就打算找几部高清电影，提取原画512的头像作为dst来当做训练材料，这样补全了src以后，再去用来训练速度应该会快很多，而且换丹不会存在src缺失重新训练的问题。

petrel

还比如说憋嘴，眨眼，等待

Hedwig

如果src素材里没有痛苦、开心、皱眉、吐舌、挑逗、恶作剧等表情或者数量极少极少。那么依个人经验再高参数的丹也很难练出需要的表情。最终模型能够输出的表情由src素材的主要表情决定。比如我的src大多数都是微微张嘴微笑的表情，那么训练后基本只能给dst换上微笑的脸。
上述只是个人经验哈，也可能我用的丹不是神丹。

liu7788345

不懂，同问

miao339

你所说的就是素材补齐法，可以去搜搜随风的帖子和金鱼的帖子

petrel

Hedwig 发表于 2021-12-11 17:22
如果src素材里没有痛苦、开心、皱眉、吐舌、挑逗、恶作剧等表情或者数量极少极少。那么依个人经验再高参数 ...

可是我试了一下金鱼那个，可以练出那个表情，1660s练了几天
用的是我帖子那个4-6g显存的丹

temphk

在面部角度有的前提下，在该角度训练 src 中没有的表情，理论上是完全可以的，那个变形扭曲的选项一直开着，之后就是时间的问题了。

另外，你可以边训练边造人，比比看是你生娃快还是它训练快。。

gaoshan

您好  多些分享

bcmoon

谢谢分享

无敌小金鱼

理论上是这样的，但需要循序渐进，学表情的同时也学了角度，所以我的基础模型库带了十几种常用的表情，不然我大可以就只做一套无表情的全角度基础模型。
但如果要实现更复杂的表情，就得无限补充素材，人的表情千万种这是没有上限的，你可以先用src学会我基础模型库里的十几种表情，然后再添加新的真实DST素材去学习，这样学起来会更快，因为我的模型库里是每一种表情都是全角度覆盖，现实情况中我们提取的真实人脸是做不到的这样的。

一些朋友说我的基础模型库表情不够，但却忽略掉了是全角度泛化，学完模型库里的这十几种表情，你再去补充任何角度的表情，理论上来讲演变的能力就会比较强。