多开扭曲训练能解决表情生硬，眼睛无神？

sujian2024

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

换脸合成后，视频人物表情僵硬，眼神也跟不上节奏，如何解决？
都有哪些参数决定的？
扭曲和嘴眼哪个参数影响更大？
多开扭曲或嘴眼训练能否解决？
还有其他方法吗?

wtxx8888

tiange999 发表于 2024-5-17 08:46
眼球不够黑 有神  是训练的少吗  还是没开随机光影的事？

没开嘴眼优先，或者复用丹没开LRD。想要嘴眼部位足够清晰的，这俩项目必开一个。
嘴眼优先：优点是不限预训练底丹或复用丹，缺点是五官定位会跟随开关变化，如果要保持五官的定位，必须维持嘴眼优先项目不变。
LRD学习率下降：优点是不会改变五官定位，缺点是只能复用丹的末期开，而且开了不能关，不然开LRD练出来的，全部白练（直接打回开启时的LOSS数值。例：你0.6开的LRD，到0.1关了，直接打回0.6）

wtxx8888

表情僵硬是SRC的表情不足，或者是开了真脸。
素材问题的话要补足，参数无解。
真脸的话就很简单了，关了真脸就行。

sujian2024

wtxx8888 发表于 2024-5-16 22:39
表情僵硬是SRC的表情不足，或者是开了真脸。
素材问题的话要补足，参数无解。
真脸的话就很简单了，关了真 ...

谢谢，估计是素材问题。真脸一般什么情况下开启，见一般的丹都不开

wtxx8888

sujian2024 发表于 2024-5-16 22:54
谢谢，估计是素材问题。真脸一般什么情况下开启，见一般的丹都不开

真脸比较像，但副作用就是表情僵硬。
一般取舍下都是不开。除非自信自己的SRC极度丰富才开真脸（单人SRC，全角度并且表情足够丰富，量的话一般都过万的）

tiange999

wtxx8888 发表于 2024-5-17 00:12
真脸比较像，但副作用就是表情僵硬。
一般取舍下都是不开。除非自信自己的SRC极度丰富才开真脸（单人SRC， ...

眼球不够黑 有神  是训练的少吗  还是没开随机光影的事？

come3002

眼神也跟不上节奏
===============
SRC过分删重 得到的基础包，会损失很多细节。
比如头部不动，但是眼睛转动时候，由于眼睛占人脸比例极小，很容易删重删掉宝贵细节。
这个时候补充包很有必要。
解决办法。
训练一段时间时候就测试。发现某些角度下眼神跟不上。找一些 类似角度类似光影下 头部运动幅度不大， 转动眼球的镜头，比如0.5秒逐帧保留。

如下图 头部几乎静止，但是由右向左 轻微转动眼球 。







然后加入到SRC中  （SRC基础包+SRC眼球转动补充包）。训练一会看有没有改善。


其他情景，依此类推。

天光脑震荡

come3002 发表于 2024-5-17 08:55
眼神也跟不上节奏
===============
SRC过分删重 得到的基础包，会损失很多细节。

对嘴型也是这么做吗？

come3002

天光脑震荡 发表于 2024-5-17 11:17
对嘴型也是这么做吗？

人嘴部占图片比例比眼珠占图片比例要大一些。
正常来讲 切脸 删重后，基础包 炼制嘴型要比眼神容易的多，若有问题也可能发现几率更大也会更早。
弥补也更容易。

天光脑震荡

come3002 发表于 2024-5-17 15:57
人嘴部占图片比例比眼珠占图片比例要大一些。
正常来讲 切脸 删重后，基础包 炼制嘴型要比眼神容易的多， ...

很有道理！