关于GPEN增强src的一些个人经验

早田ひな

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

本人之前换脸的源脸人原视频比较少且几乎都不清晰，虽然比较肝切完脸都一张一张过，但是总体的src质量都不高，此为背景
然后我也有看到论坛上一些关于GPEN/GFPGAN的演示（其实是妖怪案例居多），对效果心动了（确实比gigapixel好多了）但是看到大家发出来一堆妖怪和不自然的脸，一直不太敢用
直到今晚心血来潮，去下了一个用了一下（是@leeso的二合一版本）
结果发现，并没有想象中出来一堆妖怪的结果，大部分图还是很漂亮的，
但是还是有必要一张一张过，而且看小图还会看不出问题所在
你可能会觉得AI脑补出来的图就是哪里不太对劲，但是看半天又看不出来哪里不一样然后……
选择放弃
但是那么高的清晰度怎么能轻易错过呢
这里就贴一些我总结出来GPEN容易处理得不完善的地方，大家以后有以下这几类原图的时候可能要检查一下，可能不完全，欢迎补充
1. 处理亚洲人的眼睛
可能因为GPEN在训练AI时使用的亚洲人素材为韩国人居多，GPEN很容易在人物眨眼过程中眼睛将闭未闭时将原来是双眼皮（眼影画多厚都一样）误判成单眼皮，造成眼睛偏小，且会将动态的闭眼中的眼睛处理成静态的完全睁开的眼睛
就显得特别丑！
如图所示：

这张图其实还好，没有很离谱
还有一种情况，就是丢失眼角，眼睛变短变小颜色变浅，伴随眼珠有不和谐高光及眼角有大量类似鱼尾纹的纹路出现，这个更丑，直接就不能用
这种情况我管它叫“老人眼”，怎么说呢，就像白人老太太的眼睛，多出现在原图眼睛有轻微动态模糊的情况
2. 眼珠子咋就那么生硬呢
GPEN一个矛盾的地方，眼珠子边缘太清晰了，正常人的眼珠边缘是有一点点模糊的
那些斜着眼睛的特写看着就会很瘆人（特别是转头的时候）
3. 脸上的雀斑
欧美模型通病，出现在原脸质量不高有噪点的时候，原来皮肤光洁的妹妹就这样多了一堆雀斑
4.表情夸张的侧脸
骨形可能会出问题
……太晚了写不下去了明天再更
补充一个：GPEN实际上还是不适合用在太模糊的图片上，一开始用GPEN前模糊的该删尽删，包括动态模糊（有补偿但是还是会重影）
我实验了一下那些论坛里面的妖怪绝大多数是用模糊的脸去GPEN造成的
另外，老版的GFPGAN涂抹感据传比较严重，新版的好很多了

wtxx8888

SwinIR不错，推荐你试试，修正强度比GPEN弱，更自然点，就是处理时间挺慢

大财神

总结经验优化

stream_lee

谢谢分享！

samsarawl

总的来说我基本都放弃用了，除非素材真的少，开个几张进去补一下，或者稀有角度的用一下

xswpp

学习观摩一下各位大佬！！！！

早田ひな

wtxx8888 发表于 2022-5-29 00:37
SwinIR不错，推荐你试试，修正强度比GPEN弱，更自然点，就是处理时间挺慢

感谢分享，这就去看看

phoebeshadow

感谢楼主的建议

此昵称已存在

增强素材还是太耗时间和资源了，有时间研究下把他布置到云端

shiftman

感谢分享，认真学习