高圆圆 稀有极限正仰、极限正俯（WF1024 96张 + WF512 72张）

Mrdeepfake

q635809224 发表于 2023-6-8 22:09
楼主我可以请教你下下吗~
如果一个极限角度一只眼睛看不到了，这样的图还有必要留着吗，还是自己脑补眼睛的 ...

你发的这几张图五官都是可以看到的啊，而且也不是极限角度。其实对于你问的问题，如果你平时经常检查 Landmark，仔细注意，你就会发现对于侧脸、近极限侧仰脸，有一只眼睛往往是看不到的，在另一侧；对于侧脸，甚至另一条眉毛也都看不到。但你看头像的 Landmark ，其实总是可以发现有两只眼睛及两条眉毛的。事实上，DFL 除了换头的 AMP 模型采用的是 3D landmark 以外，换脸模型（半脸、全脸、整脸）都是采用的 2D Landmark，也就是说，我们根据大脑经验，脑补出被遮挡的另一侧眼睛与眉毛位置，然后将 3D Landmark 投影到二维平面，就是我们常见的 2D Landmark 图形。想想我们初中时学过的绘制物体三视图，那时只不过是要将看不见的线条画为虚线，面对我们的线条画为实线而已。在这里，2D Landmark 就没那么多讲究了，不管看得见还是看不见，Landmark 通通都用实的折线来描绘而已，重要的是要标注出五官该在的位置。如此，这些图当然应该留着，除非你的 dst 视频人物没有侧脸、近极限侧仰、侧俯脸镜头，只有偏正面的镜头。角度丰富有利于提升最终合成效果，若 src 与 dst 有其一头像角度比较单一，都会使最终合成效果相似性打折扣的。有时，dst 人物角度太过单一，甚至还要从其他渠道补充同一人物其他角度的头像参与训练，以增加最终合成相似性。对于 src，那就更不用说了，角度绝对要尽可能丰富。

q635809224

Mrdeepfake 发表于 2023-6-8 22:54
你发的这几张图五官都是可以看到的啊，而且也不是极限角度。其实对于你问的问题，如果你平时经常检查 Lan ...

谢谢楼主回复，学习啦~~~( 图片放错了嘿嘿 本来想删掉 不知道怎么发出去了 不好意思)

fanren

这种角度的换脸视频，大概率不是什么正经的

Des8302

这资源稀有啊~
不趁现在入手，还等到什么时候？
手刀购买，感谢分享

Mrdeepfake

fanren 发表于 2023-6-9 09:44
这种角度的换脸视频，大概率不是什么正经的

我们这里只交流 AI 技术，看作品怎么能够更完善。至于用途，也没法管各人内心所想，祈祷约束自己、保护好自己和他人喽！

kaite

顶帖，水经验

jaysfing

说实话dfl对于极限角度处理并不好 我有几个几乎全角度的src  训练出来的效果都不佳

Mrdeepfake

jaysfing 发表于 2023-6-9 21:06
说实话dfl对于极限角度处理并不好 我有几个几乎全角度的src  训练出来的效果都不佳 ...

首先，近极限角度 Landmark 要修正正确，其次 src 脸集训练前、中期要开启 uniform_yaw，以更好训练侧脸及近极限角度脸；开始时可以选择角度齐全，但脸集较小的 src 脸集进行训练，加快全角度收敛速度。若 src 数目太多，训练时间将会很长，合成脸清晰度也会有所下降！通用模型 src 脸集数目一般不要超12k，极少情况可能需要15k。4k 左右数目一般认为最佳。另外，如果底丹没有训练过近极限角度，那之后模型训练起来这些近极限角度当然会比较费力......有一个办法是将这些近极限角度头像丢入 src 集合中，慢慢长时间训练，既不耽误你不断合成新视频，又会使得这些近极限头像慢慢被训练好。时间会解决一切的......还有一个办法就是将模型从头训练，只要你有耐心，愿意花电费。

laiking888

真不错

fanren

想请问一下大佬，这个遮罩怎么用，直接解压到模型文件夹吗？怎么和镇坛之宝一起用