高圆圆 稀有极限正仰、极限正俯（WF1024 96张 + WF512 72张）

Mrdeepfake

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:2.33  参与人数:3  我的评分:未评

  大角度 src 正仰、正俯头像一般而言非常稀有，经常很难收集。除此之外，对于近极限正仰与正俯情形，DFL 对脸的识别性迅速降低，经常识别不到脸，或者即使识别到脸并且肉眼看起来也正常，但其 Landmark 却往往也是错的，需要手动来修正。上次给大家分享了拥有包含很多宝贵的笑容及女神特质、侧仰与近极限侧仰角度丰富的大美圆头像，这次给大家分享稀有中的稀有存在——大角度乃至近极限的正仰与正俯头像。共享文件夹包含2个子文件夹，其一来源于4k画质视频，头像分辨率为1024，包含了近极限正仰与正俯头像，使用 MVE 对大角度头像 Landmark 进行了修正；其二来源于论坛，只包含高圆圆仰头头像（光照很暗的原素材以及后续被某一哥们提亮的素材），分辨率为512。对于第二个文件夹脸集，除了对原始大角度头像 Landmark 进行了修正外，还由于原始头像以及被提亮的头像本身清晰度不太足，因而在 Landmark 修正后，又重新使用 Remini 对头像进行了增强。特别需要指出的是，发现对于大角度乃至近极限情形，用 MVE 打包后再用 Remini 增强往往会失败，但逐一增强却经常会成功并且效果很好，因而近极限角度的头像是用 Remini 一张张增强的，很需要耐心。


    如下图为 DFL 切的默认头像，直接看起来一切正常，小白经常就不管了......

看起来正常的头像

    事实上，查看 Landmark 就会发现，大角度乃至近极限的正俯、仰头像 Landmark 并不正确，如果不愿丢弃这些稀有中的稀有头像，就需要使用 MVE 对 Landmark 进行手动修正了。修正这些近极限角度的头像 Landmark 是挺考验耐心的一件事，远不及修正近正面角度那样轻松。

MVE 显示上述图像 Landmark 并不正确

  头像已经写入 XSeg 遮罩，可直接用于训练。百度网盘解压密码：JXJD

Mrdeepfake

DFL小白02 发表于 2024-4-28 20:44
我以为你只是单纯来做分享给大家，所以就交流一下而已。既然你是这么认真要卖赚石头的想法，那你做点好东 ...

幼稚，你要求别人大公无私，怎么不先要求自己！你知道找遍所有影视素材有多辛苦！！！还交流，有啥可交流的，不就是找遍素材一条途径！你想白嫖别人的辛苦，还冠之以“交流”，可笑不！大家时间都很宝贵，没人愿意花自己大量时间给你搜那些极其稀少的素材，即使搜出来，更别期待会白菜价出售给你。看你这样这么想占便宜（或许是太幼稚），即使定个高价，你会买吗！况且我现在不缺灵石，要一堆石头现在对我没啥用，但作为支持劳动成果，支持论坛，收灵石这一行为还是必要的！

Mrdeepfake

DFL小白02 发表于 2024-4-28 09:59
还是应该找一些高清素材来切，仰角那个增强的都失真了细节也不怎么好

你去找啊，你找出来放在src专区售卖！又高清晰度，又千辛万苦找出来，相信很多人愿意买！

Mrdeepfake

WaveBedo 发表于 2023-10-5 14:20
感谢啊，一下子就学到了这么多重要的东西！

剪映右键有一个智能镜头分割的功能，我在使用，它一般可以分 ...

智能镜头分割不是很靠谱，分析还很耗时间。另外，清晰度排序目前没有很好的算法与产品，总会有漏网之鱼，而且还不少，所以需要人工删除模糊脸。目前不论 DFL 还是 MVE 衡量清晰度的最终方法是按整张人脸方图（包括背景）对比度排序的，这样，遇到人脸聚焦而背景却模糊非焦的情况、人脸面积小如侧脸或其他近极限角度脸的情况，背景色彩丰富（因而对比度高）的情况，通过衡量整张图对比度来衡量人脸清晰度，就不会太好，事实上对这些图经常是失效的。但这样排序能粗略挑选高画质人脸，还是有用的，细选需要人工。其实我个人觉得这种衡量清晰度的算法可以改进，比如结合人脸 XSeg 遮罩（再不济，还可以直接用切脸得到的粗略 FF 遮罩），只计算人脸部分的对比度，以此来衡量人脸清晰度，准确性应该会得到极大提高！但我个人不会 python 编程，要不然就弄这么一个小工具了，肯定非常实用！

Mrdeepfake

WaveBedo 发表于 2023-10-5 11:33
楼主，你好啊。一部电视剧几十集，全剪应该很有难度。你一般怎么做，才能快速剪完啊 ...

我的做法是先剪目标人物近、中景，另外特殊的远景（如特殊表情与风格，稀有角度）也保留，一般以剪辑后时长30分钟左右为一个基本部分（经常是5集为一个部分），把 src 人物视频先剪辑出来；然后各部分再取脸，删除非 src 脸并用 MVE 去重后，用 MVE 人脸大小分类功能快速分类近、中、远镜头；然后主素材使用近景镜头，并用 MVE 清晰度（即对比度）排序，挑出最佳清晰度素材；欠缺的角度、稀有表情最后再从中远镜头补充，有必要的话，可能还需人脸增强。这是总体流程。

单纯剪辑视频的话，我习惯了用剪映，通过简单设置，直接用鼠标点击视频时间轴就能切割视频，先切割好，再统一删除不要的片段；根据源视频的特征，可能需要先粗剪再细剪。若切的是4K片源，如果电脑不给力的话，可能剪辑起来很卡很痛苦，而开启视频代理还需要格式转化也比较费时痛苦。我是下载4K视频的时候另外寻找低分辨相同时长的视频（或者把4K视频上传至115网盘或阿里云盘什么的，再在网页端用 IDM下载低分辨 ts 格式的视频，再格式转换就容易多了），然后用剪映剪辑低分辨视频，剪好后保存草稿，把4K画质源视频文件夹名称、路径、子文件名称弄得跟低画质视频一样，再打开草稿导出 4K 画质剪辑视频。

若人物素材非常丰富，剪辑到中后期，如果不是稀有角度、稀有表情、稀有风格，中景镜头甚至都可以不剪，只保留超大特写镜头。至于最后为啥不直接用超大特写镜头而还要清晰度排序，是因为近景也不一定清晰或清晰度最高，因为它可能非焦（过焦或欠焦），还可能存在运动模糊。剔除模糊图片并筛选出最满意的脸集是一个很费力的工作，占处理总时间的 90% 以上！为减轻工作量，可以先挑选喜欢的风格（它们通常是一套），再清晰度分析并去模糊。先粗选，再精挑细选，一遍一遍，就可以选出最满意的素材集了。最后 src 素材集人脸数目最好控制在 12k 以下，太多不仅模型训练收敛速度会很慢，最后达到的最高清晰度也会降低的。

Mrdeepfake

ccctttccct 发表于 2023-6-23 06:52
能给一下mve的教程吗？全英文顶不住

论坛有MVE中文解说教程下载帖子，你搜索一下可以去下载。

Mrdeepfake

fanren 发表于 2023-6-11 17:39
想请问一下大佬，这个遮罩怎么用，直接解压到模型文件夹吗？怎么和镇坛之宝一起用 ...

合成时（合成页面打开之前），XSeg 模型与换脸模型一起放在 model 文件夹即可。镇坛之宝作为 XSeg 模型之一，其使用方法也是如此。目前原版 DFL 只支持合成时调用和换脸模型放一起的 XSeg 模型，要换 XSeg 模型，必须关闭合成页面并把要使用的 XSeg 模型放进 model 文件夹，然后再次重新打开合成页面，不能合成过程中放入。有些被个人修改过的 DFL 特殊版本可能会支持合成前挑选 XSeg  模型或合成过程中暂停更换 XSeg 模型，具体需要看作者的说明。

seancai110

Mrdeepfake 发表于 2023-6-8 17:29
呵呵，宝贵头像，费些功夫也是值得的......而且角度越完善，制作出的作品越逼真。只要愿意费些功夫，d ...

所以我在思考这个问题，就是，反正我dst也是自动切图的，所以对不齐就大家一起对不齐吧

当然，完美对齐的素材包肯定潜力更大

Mrdeepfake

seancai110 发表于 2023-6-8 16:22
厉害了，手工修正切脸，像我就很懒，懒得改

呵呵，宝贵头像，费些功夫也是值得的......而且角度越完善，制作出的作品越逼真。只要愿意费些功夫，dst 视频就可以不必把那些近极限角度镜头切掉，或者你处理起这些镜头画面更加游刃有余（换脸操作保持到哪一帧由你自由决定，你的操作空间更大，不用太过担心突变导致的不和谐），而且最终作品会更有表现力，画面也更加自然、真实。

seancai110

厉害了，手工修正切脸，像我就很懒，懒得改

ccctttccct

Mrdeepfake 发表于 2023-6-8 17:29
呵呵，宝贵头像，费些功夫也是值得的......而且角度越完善，制作出的作品越逼真。只要愿意费些功夫，d ...

dst根本不识别极限角度

Mrdeepfake

ccctttccct 发表于 2023-6-8 17:39
dst根本不识别极限角度

所以说如果你愿意的话，可以多费些功夫。近极限角度的 dst 头像需要借助 MVE 手动修正与取脸。自动取当然是不行的，至少目前还没有成熟的计算机算法。但好在大多数情形极限角度头像数量并不至于太多，借助 MVE 手动修正乃至取脸，花费时间及精力还是可接受的。这跟 dst 脸部遮挡严重，自动取脸困难原则上是一样的，目前都需要借助 MVE 手动修正、取脸。

Mrdeepfake

seancai110 发表于 2023-6-8 19:03
所以我在思考这个问题，就是，反正我dst也是自动切图的，所以对不齐就大家一起对不齐吧

当然，完美对 ...

dst 素材 Landmark 要求没那么高，因为它有 XSeg 遮罩，最后合成时使用 XSeg 遮罩模型，它可以把错误的近极限俯视“嘴”遮挡、屏蔽掉，合成效果勉强可以接受，最多是眉毛、眼睛、鼻子等位置有从轻程度到严重程度的模糊或变形罢了；若采用 Liae 架构，由于其强大的变形能力，它甚至能把一张正常的近正面脸变形为近极限角度的仰脸或俯脸，只不过效果会很不自然，甚至是比较恐怖...... src 脸还是要认真对待一些，尽可能让 Landmark 准确。为你以后准确换脸、高质量换脸打好基础。

QIUZIYI

呀嘿，sisisisisisisisisisisisisi

come3002

感谢分享宝贵经验

q635809224

楼主我可以请教你下下吗~
如果一个极限角度一只眼睛看不到了，这样的图还有必要留着吗，还是自己脑补眼睛的位置手动调整？