星级打分
平均分:NAN 参与人数:0 我的评分:未评
我发现好多人做的deepfacelab新功能都不考虑AMD显卡,所以我参考魔切的ui设计做了一版新的神农3.06ui支持A卡使用。主要新增功能如下: 首先是头像提取页,支持了多种提取器和对齐器。支持直接从视频中提取不用切帧图。支持快速切脸。还做了一个新版手动提取工具,主要功能如下:逐点描点和拖动微调时(这个可以多选)选中器官开始描点时隐藏起其他器官的landmark,描点结束才出现整体轮廓。
遮罩页面,新增了多种遮罩模型:EasyPortrait 遮罩,BiSeNet 遮罩,SegFormer 遮罩。新增把写入图片的遮罩xseg_mask转成轨迹图seg_ie_polys的功能。新增新版遮罩编辑工具:内置SAM模型,就是你点选或者描动一个区域实现自动抠像的功能。
模型训练页面,迁移了所有的pytorch模型,同时支持tf 和pytorch模型训练。萨尔saehd模型迁移了部分ME模型的参数。新增混合精度和opt_states_on_gpu功能来节省显存。新增自动训练功能。新增防止炸丹功能。
模型合成页面,参考教学贴金鱼高级合成,新增了RGB智能合成方法:给普通脸部合成补一个更接近高级 AE 合成思路的自动模式。
- 当 SRC 和 DST 脸型差异较大时,普通合成容易被 DST 原脸型限制;`RGB 智能合成` 会更大胆地使用模型预测出的 RGB 脸部结果,让脸颊、下巴、下颌线和部分额头轮廓更接近 SRC。 - 它不是完整 head 换脸,而是更像“去掉头发部分,只使用五官 + 脸部轮廓的 head 换脸”。因此它适合改善脸内轮廓相似度,不适合强行替换发型、发际线、头顶、耳朵、脖子或大面积遮挡。 先输出模型预测 RGB 脸然后用一层遮罩去掉RGB 脸本身会带完整方形预测块,然后再叠一层遮罩排除脸上遮挡。
工具箱页面,新增了tf 和pytorch模型导出直播模型工具,新增了tf 和pytorch模型互相转换工具,新增了模型蒸馏工具。
素材筛选工具,新增了素材筛选分析工具,可以一次性导入src和dst,并生成角度热力图。通过切换功能切换数据源展示角度热力图。新增训练提示区功能,把src和dst热力图叠加的方法提示训练时哪些角度缺失(蓝=src-only,黄=dst-only,绿=安全覆盖,红=高风险 dst-only。)。增加去重功能,清晰度筛选等功能。增加直接在头像图片上修正landmark的功能。新增comfyui补充角度功能读取热力图然后找出count=0 的格子,生成图片来补充角度。
各位大佬,还有没有什么好的建议
|