关于SRC2个小问题

gopee

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

1、我把SRC张嘴和舌头 用虚线圈了出来，合成时候会出现什么现象2、SRC素材 有带眼镜的有不带眼睛的，如果 我混在一起训练的结果    会出现什么？是 有时候有眼镜 有时候没有嘛？

toly219

第一个问题：是取决于dst里有无舌头mask和表情的。src练了，dst里没样本。你吐不出来的。
第二个问题：无论戴不戴，训练的实时图上都不戴。

给大家一个DFL的常用测试方式：小样本SRC，250张。检验你自己的思路。这个是多年来全球玩家总结的最佳实验方式。

gopee

toly219 发表于 2022-3-4 15:35
第一个问题：是取决于dst里有无舌头mask和表情的。src练了，dst里没样本。你吐不出来的。
第二个问题：无论 ...

只要我的SRC有眼镜，训练完后 合成的图 必定有眼镜，

toly219

gopee 发表于 2022-3-4 17:52
只要我的SRC有眼镜，训练完后 合成的图 必定有眼镜，

你这里就讲到一个尴尬的问题了，如果你的src1对1转，dst本身没有。这个时候，src的眼镜就上去了。
dst有，src没，你会发现，眼镜也上去了。
前者比后者清晰。但前者有扭曲。
接着就是大面积问题了。你src张张有。眼镜这个特征就成了你脸的特征的一部分了，就像一颗痣一样。
你dst没，合成时它也上去。
你的目的是：dst带，合成就有，dst不带，合成就没。所以，你的src眼镜的数量就不能多，甚至没。两边都没，你靠遮罩xseg，反而能够实现。因为遮罩训练了各种阻挡的情况。
在训练合成时基本就是这样。
模型是对src特征的一种总结。你不能让眼镜变成人物特征。早期这个问题，无数这个类别的源码发生的状况就是眼镜是扭曲的。哈哈哈
你把xseg想象成一个单独的图层，在这个遮罩模型训练的时候，它适应了有眼镜就抠出来，当这个图层看见你合成视频的dst时，一看，这货有眼镜，于是就率先抠出来，在下面那个层里整了人脸，然后合成成你看到戴眼镜的人，舌头也是这么一个逻辑。

gopee

toly219 发表于 2022-3-4 18:16
你这里就讲到一个尴尬的问题了，如果你的src1对1转，dst本身没有。这个时候，src的眼镜就上去了。
dst有， ...

哦哦，听君一席话胜读十年书