把官网和论坛的教程都看了，但还是有两个问题

dfllearner

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

官网的教程是把Elon Musk的脸换成Tony Stark的，dst放Elon的视频，src放Tony的视频，这个我理解，但是下面两个场景我还是不太明白：

假如我下载了一个别人预训练的模型，这个模型是用许多不同名人脸训练的，那么
1. 如果src里没有视频，我直接 merge/应用模型到dst里我的视频，那是谁的脸把dst里我的脸换了？
2. 如果src里有我同学的视频，我在别人的预训练模型基础上再训练个几小时，那是我同学的脸把dst里我的脸换了？这一步里别人用名人脸训练的那些结果对于我同学的脸换掉我的脸有什么帮助？
谢谢！

windjet

Pxhpanic 发表于 2023-3-6 13:45
想都是问题，做都是答案

1. 合成时不需要src，直接 merge/应用模型到dst里你的视频的话，是预训练中权重比最大且类似你的平均脸把dst里你的脸换了。
2. 如果src是你同学，你在别人的预训练模型基础上再训练个几小时的话，要是这是一个几百万的预训练好模型，就是只训练几个小时你同学的头像也应该比较清晰类似了，结果会是比较类似你同学的脸把dst里你的脸换了，这一步里别人用名人脸训练的那些结果能够帮你同学的脸快速变清晰且像你同学（因为预训练已经建立好了不少映射了），如果是比较差的预训练模型，那就是不大像你同学的脸把你的脸换了。
极端情况下，预训练模型差，你同学的脸训练的时间又非常短，你同学的脸就对你的脸没有太大影响，就会和1类似，是预训练中权重比最大且类似你的平均脸把dst里你的脸换了。

想明白这个，你也就明白为什么只能专人专丹了。

Pxhpanic

想都是问题，做都是答案

Pxhpanic

windjet 发表于 2023-3-6 19:27
1. 合成时不需要src，直接 merge/应用模型到dst里你的视频的话，是预训练中权重比最大且类似你的平均脸把d ...

我有空帮你转告他

dfllearner

windjet 发表于 2023-3-6 19:27
1. 合成时不需要src，直接 merge/应用模型到dst里你的视频的话，是预训练中权重比最大且类似你的平均脸把d ...

非常感谢解释！

sapphireshi

我本来觉得清清楚楚的事情为啥看完你的贴子一下子不清楚了