关于模型结构和模型文件的问题

玫瑰少年™

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

翻看DFL换脸原理的资料时有个地方看不太懂，不知道论坛里有没有人能解答一下？（涂黄的部分是问题）

这是DF模型的结构图，根据这张图可以知道：DF模型具有 一个Encoder 和 一个 隐特征空间 和 两个Decoder，也就是Dst和Src共用相同的 Encoder 和 Inter，Dst和Src只是Decoder不同，这么说的话，他俩的私有特征就全部都是记录在Decoder里。

应用模型时，模型会先对Dst编码得到特征向量，然后使用Src的解码器对特征进行解码，从而得到对应Dst特征向量的Src面孔的图像，之后再利用内嵌在aligned图像中的变换信息把头像合并到dst序列上。

DF 模型相对比较简单，基本能理解，但Liae就不太明白了。

这是Liae模型的结构图，根据这张图可以知道：liae模型具有一个Encoder和一个Decoder和两个Inter：InterAB和InterB，也就是Dst和Src共用相同的 Encoder、Decoder和InterAB，只是InterB的不同。

这里的InterAB 和 InterB 看不太懂，有没有人能帮忙解释一下？提前谢谢！

另外，这张图里那个两条竖线的是什么符号？这个符号是什么意思？

还有我想知道Liae模型的每个模型文件存储的都是什么信息？

滚石

liae全名 less aggressive auto-encoder

ronld

模型架构问题，AB， B两个容器可以看出AB容器融合了SRC与DST的信息，而B容器只有DST的信息，对于应用场景而言B是DST的样子，你通过模型进行交互的时候会以DST为基础进行神经网络的学习，让呈现出来的效果更好。

玫瑰少年™

滚石 发表于 2023-2-28 19:21
liae全名 less aggressive auto-encoder

谢谢回复，这个对我很有帮助，但还有问题想追问：

自编码器、变分自编码器、生成对抗网络的文章基本都看了，也了解，只是你回复的“ less aggressive auto-encoder”还没听说过，想深入了解一下。

但我到知乎、CSDN 搜这个算法名字都没有搜到。

能否贴一些相关论文或文章的链接？或者推荐一些搜索关键词？或者推荐一些相关论坛、网站之类的？谢谢了！