从零开始预训练底丹有什么推荐的流程吗？

1291667211

wtxx8888 发表于 2022-7-16 20:23
扭曲不要开，无效的。预训练都是原图，你扭曲融合自己有啥用？纯属于浪费资源。
...

虽然SCR集和DSR集是一样的，但是批量大小Batch_size最大也就16左右，不可能每次迭代对比的人脸都是一样的

wtxx8888

1291667211 发表于 2022-9-28 10:19
虽然SCR集和DSR集是一样的，但是批量大小Batch_size最大也就16左右，不可能每次迭代对比的人脸都是一样的 ...

首先弄明白，预训练是要达到什么目的吧。开扭曲会延长时间，当然也不是不能开扭曲。头铁的随意。

1291667211

wtxx8888 发表于 2022-9-28 14:58
首先弄明白，预训练是要达到什么目的吧。开扭曲会延长时间，当然也不是不能开扭曲。头铁的随意。 ...

我尝试过在外网论坛上寻找预训练的详细步骤，然而并没有找到。官网方的最新DFL2.0使用指南在第10章，只提到了一句：
2. 预训练模型的另一种方法是准备data_src和data_dst数据集，其中包含随机人的脸，从各个角度，使用不同的表达式并训练模型，就像您通常一样训练（预训练禁用）。对于源数据集，您可以使用未来最可能交换的名人面孔，对于DST，您可以将最可能用作目标视频的视频类型中的任何面孔用作目标视频。

1291667211

wtxx8888 发表于 2022-9-28 14:58
首先弄明白，预训练是要达到什么目的吧。开扭曲会延长时间，当然也不是不能开扭曲。头铁的随意。 ...

关于随机扭曲，根据DFL2.0指南的原文翻译：
启用样本的随机扭曲 Enable random warp of samples （ y/n ？：help ）： 随机扭曲用于泛化模型，以便它在初始训练阶段正确地学习面部特征和表达式，但只要启用，模型就可能难以学习精细细节-因此，建议在面部仍在改善的情况下保持启用此功能（通过查看预览窗口中减少的损失值和改善的面部），以及一旦一切看起来都正确（损失不再减少），你就应该禁用它来开始学习细节，从那时起，你就不需要重新启用它，除非你对某些设置（背景样式power 强度， 真脸强度等）应用了高值，或者你想用同一源重新使用该模型来训练新的目标视频，或者重新使用新的SRC和DST组合，从而破坏了结果，您始终在启用RW的情况下开始训练。默认值为y（启用）。

个人觉得：根据以上，它是用于初始训练阶段正确地学习面部特征和表达式，那么预训练阶，正是脸部特征不明显的阶段，此段更应该是需要启用的。

wtxx8888

1291667211 发表于 2022-9-28 17:10
关于随机扭曲，根据DFL2.0指南的原文翻译：
启用样本的随机扭曲 Enable random warp of samples （ y/n  ...

头铁随意
预训练是训练成像泛化，而不是训练融合，你关闭扭曲成像不？好好想想扭曲是个什么功能吧。

给你举个常见例子，训练出眼镜图像的模型，再次复用遇到带眼镜的，直接就出来了。
你关闭或不关闭扭曲，都不会影响眼镜的出现吧？ 难道预训练不开扭曲，眼镜就训练不出来了？

这就是预训练的目的：成像泛化识别。

扭曲根本不参与其中。自己好好动动脑子吧

1291667211

wtxx8888 发表于 2022-7-16 20:23
扭曲不要开，无效的。预训练都是原图，你扭曲融合自己有啥用？纯属于浪费资源。
...

实验了一下，忽然发觉你是对的。因为训练一段时间后它总会找到和它最相近的图建立映射关系，所以当scr集和dst集一样的时候，预测图和原图是一样的（只不过模糊一点），这样扭曲确实是没有用了。 只有当scr和dst不一样时扭曲才有用。

qiuyuande

1291667211 发表于 2022-10-20 09:16
实验了一下，忽然发觉你是对的。因为训练一段时间后它总会找到和它最相近的图建立映射关系，所以当scr集 ...

不开扭曲 跑久了 会出现亮光 很多丹都是 就DST和SRC都放一样的素材跑  虽然没用 也就是时间久点  就按官方流程当成正式训练就可以。