LIAE-UDT万能模型第四第五 磨皮怪 怎么解决啊

tgyoyo

wtxx8888 发表于 2024-8-22 15:57
DST 1.5哇，不磨皮你还想咋地？
不知道DST，是决定清晰度上限的？
意味着，你DST没练到够清晰，任你SRC 0.1 ...

借串请问大佬，我src约2800张，dst是金鱼加一些lora生的角度图、约6600张，这速度有办法快吗？loss降不太下去，离0.3好远



================== Model Summary ===================
==                                                ==
==            Model name: new_SAEHD               ==
==                                                ==
==     Current iteration: 3950610                 ==
==                                                ==
==---------------- Model Options -----------------==
                                                
            resolution: 320                     
             face_type: wf                     
     models_opt_on_gpu: True                    
                 archi: liae-udt               
               ae_dims: 512                     
                e_dims: 64                     
                d_dims: 64                     
           d_mask_dims: 22                     
       masked_training: False                  
           uniform_yaw: False                  
         blur_out_mask: False                  
             adabelief: True                    
            lr_dropout: n                       
           random_warp: True                    
      random_hsv_power: 0.0                     
       true_face_power: 0.0                     
      face_style_power: 0.0                     
        bg_style_power: 0.0                     
               ct_mode: rct                     
              clipgrad: False                  
              pretrain: False                  
       autobackup_hour: 6                       
write_preview_history: False                  
           target_iter: 0                       
       random_src_flip: False                  
       random_dst_flip: False                  
            batch_size: 15                     
             gan_power: 0.0                     
        gan_patch_size: 40                     
              gan_dims: 16                     
              use_fp16: False                  
    retraining_samples: True                    
            mouth_prio: True                    
         loss_function: SSIM                    
     random_downsample: False                  
          random_noise: False                  
           random_blur: False                  
           random_jpeg: False                  
         random_shadow: none                    
      background_power: 0.0                     
          random_color: False                  
               cpu_cap: 8                       
       preview_samples: 2                       
    force_full_preview: False                  
                    lr: 5e-05                  
          session_name:                        
     maximum_n_backups: 24                     
         gan_smoothing: 0.1                     
             gan_noise: 0.0                     
       high_loss_power: 4                       
             eyes_prio: True                    
                                                
==------------------ Running On ------------------==
                                                
==          Device index: 0                       ==
==                  Name: NVIDIA GeForce RTX 4090 ==
==                  VRAM: 20.84GB                 ==
                                                
================================================

[06:31:59][#3933972][4887ms][0.6715][0.6995]
[06:56:59][#3934475][2416ms][0.6731][0.7059]
[07:22:06][#3934981][3799ms][0.6784][0.7082]
[07:47:09][#3935484][5408ms][0.6777][0.7127]
[08:11:53][#3936012][5411ms][0.6752][0.7148]
[08:37:02][#3936649][2966ms][0.8087][0.8121]
[09:02:13][#3937237][3491ms][0.6712][0.7023]
[09:27:08][#3937681][3080ms][0.6687][0.7076]
[09:52:17][#3938117][3321ms][0.6652][0.7008]
[10:17:07][#3938572][5639ms][0.6701][0.7036]
[10:42:13][#3939055][4071ms][0.6719][0.7041]
[11:07:33][#3939604][6100ms][0.6733][0.7155]
[11:31:59][#3940141][3811ms][0.6738][0.6987]
[11:56:55][#3940777][3332ms][0.6724][0.7081]
[12:21:47][#3941413][2680ms][0.6706][0.7051]
[12:46:56][#3942048][4715ms][0.6756][0.7028]
[13:11:53][#3942712][4761ms][0.6703][0.7124]
[13:36:49][#3943334][2588ms][0.6726][0.7069]
[14:01:47][#3943993][2630ms][0.8037][0.8057]
[14:26:48][#3944669][2063ms][0.6737][0.7042]
[14:51:53][#3945336][6083ms][0.6685][0.7073]
[15:16:44][#3946021][2341ms][0.6714][0.7062]
[15:41:47][#3946695][2611ms][0.6685][0.7085]
[16:06:51][#3947369][2653ms][0.6719][0.7050]
[16:31:53][#3948040][5447ms][0.6717][0.7071]
[16:57:14][#3948701][3459ms][0.6714][0.7049]
[17:21:56][#3949344][5139ms][0.6705][0.7127]
[17:46:52][#3949924][5087ms][0.6706][0.7041]
[18:11:49][#3950611][2434ms][0.6715][0.7026]

wtxx8888

tgyoyo 发表于 2024-8-23 07:38
借串请问大佬，我src约2800张，dst是金鱼加一些lora生的角度图、约6600张，这速度有办法快吗？loss降不太 ...

2800对6600？
哦，我看到了，你练的全图，全图下开着嘴眼，0.6就够了。
除非你要特别精细的背景，全图的0.6，已经等于换脸的0.3以下了，你打开遮罩，应该瞬间0.25左右。
这个档次，已经是极慢了，一天24小时以上，才会降0.01，速度是无解的，以后只会越来越慢，想继续，只能熬。

第一次练全图，就这个速度，如果以后复用，就会快了。
另提一嘴，全图你要能到0.3，那相当与，换脸的0.1，贼恐怖贼清晰。
头发都是一根根的。毛孔甚至原图上的噪点，都特么原封不动的出来。
当然挂机时长也恐怖，最少三个月往上（复用快，就几天）。

我的全图0.9的效果，你0.6还不满足？你打算要多精细的背景？

tgyoyo

wtxx8888 发表于 2024-8-23 08:04
2800对6600？
哦，我看到了，你练的全图，全图下开着嘴眼，0.6就够了。
除非你要特别精细的背景，全图的0 ...

感谢大佬指导

MLGB

wtxx8888 发表于 2024-8-22 18:25
图片等于解析度就行，训练前，图片会自动统一为丹的大小，接着AE压缩，然后才被训练。
训练时的算法放大缩 ...

回来感谢下大佬，昨晚上把src和dst重新整理了下 都换成了512了，现在已经开始降低了。可能之前512的脸我重新切到了224导致的各种不清晰。
320模型
[19:24:27][#3275175][1194ms][0.5767][0.9739]                                                                                                                                      
[19:49:32][#3276472][1110ms][0.4750][0.9580]                                                                                                                                      
[20:14:25][#3277929][1123ms][0.4306][0.9474]                                                                                                                                      
[20:39:28][#3279310][1160ms][0.4026][0.9366]                                                                                                                                      
[21:05:05][#3280755][1143ms][0.3929][0.9325]                                                                                                                                      
[21:30:14][#3282094][1168ms][0.3791][0.9281]                                                                                                                                      
[21:54:26][#3283463][1075ms][0.3697][0.9235]                                                                                                                                      
[22:20:27][#3284883][1072ms][0.3597][0.9136]                                                                                                                                      
[22:45:01][#3286294][1146ms][0.3554][0.9127]                                                                                                                                      
[23:09:28][#3287685][1177ms][0.3531][0.9094]                                                                                                                                      
[23:34:23][#3289065][1080ms][0.3474][0.9065]                                                                                                                                      
[23:59:23][#3290458][1097ms][0.3415][0.9043]                                                                                                                                      
[00:24:23][#3291845][1070ms][0.3372][0.9003]                                                                                                                                      
[00:49:23][#3293315][1130ms][0.3349][0.8963]                                                                                                                                      
[01:14:23][#3294692][1076ms][0.3325][0.8939]                                                                                                                                      
[01:39:23][#3296094][1158ms][0.3292][0.8956]                                                                                                                                      
[02:04:23][#3297518][1103ms][0.3268][0.8924]                                                                                                                                      
[02:29:22][#3299035][1080ms][0.3246][0.8892]                                                                                                                                      
[02:54:22][#3300500][1109ms][0.3213][0.8890]                                                                                                                                      
[03:19:27][#3301918][1097ms][0.3193][0.8845]                                                                                                                                      
[03:44:23][#3303335][1074ms][0.3171][0.8822]                                                                                                                                      
[03:44:23][#3303335][1074ms][0.3171][0.8822]                                                                                                                                      
[04:09:24][#3304747][1059ms][0.3174][0.8808]                                                                                                                                      
[04:34:24][#3306176][1107ms][0.3148][0.8788]                                                                                                                                      
[04:59:23][#3307587][1029ms][0.3141][0.8775]                                                                                                                                      
[05:24:24][#3309016][1081ms][0.3131][0.8756]         

224的模型已经降低到了
[05:37:31][#4220087][0502ms][0.2813][0.7315]


稳定挂机中

wtxx8888

MLGB 发表于 2024-8-23 13:39
回来感谢下大佬，昨晚上把src和dst重新整理了下 都换成了512了，现在已经开始降低了。可能之前512的脸我 ...

加油吧~！
请记住，DST的品质，对清晰度的影响，DST会确定，最终清晰度的上限。（这个很重要，DST太差，是不行的）
（高清的SRC，会练到略强于，原DST的清晰度）

另提一嘴，DST写入的遮罩，决定训练时，图像的置换范围。
比如，DST是无额头的遮罩，那铁定，不会练出刘海。 这个也很重要

MLGB

wtxx8888 发表于 2024-8-23 14:04
加油吧~！
请记住DST的特性，会确定，最终清晰度的上限。（这个很重要，DST太差，是不行的）
（高清的SRC ...

嗯嗯  接下来就要学习实践这块了。

MLGB

lknet 发表于 2024-8-22 18:54
开遮罩内训练开着lrd，100w迭代dst1.5明显不正常，检查下dst和dst遮罩吧。论坛里的素材必须得重新过一遍， ...

嗯  问题找到了  dst和src 我在原本512的基础上有切图到224了 导致不清晰啥的

MLGB

htyy 发表于 2024-8-22 19:36
扭曲阶段不建议开随机光照，扭稳定以后再开学习率

哎  从一开始我就全开了    。。。。。。。。。。

这这这  哎 一言难尽