deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 267|回复: 2

src缺少部分dst对应的眼神表情可否通过删AB文件解决

[复制链接]

3

主题

27

帖子

613

积分

高级丹师

Rank: 5Rank: 5

积分
613

万事如意节日勋章

 楼主| 发表于 2024-3-25 03:04:42 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 yty9 于 2024-3-25 03:18 编辑

src缺少部分dst对应的眼神表情,实在没有相关src,一直闷头练也练不对,有3个想法:
1用dst和dst对练,让模型学到dst的眼神和表情,之后删除AB文件,放回原src训练回原脸型,不知道之前学到的dst眼神表情还会在吗?还是会被覆盖?或者dst对练后不删AB,放回src练,是否会覆盖学到的眼神而做无用功?
这期间眼嘴优先的开关怎么调整合适,其指的是优先学src的眼神?那对学dst的眼神就没用?
2.或者给这些dst眼睛单画遮罩放到src里,之前试过,因为只有眼睛没有脸型其他部位,好像对训练干扰很大,就好像边学边删,出来的效果有点生硬。
3.或者在大量src里面掺杂少量dst特定眼神表情,期望眼神生效的同时脸型能被大量src修正,目前是先这么练着的,随着src比例不同 训练越久效果也在反复。
想讨论下第一种的可行性。听说删AB文件可以解决脸型不像的问题,就好像清空出干净空白的画板重画,但已经学到了绘画技巧,很快就能画出来。
现在主要想知道眼神是属于学到的“技巧”“而被保留下来?还是属于”素材“而会被清空?在学到原src没有的眼神后,怎么保留下来的同时练回原脸型?
眼嘴优先是在学src还是学dst?



回复

使用道具 举报

9

主题

430

帖子

4686

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4686

万事如意节日勋章

发表于 2024-3-25 08:36:30 | 显示全部楼层
本帖最后由 z6163727 于 2024-3-25 08:43 编辑

給你一個思路你可以考慮手動給他添加表情比如白眼
或是前陣子滾石大 有用出學習表情的工作流
把類似表情找來 自己修改一下圖
下面這個是我做眼球的  手動改150張  不用很細緻AI大概學會之後,
我用了人臉建模錄製了一個眼球跑來跑去的影片
效果很好  全部都有跟上,翻白眼 鬥雞眼

我上面說的人臉建模的軟體是   VAM  具體這歸類啥叫啥名字不要較真
他可以捏臉捏動作,按照你需求下去做動作  補齊角度之類的

最下面有個對照的  表情眼神不一樣差很多,不用擔心自己畫的不好   只要讓AI知道那是瞳孔就夠了
他會去學習DST的眼睛來補齊,最主要還是要你自己試試看,"有耐心去手動修圖"

image.png image.png

image.png
回复 支持 反对

使用道具 举报

9

主题

221

帖子

4485

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4485

万事如意节日勋章

发表于 2024-3-25 09:38:49 | 显示全部楼层
2、3放弃,1还是有可能的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-18 18:40 , Processed in 0.102881 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表