deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 636|回复: 2

src缺少部分dst对应的眼神表情可否通过删AB文件解决

[复制链接]

6

主题

35

帖子

892

积分

高级丹师

Rank: 5Rank: 5

积分
892

万事如意节日勋章

 楼主| 发表于 2024-3-25 03:04:42 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 yty9 于 2024-3-25 03:18 编辑

src缺少部分dst对应的眼神表情,实在没有相关src,一直闷头练也练不对,有3个想法:
1用dst和dst对练,让模型学到dst的眼神和表情,之后删除AB文件,放回原src训练回原脸型,不知道之前学到的dst眼神表情还会在吗?还是会被覆盖?或者dst对练后不删AB,放回src练,是否会覆盖学到的眼神而做无用功?
这期间眼嘴优先的开关怎么调整合适,其指的是优先学src的眼神?那对学dst的眼神就没用?
2.或者给这些dst眼睛单画遮罩放到src里,之前试过,因为只有眼睛没有脸型其他部位,好像对训练干扰很大,就好像边学边删,出来的效果有点生硬。
3.或者在大量src里面掺杂少量dst特定眼神表情,期望眼神生效的同时脸型能被大量src修正,目前是先这么练着的,随着src比例不同 训练越久效果也在反复。
想讨论下第一种的可行性。听说删AB文件可以解决脸型不像的问题,就好像清空出干净空白的画板重画,但已经学到了绘画技巧,很快就能画出来。
现在主要想知道眼神是属于学到的“技巧”“而被保留下来?还是属于”素材“而会被清空?在学到原src没有的眼神后,怎么保留下来的同时练回原脸型?
眼嘴优先是在学src还是学dst?



回复

使用道具 举报

10

主题

476

帖子

5554

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5554

万事如意节日勋章

发表于 2024-3-25 08:36:30 | 显示全部楼层
本帖最后由 z6163727 于 2024-3-25 08:43 编辑

給你一個思路你可以考慮手動給他添加表情比如白眼
或是前陣子滾石大 有用出學習表情的工作流
把類似表情找來 自己修改一下圖
下面這個是我做眼球的  手動改150張  不用很細緻AI大概學會之後,
我用了人臉建模錄製了一個眼球跑來跑去的影片
效果很好  全部都有跟上,翻白眼 鬥雞眼

我上面說的人臉建模的軟體是   VAM  具體這歸類啥叫啥名字不要較真
他可以捏臉捏動作,按照你需求下去做動作  補齊角度之類的

最下面有個對照的  表情眼神不一樣差很多,不用擔心自己畫的不好   只要讓AI知道那是瞳孔就夠了
他會去學習DST的眼睛來補齊,最主要還是要你自己試試看,"有耐心去手動修圖"

image.png image.png

image.png
回复 支持 反对

使用道具 举报

12

主题

284

帖子

7970

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7970

万事如意节日勋章

发表于 2024-3-25 09:38:49 | 显示全部楼层
2、3放弃,1还是有可能的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-22 23:21 , Processed in 0.132676 second(s), 35 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表