合成时自带SRC的牙齿怎么处理

辣辣辣

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

SRC素材露牙齿，在合成时张嘴部分就有牙齿，但是在去除带牙齿的素材以后，整个视频嘴的部分就不张开了，求大佬帮助有什么办法能解决一下。

ccctttccct

src里没有张嘴的吗

z6163727

嘴吧的部分有點小複雜  耐心的看一下

首先要讓她張嘴  牙齒是不用去掉的 黑色空洞也不用去掉 不過舌頭要去


換個方式說 DST的牙齒不用畫虛線，DST畫虛線會進行保留，合成時(訓練時)會是DST的牙齒
然而         SRC的牙齒也不用畫虛線，SRC畫虛線會進行刪除，合成時(訓練時)SRC會是沒有牙齒的


所以如果你SRC牙齒畫了虛線就變成沒牙齒，AI判定沒有張嘴素材，然後AI就拿正常臉貼上了
(這是我自己進行腦補的)

一區是  張嘴 沒舌頭 嘴裡不需要畫虛線  
二區是  張嘴有舌頭 有黑洞的地方不需要畫
三區是  合成效果  左邊原圖  右邊是製作完成後(你細品那舌頭是一樣的 嘴吧空洞牙齒是不一樣的)




一區



---------------------------------------------------------------------------------------------------------------------
二


----------------------------------------------------------------------------------------------------------------------
三

辣辣辣

ccctttccct 发表于 2023-5-23 21:31
src里没有张嘴的吗

写错了是SCR素材牙齿，换成闭嘴以后就不张嘴了

辣辣辣

z6163727 发表于 2023-5-23 23:09
嘴吧的部分有點小複雜  耐心的看一下

首先要讓她張嘴  牙齒是不用去掉的 黑色空洞也不用去掉 不過舌頭要去 ...

大佬我打错了，是SRC素材带牙齿，在合成时候只要是张嘴的素材就自动把牙齿合成带上了，您说的这个方法是用画遮罩的方式是吗

z6163727

辣辣辣 发表于 2023-5-23 23:46
大佬我打错了，是SRC素材带牙齿，在合成时候只要是张嘴的素材就自动把牙齿合成带上了，您说的这个方法是 ...

不太明白你在講甚麼  我是說得是遮罩沒錯
張嘴的素材是指哪個
自動把牙齒合成代上了 是甚麼意思
整串的意思無法理解

我猜你 遮罩把牙齒圈起來了所以上面才說這麼多   

依照我上面的來做  DST的牙齒會不見 變成SRC的牙齒(應該說整個嘴吧會換)
DST如果有舌頭  舌頭會留著

peppeoni

很显然你的SRC数量太少，张嘴素材都刚好露牙，但你却希望得到DST那种张嘴不露牙的表情，只能说你把DFL神化了，它能做到的只是把SRC中角度与位置与DST接近的五官贴过去而已，顶多就是在比较细小的角度差异与五官位置差异上做适当的扭曲而已，并不能真正意义的做到表情模拟。两个不同人张开嘴巴时，即使开阖的幅度接近，依旧会随着五官上的差异，如牙齿大小、嘴唇厚度等等，与张嘴当下喜怒哀乐不同表情，而有不同程度的牙齿甚至牙龈外露，而DFL无法深入判读这些表情差异。举个例子，假设今天你这张DST的landmark是略为生气的露牙张嘴约1公分，在缺乏生气的SRC表情下，DFL只会从你的SRC接近角度的脸图中挑选出最接近张嘴1公分的那张图，即使那张是含蓄着没有露齿的微笑，素材少的情况下就是这样。因此你SRC素材几乎都是露齿笑的表情，那么你的合成结果，当DST是抿嘴笑或是张嘴不露齿笑的画面时，当然最终都会变成张嘴露齿笑。当然，你把所有露齿笑的SRC都删除后，整个SRC都闭着嘴，DFL又怎么知道他张嘴会是什么样子呢?除非你能补齐SRC素材，或者专注于训练表情，训练表情的方法有很多，除了倚赖遮罩外，还可以依赖其他软件无中生有，或是利用DF模型素材可以反着练的特性，练出混合更多DST五官特征的表情，再从中做筛选，或是自行后制。素人SRC素材太少，倚靠训练角度与表情，是一段非常漫长的路，而且用低参数模型效果非常差。一个模型练得越久、真脸开越久，会越接近越像SRC，但整个表情也会朝DFL所挑选的那几张SRC的五官靠拢，所以当你所有SRC都是闭着嘴睁着眼时，在训练初期能够得到DST闭眼或开嘴的结果，但长得比较不像SRC，越练越久，越像SRC后，眼睛当然也会慢慢睁开，嘴巴慢慢阖上，表情变得跟DST完全不同了。

peppeoni

z6163727 发表于 2023-5-23 23:09
嘴吧的部分有點小複雜  耐心的看一下

首先要讓她張嘴  牙齒是不用去掉的 黑色空洞也不用去掉 不過舌頭要去 ...

要訓練表情的話，口腔一定要圈起來，只圈舌頭只會讓DFL判斷依據變得混亂，尤其如果你用鎮壇之寶這類的遮罩，因為不含原始訓練素材，前面幾千幾萬素材都是圈口腔，你後面虛線開始自己擅自去除口腔只留下舌頭，鎮壇之寶也會越練越歪，加上我們訓練表情，無疑是為了讓SRC做到更接近DST的變化幅度，例如你的SRC嘴巴張最大的只有露齒微笑，要練出開心大張口的笑臉，只圈出舌頭會讓訓練結果變成微張嘴笑，中間口腔部分會直接變成用牙齒填充，除非...你本身SRC就有張嘴露齒+口腔+舌頭的圖，當然在你兩邊都固定虛線不圈口腔的情況下，訓練結果會蠻接近。但一旦缺素材，這樣的畫法就會出現反效果，當然最糟的情況就是把整個遮罩如鎮壇之寶都練偏了。

辣辣辣

peppeoni 发表于 2023-5-24 01:27
很显然你的SRC数量太少，张嘴素材都刚好露牙，但你却希望得到DST那种张嘴不露牙的表情，只能说你把DFL神化 ...

感谢大佬指点迷津

辣辣辣

peppeoni 发表于 2023-5-24 01:36
要訓練表情的話，口腔一定要圈起來，只圈舌頭只會讓DFL判斷依據變得混亂，尤其如果你用鎮壇之寶這類的遮 ...

感谢大佬指点迷津