deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 554|回复: 12

LivePortrait一键注视镜头?

[复制链接]

43

主题

810

帖子

6094

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6094

万事如意节日勋章开心娱乐节日勋章

 楼主| 发表于 2025-1-12 16:25:14 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 WaveBedo 于 2025-1-13 03:56 编辑

未标题-2.png

有坛友为AdvancedLivePortrait增加了一个视线跟随的功能,
这个功能的作用是头转动时,依然保持注视镜头(上传的图片需要注视镜头),
我觉得这个功能很有价值
https://dfldata.cc/forum.php?mod=viewthread&tid=20121
我希望AdvancedLivePortrait能够更进一步,
增加一个,一键注视镜头,的功能
将不是注视镜头的图片,一键改成注视镜头

大家可以尝试将各个角度的图片,将它改成注视镜头,
操作起来是不容易的,点击四五下都不一定能够成功,
最后可能需要手动输入数字,慢慢加加减减才能成功。
如果我有50张图片,想都改成注视镜头,那将是不少的工作量
所以,如果能够有一个,一键注视镜头,的功能,
那将会带来很大的便利

论坛里有探测人脸角度的工具,不知道网络上是否存在可以探测眼球角度的工具,
如果存在探测眼球角度的工具,那将它与LivePortrait结合起来,
是否可以实现,一键注视镜头,的功能

论坛里应该是卧虎藏龙的,
如果有高手有这方面的经验,希望能够出手相助啊
如果你觉得这个功能是有价值的,不妨研究一下




按角度筛选头像,可打印角度分布信息 v0.2
https://dfldata.cc/forum.php?mod=viewthread&tid=3073

【补角度】可批量生成的AdvancedLivePortrait   
https://dfldata.cc/forum.php?mod=viewthread&tid=20079
【补表情角度】AdvancedLivePortrait-WebUI 魔都版v0.1
https://dfldata.cc/forum.php?mod=viewthread&tid=19896

【原版】AdvancedLivePortrait-WebUI整合包、汉化包
整合包
https://dfldata.cc/forum.php?mod=viewthread&tid=19850
汉化包
https://dfldata.cc/forum.php?mod=viewthread&tid=19865
GitHub项目位置:
https://github.com/jhj0517/AdvancedLivePortrait-WebUI

ComfyUI是有LivePortrait插件的,所以,也可以在ComfyUI研究一下
liveportrait批量修改
https://dfldata.cc/forum.php?mod=viewthread&tid=19968



回复

使用道具 举报

82

主题

1600

帖子

8279

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8279

万事如意节日勋章开心娱乐节日勋章

发表于 2025-1-12 17:46:34 | 显示全部楼层
好像不支持多人,希望增加识别多人
回复 支持 反对

使用道具 举报

43

主题

810

帖子

6094

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6094

万事如意节日勋章开心娱乐节日勋章

 楼主| 发表于 2025-1-12 18:12:56 | 显示全部楼层
本帖最后由 WaveBedo 于 2025-1-12 18:22 编辑
mzh920 发表于 2025-1-12 17:46
好像不支持多人,希望增加识别多人

你是说一张图片,有多个人吗?
那个先用Photoshop把多个人分开,
然后用AdvancedLivePortrait分别调整每个人的表情,
然后再用Photoshop拼合起来

用来修改表情,但不是用在DFL上面的,
应该会有一些人用
但论坛里用你这个功能的人,应该是不是很多的
回复 支持 反对

使用道具 举报

7

主题

41

帖子

267

积分

初级丹师

Rank: 3Rank: 3

积分
267
发表于 2025-1-12 23:34:19 | 显示全部楼层
还不如学comfyui。。。。
回复 支持 反对

使用道具 举报

82

主题

1600

帖子

8279

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8279

万事如意节日勋章开心娱乐节日勋章

发表于 2025-1-13 00:26:21 | 显示全部楼层
WaveBedo 发表于 2025-1-12 18:12
你是说一张图片,有多个人吗?
那个先用Photoshop把多个人分开,
然后用AdvancedLivePortrait分别调整每个 ...

多人图用的地方太多了,
回复 支持 反对

使用道具 举报

3

主题

202

帖子

3771

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3771
发表于 2025-1-13 00:52:28 | 显示全部楼层
我看了下 a502502902 分享的帖子,
他在一月9号的版本上已经有视线跟随的选项了呀?
https://dfldata.cc/forum.php?mod=viewthread&tid=20121

还是说这个功能目前不能达到你的预期么?
回复 支持 反对

使用道具 举报

43

主题

810

帖子

6094

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6094

万事如意节日勋章开心娱乐节日勋章

 楼主| 发表于 2025-1-13 03:37:55 | 显示全部楼层
Terea 发表于 2025-1-13 00:52
我看了下 a502502902 分享的帖子,
他在一月9号的版本上已经有视线跟随的选项了呀?
https://dfldata.cc/fo ...

他这个视线跟随的功能,作用是头转动时保持注视镜头(上传的图片需要注视镜头)
我想要增加的功能是,将不是注视镜头的图片,一键改成注视镜头,
作用是不一样的。
想要这个功能的原因是,将图片改成注视镜头,不容易,特别是数量多的时候
回复 支持 反对

使用道具 举报

3

主题

202

帖子

3771

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3771
发表于 2025-1-13 06:41:28 | 显示全部楼层
WaveBedo 发表于 2025-1-13 03:37
他这个视线跟随的功能,作用是头转动时保持注视镜头(上传的图片需要注视镜头)
我想要增加的功能是,将 ...

哦哦哦哦...
是我会错意了~~
回复 支持 反对

使用道具 举报

43

主题

810

帖子

6094

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6094

万事如意节日勋章开心娱乐节日勋章

 楼主| 发表于 2025-1-13 18:57:46 | 显示全部楼层
本帖最后由 WaveBedo 于 2025-1-13 18:59 编辑
Terea 发表于 2025-1-13 06:41
哦哦哦哦...
是我会错意了~~
360截图20250110100900955.png
https://dfldata.cc/forum.php?mod=viewthread&tid=20121
他的视线跟随功能应该是,
计算每次转头时,眼球会转动的角度,
然后减去这个转动的角度,
这样就保持了原来的眼球不动

想要实现将不是注视镜头的图片,改成注视镜头,
应该需要有一个探测眼球的工具,
假如能够探测到眼球的角度是x=n、y=m
而眼睛注视镜头的角度应该是固定的,
例如,x=0,y=0,

这样上传图片之后,检测到眼球的角度x=n、y=m,
然后程序将眼球减去相应的角度,那眼球就会变成x=0,y=0
这样应该就会变成注视镜头了

回复 支持 反对

使用道具 举报

3

主题

202

帖子

3771

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3771
发表于 2025-1-14 06:10:24 | 显示全部楼层
WaveBedo 发表于 2025-1-13 18:57
https://dfldata.cc/forum.php?mod=viewthread&tid=20121
他的视线跟随功能应该是,
计算每次转头时,眼球 ...

嗯嗯~就好像剪映里面的视线修正功能,让眼睛一直看着镜头~
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-2-6 01:07 , Processed in 0.122648 second(s), 36 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表