deepfacelab中文网

用户名  找回密码
 立即注册(仅限QQ邮箱)
楼主: jaysfing

通过Stable-diffusion+Lora补全SRC极限角度的思路与实践

  [复制链接]

0

主题

24

帖子

1500

积分

初级丹圣

Rank: 8Rank: 8

积分
1500

稀奇古怪节日勋章

发表于 2023-10-8 00:41:07 | 显示全部楼层
支持一下,思路没问题。使用UE5的人头生成足够的角度,包括一些表情。再用LORA仿照该角度替换。不过LORA的表情通常不会像真人那么准确,特别是不会有说话中的那么多口型,要想实现,还会更加复杂。SD即使用真人照片训练,也只能算“猜测”表情。
回复 支持 1 反对 0

举报

3

主题

197

帖子

2663

积分

初级丹圣

Rank: 8Rank: 8

积分
2663

万事如意节日勋章

发表于 2023-10-8 10:40:59 | 显示全部楼层
本帖最后由 百里瑾轩 于 2023-10-8 10:42 编辑

如果是有这个角度,但比较糊,可以用sd猜出来清晰版的吗?或者用这个图生图方法重绘一下使之更像。
回复 支持 反对

举报

0

主题

101

帖子

625

积分

高级丹师

Rank: 5Rank: 5

积分
625
发表于 2023-10-8 11:49:53 | 显示全部楼层
研究了一晚上,用的秋叶的整合包,打完预处理就不知道怎么进行下一步训练了,因为和视频里的软件不一样,找不到train目录,希望大佬可以出个教程,提供一下训练的软件。。。
回复 支持 反对

举报

9

主题

159

帖子

5375

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5375
 楼主| 发表于 2023-10-8 12:52:57 | 显示全部楼层
longsxp4444 发表于 2023-10-8 11:49
研究了一晚上,用的秋叶的整合包,打完预处理就不知道怎么进行下一步训练了,因为和视频里的软件不一样,找 ...

看一下那个附件里那个b站1一分钟视频教程,train目录是自己手动建的。
回复 支持 反对

举报

0

主题

101

帖子

625

积分

高级丹师

Rank: 5Rank: 5

积分
625
发表于 2023-10-9 00:33:30 | 显示全部楼层
control_v2p_sd15_mediapipe_face 这个可以分享一下吗?找不到
回复 支持 反对

举报

9

主题

159

帖子

5375

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5375
 楼主| 发表于 2023-10-9 01:35:53 | 显示全部楼层
longsxp4444 发表于 2023-10-9 00:33
control_v2p_sd15_mediapipe_face 这个可以分享一下吗?找不到

https://huggingface.co/CrucibleA ... aPipeFace/tree/main
回复 支持 反对

举报

9

主题

100

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
发表于 2023-10-9 02:50:25 | 显示全部楼层
我感觉是表情这些很难去生成,牙齿这些
回复 支持 反对

举报

0

主题

36

帖子

385

积分

初级丹师

Rank: 3Rank: 3

积分
385
发表于 2023-10-9 22:59:52 | 显示全部楼层
对SD很熟悉自己也练了好些个LORA了,上月尝试了下类似方法不过放弃了,看来我行动力还是不行呀。
回复 支持 反对

举报

11

主题

94

帖子

2907

积分

初级丹圣

Rank: 8Rank: 8

积分
2907
发表于 2023-10-10 00:04:50 | 显示全部楼层
极端角度的效果如何呢
回复 支持 反对

举报

9

主题

100

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
发表于 2023-10-10 00:20:57 | 显示全部楼层
jaysfing 发表于 2023-10-6 16:51
SD 训练-图像预处理 会对图像裁剪识别,生成一个txt文档,标记正向提示词  可以理解为dfl的切脸

这个不需要打标吧,又不训练这个
回复 支持 反对

举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-4-4 18:52 , Processed in 0.112515 second(s), 33 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表