deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: jaysfing

通过Stable-diffusion+Lora补全SRC极限角度的思路与实践

  [复制链接]

0

主题

24

帖子

1145

积分

初级丹圣

Rank: 8Rank: 8

积分
1145

稀奇古怪节日勋章

发表于 2023-10-8 00:41:07 | 显示全部楼层
支持一下,思路没问题。使用UE5的人头生成足够的角度,包括一些表情。再用LORA仿照该角度替换。不过LORA的表情通常不会像真人那么准确,特别是不会有说话中的那么多口型,要想实现,还会更加复杂。SD即使用真人照片训练,也只能算“猜测”表情。
回复 支持 1 反对 0

使用道具 举报

3

主题

189

帖子

2884

积分

初级丹圣

Rank: 8Rank: 8

积分
2884

万事如意节日勋章

发表于 2023-10-8 10:40:59 | 显示全部楼层
本帖最后由 百里瑾轩 于 2023-10-8 10:42 编辑

如果是有这个角度,但比较糊,可以用sd猜出来清晰版的吗?或者用这个图生图方法重绘一下使之更像。
回复 支持 反对

使用道具 举报

0

主题

104

帖子

632

积分

高级丹师

Rank: 5Rank: 5

积分
632
发表于 2023-10-8 11:49:53 | 显示全部楼层
研究了一晚上,用的秋叶的整合包,打完预处理就不知道怎么进行下一步训练了,因为和视频里的软件不一样,找不到train目录,希望大佬可以出个教程,提供一下训练的软件。。。
回复 支持 反对

使用道具 举报

9

主题

156

帖子

4952

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4952
 楼主| 发表于 2023-10-8 12:52:57 | 显示全部楼层
longsxp4444 发表于 2023-10-8 11:49
研究了一晚上,用的秋叶的整合包,打完预处理就不知道怎么进行下一步训练了,因为和视频里的软件不一样,找 ...

看一下那个附件里那个b站1一分钟视频教程,train目录是自己手动建的。
回复 支持 反对

使用道具 举报

0

主题

104

帖子

632

积分

高级丹师

Rank: 5Rank: 5

积分
632
发表于 2023-10-9 00:33:30 | 显示全部楼层
control_v2p_sd15_mediapipe_face 这个可以分享一下吗?找不到
回复 支持 反对

使用道具 举报

9

主题

156

帖子

4952

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4952
 楼主| 发表于 2023-10-9 01:35:53 | 显示全部楼层
longsxp4444 发表于 2023-10-9 00:33
control_v2p_sd15_mediapipe_face 这个可以分享一下吗?找不到

https://huggingface.co/CrucibleA ... aPipeFace/tree/main
回复 支持 反对

使用道具 举报

9

主题

101

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
发表于 2023-10-9 02:50:25 | 显示全部楼层
我感觉是表情这些很难去生成,牙齿这些
回复 支持 反对

使用道具 举报

0

主题

38

帖子

395

积分

初级丹师

Rank: 3Rank: 3

积分
395
发表于 2023-10-9 22:59:52 | 显示全部楼层
对SD很熟悉自己也练了好些个LORA了,上月尝试了下类似方法不过放弃了,看来我行动力还是不行呀。
回复 支持 反对

使用道具 举报

11

主题

94

帖子

2587

积分

初级丹圣

Rank: 8Rank: 8

积分
2587
发表于 2023-10-10 00:04:50 | 显示全部楼层
极端角度的效果如何呢
回复 支持 反对

使用道具 举报

9

主题

101

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
发表于 2023-10-10 00:20:57 | 显示全部楼层
jaysfing 发表于 2023-10-6 16:51
SD 训练-图像预处理 会对图像裁剪识别,生成一个txt文档,标记正向提示词  可以理解为dfl的切脸

这个不需要打标吧,又不训练这个
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-10-6 12:32 , Processed in 0.093956 second(s), 8 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表