deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 16053|回复: 33

基于AI绘画的换脸教学(初级)

  [复制链接]

199

主题

1914

帖子

50万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
508303

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2023-2-9 19:26:25 | 显示全部楼层 |阅读模式
摸索了一段时间AI绘画,浅浅摸索到了一种基于AI绘画的换脸方法,先分享下初步简单方案。 后续会有更高效果的AI绘画换脸方法


效果展示如下
image.png
00762-1150231686-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00764-1150231688-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00766-1150231690-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png 00760-1150231684-soloillustration,close-up face,media of a hanfugirlhanfuperfect skinmake happy expressionsgorgeouspurebeautyfull detailed.png

学习基础
先学会基础的AI绘画,知道图生图的用法。没玩过的小白想玩AI绘画,请见 https://dfldata.xyz/forum.php?mo ... 2402&extra=page%3D1

基本原理
利用AI绘画图生图(img2img)里的局部重绘(inpainting)功能,将目标图的五官抹去,再通过准备好的AI模型和描述词,来生成只有五官发生变化的新人脸

具体操作流程
1. 随便下载安装一个AI绘画模型(推荐真人向的模型)
2. 在图生图里选择自己要换脸的图
3. 点击局部重绘,把五官全部抹去
4. 利用训练好的lora模型或其他自定义单人模型和相关提示词进行生成
5. 获得换脸后的图

image.png


核心难点
换脸大家肯定想换成指定的一个人,上述流程中并没有提及怎么来指定目标人物换脸,这点稍微有点难度,需要训练一个目标人物的专属lora模型
至于什么是lora模型,lora模型怎么训练,lora模型怎么使用,
待我下期教学细细讲解
本期我也没使用针对专人训练的lora模型,所以每次换出来的脸长的不一样

找了个黑寡妇的模型测试,验证是可以实现指定人物换脸的
image.png



未解决问题
每次生成的脸五官位置、眼神、微表情会有些许变化,不如dfl换脸来的还原,这个我还没摸索出好的方案,供大佬们来探索







评分

参与人数 12威望 +1 贡献 +11 收起 理由
lieyandatianshi + 1 赞一个!
kyorz + 1 赞一个!
RyanChang + 1 很给力!
yutiancsm + 1 很给力!
benlei + 1 很给力!
三也多 + 1 赞一个!
flyxxbird + 1 很给力!
redgg2 + 1 很给力!
bbb110690229 + 1 很给力!
a67994407 + 1 很给力!
sdlou + 1 很给力!
xex123580 + 1 很给力!

查看全部评分

提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群519316315
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复

使用道具 举报

4

主题

22

帖子

192

积分

高级丹童

Rank: 2

积分
192
发表于 2023-3-7 16:49:31 | 显示全部楼层
那是不是可以用一个模型把头部去了,另一个模型直接只要头部,然后把两个模型合成一个.这样会不会可以直接用合成加tag使用了.
回复 支持 1 反对 0

使用道具 举报

8

主题

155

帖子

969

积分

高级丹师

squeeze

Rank: 5Rank: 5

积分
969

万事如意节日勋章

发表于 2023-2-9 19:52:07 | 显示全部楼层
滚石大大,如果将局部重绘的重绘幅度参数调小一点或者调整蒙版可以解决问题吗
一切随缘就好
回复 支持 0 反对 1

使用道具 举报

199

主题

1914

帖子

50万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
508303

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2023-2-9 20:00:39 | 显示全部楼层
sdlou 发表于 2023-2-9 19:52
滚石大大,如果将局部重绘的重绘幅度参数调小一点或者调整蒙版可以解决问题吗 ...

不知道,没来得及试。主要我lora模型都还没训练好
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群519316315
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 反对

使用道具 举报

26

主题

334

帖子

2万

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
22623
发表于 2023-2-9 22:12:24 | 显示全部楼层
学习了,滚石大大辛苦!期待下一期教学!
风擎,就是风之引擎。
回复 支持 反对

使用道具 举报

1

主题

68

帖子

696

积分

高级丹师

Rank: 5Rank: 5

积分
696
QQ
发表于 2023-2-10 01:01:43 | 显示全部楼层
厉害,厉害
回复

使用道具 举报

0

主题

8

帖子

64

积分

高级丹童

Rank: 2

积分
64
发表于 2023-2-10 01:23:09 | 显示全部楼层
活到老,学到老
回复 支持 反对

使用道具 举报

2

主题

574

帖子

4419

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4419
发表于 2023-2-10 09:46:30 | 显示全部楼层
插个眼 下班回家好好学习一下
回复 支持 反对

使用道具 举报

6

主题

111

帖子

2083

积分

初级丹圣

Rank: 8Rank: 8

积分
2083

荣誉会员勋章小有贡献勋章

发表于 2023-2-10 09:54:58 | 显示全部楼层
期待单人模型怎么训练的教程
回复 支持 反对

使用道具 举报

3

主题

69

帖子

816

积分

高级丹师

Rank: 5Rank: 5

积分
816
发表于 2023-2-10 10:10:22 | 显示全部楼层
滚石 发表于 2023-2-9 20:00
不知道,没来得及试。主要我lora模型都还没训练好

我训练了个高圆圆的pt,但是感觉没成功... ...
大佬搞懂了方法来发个教程吧~
回复 支持 反对

使用道具 举报

0

主题

20

帖子

361

积分

初级丹师

Rank: 3Rank: 3

积分
361
发表于 2023-2-10 10:22:31 | 显示全部楼层
学习了,期待大佬的研究成果
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-2-24 13:05 , Processed in 0.081881 second(s), 12 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表