deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 4597|回复: 24

AI黑科技图片视频处理工具箱合集,免安装开箱即用

[复制链接]

11

主题

98

帖子

3058

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3058
 楼主| 发表于 2022-10-2 19:16:09 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 lovedwf 于 2022-11-3 16:54 编辑

写在前面

近几年,有一类工具出镜率特别高,就是基于各种开源算法、大厂接口衍生出来的 AI 工具。
从语音合成,到老照片人像修复,从图片、视频高清无损放大、到算法帮你抠图,亦或是转变成动漫人物……这些本该是高高在上、门槛颇高的 AI 项目,被热心大佬们做成了人人可用的、有图形窗口的傻瓜式软件应用,使得我们可以尝鲜,难道还有比这更让人激动的事情嘛?


开源AI黑科技工具箱合集,免安装即开即用
一款面向普通人的AI桌面APP工具箱,免安装即开即用,已支持18+AI模型,内容涵盖语音合成、视频补帧、视频超分、目标检测、图片风格化、OCR识别等领域。
目前开发者提供了绿色免安装的独立运行包,也发布了融合所有功能的安装包,可以按需使用。效果怎么样,一一来介绍。
1.png


AI 人像修复

AI 人像修复嘛,就是利用 AI 模型,把因为失焦、低分辨率、高噪点等问题导致的模糊老照片 ,修复成更为清晰的人像图片。

其中效果、口碑都不错的开源项目有阿里家的 GPEN腾讯家的 GFPGAN,今天这个项目里的 AI 人像修复工具,封装的就是 GFPGAN

具体操作就跟前面说的那样,有手就行, 「选择文件」找到待修复的图,然后点击「开始」,静等 1 秒,在原图目录下就会生成修复后的图片。

2.png

我们还是直接来看效果吧,左边为我从浏览器直接截的老照片,右边为修复出的效果图,有老太太:

老爷爷:

还有小女孩:

当然,也有这种略微有点翻车的,所以在测试时,最好用那种五官清晰的正面照。

不过据作者所说,目前受限于 ncnn 模型转换,这个工具只有 N × N 的矩形图片效果最好。



图片转漫画

去年 GitHub 上由武汉大学和湖北工业大学倒腾出来的 AnimeGAN 项目很火,它可以把人物图片通过 AI 模型转变成漫画人物,这是项目上给出的示例:

其实你在知乎、B 站上一搜,能找到不少教你把代码部署到本地,然后通过命令行调用生成的教程。

这个工具就很傻瓜操作了,和上面那个工具一样,可选项就一个「选择文件」,一个「开始」。

所以我们还是直接来看效果,比如 BlackPink 女团里的 Jennie:

比如国内的女星,杨颖和杨幂:

还有「此人不存在」这个网站上随机生成的人像:

我甚至还试了两张小动物,虽然不是人像,但同样非常有趣:

软件本身只有不到 9M 大小,如果大家想自己做个漫画风头像,不用再去找 App、网站了,这个小工具帮你轻松解决。

美中不足的是,和上面一样,测试时我发现只有 N × N 的矩形图片效果最好,不过对于头像来说矩形正合适。



视频4K放大、人像高清修复工具

所谓 AI 变高清其实就是 AI 无损放大,通过算法把低分辨率的图像映射生成一张高分辨率的图像,从而实现变高清的功能。

老牌的 waifu2x 模型,这两年正火的腾讯家的 Real-ESRGAN 效果都很不错,过去我们安利的工具也大多出自这两种模型。

而在工具箱里,直接把这些模型给包圆了,都有相对应的工具:

比如 Real-ESRGAN 的 4 倍放大,可以把 95KB 大小,217 × 217 分辨率的模糊图片,变成 942KB 大小,872 × 872 分辨率的清晰图片,强行拼图就成了下面这样:

当然,还有这种变高清的,这是原图:

这是 4 倍放大的高清图:

更厉害的是,这些工具,是支持视频放大变高清的,不知道大家在 B 站、抖音上见没见过那种老视频、老 MV 的修复版片段,就是逐帧逐帧把图片变清晰后再合成,现在我们也能这么搞。

下面是测试效果:
视频1
视频2

视频的放大对硬件有不小的要求,处理起来会吃不少资源,虽然 Paper2gui 提供有内存模式,但老爷机还是慎用。。。



AI 视频抠像/人像抠图

抠图,一键去除背景,保留人像。抠图细节基本满意。

但工具箱中,提供有两个独立的 AI 视频抠像工具,操作同样小白。

我试了两个视频,给大家看看效果

可以看到,这些自动抠像后会帮你输出一个绿幕背景,后期你想再怎么折腾也就更方便了。

不过问题也有,视频抠图针对采访、座谈类效果更好。对于比如跳舞的小姐姐,当人物动作浮动偏大后,抠图效果就不理想了。



人工智能语音合成

比如微软、抖音、阿里三家语音合成工具,像抖音这个,和剪映里的 AI 声一模一样,相信有小伙伴用的到。


各引擎使用效果对比
  • 逼真度:微软 > 火山 > 阿里云
  • 语言丰富度: 微软 > 火山 > 阿里云
  • 中文丰富度: 火山 > 微软 > 阿里云
  • 费用:微软 > 阿里云 > 火山



视频补帧

工具箱里有两款视频补帧工具,所谓补帧,就是把视频重新分割为一张张图片,然后两张图片之间再利用 AI 算法重新生成一张中间图,合成后的视频看着就更流畅了。

这是原视频:

这是补帧后的新视频:

区别还是挺明显的,但问题是这玩意太吃硬件,硬件够的小伙伴可以去试试。



AI目标检测

还有一个 AI 自动识别的功能,可以识别人,识别物件,但好像需要自己添加模型,所以知道 YOLO 且想玩的,可以自己去了解一下。



写在最后

上面提到的每一个工具箱里 AI 工具,都是独立的可执行文件,体积小,操作简单,对哪个功能感兴趣,下载下来试试看,反正开箱即用,随用随走,哎这就很棒,最后收点搬运费,感谢大家支持!


资源永久有效,论坛的检测功能有误!


回忆留美,也只是过去!
回复

使用道具 举报

2

主题

35

帖子

437

积分

初级丹师

Rank: 3Rank: 3

积分
437
发表于 2022-10-3 11:21:41 | 显示全部楼层
本帖最后由 xuan52rock 于 2022-10-3 11:23 编辑



我看已经有网页版了,还可以选各种风格
https://api.69tianqi.com/tool/api-cartoon.html
无标题.png
回复 支持 反对

使用道具 举报

11

主题

98

帖子

3058

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3058
 楼主| 发表于 2022-10-3 12:04:16 | 显示全部楼层
xuan52rock 发表于 2022-10-3 11:21
我看已经有网页版了,还可以选各种风格
https://api.69tianqi.com/tool/api-cartoon.html
...

这只是其中一个简单的功能
回忆留美,也只是过去!
回复 支持 反对

使用道具 举报

0

主题

631

帖子

3223

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3223
发表于 2022-10-3 20:20:06 | 显示全部楼层
论坛有人发过了,重复了,这是地址
https://dfldata.xyz/forum.php?mo ... 44&highlight=AI
回复 支持 反对

使用道具 举报

1

主题

6

帖子

276

积分

初级丹师

Rank: 3Rank: 3

积分
276
发表于 2022-10-7 18:37:54 | 显示全部楼层
牛的一比!!!
回复

使用道具 举报

0

主题

32

帖子

643

积分

高级丹师

Rank: 5Rank: 5

积分
643
发表于 2022-10-9 05:31:34 | 显示全部楼层
下载来收藏,多谢分享
回复 支持 反对

使用道具 举报

0

主题

2

帖子

17

积分

初级丹童

Rank: 1

积分
17
发表于 2022-10-10 22:59:00 | 显示全部楼层
感谢分享
回复

使用道具 举报

2

主题

43

帖子

1510

积分

初级丹圣

Rank: 8Rank: 8

积分
1510
发表于 2022-10-11 14:35:49 | 显示全部楼层
可惜了,不能批量
回复 支持 反对

使用道具 举报

1

主题

15

帖子

178

积分

高级丹童

Rank: 2

积分
178
发表于 2022-10-11 20:11:31 | 显示全部楼层
说实话,特别不好用,很多工具没有用的,卡在20%,转动漫效果也一般,能用的是语音和对齐工具
回复 支持 反对

使用道具 举报

11

主题

98

帖子

3058

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3058
 楼主| 发表于 2022-10-11 20:15:14 | 显示全部楼层
460864734 发表于 2022-10-11 20:11
说实话,特别不好用,很多工具没有用的,卡在20%,转动漫效果也一般,能用的是语音和对齐工具 ...

你的电脑配置?
回忆留美,也只是过去!
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-22 05:12 , Processed in 0.174310 second(s), 40 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表