deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 315|回复: 17

为啥我合成的视频比原视频多几秒,试了好几个不同的视频

[复制链接]

35

主题

501

帖子

2916

积分

初级丹圣

Rank: 8Rank: 8

积分
2916

万事如意节日勋章

 楼主| 发表于 2024-5-3 08:58:49 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 pasanonic 于 2024-5-3 09:00 编辑

多1到2秒不等 ,而且后面视频会发生语音不同步


帧图没有动  都原版和fanda的切帧都试了   只删了aligned不要的脸图

合成MP4  合成avi都这样 帧率是30



回复

使用道具 举报

35

主题

501

帖子

2916

积分

初级丹圣

Rank: 8Rank: 8

积分
2916

万事如意节日勋章

 楼主| 发表于 2024-5-3 09:13:54 | 显示全部楼层
刚刚发现  fanda的切帧 是原版的切帧图数量不一样
回复 支持 反对

使用道具 举报

11

主题

141

帖子

906

积分

高级丹师

Rank: 5Rank: 5

积分
906
发表于 2024-5-3 13:38:24 | 显示全部楼层
pasanonic 发表于 2024-5-3 09:13
刚刚发现  fanda的切帧 是原版的切帧图数量不一样

快切好像是根据检测范围来切图的,人脸小于检测范围就略过
回复 支持 反对

使用道具 举报

5

主题

108

帖子

2739

积分

初级丹圣

Rank: 8Rank: 8

积分
2739
发表于 2024-5-3 14:44:45 | 显示全部楼层
pasanonic 发表于 2024-5-3 09:13
刚刚发现  fanda的切帧 是原版的切帧图数量不一样

个观推测原因(未验证,大佬莫喷):大概率是出现了一图识别多取景框从而切了多个脸,而原版和fanda对于元数据的对齐没有做好的话,后面合成会出现某一帧跳动,遮罩和特征点也会出错  ,从而出现你说的这种情况.
解决方案:用mve提脸后,检查一图多脸情况,把多余的取景框在视频帧容器里面删除即可
回复 支持 反对

使用道具 举报

35

主题

501

帖子

2916

积分

初级丹圣

Rank: 8Rank: 8

积分
2916

万事如意节日勋章

 楼主| 发表于 2024-5-3 15:07:32 | 显示全部楼层
本帖最后由 pasanonic 于 2024-5-3 15:08 编辑
itqzja5 发表于 2024-5-3 14:44
个观推测原因(未验证,大佬莫喷):大概率是出现了一图识别多取景框从而切了多个脸,而原版和fanda对于元数据 ...

_0  _1  应该没问题吧 本来就是一张图切两张脸   1W7的切脸图 我都手动在MVE查看了

后半程语音不同步
回复 支持 反对

使用道具 举报

5

主题

108

帖子

2739

积分

初级丹圣

Rank: 8Rank: 8

积分
2739
发表于 2024-5-3 15:27:54 | 显示全部楼层
pasanonic 发表于 2024-5-3 15:07
_0  _1  应该没问题吧 本来就是一张图切两张脸   1W7的切脸图 我都手动在MVE查看了

后半程语音不同步

找到音画不同步的起始点那附近的帧  对比下脸容器和视频帧容器的对应关系是否由差错?还有对比merged文件夹输出的合成结果与视频帧容器内的文件哪里有出入  删掉merged里多余的帧再合成
回复 支持 反对

使用道具 举报

9

主题

1928

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
10681

真我风采勋章万事如意节日勋章

发表于 2024-5-3 15:52:27 | 显示全部楼层
pasanonic 发表于 2024-5-3 15:07
_0  _1  应该没问题吧 本来就是一张图切两张脸   1W7的切脸图 我都手动在MVE查看了

后半程语音不同步

源视频MP4的编码非标准,就会音像不同步。个人都是提前用AE,另存为标准MOV视频,再去切帧。
回复 支持 反对

使用道具 举报

35

主题

501

帖子

2916

积分

初级丹圣

Rank: 8Rank: 8

积分
2916

万事如意节日勋章

 楼主| 发表于 2024-5-3 15:59:27 | 显示全部楼层
wtxx8888 发表于 2024-5-3 15:52
源视频MP4的编码非标准,就会音像不同步。个人都是提前用AE,另存为标准MOV视频,再去切帧。 ...

我用 SMMVSplitterPortable 无损切合合成 确认语音正常再切原版或fanda工具切的帧
回复 支持 反对

使用道具 举报

9

主题

1928

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
10681

真我风采勋章万事如意节日勋章

发表于 2024-5-3 16:31:58 | 显示全部楼层
本帖最后由 wtxx8888 于 2024-5-3 16:37 编辑
pasanonic 发表于 2024-5-3 15:59
我用 SMMVSplitterPortable 无损切合合成 确认语音正常再切原版或fanda工具切的帧 ...

非要用小工具~你这个软件所谓的无损是切割式(与FFMPEG的分段复制一样),即编码维持原样---有问题的编码
回复 支持 反对

使用道具 举报

35

主题

501

帖子

2916

积分

初级丹圣

Rank: 8Rank: 8

积分
2916

万事如意节日勋章

 楼主| 发表于 2024-5-3 21:16:05 | 显示全部楼层
本帖最后由 pasanonic 于 2024-5-3 21:20 编辑
wtxx8888 发表于 2024-5-3 16:31
非要用小工具~你这个软件所谓的无损是切割式(与FFMPEG的分段复制一样),即编码维持原样---有问题的编码: ...

我把语音提前0.5秒左右差不多对上口型了
不知道那多出来的 1秒哪里来的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-18 13:05 , Processed in 0.087179 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表