deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 537|回复: 6

交流下FramePack图生视频提示词

[复制链接]

7

主题

36

帖子

740

积分

高级丹师

Rank: 5Rank: 5

积分
740
 楼主| 发表于 2025-4-28 21:35:21 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
说是支持NSFW的,但是具体什么类型的动作比较好实现?提示词具体怎么表达?

以前在网上用过类似的闭源模型,但是都是英文提示词,抄现成的模板之类的,而滚石大佬发的这个FramePack包支持中文提示词,反而不太会写,不知道是写得详细还是精炼比较好?

另外也不知道是模型所限还是为什么,同样的提示词,有的图片能够一次实现,而另一张构图很接近的图片就无论如何都跑不出正确的效果。

还有一点,采样步数和时长应该不会对提示词的实现有影响吧?

欢迎大家交流,更加欢迎有大佬答疑解惑。
回复

使用道具 举报

0

主题

21

帖子

559

积分

高级丹师

Rank: 5Rank: 5

积分
559

万事如意节日勋章

发表于 2025-4-30 01:31:43 | 显示全部楼层
布鲁诺十二 发表于 2025-4-30 00:27
整明白了,感谢大佬,现在有个问题是Framepack和WAN2.1哪个比较好,听说Framepack在lora方面不太稳定 ...

说明LORA训练的不好罢了,效果肯定Framepack好的多,他的LORA用的是hunyuan的,虽然之前wan2.1在图生视频方面比hunyuan强的多,但是wan2.1有个硬伤,它看过的人体片子太少,所以在人体结构上面有问题,而hunyuan当初训练的时候是阅片无数,所以人体架构非常稳定。

最关键hunyuan用bf16训练出来的lora要比wan2.1像的多,有了Framepack加上LORA在图生视频方面也远超wan2.1了,下面图1是原图,图2我让她跳舞换个姿势,你可以看到他就算变换角度以后人体结构和脸都符合逻辑,这个LORA刚训练了半小时效果还只是一般


原图
250429_221322_387_1101.png

LORA+图生视频随意截取的一帧
vlcsnap-2025-04-30-01h27m21s818.png

回复 支持 1 反对 0

使用道具 举报

0

主题

21

帖子

559

积分

高级丹师

Rank: 5Rank: 5

积分
559

万事如意节日勋章

发表于 2025-4-28 22:59:34 | 显示全部楼层
本帖最后由 fengjunwei 于 2025-4-28 23:03 编辑

配合LORA使用,想要什么人物就有什么人物,想要什么场景就有什么场景,想要什么动作就有什么动作

采样步数30步就行,如果有动作LORA可以开TeaCache加速,没有就去掉,开着TeaCache会影响动作幅度和手的效果

目前已经支持多个LORA文生视频,不需要图片,当然了你也可以训练动作LORA配合图片使用,比如训练一套大招的LORA,让图片人物释放
回复 支持 反对

使用道具 举报

7

主题

36

帖子

740

积分

高级丹师

Rank: 5Rank: 5

积分
740
 楼主| 发表于 2025-4-28 23:31:34 | 显示全部楼层
fengjunwei 发表于 2025-4-28 22:59
配合LORA使用,想要什么人物就有什么人物,想要什么场景就有什么场景,想要什么动作就有什么动作

采样步数 ...

感谢大佬解答,但是我现在用的不是ComfyUI的,是滚石大佬前几天发的FramePack一体包,算是个傻瓜包,没有什么可配置的,就是中文提示词拿捏不准。
回复 支持 反对

使用道具 举报

0

主题

21

帖子

559

积分

高级丹师

Rank: 5Rank: 5

积分
559

万事如意节日勋章

发表于 2025-4-29 00:12:28 | 显示全部楼层
布鲁诺十二 发表于 2025-4-28 23:31
感谢大佬解答,但是我现在用的不是ComfyUI的,是滚石大佬前几天发的FramePack一体包,算是个傻瓜包,没有 ...

我没说comfyui就是官方的包用LORA

https://github.com/lllyasviel/FramePack/pull/157

回复 支持 反对

使用道具 举报

7

主题

36

帖子

740

积分

高级丹师

Rank: 5Rank: 5

积分
740
 楼主| 发表于 2025-4-30 00:27:31 | 显示全部楼层
fengjunwei 发表于 2025-4-29 00:12
我没说comfyui就是官方的包用LORA

https://github.com/lllyasviel/FramePack/pull/157

整明白了,感谢大佬,现在有个问题是Framepack和WAN2.1哪个比较好,听说Framepack在lora方面不太稳定
回复 支持 反对

使用道具 举报

0

主题

15

帖子

457

积分

初级丹师

Rank: 3Rank: 3

积分
457
发表于 2025-4-30 09:06:23 | 显示全部楼层
之前写过一些nsfw的提示词都没有出来,哈哈哈,看来还得再等等提升吧
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-5-10 07:16 , Processed in 0.120808 second(s), 36 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表