先上图,慢慢编辑内容
用wan2.2 图生视频玩了2个星期了,继续交流下经验心得,没了解过的可以看我上一贴
https://www.javbus.com/forum/forum.php?mod=viewthread&tid=165450&extra=&page=1
工作流教学可以看看坛友 Zarados的教学贴
https://www.javbus.com/forum/forum.php?mod=viewthread&tid=164437&highlight=AI
本人电脑配饰AMD 5600 32G内存 3080 10G矿卡,虚拟内存设置150G~200G
首先你得有张还行的N卡,A卡大概率是不行的。8G显存是刚需,如果只有4G显存基本无缘,6G或许可以尝试下q2 q3模型。10系显卡大概率体验很差,20系稍微好点,但是用不了插帧工具会很费时间,30系及以上才有良好的体验,显存大小决定了你能不能玩,显卡性能决定了你图生视频速度,内存大小决定了你能一次生成多长时间的视频和生成速度。
lora 的作用是让你更容易生成和Lora一样的动作,lora分高噪声和低噪声,高噪声主要影响动作框架之类的,一般0.7~1比较合适,太低了就不像lora里的动作。低噪声是扣细节的,这个得你慢慢试错。
2个星期玩下来的经验,
首先是图生视频的图片选择,如果你要生成1080P及以下的视频(原始非放大后)一般建议原图找1.5~2倍分辨率的图片,比如我选择生成480*640(放大前),我就自己找或者扣960*1280的图片,网上随便找,最好是有人物正脸的,因为AI无法从一个侧脸生成你心中正脸的人,最好不要遮挡。半身照比较好,可以让AI知道人物的身材,全身照脸部还原可能不真实,实在没有大头照也行,身材你可以自己写提示词让AI生成。尽量图片选择无美颜磨皮的艺术照,化妆倒是没关系,因为工作流第一步压缩图片,你的原始分辨率高人物脸部细节越多,里面给到AI的信息就越多,可以让AI自己取舍,如果是美颜磨皮过的,皮肤轮廓什么都没有,AI也没办法给你生成表情轮廓。比例最好一样,虽然我不知道不一样比例会有什么问题。最好把人物用其他图片工具抠出来,AI清晰下更好,扣出来的人物你可以让AI自定义背景,比如公交车上 泳池里,如果图片自带背景会增加AI计算量,而且还不能自定义背景。示例图片我没去除背景,所以提示词写了浴室他也不会生成。
然后是生成视频的帧数、帧率和分辨率问题,因为我用的工作流有插帧和放大,帧率一般建议选择25~27,低了会感觉是慢动作。帧数我设置185,因为我的虚拟内存给的足够大,大概生成视频14秒左右,分辨率是480*640,放大后是960*1280,视频比例3:4竖屏,这个比例生成的骑乘位或者传教士姿势正好可以把腿部都填满画面。这个不是强制的,你要是喜欢后入姿势可以选4:3或者其他比例。
使用过程中可能会报错,一般是内存报错,可以尝试降低帧数,或者插帧报错。如果程序不能运行,你找B站大佬问问,我也不懂。
合成建议mp4或者其他视频格式,gif格式的体积是视频的10倍以上。
剩下的关于提示词,通义万相有提示词写作规范,这个没法教只能自己尝试,哪怕一个字的差别生成的视频都有很大区别。尽量照着写剧本的规范去写提示词。
最后放下我的lora和提示词
lora用的是wan22.r3v3rs3_c0wg1rl-14b-High-i2v_e70 和wan22.r3v3rs3_c0wg1rl-14b-low-i2v_e70
提示词:
场景转到浴室,女人转身面向镜头,衣服迅速消失。镜头拉远固定,展示这个女人的全身,她身材娇小瘦弱。这个女人双手撑在椅子扶手上,抬头盯着镜头,露出惊恐的表情,她在哭泣,双腿呈M形状分开,小腿举高在空中晃动,她戴着脚链,粉嫩的脚悬空对着镜头。她皮肤白皙透明,阴道粉嫩无毛慢慢流出微量白色泡沫,她黄豆大的乳头穿着乳钉,巨大的乳房在晃动,女人坐在男人小腹上,一根静脉曲张的的粗大阴茎插在她的阴道里,她腰部向上挺动。一个黑人男人挺胸坐在椅子上,露出邪恶的笑容,他粗大的阴茎坚挺向上,他双手抱着女人的大腿,手臂抬高把女人的大腿举到胸口,然后快速放下,直到男人大腿触碰女人臀部,重复动作,动作激烈。写实风格,电影画质,细节拉满。
原图:

图生视频:

原图:

图生视频:

原图:

图生视频:







还没有评论,来抢沙发吧。