这可能是目前最好用的角色替换和动作模仿的开源模型~
长沙/设计爱好者/29天前/207浏览
版权
这可能是目前最好用的角色替换和动作模仿的开源模型~
哈喽大家好我是無铭。
Wan2.2-Animate这个新模型,它是一个统一的角色动画生成与角色替换框架。
它支持两种模式分别是
Animation(动作模仿)以及Replacement(角色替换)
动作模仿:
可以实现动作捕捉,将参考视频中角色的动作和表情迁移到静态的图像上,以驱动角色实现动画效果。
角色替换:
可以实现角色替换,将参考视频中的角色替换为参考图像的角色,保证角色的身体动作、面部表情,并与环境的光影、色调融合,达到电影级的生成质量。
使用步骤
重点节点参数
lora0:
人物迁移时重新打光,可以根据结果调整强度
lora1:
4步加速lora
lora2:
也是加速模型
lora4:
动态平衡,有助于人物迁移时动作更加稳定
blocks_to_swap:
16G显存的可以30,最好保持默认30。
显存越小,这数值要调整的越大,但不要拉满到40,会卡死,最多到39,显存占用12G左右。
ref_images
:参考图输入端口
pose_images
:姿态输入端口
face_images
:面部信息输入端口
bg_images
:背景信息端口
mask
:遮罩信息
接入背景和遮罩=角色替换
不接入背景和遮罩=动作模仿
遮罩扩展:
当参考人物体型 > 被替换人物体型 ,可适当调高参数(让遮罩能够完全覆盖大体型人物的活动区域)
当参考人物体型 < 被替换人物体型 ,可适当调低参数 (也可以不调整,因其本身就被覆盖在遮罩内)
最后,
说一下自己的一些小感悟
,AI的产出本来就存在不确定性,多抽卡也是不错的方法。
我们看到的AiGC所谓“最强...”或“炸裂...”又或者“史上最..”等等(我常用,嘿嘿)都只代表一小段时间,因为AI的发展实在太快了,以上的那种表达只是对更新版本的肯定,又或者是想博得观众老爷的惊鸿一瞥,如果内容没有达到您的预期,还请轻喷,老弟在这跟您叩了~
2
Report
声明
2
Share
相关推荐
in to comment
Add emoji
喜欢TA的作品吗?喜欢就快来夸夸TA吧!
You may like
相关收藏夹
Log in
2Log in and synchronize recommended records
2Log in and add to My Favorites
评论Log in and comment your thoughts
分享Share

























































































