COMFYUI人像换脸workflow搭建

用户头像
广州/设计爱好者/1年前/137浏览
COMFYUI人像换脸workflow搭建
一、需求分析与规划​
  1. 【目标用户与功能场景】:换脸需求一是针对娱乐,二是可以作为一种应急的实际使用,比如最美证件照。市面上有现成的换脸产品,但是会有广告、付费、出图时间久、隐私泄露等顾虑。​
  2. 【功能规划】:基本功能包括上传源图像与目标图像、选择换脸算法、预览与调整换脸效果、输出换脸后的图像或视频。高级功能可考虑支持批量处理、实时换脸、面部特征融合等。​
  3. 【技术选型】:经过调研对比, COMFYUI 因其灵活的节点式工作流程和对多种深度学习框架的支持,成为搭建换脸系统的理想选择。同时对常用的换脸方式进行比对,决定采用INSTANTID,通用率较高、生成速度快。
COMFYUI人像换脸workflow搭建(图ZMzg3MzU2MTE2) - AI作品 - 站酷设计师阿薛Xue_yuting原创素材 - 站酷ZCOOL
COMFYUI换脸主流方式对比
收藏
二、comfyUI搭建思路
1.【原图接入】原图输入到INSTANTID节点中。
2.【模板处理】通过遮罩、局部重绘和Controlnet处理,让模板画面控制形态更精准。
3.【融合】利用融合模型融图,接缝地方采用重绘接缝处理。
COMFYUI人像换脸workflow搭建(图ZMzg3MzU4MzUy) - AI作品 - 站酷设计师阿薛Xue_yuting原创素材 - 站酷ZCOOL
初版工作流
收藏
三、测试与优化
可以发现初版很大的问题是对人物形象捕捉不到位,且光影色彩融合不太理想,人物脸型也没有迁移。
因此采用了以下优化手段:
1.【加入遮罩模糊】前期测试中采用重绘的方式而不是遮罩裁剪模糊,重绘对于接缝的地方不太自然。
2.【加入色彩匹配】当原图和模板图差距大的时候,色彩光影融合不佳,除了INSTANT节点和遮罩接入,还需加载图像色彩匹配,使得光影色彩更加自然。
3.【加入面部识别】原图输入时候加一层面部分析模型会使得识别更加精准,原图通过BBOX节点,提高面部识别的精确度,再输入到INSTANTID节点中,相似度更高。
COMFYUI人像换脸workflow搭建(图ZMzg3MzU2NzY0) - AI作品 - 站酷设计师阿薛Xue_yuting原创素材 - 站酷ZCOOL
comfyui优化
收藏
四、预期思考
1.【二次放大】目前出图的精度并不算高,可以继续搭载二次放大模块。
2.【前后对比】可以加入前后比对环节,使得出图效果更直观。
3.【模板风格】可以预设高质量高精度的模板供用户选择。
欢迎大家交流学习~
1
举报
|
收藏
分享
相关推荐
评论
用户头像
评论你的想法~
表情
喜欢TA的作品吗?喜欢就快来夸夸TA吧!
加载中
推荐素材
新年快乐-国潮字体标志组合AI源文件
【渴症】心安的种子
蛇年旺财 | 新年插画文创设计
中国风山水画水墨风景国画壁画富春山居图画框客厅挂画
穿滑轮鞋的年轻男女|青春活力户外运动人物素材
福-AI矢量艺术字
春分-AI矢量艺术字
热歌-AI矢量艺术字
绍兴国风文旅手提袋插画设计
未来感银色渐变合集
湖州文旅手提袋插画包装模板
新年插画 | 12只蛇卡通形象设计
中国年-国潮字体标志组合AI源文件
五常大米包装设计(四季主题款)
猪小乐系列1
五常大米包装设计
蛇年IP全套新年产品原创设计
宁波国风文旅手提袋插画设计
【矢量/PSD】二次元少女角色立绘
中国风山水画水墨风景国画壁画富春山居图画框客厅挂画
少女荧光粉色渐变合集
十二生肖创意字体
杭州国风文旅手提袋插画设计
洞洞鞋产品场景AI作品
追梦-AI矢量艺术字
你可能喜欢
相关收藏夹
地产VI
地产VI
地产VI
地产VI
大家都在看
登录注册