从原理层解析,如何精准修复AI画质难题

用户头像
成都/平面设计师/35天前/3680浏览
从原理层解析,如何精准修复AI画质难题
昨天晚上,杰克老师带着我们重新梳理了公司的使命与价值观,回溯了为什么杰视帮能跨越行业周期,屹立12年不倒。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NDg=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
其中有一句话让我听了非常有力量:
让普通设计师不平凡!
靠!不能再让兄弟们吃ai的苦了!
今天就先发一篇干货帖,希望能帮助到大家!
这次不讲单个技巧,直接从原理层开扒!
带大家一次性解决一类型难题!让老板和运营高看一眼!
我挑了一个被很多同学持续问到的问题:
为什么我跑图时总是控不住?
为什么我跑的图噪点去不掉?
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
看看这噪点,是不是很纯正image2味儿~
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NjQ=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
其实,从本质上来看,模型不管是跑图还是出片,都是在“猜测”。
通过大量的训练,让每一代模型“猜”的越来越准。
那猜测就需要有提示,不然你让人家怎么猜?
而我们给模型的
文字提示词、图像参考
都是提示。
如果提示有问题,那猜测结果就会跑偏。
其次就是模型本身的能力,也决定了猜测成绩的好坏。
就像image2模型很喜欢出一堆过剩的细节一样。
上面这2个情况,就汇聚成了一个词:噪声。
所以,不管是跑图还是跑视频,2大核心关键之一就是:去除噪声干扰。
拿上面这张图举例,如果我们想把它的噪点去掉,可以有哪些方法呢?
其实知道了原理,脉络就会很清晰,那问题就迎刃而解:
 1. 提示词强调法 (推荐指数:★★★☆☆)
在某些情况下,重新用回image2模型,配合提示词引导,image2是能在一定程度减少噪声的,因为i2的文本理解与自适应能力极强:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NzY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
但你会发现,它虽然有所好转,但仍旧不太理想。因为这是i2天然的劣势+整张图都带着过剩的噪点污染,你让它在这天崩开局力挽狂澜... 是不太现实的~
哪怕换其他模型,也不会很理想,核心原因在于图像本身
自带了太多污染信息
。所以不要信那些提示词修复的方法,泛化性是很差的!
但也有一个邪修方法还算管用,篇幅太长,后面再分享给大家~
2. 屏蔽污染法 (推荐指数:★★★★★)
通过上面第一种方法你会发现,污染源不处理掉,你再怎么操作都是事倍功半。所以核心是先把污染给处理掉!
但很多时候,污染源与核心信息是共生的,就像上面这张图一样,噪点是从整张图上生长出来的,我们没有办法通过传统的遮盖、涂抹、等方式解决。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0ODg=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
这个时候,我们就可以思考,如何精准剥离掉干扰信息?这里的核心是从干扰信息的特征入手。
读图可得,干扰信息就是一些噪点与崩坏的结构。除此外的色彩、材质纹理、特效光影是我们需要的。
那玩过comfyUI的早期同学都知道,我们当时控图是不是用scribble涂鸦+zoe深度+canny线条,每一层赋予不同的任务,来引导ai完成最终的生图。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0OTI=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
那现在直接反过来就好了!用这些特殊图层来精准筛出那些干扰信息!
把有噪点的原图,转为线稿图、白模图、法线图、各种能控住主体,但又带不进噪声细节的功能图:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1MTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
上面所有图片为什么能控住,核心是找到共性。
除此之外,我们还需用ai倒推出整体带材质+色彩+光影等综合信息的提示词,来将功能图重新渲染回原图:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1MjQ=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
这里建议用nano模型来转功能图,用sd5p或nano来生成图片,这个知识点上节课讲过,大家复习一下~
来看看各种效果(图片左上角标注了使用的模型)
如果你觉得色彩偏了,那同样套上面的方法,提取色彩给到参考,做进一步引导,思路都是一样的~
哪怕用到ai跑视频上,也是如此,比如最近很流行的转深度图控制,原理就是屏蔽其他信息的干扰:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1NTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
Collect
Current Time 0:00
/
Duration Time 0:00
Progress: NaN%
Playback Rate
1.00x
上面这些方法,估计经常跑图的同学都知道了,本次是从原理层带大家分析,为什么会这样,以及正确的解题思路是什么。
因为不同的情况,解决问题的方法组合也不一样,死记硬背一两个技法,不如吃透底层原理!
今天的分享就到这里,希望能给大家带来些帮助~
这套解题思路无偿分享给大家,别人问起你就说是你自己研究的就行,不用报我名字。
只希望我们还能继续坚守使命:
让普通设计师不平凡!
99
阅读原文
|
Report
|
49
Share
相关推荐
评论
用户头像
in to comment
Add emoji
喜欢TA的作品吗?喜欢就快来夸夸TA吧!
推荐素材
金色颗粒质地的平面
平面书法字手写
平面风格黄绿色系花朵装饰
中秋节可爱呆萌平面兔子蛋黄月饼贴纸素材
金色颗粒质地的平面
玄关入门地毯印花图案红地毯
金色颗粒质地的平面
倒计时,海报,平面
城阙凡花
平面插画设计女孩喝咖啡
城市园林平面布局航拍
平面设计风格的粉色草莓味马卡龙
牛奶乳液层次梯田平铺平面
平面设计 吊牌设计
平面男孩喝咖啡插画设计
“知识宅急送”外卖,快递,平面,海报,素材,教育
空的平台平面和自然景观
课程海报,平面素材
拼团,团购,教育,海报,平面
学习,优惠券,平面,海报
空的平台平面和自然景观
金色颗粒质地的平面
海底世界插画
城市园林平面布局航拍
平面插画情侣/矢量
You may like
相关收藏夹
大家都在看
Log in