从原理层解析,如何精准修复AI画质难题

用户头像
成都/平面设计师/7天前/2841浏览
从原理层解析,如何精准修复AI画质难题
昨天晚上,杰克老师带着我们重新梳理了公司的使命与价值观,回溯了为什么杰视帮能跨越行业周期,屹立12年不倒。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NDg=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
其中有一句话让我听了非常有力量:
让普通设计师不平凡!
靠!不能再让兄弟们吃ai的苦了!
今天就先发一篇干货帖,希望能帮助到大家!
这次不讲单个技巧,直接从原理层开扒!
带大家一次性解决一类型难题!让老板和运营高看一眼!
我挑了一个被很多同学持续问到的问题:
为什么我跑图时总是控不住?
为什么我跑的图噪点去不掉?
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
看看这噪点,是不是很纯正image2味儿~
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NjQ=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
其实,从本质上来看,模型不管是跑图还是出片,都是在“猜测”。
通过大量的训练,让每一代模型“猜”的越来越准。
那猜测就需要有提示,不然你让人家怎么猜?
而我们给模型的
文字提示词、图像参考
都是提示。
如果提示有问题,那猜测结果就会跑偏。
其次就是模型本身的能力,也决定了猜测成绩的好坏。
就像image2模型很喜欢出一堆过剩的细节一样。
上面这2个情况,就汇聚成了一个词:噪声。
所以,不管是跑图还是跑视频,2大核心关键之一就是:去除噪声干扰。
拿上面这张图举例,如果我们想把它的噪点去掉,可以有哪些方法呢?
其实知道了原理,脉络就会很清晰,那问题就迎刃而解:
 1. 提示词强调法 (推荐指数:★★★☆☆)
在某些情况下,重新用回image2模型,配合提示词引导,image2是能在一定程度减少噪声的,因为i2的文本理解与自适应能力极强:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0NzY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
但你会发现,它虽然有所好转,但仍旧不太理想。因为这是i2天然的劣势+整张图都带着过剩的噪点污染,你让它在这天崩开局力挽狂澜... 是不太现实的~
哪怕换其他模型,也不会很理想,核心原因在于图像本身
自带了太多污染信息
。所以不要信那些提示词修复的方法,泛化性是很差的!
但也有一个邪修方法还算管用,篇幅太长,后面再分享给大家~
2. 屏蔽污染法 (推荐指数:★★★★★)
通过上面第一种方法你会发现,污染源不处理掉,你再怎么操作都是事倍功半。所以核心是先把污染给处理掉!
但很多时候,污染源与核心信息是共生的,就像上面这张图一样,噪点是从整张图上生长出来的,我们没有办法通过传统的遮盖、涂抹、等方式解决。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0ODg=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
这个时候,我们就可以思考,如何精准剥离掉干扰信息?这里的核心是从干扰信息的特征入手。
读图可得,干扰信息就是一些噪点与崩坏的结构。除此外的色彩、材质纹理、特效光影是我们需要的。
那玩过comfyUI的早期同学都知道,我们当时控图是不是用scribble涂鸦+zoe深度+canny线条,每一层赋予不同的任务,来引导ai完成最终的生图。
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY0OTI=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
那现在直接反过来就好了!用这些特殊图层来精准筛出那些干扰信息!
把有噪点的原图,转为线稿图、白模图、法线图、各种能控住主体,但又带不进噪声细节的功能图:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1MTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
上面所有图片为什么能控住,核心是找到共性。
除此之外,我们还需用ai倒推出整体带材质+色彩+光影等综合信息的提示词,来将功能图重新渲染回原图:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1MjQ=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
这里建议用nano模型来转功能图,用sd5p或nano来生成图片,这个知识点上节课讲过,大家复习一下~
来看看各种效果(图片左上角标注了使用的模型)
如果你觉得色彩偏了,那同样套上面的方法,提取色彩给到参考,做进一步引导,思路都是一样的~
哪怕用到ai跑视频上,也是如此,比如最近很流行的转深度图控制,原理就是屏蔽其他信息的干扰:
从原理层解析,如何精准修复AI画质难题(图ZMTU3OTY1NTY=) - 教程 - 站酷设计师杰克sean原创素材 - 站酷ZCOOL
收藏
Current Time 0:00
/
Duration Time 0:00
Progress: NaN%
Playback Rate
1.00x
上面这些方法,估计经常跑图的同学都知道了,本次是从原理层带大家分析,为什么会这样,以及正确的解题思路是什么。
因为不同的情况,解决问题的方法组合也不一样,死记硬背一两个技法,不如吃透底层原理!
今天的分享就到这里,希望能给大家带来些帮助~
这套解题思路无偿分享给大家,别人问起你就说是你自己研究的就行,不用报我名字。
只希望我们还能继续坚守使命:
让普通设计师不平凡!
89
阅读原文
|
举报
|
40
分享
相关推荐
评论
用户头像
评论你的想法~
表情
喜欢TA的作品吗?喜欢就快来夸夸TA吧!
推荐素材
金色颗粒质地的平面
水蜜桃和李子的平面水果图案
金色颗粒质地的平面
平面插画设计女孩喝咖啡
平面设计 吊牌设计
城市园林平面布局航拍
平面男孩喝咖啡插画设计
海底世界插画
金色颗粒质地的平面
牛奶乳液层次梯田平铺平面
中秋节可爱呆萌平面兔子蛋黄月饼贴纸素材
城市园林平面布局航拍
玄关入门地毯印花图案红地毯
中国传统纹样创新图案设计
金色颗粒质地的平面
金色颗粒质地的平面
倒计时,海报,平面
原创UIUX交互橙红渐变炫酷视觉平面设计作品集模板PSD
平面插画情侣/矢量
平面风格黄绿色系花朵装饰
“知识宅急送”外卖,快递,平面,海报,素材,教育
古风平面仕女与瓷器
空的平台平面和自然景观
金色颗粒质地的平面
平面花卉图案扁平简约无缝拼接插画
你可能喜欢
相关收藏夹
大家都在看
登录注册