WithAI.Design

5 min read

Brushnet+ICLight几乎完美的电商AI换背景

Brushnet+ICLight几乎完美的电商AI换背景

前言

关注设计小站的朋友们,估计也了解到设计小站一直关注电商营销设计方面的AI辅助功能,之前出过几期这类分享,感兴趣的朋友可以回顾一下:

之前的方案问题在于,融图方面,需要通过贴原图的方式让边缘锯齿消除,这样带来的后果就是,图片的光影融合度不够。

今天设计小站带来新的换背景方案,使用了Brushnet和IClight技术。 Brushnet和ICLight技术其实已经出了一段时间,我们也出国两期的分享,可以回顾一下:

这次,我们将分享工作流的思路。

先看看效果

毛绒玩具

02.gif

03.gif

人像

给石原里美拍一套写真集,绝绝子了~🤣。

04.gif

04.gif

04.gif

10.gif

汽车

08.gif

08.gif

可以看到,Brushnet+ICLight产生了“化学反应”,消除了融图的锯齿,也把光影调整正确了。

工作流介绍

这套工作流用到的都是Brushnet和ICLight官方的工作流,我把他们重新组合一起。

工作流概览

这个工作流共分为以下步骤:

工作流详解

接下来看看具体的工作流模块。

输入模块

输入模块,用到了两个加载图片节点,分别加载对象(产品、人物),和风格参考。

提示词处理

为了让流程极简,不需要手动输入提示词,我用到了LLava反推节点,读取输入图的对象,还有参考图的风格。 提示词还串联了ICLight官方的对灯光描述的提示词。

官方灯光描述提示词:

natural lighting
sunshine from window
neon light
sunset over sea
golden time
sci-fi RGB glowing, cyberpunk
warm atmosphere, at home, bedroom
code atmosphere, at home, bedroom
soft studio lighting
neon, Wong Kar-wai, warm
home atmosphere, cozy bedroom illumination

根据风格,在这个节点进行选择即可。

然后把这些提示词串起来,作为正向提示词,传入采样器中。

Brushnet换背景融图

用到了官方的Brushnet换背景流程,但这里加上IPAapter节点,用于生成参考风格的背景。还有通过Canny控制,让背景和主题产生关系。

光照模块

通过ICLight工作流程,对上面生成的图进行打光处理。

这里需要对合成图时,对蒙板进行处理,使其图片合并时,不会太生硬。

灯光贴图生成

当然,在ICLight工作前,需要生成一个灯光贴图。用到了KJNote,可以方便地生成,渐变图,代表灯光的走向。

调色

用到了HDR调整、色彩调整两个节点,使颜色看起来更合理些。

不足

这套工作流在灯光处理和融图方面,已经很不错了。但是因为是基于SD1.5,所以图片的尺寸不大,最大只能到768px,当然可以进行一次采样放大,但会主题会容易改变。 期待下一次技术的进化,如HIDifusion生态的接入。

好了,关于的分享介绍就到这里,有什么疑问或者问题,可以留言交流哦~ 关注我公众号(设计小站):sjxz00,获取更多AI辅助设计和设计灵感趋势。

标签