5 min read
又一设计师利器！Layerdiffusion
设计小站观点：在设计的领域里，AIGC图像分层技术如同破晓的曙光，预示着未来创作的无限可能。Layerdifusion的突破，将透明层独立出来，虽是初步尝试，却标志着向着深度艺术自由迈进的一大步。随着技术在处理图像的深度、阴影、法线和光照等方面的进步，设计师们将能更自由地探索光与影的交响，将内心世界的细腻情感和创意表达得更加精准。 这一进展不仅是技术的飞跃，更是艺术表达自由度的扩张。在AIGC的推动下，二次创作的边界被无限拓宽，设计师们作为这场革命的先锋，应持续关注并探索此技术的最新进展。正如星辰引领航者前行，AIGC图像分层技术将引领我们进入一个更加丰富多彩的创作新纪元。
有了这个利器，设计师们结合SD，可以免费获得无限制的PNG透明素材！ 这是原作者的话：
97% 的用户一致青睐我们直接生成的透明内容，而非传统的图像合成方法（如生成图像再抠图）。用户赞不绝口，称赞我们生成的透明图像品质卓越，媲美 Adobe Stock 等商业级素材库提供的专业素材。这表明我们的解决方案在图像质量方面取得了突破性的成就。
看看效果
这是我手利用这个技术，随用SD直接生成素材，然后在figma制作的banner图。
头发丝效果
人物的头发丝的生成还是很不错的，不过受限于图片的尺寸，放大了还是有点糊，比手动抠图强多了。
半透明效果
自带透明通道的半透效果，跟背景融合的很好。
Layerdiffusion原理
还是简单介绍一下该技术的背景和原理。
LayerDiffusion 是一款开创性的技术，赋予大型预训练潜在扩散模型生成透明图像的能力。论文地址：http://arxiv.org/abs/2402.17113.
多层透明度 LayerDiffusion 突破了传统限制，不仅可以生成单个透明图像，还能生成多层透明图层。
潜在透明度 该技术的核心是“潜在透明度”，它将透明度无缝整合到潜在扩散模型的潜在结构中。这种巧妙的方法几乎不影响模型的潜在分布，从而保留了其卓越的图像生成能力。
模型转换 凭借这种方法，任何潜在扩散模型都可以轻松转换为透明图像生成器，只需对潜在空间进行微调。
人机互动训练 LayerDiffusion 的训练采用了人机互动方法，收集了百万级透明图像层数据，确保了模型的准确性和可靠性。
广泛的应用 潜在透明度技术具有广泛的应用，包括：
- 基于前景/背景条件的层生成
- 层的联合生成
- 对层内容的结构控制
如何使用
由于webui forge和layerdiffusion作者是同一个人，也是controlnet的作者，插件的兼容性和质量，在当前阶段应该是相对更好的，所以推荐在webui forge上使用。
在webui forge
Forge 是 WebUI 的一个分支，其操作逻辑和交互与 Web UI 完全相同，只是在底层进行了一些修改以提高生成速度。插件在运行时会自动下载所需模型。LayerDiffusion 项目现在已经成功整合到 Forge 的扩展中，这一功能可以直接生成具有透明背景的图片。
插件地址：https://github.com/layerdiffusion/sd-forge-layerdiffusion
在ComfyUI使用
插件地址：https://github.com/huchenlei/ComfyUI-layerdiffusion.
在comfyui中使用，灵活性会高很多。
素材到设计工作流
下面根据我的理解，给大家展示一下素材到设计的工作流，本工作流程主要体现在UIUX设计上，当然也可以用在平面、广告设计，如果工业设计师需要制作方案展板或者web展示，也可以使用。
流程简介
相对于旧流程，新的流程将大幅提升SD生成素材的可用性，减少了抠图的步骤，同时素材质量得到飞跃。
下面以制作一个bnner为例，详细讲解其过程。
banner构思
主题：一个“加入我们”的banner，简约设计为主，一男一女的3D角色。大致的布局如下：
现在缺少素材，我们尝试用SD生成。
找模型生成素材
我们找到适合做3D角色的底模：niji3Dstyle和LoRa：Simple-3D-Avatar
生成女生角色
提示词：
masterpiece,best quality,8k,1girl,3d,unreal engine,looking at viewer,avatar,white skin,bright,perfect light, Purple clothes with wavy and curly hair,
<lora:avatar_20230815152014:1>
开启Layerdiffusion。
选择Conv Injection选项，这个做透明背景图，实测效果最好。
我们看到图片已经扣好了。
生成男生角色
用同样方法生成男生角色。 提示词：
masterpiece,best quality,8k,(1boy,:1.5) ,3d,unreal engine,looking at viewer,avatar,white skin,bright,perfect light, , black hair,
<lora:avatar_20230815152014:1>
Figma中使用
接下来就非常简单了，把素材放到合适位置，调整一下对比度等，就可以了。
同样方法可以依法制作其他banner。
关注我公众号（设计小站）：sjxz00，获取更多AI辅助设计和设计灵感趋势。