原链接:请点击此处查看原文
经过我们的技术革新,高达97%的用户更倾向于我们直接生成的透明内容,而非传统的图像合成方法。用户们纷纷赞扬我们的透明图像品质卓越,与Adobe Stock等商业级素材库所提供的专业素材相媲美。这一显著成就充分证明了我们在图像质量方面所取得的突破性进展。
我利用了这项先进技术,直接生成了所需的素材,并在Figma中制作了banner图。该技术的头发丝生成效果非常出色,尽管在放大时因图片尺寸限制出现轻微模糊,但其效果仍远胜于手动抠图。
该技术所生成的透明图像自带半透效果,与背景的融合度极佳,呈现出极佳的视觉效果。
关于LayerDiffusion技术的背景与原理,简单介绍如下:LayerDiffusion是一款创新型技术,它赋予了大型预训练潜在扩散模型生成透明图像的能力。其论文地址为:/abs/2402.17113。
LayerDiffusion技术突破了传统限制,不仅可生成单个透明图像,还能生成多层透明图层。
该技术的核心在于“潜在透明度”,它无缝地将透明度整合到潜在扩散模型的潜在结构中。这种独特的方法几乎不会影响模型的潜在分布,从而保持了其卓越的图像生成能力。
借助这种方法,任何潜在扩散模型都能轻松转换为透明图像生成器,只需对潜在空间进行微调。
LayerDiffusion的训练采用了人机互动方法,通过收集百万级透明图像层数据,确保了模型的准确性和可靠性。
潜在透明度技术的应用范围广泛,包括前景/背景条件的层生成、层的联合生成以及对层内容的结构控制等。
插件地址如下:/layerdiffusion/sd-forge-layerdiffusion 和 /huchenlei/ComfyUI-layerdiffusion
在ComfyUI中使用该技术时,其灵活性会大大提高。
下面根据实际应用的角度,与大家分享一下从素材到设计的工作流程。此工作流程主要针对UIUX设计,同时也适用于平面、广告设计。对于工业设计师需要制作方案展板或web展示的情况,也可参考此流程。
相较于传统流程,新的流程大幅提升了SD生成素材的可用性,减少了抠图步骤,并显著提高了素材质量。
以制作一个banner为例,详细讲解其过程。
首先构思banner主题:简约设计风格的“加入我们”主题,使用一男一女的3D角色作为主要元素。大致布局如下:
由于当前缺少素材,我们尝试使用SD进行生成。
选择适合的底模如niji3Dstyle和LoRa:Simple-3D-Avatar进行女生角色的生成。
开启LayerDiffusion技术,选择Conv Injection选项以生成带有透明背景的图片。
我们看到图片已经自动扣好背景。
接着使用相同的方法生成男生角色。