设计师的福音,素材网站的噩梦,Layer Diffusion来了

扫码手机浏览

ControlNet的作者Lvmin Zhang最近上线了一款新的插件Layer Diffusion,可以直接生成带透明通道的png文件。比如使用提示词:头发凌乱的女性,在卧室里。Woman with messy hair, in the bedroom.不仅仅生成了符合提示词的图片,还分离出了背景和主体人像,人像的发丝根根分明,远胜于世界上最厉害的抠图师。大家可以想象一下用这个插件可以用来做什么。

ControlNet的作者Lvmin Zhang最近上线了一款新的插件Layer Diffusion,可以直接生成带透明通道的png文件。

比如使用提示词:

头发凌乱的女性,在卧室里。

Woman with messy hair, in the bedroom.

1709744073934.jpg

不仅仅生成了符合提示词的图片,还分离出了背景和主体人像,人像的发丝根根分明,远胜于世界上最厉害的抠图师。

大家可以想象一下用这个插件可以用来做什么。

我首先想到的就是设计师以后可以抛掉素材网站了,需要什么素材,哐哐生成一个。

image.png

其次就是做文生动漫的,可以保持背景的一致性生成不同内容了

搭配sdxl和lora,4-8步就能生成效果很好的素材,直接把生成速度提升到秒级。

插件安装和部署:https://github.com/huchenlei/ComfyUI-layerdiffusion

 DreamShaper XL 下载:https://civitai.com/models/112902/dreamshaper-xl

你甚至可以把整个流程反过来 —— 给现成的 PNG 素材生成背景,工作流如下。 这简直是所有产品展示场景的刚需!

image.png