ControlNet的作者Lvmin Zhang最近上线了一款新的插件Layer Diffusion,可以直接生成带透明通道的png文件。比如使用提示词:头发凌乱的女性,在卧室里。Woman with messy hair, in the bedroom.不仅仅生成了符合提示词的图片,还分离出了背景和主体人像,人像的发丝根根分明,远胜于世界上最厉害的抠图师。大家可以想象一下用这个插件可以用来做什么。
ControlNet的作者Lvmin Zhang最近上线了一款新的插件Layer Diffusion,可以直接生成带透明通道的png文件。
比如使用提示词:
头发凌乱的女性,在卧室里。
Woman with messy hair, in the bedroom.
不仅仅生成了符合提示词的图片,还分离出了背景和主体人像,人像的发丝根根分明,远胜于世界上最厉害的抠图师。
大家可以想象一下用这个插件可以用来做什么。
我首先想到的就是设计师以后可以抛掉素材网站了,需要什么素材,哐哐生成一个。
其次就是做文生动漫的,可以保持背景的一致性生成不同内容了
搭配sdxl和lora,4-8步就能生成效果很好的素材,直接把生成速度提升到秒级。
插件安装和部署:https://github.com/huchenlei/ComfyUI-layerdiffusion
DreamShaper XL 下载:https://civitai.com/models/112902/dreamshaper-xl
你甚至可以把整个流程反过来 —— 给现成的 PNG 素材生成背景,工作流如下。 这简直是所有产品展示场景的刚需!