展会信息港展会大全

ControlNet作者新作:AI打光玩得更溜了!
来源:互联网   发布日期:2024-11-06 13:10:22   浏览:73次  

导读:划重点01知名图像处理工具IC-Light的作者敏神(张吕敏)推出了新项目IC-Light V2,采用FLUX技术,具有16通道VAE和原生高分辨率。02IC-Light V2在保留输入图像细节方面表现出色,网友称赞其为“世界上最好的重光照工具”。03除了人物外,IC-Light V2还能处理风格化图片,如超现实主义绘画,效果更加理想。04目前,IC-Light V2已上线HuggingFace,提供在线体验,但许可证将仅用于 ......

划重点

01知名图像处理工具IC-Light的作者敏神(张吕敏)推出了新项目IC-Light V2,采用FLUX技术,具有16通道VAE和原生高分辨率。

02IC-Light V2在保留输入图像细节方面表现出色,网友称赞其为“世界上最好的重光照工具”。

03除了人物外,IC-Light V2还能处理风格化图片,如超现实主义绘画,效果更加理想。

04目前,IC-Light V2已上线HuggingFace,提供在线体验,但许可证将仅用于非商业用途。

以上内容由大模型生成,仅供参考

金磊 发自 凹非寺

量子位 | 公众号 QbitAI

ControlNet作者“敏神”(张吕敏),刚刚上新了一个新项目

名叫IC-Light V2,可以说是把AI打光这事儿玩得溜溜的。

ControlNet作者新作:AI打光玩得更溜了!

IC-Light是此前张吕敏开发的图像处理工具,可以通过AI技术精确控制图像中的光照效果。

而此次的V2版本则是一系列基于FLUX的IC-Light型号,具有16通道VAE和原生高分辨率。

话不多说,直接来看效果。

例如随意输入一张照片,附上一句Prompt:

flicker 2008 photo of a woman, neon light, city, cars and people in the background.闪烁2008年的照片,一个女人,霓虹灯,城市,汽车和人的背景。

ControlNet作者新作:AI打光玩得更溜了!

最终生成的效果可以称得上毫无违和感。

我们再来放大来看下前后的对比,人物细节保留程度就更明显了:

ControlNet作者新作:AI打光玩得更溜了!

再来看一个例子:

ControlNet作者新作:AI打光玩得更溜了!

据敏神自己介绍:

IC-Light V2得益于更好的训练方法,细节保留能力远高于SD1.5。

而网友们在看完新工具的效果之后也直呼“世界上最好的重光照(relighting)工具”。

ControlNet作者新作:AI打光玩得更溜了!

风格化图片也能处理在之前基于SD1.5的IC-Light,有个问题就是处理带风格的图片的效果并不是非常理想。

例如这样:

ControlNet作者新作:AI打光玩得更溜了!

可以明显看出,原图是一张美漫风格的图片,而输出的结果却是真人风了。

而且即使在Prompt中给到了关键词“surrealist painting of(超现实主义绘画)”,得到的风格依旧还是带点漫画风。

嗯,AI直接把这个关键词给忽略掉了。

ControlNet作者新作:AI打光玩得更溜了!

而现在,基于FLUX的IC-Light V2,已经弥补了此前的缺陷。

ControlNet作者新作:AI打光玩得更溜了!

ControlNet作者新作:AI打光玩得更溜了!

ControlNet作者新作:AI打光玩得更溜了!

除了人物之外,敏神也展示了其它主体的效果。

ControlNet作者新作:AI打光玩得更溜了!

ControlNet作者新作:AI打光玩得更溜了!

在线可玩目前,IC-Light V2已经上线HuggingFace,可以在线体验。

下面是我们实测马斯克照片的例子:

ControlNet作者新作:AI打光玩得更溜了!

除此之外,敏神此次推出的IC-Light V2其实是一个系列的模型。

目前可以体验的版本是一个foreground conditioned model(前景条件模型),强调的是保留输入图像细节。

还有三个模型在陆续发布:

还是一个前景条件模型,但强调支持较大的修改,例如处理低光图像和更改硬阴影。

一个前景和背景条件模型

与环境HDRI集成的模型

最后,敏神对于这次的模型还补充道:

目前的模型只能在HuggingFace上体验,稍后会发布更多的推理代码和权重。

然而,与V1不同的是,该许可证将仅用于非商业用途。

体验链接放下面了,感兴趣的小伙伴可以尝鲜一波哦~

体验地址:https://huggingface.co/spaces/lllyasviel/iclight-v2

参考链接:[1]https://github.com/lllyasviel/IC-Light/discussions/98[2]https://x.com/multimodalart/status/1850521222213218380?s=46&t=6eepxw1G6XRQ7VO0ANjJWg

赞助本站

相关热词: 敏神 张吕敏 ic light v2

AiLab云推荐
推荐内容
展开

热门栏目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能实验室 版权所有    关于我们 | 联系我们 | 广告服务 | 公司动态 | 免责声明 | 隐私条款 | 工作机会 | 展会港