返回顶部
分享到

4G显存低配畅玩AIGC!ControlNet作者新作:小白也能画大片

AI资讯 2023-8-28 11:14 AM 241人浏览 0人回复
来自: 快科技 收藏 邀请
摘要

玩AI画画,现在终于不用担心被老黄刀法“背刺”了!只需要一块4年前的GTX 1650(显存4GB),AI出图效果堪比当前最好的开源模型SDXL。△图源:推特@ナビ这是最近在GitHub上连续数日霸榜TOP 1的新项目Fooocus,三天标 ...

来自ControlNet作者最新项目


来自ControlNet作者最新项目

架构设计上,Fooocus主要分为两部分:交互界面和AI模型。

其中,交互界面参考了两个项目,分别是stable-diffusion-webui和ComfyUI。

stable-diffusion-webui主要是交互界面的前端设计:

4G显存低配畅玩AIGC!ControlNet作者新作:小白点一点就成

ComfyUI则兼具Stable Diffusion的GUI和后端设计:

4G显存低配畅玩AIGC!ControlNet作者新作:小白点一点就成

至于AI模型,能看出是用了Stable Diffusion新的SDXL模型:

4G显存低配畅玩AIGC!ControlNet作者新作:小白点一点就成

这是也目前Stable Diffusion最好用的版本之一,生成效果相比之前的1.5版本有不少改进。

不过,虽然Fooocus的模型和UI设计都有参考现成Stable Diffusion开源项目,但作者在制作时,融入了不少自己的优化设计,使得模型跑起来更加丝滑。

例如,作者仔细在Fooocus中采用了自己设计的k扩散采样(advanced k-diffusion sampling)方法,能提升采样连续性,减少性能损失、提升采样效率;

此外,作者还仔细调整了采样器(Sampler)的参数,并在原版基础上修改增加了一些包括电影风格在内的新设定。

之所以给Fooocus加上LoRA选项,是因为作者测试发现,加上LoRA(权重设置小于0.5)的SDXL模型,效果几乎总是比不加LoRA的SDXL模型更好。

开发出Fooocus这个项目的作者名叫Lvmin Zhang,2021年本科毕业于东吴大学,目前在斯坦福大学读博。

他做过的几个项目,包括ControlNet和style2paints在内,几乎个个都爆火:

4G显存低配畅玩AIGC!ControlNet作者新作:小白点一点就成

现在,最新的这个项目Fooocus,看起来同样很受欢迎。

在社交媒体上,已经有网友自发整出了Fooocus版不同风格的提示词合集Excel。

如果不知道生成什么样的图片,参考这个文档内的提示词就行:

4G显存低配畅玩AIGC!ControlNet作者新作:小白点一点就成

你想好要用Fooocus生成什么样的图像了吗?

项目地址:https://github.com/lllyasviel/Fooocus

参考链接:

[1]https://twitter.com/lvminzhang/status/1690118840326524928

[2]提示词合集:https://docs.google.com/spreadsheets/d/1AF5bd-fALxlu0lguZQiQVn1yZwxUiBJGyh2eyJJWl74/edit

[3]https://twitter.com/narrativenavi/status/1691235126045552645

[4]https://twitter.com/kiyoshi_shin

12
本文暂无评论,快来抢沙发!

热门问答
AIHIA梦工厂旨在建立涵盖广泛人工智能行业,包括AI芯片、AI工业应用、AI电商、AI自动驾驶、AI智慧城市、智慧农业等人工智能应用领域。梦工厂为每位AI人提供技术交流、需求对接、行业资源、招聘求职、人脉拓展等多个方面交流学习平台促进人工智能的发展和应用。
  • 官方手机版

  • 联盟公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2023, AIHIA梦工厂
  • 苏ICP备2023025400号-1 | 苏公网安备32021402002407 | 电信增值许可证:苏B2-20231396 | 无锡腾云驾数技术服务有限公司 QQ