玩AI画画,现在终于不用担心被老黄刀法“背刺”了!只需要一块4年前的GTX 1650(显存4GB),AI出图效果堪比当前最好的开源模型SDXL。△图源:推特@ナビ这是最近在GitHub上连续数日霸榜TOP 1的新项目Fooocus,三天标 ...
来自ControlNet作者最新项目
来自ControlNet作者最新项目 架构设计上,Fooocus主要分为两部分:交互界面和AI模型。 其中,交互界面参考了两个项目,分别是stable-diffusion-webui和ComfyUI。 stable-diffusion-webui主要是交互界面的前端设计: ComfyUI则兼具Stable Diffusion的GUI和后端设计: 至于AI模型,能看出是用了Stable Diffusion新的SDXL模型: 这是也目前Stable Diffusion最好用的版本之一,生成效果相比之前的1.5版本有不少改进。 不过,虽然Fooocus的模型和UI设计都有参考现成Stable Diffusion开源项目,但作者在制作时,融入了不少自己的优化设计,使得模型跑起来更加丝滑。 例如,作者仔细在Fooocus中采用了自己设计的k扩散采样(advanced k-diffusion sampling)方法,能提升采样连续性,减少性能损失、提升采样效率; 此外,作者还仔细调整了采样器(Sampler)的参数,并在原版基础上修改增加了一些包括电影风格在内的新设定。 之所以给Fooocus加上LoRA选项,是因为作者测试发现,加上LoRA(权重设置小于0.5)的SDXL模型,效果几乎总是比不加LoRA的SDXL模型更好。 开发出Fooocus这个项目的作者名叫Lvmin Zhang,2021年本科毕业于东吴大学,目前在斯坦福大学读博。 他做过的几个项目,包括ControlNet和style2paints在内,几乎个个都爆火: 现在,最新的这个项目Fooocus,看起来同样很受欢迎。 在社交媒体上,已经有网友自发整出了Fooocus版不同风格的提示词合集Excel。 如果不知道生成什么样的图片,参考这个文档内的提示词就行: 你想好要用Fooocus生成什么样的图像了吗? 项目地址:https://github.com/lllyasviel/Fooocus 参考链接: [1]https://twitter.com/lvminzhang/status/1690118840326524928 [2]提示词合集:https://docs.google.com/spreadsheets/d/1AF5bd-fALxlu0lguZQiQVn1yZwxUiBJGyh2eyJJWl74/edit [3]https://twitter.com/narrativenavi/status/1691235126045552645 [4]https://twitter.com/kiyoshi_shin |
2023-08-28
2023-08-24
2023-09-13
2023-09-21
2023-08-24
回答
回答
回答
回答
回答
评论