stable diffusion更优替代方案？Stability AI再推超强AI绘画工具DeepFloyd IF

stable diffusion更优替代方案？Stability AI再推超强AI绘画工具DeepFloyd IF

    今日，stable diffusion背后公司发布一款开源AI绘画工具DeepFloyd IF， 这款IF 模型是由Stability AI公司下属的DeepFloyd实验室制作，作为同一家公司的同样开源的AI绘画工具，DeepFloyd IF到底是不是stable diffusion的更优解？

    与stable diffusion类似，这也是一个基于Diffusion模型的全新AI绘画模型，从官方放出图片和各路大佬发出的效果图来看，这是一款异常很强大AI绘图工具。同一家公司发布两款功能定位都类似的产品，是因为DeepFloyd IF是比stable diffusion更有前景的技术方案？目前还不好下定论，但至少是值得关注的一款强力AI绘画工具。

那么DeepFloyd IF和stable diffusion有什么区别呢？

DeepFloyd IF是一个模块化、级联的像素扩散模型。

和我们所熟知的stable diffusion不同，是一个在像素空间内进行的扩散模型。

DeepFloyd IF对配置要求很高，latent diffusion系列（指sd）强就强在了配置需求低，根据官方的介绍，DeepFloyd IF对显存的要求是16G起步，还只能使用低配版，这一点就有可能让很多人望而却步了。

16GB 显存：IF-I-XL (4.3B ) & IF-II-L (1.2B )

24GB 显存：IF-I-XL (4.3B) & IF-II-L (1.2B) 

1/文生图功能，效果十分惊艳。

2/强悍的文本生成能力，图文完美融合


3/有趣的零样本的图像风格转换（Zero-shot Image-to-Image Translation）


4/强悍的零样本的局部重绘（Zero-shot Inpainting）


如果你想了解DeepFloyd IF更多信息，可以从如下网址查看详情！

官网：https://stability.ai/blog/deepfloyd-if-text-to-image-model

GitHub：https://github.com/deep-floyd/IF

huggingface：https://huggingface.co/DeepFloyd

有空，可以听下下面这个

评论

发表评论

此博客中的热门博文

Stable Diffusion神奇功能系列之自动抠图，轻松批量去背景，不再花钱抠图了

图片
Stable Diffusion神奇功能系列之自动抠图，轻松批量去背景，不再花钱抠图了      Stable Diffusion是当前最好用的开源AI绘图工具，目前有海量的工程师在为期建造生态，无数好用的插件应运而生，使得Stable Diffusion拥有无数神奇的功能，比以前花钱买的网站服务还好用，今天介绍的这款自动抠图去背景的插件，就是其中的佼佼者。让你批量0成本扣除背景，不但效果好，还能批量处理，省时省力还省钱。 Stable Diffusion最好用的插件之一： Rembg 先看看我用 Rembg这款插件批量抠图的效果： 原图效果是这样的（上图），自动抠图后的效果（下图） 抠图效果还不错吧，虽说还有一些小瑕疵，但是已经很不错了。 从官网的展示图片来看      从展示可以看出，相对复杂的背景也可以成功完美的扣出来，而且 Stable Diffusion是一款免费的开源工具，有这样的效果，还要什么自行车啊。 Rembg插件 安装方法： Stable Diffusion的这款Rembg插件 安装也简单，有两种方法。 第一种是在扩展中查找 Rembg点击安装。 第二种就是通过网址“https://github.com/danielgatis/rembg”直接安装Rembg插件。 安装完成后，记得重启WebUI，就可以在附加功能中看到 Remove background插件了，不过经过我的测试，扣人物使用Human Seg效果最好，其他都可以试试，看看那个符合你要的效果。 Rembg插件官网： https://github.com/danielgatis/rembg Stable Diffusion简介： Stable Diffusion是一种基于潜在扩散模型（latent diffusion model; LDM）的文本到图像生成模型，可以根据任意文本输入生成高质量、高分辨率的图像。Stable Diffusion的优势有以下几点： 1/Stable Diffusion是完全开源的，任何人都可以免费使用它来创建惊人的艺术作品。 2/ Stable Diffusion使用了一种新的文本编码器，能够更好地捕捉文本和图像之间的语义关系，提高了图像的生成质量和多样性 。 3/Stable Diffusion支持多种图像分辨率，从512x512到2048x2048，它还
Read more »

StableDiffusion整合包相关下载（持续更新，请务必保存）

图片
StableDiffusion整合包相关下载 本文持续更新最好用最新的各种下载包及教程，如有失效请留言，我会重新整理，请务必保存，如果有其他想要的，也可以留言，我会回复并尽力帮忙来提供。 2023/05/23 星空大佬的整合包，包含 Controlnet1.1和SadTalker 百度: https://pan.baidu.com/s/1_J2vDta7JUa4358uykTYbQ?pwd=pctg 夸克: https://pan.quark.cn/s/91252d95a346 注意: SadTalker需要设置环境变量,PATH 添加stable-diffusion-webui_23-04-18\ffmpeg-2023-04-12-git-1179bb703e-full_build\bin 星空大佬的整合包，  包含Grounding Dino & Segment Anything 最简单步骤安装 百度: https://pan.baidu.com/s/10wL-HwfFng1AiU9420KAJg?pwd=vbfr 夸克:： https://pan.quark.cn/s/ca2e0ca40c8b 教程：https://www.bilibili.com/video/BV1LX4y1y7Hg 2023/04/29 StableDiffusion  Infinite Zoom插件 Infinite Zoom无限放缩视频插件 官网地址：https://github.com/v8hid/infinite-zoom-automatic1111-webui 2023/04/18 B站大佬星空最新StableDiffusion整合包，集成了SadTalker和最新ControlNet1.1 百度: https://pan.baidu.com/s/1_J2vDta7JUa4... 夸克: https://pan.quark.cn/s/91252d95a346 2023/04/16 秋叶大佬最新整合包V4，目前最新最稳定的整合包 链接：https://pan.baidu.com/s/1TK7UyX5lgNjdwdfcmYCI5Q  提取码c132  2023/04/01 最新整合包，集成了大量的插件，可以直接使用 B站大佬 张芩潇 提供的整合包： ●只能用7z压缩软件
Read more »

ComfyUI有什么优势？为什么说 ComfyUI是AI绘画王者StableDiffusion的未来？

图片
  ComfyUI有什么优势？为什么说 ComfyUI是AI绘画王者StableDiffusion的未来？        ComfyUI出现已经有了数个月，但是ComfyUI这种新的节点是生成方式的亮点最近才被人挖掘出来，运用这个UI可以让你更直观的了解Stable Diffusion的运作逻辑，从而掌握更高阶的使用技巧，这些技巧虽说在WebUI也大多能做到，但是复杂的功能灵活运用的能力，ComfyUI比WebUI高了不知道多少个层级，这种节点是的操作方式，让一切变得灵活自由，就像拼积木一样，可以实现很多层的嵌套和引用，从而生出超出你认知和操控力的作品， 用户最终同时生成同一张画面的原图与修饰图，而无需再通过其它软件作图软件进行对比调整。 例如上面这张图，背景和左右两个可以分别生成，最后在合成为一个完整的作品，实现极为自由的DIY组合！      例如 分区域生成图片 这个功能，不但可以让你生成超出你用其他工具生成极限的图片，还能高度的DIY，精准的生成你预期的图片，整个生成可以可以全程展示出来，从而知道哪里有问题，哪里需要优化，从而让AI绘画不再是一个黑盒子，而是你可以随意操控的乐高。 ComfyUI 适合对超宽、超长、超大的场景进行直接输出，而无需更强的显存资源，这也使得 ComfyUI 具备了成为AI绘画工业化标准设计平台的良好条件。      这张图片就是用分区域生成，包含了一天中的四个时候，从上到下分别是 夜晚、傍晚、白天、早晨，四个部分不但主题分明，而且还完美的融合到了一起，这一切是如此的神奇，这就是 ComfyUI的奇妙之处。        ComfyUI的优势十分明显，虽说界面看起来有点吓人，但是一旦领用运用起来，那就和其他WebUI彻底拉开了差距，这么好的工具还在不但进化当中，自然会成为Stable Diffusion的未来生态中最重要的组成部分。 如果想要熟练使用 ComfyUI，官网提供的一些生成实力，一定要深刻理解，这样掌握了生成逻辑，一切都将信手拈来！      如果你愿意继续做个新手，那就不要学习ComfyUI，但是如果你想成为一个高阶的AI绘画高手，那么ComfyUI是你最应该掌握的工具。      而且它并没有你认为的那么难。 ComfyUI官网： https://github.com/comfyanonymous/ComfyUI C
Read more »