顶部左侧内容
百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 知识宝库 > 正文

SD WebUI 中也能用上实时绘画了!支持接入PS/Blender 等设计工具

luoxia 2024-04-23 22:05 79 浏览 0 评论

大家好,这里是和你们一起探索 AI 绘画的花生~

之前为大家介绍过 AI 绘画工具 Krea,它可以根据手绘的草图实时生成完整的画面,可以让我们更精准地控制图像效果,对电商、产品、游戏概念等设计领域来说非常有帮助。之前为大家推荐过一种在 ComfyUI 中免费实现 AI 实时绘画的方式,今天就再为大家推荐另一种在 Stable Diffusion WebUI 中实现实时绘画的方法。

一、插件简介

SD WebUI 的实时绘画功能需要借助一个插件实现,这个插件是上周由 B 站 AI 绘画博主@朱尼酱推出,支持文生图、图生图和桌面应用捕捉,操作界面也非常便捷好用,安装后即可借助 WebUI 的现有资源,在本地免费实现多功能 AI 实时绘画。

二、安装方式

由于这款实时绘画插件是基于 SD WebUI 的,所以使用前大家需要先安装并掌握 SD WebUI 的基础用法,没有掌握的小伙伴看我之前写的介绍文章,或者了解我最新制作的《零基础 AI 绘画入门指南》,系统学习 SD WebUI 的用法。

这里推荐使用秋葉大佬的一键整合包,先启动软件,在启动器界面找到「高级选项-启用 API」,将其转为开启模式,然后将「监听设置」下拉框里的「监听地址」改为 0.0.0.0,

在当前页面继续下拉,找到底部的 「CORS 授权管理」选项,打开后在里面输入一个 * 号并按 Enter 保存,然后关闭弹窗,此时的 API 的相关设置就完成了。回到启动器主页,点击「一键启动」打开 WebUI 网页界面,此时网址会显示为 localhost:7860,表明我们的 API 设置成功了。

然后下载文末网盘链接的资源包,先将里面的 ACC_SD15.safetensors 放置到 stable diffusion 根目录的 models/Lora 文件夹内,这是一个 sd1.5 的 Lcm Lora 模型,可以提升图像的生成速度。然后解压 Jizhi_AI 压缩包(解压后可以更换一下文件的路径,让其不要有中文),找到其中的 Jizhi_AI.exe 程序文件并双击启动,就能看到实时绘画的界面了。

二、使用简介

整个实时绘画的界面非常直观好用,下面为大家简单介绍一下它的用法。

1. 文生图功能

①首先选好大模型(VAE 模型看大模型是否需要),设定好画面尺寸,然后在提示词中输入描述画面的内容,比如 “masterpiece, best quality, a red cup, 3D pixar, bright light”,反向提示词填写常用的即可。

②选取 lora 模型。点击文本框右上角的 “添加 lora” 选项,从中选取我们之前安装好的 ACC_SD15.safetensors,调节滑块设置具体参数,再点击底部的 “确定” 按钮将其添加到正向提示词中。也可以再添加其他已安装的 lora 模型。

③然后启用 controlnet 模型,模型的类型按你输入的内容选择。如果是直接用画笔手绘,可以选择 Scribble/ Sketch,这样对线稿的精度要求低;如果是已有高精度草图或者图像,可以选择 lineart 或者 depth。

④设置完成后即可在画板中进行创作了,每次画板内容的改动都会实时显示在右侧。画笔可以修改颜色及大小;支持橡皮修改和撤销操作;重绘幅度可以调整结果图与原图的相似程度;如果对单次生成的图像不满意,可以点击底部的刷新小按钮,再次生成图像。

⑤除了手绘草图之外,还可以插入图像,与手绘草图结合来引导新图像的生成。

2. 屏幕捕捉功能

实时绘画插件中最实用的应该还是屏幕捕捉功能,我们可以将日常使用的 Ps、Ai、Blender、C4D 或者其他软件的操作界面接入其中,这样操作起来比其自带的画板更方便好用,功能也更多。具体操作方法如下:

①先打开你需要接入的软件或者网页;

②设置好实时绘画的各项基础生成参数,然后选择界面顶部的 「屏幕截图」功能,此时会弹出一个界面,包含各个目前正在运行的软件,从中选择你需要的。

③选中软件后,会有一个红线框用于设置需要截取的画面,一般都会将区域局限在画布之内,然后右下角的 “裁剪” 选项确定范围。

我在这里接入的是之前为大家推荐过的 AI 3D 工具 Genie。接入后,点击实时绘画界面右上角的 「全屏显示」宣讲,将整个窗口拖动悬浮在网页旁边,此时随意调整网页中 3D 模型的方向或角度,就能在窗口中看到实时渲染的精细图像(如果觉得渲染时间太长,可适当调低迭代步数。但生成的图片质量也会有所下降)。

好啦以上就是本期为大家推荐的基于 SD WebUI 的 AI 实时绘画插件,相关资源都在文末的云盘链接内,有需要的小伙伴记得下载~ 参考资源:

  1. https://www.bilibili.com/video/BV1Na4y1y7tt/?spm_id_from=333.337.search-card.all.click&vd_source=7e86aff88430dc49c39de082d6a0f147
  2. https://www.bilibili.com/video/BV1YW4y1w7sD/?spm_id_from=333.337.search-card.all.click&vd_source=7e86aff88430dc49c39de082d6a0f147
  3. https://www.bilibili.com/video/BV1iM4y1y7oA/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147

相关推荐

DIY从入门到放弃:机械盘固态盘能用多久?

电脑中的每个硬件损坏都有一个价值,唯独硬盘是无法衡量的,原因就在于里面的数据。不管是重要的年终总结PPT,还是可爱小姐姐的合集,这些损失都会让你头疼不已。想知道不同类型的硬盘都能使用多久,就请随笔者走...

固态硬盘和机械硬盘有什么区别?固态硬盘和液态硬盘的区别

我们在购买电脑时,都会关注它的一些外设和硬件配置,其中硬盘就是需要我们着重关注的点。硬盘通常有固态和机械,固态和液态之间的区分,那么它们之间有什么不同呢,本文就为大家分享一些硬盘方面的讯息。固态硬盘,...

固态硬盘和机械硬盘我们该如何选择?两者之间的区别又在哪里?

发展到现在电脑已经是一种非常普及的电子产品,大部分的人都有接触过或者是有着自己的一台电脑,不过很多人都是对于电脑的了解只停止于对电脑软件的操作,而对硬件却是一知半解或者是一点都不懂。就比如有的时候电脑...

固态硬盘、机械硬盘,你选哪个?

如果你想提升电脑系统性能或增加储存空间,加装固态硬盘或机械硬盘会是一个不错的选择。固态硬盘(SolidStateDrive,简称SSD)和机械硬盘(HardDiskDrive,简称HDD)是两...

一文了解固态硬盘和机械硬盘的优缺点

在计算机存储领域,固态硬盘(SSD)和机械硬盘(HDD)是两种备受关注的存储设备。它们各自拥有独特的特点和优缺点,让我们一起来深入了解一下这两种硬盘的对比。固态硬盘(SSD)优点:(1)速度快:固态...

一张图看懂机械硬盘和固态硬盘的区别

说起固态硬盘,懂的人一听就明白是怎么回事,而不懂的人则是一脸懵逼。其实,固态硬盘也没有想象中的那么神秘。它最大的特点就可以提高电脑的开机速度的运行速度,就是是电脑的“外挂”一样。1、什么是固态硬盘在出...

固态硬盘和机械硬盘哪个好?机械硬盘算不算电子垃圾?

固态硬盘的优点:1、读写速度快:采用闪存作为存储介质,读取速度相对机械硬盘更快。固态硬盘不用磁头,寻道时间几乎为0。2、防震抗摔性:SSD固态硬盘内部不存在任何机械部件,这样即使在高速移动甚至伴随翻转...

固态硬盘比机械硬盘更好?那你就错了,机械硬盘也有优势

现在自己攒机的朋友越来越多,很多人都会跟我说固态硬盘比机械硬盘更优秀,但是我却不这么认为,不要觉得我是一个特立独行的人,其实你猜对了,我就是这样的一个人。我为什么会说固态硬盘不一定比机械硬盘更好呢?下...

256GB固态和1TB机械硬盘应该怎么选?

来源:中关村在线相信不少小伙伴们在购机的时候发现,很多品牌给予了不同的硬盘配置方案,两台笔记本,处理器相同,显卡相同,内存相同,价格相同的前提下,只是硬盘配置不同,一个是256GB固态硬盘一个是1TB...

价格大跳水后 固态硬盘为何无法取代机械硬盘?

随着技术的升级,固态硬盘价格不断下跌。目前,240G的固态硬盘只要200多块钱。显然,固态硬盘的价格已经不再是高高在上。与传统的机械硬盘相比,固态硬盘最大的优势是速度快。如果电脑中安装了固态硬盘,并且...

如何正确选择硬盘:机械硬盘与固态硬盘优缺点对比

硬盘有机械硬盘(HDD)和固态硬盘(SSD)之分。一、机械硬盘即是传统普通硬盘,主要由:盘片,磁头,盘片转轴及控制电机,磁头控制器,电路板等几个部分组成。1、空气过滤片:其具有一定的吸附性,当硬盘造成...

电脑装固态硬盘和机械硬盘有什么区别?

想要解答这个问题,我们先了解一下固态硬盘与机械硬盘的区别,他们都有什么优缺点1、固态硬盘一个字,快,两个字很快,三个字,非常快。固态硬盘读取速度可以达到400M每秒,写入速度最高可达200M每秒,这在...

机械硬盘VS固态硬盘,你知道应该使用哪一种么?

首先,区别就是:机械硬盘(HDD)造价低寿命长,固态硬盘(SSD)噪音小效率高。下面为大家分别介绍一下:机械硬盘存在机械结构,读取和写入时由磁头在转动的盘片上转动寻找文件所在扇区,类似以前的DVD播放...

机械硬盘与固态硬盘的区别

硬盘中包含机械硬盘、固态硬盘和混合硬盘,那机械硬盘与固态硬盘之间有什么区别呢?机械硬盘就是传统的普通硬盘,主要采取的存储方式是机械式存储,通过磁头在盘片上进行读写数据;固态硬盘采取的方式则是电子存储,...

机械硬盘与固态硬盘,两者之间各有优势,但机械硬盘大势已去

大家都知道,选购笔记本电脑时要挑选带固态硬盘的型号,一般情况下,固态硬盘简称为SSD,机械硬盘简称为HDD。电脑硬盘的方式是由接口来区别的,一般的HDD形态仅有一种,即SATA,它有2.5英寸和3.5...

取消回复欢迎 发表评论: