February 21, 2023

AI绘画这组词汇相信大家不陌生，虽然已经很方便，但要让其生成一副自己满意的图，还是需要费一番心思，有时候多次调整关键词就是生成不了自己想要的画面，这些一直以来都是AI绘画的问题。 但就在最近，情人节刚过的当儿，一款名为“ControlNet”AI绘画插件的出现，几乎可以说是完美解决了AI绘画的痛点，它可以几乎做到完美控制画面。 目前ControlNet能做到骨骼绑定，精准控线，依据3D视图的法线进行绘图，线稿上色，依据深度图结构透视精准重绘等。 ControlNet的绘画模式是：先让用户输入一张参考图，然后程序根据此图按一定的模式预处理一张新图，之后再由AI根据这两幅图绘制出成品；当然，用户可以关闭程序的预处理功能，直接输入一张用户自己处理好的图片当作预处理图，之后AI仅根据这副图生成成品。 一.骨骼绑定-OpenPose ControlNet的用户可以输入一张姿势图片（推荐使用真人图片）作为AI绘画的参考图，输入prompt后，之后AI就可以依据此生成一副相同姿势的图片；当然了，用户可以直接输入一张姿势图，如下图： 二.精准控线 2.1 Canny模型 ControlNet的用户输入一张动漫图片作为参考，程序会对这个图片预加载出线稿图，之后再由AI对线稿进行精准绘制（细节复原能力强） 2.2 Scribble模型 涂鸦成图，比Canny自由发挥程度更高，以下为低权重成图 2.3 Mlsd模型 建筑物线段识别 三.三维制图 ControlNet适用于3维制图，用于法线贴图，立体效果 AI会提取用户输入的图片中3D物体的法线向量，以法线为参考绘制出一副新图，此图与原图的光影效果完全相同 ControlNet安装教程 前提：你要将AI绘画的WebUI更新到最新版本 将https://github.com/Mikubill/sd-webui-controlnet仓库中的内容拉取到WebUI文件目录下extensions文件夹内 也可以直接下载zip 下载该网站下的内容https://huggingface.co/lllyasviel/ControlNet/tree/main/annotator/ckpts，将其放到插件目录下的annotator下的ckpts目录 下载https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main下的模型到插件目录下的models目录 现在你的ControlNet已经安装完毕 具体使用教程推荐B站视频https://www.bilibili.com/video/BV1Wo4y1i77v