做网站怎么上词网络营销形式

做网站怎么上词,网络营销形式,百度关键词怎么优化,贵阳app软件开发ControlNet 插件 ControlNet 概述 ControlNet#xff08;控制网#xff09;是由 lllyasviel 团队于 2023 年提出的神经网络架构#xff0c;核心是为了解决在 Stable Diffusion 中如何让图像生成变得更加可控的问题#xff0c;是 Stable Diffusion 迈向工业化的非常重要的一…ControlNet 插件ControlNet 概述ControlNet控制网是由 lllyasviel 团队于 2023 年提出的神经网络架构核心是为了解决在 Stable Diffusion 中如何让图像生成变得更加可控的问题是 Stable Diffusion 迈向工业化的非常重要的一步。ControlNet 通过预处理器提取参考图中的姿态、深度、边缘等结构信息再由 ControlNet 模型转换为检查点模型能够理解的生成条件让生成图像精准遵循参考图的布局与结构彻底解决生图结构失控的痛点是 Stable Diffusion 中实现精准控图的核心插件。ControlNet 插件的应用场景插画创作基于线稿生成高精度彩色插画保留线条构图。角色设计基于姿势参考图生成指定动作的角色形象如游戏角色战斗姿势等。建筑可视化根据图纸生成写实风格的建筑效果图。3D 模型辅助生成根据深度图、法线图控制生成图像的空间立体感辅助 3D 建模纹理绘制。摄影修图基于照片生成二次元风格图像保留人物构图。图生图与 ControlNet 插件的区别图生图是基于已有图像通过调整参数、添加提示词等让模型生成新图像对原图依赖度高主要是在原图基础上修改或拓展。ControlNet 是 Stable Diffusion 插件虽本质也是图生图但可借助多种控制类型如边缘线稿、姿态、深度等和预处理器在遵循原构图下更灵活、精确地控制图像生成对原图破坏小自由度与可控性更高。ControlNet 插件的发展史V1.02023-03初代发布仅 8 支持种基础预处理器Canny、HED、Midas Depth、OpenPose 等实现边缘、姿态、深度等核心控制。V1.12023-11扩展至 14 种新增 Lineart、Shuffle、Reference 等预处理器优化训练数据与稳定性适配更多场景。SDXL 适配2023-2024插件更新支持 SDXL推出适配大模型的专用预处理器如 SDXL - ControlNet Tile、Depth 等强化细节控制同步兼容 SD1.5 生态。多模态与精细化2024-2025新增 InstructP2P、Reference 、PuLID、DWPose 等预处理器引入 ONNX 加速、AIO 集成预处理提升效率与兼容性覆盖文控、脸部优化、风格迁移等多元需求。社区与生态拓展第三方衍生预处理器如针对 FLUX 的适配版涌现预处理器与模型解耦更灵活支持多预处理器叠加兼顾显存优化与控制精度平衡。ControlNet 安装ControlNet 插件的安装与使用https://github.com/lllyasviel/ControlNetLiblibAI 已内置 ControlNet 插件在本地部署的 Stable Diffusion 中使用 ControlNet需要确保 ControlNet 插件已经安装到 WebUI 中。ControlNet 仅凭插件本体是无法正常运行的必须结合特定的 ControlNet 预处理器、模型以实现不同的功能效果。ControlNet 基本参数ControlNet 面板主要分为图像上传板块、控制类型板块、控制参数板块。在图像上传板块可以上传参考图通过输入参考图像来引导 AI 生成在细节、风格、结构等方面更符合创作者期望的图像实现对图像生成过程的精细控制。在控制类型Control Type板块中可以选择控制的模式每一种模式对应不同的预处理器也对应不同的 ControlNet 模型在选择时检查点模型、控制模式、预处理器、ControlNet 模型四者一一对应。ControlNet 可使用的预处理器非常多允许创作者通过引入额外的控制信号来引导图像生成的过程从而生成更精确、更丰富的效果预处理器就像是给 AI 翻译图像语言的工具。画轮廓用边缘检测预处理器把照片里的物体轮廓线条提取出来像自动生成线稿告诉 AI 按这个形状来画。看深度用深度检测预处理器分析照片里物体的远近关系比如谁在前、谁在后让 AI 生成的新图有类似的空间感。学姿势用姿态检测预处理器识别照片里人物的动作比如抬手、走路让 AI 生成的人物摆出一样的姿势。在控制参数板块中可以调整相关参数完美像素自动让参考图的分辨率、比例和最终生成图保持一致避免因尺寸不匹配导致的结构变形。允许预览在生成最终图像前先预览预处理器输出的控制图能提前确认结构是否符合预期避免生成后才发现控制图有问题。控制权重Control Weight取值范围为 02表示 ControlNet 对生成图像的控制程度数值越大参考图的引导作用越强生成图像越贴近参考图的特征。上传蒙版用于指定参考图里需要修改的白色区域和保留不动的黑色区域实现精准局部重绘。起始步数Starting Control Step取值范围为 01表示 ControlNet 在图像生成过程中从哪个阶段开始发挥作用。0 表示从生成过程一开始就起作用数值越接近 1ControlNet 介入越晚前期主要由基础模型按常规方式生成。完结步数Ending Control Step取值范围为 01表示 ControlNet 在图像生成过程中作用结束的阶段。1 表示一直作用到生成结束数值越接近 0ControlNet 提前结束控制后期主要由基础模型自由生成。预处理器分辨率Preprocessor Resolution在使用预处理器对图像进行处理时图像所被设定的分辨率大小其决定了预处理器处理图像的精细程度数值越高处理后的图像细节越丰富但计算量也会增大处理耗时增加。控制模式Control Mode用于调节在图像生成中提示词和 ControlNet 上传图像对最终生成结果的影响侧重可选均衡、更注重提示词、更倾向于让 ControlNet 自由发挥。图片缩放模式Resize Model决定参考图适配生成需求的方式可选拉伸、裁剪、填充。ControlNet 支持同时使用多个预处理器即叠加多个 ControlNet 控制单元只需在界面中开启多个 ControlNet 选项卡分别选择不同预处理器、上传对应控制图即可。ControlNet 基本用法以生成一张人物写实图为例参考生成参数如下。ckpt 检查点模型麦橘超然 majicFlus正向提示词中文一个女孩在海边穿着白色长裙长袖戴着太阳帽面带微笑正向提示词英文A girl,over the sea,white long dress,long sleeves,sun hat,smile负向提示词ng_deepnegative_v1_75t,(badhandv4:1.2),EasyNegative,(worst quality:2)采样方法Euler a迭代步数30图片尺寸768x1024提示词引导系数3.5生成效果以上图为例使用 ControlNet 控制人物姿态参考插件参数如下。完美像素启用控制类型OpenPose 姿态预处理器openposeOpenPose 姿态ControlNet 模型F.1-ControlNet-Pose-V1控制权重1.5起始步数0完结步数0.7控制模式均衡图片缩放模式填充爆炸运行 预览效果调整生成参数如下。正向提示词中文一个男孩在海边穿着白色裤子长袖戴着太阳帽面带微笑正向提示词英文A boy,by the sea,wearing white pants,long sleeves,wearing a sun hat,with a smile on his face图片数量4生成效果ControlNet 预处理器OpenPose 姿态OpenPose 是一种基于计算机视觉的人体姿态估计算法通过检测人体关键点如关节、面部特征点并连接成骨骼结构精确捕捉人物的动作和姿态。OpenPose 算法通常检测以下关键点身体18 个关键点头部、颈部、肩膀、肘部、手腕、髋部、膝盖、脚踝等。手部每只手 21 个关键点手指关节和手掌。面部70 个关键点眼睛、眉毛、鼻子、嘴巴等。OpenPose 姿态预处理器允许创作者通过上传姿态参考图或直接绘制骨架来控制生成图像中的人物姿势。OpenPose 姿态预处理器的应用场景人物动作控制让模型生成的人物摆出指定姿势如跳舞、运动比如输入瑜伽动作姿势图模型就能画出对应姿势的插画。多人物场景协调控制画面中多个人物的互动姿势避免人物动作僵硬或冲突。动画/游戏角色设计快速生成角色的关键帧动作减少手绘工作量后续可导入 3D 软件细化。OpenPose 姿态预处理器的关键参数通过调整不同的预处理器可以单独对姿态、手部等组合进行识别也可以使用精度更高的预处理器得到更准确的姿势。如openpose full 高精度检测全身姿态、openpose hand 检测姿态及手部、openpose faceonly 仅检测脸部等。在 OpenPose 姿态预处理器中可以打开姿态编辑器调整姿态以重塑动作。Canny 硬边缘Canny 硬边缘预处理器用于提取图像的边缘轮廓生成清晰的线条引导且线条只有黑白两色便于模型理解和遵循。Canny 硬边缘预处理器的应用场景漫画插画风格生成用清晰线条勾勒人物轮廓搭配提示词生成日系动漫效果低阈值保留发丝细节高阈值强化主体轮廓。照片转线条画将写实照片转为线条引导的艺术图通过调整阈值控制线条疏密适合制作极简风格海报或创意头像。建筑或机械设计可视化突出硬边缘结构帮助模型理解几何形状生成工业设计草图或建筑外观渲染图。线稿上色导入手绘线稿图提取清晰轮廓搭配风格提示词让 AI 精准填充色彩既保留线稿的结构感又能快速生成多样配色的插画。Canny 硬边缘预处理器的关键参数高低阈值High/Low Threshold阈值越高识别出来的线条越少。如果上传的参考图是白色背景和黑色线条的图预处理器直接设置为 invert 反转。SoftEdge 软边缘SoftEdge 软边缘预处理器用于处理图像边缘轮廓信息目标是识别并区分图像中各种形状如直线、圆弧等的边缘。SoftEdge 软边缘预处理器的应用场景艺术插画创作绘制梦幻、柔和风格插画时让元素边缘自然融合过渡比如画一朵朦胧的花朵、缥缈的云朵营造诗意氛围。产品渲染图处理产品渲染图中产品与背景的衔接让产品边缘不生硬比如电子产品融入场景时使产品与周围环境过渡自然增强真实感。人像摄影后期修饰人像照片柔化人物发丝、皮肤边缘弱化瑕疵呈现更自然柔和的肤质与轮廓提升人像美感。立体艺术字生成带有柔和渐变边缘的艺术字效果让字体轮廓不生硬与背景的光影、色彩自然衔接。SoftEdge 软边缘预处理器的关键参数通过调整不同的预处理器变体可适配不同精度与安全需求。如hed 边缘柔和度高pidinet 边缘更精准teed 偏细腻线条anyline 兼容多种线稿类型。带有 safe 的预处理器在生成过程中加入了安全机制可有效避免生成包含不良或敏感内容的边缘信息适用于儿童绘本绘制、正规出版物配图制作等对内容安全性要求较高的场景。Lineart 线稿Lineart 线稿预处理器是一种用于控制图像生成过程中线稿风格的约束方式允许创作者输入简单线条或线稿通常只包含黑白线条没有色彩和阴影生成符合轮廓的完整图像。Lineart 线稿预处理器的应用场景插画漫画创作把照片转成干净的线稿直接用于上色或让模型生成日系、欧美漫画等风格。服装设计草图快速生成服装轮廓线稿如裙子褶皱、领口形状等模型可以基于线稿填充不同材质或花纹如蕾丝、皮革等。UI 图标设计制作简洁的界面元素或图标线条粗细均匀模型能保持设计风格统一。Lineart 线稿预处理器的关键参数通过调整不同的预处理器可以适配不同的风格类型。如anime 动漫线稿提取、realistic 写实线稿提取、standard 标准线稿提取等。MLSD 直线MLSD 是一种基于深度学习的直线检测算法能够识别图像中的直线段而非简单的边缘并将其转化为清晰的矢量线条。Lineart 线稿、Canny 硬边缘、SoftEdge 软边缘、MLSD 直线的异同Lineart 线稿是专门提取干净的绘画线稿适配不同风格的线条感提供更加细致的线条识别和控制。Canny 硬边缘是提取黑白硬轮廓边缘侧重物体形状边界。SoftEdge 软边缘是提取柔和语义边缘边缘过渡自然不生硬。MLSD 直线是精准提取图像中的直线与几何轮廓过滤曲线、纹理等干扰信息仅聚焦规则几何线条的约束。四者核心差异是线条的提取范围、风格属性和硬朗程度前三者覆盖全类型边缘 / 线条MLSD 仅针对直线类几何结构。MLSD 直线检测预处理器的应用场景建筑设计效果图生成根据建筑草图生成精准比例的别墅、写字楼效果图保证墙体、门窗、梁柱的直线笔直。室内空间布局设计锁定房间的墙面、地板、天花板的直线结构生成不同风格的家装效果避免空间比例失衡。工业产品设计生成电子产品、家具、工具等带规则几何结构的产品图保证产品的线条规整、造型精准。线稿优化与风格化将粗糙的建筑线稿转化为写实或插画风格的成品图保留原始线稿的几何结构。几何风格艺术创作生成极简主义、构成主义风格的艺术作品强化画面的直线分割与几何美感。MLSD 直线检测预处理器的关键参数MLSD Value ThresholdMLSD 值阈值用于筛选直线检测结果其值越高对直线像素值要求越严检测出的直线越少。MLSD Distance ThresholdMLSD 距离阈值用于判断两条线段能否合并为一条的依据其值越大允许线段间距离越大直线检测结果更简洁。Depth 深度图Depth 即深度源于三维概念描述物体间远近关系图像只有黑白两色白色表示距离镜头近黑色表示距离镜头远深度图能将图像采集器到场景各点的距离作为像素值体现画面物体三维深度关系。Depth 深度图预处理器通过传递图片空间信息指导 AI 图像生成辅助指定构图、姿势和 3D 结构等在保持原始构图时生成新颖图像比如创建有空间感的多层次场景让 AI 理解动作层次和空间信息。Depth 深度图预处理器的应用场景3D 场景生成与立体效果给模型输入带深度信息的图近实远虚生成有纵深感的场景比如模拟森林深处、走廊尽头的空间层次。物体遮挡关系控制让模型知道谁在前、谁在后比如画人物拿杯子时用深度图确保手在杯子前面避免元素错位。景深特效模拟通过调整深度范围让模型生成类似相机大光圈效果比如拍人像时虚化背景突出主体或拍微距时虚化前景聚焦昆虫。Depth 深度图预处理器的关键参数通过调整不同的预处理器可以灵活匹配不同场景的空间精度需求快速获取从大场景纵深到精细局部层次的深度控制图。如Midas 速度快适配大场景Zoe 全局均衡通用性强Leres/Leres 细节拉满适合精细构图DepthAnything 泛化性佳适配任意风格。Tile/Blur 分块/模糊Tile/Blur 分块/模糊预处理器是 ControlNet 里负责高清修复与大图生成的预处理器核心作用是拆分图像为多个小块并保留局部细节特征避免大尺寸生图时出现模糊、重复纹理或细节丢失的问题同时柔化块与块之间的拼接痕迹让画面更自然连贯。Tile/Blur 分块/模糊预处理器与 Tiled Diffusion 插件的异同相同都可以用于放大场景的分块处理。原理不同Tile/Blur 分块/模糊预处理器先提取原图分块特征作控制图通过 ControlNet 模型约束生成而 Tiled Diffusion 插件在潜空间分块通过算法逐块生成并拼接。显存控制不同Tile/Blur 分块/模糊预处理器显存占用低依赖 ControlNet 轻量处理而 Tiled Diffusion 可通过分块大小、重叠区域灵活控制小分块更省显存。细节可控性不同Tile/Blur 分块/模糊预处理器处理的细节贴合原图创意空间受控制权重影响而 Tiled Diffusion 插件可调分块、重叠、采样步数还支持区域提示自由度更高。Tile/Blur 分块/模糊预处理器与 Tiled Diffusion 插件经常结合使用尤其在大图生成、低显存设备高清放大、复杂细节修复等场景二者互补前者控结构与细节后者控显存与拼接协同解决大尺寸生图爆显存、细节丢失、拼接断层三大痛点。Tile/Blur 分块/模糊预处理器的应用场景中小尺寸图像高清放大保留边缘与纹理细节避免放大后模糊。重复纹理如布料、墙面、瓷砖的拼接痕迹修复让纹理过渡自然。风格转绘时锁定原图色彩与结构如真人漫改、插画转写实减少风格偏移。老照片、监控截图、压缩图等低质图像的细节修复去除噪点与划痕。设计稿、文献扫描件的高清化处理适配打印与数字出版的精度要求。Tile/Blur 分块/模糊预处理器的关键参数通过调整不同的预处理器可以适配不同的细节与色彩需求实现布局锁定、色彩固定或锐化增强等效果。如resample 侧重保留布局与细节、colorfix 在保留布局的同时固定色彩、colorfixsharp 在固定色彩基础上增加锐化、blur_gaussian 通过高斯模糊调整画面景深与融合度。Inpaint 局部重绘Inpaint 局部重绘预处理器用于通过蒙版精准锁定需要修改的区域对图像的局部区域进行重绘或修复。Inpaint 局部重绘预处理器与图生图局部重绘的异同相同都能对图像局部区域进行修改通过蒙版框选目标区域实现精准的局部重绘需求。原理不同Inpaint 局部重绘预处理器先提取原图非蒙版区域的结构特征作为控制图约束生成过程中全局结构不偏移而图生图局部重绘仅依赖蒙版限定重绘范围无额外结构约束生成结果易受提示词影响出现整体比例失衡。结构稳定性不同Inpaint 局部重绘预处理器通过 ControlNet 模型锁定非蒙版区域的轮廓、透视、比例即使蒙版区域较大也能保证主体与背景的衔接自然而图生图局部重绘在大区域修改时易出现主体变形、背景错位等问题。操作灵活度不同Inpaint 局部重绘预处理器需在 ControlNet 面板与图生图面板配合设置参数调节维度更多如控制权重、引导时机而图生图局部重绘操作更简洁仅需在图生图面板设置蒙版与重绘幅度适合快速简单的局部修改。适配场景不同Inpaint 局部重绘预处理器适合复杂场景的局部重绘如人物换衣、场景替换等而图生图局部重绘适合简单的局部修复如去杂物、小范围补全。Inpaint 局部重绘预处理器通常与多类工具如图生图局部重绘、OpenPose 姿态预处理器等配合实现精准且协调的图像局部优化。Inpaint 局部重绘预处理器的应用场景人物局部修改更换衣服款式/颜色、调整发型、修改妆容保留人物肢体姿态与背景不变。场景局部替换将室内背景改为户外风景、把普通街道替换为赛博朋克风格街道保证主体与新背景透视匹配。图像杂物去除删除照片中的路人、水印、电线等干扰元素让画面更简洁同时还原背景细节。局部细节精修优化产品图的瑕疵、增强插画的局部纹理、修复老照片的局部破损。创意局部改造给普通物体添加特效给杯子加蒸汽、给人物加翅膀、将平面元素改为立体效果兼顾创意与画面协调性。Inpaint 局部重绘预处理器的关键参数通过调整不同的预处理器可以适配不同的局部重绘需求实现结构精准锁定或细节保留优先的效果。如global_harmonious 兼顾蒙版区域与全局画面的色彩光影协调避免出现局部与背景割裂的问题、only_mask 仅聚焦蒙版区域修改对非蒙版区域无额外约束适合简单的局部补全、sketch 可结合草图控制蒙版区域的结构适合需要精准控制局部形态的场景。Segmentation 语义分割Segmentation 语义分割预处理器可以将图像按语义类别如人物、天空、建筑、植物、衣物等进行像素级分割生成带类别标签的控制图通过精准锁定特定类别区域实现针对性生成或修改确保不同语义区域的边界清晰、内容匹配避免区域混淆或内容错位。Segmentation 语义分割预处理器的应用场景场景元素批量替换将全图的天空替换为晚霞/星空、把所有植物替换为秋季植被保持其他区域结构不变。全局风格统一调整仅让人物区域保持写实风格将背景建筑区域转为动漫风格实现多风格融合。多区域精准控色统一调整全图衣物的颜色、优化所有建筑的光影色调确保同类别区域风格协调。复杂场景分层创作先分割出人物、背景、道具等区域分别对各区域进行细节强化再整合生成高质量图像。图像内容规整优化修正场景中语义错位的元素如将误判为植物的道具修正为金属材质、统一调整同类别元素的比例与位置。Segmentation 语义分割预处理器的关键参数通过调整不同的预处理器变体可适配不同场景的语义分割需求。如ade20k 擅长室内外场景精细分割、coco 聚焦常见物体的粗粒度分割能识别 80 类高频物体。Recolor 重上色Recolor 重上色预处理器是 ControlNet 中专注于图像色彩重塑的预处理器核心作用是在严格保留原图构图、轮廓与细节结构的基础上对图像进行重新上色或色彩优化无需改动画面主体形态即可实现黑白转彩色、风格调色等效果同时尽量贴合提示词定义的色彩逻辑让色彩过渡自然且与内容匹配。Recolor 重上色预处理器与图生图局部重绘的异同相同都能对图像进行色彩调整实现特定区域或整体的颜色改变。原理不同Recolor 重上色预处理器先提取原图的亮度或强度特征作为控制图通过 ControlNet 模型约束色彩生成确保结构不偏移而图生图局部重绘依赖蒙版框选目标区域通过重绘幅度控制色彩覆盖范围。操作复杂度不同Recolor 重上色预处理器无需手动框选仅需设置参数和提示词即可实现全图或全局色彩重塑操作更简洁而图生图局部重绘需精准绘制蒙版对细节操作要求更高。色彩可控性不同Recolor 重上色预处理器的色彩效果受提示词描述精度影响较大易出现颜色串色而图生图局部重绘通过蒙版精准锁定区域配合提示词可实现点对点的精准色彩替换可控性更强。适用效率不同Recolor 重上色预处理器适合全图色彩风格统一调整如黑白照片整体上色效率更高而图生图局部重绘适合多区域差异化色彩修改如同时修改衣服、头发、背景颜色灵活性更强。Recolor 重上色预处理器的应用场景黑白老照片、老影像的色彩还原唤醒复古影像的岁月细节。线稿/草图快速上色保留线条结构的同时生成多样色彩方案。现有图像的风格调色如将冷色调转为暖色调、实现赛博朋克/莫兰迪等色彩风格迁移。产品设计多色方案预览在固定产品形态下快速切换不同配色。低饱和/褪色图像的色彩增强还原画面原本的色彩层次。Recolor 重上色预处理器的关键参数通过调整不同的预处理器可以适配不同的色彩重塑需求实现亮度优先或饱和度优先的上色效果。如luminance 细节清晰色彩过渡自然、intensity 色彩饱和、视觉冲击强。IP-Adapter风格迁移IP-AdapterImage Prompt Adapter风格迁移预处理器通过参考图提取人物形象特征或画面风格特征无需复杂提示词即可将参考特征融入生成过程实现一键迁移 IP 形象、统一风格同时保留模型原生的创意生成能力兼顾精准度与灵活性。IP-Adapter 风格迁移预处理器的应用场景IP 形象精准复刻将原创角色、动漫 IP 的五官、造型迁移到不同场景如把卡通 IP 形象融入古风场景、科幻场景。多图风格统一批量迁移参考图的艺术风格让生成的系列图保持一致风格。真人形象二次元化基于真人照片迁移五官特征生成同形象的动漫/插画风格作品。细节化风格迁移仅迁移参考图的局部特征如参考图的光影色调、服饰纹理保留主体创意生成。IP-Adapter 风格迁移预处理器的关键参数通过选择不同的特征提取模式适配形象 / 风格迁移需求。如clip_sd15 是 SD 1.5 中适配任意图像的基础特征复用、face_id 专注真人脸 ID 迁移实现五官复刻、face_id_plus 额外保留面部细节与神态精度更高。其他预处理器部分 ControlNet 预处理器虽使用频率略低但能解决特定场景的控图需求可根据创作目标灵活选用。NormalMap 正态法线贴图预处理器用于提取图像的法线方向信息生成贴图强化物体的光影立体感与材质质感适配 3D 渲染、游戏模型等场景。Scribble/Sketch 涂鸦/草图预处理器用于将任意手绘涂鸦、简易线稿转化为结构控制图基于粗糙线条生成对应风格的完整图像降低创作门槛。Shuffle 随机洗牌预处理器用于打乱原图的内容元素保留风格生成与原图风格一致但内容不同的新图像适合快速拓展同风格素材。InstructP2P 指导生图预处理器用于通过文字指令精准控制图像局部修改实现文字驱动的定向生图无需手动蒙版。Reference 参考预处理器用于提取参考图的风格、内容特征让生成图与参考图保持风格或元素一致性兼顾创意与参考特征的复用。Revision 预处理器用于基于原图与文字指令对图像进行局部或全局的优化修订实现精准的图像迭代优化。T2I-Adapter 预处理器用于将文字描述转化为多维度控制信号辅助 Stable Diffusion 生成更贴合文字指令的图像强化文生图的精准度。