Photoshop与Stable Diffusion的插件整合教程

插件简介

问题背景与市场需求

Photoshop（以下简称PS）为了与SD1等生成式AI工具竞争，推出了创意视频充功能，但面临诸多问题，如付费内容风控、功能尚未向国内开放、缺乏多样化的开源模型和精确制导等，导致其在可玩性上不如SD。而SD虽然强大，但缺乏细致的图像编辑功能，这使得SD和PS之间存在频繁的导入导出过程，影响效率。

解决方案：Auto Photoshop Stable Diffusion Plugin

为了解决上述问题，可以通过安装一个名为Auto Photoshop Stable Diffusion Plugin（以下简称插件）的PS和SD扩展，使得两者可以实现高效的互联互通。该插件功能全面，可以实现SD中80%以上的日常操作，包括输入提示词、使用模型等，且与常用插件如CTRLNET和ADETAILER无缝衔接。

该插件为SD配备了强大的“外挂”，通过与PS中的选区图层功能深度交互，可以更精确地作图和改图，提高作品完成度，同时简化复杂的工作流程。对于没有使用过Stable Diffusion的用户，该插件以轻量级方式整合了SD的核心功能，更易上手。

安装与配置

前置条件

确保电脑上已安装好PS和SD，PS版本至少为V24（2023版）。若PS版本较低，则需要更新。

安装步骤

1. 安装Stable Diffusion：遵循已有的安装文档，确保Stable Diffusion安装部署正确，并开启Web UI的时候将API模式打开。

2. 安装插件：

   • SD的扩展：在扩展列表搜索插件名称或通过链接下载压缩包直接安装。
   • PS插件：从项目主页下载插件的压缩包，解压到PS根目录下的plugins文件夹。
     
3. 启动插件：
   • 先启动Web UI并保持后台运行。
   • 启动PS，从增效工具中找到插件勾选并调出
     。
4. 插件界面调整：插件界面可以设置为浮动窗口，位置和大小可自由调节，以适应使用习惯。

基本使用：文生图与图生图

生成图片

在PS中新建画布，使用矩形选框工具拉出区域，这将决定生成的图像尺寸。在插件的提示词区域输入内容，选择生成模式（例如，text to image），设置参数后点击生成按钮即可在所选区域生成图片。

参数与选项

• 多种生成模式可选，如text to image、image to image。
• 可选择SD模型库中的模型。
• 可连续绘制多张图片，并在查看器中查看和保存。
  

基本使用：局部重绘与外绘扩图

局部重绘

可对画面局部进行修改或添加新元素。插件会新建一个蒙版图层，用户可在此图层上定义重绘区域，使用PS的选区工具精确定义绘制范围。

外绘扩图

可根据已有图像丰富画布外的内容。在插件中选择剪裁工具调整画面尺寸，全选画布并选择图层，使用插件进行重绘或外绘。

进阶玩法：ControlNet功能

ControlNet使用

ControlNet是SD中用于控制AI绘图的画面构图、人物姿势等的工具。在插件中，用户可通过CTRL标签进行设置，输入用于识别的图片，并通过预览注释器处理结果。

ControlNet与PS结合

PS的编辑功能可以优化ControlNet的使用，如通过编辑信息图来引导图像生成。例如，使用line art模型在PS中绘制线稿，然后导入ControlNet进行处理。

进阶玩法：ControlNet Seg详解

语义分割（Segmentation）

Semantic segmentation（sec）是一种深度学习算法，用于识别图片各个部分的内容。在ControlNet中使用seg预处理可以输出信息图，通过色块对应原图中的不同信息。

信息图编辑

用户可在PS中编辑信息图，添加新元素或修改内容。例如，可以在桥上绘制一个人的形象，并将其加入到原有的风景图中。

总结与展望

本教程介绍了如何在PS中整合使用SD的插件，提高了工作效率和创作自由度。同时，英特尔处理器在AI领域的突破，使得即使是轻薄本也能快速使用SD进行图像生成，推动AI应用的普及和发展。

注意：以上内容基于教程内容进行了详细的梳理和解释。实际操作时，请参考具体的安装指南和插件使用说明。

up：nenly