Stable Diffusion LORA模型是什么意思？怎么使用？

LORA是什么？

LORA是一种图像生成模型，可以根据给定的描述生成对应的图像。它类似于给汉堡加料，不改变原有内容，只在层与层之间插入新的层来影响结果。在使用LORA时，我们可以尝试在描述中添加一些作者提供的触发词，以达到更好的效果。

使用LORA生成与目标图像一致的一些技巧和注意事项

• 底模必须相同：生成的图片与演示图片相似，需要保证底模相同。
• 模型名称必须相同：加载的lora模型名称必须与描述中的模型名称相同。
• 注意描述中调用的LORA数量：有时描述中会调用多个LORA，需要确保安装了所有调用的LORA。
• 使用反向提示词：反向提示词可以排除一些对LORA不好的因素，提高生成图片的质量。
• 看作者说明：Trigger Words。
  在描述中添加不同的触发词可以生成不同的风格。例如，墨心的LORA提供了一些触发词，如”shuimobysim”、”郑板桥”、”吴昌硕”、”八大山人”。但并不是所有的LORA都有触发词，有些LORA即使不添加触发词也会影响最终生成的图片效果。因此，在实际应用中，可以尝试添加和不添加触发词，然后对比选择自己喜欢的图片。

逐个添加触发词

并不一定要将所有触发词都添加到描述中，可以尝试逐个添加触发词，观察对应的风格，然后进行选择。

注意权重问题

在调用LORA时，要注意权重的设置。从作者给出的描述和参考可以看到，他在调用LORA时使用了0.8和0.7这样的权重。权重并不是越高越好，也不是将权重设置为1就会生成更明显的图片风格。可以将LORA的权重类比为汉堡中的番茄酱，番茄酱加得太多可能会让汉堡无法食用。同样地，如果将LORA的权重设置得太大，可能会生成一些糊或翻车的图片，这被称为过拟合。因此，在调用LORA时，要注意权重问题，最好可以借鉴作者对一些优质图片的权重设置。