真人照片转换多种风格3D头像-stablediffusion教程

• 今天介绍一期真人照片转换多种风格3D头像-stablediffusion教程

• controlnet最近更新很迅速，对之前整个流程都有一些影响。主要是tile和reference的加入，这次也会根据这两个做一些应用。

基本运用流程

一个基本的运用流程大概是：使用tile进行造型；使用reference进行润色；可以叠加lora和模型；
通过调整两个处理器的权重，来实现我们想要的风格。简单来说，tile就是一个附带了造型限制的图生图工具，而reference像是一个高级的风格转移。

运用tile和reference处理器

下面我们运用下这两个处理器，拿出想要生成的原照片。最好背景是简单一些的，然后放到图生图里做下tag反推。当然，自己手动写会更加准确。

改好后放到文生图，先简单跑一下看看，确保没偏差后，我们选一个3D效果的模型。迪士尼3D风格大模型，在c站上可以找到。如果是没有魔法的麻瓜，也可以在xtimesai这个网站上找到。

controlnet的tile

这里要确保已经更新到1.173的版本，才会有新的处理器。然后把刚才的照片放进来，尺寸设置一致，选择tile处理器和对应的模型，控制模式选择第二个跑一下，效果挺明显的。

问题就是大模型的角色造型过拟合，基本都是训练集的样子，和我们提供的图片不是很像。

controlnet的reference

相当于高级版本的风格转换，不需要对应的模型。确保是使用balanced的控制模式，先跑一跑看看效果。在对应去调整参数，权重越高越接近所提供的图片，一般在七左右是个比较合适的数值。OK，这是最基础的一步。