- 今天介绍一期真人照片转换多种风格3D头像-stablediffusion教程
-
controlnet最近更新很迅速,对之前整个流程都有一些影响。主要是tile和reference的加入,这次也会根据这两个做一些应用。
基本运用流程
一个基本的运用流程大概是:使用tile进行造型;使用reference进行润色;可以叠加lora和模型;
通过调整两个处理器的权重,来实现我们想要的风格。简单来说,tile就是一个附带了造型限制的图生图工具,而reference像是一个高级的风格转移。
运用tile和reference处理器
下面我们运用下这两个处理器,拿出想要生成的原照片。最好背景是简单一些的,然后放到图生图里做下tag反推。当然,自己手动写会更加准确。
改好后放到文生图,先简单跑一下看看,确保没偏差后,我们选一个3D效果的模型。迪士尼3D风格大模型,在c站上可以找到。如果是没有魔法的麻瓜,也可以在xtimesai这个网站上找到。
controlnet的tile
这里要确保已经更新到1.173的版本,才会有新的处理器。然后把刚才的照片放进来,尺寸设置一致,选择tile处理器和对应的模型,控制模式选择第二个跑一下,效果挺明显的。
问题就是大模型的角色造型过拟合,基本都是训练集的样子,和我们提供的图片不是很像。
controlnet的reference
相当于高级版本的风格转换,不需要对应的模型。确保是使用balanced的控制模式,先跑一跑看看效果。在对应去调整参数,权重越高越接近所提供的图片,一般在七左右是个比较合适的数值。OK,这是最基础的一步。
© 版权声明
文章版权归作者所有,未经允许请勿转载。