鹅厂推出的IP-Adapter模型为Controlnet生态做出了突出贡献,可识别参考图的风格和内容,然后生成相似的作品,且可搭配其他控制器一起使用。
而在近期,IP-Adapter模型又新增模型:FaceID模型,相比之前的模型,FaceID模型采用人脸识别模型的ID embedding来提升人脸合成的相似度。目前FaceID模型已经在HuggingFace上开源:
-
代码:https://github.com/tencent-ailab/IP-Adapter
-
模型:https://huggingface.co/h94/IP-Adapter-FaceID
这次更新的FaceID模型包括多个版本。首先是基础的IP-Adapter-FaceID模型,它采用采用人脸识别模型的ID embedding作为条件来生成一致性人脸,使用IP-Adapter-FaceID模型只需要用文本就可以生成不同场景和风格的人像。
然后是IP-Adapter-FaceID-Plus模型,它在使用人脸识别模型的ID embedding的基础上加上CLIP embedding来控制人脸结构,而且你可以组合使用不同的ID embedding和CLIP embedding来合成人脸图像。
最后是IP-Adapter-FaceID-PlusV2模型,它在IP-Adapter-FaceID-Plus的基础上支持调节人脸结构的控制权重。
目前三个版本的FaceID模型不仅支持SD 1.5,还已经支持SD XL。而且FaceID模型已经在ComfyUI和WebUI上支持了。
除此之外,FaceID模型还更新了支持多图输入的IP-Adapter-FaceID-Portrait,它支持合成各种风格的人脸图像。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
三、最新AIGC学习笔记
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例