Mon, 22 Jan 2024 05:39:28 +0000

在研究界还是企业界主流的进行个性化人像定制的方法仍然为基于DreamBooth+LoRA的方式。这类方法有三个显著的缺点：1、定制速度很慢（往往大于10分钟）；2、GPU资源消耗大（基于SDXL模型的定制过程显存消耗大于20G）；3、需要用户提供的图像数量多（往往大于15张自拍照才有很好的效果）。
在这个工作中，我们提出了一种新的高效的个性化人像定制方法——PhotoMaker。通过我们的方法，在用户输入少量图像（1-10张）的前提下，只需要数秒就可以完成一次个性化人像定制。大大提升了定制过程的效率。
与此同时，我们方法的身份信息保持度甚至优于之前方法。此外，我们的方法还可以扩展到之前方法很难甚至无法做到的应用场景中，比如将艺术作品或者老照片中的人物带回现实中、或是将不同人物的身份特点混合在一起创造出一个新的人物。

项目主页：
https://photo-maker.github.io/
线上体验：
https://huggingface.co/spaces/TencentARC/PhotoMaker

下午14:30，感谢关注。