PhotoMaker-腾讯等开发的个性化人物图像生成工具

PhotoMaker是什么？

PhotoMaker是由南开大学与腾讯PCG实验室联合开发的一款人工智能系统。该系统采用了一种名为Stacked ID Embedding的创新方法，能够将同一身份的多张输入图像编码为一个统一的ID嵌入，从而作为生成图像的一致性表示。这种技术使得PhotoMaker能够创造出极为逼真的人类照片。

PhotoMaker不仅在图像生成的逼真度上表现卓越，其生成能力亦十分多样化。它可以根据文本提示生成高度逼真的照片，并且在保留身份特征的前提下，对图像进行风格化处理。此外，该系统还能够将艺术作品或旧照片中的人物栩栩如生地融入现实场景中，甚至可以改变人物的年龄、性别，实现身份混合等多种功能。

PhotoMaker可以做什么？

PhotoMaker具有以下功能：

• 生成逼真照片：PhotoMaker可以根据文本提示生成逼真的人物照片，使得生成的照片与给定的描述相符合。
• 保留身份属性的风格化处理：除了生成逼真的照片外，PhotoMaker还可以在保留身份属性的同时进行风格化处理，使得生成的照片具有不同的艺术风格或特定的视觉效果。
• 将艺术作品或旧照片中的人物带入现实：通过将艺术作品、雕塑或旧照片作为输入，PhotoMaker可以将过去的人物带入现实，为他们生成照片。这为将历史人物或艺术作品中的人物重新呈现在现实世界中提供了可能。
• 改变年龄或性别：通过简单地替换类别词（如男性和女性），PhotoMaker可以实现改变人物的年龄或性别，同时保持原始身份的特征。
• 身份混合：如果用户提供不同身份的图像作为输入，PhotoMaker可以将不同身份的特征融合在一起，形成一个新的身份。用户可以通过控制输入图像池中身份图像的比例或通过调整提示权重来调整混合比例。

PhotoMaker主要特点

1. 几秒钟内快速定制，无需额外的 LoRA 培训。
2. 确保令人印象深刻的 ID 保真度、提供多样性、有前途的文本可控性和高质量的生成。
3. 可以作为适配器与社区中的其他基础模型以及 LoRA 模块进行协作。

PhotoMaker效果示例

生成的写实效果

风格化生成效果

注意：仅更改基本模型并添加 LoRA 模块以获得更好的风格化

如何使用PhotoMaker？

论文：外部链接点击前往访问

GitHub：GitHub点击前往查看

PhotoMaker提供了若干个体验demo，点击一下即可在线体验：

外部链接点击前往访问

外部链接点击前往访问