和男/女神的合影说来就来？🤔腾讯出了一个能够调用两个人物lora / Instant ID 模型，而且确保两个人物能够在画面中和谐出现，不互相遮挡和相貌融合，生成超和谐合影图的模型。（不存在的记忆又增加了🥹）

OMG: Occlusion-friendly Personalized Multi-concept Generation In Diffusion Models 遮挡友好型个性化多概念生成在扩散模型中的应用

🧐 OMG是一个能够解决身份保持、遮挡处理以及前后景协调问题的多概念个性化图像生成框架，特别适用于文本到图像生成领域。

➡️链接：kongzhecn.github.io

✨重点
●🔍 OMG通过两阶段采样解决方案实现多概念集成：第一阶段负责布局生成和视觉理解信息收集，用于处理遮挡；第二阶段利用收集到的信息和设计的噪声混合技术集成多个概念，同时考虑遮挡问题。

●🎨 该框架可以与各种单概念模型结合使用，例如LoRA和InstantID，且无需额外调整。特别地，可以直接利用Civitai.com上的LoRA模型。

●🌐 在对抗遮挡和前后景和谐方面，OMG表现出色，可以生成高质量、个性化的多角色图像。

●🎥 该框架被用于创作短片"Home Defense"，展示了结合OMG和SVD（Singular Value Decomposition）的应用。

●🔄 OMG支持与ControlNet结合，实现多样化的条件组合，包括人类姿态、canny边缘和深度图等。

●👗 该框架还能与不同风格的LoRAs结合，增加了风格多样性。