Magic Insert,能够将主题从具有任意样式的图像拖放到另一个样式截然不同的目标图像上,并实现将主题具有风格感知且逼真地插入到目标图像中。

Magic Insert,将一个图像中的人或物体拖放到另一个风格图像中 并实现风格融合插图

Magic Insert,这是一种将主题从用户提供的图像拖放到不同样式的目标图像中的方法,同时以物理上合理的方式匹配目标图像的样式。这项工作形式化了风格感知拖放的问题,并通过解决两个子问题提出了一种解决该问题的方法:风格感知个性化和风格化图像中的逼真对象插入。对于风格感知个性化,我们的方法首先使用 LoRA 和在主题图像上学习的文本标记对预训练的文本到图像扩散模型进行微调,然后将其注入目标样式的 CLIP 表示。对于对象插入,我们使用 Bootstrapped Domain Adaption 将特定领域的逼真对象插入模型适应各种艺术风格的领域。总体而言,该方法明显优于传统方法,例如修复。最后,我们提出了一个数据集 SubjectPlop,以促进该领域的评估和未来进展。

项目地址:https://magicinsert.github.io/



微信扫描下方的二维码阅读本文

Magic Insert,将一个图像中的人或物体拖放到另一个风格图像中 并实现风格融合插图1

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。