PowerPaint |通过任务提示学习高质量多功能图像修复
PowerPaint 是清华和上海人工智能实验室发布的一个图像修复项目。这是第一个在同时解决上下文感知图像修复和文本引导对象修复两项任务上都表现出色的高质量、多功能修复模型。
 
✨ 功能亮点:
可同时在各种修复任务中实现最先进的结果,例如文本引导的对象修复、上下文感知图像修复、具有可控形状拟合的形状引导对象修复和修复。
 
💡实现方法:
使用两个任务提示微调文本到图像模型,即 P obj 和 P ctxt,分别用于文本引导的对象修复和上下文感知的图像修复。具体来说,P obj 可以用作否定提示,通过无分类器引导采样来有效去除对象。我们进一步引入 P shape 用于形状引导的对象修复,可以通过 P ctxt 的提示插值进一步扩展 控制生成的对象与蒙版形状的对齐程度。
 
👀 深度体验:
1. 项目论文:
4. 项目地址:
2023-12-19
浏览212
AI 工具 Playground
登录后评论
评论
分享