blended-diffusion

收录理由

这个项目是 CVPR 2022 一篇论文的官方实现，论文提出了一种用文字提示来编辑照片局部区域的方法。使用时，你只需提供一张图片、一个覆盖待修改区域的掩码，以及一句简短的描述，系统就会借助 CLIP 模型引导扩散过程，只重新生成掩码内的部分，而照片的其他区域保持原样。对于需要严格保留背景细节的图像编辑系统，这个仓库是很有价值的参考。代码里包含了可用的命令行界面、预训练权重，以及针对常见编辑场景的示例脚本，比如添加物体、替换物体、更换背景或扩展画面。README 中还提到了后续的 Blended Latent Diffusion 项目，那个版本速度更快、效果也更好，因此从这个仓库入手，再过渡到后续项目，是一条顺畅的学习路径。