ProPainter

收录理由

剪辑师和后期团队常会遇到这样的麻烦：镜头里混入了一辆路过的车、一个路人、一段水印，或是一块碍眼的招牌，需要把它从画面中抹掉。ProPainter 正是为这类需求而生的。它不是一帧一帧地单独修补，而是把整段视频当作一个整体来处理，用基于光流的传播机制配合 transformer 结构，让填补后的区域在时间上保持连贯，播放时不会出现闪烁或漂移。仓库里直接提供了预训练权重、推理脚本，还有能在 Colab 里跑起来的演示，拿自己的素材试一试非常方便。这项工作是 ICCV 2023 的论文成果，方法本身经过了学术评审，质量有保障。需要注意的是，项目默认采用非商业许可，如果要用在商业项目里，得另外和作者联系获取授权。