Github项目分享 | ProPainter：最新视频修复技术，一键移除视频中的物体和水印
“分享Github上有用且有趣的开源项目。”
ProPainter是由新加坡南洋理工大学（Nanyang Technological University）的S-Lab团队开发的一款视频修复工具。它融合了图像和特征修复的优势，以及高效的Transformer技术，旨在提供高质量的视频修复效果，同时保持高效性。
ProPainter结合了增强的双域传播和高效的掩码引导稀疏视频Transformer，在VI任务上性能表现SOTA！代码现已开源！
项目主页：https://shangchenzhou.com/projects/ProPainter
论文地址：https://arxiv.org/pdf/2309.03897.pdf
Github地址：https://github.com/sczhou/ProPainter
整体框架
ProPainter由三个关键组件组成:循环流补全、双域传播和掩码引导的稀疏Transformer。首先，采用一个高效的递归流补全网络来补全污染流场;然后，我们在联合训练的图像和特征域进行传播。这种方法使我们能够探索来自全局和局部时间框架的对应关系，从而产生更可靠和有效的传播。随后的掩码引导稀疏Transformer块利用时空注意力来细化传播的特征，辅以只考虑token子集的稀疏策略。这提高了效率并减少了内存消耗，同时保持了性能。
效果展示
对象去除
水印去除
视频完成
▌关于我们
灵度智能，我们致力于提供优质的AI服务，涵盖人工智能、数据分析、机器学习、深度学习、强化学习、计算机视觉、自然语言处理、语音处理等领域。提供AI课程、AI算法代做、论文复现、远程调试等服务。如有相关需求，请私信与我们联系。
我们的愿景通过创新创意和智能技术为客户提供卓越的解决方案，助力产业升级和数字化转型。我们的产品和服务将引领行业标准，创造卓越的用户体验。我们的团队致力于创造更智能、更便捷和更高效的生活方式，推动社会进步，致力于创造更美好的未来。
关注【灵度智能】公众号，获取更多AI资讯。