SkyAR:pytorch正式实施预印本《天空之城》

SkyAR | | pytorch在preX上的正式实现：“天空中的城堡：视频中动态的天空替换和协调”，arXiv：2010.11800。 我们提出了一种基于视觉的视频天空替换和协调方法，该方法可以在样式可控的视频中自动生成逼真的戏剧性天空背景。 与以前的专注于静态照片或需要惯性测量单元集成在智能手机中以拍摄视频的天空编辑方法不同，我们的方法完全基于视觉，对捕获设备没有任何要求，可以很好地应用于在线或离线处理方案。 我们的方法实时运行，没有用户交互。 我们将此艺术创作过程分解为几个代理任务，包括天空遮罩，运动估计和图像融合。 实验是通过手持智能手机和行车记录仪在野外拍摄的各种视频进行的，它们显示了我们的方法的高保真度，并且在视觉质量和照明/运动动态方面都很好地概括了我们的方法。 在此存储库中，我们基于Pytorch实施了论文的完整培训/测试流程，并提供了一些演示视频，可用于重现论文