matlab滑动条代码-instructionVideos:CVPR2016上的论文“从叙述式教学视频中进行无监督学习”的代码

matlab滑动条码叙述性教学视频中的无监督学习 由巴黎INRIA的Jean-Baptiste Alayrac创建。 介绍 我们解决了从一组旁白的教学视频中自动学习完成某些任务（例如更换汽车轮胎）的主要步骤的问题。 本文的贡献是三方面的。 首先，我们开发一种新的无监督学习方法，该方法利用了输入视频和相关旁白的互补性。 该方法解决了两个聚类问题，一个在文本中，一个在视频中，一个接一个地应用，并受到联合约束条件的链接，以在两种方式中获得单个一致的步骤序列。 其次，我们从互联网上收集并注释了一个新的具有挑战性的现实世界教学视频数据集。 数据集包含约800,000帧，可用于五种不同的任务（如何：更换汽车轮胎，进行心肺复苏（CPR），跳车，存放植物和煮咖啡），其中包括人与物体之间的复杂交互，并被捕获到各种室内和室外设置。 第三，我们通过实验证明了该方法可以无监督地自动发现完成任务的主要步骤，并在输入视频中定位这些步骤。 该项目的网页可用。 它包含指向和其他实用程序的链接，例如原始数据，海报或演示文稿的幻灯片。 执照 我们的代码是根据MIT许可证发布的（有关详细信息，请参阅LICENSE文件）。