用于处理视频内容的方法和系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN105608709A(43)申请公布日2016.05.25(21)申请号201510744622.X(22)申请日2015.11.05(30)优先权数据14/542,2942014.11.14US(71)申请人索尼公司地址日本东京(72)发明人S·库尔比斯(74)专利代理机构中国国际贸易促进委员会专利商标事务所11038代理人边海梅(51)Int.Cl.G06T7/20(2006.01)权利要求书2页说明书11页附图9页(54)发明名称用于处理视频内容的方法和系统(57)摘要本申请涉及用于处理视频内容的方法和系统。更具体而言，本文公开了处理视频内容以便从视频内容的图像序列中提取运动对象的方法和系统的各个方面。在实施例中，该方法包括确定视频内容中一个或多个运动对象的一个或多个对象轮廓。包围第一运动对象的第一对象轮廓的第一对象边框(OBB)是基于所确定的一个或多个对象轮廓创建的。用于第一运动对象的第一对象蒙版是基于所创建的第一OBB中第一对象轮廓的充填而在第一目的地图像帧中生成的。CN105608709ACN105608709A权利要求书1/2页1.一种用于处理视频内容的方法，该方法包括：在视频处理器中：确定所述视频内容中一个或多个运动对象的一个或多个对象轮廓；基于所确定的一个或多个对象轮廓，创建包围第一运动对象的第一对象轮廓的第一对象边框(OBB)；及基于所创建的第一OBB中所述第一对象轮廓的充填，在第一目的地图像帧中为所述第一运动对象动态生成第一对象蒙版。2.如权利要求1所述的方法，还包括基于所述视频内容的三个连续的图像帧检测所述一个或多个运动对象，其中所述三个连续的图像帧包括前一图像帧、当前图像帧以及下一图像帧。3.如权利要求2所述的方法，还包括：对齐所述当前图像帧与所述前一图像帧，以及对齐所述下一图像帧与所述当前图像帧；及确定所对齐的所述当前图像帧与所述前一图像帧之间的第一绝对差图像，以及所对齐的所述下一图像帧与所述当前图像帧之间的第二绝对差图像。4.如权利要求3所述的方法，还包括在所确定的第一绝对差图像和所确定的第二绝对差图像中检测对应于所述一个或多个运动对象的所述一个或多个对象轮廓。5.如权利要求4所述的方法，还包括基于所述第一绝对差图像中所检测到的一个或多个对象轮廓确定第一对象轮廓图像，以及基于所述第二绝对差图像中所检测到的一个或多个对象轮廓确定第二对象轮廓图像。6.如权利要求5所述的方法，还包括基于所确定的第一对象轮廓图像与所确定的第二对象轮廓图像之间的交集确定中间对象轮廓图像。7.如权利要求6所述的方法，还包括利用所确定的中间对象轮廓图像和与所述中间对象轮廓图像相关联的梯度信息来确定所述一个或多个运动对象的所述一个或多个对象轮廓。8.如权利要求1所述的方法，还包括：在所述第一目的地图像帧中设置第一像素值；及从所确定的一个或多个对象轮廓中提取颜色属性，使得在所确定的一个或多个对象轮廓中设置第二像素值。9.如权利要求8所述的方法，还包括把所创建的第一OBB在预定位置处拷贝到所述第一目的地图像帧。10.如权利要求9所述的方法，还包括：检测所述第一OBB中的第一像素是否具有第三像素值，以及所述第一目的地图像帧中的第二相邻像素是否具有所述第一像素值；及当检测到所述相邻的第二像素具有所述第一像素值时，把所述第一像素值分配给所检测到的第一像素。11.如权利要求10所述的方法，其中所述第一像素值对应于灰色，所述第二像素值对应于白色，并且所述第三像素值对应于黑色。12.如权利要求10所述的方法，还包括：当检测到所述第一OBB中的两个相邻像素没2CN105608709A权利要求书2/2页有处于所述第三像素值和所述第一像素值时，把所述第二像素值分配给所述第一OBB中具有第三像素值的一个或多个像素以用于所述第一对象轮廓的所述充填。13.如权利要求1所述的方法，还包括：当在所述视频内容中检测到第二运动对象时，创建包围所述第二运动对象的第二OBB。14.如权利要求13所述的方法，还包括把所创建的第二OBB在预定位置处拷贝到第二目的地图像帧，其中所述第二目的地帧对应于包括为所述第一运动对象生成的所述第一对象蒙版的所述第一目的地帧。15.如权利要求14所述的方法，还包括生成在所述第二OBB中的所述第二运动对象的第二对象蒙版，其中所述第二OBB中的所述第二运动对象与所述第一运动对象的所生成的第一对象蒙版相关联。16.如权利要求15所述的方法，还包括基于所生成的第一对象蒙版和所生成的第二对象蒙版提取所述第一运动对象和所述第二运动对象。17.一种用于处理视频内容的系统，该系统包括：视频处理器，能操作以：确定所述视频内容中一个或多个运动对象的一个或多个对象轮廓；基于所确定的一