一种增强现实互动系统及图像处理方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107092347A(43)申请公布日2017.08.25(21)申请号201710140853.9(22)申请日2017.03.10(71)申请人深圳市博乐信息技术有限公司地址518000广东省深圳市南山区学苑大道南山智园C2栋19楼(72)发明人胡喜林李湘黔(74)专利代理机构北京德高行远知识产权代理有限公司11549代理人王健鹏黄启法(51)Int.Cl.G06F3/01(2006.01)G06T11/60(2006.01)权利要求书2页说明书5页附图3页(54)发明名称一种增强现实互动系统及图像处理方法(57)摘要本发明提供了一种增强现实互动系统及图像处理方法，其中系统包括：包括：RGB摄像头，所述RGB摄像头用以获取第一RGB图像；红外传感器，所述红外传感器包括红外发射器和红外接收器，用以获取景深图像；体感控制器，所述体感控制器用以辨别所述景深图像中的人体部位，辨识出人体多个节点并生成人体框架，所述人体框架具有与所述人体多个节点对应的多个特征点；图像处理系统，所述图像处理系统通过一个裁剪范围裁剪所述景深图像，将裁剪后的景深图像叠加至所述第一RGB图像，生成第二RGB图像，本发明将获取的图像进行分割，可以实现对比图片特征码的速度提升，以及实际运算量减少了3倍以上，提高了识别率，从而提高了识别范围。CN107092347ACN107092347A权利要求书1/2页1.一种增强现实互动系统，其特征在于，包括：RGB摄像头，所述RGB摄像头用以获取第一RGB图像；红外传感器，所述红外传感器包括红外发射器和红外接收器，用以获取景深图像；体感控制器，所述体感控制器用以辨别所述景深图像中的人体部位，辨识出人体多个节点并生成人体框架，所述人体框架具有与所述人体多个节点对应的多个特征点；图像处理系统，所述图像处理系统通过一个裁剪范围裁剪所述景深图像，将裁剪后的景深图像叠加至所述第一RGB图像，生成第二RGB图像，所述裁剪范围的最大高度为所述人体框架的头顶到所述人体框架的脊柱中心之间的高度，所述裁剪范围的最大宽度为左手和右手两边最大节点之间的宽度。2.如权利要求1所述的一种增强现实互动系统，其特征在于，所述图像处理系统连接有图像特征库，所述图像特征库包含多个图像，所述多个图像分别具有各自的图像特征点，所述图像处理系统将所述人体框架的特征点与图像特征库的特征点进行对比，并将特征点比对相符的图像叠加至所述第二RGB图像上形成合成图案。3.如权利要求2所述的一种增强现实互动系统，其特征在于，所述图像处理系统还连接有资源库，所述资源库包含有物品信息、动画、视频、模型、图片和语音数据。4.如权利要求3所述的一种增强现实互动系统，其特征在于，所述图像特征库的图像与所述资源库的所述物品信息、动画、视频、模型、图片和语音数据相关联。5.如权利要求4所述的一种增强现实互动系统，其特征在于，所述图像处理系统将所述物品信息、动画、视频、模型、图片和语音数据叠加至所述第二RGB图像或第一RGB图像。6.一种增强现实互动的图像处理方法，其特征在于，包括以下步骤：(1)提供至少一个RGB摄像头、红外传感器、体感控制器、以及至少一个图像处理系统，所述图像处理系统连接有图像特征库，所述图像特征库具有特征点的图像；(2)通过所述RGB摄像头，获取第一RGB图像；(3)通过所述红外传感器获取景深图像；(4)通过所述体感控制器辨别所述景深图像中的人体部位，辨识出人体多个节点并生成人体框架，所述人体框架具有与所述人体多个节点对应的多个特征点；(5)通过一个裁剪范围裁剪所述景深图像，将裁剪后的景深图像叠加至所述第一RGB图像，生成第二RGB图像，所述裁剪范围的最大高度为所述人体框架的头顶到所述人体框架的脊柱中心之间的高度，所述裁剪范围的最大宽度为所述人体框架的左手和右手两边最大节点之间的宽度；(6)提取所述第二RGB图像的其中一帧的特征点与所述图像特征库的图像的特征点进行对比；(7)将与特征点比对相符的图像叠加到第二RGB图像形成合成图案。7.如权利要求6所述的一种增强现实互动的图像处理方法，其特征在于，所述步骤(7)包括：所述图像处理系统还连接有资源库，所述资源库包含物品信息、动画、视频、模型、图片和语音数据。8.如权利要求7所述的一种增强现实互动的图像处理方法，其特征在于，所述步骤(7)包括：2CN107092347A权利要求书2/2页所述图像特征库的图像与所述资源库的所述物品信息、动画、视频、模型、图片和语音数据相关联。9.如权利要求8所述的一种增强现实互动的图像处理方法，其特征在于，所述步骤(7)包括：所述图像处理系统将所述物品信息、动画、视频、模型、图片和语音数据叠加至所述第二RGB图像或第