一种涂鸦增强现实的方法及系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN105653036A(43)申请公布日2016.06.08(21)申请号201511030925.1(22)申请日2015.12.31(71)申请人深圳市路通网络技术有限公司地址518000广东省深圳市南山区科丰路2号特发信息港大厦A栋六楼北601-611单元（仅限办公）(72)发明人丛力夫钟虎林(74)专利代理机构深圳市深佳知识产权代理事务所(普通合伙)44285代理人王仲凯(51)Int.Cl.G06F3/01(2006.01)权利要求书2页说明书7页附图1页(54)发明名称一种涂鸦增强现实的方法及系统(57)摘要本发明公开了一种涂鸦增强现实的方法，包括：将轮廓标记图的像素内容信息关联显示到虚拟内容上，得到对应的模型；检测并提取所述轮廓标记图进行涂鸦后的涂鸦标记图；将所述涂鸦标记图及所述模型通过增强现实插件，得到涂鸦标记图对应的虚拟图像；该方法通过涂鸦交互的方式，可以使得用户通过改变现实中标记图图案的方式影响在增强现实中显示的虚拟内容，提高用户的互动体验；本发明还公开了一种涂鸦增强现实的系统。CN105653036ACN105653036A权利要求书1/2页1.一种涂鸦增强现实的方法，其特征在于，包括：将轮廓标记图的像素内容信息关联显示到虚拟内容上，得到对应的模型；检测并提取所述轮廓标记图进行涂鸦后的涂鸦标记图；将所述涂鸦标记图及所述模型通过增强现实插件，得到涂鸦标记图对应的虚拟图像。2.如权利要求1所述的方法，其特征在于，所述检测并提取所述轮廓标记图进行涂鸦后的涂鸦标记图，包括：检测并截取包含涂鸦后标记图的四边形图像；利用图像矫正算法对所述四边形图像进行矫正，得到标准的矩形图像作为涂鸦标记图。3.如权利要求2所述的方法，其特征在于，所述检测并截取包含涂鸦后标记图的四边形图像，包括：获取增强现实摄像机拍摄的图像；判断涂鸦后标记图是否完全显示在所述图像内；若是，则截取包含涂鸦后标记图的最小矩形图像。4.如权利要求3所述的方法，其特征在于，所述判断涂鸦后标记图是否完全显示在所述图像内，包括：将涂鸦后标记图的四角分别放置空物体，并将四个空物体的世界坐标转换成增强现实摄像机的屏幕坐标；当所述图像中四个空物体对应的屏幕坐标都在屏幕分辨率之内，则涂鸦后标记图完全显示在所述图像内。5.如权利要求4所述的方法，其特征在于，所述利用图像矫正算法对所述四边形图像进行矫正，得到标准的矩形图像作为涂鸦标记图，包括：将四个空物体对应的屏幕坐标，及所述最小矩形图像输入Opencv中；利用getPerspectiveTransform计算所述最小矩形图像的透视变换矩阵；根据所述透视变换矩阵，利用warpPerspective将所述最小矩形图像透视变换到新视平面，得到标准的矩形图像作为涂鸦标记图。6.一种涂鸦增强现实的系统，其特征在于，包括：模型获取模块，用于将轮廓标记图的像素内容信息关联显示到虚拟内容上，得到对应的模型；涂鸦标记图获取模块，用于检测并提取所述轮廓标记图进行涂鸦后的涂鸦标记图；增强现实模块，用于将所述涂鸦标记图及所述模型通过增强现实插件，得到涂鸦标记图对应的虚拟图像。7.如权利要求6所述的系统，其特征在于，所述涂鸦标记图获取模块包括：检测子模块，用于检测并截取包含涂鸦后标记图的四边形图像；矫正子模块，用于利用图像矫正算法对所述四边形图像进行矫正，得到标准的矩形图像作为涂鸦标记图。8.如权利要求7所述的系统，其特征在于，所述检测子模块包括：获取单元，用于获取增强现实摄像机拍摄的图像；判断单元，用于判断涂鸦后标记图是否完全显示在所述图像内；2CN105653036A权利要求书2/2页截取单元，用于若是，则截取包含涂鸦后标记图的最小矩形图像。9.如权利要求8所述的系统，其特征在于，所述判断单元包括：转换子单元，用于转换将涂鸦后标记图的四角分别放置空物体，并将四个空物体的世界坐标转换成增强现实摄像机的屏幕坐标；判断子单元，用于当所述图像中四个空物体对应的屏幕坐标都在屏幕分辨率之内，则涂鸦后标记图完全显示在所述图像内。10.如权利要求9所述的系统，其特征在于，所述矫正子模块包括：输入单元，用于将四个空物体对应的屏幕坐标，及所述最小矩形图像输入Opencv中；变换单元，用于利用getPerspectiveTransform计算所述最小矩形图像的透视变换矩阵；矫正单元，用于根据所述透视变换矩阵，利用warpPerspective将所述最小矩形图像透视变换到新视平面，得到标准的矩形图像作为涂鸦标记图。3CN105653036A说明书1/7页一种涂鸦增强现实的方法及系统技术领域[0001]本发明涉及增强现实领域，特别涉及一种涂鸦增强现实的方法及系统。背景技术[0002]目前的增强