基于云渲染的手机端VR场景交互式显示方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110488981A(43)申请公布日2019.11.22(21)申请号201910788578.0(22)申请日2019.08.28(71)申请人长春理工大学地址130022吉林省长春市卫星路7089号(72)发明人陈纯毅杨华民蒋振刚胡小娟(51)Int.Cl.G06F3/01(2006.01)H04L29/08(2006.01)H04N13/332(2018.01)H04N13/385(2018.01)H04N13/398(2018.01)权利要求书3页说明书7页附图2页(54)发明名称基于云渲染的手机端VR场景交互式显示方法(57)摘要本发明公开一种基于云渲染的手机端VR场景交互式显示方法，结合VR手机眼镜实现在手机上观看VR场景。本方法使用手机的传感器测量观看者头部转动角度，并把测量结果传给渲染云端以便调整左眼虚拟相机和右眼虚拟相机的向前观察方向与向上方向，从而在手机上交互式地观看VR场景。本方法利用双目抑制理论原理，在绘制左右眼画面时使用不同的图像分辨率，可以减少立体画面绘制时间和图像网络传输数据量。使用本方法只需手机浏览器，无需安装其他插件或者单独手机APP就可以观看VR场景。CN110488981ACN110488981A权利要求书1/3页1.一种基于云渲染的手机端VR场景交互式显示方法，其特征在于：使用HTML5编写网页页面VRPAGE，在页面VRPAGE中仅放置图像标记L和图像标记R，图像标记L和图像标记R分别用于显示VR场景的左眼画面图像IML和右眼画面图像IMR；图像标记L和图像标记R并排放置；把页面VRPAGE发布到网页服务器WWWSEVER上；在手机MOBPHONE上通过浏览器访问网页服务器WWWSEVER上的页面VRPAGE，使用WebSocket技术建立用于显示页面VRPAGE的浏览器客户端与渲染云端之间的TCP传输连接A001；在渲染云端加载VR场景模型，使用三维场景立体画面绘制技术生成VR场景的左眼画面图像IML和右眼画面图像IMR，渲染云端通过TCP传输连接A001把左眼画面图像IML和右眼画面图像IMR传送给手机MOBPHONE的浏览器客户端，把左眼画面图像IML和右眼画面图像IMR分别显示在手机MOBPHONE的浏览器中的页面VRPAGE的图像标记L和图像标记R中；把手机MOBPHONE和VR手机眼镜组合在一起形成头戴式虚拟现实显示设备A002；调节VR手机眼镜和手机MOBPHONE使虚拟现实显示设备A002正常工作，保证观看者戴上虚拟现实显示设备A002后能正常看到VR场景的立体画面，左眼画面图像IML是观看者通过VR手机眼镜的左眼通道能看到的全部画面，右眼画面图像IML是观看者通过VR手机眼镜的右眼通道能看到的全部画面；在手机MOBPHONE的浏览器中，使用HTML5的DeviceOrientation接口获取手机屏幕旋转方向测量数据ROTATION，把测量数据ROTATION通过TCP传输连接A001传送给渲染云端；渲染云端根据接收到的测量数据ROTATION来改变绘制左眼画面图像IML和右眼画面图像IMR时使用的虚拟相机的向前观察方向和向上方向，重新生成左眼画面图像IML和右眼画面图像IMR，并通过TCP传输连接A001把新的左眼画面图像IML和右眼画面图像IMR传送给在手机MOBPHONE的浏览器中显示的页面VRPAGE，页面VRPAGE收到新的左眼画面图像IML和右眼画面图像IMR后立即分别显示到图像标记L和图像标记R中；本方法的具体实现步骤如下：1)本方法的第一部分编写页面VRPAGE并发布到网页服务器WWWSEVER上，具体实现步骤如下：步骤Step101：使用HTML5编写网页页面VRPAGE，在页面VRPAGE中仅放置图像标记L和图像标记R，图像标记L和图像标记R分别用于显示VR场景的左眼画面图像IML和右眼画面图像IMR；图像标记L和图像标记R并排放置；步骤Step102：把页面VRPAGE发布到网页服务器WWWSEVER上，使得通过网络可以用手机浏览器访问页面VRPAGE；2)本方法的第二部分在渲染云端绘制VR场景的立体画面并把立体画面传送到手机MOBPHONE上显示，具体实现步骤如下：步骤Step201：在手机MOBPHONE上通过浏览器访问网页服务器WWWSEVER上的页面VRPAGE，把页面VRPAGE显示在手机MOBPHONE的屏幕上；步骤Step202：使用WebSocket技术建立访问页面VRPAGE的浏览器客户端与渲染云端之间的TCP传输连接A001；步骤Step203：在渲染云端加载VR场景模型，计算从物理世界坐标系到VR场景虚拟世界坐标系的变换矩阵Mp2v；根据变换矩阵