一种提高VR播放帧率的方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107274472A(43)申请公布日2017.10.20(21)申请号201710457579.8(22)申请日2017.06.16(71)申请人福州瑞芯微电子股份有限公司地址350003福建省福州市鼓楼区软件大道89号18号楼(72)发明人廖裕民江显舟(74)专利代理机构福州市景弘专利代理事务所(普通合伙)35219代理人林祥翔吕元辉(51)Int.Cl.G06T15/00(2011.01)G06T1/00(2006.01)G06T19/00(2011.01)G06F3/01(2006.01)权利要求书3页说明书9页附图3页(54)发明名称一种提高VR播放帧率的方法和装置(57)摘要本发明提供了一种提高VR播放帧率的方法和装置，所述方法通过获取当前帧以及当前帧之前的若干历史帧数据，对用户的行为进行预测，得到当前帧的下一帧对应的预测视点坐标信息，根据预测视点坐标信息绘制出预测渲染图像并存储。当下一帧真实数据传入时，将采集到的下一帧的视点坐标信息与预测视点坐标信息进行比较，若在误差范围内则直接调用预测渲染图像进行显示；若不在误差范围内，则采用根据下一帧真实传入的视点坐标信息，绘制出当前帧的下一帧的实时渲染图像。由于用户行为大部分都是可以被正确预测的，本发明将帧与帧之间的运算空闲时间利用起来，在硬件条件有限的情况下，大幅提高了VR设备显示的帧率，有效提高了用户体验。CN107274472ACN107274472A权利要求书1/3页1.一种提高VR播放帧率的装置，其特征在于，所述装置包括坐标定位单元、存储单元、矢量变化计算单元、误差比较单元、预测单元、GPU图像渲染单元、显示控制单元、显示单元；所述存储单元包括视点坐标存储单元和渲染图像存储单元，所述视点坐标存储单元包括当前帧视点坐标存储单元、历史帧视点坐标存储单元和预测视点坐标存储单元；所述渲染图像存储单元包括预测渲染图像存储单元和实时渲染图像存储单元；所述坐标定位单元用于采集当前帧视点坐标信息，并将当前帧视点坐标信息存储于当前帧视点坐标存储单元中；所述历史帧视点坐标存储单元用于存储历史帧视点坐标信息，所述历史帧视点坐标信息包括一个或多个当前帧对应的前帧视点坐标信息；所述矢量变化计算单元用于根据当前帧视点坐标信息以及历史帧视点坐标信息，计算得到矢量变化信息；所述预测单元用于根据当前帧视点坐标信息以及矢量变化信息，预测得到当前帧的下一帧对应的预测视点坐标信息，并将预测视点坐标信息存储于预测视点坐标存储单元中；所述GPU图像渲染单元用于根据当前帧的下一帧对应的预测视点坐标信息，绘制出当前帧的下一帧的预测渲染图像，并将所述预测渲染图像存储于预测渲染图像存储单元中；所述坐标定位单元用于采集当前帧的下一帧视点坐标信息，所述误差比较单元用于判断当前帧的下一帧视点坐标信息与当前帧的下一帧对应的预测视点坐标信息的误差是否位于预设误差范围内，若是则GPU图像渲染单元将预测渲染图像传输至显示控制单元；否则GPU图像渲染单元用于根据当前帧的下一帧视点坐标信息，绘制出当前帧的下一帧的实时渲染图像，并将所述实时渲染图像存储于实时渲染图像存储单元，以及将实时渲染图像传输至显示控制单元；所述显示控制单元用于将预测渲染信息或实时渲染信息传输至显示单元进行显示。2.如权利要求1所述的提高VR播放帧率的装置，其特征在于，视点坐标信息包括X坐标信息、Y坐标信息和Z坐标信息；所述矢量变化计算单元包括X坐标矢量变化计算单元、Y坐标矢量变化计算单元、Z坐标矢量变化计算单元；所述X坐标矢量变化计算单元用于根据当前帧的X坐标信息以及历史帧X坐标信息，计算得到X坐标矢量变化信息；所述Y坐标矢量变化计算单元用于根据当前帧的Y坐标信息以及历史帧Y坐标信息，计算得到Y坐标矢量变化信息；所述Z坐标矢量变化计算单元用于根据当前帧的Z坐标信息以及历史帧Z坐标信息，计算得到Z坐标矢量变化信息。3.如权利要求2所述的提高VR播放帧率的装置，其特征在于，所述预测视点坐标信息包括预测X坐标信息、预测Y坐标信息和预测Z坐标信息；所述预测单元包括X坐标预测单元、Y坐标预测单元和Z坐标预测单元；所述X坐标预测单元用于根据当前帧X坐标坐标信息以及X坐标矢量变化信息，预测得到当前帧的下一帧对应的预测X坐标信息；所述Y坐标预测单元用于根据当前帧Y坐标坐标信息以及Y坐标矢量变化信息，预测得到当前帧的下一帧对应的预测Y坐标信息；所述Z坐标预测单元用于根据当前帧Z坐标坐标信息以及Z坐标矢量变化信息，预测得2CN107274472A权利要求书2/3页到当前帧的下一帧对应的预测Z坐标信息。4.如权利要求3所述的提高VR播放帧率的装置，其特征在于，“预测单元用于根据当前帧视点坐标信息以及矢量变化