流媒体的显示方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107529711A(43)申请公布日2018.01.02(21)申请号201710649407.0(22)申请日2017.08.01(71)申请人杭州安恒信息技术有限公司地址310051浙江省杭州市滨江区通和路68号浙江中财大厦15层(72)发明人程从业范渊黄进(74)专利代理机构北京超凡志成知识产权代理事务所(普通合伙)11371代理人徐彦圣(51)Int.Cl.H04N21/442(2011.01)H04N21/24(2011.01)H04N21/234(2011.01)H04N21/6587(2011.01)权利要求书2页说明书9页附图2页(54)发明名称流媒体的显示方法及装置(57)摘要本发明提供了一种流媒体的显示方法及装置，该方法包括：获取操作点的坐标数据；确定终端设备当前时刻显示的多媒体数据；根据坐标数据和多媒体数据，解析用户的操作行为；基于操作行为，控制服务器中的虚拟应用执行操作行为，以渲染与操作行为相对应的多媒体数据；将相对应的多媒体数据发送至终端设备，以使终端设备显示相对应的多媒体数据。本发明的流媒体的显示方法中，解析用户操作行为和渲染与操作行为相对应的多媒体数据的过程是在服务器中完成的，降低了对终端设备计算能力和渲染能力的要求，使得终端设备在使用中更加普遍通用，缓解了传统的流媒体显示方法对终端设备性能要求极高而导致的终端设备在使用中的局限性较大的技术问题。CN107529711ACN107529711A权利要求书1/2页1.一种流媒体的显示方法，其特征在于，应用于服务器，所述方法包括：获取操作点的坐标数据，其中，所述操作点为用户对终端设备的显示界面执行点击操作的操作点；确定所述终端设备当前时刻显示的多媒体数据，其中，所述多媒体数据是以视频流方式传输的数据；根据所述坐标数据和所述多媒体数据，解析所述用户的操作行为；基于所述操作行为，控制所述服务器中的虚拟应用执行所述操作行为，以渲染与所述操作行为相对应的多媒体数据；将所述相对应的多媒体数据发送至所述终端设备，以使所述终端设备显示所述相对应的多媒体数据。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：当检测到所述终端设备中显示的所述多媒体数据未发生变化时，则断开与所述终端设备之间的通信链路；当检测到所述终端设备中显示的所述多媒体数据发生变化时，则建立与所述终端设备之间的通信链路。3.根据权利要求2所述的方法，其特征在于，获取操作点的坐标数据包括：基于所述通信链路接收所述终端设备发送的坐标数据包，其中，所述坐标数据包为所述用户操作所述终端设备的屏幕时，所述终端设备生成的数据包；对所述坐标数据包进行解码，得到所述坐标数据。4.根据权利要求1所述的方法，其特征在于，根据所述坐标数据和所述多媒体数据，解析所述用户的操作行为包括：根据所述坐标数据确定所述操作点的目标位置；确定所述终端设备的当前显示界面中所述目标位置所对应的功能；根据所述所对应的功能确定所述操作行为。5.根据权利要求1所述的方法，其特征在于，将所述相对应的多媒体数据发送至所述终端设备，以使所述终端设备显示所述相对应的多媒体数据包括：根据预设的视频编码格式对所述相对应的多媒体数据进行视频编码，以得到编码后的相对应的多媒体数据；将所述编码后的相对应的多媒体数据发送至所述终端设备，以使所述终端设备对所述编码后的相对应的多媒体数据进行解码，并显示所述相对应的多媒体数据。6.一种流媒体的显示方法，其特征在于，应用于终端设备，包括：确定操作点的坐标数据，其中，所述操作点为用户对终端设备的显示界面执行点击操作的操作点；将所述坐标数据以数据包的形式发送至服务器，其中，所述服务器在接收到所述坐标数据之后，根据所述坐标数据和所述终端设备当前时刻显示的多媒体数据，解析所述用户的操作行为，并基于所述操作行为，控制所述服务器中的虚拟应用执行所述操作行为，以渲染与所述操作行为相对应的多媒体数据；接收所述服务器发送的所述相对应的多媒体数据，以显示所述相对应的多媒体数据。7.根据权利要求6所述的方法，其特征在于，确定操作点的坐标数据包括：2CN107529711A权利要求书2/2页感知用户的点击操作；根据所述点击操作记录所述操作点的坐标数据。8.根据权利要求6所述的方法，其特征在于，接收所述服务器发送的所述相对应的多媒体数据，以显示所述相对应的多媒体数据包括：接收所述服务器发送的编码后的相对应的多媒体数据；对所述编码后的相对应的多媒体数据进行解码，得到所述相对应的多媒体数据；显示所述相对应的多媒体数据。9.一种流媒体的显示装置，其特征在于，应用于服务器，所述装置包括：获取模块，用于获取操作点的坐标数据，其中，所述操作点为用户对终端设备的显示界面执行点