直播数据处理方法、装置、电子设备及可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110784733A(43)申请公布日2020.02.11(21)申请号201911080059.5(22)申请日2019.11.07(71)申请人广州虎牙科技有限公司地址511400广东省广州市番禺区钟村街（汉溪商业中心）泽溪街13号1301(72)发明人邱俊琪(74)专利代理机构北京超凡宏宇专利代理事务所(特殊普通合伙)11463代理人张欣欣(51)Int.Cl.H04N21/2187(2011.01)H04N21/478(2011.01)G06T19/00(2011.01)G06T15/00(2011.01)G06F3/01(2006.01)权利要求书2页说明书9页附图3页(54)发明名称直播数据处理方法、装置、电子设备及可读存储介质(57)摘要本申请实施例提供一种直播数据处理方法、装置、电子设备及可读存储介质，通过在开启的增强现实AR识别平面中监听每帧AR流数据，在监听到AR流数据中的图像信息与预设图像数据库中的预设图像匹配时，在AR识别平面中确定对应的可跟踪AR增强对象，而后加载用于显示直播流的目标模型对象，并将目标模型对象渲染到可跟踪AR增强对象中。如此，可以实现可跟踪AR增强对象在直播流中的应用，使得观众与主播之间的互动更加接近真实场景体验，进而有效提高用户的留存率。CN110784733ACN110784733A权利要求书1/2页1.一种直播数据处理方法，其特征在于，应用于直播观看终端，所述方法包括：在开启的增强现实AR识别平面中监听每帧AR流数据；在监听到所述AR流数据中的图像信息与预设图像数据库中的预设图像匹配时，在所述AR识别平面中确定对应的可跟踪AR增强对象；加载用于显示直播流的目标模型对象，并将所述目标模型对象渲染到所述可跟踪AR增强对象中。2.根据权利要求1所述的直播数据处理方法，其特征在于，所述方法还包括：将所述预设图像数据库配置到用于开启所述AR识别平面的AR软件平台程序中，以便于所述AR软件平台程序在开启所述AR识别平面时将所述AR流数据中的图像信息与预设图像数据库中的预设图像匹配。3.根据权利要求1所述的直播数据处理方法，其特征在于，所述在监听到所述AR流数据中的图像信息与预设图像数据库中的预设图像匹配时，在所述AR识别平面中确定对应的可跟踪AR增强对象的步骤之后，所述方法还包括：从所述AR流数据获取用于捕获图像数据的图像捕获组件；检测所述图像捕获组件的跟踪状态是否为在线跟踪状态；当检测所述图像捕获组件的跟踪状态为在线跟踪状态时，监听所述AR流数据中的图像信息与预设图像数据库中的预设图像是否匹配。4.根据权利要求1所述的直播数据处理方法，其特征在于，所述在所述AR识别平面中确定对应的可跟踪AR增强对象的步骤之后，所述方法还包括：检测所述可跟踪AR增强对象的跟踪状态；当检测到所述可跟踪AR增强对象的跟踪状态为在线跟踪状态时，再执行所述加载用于显示直播流的目标模型对象的步骤。5.根据权利要求1-4中任意一项所述的直播数据处理方法，其特征在于，所述加载用于显示直播流的目标模型对象，并将所述目标模型对象渲染到所述可跟踪AR增强对象中的步骤，包括：在所述可跟踪AR增强对象的预设点上创建描点和调整节点，所述描点用于将所述目标模型对象固定在所述预设点上，所述调整节点为设置在所述描点所在位置的容器，所述调整节点用于对所述可跟踪AR增强对象进行调整；加载用于显示直播流的目标模型对象，将接收到的直播流渲染到所述目标模型对象上，以使所述直播流在所述目标模型对象上进行显示；将所述目标模型对象渲染到所述可跟踪AR增强对象中。6.根据权利要求5所述的直播数据处理方法，其特征在于，所述将接收到的直播流渲染到所述目标模型对象上，以使所述直播流在所述目标模型对象上进行显示的步骤，包括：调用软件开发工具包SDK从直播服务器中拉取直播流，并创建所述直播流的外部纹理；将所述直播流的纹理传递给所述SDK的解码器进行渲染；在接收到所述SDK的解码器的渲染开始状态后，调用外部纹理设置方法将所述直播流的外部纹理渲染到所述目标模型对象上，以使所述直播流在所述目标模型对象上进行显示。7.根据权利要求5所述的直播数据处理方法，其特征在于，所述将所述目标模型对象渲2CN110784733A权利要求书2/2页染到所述可跟踪AR增强对象中的步骤，包括：通过解码器获取所述目标模型对象中渲染的直播流的第一尺寸信息，并获取所述可跟踪AR增强对象的第二尺寸信息；根据所述第一尺寸信息和所述第二尺寸信息的比例关系对所述调整节点进行调整，以调整所述目标模型对象在所述可跟踪AR增强对象中的比例。8.一种直播数据处理装置，其特征在于，应用于直播观看终端，所述装置包括：监听模块，用于在开启的增