一种弹幕显示方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107484036A(43)申请公布日2017.12.15(21)申请号201710799059.5(22)申请日2017.09.07(71)申请人深圳市迅雷网络技术有限公司地址518000广东省深圳市南山区粤海街道科技中二路深圳软件园11号楼7、8层(72)发明人邓志明付钰(74)专利代理机构深圳益强知识产权代理有限公司44447代理人肖婉萍(51)Int.Cl.H04N21/488(2011.01)H04N13/00(2006.01)H04N13/02(2006.01)权利要求书2页说明书7页附图4页(54)发明名称一种弹幕显示方法和装置(57)摘要本发明实施例公开了一种弹幕显示方法和装置，该方法包括：获取3D视频画面的深度信息；使用所述深度信息建立所述3D视频画面的3D模型；在所述3D模型中识别前景图像；在所述3D模型中的弹幕位置中除所述前景图像之外的位置渲染弹幕信息。本发明实施例可以提高弹幕效果。CN107484036ACN107484036A权利要求书1/2页1.一种弹幕显示方法，其特征在于，包括：获取3D视频画面的深度信息；使用所述深度信息建立所述3D视频画面的3D模型；在所述3D模型中识别前景图像；在所述3D模型中的弹幕位置中除所述前景图像之外的位置渲染弹幕信息。2.如权利要求1所述的方法，其特征在于，所述获取3D视频画面的深度信息，包括：将3D视频画面分成N×N个图像块，搜索每个图像块在另一3D视频画面中的偏移距离，根据每个图像块的偏移距离，计算该图像块的深度信息，其中，所述N为预设整数，所述3D视频画面为3D视频的第一视角画面，所述另一3D视频画面为3D视频的第二视角画面，或者所述3D视频画面为3D视频的第二视角画面，所述另一3D视频画面为3D视频的第一视角画面。3.如权利要求2所述的方法，其特征在于，使用所述深度信息建立所述3D视频画面的3D模型，包括：对每个图像块的中心点的深度值进行去噪处理，以生成包括景深信息的3D模型。4.如权利要求1至3中任一项所述的方法，其特征在于，所述在所述3D模型中识别前景图像，包括：通过预先训练的图像语义分割网络，分离所述3D模型中深度小于所述弹幕位置深度的前景图像。5.如权利要求1至3中任一项所述的方法，其特征在于，所述在所述3D模型中的弹幕位置中除所述前景图像之外的位置渲染弹幕信息，包括：将所述3D视频画面渲染为背景画面，并根据用户设置的弹幕锚点和所述3D模型的坐标，确定所述3D模型的弹幕位置，并采用透视矩阵，按照深度缩放大小和贴合附着角度在所述弹幕位置渲染3D弹幕文字、3D弹幕贴图或者3D弹幕立体模型，其中，渲染所述3D弹幕文字、3D弹幕贴图或者3D弹幕立体模型时，排除所述前景图像。6.如权利要求1至3中任一项所述的方法，其特征在于，所述获取视频画面的深度信息之前，所述方法还包括：通过第一视角模型将2D视频画面转换成3D视频的第一视角画面；通过第二视角模型将所述2D视频帧画面转换成3D视频的第二视角画面。7.一种弹幕显示装置，其特征在于，包括：获取模块，用于获取3D视频画面的深度信息；建立模块，用于使用所述深度信息建立所述3D视频画面的3D模型；识别模块，用于在所述3D模型中识别前景图像；渲染模块，用于在所述3D模型中的弹幕位置中除所述前景图像之外的位置渲染弹幕信息。8.如权利要求7所述的装置，其特征在于，所述获取模块用于将3D视频画面分成N×N个图像块，搜索每个图像块在另一3D视频画面中的偏移距离，根据每个图像块的偏移距离，计算该图像块的深度信息，其中，所述N为预设整数，所述3D视频画面为3D视频的第一视角画面，所述另一3D视频画面为3D视频的第二视角画面，或者所述3D视频画面为3D视频的第二视角画面，所述另一3D视频画面为3D视频的第一视角画面。9.如权利要求8所述的装置，其特征在于，所述建立模块用于对每个图像块的中心点的2CN107484036A权利要求书2/2页深度值进行去噪处理，以生成包括景深信息的3D模型。10.如权利要求7至9中任一项所述的装置，其特征在于，所述识别模块用于通过预先训练的图像语义分割网络，分离所述3D模型中深度小于所述弹幕位置深度的前景图像。11.如权利要求7至9中任一项所述的装置，其特征在于，所述渲染模块用于将所述3D视频画面渲染为背景画面，并根据用户设置的弹幕锚点和所述3D模型的坐标，确定所述3D模型的弹幕位置，并采用透视矩阵，按照深度缩放大小和贴合附着角度在所述弹幕位置渲染3D弹幕文字、3D弹幕贴图或者3D弹幕立体模型，其中，渲染所述3D弹幕文字、3D弹幕贴图或者3D弹幕立体模型时，排除所述前景图像。12.如权利要求7至9中任一项所述的装置，其特征在于，所述