图像处理方法及装置、电子装置和计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107454336A(43)申请公布日2017.12.08(21)申请号201710813698.2(22)申请日2017.09.11(71)申请人广东欧珀移动通信有限公司地址523860广东省东莞市长安镇乌沙海滨路18号(72)发明人张学勇(74)专利代理机构北京清亦华知识产权代理事务所(普通合伙)11201代理人张润(51)Int.Cl.H04N5/232(2006.01)H04N5/265(2006.01)权利要求书3页说明书12页附图13页(54)发明名称图像处理方法及装置、电子装置和计算机可读存储介质(57)摘要本发明公开一种合并图像的图像处理方法。合并图像由预定二维背景图像与可跟随当前用户动作的预定前景图像融合而成。预定前景图像根据当前用户在场景图像中的人物区域图像的动作信息渲染得到。图像处理方法包括判断连续两帧合并图像对应的两帧人物区域图像的位置变化是否大于预定阈值，以及在位置变化大于预定阈值时以前一帧合并图像或预定二维背景图像作为当前帧合并图像。本发明还公开一种图像处理装置、电子装置和计算机可读存储介质。本发明实施方式的图像处理方法及装置、电子装置和计算机可读存储介质在与连续两帧预定前景图像关联的连续两帧人物图像区域不稳定时以稳定的合并图像进行替代，使全部过程中合并图像保持稳定，提升用户体验。CN107454336ACN107454336A权利要求书1/3页1.一种图像处理方法，用于处理合并图像，所述合并图像由预定二维背景图像与可跟随当前用户动作的预定前景图像融合而成，所述预定前景图像根据所述当前用户在场景图像中的人物区域图像的动作信息渲染得到，其特征在于，所述图像处理方法包括：判断连续两帧所述合并图像对应的两帧所述人物区域图像的位置变化是否大于预定阈值，所述连续两帧所述合并图像包括前一帧合并图像和当前帧合并图像；和在所述位置变化大于预定阈值时，以所述前一帧合并图像或所述预定二维背景图像作为所述当前帧合并图像。2.根据权利要求1所述的图像处理方法，其特征在于，所述图像处理方法还包括：以预设频率采集多帧当前用户的场景图像；以所述预设频率采集多帧所述当前用户的深度图像；处理每帧所述场景图像和每帧所述深度图像以提取所述当前用户的动作信息；根据所述动作信息渲染所述预定前景图像以使每帧所述预定前景图像跟随所述当前用户的动作；和将每帧渲染后的所述预定前景图像与所述预定二维背景图像融合得到多帧合并图像以输出视频图像。3.根据权利要求1所述的图像处理方法，其特征在于，所述图像处理方法包括步骤：在所述位置变化大于预定阈值时，判断所述位置变化的持续时间是否大于预定时间；和在所述持续时间小于所述预定时间时，在所述持续时间内，以所述前一帧的合并图像或所述预定二维背景图像作为当前帧合并图像。4.根据权利要求3所述的图像处理方法，其特征在于，所述图像处理方法还包括：在所述持续时间大于所述预定时间时，在所述预定时间内，以所述前一帧合并图像或所述预定二维背景图像作为所述当前帧合并图像，在所述预定时间后，以当前帧的预定前景图像与当前帧的预定二维背景图像融合以形成所述当前帧合并图像。5.根据权利要求2所述的图像处理方法，其特征在于，所述以所述预设频率采集多帧所述当前用户的深度图像的步骤包括：向所述当前用户投射结构光；以所述预设频率拍摄多帧经所述当前用户调制的结构光图像；和解调每帧所述结构光图像的各个像素对应的相位信息以得到多帧所述深度图像。6.根据权利要求5所述的图像处理方法，其特征在于，所述解调每帧所述结构光图像的各个像素对应的相位信息以得到多帧所述深度图像的步骤包括：解调每帧所述结构光图像中各个像素对应的相位信息；将所述相位信息转化为深度信息；和根据所述深度信息生成所述深度图像。7.根据权利要求1所述的图像处理方法，其特征在于，所述预定前景图像包括二维和/或三维的预定前景图像，所述预定前景图像包括虚拟人物、真实人物、动植物中的至少一种，所述真实人物排除了所述当前用户自身；所述预定二维背景图像能够随机选取或由所述当前用户选定。8.根据权利要求1所述的图像处理方法，其特征在于，所述动作信息包括所述当前用户2CN107454336A权利要求书2/3页的表情和肢体动作中的至少一种。9.一种图像处理装置，用于处理合并图像，所述合并图像由预定二维背景图像与可跟随当前用户动作的预定前景图像融合而成，所述预定前景图像根据所述当前用户在场景图像中的人物区域图像的动作信息渲染得到，其特征在于，所述图像处理装置包括处理器，所述处理器用于：判断连续两帧所述合并图像对应的两帧所述人物区域图像的位置变化是否大于预定阈值，所述连续两帧所述合并图像包括前一帧合并图像和当前帧合并图像；和在所述位置变