视频编码系统的非拼接图片的视频编码、解码方法及装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN107040783A(43)申请公布日2017.08.11(21)申请号201610937491.1H04N19/159(2014.01)(22)申请日2016.10.24H04N19/176(2014.01)H04N19/85(2014.01)(30)优先权数据62/244,8152015.10.22US15/284,3902016.10.03US(71)申请人联发科技股份有限公司地址中国台湾新竹市新竹科学工业园区笃行一路一号(72)发明人张翠姗黄昱豪张智凯刘子明朱启诚杨凯闵(74)专利代理机构北京万慧达知识产权代理有限公司11111代理人白华胜王蕊(51)Int.Cl.H04N19/186(2014.01)权利要求书4页说明书13页附图27页(54)发明名称视频编码系统的非拼接图片的视频编码、解码方法及装置(57)摘要本发明提供一种视频编码系统的非拼接图片的视频编码、解码方法以及相关装置。编码方法中，每个非拼接的图片包含由全景视频俘获装置的两个相机俘获的至少两个图像，以及其中有两个相邻相机俘获的两个相邻图像包含至少一个重叠图像区域，方法包含接收包含当前非拼接的图片中的当前块的全景视频来源数据；接收来自全景视频来源数据与全景视频俘获装置关联的校正数据，其中校正数据包含照相机参数、特征检测结果或两者；以及当校正数据存在，通过利用编码方法的至少一个操作的校正数据应用编码方法到当前块。通过以上方案，可以实现360度视频的更好压缩。CN107040783ACN107040783A权利要求书1/4页1.一种视频编码系统的非拼接图片的视频编码方法，其特征在于，每个非拼接的图片包含由全景视频俘获装置的两个相机俘获的至少两个图像，以及其中有两个相邻相机俘获的两个相邻图像包含至少一个重叠图像区域，所述方法包含：接收包含当前非拼接的图片中的当前块的全景视频来源数据；接收来自所述全景视频来源数据与所述全景视频俘获装置关联的校正数据，其中所述校正数据包含照相机参数、特征检测结果或两者；以及当所述校正数据存在，通过利用编码处理的至少一个操作的所述校正数据应用所述编码方法到所述当前块。2.如权利要求1所述的视频编码方法，其特征在于，所述编码方法包含使用重映射帧内块复制编码处理编码所述当前块，包含：根据所述校正数据，将对应于所述当前非拼接图片的以前编码的区域的第一搜索区域修改为第二搜索区域，其中所述第二搜索区域小于所述第一搜索区域；在所述第二搜索区域中搜索候选块以为所述当前块选择最佳匹配的块；根据所述校正数据，将块向量映射为映射的块向量或将块向量预测子映射为映射的块向量预测子，其中所述块向量表示从所述当前块到所述最佳匹配的块的位移，以及所述块向量预测子表示当前块向量的预测子；使用所述最佳匹配的块作为预测子将所述当前块编码为编码的当前块；以及生成包含所述编码的当前块和所述当前块的所述映射的块向量的压缩的数据。3.如权利要求2所述的视频编码方法，其特征在于，所述校正数据包含在照相机校正阶段生成的一个或多个照相机参数、一个或多个特征检测结果或两者，且其中所述一个或多个照相机参数选自包含主要点、照相机位置、视场、本征参数和外部参数的第一组，以及所述一个或多个特征检测结果选自包含特征位置和匹配关系的第二组。4.如权利要求2所述的视频编码方法，其特征在于，所述校正数据从所述全景视频来源数据解析。5.如权利要求2所述的视频编码方法，其特征在于，所述重映射帧内块复制编码处理还包含颜色缩放处理以处理候选块用于选择所述最佳匹配的块，且其中所述颜色缩放处理包含：根据缩放公式将每个颜色组分的像素值缩放以生成缩放的像素值，其中所述缩放公式由一个或多个缩放参数说明。6.如权利要求1所述的视频编码方法，其特征在于，所述编码处理包含：接收包含所述当前非拼接的图片中的当前块的全景视频来源数据；确定与所述全景视频俘获装置关联的校正数据；当所述校正数据存在时，使用基于投影的帧间预测模式编码所述当前块，其中基于投影的帧间预测编码处理包含：根据投影模型使用所述校正数据在搜索区域将候选块投影为投影的候选块；在所述搜索区域搜索所述投影的候选块以为所述当前块选择最佳匹配的块；使用所述最佳匹配的块为预测子将所述当前块编码为编码的当前块；以及生成包含所述编码的当前块的压缩的数据。7.如权利要求6所述的视频编码方法，其特征在于，所述校正数据包含在照相机校正阶2CN107040783A权利要求书2/4页段生成的一个或多个照相机参数、一个或多个特征检测结果或两者，且其中所述一个或多个照相机参数选自包含主要点、照相机位置、视场、本征参数和外部参数的第一组，以及所述一个或多个特征检测结果选自包含特征位置和匹配关系的第二组。8.如权利要求6