实时皮肤平滑图像增强滤波器.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN106663314A(43)申请公布日2017.05.10(21)申请号201580044336.0(74)专利代理机构上海专利商标事务所有限公司31(22)申请日2015.08.11100代理人高见(30)优先权数据14/491,6982014.09.19US(51)Int.Cl.G06T5/00(2006.01)(85)PCT国际申请进入国家阶段日G06T5/20(2006.01)2017.02.17G06T7/90(2017.01)(86)PCT国际申请的申请数据PCT/US2015/0447342015.08.11(87)PCT国际申请的公布数据WO2016/043872EN2016.03.24(71)申请人英特尔公司地址美国加利福尼亚州(72)发明人李相熙S·李朴珉济T-H·金权利要求书4页说明书15页附图7页(54)发明名称实时皮肤平滑图像增强滤波器(57)摘要用于即时捕获的图像数据增强的系统、装置、方法和计算机可读介质。利用滤波器与由相机模块生成图像或视频流并行地对所述流进行增强。在一个示例性实施例中，以30fps或更大的速率对HD图像帧进行滤波以便利用边缘保留平滑滤波器来提升人类肤色。在实施例中，所述平滑滤波器被应用于具有降低分辨率的图像表示，从而降低滤波器的计算开销。然后，对所述滤波图像进行上采样并且将其与识别边缘的图进行混合以便保持边缘质量与以全分辨率应用的平滑滤波器相当。一种包括相机模块并与示例性架构一致的设备平台可以甚至以低图像处理带宽提供增强型视频相机功能。CN106663314ACN106663314A权利要求书1/4页1.一种增强图像的计算机实现的方法，所述方法包括：基于滤波标准对以输入图像分辨率表示图像帧的图像数据的个体像素值进行评分；将所述图像数据下采样至所述图像帧的具有低于所述输入图像分辨率的降低分辨率的表示；对所述下采样图像数据进行滤波；将所述经滤波的下采样图像数据上采样回至所述输入图像分辨率；以及根据所述像素评分将所述输入图像数据与所述上采样的滤波图像数据进行混合。2.如权利要求1所述的方法，其中，将所述输入图像数据与所述滤波图像数据进行混合进一步包括：将所述输入图像数据中的个体像素的亮度值或色度值中的至少一项与所述上采样的滤波图像数据中的相应像素的所述亮度值或色度值进行混合。3.如权利要求1所述的方法，其中，对所述图像帧内的像素进行评分进一步包括确定所述输入图像的个体像素的肤色检测分值；并且根据所述像素评分将所述输入图像数据与所述滤波图像数据进行混合进一步包括根据每个像素肤色检测分值对所述输入图像数据相对于所述个体像素的所述滤波图像数据的权重进行调制。4.如权利要求3所述的方法，其中，根据所述像素评分将所述输入图像数据与所述滤波图像数据进行混合进一步包括基于所述像素的所述肤色检测分值在所述输入图像数据中的像素的值与所述滤波图像数据中的所述像素的值之间进行内插。5.如权利要求4所述的方法，其中，基于所述像素的所述肤色检测分值在所述输入图像数据中的像素的所述值与所述滤波图像数据中的所述像素的值之间进行线性内插进一步包括：确定所述输入图像数据中的所述像素的所述值与所述滤波图像数据中的所述像素的所述值的加权和，所述两个像素值通过所述肤色检测分值来互补加权。6.如权利要求5所述的方法，其中，所述肤色检测分值是在0与1之间的与所述个体像素包括肤色的概率成比例的值。7.如权利要求1所述的方法，其中，对所述下采样图像数据进行滤波进一步包括：利用双边滤波器基于与正被平滑的所述像素相邻的所述下采样图像像素的值对所述下采样图像的像素值进行平滑。8.如权利要求7所述的方法，其中，对所述下采样图像数据进行滤波进一步包括：对所述下采样图像中的像素值进行递归双边滤波。9.如权利要求1所述的方法，其中，所述输入图像数据包括YUV颜色空间中的像素值；对所述图像数据进行下采样进一步包括从所述输入图像分辨率进行至少4x分辨率降低；并且对所述图像数据进行上采样进一步包括从所述下采样图像分辨率进行至少4x分辨率增加。10.如权利要求1所述的方法，进一步包括：从缓冲器中检索所述输入图像数据，所述缓冲器存储有所述图像的解码表示或由相机2CN106663314A权利要求书2/4页模块以所述输入图像分辨率曝光的捕获图像中的至少一者；在对所述像素进行评分之前，将所述输入图像数据从RGB颜色空间转换到YUV颜色空间；以及将所述混合图像数据存储到存储器中。11.如权利要求10所述的方法，进一步包括：将所述混合图像数据从所述存储器输出至显示设备或编码器中的至少一者。12.如权利要求10所述的方法，进一步包括：以视频帧速率将连续曝光的图像数据帧流从相机硬件模块(CM)