一种特征融合方法、图像去雾方法及装置.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115880192A(43)申请公布日2023.03.31(21)申请号202111138532.8(22)申请日2021.09.27(71)申请人北京字跳网络技术有限公司地址100190北京市海淀区紫金数码园4号楼2层0207(72)发明人董航(74)专利代理机构北京开阳星知识产权代理有限公司11710专利代理师唐博(51)Int.Cl.G06T5/50(2006.01)G06T5/00(2006.01)权利要求书3页说明书13页附图4页(54)发明名称一种特征融合方法、图像去雾方法及装置(57)摘要本发明实施例提供了一种特征融合方法、图像去雾方法及装置，涉及图像处理技术领域。该方法包括：获取目标特征和至少一个待融合特征，所述目标特征和所述至少一个待融合特征分别为同一图像的不同空间尺度的特征；将所述目标特征划分为第一特征和第二特征；基于残差稠密块RDB对所述第一特征进行处理，获取第三特征；对所述第二特征和所述至少一个待融合特征进行融合，获取第四特征；合并所述第三特征和所述第四特征，生成所述目标特征和至少一个待融合特征的融合结果。本发明实施例用于解决现有技术中的多尺度特征融合方式会限制网络架构中的特征的多样性的问题。CN115880192ACN115880192A权利要求书1/3页1.一种特征融合方法，其特征在于，包括：获取目标特征和至少一个待融合特征，所述目标特征和所述至少一个待融合特征分别为同一图像的不同空间尺度的特征；将所述目标特征划分为第一特征和第二特征；基于残差稠密块RDB对所述第一特征进行处理，获取第三特征；对所述第二特征和所述至少一个待融合特征进行融合，获取第四特征；合并所述第三特征和所述第四特征，生成所述目标特征和至少一个待融合特征的融合结果。2.根据权利要求1所述的方法，其特征在于，所述对所述第二特征和所述至少一个待融合特征进行融合，获取第四特征，包括：按照各待融合特征的空间尺度与所述第二特征的空间尺度的差值对所述至少一个待融合特征进行降序排序，获取排序结果；对所述排序结果中的第一个待融合特征和所述第二特征进行融合，生成所述第一个待融合特征的融合结果；逐一对所述排序结果中的其它待融合特征和上一个待融合特征的融合结果进行融合，生成所述排序结果中的最后一个待融合特征的融合结果；将所述排序结果中的最后一个待融合特征的融合结果作为所述第四特征。3.根据权利要求2所述的方法，其特征在于，所述对所述排序结果中的第一个待融合特征和所述第二特征进行融合，生成所述第一个待融合特征的融合结果，包括：将所述第二特征采样为与所述第一个待融合特征空间尺度相同的特征，生成所述第一个待融合特征对应的第一采样特征；计算所述第一个待融合特征对应的第一采样特征和所述第一个待融合特征的差值，获取所述第一个待融合特征对应的特征差；将所述第一个待融合特征对应的特征差采样为与所述第二特征空间尺度相同的特征，获取所述第一个待融合特征对应的第二采样特征；对所述第二特征和所述第一个待融合特征对应的第二采样特征进行相加融合，生成所述第一个待融合特征的融合结果。4.根据权利要求2所述的方法，其特征在于，所述逐一对所述排序结果中的其它待融合特征和上一个待融合特征的融合结果进行融合，包括：将所述排序结果中的第m‑1个待融合特征的融合结果采样为与所述排序结果中的第m个待融合特征空间尺度相同的特征，生成所述第m个待融合对应的第一采样特征，m为大于1的正整数；计算所述第m个待融合特征与所述第m个待融合对应的第一采样特征的差值，获取所述第m个待融合特征对应的特征差；将所述第m个待融合特征对应的特征差采样为与所述第m‑1个待融合特征的融合结果空间尺度相同的特征，获取所述第m个待融合特征对应的第二采样特征；对所述第m‑1个待融合特征的融合结果和所述第m个待融合特征对应的第二采样特征进行相加融合，生成所述第m个待融合特征的融合结果。5.根据权利要求1‑4任一项所述的方法，其特征在于，所述将所述目标特征划分为第一2CN115880192A权利要求书2/3页特征和第二特征，包括：基于所述目标特征的特征通道将所述目标特征划分为第一特征和第二特征。6.一种图像去雾方法，其特征在于，包括：通过编码模块对目标图像进行处理，获取编码特征；其中，所述编码模块包括L个级联的且空间尺度均不相同的编码器，第m个编码器用于通过权利要求1‑5任一项所述的特征融合方法融合所述编码模块在所述第m个编码器上的图像特征和所述第m个编码器之前的所有编码器输出的融合结果，生成所述第m个编码器的融合结果，并将所述第m个编码器的融合结果输出至所述第m个编码器之后的所有编码器，L、m均为正整数，且m≤L；通过由至少一个残差块RDB构成的特征复原模块对所述编码特