检索图像的方法、装置和系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113656630A(43)申请公布日2021.11.16(21)申请号202110943222.7(22)申请日2021.08.17(71)申请人北京百度网讯科技有限公司地址100085北京市海淀区上地十街10号百度大厦2层(72)发明人白瑞斌魏翔孙逸鹏姚锟刘经拓韩钧宇(74)专利代理机构北京英赛嘉华知识产权代理有限责任公司11204代理人王达佐马晓亚(51)Int.Cl.G06F16/583(2019.01)G06K9/62(2006.01)权利要求书3页说明书10页附图4页(54)发明名称检索图像的方法、装置和系统(57)摘要本公开提供了检索图像的方法、装置和系统，涉及人工智能技术领域，具体为计算机视觉和深度学习技术领域，可应用于图像处理和图像识别等场景下。具体实现方案为：响应于接收到包括目标图像的查询请求，从目标图像中检测目标主体；若检测到的目标主体的检测框的置信度大于第一阈值，则从目标主体中提取出主体特征，其中，主体特征包括相同特征、相似特征和类别；将目标图像的主体特征与数据库中预先存储的候选图像的主体特征进行匹配，得到候选图像的相似得分、相同得分；根据相似得分、相同得分选择预定数目个候选图像作为搜索结果输出。该实施方式实现了提高了检索的准确性。CN113656630ACN113656630A权利要求书1/3页1.一种检索图像的方法，包括：响应于接收到包括目标图像的查询请求，从所述目标图像中检测目标主体；若检测到的目标主体的检测框的置信度大于第一阈值，则从所述目标主体中提取出主体特征，其中，所述主体特征包括相同特征、相似特征和类别；将所述目标图像的主体特征与数据库中预先存储的候选图像的主体特征进行匹配，得到候选图像的相似得分、相同得分；根据相似得分、相同得分选择预定数目个候选图像作为搜索结果输出。2.根据权利要求1所述的方法，其中，所述方法还包括：若未检测到目标主体或检测到的目标主体的检测框的置信度小于等于第一阈值，则从所述目标图像中提取出整图特征，其中所述整图特征包括相同特征、相似特征、类别和配对特征；将所述目标图像的整图特征与数据库中预先存储的候选图像的整图特征进行匹配，得到候选图像的相似得分、相同得分和配对得分；根据相似得分、相同得分和配对得分选择预定数目个候选图像作为搜索结果输出。3.根据权利要求1所述的方法，其中，所述从所述目标主体中提取出主体特征，包括：通过相似特征模型从所述目标主体中提取出相似特征；通过相同特征模型从所述目标主体中提取出局部图像的相同特征；通过分类模型从所述目标主体中提取出类别。4.根据权利要求1所述的方法，其中，所述方法还包括：过滤掉检测框尺寸小于尺寸阈值或置信度小于第二阈值的检测框。5.根据权利要求4所述的方法，其中，所述方法还包括：若检测框的数量大于1，则根据每个目标主体的检测框的位置、面积和候选图像的相似得分、相同得分确定唯一的目标主体。6.根据权利要求1‑5中任一项所述的方法，其中，所述根据相似得分、相同得分选择预定数目个候选图像作为搜索结果输出，包括：根据候选图像的相似得分和相同得分计算候选图像的匹配度；若匹配度最高的第一候选图像不符合过滤条件，则按匹配度由大到小的顺序选择预定数目个候选图像作为搜索结果输出。7.根据权利要求6所述的方法，其中，所述过滤条件包括以下至少一项：第一候选图像的相同得分小于第一相同阈值并且相似得分小于第一相似阈值；第一候选图像的相同得分小于第二相同阈值并且相似得分小于第二相似阈值，并且目标主体的粗粒度类别和第一候选图像的粗粒度类别均属于预定粗粒度类别；第一候选图像的相同得分小于第三相同阈值并且相似得分小于第三相似阈值，并且目标主体的细粒度类别和第一候选图像的细粒度类别差异大于预定差异阈值；第一候选图像的相同得分小于第四相同阈值并且相似得分小于第四相似阈值，并且目标主体的细粒度类别属于预定细粒度类别的频次和第一候选图像的细粒度类别属于预定细粒度类别的频次均大于预定频次阈值；若第一候选图像来源于电商，则第一候选图像的相同得分小于第五相同阈值并且相似得分小于第五相似阈值，并且目标主体的细粒度类别属于预定物品类别。2CN113656630A权利要求书2/3页8.一种检索图像的装置，包括：检测单元，被配置成响应于接收到包括目标图像的查询请求，从所述目标图像中检测目标主体；提取单元，被配置成若检测到的目标主体的检测框的置信度大于第一阈值，则从所述目标主体中提取出主体特征，其中，所述主体特征包括相同特征、相似特征和类别；匹配单元，被配置成将所述目标图像的主体特征与数据库中预先存储的候选图像的主体特征进行匹配，得到候选图像的相似得分、相同得分；输出单元，被配置成根据相似得分、相同得分选择预