商品识别方法、装置、电子设备和存储介质.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN116012648A(43)申请公布日2023.04.25(21)申请号202211713952.9(22)申请日2022.12.29(71)申请人图灵通诺（北京）科技有限公司地址100026北京市朝阳区团结湖北三条甲八楼405(72)发明人吴一黎李邦庚(74)专利代理机构北京五洲洋和知识产权代理事务所(普通合伙)11387专利代理师刘春成(51)Int.Cl.G06V10/764(2022.01)G06V10/82(2022.01)G06V10/40(2022.01)权利要求书2页说明书5页附图2页(54)发明名称商品识别方法、装置、电子设备和存储介质(57)摘要本发明属于信息技术领域，特别涉及一种商品识别方法、装置、电子设备和存储介质。商品识别方法包括：获取购物时商品图像；利用预构建的商品分类网络对所述购物时商品图像进行商品识别，得到第一商品识别结果；利用预构建的商品特征提取网络对所述购物时商品图像进行商品识别，得到第二商品识别结果，所述商品特征提取网络为与所述第一商品识别结果对应的商品特征提取网络；其中，所述第二商品识别结果所表征的类别属于所述第一商品识别结果所表征的类别。商品识别装置包括：第一获取模块、第一得到模块和第二得到模块。通过上述技术方案降低了部署于智能货柜侧商品识别网络的复杂度。CN116012648ACN116012648A权利要求书1/2页1.一种商品识别方法，其特征在于，包括：获取购物时商品图像；利用预构建的商品分类网络对所述购物时商品图像进行商品识别，得到第一商品识别结果；利用预构建的商品特征提取网络对所述购物时商品图像进行商品识别，得到第二商品识别结果，所述商品特征提取网络为与所述第一商品识别结果对应的商品特征提取网络；其中，所述第二商品识别结果所表征的类别属于所述第一商品识别结果所表征的类别。2.根据权利要求1所述的方法，其特征在于，所述利用预构建的商品特征提取网络对所述购物时商品图像进行商品识别，得到第二商品识别结果，包括：构建与各待售卖商品的第一商品识别结果所表征类别对应的商品特征提取网络；根据所述购物时商品图像的第一商品识别结果和所有商品特征提取网络，确定与所述购物时商品图像对应的商品特征提取网络；利用与所述购物时商品图像对应的商品特征提取网络对所述购物时商品图像进行特征提取，得到购物商品特征向量；将所述购物商品特征向量与预构建的底库特征向量数据库进行特征检索，得到第二商品识别结果。3.根据权利要求1所述的方法，其特征在于，所述获取购物时商品图像之前，还包括：获取注册时商品图像；利用所述商品分类网络对所述注册时商品图像进行商品识别，得到第一商品识别结果；利用所述商品特征提取网络对所述注册时商品图像进行特征提取，得到注册商品特征向量；将所述注册商品特征向量存入预构建的底库特征向量数据库中。4.根据权利要求3所述的方法，其特征在于，所述获取注册时商品图像包括：从六个角度分别拍摄注册时商品，获得六张注册时商品图像，所述六个角度为：正面角度、背面角度、左侧面角度、右侧面角度、上面角度和下面角度。5.一种商品识别装置，其特征在于，包括：第一获取模块，用于获取购物时商品图像；第一得到模块，用于利用预构建的商品分类网络对所述购物时商品图像进行商品识别，得到第一商品识别结果；第二得到模块，用于利用预构建的商品特征提取网络对所述购物时商品图像进行商品识别，得到第二商品识别结果，所述商品特征提取网络为与所述第一商品识别结果对应的商品特征提前网络；其中，所述第二商品识别结果所表征的类别属于所述第一商品识别结果所表征的类别。6.根据权利要求5所述的装置，其特征在于，所述第二得到模块包括：构建单元，用于构建与各待售卖商品的第一商品识别结果所表征类别对应的商品特征提取网络；2CN116012648A权利要求书2/2页确定单元，用于根据所述购物时商品图像的第一商品识别结果和所有商品特征提取网络，确定与所述购物时商品图像对应的商品特征提取网络；第一得到单元，用于利用与所述购物时商品图像对应的商品特征提取网络对所述购物时商品图像进行特征提取，得到购物商品特征向量；第二得到单元，用于将所述购物商品特征向量与预构建的底库特征向量数据库进行特征检索，得到第二商品识别结果。7.根据权利要求5所述的装置，其特征在于，所述第一获取模块获取购物时商品图像之前，还包括：第二获取模块，用于获取注册时商品图像；第三得到模块，用于利用所述商品分类网络对所述注册时商品图像进行商品识别，得到第一商品识别结果；第四得到模块，用于利用所述商品特征提取网络对所述注册时商品图像进行特征提取，得到注册商品特征向量；存入模块，用于将所述注册商品特征向量存入预构建的底库特征向量数据库中。8.根据权利要