图像识别方法和系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113128463A(43)申请公布日2021.07.16(21)申请号202110495857.5(22)申请日2021.05.07(71)申请人支付宝（杭州）信息技术有限公司地址310000浙江省杭州市西湖区西溪路556号8层B段801-11(72)发明人宋启恒(74)专利代理机构北京市一法律师事务所11654代理人李琳娜刘荣娟(51)Int.Cl.G06K9/00(2006.01)权利要求书2页说明书14页附图7页(54)发明名称图像识别方法和系统(57)摘要本说明书提供的图像识别方法和系统，可以获取开门前的第一图像、关门前的以及关门后的第二图像。与第二图像按照时间顺序形成连续的图像帧。所述方法和系统可以通过对比多个连续帧与第一图像之间的差异区域，排除由于关门振动和人影晃动等外界环境影响引起的开门前图像和关门后图像的差异，提高图像识别的准确率，精确识别出开门前的图像与关门后的图像是否存在由于拿取物品引起的差异，从而提高识别用户是否拿取物品的准确度，防止在用户没有拿取物品的情况下由于数据传输引起的等待，提高用户体验感。CN113128463ACN113128463A权利要求书1/2页1.一种图像识别方法，用于对智能货柜进行图像识别，包括：从所述智能货柜的视觉传感器中获取第一图像以及第二图像，所述第一图像包括所述视觉传感器采集的所述智能货柜的开门信号前的一个图像帧，所述第二图像包括所述视觉传感器采集的所述关门信号后的一个图像帧；从服务器中获取目标图像，所述目标图像包括所述服务器对上一次交易的物品识别结果；以及基于所述第一图像与所述第二图像的差异以及所述目标图像，识别所述第一图像与所述第二图像之间是否存在目标差异，所述目标差异包括所述智能货柜中的物品变化引起的差异。2.如权利要求1所述的图像识别方法，其中，所述目标图像包括至少一个位置区域，所述至少一个位置区域包括所述目标图像中的至少一个物品中的每个物品对应的像素点所在的位置区域，所述至少一个位置区域与所述至少一个物品相对应。3.如权利要求2所述的图像识别方法，其中，所述基于所述第一图像与所述的差异，识别所述第一图像与所述第二图像之间是否存在目标差异，包括：将所述第一图像与所述第二图像求差，确定所述第二图像与所述第一图像的差异区域；以及基于所述差异区域与所述目标图像，确定所述第一图像与所述第二图像之间是否存在所述目标差异。4.如权利要求3所述的图像识别方法，其中，所述将所述第一图像与所述第二图像求差，确定所述第二图像与所述第一图像的差异区域，包括：基于预设图像处理方法获取所述第一图像的多个第一像素点以及所述第二图像的多个第二像素点，所述多个第一像素点与所述多个第二像素点一一对应；对所述多个第一像素点与所述多个第二像素点逐一求差，确定目标像素点的位置以及差异值，所述目标像素点包括所述多个第一像素点与所述多个第二像素点中存在差异的像素点；以及将相邻的所述目标像素点作为一个差异点集合，将所述差异点集合中的所述目标像素点的差异值进行特征融合作为所述差异点集合的差异值，确定所述差异区域，所述差异区域包括所述差异点集合及其对应的差异值。5.如权利要求3所述的图像识别方法，其中，所述基于所述差异区域与所述目标图像，确定所述第一图像与所述第二图像之间是否存在所述目标差异，包括：确定所述差异区域的差异小于预设的第一阈值，确定所述第一图像与所述第二图像之间不存在所述目标差异；或者确定所述差异区域的差异大于所述第一阈值，对所述差异区域以及所述至少一个位置区域求交集，获取差异交集区域，基于所述差异交集区域，确定所述第一图像与所述第二图像之间是否存在所述目标差异。6.如权利要求5所述的图像识别方法，其中，所述确定所述差异区域的差异小于预设的第一阈值，包括：确定所述差异区域中的所述差异点集合的数量小于预设的第一数量阈值，并且所述差异区域中的所述差异点集合的差异值均小于预设的第一差异阈值，所述第一阈值包括所述2CN113128463A权利要求书2/2页第一数量阈值以及所述第一差异阈值；以及所述确定所述差异区域的差异大于所述第一阈值，包括以下情况中的至少一个：确定所述差异区域中的所述差异点集合的数量大于所述第一数量阈值；以及确定所述差异区域中的所述差异点集合的差异值中的至少一个大于所述第一差异阈值。7.如权利要求5所述的图像识别方法，其中，所述对所述差异区域以及所述至少一个位置区域求交集，获取差异交集区域，包括：对所述差异区域以及所述至少一个位置区域求交集，确定同时在所述差异区域中和所述至少一个位置区域中存在的目标交集像素点的位置；以及将相邻的所述目标交集像素点作为一个目标交集点集合，将所述目标交集点集合中的所述目标交集像素点的差异