自助结算方法、装置以及存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN109214806A(43)申请公布日2019.01.15(21)申请号201811380178.8(22)申请日2018.11.20(71)申请人北京京东尚科信息技术有限公司地址100086北京市海淀区知春路76号8层申请人北京京东世纪贸易有限公司(72)发明人石海林赵何刘武梅涛周伯文(74)专利代理机构中国国际贸易促进委员会专利商标事务所11038代理人方亮(51)Int.Cl.G06Q20/20(2012.01)G07G1/00(2006.01)权利要求书4页说明书9页附图5页(54)发明名称自助结算方法、装置以及存储介质(57)摘要本公开提供了一种自助结算方法、装置以及存储介质，涉及自助购物技术领域，其中方法包括：获得图像采集装置采集的与放置在结算柜台上的待结算商品相对应的监控图像，通过图像识别获得待结算商品信息；获得重量检测装置采集的第一重量，基于待结算商品信息获得的第二重量，根据重量的比对结果判断待结算商品信息与待认定商品是否匹配；如果是，则获得购买商品结算信息，进行结账处理。本公开的方法、装置以及存储介质，通过图像识别技术以及重量检测技术相结合确定待检测商品信息，可以实现快速自助结账，减小了顾客结算的等待时间，提高了顾客的购物体检。CN109214806ACN109214806A权利要求书1/4页1.一种自助结算方法，包括：获得图像采集装置采集的与放置在结算柜台上的待结算商品相对应的监控图像；对所述监控图像进行识别，获得待结算商品信息；其中，所述待结算商品信息包括：待结算商品的类别和数量；获得设置在结算柜台上的重量检测装置采集的与所述待结算商品相对应的第一重量，基于所述待结算商品信息获得与所述待结算商品相对应的第二重量；根据预设的匹配判断规则和所述第一重量与所述第二重量的比对结果判断所述待结算商品信息与所述待认定商品是否匹配；如果是，则基于所述待结算商品信息获得购买商品结算信息，根据所述购买商品结算信息进行结账处理；其中，所述购买商品结算信息包括：待结算商品的类别、数量和结算价格。2.如权利要求1所述的方法，所述对所述监控图像进行识别、获得待结算商品信息包括：在所述监控图像中确定与所述待结算商品相对应的第一位置以及与所述结算柜台上的坐标刻度相对应的第二位置；根据所述第一位置和所述第二位置在所述监控图像中截取待结算商品图像和坐标刻度图像；基于所述坐标刻度图像与所述待结算商品图像确定待结算商品的尺寸信息；识别在所述待结算商品图像中的待结算商品所属的商品种类，并获得每种待结算商品所对应的数量；基于所述待结算商品的尺寸信息和所述待结算商品所属的商品种类确定此待结算商品的类别。3.如权利要求2所述的方法，所述在所述监控图像中确定与所述待结算商品相对应的第一位置以及与所述结算柜台上的坐标刻度相对应的第二位置包括：利用目标检测模型在所述监控图像中确定所述第一位置和所述第二位置；其中，所述目标检测模型包括：基于FasterRCNN算法的卷积神经网络模型。4.如权利要求2所述的方法，所述识别在所述待结算商品图像中的待结算商品所属的商品种类包括：通过Softmax函数建立卷积神经网络的全连接层，通过所述卷积神经网络计算所述待结算商品属于各商品种类的置信度；将置信度大于预设的阈值的商品种类作为所述待结算商品的商品种类。5.如权利要求4所述的方法，其中，所述卷积神经网络的各卷基层之间设置有池化层，在最后一个卷积层之后设置有批标准化层。6.如权利要求1所述的方法，所述基于所述待结算商品信息获得与所述待结算商品相对应的第二重量包括：获取与所述待结算商品的类别相对应的商品单位重量；根据所述待结算商品的商品单位重量和数量获得所述第二重量。7.如权利要求6所述的方法，根据预设的匹配判断规则和所述第一重量与所述第二重2CN109214806A权利要求书2/4页量的比对结果判断所述待结算商品信息与所述待认定商品是否匹配包括：获得所述第一重量与所述第二重量的差值；判断所述差值的绝对值是否小于预设的差值阈值；如果是，则确定所述待结算商品信息与所述待认定商品匹配。8.如权利要求1所述的方法，所述根据所述购买商品结算信息进行结账处理包括：将所述购买商品结算信息分别发送给第一显示装置、第二显示装置，用以分别向顾客、店员显示所述购买商品结算信息；如果接收到顾客和店员中的任何一方发送的对于所述购买商品结算信息的结算取消或结算错误消息，则暂停此次结账处理。9.如权利要求8所述的方法，所述根据所述购买商品结算信息进行结账处理还包括：接收到顾客终端发送的根据所述购买商品结算信息生成的费用支付信息；如果确定所述费用支付信息正确，则将费用支付完成信息发送给所述第一显示装置、所述第二显示装置，并将所