视线语音交互自动售烟机.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111508142A(43)申请公布日2020.08.07(21)申请号202010306041.9G06K9/00(2006.01)(22)申请日2020.04.17G06K9/32(2006.01)G06K9/62(2006.01)(71)申请人深圳爱莫科技有限公司G06N3/04(2006.01)地址518000广东省深圳市宝安区新安街道大浪社区大宝路49号众里创业社区洪浪北207-2(72)发明人杨恒龙涛晁航(74)专利代理机构重庆百润洪知识产权代理有限公司50219代理人孟仕杰(51)Int.Cl.G07F11/00(2006.01)G10L15/30(2013.01)G10L15/34(2013.01)G06F3/01(2006.01)权利要求书2页说明书5页附图2页(54)发明名称视线语音交互自动售烟机(57)摘要本发明涉及自助售卖机技术领域，且公开了视线语音交互自动售烟机，包括售烟机本体，所述售烟机本体内部包括边缘计算处理器、中央控制系统、云端服务器、通信模块、控制器、输入模块、显示模块、语音模块、人机交互模块和身份验证模块；所述人机相互模块、身份验证模块、语音模块和输入模块分别与边缘计算处理器连接，所述边缘计算处理器与中央控制系统连接，所述中央控制系统与云端服务器通过通信模块连接，所述中央控制系统与控制器连接；所述人机交互模块用于接收指令并识别指令；所述身份验证模块用于验证购买者是否年满18岁；本发明智能化程度高，接触少，减少了卫生风险，同时通过身份验证，避免了向18岁以下未成年人出售香烟。CN111508142ACN111508142A权利要求书1/2页1.视线语音交互自动售烟机，包括售烟机本体，其特征在于：所述售烟机本体内部包括边缘计算处理器、中央控制系统、云端服务器、通信模块、控制器、输入模块、显示模块、语音模块、人机交互模块和身份验证模块；所述人机相互模块、身份验证模块、语音模块和输入模块分别与边缘计算处理器连接，所述边缘计算处理器与中央控制系统连接，所述中央控制系统与云端服务器通过通信模块连接，所述中央控制系统与控制器连接；所述人机交互模块用于接收指令并识别指令；所述身份验证模块用于验证购买者是否年满18岁。2.根据权利要求1所述的视线语音交互自动售烟机，其特征在于：所述显示模块为显示屏，所述语音模块包括麦克风和扬声器。3.根据权利要求2所述的视线语音交互自动售烟机，其特征在于：所述人机交互模块为视线交互模块，所述视线交互模块根据眼球视线判断购物者的购物需求。4.根据权利要求3所述的视线语音交互自动售烟机，其特征在于：所述视线交互模块包括摄像头、人脸数据库、卷积神经网络模型。5.根据权利要求4所述的视线语音交互自动售烟机，其特征在于：所述视线交互模块的交互方法包括：步骤一：人脸数据库的建立；在不同光照、不同时间、不同位置条件下对多个个体注视显示屏随机出现的注视点的过程进行数据采集，对采集的图像进行人脸检测和人眼检测，获得人眼区域图像，建立人眼数据库并对人眼图像进行筛选；步骤二：将人眼图像分为训练集和验证集，作为卷积神经网络模型的输入，根据实际应用需求对显示屏进行分块，注视显示屏同一分块的人眼图像视为一类，对人眼图像进行分类，训练卷积神经网络模型；步骤三：进行视线估计时，将待分类人眼图像输入到训练好的卷积神经网络模型中，即可判断其类别，并对应得到相应的显示屏注视位置块，从而对视线方向进行估计；边缘计算处理器将结果传输至中央控制系统，并通过扬声器输出视线识别结果及播放下一步操作指引；步骤四：中央控制系统根据视线识别结果变化显示屏页面，逐一完成实现烟品的选择、支付、购买。6.根据权利要求2所述的视线语音交互自动售烟机，其特征在于：所述人机交互模块为语音交互模块，所述语音交互模块根据语音识别判断购物者的购物需求。7.根据权利要求6所述的视线语音交互自动售烟机，其特征在于：所述语音交互模块包括语音识别降噪装置和语音识别服务器。8.根据权利要求7所述的视线语音交互自动售烟机，其特征在于：所述语音交互模块的交互方法包括：步骤一：通过麦克风输入语音信号，通过语音识别降噪装置降噪处理后获得语音识别结果信号；步骤二：语音识别结果信号通过通讯模块上传至云端服务器的语音识别服务器中，所述语音识别服务器分析所述语音识别结果信号获得在线语音识别结果；步骤三：所述云端服务器将在线语音识别结果通过无线模块传输给边缘计算处理器；步骤四：边缘计算处理器将结果传输至中央控制系统，并通过扬声器输出语音识别结2CN111508142A权利要求书2/2页果及播放下一步操作指引；步骤五：中央控制系统根据语音识别结果变化显示屏显示页面，逐一完成实现烟品的选择、支付、购买