触控屏故障检测系统、方法以及触控屏设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113867561A(43)申请公布日2021.12.31(21)申请号202110940863.7(22)申请日2021.08.17(71)申请人支付宝（杭州）信息技术有限公司地址310000浙江省杭州市西湖区西溪路556号8层B段801-11(72)发明人李默(74)专利代理机构北京市一法律师事务所11654代理人李琳娜刘荣娟(51)Int.Cl.G06F3/041(2006.01)H04R1/20(2006.01)G06K9/00(2006.01)G06F11/07(2006.01)G06N20/00(2019.01)权利要求书4页说明书15页附图6页(54)发明名称触控屏故障检测系统、方法以及触控屏设备(57)摘要本说明书提供的触控屏故障检测系统、方法以及触控屏设备，通过在触控屏的不同位置设置多个麦克风，采集用户点击触控屏的声音信号，从而判断用户点击触控屏的位置。同时，所述触控屏故障检测系统可以将基于麦克风信号识别的触摸位置与基于触控屏的触控信号识别的触摸位置进行融合，以对触控屏进行故障检测，不仅可以检测触控屏感知故障，还可以检测处理器运行故障。CN113867561ACN113867561A权利要求书1/4页1.一种触控屏故障检测系统，用于触控屏设备，所述触控屏设备包括触控屏，所述触控屏故障检测系统包括：至少两个麦克风，安装在所述触控屏设备内部并靠近所述触控屏，被配置为采集用户点击所述触控屏时的声音并输出至少两个目标音频信号；以及检测装置，与所述至少两个麦克风以及所述触控屏通信连接，接收所述至少两个目标音频信号以及所述触控屏输出的触控信号，基于所述至少两个目标音频信号以及所述触控信号共同对所述触控屏设备进行故障检测。2.如权利要求1所述的触控屏故障检测系统，其中，所述基于所述至少两个目标音频信号以及所述触控信号共同对所述触控屏设备进行故障检测，包括：基于当前时刻对应的目标时间窗口内的所述至少两个目标音频信号的变化，确定第一计算结果，所述第一计算结果包括所述用户在所述目标时间窗口内执行了目标动作，所述目标动作包括点击所述触控屏；基于所述目标时间窗口内的所述触控信号的变化，确定第二计算结果，所述第二计算结果包括所述用户在所述目标时间窗口内执行了所述目标动作或者没有执行所述目标动作；以及将所述第一计算结果与所述第二计算结果进行匹配，确定所述触控屏设备是否存在故障。3.如权利要求2所述的触控屏故障检测系统，其中，所述第一计算结果还包括所述当前时刻所述用户点击所述触控屏的第一位置；所述触控信号包括所述当前时刻所述用户点击所述触控屏的第二位置；所述将所述第一计算结果与所述第二计算结果进行匹配，确定所述触控屏设备是否存在故障，包括：确定所述第二计算结果与所述第一计算结果不匹配，确定所述触控屏设备存在第一故障，所述第一故障包括所述触控屏感知故障，所述故障包括所述第一故障；或者确定所述第二计算结果与所述第一计算结果匹配，基于目标位置以及所述当前时刻之前的N个历史时刻所述用户点击所述触控屏的N个历史位置，确定所述触控屏设备是否存在第二故障，所述第二故障包括软件运行故障，所述故障包括所述第二故障，其中，所述目标位置包括所述第一位置或所述第二位置，所述N为不小于1的整数。4.如权利要求3所述的触控屏故障检测系统，其中，所述基于当前时刻对应的目标时间窗口内的所述至少两个目标音频信号的变化，确定第一计算结果，包括：获取预先训练好的动作识别模型，所述动作识别模型是基于所述至少两个麦克风输出的多个样本数据及其对应的多个样本标签训练得到的；以及将所述至少两个目标音频信号输入所述动作识别模型，确定所述第一计算结果。5.如权利要求4所述的触控屏故障检测系统，其中，所述多个样本数据中的每个样本数据包括：在标定人员点击所述触控屏时，所述至少两个麦克风输出的至少两个第一样本音频信号；以及在所述标定人员停止点击所述触控屏时，所述至少两个麦克风输出的至少两个第二样本音频信号；2CN113867561A权利要求书2/4页所述多个样本标签中的每个样本标签包括其对应的样本数据中，所述标定人员点击所述触控屏的样本位置，所述样本位置是基于所述标定人员点击所述触控屏时所述触控屏输出的触控信号得到的。6.如权利要求3所述的触控屏故障检测系统，其中，所述至少两个麦克风安装在所述触控屏上的不同位置，所述检测装置中预先存储有所述至少两个麦克风的安装位置；所述基于当前时刻对应的目标时间窗口内的所述至少两个目标音频信号的变化，确定第一计算结果，包括：获取所述至少两个目标音频信号中的每个目标音频信号在所述目标时间窗口内不同时间点的信号差；确定所述至少两个目标音频信号中的至少一个目标音频信号的所述信号差超过预设值，