疲劳驾驶预警方法、装置以及电子设备.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113838265A(43)申请公布日2021.12.24(21)申请号202111138831.1(22)申请日2021.09.27(71)申请人科大讯飞股份有限公司地址230088安徽省合肥市高新开发区望江西路666号(72)发明人雷晓辉齐舒萱(74)专利代理机构北京维澳专利代理有限公司11252代理人常小溪(51)Int.Cl.G08B21/06(2006.01)G06K9/00(2006.01)权利要求书2页说明书10页附图3页(54)发明名称疲劳驾驶预警方法、装置以及电子设备(57)摘要本发明公开了一种疲劳驾驶预警方法、装置以及电子设备，本发明的主要构思在于，通过将图像处理技术与疲劳监测技术结合，实现对用户驾驶载具过程中的疲劳驾驶状态进行实时监测，并配置相应的提醒预警功能。具体来说，在驾驶过程中至少需要采集到驾驶员的眼部及嘴部两个维度的人脸信息，并对各维度的人脸信息采用不同的策略进行疲劳评估，之后将疲劳评估结果与驾驶时间进行融合计算获得目标疲劳值，再根据目标疲劳值实时输出相对应的预警信息。本发明克服了单一特征的局限，减小了干扰因素及个体差异对检测结果的影响，同时融合了人脸图像信息以及载具驾驶信息，使得疲劳检测结果及相应的预警机制更为准确可靠，为安全驾驶提供了安全且有效的保障。CN113838265ACN113838265A权利要求书1/2页1.一种疲劳驾驶预警方法，其特征在于，包括：从载具运行时采集的驾驶员人脸图像中，至少获取到眼部区域特征以及嘴部区域特征；分别根据眼部区域特征、嘴部区域特征以及预设的不同的评估策略，得到对应的第一疲劳评估值以及第二疲劳评估值；根据载具的运行信息，获取与行驶时间和/或行驶距离相关的动态权重值；融合第一疲劳评估值、第二疲劳评估值以及动态权重值，得到目标疲劳值；基于目标疲劳值实时输出疲劳驾驶预警信息。2.根据权利要求1所述的疲劳驾驶预警方法，其特征在于，基于眼部区域特征进行疲劳评估并得到第一疲劳评估值的方式包括：根据眼部区域特征求取眨眼频率和/或眼睛睁开幅度；利用眨眼频率和/或眼睛睁开幅度以及预设的频率阈值和/或幅度阈值，获得第一疲劳评估值。3.根据权利要求2所述的疲劳驾驶预警方法，其特征在于，所述预警方法还包括：预先检测载具玻璃上的阳光照射强度；仅在阳光照射强度低于预设的强度阈值时，触发基于眼部区域特征的疲劳评估处理。4.根据权利要求2所述的疲劳驾驶预警方法，其特征在于，所述预警方法还包括：预先结合载具当前所在区域的时间信息、天气信息以及载具行驶方向信息，判断阳光是否会照射到驾驶员的眼睛；若否，则触发基于眼部区域特征的疲劳评估处理。5.根据权利要求1所述的疲劳驾驶预警方法，其特征在于，基于嘴部区域特征进行疲劳评估并得到第二疲劳评估值的方式包括：根据嘴部区域特征，判断驾驶员的嘴部张开闭合动作及持续时间；根据嘴部张开闭合状态及持续时间，确定哈欠状态；根据哈欠频率以及预设的哈欠频率阈值，获得第二疲劳评估值。6.根据权利要求1所述的疲劳驾驶预警方法，其特征在于，基于嘴部区域特征进行疲劳评估并得到第二疲劳评估值的方式包括：当基于眼部区域特征的疲劳评估处理，判定出驾驶员处于疲劳状态时，检测驾驶员人脸图像中的嘴部区域是否出现手部；若是，则确定为哈欠状态；根据哈欠频率以及预设的哈欠频率阈值，获得第二疲劳评估值。7.根据权利要求5或6所述的疲劳驾驶预警方法，其特征在于，以相邻的哈欠状态之间的时间差表征哈欠频率，且哈欠频率阈值为时间差阈值。8.一种疲劳驾驶预警装置，其特征在于，包括：人脸图像处理模块，用于从载具运行时采集的驾驶员人脸图像中，至少获取到眼部区域特征以及嘴部区域特征；疲劳评估值计算模块，用于分别根据眼部区域特征、嘴部区域特征以及预设的不同的评估策略，得到对应的第一疲劳评估值以及第二疲劳评估值；动态权重值计算模块，用于根据载具的运行信息，获取与行驶时间和/或行驶距离相关2CN113838265A权利要求书2/2页的动态权重值；目标疲劳值计算模块，用于融合第一疲劳评估值、第二疲劳评估值以及动态权重值，得到目标疲劳值；预警输出模块，用于基于目标疲劳值实时输出疲劳驾驶预警信息。9.一种电子设备，其特征在于，包括：一个或多个处理器、存储器以及一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，所述一个或多个计算机程序包括指令，当所述指令被所述电子设备执行时，使得所述电子设备执行权利要求1～7任一项所述的疲劳驾驶预警方法。10.一种计算机数据存储介质，其特征在于，所述计算机数据存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，使得计算机执行权利要求1～7任一项所述的疲劳驾驶预警方法。3CN11383