基于增强现实平视显示与多屏语音交互的驾驶辅助系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN108099790A(43)申请公布日2018.06.01(21)申请号201711271533.3(22)申请日2017.12.05(71)申请人华南理工大学地址510006广东省广州市番禺区广州大学城华南理工大学(72)发明人姜立军张泽权李哲林张瑜(74)专利代理机构广州粤高专利商标代理有限公司44102代理人何淑珍(51)Int.Cl.B60R1/00(2006.01)B60K35/00(2006.01)权利要求书2页说明书6页附图2页(54)发明名称基于增强现实平视显示与多屏语音交互的驾驶辅助系统(57)摘要本发明公开基于增强现实平视显示与多屏语音交互的驾驶辅助系统，包括增强现实平视显示系统、多屏语音操作系统和双屏中控显示操作系统；所述增强现实平视显示系统识别复杂道路信息，将导航、警示信息叠加在真实场景上提醒驾驶员，所述的多屏语音操作系统通过便捷触控键实现汽车HUD、HDD、HCS、CS的移动设备多屏交互与人机语音交互，所述的双屏中控显示操作系统让副驾驶员在不影响主驾驶员驾驶的同时进行操作。本发明的驾驶辅助系统能够有效的为驾驶员在驾驶任务中提供辅助，增强驾驶员的情境意识，降低驾驶过程中发生无意盲视、变化盲视、走神等的发生几率，减少驾驶员的认知负荷，从而提供一个更为安全的驾驶体验。CN108099790ACN108099790A权利要求书1/2页1.基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，包括增强现实平视显示系统、多屏语音操作系统和双屏中控显示操作系统；所述增强现实平视显示系统识别复杂道路信息，将导航、警示信息叠加在真实场景上提醒驾驶员，所述的多屏语音操作系统通过便捷触控键实现汽车HUD、HDD、HCS、CS的移动设备多屏交互与人机语音交互，所述的双屏中控显示操作系统让副驾驶员在不影响主驾驶员驾驶的同时进行操作。2.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于增强现实平视显示系统包括道路信息检测模块、计算机视觉分析模块和增强现实平视显示模块；所述的道路信息检测模块通过车前的双传感器将车前方的动态道路场景信息记录下来，形成具有深度信息和高识别度的视频流，即在夜间也能够清晰还原道路场景，所述的计算机视觉分析模块将道路信息检测模块获取的视频流通过计算机视觉算法进行分析，获得具有深度信息的显著特征信息，所述的增强现实平视显示模块根据计算机视觉分析模块的分析结果转为增强现实图像信息，通过增强现实平视显示屏，在不影响驾驶员视线的前提下叠加在真实场景上，起到增强感知的作用。3.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，计算机视觉分析模块对道路信息检测模块获取的视频流进行分析，通过特征提取出显著特征信息，然后与特征库里的各类信息进行对比，分别识别出特征物；接着综合这些信息、车辆驾驶信息和驾驶员操作习惯计算提示权重，再根据权重为显著信息进行排列，并决定采用的提示或警示方式，对不重要或者不构成威胁的信息进行排除。4.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，HUD显示的内容会根据权重、驾车环境等的情况智能调节其显示的颜色、亮度、大小、成像距离和范围。5.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，还包括触控键模块、多屏操作模块和智能语音模块；所述的触控键模块通过触控滑动来控制显示内容在多屏中转换，或者通过点击来进行语音指令输入，所述的多屏操作模块连接汽车HUD、HDD、HCS、CS、移动设备的车内多屏幕的信息并实现互联，实现无缝对接，让信息出现在驾驶员需要的任何屏幕上，让驾驶员无需低头便可灵活控制信息的显示位置，所述的智能语音模块是驾驶员的驾驶智能助手，驾驶员点击触控键后激活，激活后驾驶员只需要说出指示，智能语音模块便会识别并执行指示。6.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，移动设备通过蓝牙或其他无线连接方式与系统连接，连接后，移动设备里预安装的车载系统应用程序将帮助移动设备与车载系统进行信息交流，让移动设备成为车载系统显示器的一部分。7.根据权利要求1所述的基于增强现实平视显示与多屏语音交互的驾驶辅助系统，其特征在于，还包括副驾驶独立音效模块和主驾驶中控屏与副驾驶中控屏交互模块；所述的MCS主驾驶中控屏相对于普通车辆的CS中控屏，屏幕角度更偏向于主驾驶员，驾驶员低头看时视线刚好垂直于屏幕，CCS副驾驶中控屏与MCS主驾驶中控屏相反，屏幕角度更偏向于副驾驶员，同样的，副驾驶员低头看时视线也刚好垂直于屏幕，能够观看与驾驶任务无关的信息，所述的副驾驶