状态检测装置、状态检测系统及状态检测方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113647087A(43)申请公布日2021.11.12(21)申请号202080021923.9(74)专利代理机构北京康信知识产权代理有限(22)申请日2020.03.10责任公司11240代理人吴孟秋(30)优先权数据2019-0602172019.03.27JP(51)Int.Cl.H04N5/225(2006.01)(85)PCT国际申请进入国家阶段日B60K28/06(2006.01)2021.09.16H04N5/232(2006.01)(86)PCT国际申请的申请数据H04N5/351(2006.01)PCT/JP2020/0101902020.03.10H04N7/18(2006.01)(87)PCT国际申请的公布数据WO2020/195770JA2020.10.01(71)申请人索尼集团公司地址日本东京申请人索尼半导体解决方案公司(72)发明人中川庆北野伸权利要求书2页说明书16页附图12页(54)发明名称状态检测装置、状态检测系统及状态检测方法(57)摘要本发明的目的在于更快速地检测驾驶员的状态。根据本发明的实施例的状态检测装置设置有：第一固态成像装置(200)，设置有以矩阵布置的多个像素，并且该第一固态成像装置(200)根据入射在每个像素上的光量来检测像素中的事件的发生；以及状态检测单元(12、15、16)，基于由第一固态成像装置检测到的事件的发生来检测驾驶员的状态。CN113647087ACN113647087A权利要求书1/2页1.一种状态检测装置，包括：第一固态成像装置，设置有以矩阵布置的多个像素，所述第一固态成像装置根据入射在每个所述像素上的光量来检测所述像素中的事件的发生；以及状态检测单元，基于由所述第一固态成像装置检测到的所述事件的发生来检测驾驶员的状态。2.根据权利要求1所述的状态检测装置，其中，所述状态检测单元检测所述驾驶员的眼球运动、眼睑运动、面部方向、以及视线方向中的至少一者，作为所述驾驶员的所述状态。3.根据权利要求1所述的状态检测装置，还包括：动作模式确定单元，基于由所述状态检测单元检测的所述驾驶员的所述状态来确定动作模式。4.根据权利要求3所述的状态检测装置，其中，所述状态检测单元检测所述驾驶员的眼球运动以及眼睑运动中的至少一者，并且所述动作模式确定单元基于所述眼球运动以及所述眼睑运动中的至少一者来估计所述驾驶员的清醒度，并且基于所估计的清醒度来确定所述动作模式。5.根据权利要求4所述的状态检测装置，其中，所述动作模式确定单元在所估计的清醒度较低的情况下，确定输出用于唤醒所述驾驶员的警告的动作模式。6.根据权利要求3所述的状态检测装置，还包括：成像单元，对车辆后方的区域进行成像；以及显示单元，显示由所述成像单元成像的视频，其中，所述状态检测单元检测所述驾驶员的面部方向以及视线方向中的至少一者，并且所述动作模式确定单元基于所述面部方向以及所述视线方向中的至少一者来确定所述驾驶员是否注视或将注视所述显示单元，并且基于所确定的结果来确定所述动作模式。7.根据权利要求6所述的状态检测装置，其中，所述动作模式确定单元在所述驾驶员注视或将注视所述显示单元的情况下确定使所述显示单元显示所述视频的动作模式，并且在所述驾驶员未注视或将不注视所述显示单元的情况下确定关闭所述显示单元的显示的动作模式。8.根据权利要求3所述的状态检测装置，还包括：成像单元，对车辆后方的区域进行成像；传感器，检测与跟随车辆的车辆间距离以及相对于所述跟随车辆的相对速度中的至少一者；以及显示单元，显示由所述成像单元成像的视频，其中，所述状态检测单元检测所述驾驶员的面部方向以及视线方向中的至少一者，并且所述动作模式确定单元基于所述车辆间距离及所述相对速度中的至少一者、和所述面部方向及所述视线方向中的至少一者，来确定所述动作模式。9.根据权利要求8所述的状态检测装置，其中，所述动作模式确定单元基于所述车辆间距离以及所述相对速度中的至少一者来确定是否存在与所述跟随车辆碰撞的风险，在存在与所述跟随车辆碰撞的所述风险的情况下，2CN113647087A权利要求书2/2页进一步基于所述面部方向以及所述视线方向中的至少一者，来确定所述驾驶员是否注视或将注视所述显示单元，并且在所述驾驶员未注视或将不注视所述显示单元的情况下，确定使所述显示单元显示所述视频的动作模式。10.根据权利要求1所述的状态检测装置，还包括：第二固态成像装置，对所述驾驶员的面部进行成像，其中，所述状态检测单元基于由所述第一固态成像装置检测到的所述事件的发生和由所述第二固态成像装置获得的图像数据，来检测所述驾驶员的所述状态。11.一种状态检测系统，包括：第一固态成像装置，设置有以矩阵布置的多