基于人脸识别的车载音乐推送方法及系统.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115391590A(43)申请公布日2022.11.25(21)申请号202211056856.1(22)申请日2022.08.31(71)申请人安徽江淮汽车集团股份有限公司地址230601安徽省合肥市经济技术开发区紫云路99号(72)发明人王点墨胡燕娇陈桃花李兵张雨婷阚瑞(74)专利代理机构北京维澳专利代理有限公司11252专利代理师段媛媛(51)Int.Cl.G06F16/635(2019.01)G06F16/68(2019.01)G06V40/16(2022.01)权利要求书2页说明书5页附图1页(54)发明名称基于人脸识别的车载音乐推送方法及系统(57)摘要本发明公开了一种基于人脸识别的车载音乐推送方法及系统，所述方法包括：采集用户的人脸视频，得到人脸视频数据；对人脸视频数据进行人脸识别，以得到人脸视频数据中每帧人脸图像所对应的情绪标签；对当前预设时间段内的情绪标签进行分析，以得到用户当前整体情绪；根据用户当前整体情绪向用户推送音乐。本发明的基于人脸识别的车载音乐推送方法及系统，对人脸视频数据进行人脸识别得到每帧人脸图像所对应的情绪标签，并对预设时间段内的情绪标签进行分析得到用户当前整体情绪，以根据用户当前整体情绪向用户推送音乐，通过人脸识别技术，识别当前驾驶员、乘客的情绪标签，结合音乐标签进行主动推送，为用户带来更加主动的服务和体验。CN115391590ACN115391590A权利要求书1/2页1.一种基于人脸识别的车载音乐推送方法，其特征在于，包括：采集用户的人脸视频，得到人脸视频数据；对所述人脸视频数据进行人脸识别，以得到所述人脸视频数据中每帧人脸图像所对应的情绪标签；对当前预设时间段内的所述情绪标签进行分析，以得到用户当前整体情绪；根据所述用户当前整体情绪向用户推送音乐。2.根据权利要求1所述的基于人脸识别的车载音乐推送方法，其特征在于，所述采集用户的人脸视频，得到人脸视频数据，具体包括：通过DMS摄像头采集用户的人脸视频，得到人脸视频数据。3.根据权利要求2所述的基于人脸识别的车载音乐推送方法，其特征在于，所述通过DMS摄像头采集用户的人脸视频，得到人脸视频数据，具体包括：通过主驾DMS摄像头采集主驾驶员的人脸视频，得到驾驶员人脸视频数据，并通过副驾DMS摄像头采集副驾乘客的人脸视频，得到副驾乘客人脸视频数据，其中，所述主驾DMS摄像头设置在前挡风玻璃顶部且面向主驾驶员的脸部位置，所述副驾DMS摄像头设置在前挡风玻璃顶部且面向副驾乘客的脸部位置。4.根据权利要求1所述的基于人脸识别的车载音乐推送方法，其特征在于，所述情绪标签包括：快乐情绪、悲伤情绪、愤怒情绪、惊讶情绪、恐惧情绪和厌恶情绪中的至少一个。5.根据权利要求1所述的基于人脸识别的车载音乐推送方法，其特征在于，所述对所述人脸视频数据进行人脸识别，以得到所述人脸视频数据中每帧人脸图像所对应的情绪标签，具体包括：通过J2芯片基于卷积神经网络算法按照先后顺序逐帧对所述人脸视频数据进行图像识别，以得到每帧人脸图像所对应的结构化的标识符，其中，每个结构化的标识符对应一种情绪标签。6.根据权利要求5所述的基于人脸识别的车载音乐推送方法，其特征在于，所述对当前预设时间段内的所述情绪标签进行分析，以得到用户当前整体情绪，具体包括：通过娱乐信息控制器对当前预设时间段内的每帧人脸图像所对应的情绪标签进行累加计算，以得到各所述情绪标签在当前预设时间段内的累加结果；将累加结果最高的情绪标签作为用户当前整体情绪。7.根据权利要求1所述的基于人脸识别的车载音乐推送方法，其特征在于，所述根据所述用户当前整体情绪向用户推送音乐，具体包括：通过音乐模块根据所述用户当前整体情绪向用户推送音乐。8.根据权利要求1所述的基于人脸识别的车载音乐推送方法，其特征在于，所述基于人脸识别的车载音乐推送方法还包括：音乐模块根据用户对音乐推送结果的反馈确定是否开启音乐播放。9.根据权利要求8所述的基于人脸识别的车载音乐推送方法，其特征在于，所述音乐模块根据用户对音乐推送结果的反馈确定是否开启音乐播放，具体包括：文本转语音系统通过语音播报询问用户是否要听音乐，您可以回答“确定”或“取消”，同时文字显示“开启音乐播放”，若用户选择“确定”则开启音乐播放，所述音乐模块根据所述用户当前整体情绪播放筛选后的推荐歌单列表，若用户选择“取消”或15s未操作，则不进2CN115391590A权利要求书2/2页行任何操作；若用户选择“取消”后超过10分钟，同时检测到用户情绪未发生变化，则文本转语音系统播报询问用户是否要听音乐，同时文字显示“开启音乐播放”，用户若选择“确定”则开启音乐播放，进入推荐歌单列表，若用户选择“取消”或15s未操作，则不进行任何