(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211056856.1 (22)申请日 2022.08.31 (71)申请人 安徽江淮 汽车集团股份有限公司 地址 230601 安徽省合肥市经济技 术开发 区紫云路99号 (72)发明人 王点墨　胡燕娇　陈桃花　李兵　 张雨婷　阚瑞　 (74)专利代理 机构 北京维澳专利代理有限公司 11252 专利代理师 段媛媛 (51)Int.Cl. G06F 16/635(2019.01) G06F 16/68(2019.01) G06V 40/16(2022.01) (54)发明名称 基于人脸识别的车载音乐推送方法及系统 (57)摘要 本发明公开了一种基于人脸识别的车载音 乐推送方法及系统， 所述方法包括： 采集用户的 人脸视频， 得到人脸视频数据； 对人脸视频数据 进行人脸识别， 以得到人脸视频数据中每帧人脸 图像所对应的情绪标签； 对当前预设时间段内的 情绪标签进行分析， 以得到用户当前整体情绪； 根据用户当前整体情绪向用户推送音乐。 本发明 的基于人脸识别的车载音乐推送方法及系统， 对 人脸视频数据进行人脸识别得到每帧人脸图像 所对应的情绪标签， 并对预设时间段内的情绪标 签进行分析得到用户当前整体情绪， 以根据用户 当前整体情绪向用户推送音乐， 通过人脸识别技 术， 识别当前驾驶员、 乘客的情绪标签， 结合音 乐 标签进行主动推送， 为用户带来更加主动的服务 和体验。 权利要求书2页 说明书5页 附图1页 CN 115391590 A 2022.11.25 CN 115391590 A 1.一种基于人脸识别的车 载音乐推送方法， 其特 征在于， 包括： 采集用户的人脸视频， 得到人脸视频 数据； 对所述人脸视频数据进行人脸识别， 以得到所述人脸视频数据中每帧人脸图像所对应 的情绪标签； 对当前预设时间段内的所述情绪标签进行分析， 以得到用户当前整体情绪； 根据所述用户当前整体情绪向用户推送音乐。 2.根据权利要求1所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述采集用 户的人脸视频， 得到人脸视频 数据， 具体包括： 通过DMS摄 像头采集用户的人脸视频， 得到人脸视频 数据。 3.根据权利要求2所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述通过 DMS摄像头采集用户的人脸视频， 得到人脸视频 数据， 具体包括： 通过主驾DMS摄像头采集主驾驶员的人脸视频， 得到驾驶员人脸视频数据， 并通过副驾 DMS摄像头采集副 驾乘客的人脸视频， 得到副驾乘 客人脸视频数据， 其中， 所述主驾DMS摄像 头设置在前挡风玻璃顶部且面向主驾驶员的脸部位置， 所述副驾DMS摄像头设置在前挡风 玻璃顶部且面向副驾乘客的脸部位置 。 4.根据权利要求1所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述情绪标 签包括： 快乐情绪、 悲伤情绪、 愤怒情绪、 惊讶情绪、 恐惧情绪和厌 恶情绪中的至少一个。 5.根据权利要求1所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述对所述 人脸视频数据进行人脸识别， 以得到所述人脸视频数据中每帧人脸图像所对应的情绪标 签， 具体包括： 通过J2芯片基于卷积神经网络算法按照先后顺序逐帧对所述人脸视频数据进行图像 识别， 以得到每帧人脸图像所对应的结构化的标识符， 其中， 每个结构化的标识符对应一种 情绪标签。 6.根据权利要求5所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述对当前 预设时间段内的所述情绪标签进行分析， 以得到用户当前整体情绪， 具体包括： 通过娱乐信息控制器对当前预设时间段内的每帧人脸图像所对应的情绪标签进行累 加计算， 以得到各 所述情绪标签在当前 预设时间段内的累加结果； 将累加结果 最高的情绪标签作为用户当前整体情绪。 7.根据权利要求1所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述根据 所 述用户当前整体情绪向用户推送音乐， 具体包括： 通过音乐模块 根据所述用户当前整体情绪向用户推送音乐。 8.根据权利要求1所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述基于人 脸识别的车 载音乐推送方法还 包括： 音乐模块 根据用户对音乐推送结果的反馈确定是否开启音乐 播放。 9.根据权利要求8所述的基于人脸识别的车载音乐推送方法， 其特征在于， 所述音乐模 块根据用户对音乐推送结果的反馈确定是否开启音乐 播放， 具体包括： 文本转语音系 统通过语音播报询问用户是否要听音乐， 您可以回答 “确定”或“取消”， 同时文字显示 “开启音乐播放 ”， 若用户选择 “确定”则开启音乐播放， 所述音乐模块根据所 述用户当前整体情绪播放筛选后的推荐歌单列表， 若用户选择 “取消”或15s未操作， 则不进权　利　要　求　书 1/2 页 2 CN 115391590 A 2行任何操作； 若用户选择 “取消”后超过10分钟， 同时检测到用户情绪未发生变化， 则文本转语音系 统播报询问用户是否要听音乐， 同时文字显示 “开启音乐播放 ”， 用户若选择 “确定”则开启 音乐播放， 进入推荐歌单列表， 若用户选择 “取消”或15s未操作， 则不进行任何操作； 若用户两次选择 “取消”或不操作， 则 本行程中不再触发文本转语音系统进行语音播报 和弹框进行歌单推荐。 10.一种基于人脸识别的车载音乐推送系统， 其特征在于， 包括： 依次设置的人脸视频 采集模块、 人脸识别模块、 整体情绪分析模块和音乐推送模块， 其中： 所述人脸视频采集模块用于采集用户的人脸视频， 得到人脸视频 数据； 所述人脸识别模块用于对所述人脸视频数据进行人脸识别， 以得到所述人脸视频数据 中每帧人脸图像所对应的情绪标签； 所述整体情绪分析模块用于对当前预设时间段内的所述情绪标签进行分析， 以得到用 户当前整体情绪； 所述音乐推送模块用于根据所述用户当前整体情绪向用户推送音乐。权　利　要　求　书 2/2 页 3 CN 115391590 A 3