(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211258586.2 (22)申请日 2022.10.14 (71)申请人 上海爱乐克智能科技有限公司 地址 201800 上海市嘉定区安亭镇 安拓路 56弄11号8单元402室 (72)发明人 陈萱仪　洪晨辉　陈芳　 (51)Int.Cl. G06V 40/16(2022.01) G06V 20/59(2022.01) (54)发明名称 一种驾驶员情绪可视化辅助驾驶行为决策 系统 (57)摘要 本发明涉及情感交互技术领域， 并公开了一 种基于色彩心理学的驾驶员情绪可视化辅助驾 驶行为决策系统， 所述系统包括视频图像采集模 块； 面部追踪模块； 实时情绪识别模块； 驾驶行为 数据库模块， 用于记录驾驶员驾驶行为数据； 驾 驶行为监测分析模块， 用于监测驾驶员的当前驾 驶行为并分析得到对应驾驶行为下的代码； 驾驶 行为优化模型； 情绪颜色及图案输出模块， 用于 输出对应代码下的情绪颜色及图案， 本发明可以 有效辅助驾驶员主观调节情绪倾向与驾驶员情 绪可视化显示， 使驾驶员直观清晰地意识到自身 的情绪， 进而利用情绪对于驾驶行为及认知产生 的正面效益， 增 加驾驶安全。 权利要求书2页 说明书4页 CN 115497145 A 2022.12.20 CN 115497145 A 1.一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策系统， 其特征在于， 所 述系统包括： 视频图像采集模块， 用于采集驾驶员面部 视频图像； 面部追踪模块， 用于对驾驶员的视频图像进行面部追踪， 获取驾驶员的面部区域图像； 实时情绪识别模块， 用于对驾驶员实时面部表情的情绪识别并分析 得到对应的代码； 驾驶行为数据库模块， 用于记录驾驶员驾驶行为数据； 驾驶行为监测分析模块， 用于监测驾驶员的当前驾驶行为并分析得到对应驾驶行为下 的代码； 驾驶行为优化模型， 用于对当前驾驶行为进行优化得到该驾驶行为下的最佳情绪， 并 分析得到其对应代码； 情绪颜色及图案 输出模块， 用于 输出对应代码下的情绪颜色及图案 。 2.根据权利要求1所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特征在于， 所述情绪颜色及图案输出模块包括当前情绪和 “最佳情绪 ”对应的颜色 及图案。 3.根据权利要求1所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特征在于， 所述面部追踪模块采用背景差分法进行患者面部追踪， 其具体步骤如 下： 将当前每一帧图像与事先存储的背景图像相减， 计算出与背景偏离超过一定 阈值的区 域作为运动区域， 即驾驶员的面部区域。 4.根据权利要求3所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特征在于， 所述面部追踪模块的背景差分法采用混合高斯模型描述背景图像像素 值的分布， 将图像的当前像素值是否符合该分布作为前 景点和背景点判别的依据。 5.根据权利要求1所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特征在于， 所述驾驶员驾驶过程中包括8种情绪以及颜色代码， 分别为愤怒 （# DA5297） 、 厌恶 （#AF71AD） 、 悲伤 （#6FCAF4） 、 惊喜 （#84C59F） 、 恐惧 （#BAD36F） 、 信任 （# D8DB3D） 、 开心 （#F1E728） 和警觉 （#FDCF 7F） 。 6.根据权利要求1所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特 征在于， 所述驾驶行为 监测分析模块的驾驶员驾驶行为 监测分析 过程如下： 驾驶行为监测分析模块监测分析驾驶员当前的驾驶行为 （如倒车时在ADAS辅助下躲避 盲区障碍物、 定速巡航时驾驶员接管等） 及没有响应系统指示及警告 （误操作） ， 接着 检索预 设的驾驶行为数据库模块得到 当前驾驶行为对应代码， 并统计得到 当前驾驶行为中出现的 误操作次数。 7.根据权利要求6所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特 征在于， 所述驾驶行为优化模型， 其具体过程包括： 使用驾驶员实时情绪对应的代码、 当前驾驶行为对应代码以及当前驾驶行为中出现的 误操作次数对由驾驶行为预测 “最佳情绪 ”的模型进 行优化修正， 在得到优化后的由驾驶行 为推测“最佳情绪 ”的模型后， 根据当前驾驶行为对应代码通过驾驶行为代码到 “最佳情绪 ” 的映射得到 当前驾驶行为下的 “最佳情绪 ”对应代码， 并通过情绪代码到对应颜色及图案的 映射， 得到当前情绪和 “最佳情绪 ”所分别对应的颜色及图案 。权　利　要　求　书 1/2 页 2 CN 115497145 A 28.根据权利要求1所述的一种基于色彩心理学的驾驶员情绪可视化辅助驾驶行为决策 系统， 其特 征在于， 所述系统的使用步骤 包括： 驾驶员进行驾驶状态时， 视频图像采集模块开始捕捉包含驾驶员完整正面的影像， 面 部追踪模块 获取驾驶员实时面部表情视频， 使用实时情绪识别模块对驾驶员实时面部表情 视频进行分析 得到驾驶员实时情绪对应的代码； 驾驶行为监测分析模块监测分析驾驶员的驾驶行为， 并基于预设的驾驶行为数据库得 到当前驾驶行为对应代码； 在得到优化后的由驾驶行为推测 “最佳情绪 ”的模型后， 根据当前驾驶行为对应代码通 过驾驶行为代码到 “最佳情绪 ”的映射得到 当前驾驶行为下的 “最佳情绪 ”对应代码， 并通过 情绪代码到对应颜色及图案的映射， 得到当前情绪和 “最佳情绪 ”所分别对应的颜色及图 案； 通过情绪颜色及图案输出模块分别将当前情绪和 “最佳情绪 ”对应的颜色及图案投影 显示在驾驶员前 方的挡风玻璃上。权　利　要　求　书 2/2 页 3 CN 115497145 A 3