(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211053590.5 (22)申请日 2022.08.31 (71)申请人 长城汽车股份有限公司 地址 071000 河北省保定市莲池区朝阳南 大街2266号 (72)发明人 胡束芒　林枝叶　赵龙　吴会肖　 颉毅　 (74)专利代理 机构 深圳中一联合知识产权代理 有限公司 4 4414 专利代理师 丁月蓉 (51)Int.Cl. G06V 20/59(2022.01) G06V 40/16(2022.01) G06V 10/80(2022.01) (54)发明名称 一种人员状态的检测方法、 装置、 车载终端 及存储介质 (57)摘要 本申请适用于汽 车技术领域， 提供了一种人 员状态的检测方法、 装置、 车载终端及计算机可 读存储介质， 所述方法包括： 获取驾驶车辆的目 标人员的人脸图像数据以及车辆的行驶参数数 据； 根据人脸图像数据以及行驶参数数据， 确定 目标人员的状态。 与现有技术中仅根据面部特征 相比， 本申请提供的人员状态的检测方法结合了 目标人员的人脸图像数据和车辆的行驶参数数 据， 在进一步考虑车辆的行驶参数数据的基础 上， 提高了人员状态的检测准确率。 权利要求书2页 说明书11页 附图4页 CN 115393832 A 2022.11.25 CN 115393832 A 1.一种人员状态的检测方法， 其特 征在于， 包括： 获取驾驶车辆的目标 人员的人脸图像数据以及所述车辆的行驶 参数数据； 根据所述人脸图像数据以及所述行驶 参数数据， 确定所述目标 人员的状态。 2.如权利要求1所述的检测方法， 其特征在于， 所述根据 所述人脸图像数据以及所述行 驶参数数据， 确定所述目标 人员的状态， 包括： 对所述人脸图像数据进行 特征提取， 得到所述目标 人员的面部特 征数据； 将所述面部特征数据和所述行驶 参数数据融合， 得到融合特 征数据； 根据所述融合特 征数据， 确定所述目标 人员的状态。 3.如权利要求2所述的检测方法， 其特征在于， 所述将所述面部特征数据和所述行驶参 数数据融合， 得到融合特 征数据， 包括： 将所述面部特征数据表示为面部特征矩阵， 所述面部特征矩阵的元素由各个不同时刻 采集到的所述目标 人员的人脸图像的面部特 征数据构成； 将所述行驶参数数据表示为参数特征矩阵， 所述参数特征矩阵的元素由所述各个不同 时刻采集到的所述车辆的行驶 参数数据构成； 对所述面部特征矩阵和所述 参数特征矩阵执 行加权求和操作， 得到融合特 征矩阵； 相应的， 所述 根据所述融合特 征数据， 确定所述目标 人员的状态， 包括： 根据所述融合特 征矩阵确定所述目标 人员的状态。 4.如权利要求3所述的检测方法， 其特征在于， 所述对所述面部特征矩阵和所述参数特 征矩阵执 行加权求和操作， 得到融合特 征矩阵， 包括： 获取所述车辆所处的环境信息； 根据所述环境信息和所述行驶 参数数据确定交通场景信息； 根据所述交通场景信息确定第一权 重和第二权 重； 对所述面部特征矩阵与所述第 一权重的乘积， 以及所述参数特征矩阵与所述第 二权重 的乘积进行求和操作， 得到所述融合特 征矩阵。 5.如权利要求4所述的检测方法， 其特征在于， 所述根据 所述环境信 息和所述行驶参数 数据确定交通场景信息， 包括： 根据所述环境信息确定风险等级参数； 根据所述行驶 参数数据确定所述目标 人员的驾驶行为信息； 根据所述 风险等级参数和所述驾驶行为信息确定所述交通场景信息 。 6.如权利要求4所述的检测方法， 其特征在于， 在所述确定所述目标人员的状态之后， 还包括： 根据所述交通场景信息和所述目标 人员的状态， 输出提 示信息。 7.如权利要求3 ‑6任一项所述的检测方法， 其特征在于， 所述融合特征矩阵包括所述各 个不同时刻下的融合特征； 每个时刻下的融合特征由所述时刻 采集到的所述面部特征数据 和所述行驶参数数据执行加权求和操作得到； 所述根据所述融合特征矩阵确定所述目标人 员的状态， 包括： 将所述融合特征矩阵输入至已训练 的状态检测网络进行处理， 得到所述目标人员的状 态； 其中， 所述状态检测网络包括多个 状态检测子网络； 所述状态检测网络用于将所述各个不同时刻下的融合特征分别输入各个所述状态检权　利　要　求　书 1/2 页 2 CN 115393832 A 2测子网络进行处理， 得到所述各个不同时刻对应的初始状态概率矩阵； 根据下一时刻对应 的初始状态概率矩阵对上一时刻 对应的初始状态 概率矩阵进 行修正， 得到所述上一时刻 对 应的修正状态概率矩阵； 对所述各个时刻对应的修正状态概率矩阵执行求和操作， 得到目 标状态概率矩阵； 将所述目标状态概率矩阵中大于预设阈值的概率值对应的状态确定为所 述目标人员的状态。 8.一种人员状态的检测装置， 其特 征在于， 包括： 第一获取单元， 用于获取驾驶车辆的目标人员的人脸图像数据以及所述车辆的行驶参 数数据； 第一确定单元， 用于根据所述人脸图像数据以及所述行驶参数数据， 确定所述目标人 员的状态。 9.一种车载终端， 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器上 运行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求1至7 任一项所述的人员状态的检测方法。 10.一种计算机可读存储介质， 所述计算机可读存储介质存储有计算机程序， 其特征在 于， 所述计算机程序被处理器执行时实现如权利要求 1至7任一项 所述的人员状态的检测方 法。权　利　要　求　书 2/2 页 3 CN 115393832 A 3