(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211262251.8 (22)申请日 2022.10.14 (71)申请人 广州宸祺出 行科技有限公司 地址 510700 广东省广州市黄埔区腾飞一 街2号501房 （部位： 5 001） (72)发明人 康雪斌　 (74)专利代理 机构 广州云领专利代理事务所 (普通合伙) 44441 专利代理师 文健航 (51)Int.Cl. G06V 20/59(2022.01) G06V 40/16(2022.01) G06V 10/30(2022.01) G06V 10/32(2022.01) G06V 10/764(2022.01) (54)发明名称 一种基于移动终端判别司机疲劳驾驶的方 法及装置 (57)摘要 本发明公开了一种基于移动终端判别司机 疲劳驾驶的方法及装置， 其中方法包括： 为司机 设置异常值， 并赋值为0； 监测车道偏移次数， 每 次出现异常值加1； 监测驾驶速率异常， 每次出现 异常值加1； 预设时间段内， 若异常值大于 预设的 临界值， 则对司机进行观察； 通过移动终端的摄 像头持续监测司机的行为， 抓取预设的特定行 为； 若司机出现特定行为， 则对司机进行人脸识 别， 以判别司机是否存在疲劳驾驶； 基于判别结 果， 若存在疲劳驾驶， 则暂停司机出车并强制休 息。 本发明通过移动终端本身的功能特性， 从多 维度考虑， 以多层渐进的方式， 实现司机疲劳驾 驶的准确判别。 权利要求书3页 说明书9页 附图2页 CN 115457523 A 2022.12.09 CN 115457523 A 1.一种基于移动终端判别司机疲劳驾驶的方法， 其特 征在于， 包括以下步骤： 为司机设置异常值， 并赋值 为0； 监测车道偏移次数， 每次出现异常值加1； 监测驾驶速率异常， 每次出现异常值加1； 预设时间段内， 若异常值大于预设的临界值， 则对司机进行观察； 通过移动终端的摄 像头持续 监测司机的行为， 抓取 预设的特定行为； 若司机出现特定行为， 则对司机进行 人脸识别， 以判别司机是否存在疲劳驾驶； 基于判别结果， 若存在疲劳驾驶， 则暂停司机出 车并强制休息 。 2.根据权利要求1所述的基于移动终端判别司机疲劳驾驶的方法， 其特征在于， 所述监 测车道偏移次数， 每次出现异常值加1， 具体包括以下子步骤： 基于移动终端中的运动传感器， 获取 车辆的运行轨 迹； 判断车辆的运行轨 迹中， 是否出现车道偏移的情况； 判断车道偏移后修 正所用时间； 将车道偏移并且修 正超出预设时间的异常次数进行统计； 每出现一次车道 异常偏移并修 正， 为司机对应的异常值加1。 3.根据权利要求2所述的基于移动终端判别司机疲劳驾驶的方法， 其特征在于， 所述监 测驾驶速率异常， 每次出现异常值加1， 具体包括以下子步骤： 获取司机历史驾驶车速数据； 获取当前路段 车辆通行的平均驾驶速度； 基于司机的历史驾驶车速数据， 获取司机习惯车速； 将司机习惯车速除以平均驾驶速度， 得到司机的习惯驾驶速率； 基于司机的当前驾驶车速， 除以平均驾驶速度后， 获得司机的当前驾驶速率； 将当前驾驶速率与习惯驾驶速率进行比对； 基于比对结果， 若速率差距超出 预设的范围， 则为司机对应的异常值加1。 4.根据权利要求3所述的基于移动终端判别司机疲劳驾驶的方法， 其特征在于， 所述通 过移动终端的摄 像头持续 监测司机的行为， 抓取 预设的特定行为， 具体包括以下子步骤： 当司机的异常值大于预设临界值时， 向移动终端的摄 像头发出启动指令； 获取预设的特定行为图像， 所述特定行为图像包括揉眼睛、 打哈欠、 甩头、 掐大腿和掌 掴的行为图像； 持续接收来自移动终端的摄 像头拍摄的司机行为； 当将视频中的司机行为与特定行为的图形进行持续比对； 当司机出现特定行为时， 进入下一阶段的疲劳驾驶识别。 5.根据权利要求4所述的基于移动终端判别司机疲劳驾驶的方法， 其特征在于， 所述若 司机出现特定行为， 则对司机进 行人脸识别， 以判别司机是否存在疲劳驾驶， 具体包括以下 子步骤： 当司机行为命中其中一项特定行为时， 通知司机寻找安全位置停车， 以进行进一步的 人脸识别； 采用多帧检测算法， 为司机拍摄面部特写视频， 并分为多帧人脸图像； 获取人脸图像， 进行图像预处 理；权　利　要　求　书 1/3 页 2 CN 115457523 A 2去除人脸图像的噪声以强调有用信 息， 增强图像对比度， 凸显图像细节， 提高人脸图像 质量； 对人脸图像进行归一 化处理， 将图片的特 征属性值调整到同一 量纲， 以提升模型精度； 将人脸图像以及特 征属性值输送到疲劳驾驶识别模型中； 通过嘴部分类 器和眼部分类 器， 提取司机面部的嘴部区域和眼部区域； 对嘴部区域进行 特征判别， 判别其中嘴部形状、 张嘴时长及呼吸速率的异常； 对眼部区域进行 特征判别， 判别其中眼睛形状、 闭 眼时长及眨眼速率的异常； 获取疲劳驾驶识别模型输出的疲劳驾驶判别结果。 6.一种基于移动终端判别司机疲劳驾驶的装置， 其特 征在于， 包括： 异常赋值模块， 其用于为司机设置异常值， 并赋值 为0； 偏移监测模块， 其用于监测车道偏移次数， 每次出现异常值加1； 速率监测模块， 其用于监测驾驶速率异常， 每次出现异常值加1； 初步观察模块， 其用于在预设时间段内， 若异常值大于预设的临界值， 则对司机进行观 察； 行为监测模块， 其用于通过移动终端的摄像头持续监测司机的行为， 抓取预设的特定 行为； 疲劳判别模块， 其用于若司机出现特定行为， 则对司机进行人脸识别， 以判别司机是否 存在疲劳驾驶； 强制执行模块， 其用于基于判别结果， 若存在疲劳驾驶， 则暂停司机出 车并强制休息 。 7.根据权利要求6所述的基于移动终端判别司机疲劳驾驶的装置， 其特征在于， 所述偏 移监测模块在运行时， 具体执 行以下步骤： 基于移动终端中的运动传感器， 获取 车辆的运行轨 迹； 判断车辆的运行轨 迹中， 是否出现车道偏移的情况； 判断车道偏移后修 正所用时间； 将车道偏移并且修 正超出预设时间的异常次数进行统计； 每出现一次车道 异常偏移并修 正， 为司机对应的异常值加1。 8.根据权利要求7所述的基于移动终端判别司机疲劳驾驶的装置， 其特征在于， 所述速 率监测模块在运行时， 具体执 行以下步骤： 获取司机历史驾驶车速数据； 获取当前路段 车辆通行的平均驾驶速度； 基于司机的历史驾驶车速数据， 获取司机习惯车速； 将司机习惯车速除以平均驾驶速度， 得到司机的习惯驾驶速率； 基于司机的当前驾驶车速， 除以平均驾驶速度后， 获得司机的当前驾驶速率； 将当前驾驶速率与习惯驾驶速率进行比对； 基于比对结果， 若速率差距超出 预设的范围， 则为司机对应的异常值加1。 9.根据权利要求8所述的基于移动终端判别司机疲劳驾驶的装置， 其特征在于， 所述行 为监测模块在运行时， 具体执 行以下步骤： 当司机的异常值大于预设临界值时， 向移动终端的摄 像头发出启动指令； 获取预设的特定行为图像， 所述特定行为图像包括揉眼睛、 打哈欠、 甩头、 掐大腿和掌权　利　要　求　书 2/3 页 3 CN 115457523 A 3