[go: up one dir, main page]

CN110766912A - 驾驶预警方法、设备及计算机可读存储介质 - Google Patents

驾驶预警方法、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN110766912A
CN110766912A CN201810851573.3A CN201810851573A CN110766912A CN 110766912 A CN110766912 A CN 110766912A CN 201810851573 A CN201810851573 A CN 201810851573A CN 110766912 A CN110766912 A CN 110766912A
Authority
CN
China
Prior art keywords
driver
preset
fatigue
head
position information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810851573.3A
Other languages
English (en)
Other versions
CN110766912B (zh
Inventor
张长隆
罗水强
李智勇
肖德贵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidi Intelligent Driving Technology Co ltd
Original Assignee
Changsha Intelligent Driving Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changsha Intelligent Driving Research Institute Co Ltd filed Critical Changsha Intelligent Driving Research Institute Co Ltd
Priority to CN201810851573.3A priority Critical patent/CN110766912B/zh
Publication of CN110766912A publication Critical patent/CN110766912A/zh
Application granted granted Critical
Publication of CN110766912B publication Critical patent/CN110766912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了一种驾驶预警方法,该方法包括:采集驾驶员的面部图像,根据预设的人脸检测算法和人脸特征点对齐算法,对所述面部图像进行分析,得到驾驶员面部特征点的位置信息;根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿态是否满足预设的异常条件,和/或,根据所述位置信息识别所述驾驶员的疲劳程度;当所述驾驶员的头部姿态满足预设的异常条件,或者当所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒。本发明还公开了一种驾驶预警设备和一种计算机可读存储介质。本发明能够实现对驾驶员的生理异常状况做出有效的检测和预警,从而保障驾驶安全。

Description

驾驶预警方法、设备及计算机可读存储介质
技术领域
本发明涉及智能驾驶技术领域,尤其涉及驾驶预警方法、设备及计算机 可读存储介质。
背景技术
随着人们生活水平的提高,汽车已进入了千家万户,汽车的行驶安全越 来越成为了人们关注的问题,汽车行驶过程中驾驶员疲劳驾驶、注意力不集 中等问题,更是成为了汽车行驶过程中的安全隐患,如何对疲劳驾驶、注意 力不集中等驾驶员生理异常状况做出有效的检测和预警,成为了目前亟待解 决的问题。
发明内容
本发明的主要目的在于提出一种驾驶预警方法、设备及计算机可读存储 介质,旨在实现对驾驶员的生理异常状况做出有效的检测和预警,从而保障 驾驶安全。
为实现上述目的,本发明提供一种驾驶预警方法,所述驾驶预警方法包 括如下步骤:
采集驾驶员的面部图像,根据预设的人脸检测算法和人脸特征点对齐算 法,对所述面部图像进行分析,得到驾驶员面部特征点的位置信息;
根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿 态是否满足预设的异常条件,和/或,根据所述位置信息识别所述驾驶员的疲 劳程度;
当所述驾驶员的头部姿态满足预设的异常条件,或者当所述驾驶员的疲 劳程度满足预设的预警条件时,触发相应的预警提醒。
优选地,所述根据所述位置信息确定驾驶员的头部姿态,并判断所述驾 驶员的头部姿态是否满足预设的异常条件的步骤包括:
获取预设判断周期内所述驾驶员面部特征点的位置信息,根据预设的几 何投影算法将所述位置信息转换为驾驶员的头部偏角数据;
根据所述头部偏角数据识别所述驾驶员的头部偏离状态;
在所述判断周期内,根据所述头部偏离状态检测是否存在所述驾驶员的 单次头部偏离持续时长达到第一预设时长;
若存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则判定 所述驾驶员的头部姿态满足预设的异常条件。
优选地,所述头部偏角数据包括水平偏角和竖直偏角,所述根据所述头 部偏角数据识别所述驾驶员的头部偏离状态的步骤包括:
判断所述水平偏角是否落在预设的水平偏角区间,及所述竖直偏角是否 落在预设的竖直偏角区间;
当所述水平偏角未落在预设的水平偏角区间,或者所述竖直偏角未落在 预设的竖直偏角区间时,判定所述驾驶员当前处于头部偏离状态。
优选地,所述在所述判断周期内,根据所述头部偏离状态检测是否存在 所述驾驶员的单次头部偏离持续时长达到第一预设时长的步骤之后,还包括:
若不存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则统 计所述判断周期内所述驾驶员处于头部偏离状态的累积时长;
判断所述累积时长在所述判断周期内的占比是否达到预设值;
若所述累积时长在所述判断周期内的占比达到预设值,则判定所述驾驶 员的头部姿态满足预设的异常条件。
优选地,所述采集驾驶员的面部图像的步骤包括:
在采集驾驶员面部图像的过程中,检测是否存在第二预设时长内未采集 到任何驾驶员的面部图像;
若存在第二预设时长内未采集到任何驾驶员的面部图像,则判定所述驾 驶员的头部姿态满足预设的异常条件。
优选地,所述根据所述位置信息识别所述驾驶员的疲劳程度的步骤包括:
获取预设识别周期内所述驾驶员面部特征点的位置信息,根据所述位置 信息分别计算所述驾驶员眼睛和嘴部的高宽比;
根据所述眼睛和嘴部的高宽比对应识别所述驾驶员的眼睛睁闭状态和打 哈欠状态;
根据识别出的所述眼睛睁闭状态和打哈欠状态计算预设的疲劳特征参 数;
将计算得到的所述疲劳特征参数输入至预设分类器中,以使所述分类器 输出与预设的疲劳等级对应的响应值;
将不同疲劳等级对应的响应值的大小进行比较,根据比较结果从所述预 设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度的识别结果。
优选地,所述将不同疲劳等级对应的响应值的大小进行比较,根据比较 结果从所述预设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度 的识别结果的步骤包括:
计算所述响应值中最大值和次大值的差值,判断所述差值是否大于或等 于预设阈值;
若所述差值大于或等于预设阈值,则将所述最大值对应的疲劳等级作为 所述驾驶员的疲劳程度的识别结果;
若所述差值小于预设阈值,则统计所述识别周期内所述驾驶员打哈欠的 次数;
若所述驾驶员打哈欠的次数大于或等于预设次数,则将所述最大值和次 大值所对应的疲劳等级中较高的疲劳等级作为所述驾驶员的疲劳程度的识别 结果;
若所述驾驶员打哈欠的次数小于预设次数,则将所述最大值和次大值所 对应的疲劳等级中较低的疲劳等级作为所述驾驶员的疲劳程度的识别结果。
优选地,所述驾驶员的疲劳程度包括清醒、轻度疲劳和深度疲劳,所述 当所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒的步 骤包括:
当识别出所述驾驶员的疲劳程度为轻度疲劳或深度疲劳时,触发相应的 预警提醒,其中所述深度疲劳对应的提醒频率高于所述轻度疲劳对应的提醒 频率。
此外,为实现上述目的,本发明还提供一种驾驶预警设备,所述驾驶预 警设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运 行的驾驶预警程序,所述驾驶预警程序被所述处理器执行时实现如上所述的 驾驶预警方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述 计算机可读存储介质上存储有驾驶预警程序,所述驾驶预警程序被处理器执 行时实现如上所述的驾驶预警方法的步骤。
本发明提出的驾驶预警方法,通过获取驾驶员面部特征点的位置信息, 进而根据该位置信息检测驾驶员头部姿态的异常情况,以及检测驾驶员的疲 劳程度,并最终根据这两者触发相应的异常提醒,实现了对驾驶员的注意力 不集中、疲劳等生理异常状况做出有效的检测和预警,保障了驾驶安全。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图;
图2为本发明驾驶预警方法第一实施例的流程示意图;
图3为图2中步骤根据所述位置信息确定驾驶员的头部姿态,并判断所述 驾驶员的头部姿态是否满足预设的异常条件的细化步骤示意图;
图4为本发明实施例中通过滑动数据窗口采集驾驶员面部特征点的位置 信息的示意图;
图5为本发明实施例中通过数据流方式采集数据的示意图;
图6为图2中步骤根据所述位置信息识别所述驾驶员的疲劳程度的细化步 骤示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步 说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限 定本发明。
本发明实施例的主要解决方案是:采集驾驶员的面部图像,根据预设的 人脸检测算法和人脸特征点对齐算法,对所述面部图像进行分析,得到驾驶 员面部特征点的位置信息;根据所述位置信息确定驾驶员的头部姿态,并判 断所述驾驶员的头部姿态是否满足预设的异常条件,和/或,根据所述位置信 息识别所述驾驶员的疲劳程度;当所述驾驶员的头部姿态满足预设的异常条 件,或者当所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警 提醒。
目前,汽车的行驶安全越来越成为了人们关注的问题,汽车行驶过程中 驾驶员疲劳驾驶、注意力不集中等问题,更是成为了汽车行驶过程中的安全 隐患,如何对疲劳驾驶、注意力不集中等驾驶员生理异常状况做出有效的检 测和预警,成为了目前亟待解决的问题。
本发明提出的驾驶预警方法,通过获取驾驶员面部特征点的位置信息, 进而根据该位置信息检测驾驶员头部姿态的异常情况,以及检测驾驶员的疲 劳程度,并最终根据这两者触发相应的异常提醒,实现了对驾驶员的生理异 常状况做出有效的检测和预警,保障了驾驶安全。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的设备结构 示意图。
本发明实施例驾驶预警设备可以是车载终端,该驾驶预警设备包括一摄 像头,用于采集驾驶员的面部图像。
如图1所示,该驾驶预警设备可以包括:处理器1001,例如CPU,网络接 口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002 用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、 输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线 接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口 (如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储 器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独 立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的设备结构并不构成对设备的限 定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部 件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系 统、网络通信模块、用户接口模块以及驾驶预警程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台 服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客 户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的驾驶 预警程序,并执行以下操作:
采集驾驶员的面部图像,根据预设的人脸检测算法和人脸特征点对齐算 法,对所述面部图像进行分析,得到驾驶员面部特征点的位置信息;
根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿 态是否满足预设的异常条件,和/或,根据所述位置信息识别所述驾驶员的疲 劳程度;
当所述驾驶员的头部姿态满足预设的异常条件,或者当所述驾驶员的疲 劳程度满足预设的预警条件时,触发相应的预警提醒。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
获取预设判断周期内所述驾驶员面部特征点的位置信息,根据预设的几 何投影算法将所述位置信息转换为驾驶员的头部偏角数据;
根据所述头部偏角数据识别所述驾驶员的头部偏离状态;
在所述判断周期内,根据所述头部偏离状态检测是否存在所述驾驶员的 单次头部偏离持续时长达到第一预设时长;
若存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则判定 所述驾驶员的头部姿态满足预设的异常条件。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
判断所述水平偏角是否落在预设的水平偏角区间,及所述竖直偏角是否 落在预设的竖直偏角区间;
当所述水平偏角未落在预设的水平偏角区间,或者所述竖直偏角未落在 预设的竖直偏角区间时,判定所述驾驶员当前处于头部偏离状态。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
若不存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则统 计所述判断周期内所述驾驶员处于头部偏离状态的累积时长;
判断所述累积时长在所述判断周期内的占比是否达到预设值;
若所述累积时长在所述判断周期内的占比达到预设值,则判定所述驾驶 员的头部姿态满足预设的异常条件。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
在采集驾驶员面部图像的过程中,检测是否存在第二预设时长内未采集 到任何驾驶员的面部图像;
若存在第二预设时长内未采集到任何驾驶员的面部图像,则判定所述驾 驶员的头部姿态满足预设的异常条件。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
获取预设识别周期内所述驾驶员面部特征点的位置信息,根据所述位置 信息分别计算所述驾驶员眼睛和嘴部的高宽比;
根据所述眼睛和嘴部的高宽比对应识别所述驾驶员的眼睛睁闭状态和打 哈欠状态;
根据识别出的所述眼睛睁闭状态和打哈欠状态计算预设的疲劳特征参 数;
将计算得到的所述疲劳特征参数输入至预设分类器中,以使所述分类器 输出与预设的疲劳等级对应的响应值;
将不同疲劳等级对应的响应值的大小进行比较,根据比较结果从所述预 设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度的识别结果。
进一步地,处理器1001可以调用存储器1005中存储的驾驶预警程序, 还执行以下操作:
计算所述响应值中最大值和次大值的差值,判断所述差值是否大于或等 于预设阈值;
若所述差值大于或等于预设阈值,则将所述最大值对应的疲劳等级作为 所述驾驶员的疲劳程度的识别结果;
若所述差值小于预设阈值,则统计所述识别周期内所述驾驶员打哈欠的 次数;
若所述驾驶员打哈欠的次数大于或等于预设次数,则将所述最大值和次 大值所对应的疲劳等级中较高的疲劳等级作为所述驾驶员的疲劳程度的识别 结果;
若所述驾驶员打哈欠的次数小于预设次数,则将所述最大值和次大值所 对应的疲劳等级中较低的疲劳等级作为所述驾驶员的疲劳程度的识别结果。
进一步地,所述驾驶员的疲劳程度包括清醒、轻度疲劳和深度疲劳,处 理器1001可以调用存储器1005中存储的驾驶预警程序,还执行以下操作:
当识别出所述驾驶员的疲劳程度为轻度疲劳或深度疲劳时,触发相应的 预警提醒,其中所述深度疲劳对应的提醒频率高于所述轻度疲劳对应的提醒 频率。
本发明驾驶预警设备的具体实施例与下述驾驶预警方法的各个实施例基 本相同,此处不作赘述。
基于上述硬件结构,提出本发明驾驶预警方法实施例。
参照图2,图2为本发明驾驶预警方法第一实施例的流程示意图,所述方 法包括:
步骤S10,采集驾驶员的面部图像,根据预设的人脸检测算法和人脸特征 点对齐算法,对所述面部图像进行分析,得到驾驶员面部特征点的位置信息;
本实施例中,在车辆行驶过程中,驾驶预警设备可以通过红外补光摄像 头实时采集驾驶员的面部图像,通过采用红外补光摄像头,能够在环境光线 较暗的情况下拍清驾驶员的面部,并且可以在驾驶员佩戴墨镜的情况下拍清 驾驶员的眼睛。
在采集到驾驶员的面部图像后,再根据预设的人脸检测算法和人脸特征 点对齐算法,对所述面部图像进行分析,以得到驾驶员面部特征点的位置信 息,该位置信息可以包括不同的人脸特征点的编号及位置坐标。其中,人脸 检测算法可以为Haar(哈尔)级联分类算法,或者基于DLIB库的SVM(Support Vector Machine,支持向量机)人脸检测算法,人脸特征点对齐算法可以为SDM (Supvised Descent Method,监督下降法)人脸特征点对齐算法,或者CLNF (Constrained Local Neural Field model,受约束的局部神经场)人脸特征点对 齐算法,具体实施时,可以根据配置文件灵活配置不同的算法组合形式。
通过上述算法对面部图像进行分析以得到驾驶员面部特征点的位置信息 的具体方式可参照现有技术,此处不作赘述。通过采用预设算法将驾驶员的 面部图像转换为面部特征点的位置信息,可以得到每帧面部图像所对应的面 部特征点的位置信息。
步骤S20,根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员 的头部姿态是否满足预设的异常条件,和/或,根据所述位置信息识别所述驾 驶员的疲劳程度;
在得到驾驶员面部特征点的位置信息后,根据该位置信息分别对驾驶员 进行头部姿态检测和疲劳程度检测。
在进行疲劳程度检测时,可以根据位置信息计算驾驶员眼部和嘴部的高 宽比,进而识别驾驶员的眼睛睁闭状态和打哈欠状态,然后根据一段时间内 驾驶员的眼睛睁闭状态和打哈欠状态判断驾驶员的疲劳程度,其中疲劳程度 的判断方式可灵活设置,比如当检测到一段时间内驾驶员打哈欠的次数超过 预设次数时,判定驾驶员为疲劳驾驶。
在进行头部姿态检测时,作为一种实施方式,参照图3,图3为图2中步 骤根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿态 是否满足预设的异常条件的细化步骤示意图,该步骤可以包括:
步骤S21,获取预设判断周期内所述驾驶员面部特征点的位置信息,根据 预设的几何投影算法将所述位置信息转换为驾驶员的头部偏角数据;
步骤S22,根据所述头部偏角数据识别所述驾驶员的头部偏离状态;
步骤S23,在所述判断周期内,根据所述头部偏离状态检测是否存在所述 驾驶员的单次头部偏离持续时长达到第一预设时长;
若存在,则执行步骤S24,判定所述驾驶员的头部姿态满足预设的异常条 件。
参照图4,图4为本发明实施例中通过滑动数据窗口采集驾驶员面部特征 点的位置信息的示意图。具体地,可以预先设定一个判断周期(如2s),该 判断周期用于表示每次判断驾驶员的头部姿态是否异常的间隔时长,驾驶员 面部特征点的位置信息数据可以通过滑动数据窗口的形式进行采集,比如将 一个判断周期内数据窗口的长度设置为5s,滑动步长设置为2s,则首次采集 5秒内的数据(对应窗口一)作为第一个判断周期的分析对象,之后隔2秒采 集长度为5s的数据(对应窗口二)作为后续判断周期的分析对象。这种重叠方式采集数据的依据是驾驶员做出动作的过程是连续性的,下一帧保留上一 帧的部分数据,可以表现出这种连续的过程,且可以避免因图像帧数据不连 续的误检,从而提高检测的精确度。
针对某一判断周期进行判断时,首先获取该判断周期内各个时间点的驾 驶员面部特征点的位置信息,然后根据预设的几何投影算法将位置信息转换 为驾驶员的头部偏角数据,其中头部偏角数据包括水平偏角和竖直偏角,水 平偏角表示驾驶员当前头部在水平方向相对于预设标准头部位置的偏离角 度,竖直偏角表示驾驶员当前头部在竖直方向相对于预设标准头部位置的偏 离角度。
具体将位置信息转换为驾驶员的头部偏角数据的转换过程可以如下:
在一实施方式中,位置信息包括68个对齐的人脸特征点数据,其中第0 号点至第16号点标注了人脸的轮廓,第17号点至第21号点标注了右侧眉毛 区域,第22号点至第26号点标注了左侧眉毛区域,第27号点至第35号点 标注了鼻子区域,第36号点至第41号点标注了右侧眼睛区域,第42号点至 第47号点标注了左侧眼睛区域,第48号点至第67号点标注了嘴巴区域;在 计算头部偏角数据时,选取68个特征点中的左右眼睛眼角位置的点(4个),鼻尖位置的点(1个),嘴角位置的点2个,总共7个人脸特征点,和对应的 标准化人脸上对应的点做矩阵乘积,得到当前人脸相对于标准化人脸的旋转 矩阵,再利用旋转矩阵和欧拉角之间的换算公式,计算出当前人脸各个方向 上的偏转角度。
之后,再根据头部偏角数据识别驾驶员的头部偏离状态,具体识别过程 可以为:判断所述水平偏角是否落在预设的水平偏角区间,及所述竖直偏角 是否落在预设的竖直偏角区间;当所述水平偏角未落在预设的水平偏角区间, 或者所述竖直偏角未落在预设的竖直偏角区间时,判定所述驾驶员当前处于 头部偏离状态。
需要说明的是,上述水平偏角区间和竖直偏角区间可以通过预设的机器 学习算法进行学习得到,具体学习过程为:当驾驶员初始进入驾驶状态后, 驾驶员保持头部面向汽车前方,此时根据上述几何投影算法统计一段时间内 的驾驶员头部姿态的水平偏角和竖直偏角,以得到水平偏角集合和竖直偏角 集合;然后,分别求取这两个集合数据的均值及标准差,并结合平均值和标 准差构建驾驶员初始状态的水平方向和垂直方向的初始偏角范围,其中水平 方向范围阈值:
Figure RE-GDA0001987973530000111
垂直方向范围阈值:
Figure RE-GDA0001987973530000112
之 后,根据预设经验值对水平方向范围阈值和垂直方向范围阈值进行适当调整, 从而得到最终水平偏角区间和最终竖直偏角区间,比如水平偏角区间可以为, 竖直偏角区间可以为[ymin-10°,ymax+10°]。
当前驾驶员头部的水平偏角未落在预设的水平偏角区间,说明驾驶员当 前头部在水平方向上偏离正前方程度较大,此时可判定驾驶员当前处于头部 偏离状态;同理,当前驾驶员头部的竖直偏角未落在预设的竖直偏角区间, 说明驾驶员当前头部在竖直方向上偏离正前方程度较大,此时亦判定驾驶员 当前处于头部偏离状态。
通过机器学习算法计算水平偏角区间和竖直偏角区间,实现了根据不同 驾驶员的不同驾驶习惯进行区间设定,也即能够自适应不同驾驶员的头部偏 角,将该水平偏角区间和竖直偏角区间作为后续驾驶员头部偏离状态的判断 标准,能够提高判断的准确性。当然,水平偏角区间和竖直偏角区间也可以 直接人为设定,具体实施时可灵活设置。
基于一个判断周期,在识别出驾驶员各个时间点的头部偏离状态后,再 引入预设规则判断驾驶员的头部姿态是否满足预设的异常条件。作为一种判 断方式,可以检测所述判断周期内是否存在驾驶员的单次头部偏离持续时长 达到第一预设时长,如2s,若是,则可判定驾驶员的头部姿态满足预设的异 常条件。
进一步地,若不存在所述驾驶员的单次头部偏离持续时长达到第一预设 时长,则统计所述判断周期内所述驾驶员处于头部偏离状态的累积时长;判 断所述累积时长在所述判断周期内的占比是否达到预设值;若所述累积时长 在所述判断周期内的占比达到预设值,则判定所述驾驶员的头部姿态满足预 设的异常条件。比如,当判断周期为2s,如果2s内驾驶员处于头部偏离状态 的累积时长为1.4s,达到预设占比70%,此时即可判定驾驶员的头部姿态满 足预设的异常条件。
具体地,在统计所述判断周期内驾驶员处于头部偏离状态的累积时长时, 需要进行驾驶员单次偏头时长的检测,该单次偏头时长的检测可采用数据流 的方式,参照图5,图5为本发明实施例中通过数据流方式采集数据的示意图, 其中,数据1、数据2、数据3分别为在一段预设时长内采集到的数据流,对 每一数据流,可以从首次检测到驾驶员头部姿态异常行为时开始计时,在计 时过程中判断驾驶员头部姿态异常状态持续时间是否超过预设时间,若是, 即将本次计时时长累加到驾驶员头部姿态异常持续时间中,若否,则说明驾驶员在超过设定阈值时间界限前恢复了正常姿态且满足驾驶员正常的反应时 间,例如:0.15秒,此时放弃将本次计时时长累加到驾驶员头部姿态异常持 续时间中。
上述累积方式有一个假定,首先假设驾驶员的行为具有连续性,因此, 在极短的时间内驾驶员的行为不会出现剧烈的波动,据此可以排除在一段数 据内值偏高或偏低的异常数据点;其次,根据相关资料可以知道驾驶员采取 行动的反应时间为0.1~0.2s,可以根据驾驶员反应时间这个阈值来断定当前驾 驶员是做出了动作还是数据采集的偏差。
进一步地,除上述判断规则外,还可以在采集驾驶员面部图像的过程中, 检测是否存在第二预设时长内未采集到任何驾驶员的面部图像;若存在第二 预设时长内未采集到任何驾驶员的面部图像,则判定所述驾驶员的头部姿态 满足预设的异常条件。比如,若持续3s内未采集到任何驾驶员的面部图像, 则可判定驾驶员的头部姿态满足预设的异常条件。
步骤S30,当所述驾驶员的头部姿态满足预设的异常条件,或者当所述驾 驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒。
该步骤中,当判定驾驶员的头部姿态满足预设的异常条件,或者驾驶员 的疲劳程度满足预设的预警条件时,触发相应的预警提醒,具体的提醒方式 包括但不限于语音、提示灯等。比如,当判定驾驶员的头部姿态满足预设的 异常条件时,说明驾驶员注意力不集中,此时可以输出提醒语音“请驾驶员 注意前方道路”;当驾驶员的疲劳程度满足预设的预警条件时,说明驾驶员 处于疲劳状态,此时可以输出提醒语音“请驾驶员降低车速或停车休息”。
本实施例提出的驾驶预警方法,通过获取驾驶员面部特征点的位置信息, 进而根据该位置信息检测驾驶员头部姿态的异常情况,以及检测驾驶员的疲 劳程度,并最终根据这两者触发相应的异常提醒,实现了对驾驶员的注意力 不集中、疲劳等生理异常状况做出有效的检测和预警,保障了驾驶安全。
进一步地,基于本发明驾驶预警方法第一实施例,提出本发明驾驶预警 方法第二实施例。
参照图6,图6为图2中步骤根据所述位置信息识别所述驾驶员的疲劳程 度的细化步骤示意图,该步骤可以包括:
步骤S25,获取预设识别周期内所述驾驶员面部特征点的位置信息,根据 所述位置信息分别计算所述驾驶员眼睛和嘴部的高宽比;
步骤S26,根据所述眼睛和嘴部的高宽比对应识别所述驾驶员的眼睛睁闭 状态和打哈欠状态;
步骤S27,根据识别出的所述眼睛睁闭状态和打哈欠状态计算预设的疲劳 特征参数;
步骤S28,将计算得到的所述疲劳特征参数输入至预设分类器中,以使所 述分类器输出与预设的疲劳等级对应的响应值;
步骤S29,将不同疲劳等级对应的响应值的大小进行比较,根据比较结果 从所述预设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度的识 别结果。
本实施例中,在进行疲劳程度检测时,可以预先设定一个识别周期(如 2s),该识别周期用于表示每次识别驾驶员的疲劳程度的间隔时长。针对某一 识别周期进行疲劳程度识别时,首先获取该识别周期内各个时间点的驾驶员 面部特征点的位置信息,然后根据所述位置信息分别计算驾驶员眼睛和嘴部 的高宽比,其中眼睛的高宽比反映了驾驶员的眼睛睁闭状态,嘴部的高宽比 反映了驾驶员的嘴部张合状态。
具体地,作为一种实施方式,可以根据坐标差的方式分别计算驾驶员眼 睛和嘴部的高度和宽度,然后转换为高度和宽度的比值,即高宽比,由此统 计一段时间内驾驶员眼睛和嘴部的高宽比数据,计算出驾驶员眨眼,打哈欠 的高宽比阈值。比如,可以统计30秒内驾驶员的眼睛和嘴巴的高宽比数据, 然后过滤掉异常数据(高宽比在0到1之间为正常数据),将过滤得到的正 常数据放置到队列中进行排序(从小到大);之后,在包含眼睛高宽比的队 列中,可以首先剔除掉可能的异常数据,如将统计的数据队列的前5%和后5% 的数据过滤掉,再取队列中的最大值EA和最小值EI,此时眼睛阈值的计算公 式可以为:t_eye=(EA-EI)×0.1+EI;在包含嘴部高宽比的队列中,可以从队列 小端开始取0.8处的数据,然后将其放大1.5倍,得到驾驶员打哈欠时嘴巴高 宽比的阈值。小于眼睛阈值的即为闭眼,否则为睁眼;小于嘴巴阈值即为正 常,否则为打哈欠。
当然,也可以采用其他方式计算驾驶员的眼镜阈值和嘴巴阈值,具体实 施时可灵活设置。
之后,再根据识别出的眼睛睁闭状态和打哈欠状态计算预设的疲劳特征 参数,在一实施方式中,疲劳特征参数包括12个,分别是PERCLOS(一段 时间内,眼睛累计闭合时间占时间窗长度的百分比),MCD(一段时间内, 最长一次眼睛闭合的持续时间),BF(每分钟眨眼次数),AOL(一段时间 内,眼睛睁开程度(百分比)的平均值),TWLCLOS(累计达到特定闭眼时 间所需要的总时间),AOT(一段时间内,睁眼动作所需时间的平均值), MOT(一段时间内,睁眼动作所需时间的最大值),ACT(一段时间内,闭 眼动作所需时间的平均值),MCT(一段时间内,闭眼动作所需时间的最大 值),MRCOT(闭眼时间与睁眼时间比值在一段时间内的最大值),ARCOT (闭眼时间与睁眼时间的比值在一段时间内的平均值),YAWN(一段时间内打哈欠次数),具体疲劳特征参数的计算方式可参照现有技术,此处不作 赘述。
在计算得到各项疲劳特征参数后,将计算结果输入预设分类器(如Fisher 分类器)中,以使该分类器输出与预设的疲劳等级对应的响应值,然后,将 不同疲劳等级对应的响应值的大小进行比较,并根据比较结果从所述预设疲 劳等级中选取一个疲劳等级,作为驾驶员的疲劳程度的识别结果。
在一实施方式中,可以将最大响应值对应的疲劳等级作为驾驶员的疲劳 程度的识别结果;在更多的实施方式中,上述将不同疲劳等级对应的响应值 的大小进行比较,根据比较结果从所述预设疲劳等级中选取一个疲劳等级, 作为所述驾驶员的疲劳程度的识别结果的步骤可以包括:计算所述响应值中 最大值和次大值的差值,判断所述差值是否大于或等于预设阈值;若所述差 值大于或等于预设阈值,则将所述最大值对应的疲劳等级作为所述驾驶员的 疲劳程度的识别结果;若所述差值小于预设阈值,则统计所述识别周期内所 述驾驶员打哈欠的次数;若所述驾驶员打哈欠的次数大于或等于预设次数, 则将所述最大值和次大值所对应的疲劳等级中较高的疲劳等级作为所述驾驶 员的疲劳程度的识别结果;若所述驾驶员打哈欠的次数小于预设次数,则将 所述最大值和次大值所对应的疲劳等级中较低的疲劳等级作为所述驾驶员的 疲劳程度的识别结果。
以预设疲劳等级为Clear(清醒)、Little(浅度疲劳)、Deep(深度疲 劳),其对应的响应值为分别为F1、F2、F3,且F1>F2>F3为例,首先计算 最大值F1和次大值F2的差值,判断该差值是否大于或等于预设阈值,若是, 则说明是清醒的可能性较大,若否,则说明清醒和浅度疲劳两者都有很大的 可能性,此时进一步统计识别周期内驾驶员打哈欠的次数,如果驾驶员打哈 欠的次数大于或等于预设次数,则将浅度疲劳作为驾驶员的疲劳程度的识别结果,反之,则将清醒作为驾驶员的疲劳程度的识别结果。
上述方式通过结合响应值的大小和识别周期内驾驶员打哈欠的次数,提 高了驾驶员疲劳程度识别的准确性。
进一步地,驾驶员的疲劳程度包括清醒、轻度疲劳和深度疲劳,所述当 所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒的步骤 可以包括:当识别出驾驶员的疲劳程度为轻度疲劳或深度疲劳时,触发相应 的预警提醒,其中所述深度疲劳对应的提醒频率高于所述轻度疲劳对应的提 醒频率。由此实现了对驾驶员的疲劳状态做出有效的预警。
本发明还提供一种计算机可读存储介质。
本发明计算机可读存储介质上存储有驾驶预警程序,所述驾驶预警程序 被处理器执行时实现如上所述的驾驶预警方法的步骤。
其中,在所述处理器上运行的驾驶预警程序被执行时所实现的方法可参 照本发明驾驶预警方法各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在 涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系 统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括 为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下, 由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物 品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述 实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通 过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的 技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体 现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、 磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机, 服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是 利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间 接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种驾驶预警方法,其特征在于,所述驾驶预警方法包括如下步骤:
采集驾驶员的面部图像,根据预设的人脸检测算法和人脸特征点对齐算法,对所述面部图像进行分析,得到驾驶员面部特征点的位置信息;
根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿态是否满足预设的异常条件,和/或,根据所述位置信息识别所述驾驶员的疲劳程度;
当所述驾驶员的头部姿态满足预设的异常条件,或者当所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒。
2.如权利要求1所述的驾驶预警方法,其特征在于,所述根据所述位置信息确定驾驶员的头部姿态,并判断所述驾驶员的头部姿态是否满足预设的异常条件的步骤包括:
获取预设判断周期内所述驾驶员面部特征点的位置信息,根据预设的几何投影算法将所述位置信息转换为驾驶员的头部偏角数据;
根据所述头部偏角数据识别所述驾驶员的头部偏离状态;
在所述判断周期内,根据所述头部偏离状态检测是否存在所述驾驶员的单次头部偏离持续时长达到第一预设时长;
若存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则判定所述驾驶员的头部姿态满足预设的异常条件。
3.如权利要求2所述的驾驶预警方法,其特征在于,所述头部偏角数据包括水平偏角和竖直偏角,所述根据所述头部偏角数据识别所述驾驶员的头部偏离状态的步骤包括:
判断所述水平偏角是否落在预设的水平偏角区间,及所述竖直偏角是否落在预设的竖直偏角区间;
当所述水平偏角未落在预设的水平偏角区间,或者所述竖直偏角未落在预设的竖直偏角区间时,判定所述驾驶员当前处于头部偏离状态。
4.如权利要求2所述的驾驶预警方法,其特征在于,所述在所述判断周期内,根据所述头部偏离状态检测是否存在所述驾驶员的单次头部偏离持续时长达到第一预设时长的步骤之后,还包括:
若不存在所述驾驶员的单次头部偏离持续时长达到第一预设时长,则统计所述判断周期内所述驾驶员处于头部偏离状态的累积时长;
判断所述累积时长在所述判断周期内的占比是否达到预设值;
若所述累积时长在所述判断周期内的占比达到预设值,则判定所述驾驶员的头部姿态满足预设的异常条件。
5.如权利要求4所述的驾驶预警方法,其特征在于,所述采集驾驶员的面部图像的步骤包括:
在采集驾驶员面部图像的过程中,检测是否存在第二预设时长内未采集到任何驾驶员的面部图像;
若存在第二预设时长内未采集到任何驾驶员的面部图像,则判定所述驾驶员的头部姿态满足预设的异常条件。
6.如权利要求1所述的驾驶预警方法,其特征在于,所述根据所述位置信息识别所述驾驶员的疲劳程度的步骤包括:
获取预设识别周期内所述驾驶员面部特征点的位置信息,根据所述位置信息分别计算所述驾驶员眼睛和嘴部的高宽比;
根据所述眼睛和嘴部的高宽比对应识别所述驾驶员的眼睛睁闭状态和打哈欠状态;
根据识别出的所述眼睛睁闭状态和打哈欠状态计算预设的疲劳特征参数;
将计算得到的所述疲劳特征参数输入至预设分类器中,以使所述分类器输出与预设的疲劳等级对应的响应值;
将不同疲劳等级对应的响应值的大小进行比较,根据比较结果从所述预设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度的识别结果。
7.如权利要求6所述的驾驶预警方法,其特征在于,所述将不同疲劳等级对应的响应值的大小进行比较,根据比较结果从所述预设疲劳等级中选取一个疲劳等级,作为所述驾驶员的疲劳程度的识别结果的步骤包括:
计算所述响应值中最大值和次大值的差值,判断所述差值是否大于或等于预设阈值;
若所述差值大于或等于预设阈值,则将所述最大值对应的疲劳等级作为所述驾驶员的疲劳程度的识别结果;
若所述差值小于预设阈值,则统计所述识别周期内所述驾驶员打哈欠的次数;
若所述驾驶员打哈欠的次数大于或等于预设次数,则将所述最大值和次大值所对应的疲劳等级中较高的疲劳等级作为所述驾驶员的疲劳程度的识别结果;
若所述驾驶员打哈欠的次数小于预设次数,则将所述最大值和次大值所对应的疲劳等级中较低的疲劳等级作为所述驾驶员的疲劳程度的识别结果。
8.如权利要求1至7中任一项所述的驾驶预警方法,其特征在于,所述驾驶员的疲劳程度包括清醒、轻度疲劳和深度疲劳,所述当所述驾驶员的疲劳程度满足预设的预警条件时,触发相应的预警提醒的步骤包括:
当识别出所述驾驶员的疲劳程度为轻度疲劳或深度疲劳时,触发相应的预警提醒,其中所述深度疲劳对应的提醒频率高于所述轻度疲劳对应的提醒频率。
9.一种驾驶预警设备,其特征在于,所述驾驶预警设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的驾驶预警程序,所述驾驶预警程序被所述处理器执行时实现如权利要求1至8中任一项所述的驾驶预警方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有驾驶预警程序,所述驾驶预警程序被处理器执行时实现如权利要求1至8中任一项所述的驾驶预警方法的步骤。
CN201810851573.3A 2018-07-27 2018-07-27 驾驶预警方法、设备及计算机可读存储介质 Active CN110766912B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810851573.3A CN110766912B (zh) 2018-07-27 2018-07-27 驾驶预警方法、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810851573.3A CN110766912B (zh) 2018-07-27 2018-07-27 驾驶预警方法、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110766912A true CN110766912A (zh) 2020-02-07
CN110766912B CN110766912B (zh) 2022-03-18

Family

ID=69328870

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810851573.3A Active CN110766912B (zh) 2018-07-27 2018-07-27 驾驶预警方法、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110766912B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112668548A (zh) * 2021-01-15 2021-04-16 重庆大学 一种驾驶员发呆检测方法及系统
CN113408466A (zh) * 2021-06-30 2021-09-17 东风越野车有限公司 车辆驾驶员不良驾驶行为检测方法及设备
CN113807317A (zh) * 2021-10-09 2021-12-17 上海健指树智能系统有限公司 运动场馆人员安全监测的方法、装置及电子设备
CN114454891A (zh) * 2022-02-28 2022-05-10 奇瑞汽车股份有限公司 汽车的控制方法、装置及计算机存储介质
US11643102B1 (en) * 2020-11-23 2023-05-09 Samsara Inc. Dash cam with artificial intelligence safety event detection
CN116149226A (zh) * 2023-02-22 2023-05-23 山东中安电力科技有限公司 一种基于数据分析的开关柜远程控制系统
CN116311181A (zh) * 2023-03-21 2023-06-23 重庆利龙中宝智能技术有限公司 一种异常驾驶的快速检测方法及系统
US11688211B1 (en) 2020-11-13 2023-06-27 Samsara Inc. Dynamic delivery of vehicle event data
US11780446B1 (en) 2020-11-13 2023-10-10 Samsara Inc. Refining event triggers using machine learning model feedback
CN117064375A (zh) * 2023-07-18 2023-11-17 江西瑞声电子有限公司 头部姿态监测方法、主控设备以及智能穿戴设备
US11866055B1 (en) 2021-11-12 2024-01-09 Samsara Inc. Tuning layers of a modular neural network
US11995546B1 (en) 2021-11-12 2024-05-28 Samsara Inc. Ensemble neural network state machine for detecting distractions
CN118618391A (zh) * 2024-08-08 2024-09-10 钧捷科技(北京)有限公司 一种基于深度学习多特征融合的驾驶员疲劳检测方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040032334A1 (en) * 2002-08-13 2004-02-19 Ataul Haq Doze-off early warning system for automotives and other applications
CN101030316A (zh) * 2007-04-17 2007-09-05 北京中星微电子有限公司 一种汽车安全驾驶监控系统和方法
CN101032405A (zh) * 2007-03-21 2007-09-12 汤一平 基于全方位计算机视觉的安全驾驶辅助装置
CN101216164A (zh) * 2007-12-29 2008-07-09 西安交通大学 一种水冷壁在线安全评价方法
CN101254765A (zh) * 2005-05-19 2008-09-03 曹民 多功能手/自动互补式前照灯变光器
CN101375796A (zh) * 2008-09-18 2009-03-04 浙江工业大学 疲劳驾驶实时检测系统
CN103042922A (zh) * 2011-10-17 2013-04-17 现代自动车株式会社 确定基于车辆驾驶状态信息的驾驶集中度的系统和方法
CN104688251A (zh) * 2015-03-02 2015-06-10 西安邦威电子科技有限公司 一种多姿态下的疲劳及非正常姿态驾驶检测方法
CN105788176A (zh) * 2016-05-25 2016-07-20 厦门理工学院 疲劳驾驶监测提醒方法及系统
WO2018058266A1 (zh) * 2016-09-27 2018-04-05 深圳智乐信息科技有限公司 一种基于移动终端的提示方法及系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040032334A1 (en) * 2002-08-13 2004-02-19 Ataul Haq Doze-off early warning system for automotives and other applications
CN101254765A (zh) * 2005-05-19 2008-09-03 曹民 多功能手/自动互补式前照灯变光器
CN101032405A (zh) * 2007-03-21 2007-09-12 汤一平 基于全方位计算机视觉的安全驾驶辅助装置
CN101030316A (zh) * 2007-04-17 2007-09-05 北京中星微电子有限公司 一种汽车安全驾驶监控系统和方法
CN101216164A (zh) * 2007-12-29 2008-07-09 西安交通大学 一种水冷壁在线安全评价方法
CN101375796A (zh) * 2008-09-18 2009-03-04 浙江工业大学 疲劳驾驶实时检测系统
CN103042922A (zh) * 2011-10-17 2013-04-17 现代自动车株式会社 确定基于车辆驾驶状态信息的驾驶集中度的系统和方法
CN104688251A (zh) * 2015-03-02 2015-06-10 西安邦威电子科技有限公司 一种多姿态下的疲劳及非正常姿态驾驶检测方法
CN105788176A (zh) * 2016-05-25 2016-07-20 厦门理工学院 疲劳驾驶监测提醒方法及系统
WO2018058266A1 (zh) * 2016-09-27 2018-04-05 深圳智乐信息科技有限公司 一种基于移动终端的提示方法及系统

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11780446B1 (en) 2020-11-13 2023-10-10 Samsara Inc. Refining event triggers using machine learning model feedback
US12168445B1 (en) 2020-11-13 2024-12-17 Samsara Inc. Refining event triggers using machine learning model feedback
US12106613B2 (en) 2020-11-13 2024-10-01 Samsara Inc. Dynamic delivery of vehicle event data
US11688211B1 (en) 2020-11-13 2023-06-27 Samsara Inc. Dynamic delivery of vehicle event data
US11643102B1 (en) * 2020-11-23 2023-05-09 Samsara Inc. Dash cam with artificial intelligence safety event detection
US12128919B2 (en) 2020-11-23 2024-10-29 Samsara Inc. Dash cam with artificial intelligence safety event detection
CN112668548A (zh) * 2021-01-15 2021-04-16 重庆大学 一种驾驶员发呆检测方法及系统
CN113408466A (zh) * 2021-06-30 2021-09-17 东风越野车有限公司 车辆驾驶员不良驾驶行为检测方法及设备
CN113807317A (zh) * 2021-10-09 2021-12-17 上海健指树智能系统有限公司 运动场馆人员安全监测的方法、装置及电子设备
US11995546B1 (en) 2021-11-12 2024-05-28 Samsara Inc. Ensemble neural network state machine for detecting distractions
US11866055B1 (en) 2021-11-12 2024-01-09 Samsara Inc. Tuning layers of a modular neural network
CN114454891B (zh) * 2022-02-28 2023-09-26 奇瑞汽车股份有限公司 汽车的控制方法、装置及计算机存储介质
CN114454891A (zh) * 2022-02-28 2022-05-10 奇瑞汽车股份有限公司 汽车的控制方法、装置及计算机存储介质
CN116149226B (zh) * 2023-02-22 2023-11-10 山东中安电力科技有限公司 一种基于数据分析的开关柜远程控制系统
CN116149226A (zh) * 2023-02-22 2023-05-23 山东中安电力科技有限公司 一种基于数据分析的开关柜远程控制系统
CN116311181B (zh) * 2023-03-21 2023-09-12 重庆利龙中宝智能技术有限公司 一种异常驾驶的快速检测方法及系统
CN116311181A (zh) * 2023-03-21 2023-06-23 重庆利龙中宝智能技术有限公司 一种异常驾驶的快速检测方法及系统
CN117064375A (zh) * 2023-07-18 2023-11-17 江西瑞声电子有限公司 头部姿态监测方法、主控设备以及智能穿戴设备
CN117064375B (zh) * 2023-07-18 2024-03-22 江西瑞声电子有限公司 头部姿态监测方法、主控设备以及智能穿戴设备
CN118618391A (zh) * 2024-08-08 2024-09-10 钧捷科技(北京)有限公司 一种基于深度学习多特征融合的驾驶员疲劳检测方法
CN118618391B (zh) * 2024-08-08 2024-10-22 钧捷科技(北京)有限公司 一种基于深度学习多特征融合的驾驶员疲劳检测方法

Also Published As

Publication number Publication date
CN110766912B (zh) 2022-03-18

Similar Documents

Publication Publication Date Title
CN110766912A (zh) 驾驶预警方法、设备及计算机可读存储介质
CN111274881B (zh) 驾驶安全的监控方法、装置、计算机设备及存储介质
WO2020173213A1 (zh) 车内人员危险动作识别方法和装置、电子设备、存储介质
CN108446600A (zh) 一种车辆驾驶员疲劳监测预警系统及方法
CN102592143B (zh) 一种驾驶员行车中手持电话违规行为检测方法
Hossain et al. IOT based real-time drowsy driving detection system for the prevention of road accidents
CN110532976A (zh) 基于机器学习和多特征融合的疲劳驾驶检测方法及系统
CN103871200B (zh) 用于汽车驾驶的安全提醒系统及方法
CN104183091A (zh) 一种自适应调整疲劳驾驶预警系统灵敏度的系统
Lashkov et al. Driver dangerous state detection based on OpenCV & dlib libraries using mobile video processing
CN106073804B (zh) 一种疲劳检测方法及移动终端
CN112754498B (zh) 驾驶员的疲劳检测方法、装置、设备及存储介质
CN117333853A (zh) 基于图像处理的驾驶员疲劳监测方法、装置及存储介质
Rani et al. Development of an Automated Tool for Driver Drowsiness Detection
Guria et al. Iot-enabled driver drowsiness detection using machine learning
CN118587689A (zh) 驾驶员疲劳状态检测方法和系统
CN117475414A (zh) 基于驾驶员人脸信息的疲劳检测与判定方法及装置
Kannan et al. Driver drowsiness detection and alert system
CN115071564A (zh) 车辆开门防撞方法、装置、电子设备及存储介质
Mašanović et al. Driver monitoring using the in-vehicle camera
CN114155513A (zh) 一种基于人脸多参量检测的驾驶危险行为监控方法、系统、设备和可读存储介质
KR20160067681A (ko) 운전자의 운행 집중도 레벨 분석방법
CN117334047A (zh) 一种危险驾驶行为检测方法及装置
CN114998874A (zh) 一种基于深度学习的驾驶员异常行为检测方法
Jain et al. Driver drowsiness detection using DLIB

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Building A3 and A4, Hunan Inspection and testing characteristic industrial park, No. 336, bachelor Road, Yuelu District, Changsha City, Hunan Province

Patentee after: Xidi Intelligent Driving (Hunan) Co.,Ltd.

Country or region after: China

Address before: Building A3 and A4, Hunan Inspection and testing characteristic industrial park, No. 336, bachelor Road, Yuelu District, Changsha City, Hunan Province

Patentee before: CHANGSHA INTELLIGENT DRIVING RESEARCH INSTITUTE Co.,Ltd.

Country or region before: China

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Building A3 and A4, Hunan Inspection and testing characteristic industrial park, No. 336, bachelor Road, Yuelu District, Changsha City, Hunan Province

Patentee after: Xidi Intelligent Driving Technology Co.,Ltd.

Country or region after: China

Address before: Building A3 and A4, Hunan Inspection and testing characteristic industrial park, No. 336, bachelor Road, Yuelu District, Changsha City, Hunan Province

Patentee before: Xidi Intelligent Driving (Hunan) Co.,Ltd.

Country or region before: China