CN111492420A - 瞌睡报警装置 - Google Patents
瞌睡报警装置 Download PDFInfo
- Publication number
- CN111492420A CN111492420A CN201880081905.2A CN201880081905A CN111492420A CN 111492420 A CN111492420 A CN 111492420A CN 201880081905 A CN201880081905 A CN 201880081905A CN 111492420 A CN111492420 A CN 111492420A
- Authority
- CN
- China
- Prior art keywords
- alarm
- driver
- drowsiness
- preliminary
- warning
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
- B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W40/09—Driving style or behaviour
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0809—Driver authorisation; Driver identity check
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0818—Inactivity or incapacity of driver
- B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Traffic Control Systems (AREA)
- Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
- Emergency Alarm Devices (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
搭载于车辆且用于防止驾驶员的瞌睡驾驶的瞌睡报警装置(1)具备:睡意等级判定装置(9),判定驾驶员的睡意的等级;预备报警装置(10),根据将上述睡意等级判定装置(9)判定出的睡意等级与报警阈值进行比较,在睡意等级超过报警阈值较高的情况下进行预备报警;报警装置(10),在由上述预备报警装置(10)进行预备报警后,根据需要进行督促驾驶员从睡意中清醒的正式报警;响应检测装置(10),在从由上述预备报警装置(10)发出预备报警起恒定时间内,检测驾驶员是否已进行规定响应动作;以及阈值变更装置(9),在由上述响应检测装置(10)检测出响应动作的情况下,将上述报警阈值变更为更高。
Description
相关申请的交叉引用
本申请基于2017年12月21日申请的日本申请编号2017-244998号,并在此引用其记载内容。
技术领域
本发明涉及例如搭载于卡车、公共汽车等车辆且用于防止驾驶员的瞌睡驾驶的瞌睡报警装置。
背景技术
作为防止驾驶员的瞌睡驾驶的瞌睡报警装置,考虑有专利文献1所记载的瞌睡报警装置。该瞌睡报警装置如以下那样构成。即,通过相机拍摄驾驶员的面部,通过图像处理从驾驶员的眼睑的打开程度的变化、眨眼模式的变化来推断驾驶员的睡意等级。而且,在睡意等级超过阈值的定时(timing),进行预备报警。通过从扬声器输出白噪声来进行该预备报警。若产生作为预备报警的白噪声,则根据驾驶员对该白噪声的反应,即驾驶员的表情的变化、或者面部、视线方向判定驾驶员的反应。在犹豫期间内检测出驾驶员的反应的情况下,推迟正式报警的产生。即使经过犹豫期间也未检测出驾驶员的反应的情况下,使正式报警产生。由此,能够使不必要的报警的产生减少。
专利文献1:日本特开2008-206688号公报
然而,驾驶员的睡意受到个人差异、身体状况、心理状态等影响,其推断结果不一定与驾驶员的主观匹配。在上述以往的构成的瞌睡报警装置中,有可能产生发出预备报警的睡意等级的阈值与驾驶员的主观不匹配的情况。对于某驾驶员来说,由于在睡意进展的状态下发出预备报警,所以感觉报警的定时过迟。相反,对于其它的驾驶员来说,在充分清醒的状态下发出预备报警,感觉报警很烦。
发明内容
本发明的目的在于提供能够对于驾驶员的睡意的等级以与驾驶员的感觉更匹配的睡意等级适当地进行报警的瞌睡报警装置。
在本发明的第一方式中,瞌睡报警装置搭载于车辆且用于防止驾驶员的瞌睡驾驶,具备:睡意等级判定装置,判定驾驶员的睡意的等级;预备报警装置,根据比较上述睡意等级判定装置判定出的睡意等级与报警阈值,在睡意等级超过报警阈值较高的情况下进行预备报警;报警装置,在上述预备报警装置的预备报警后,根据需要进行督促驾驶员从睡意中清醒的正式报警;响应检测装置,在从发出上述预备报警装置的预备报警起恒定时间内,检测驾驶员是否已进行了规定响应动作;以及阈值变更装置,在由上述响应检测装置检测到响应动作的情况下,将上述报警阈值变更为更高。
由此,通过睡意等级判定装置判定驾驶员的睡意的等级,在该睡意等级超过报警阈值较高的情况下通过预备报警装置进行预备报警。而且,在从由预备报警装置发出预备报警起恒定时间内,由响应检测装置检测到驾驶员已进行规定响应动作的情况下,通过阈值变更装置将上述报警阈值变更为更高。另外,在由预备报警装置进行预备报警后,由响应检测装置未检测到驾驶员已进行规定响应动作的情况下,通过报警装置进行督促驾驶员从睡意中清醒的正式报警。此时,不进行由阈值变更装置进行的阈值变更,上述报警阈值保持现状不变。
在驾驶员对于预备报警进行了响应动作的情况下,驾驶员睡意不大,从驾驶员的主观来看,可以说成为进行该预备报警的契机的报警阈值相对较低。换言之,在有响应检测装置的检测的情况下,可以说以后的增高报警阈值的一方能够进行与驾驶员的感觉更匹配的预备报警。在没有响应检测装置的检测的情况下,能够说驾驶员的睡意进展,所以能够说是适当的报警阈值。此时,通过报警装置,进行正式报警以督促驾驶员清醒。因此,能够使报警阈值对于车辆驾驶中的驾驶员的睡意的等级更适当,能够以与驾驶员的感觉更匹配的睡意等级适当地进行报警。
附图说明
本发明的上述目的以及其他的目的、特征、优点通过参照附图的下述的详细描述更明确。其附图为:
图1是示出一实施方式的图,且是示意性地示出瞌睡报警装置的电气构成的框图。
图2是表示控制装置所执行的瞌睡报警的处理顺序的流程图。
图3是表示伴随时间经过的睡意等级的变动的情况的一个例子的图。
图4是示出其他的实施方式的图,且是用于对决定报警判定标志的有效/无效的其它方法进行说明的图。
具体实施方式
以下,参照图1~图3,对一实施方式说明。图1示意性地示出本实施方式所涉及的瞌睡报警装置1的电气构成,该瞌睡报警装置1搭载于汽车、公共汽车、卡车等车辆。该瞌睡报警装置1具备瞌睡报警控制装置2,并且具备与该瞌睡报警控制装置2连接的相机3、麦克风4、操作开关部5、扬声器6、显示装置7、送风装置8等。
上述瞌睡报警控制装置2以由CPU(中央处理器)、ROM(只读存储器)、RAM(随机存取存储器)等构成的计算机为主体构成,通过瞌睡判定报警程序的执行,控制各机构,实现作为瞌睡报警装置1的功能。此时,瞌睡报警控制装置2构成为包括睡意等级判定部9、报警控制部10。上述相机3例如设置于车厢的驾驶席的前部的仪表部的附近,拍摄驾驶员的面部,例如从胸部拍摄上方。该相机3被图像处理部11控制,并且相机3的拍摄数据输入至图像处理部11并被图像处理。由图像处理部11处理后的图像数据被输入瞌睡报警控制装置2。
上述麦克风4用于驾驶员进行声音输入,被设置于驾驶席附近。另外,上述操作开关部5由驾驶员操作,例如由多个机械开关、触摸面板等构成,设置于中控台部分或方向盘部分等驾驶席附近。来自这些麦克风4、操作开关部5的信号也被输入给上述瞌睡报警控制装置2。
上述扬声器6被设置于车厢内,用于输出声音,其被声音控制部12控制。如后述那样,声音控制部12基于来自瞌睡报警控制装置2的指令,从扬声器6输出用于报警的声音。此时,在声音控制部12可装卸地设置有存储后述的预备报警所使用的声音数据的声音存储器13。作为该声音存储器13,例如采用串行闪存、SD卡等。
上述显示装置7例如设置于中控台部分且对驾驶员进行各种显示,基于来自瞌睡报警控制装置2的指令,进行与瞌睡报警有关的必要的显示。该显示装置7和上述操作开关部5也可以一体地单元化。在进行后述的正式报警时,上述送风装置8作为其他的装置从例如驾驶席的靠背部分或头枕部分朝向驾驶员的面部部分发送香味、冷气以督促驾驶员清醒,并基于来自瞌睡报警控制装置2的指令协作地动作。
接着,在本实施方式中,如以后的作用说明中描述那样,瞌睡报警控制装置2的睡意等级判定部9判定驾驶员的睡意的等级,根据将该睡意等级与报警阈值TH(参照图3)进行比较,来判断睡意等级是否超过报警阈值TH而较高。上述报警控制部10在该睡意等级超过报警阈值TH的情况下,换句话说报警判定标志有效的情况下,执行预备报警。
然后,报警控制部10在从发出预备报警起恒定时间内判断驾驶员是否已进行规定响应动作,在恒定时间内未检测到响应动作的情况下,执行督促驾驶员从睡意中清醒的正式报警。并且,在从发出预备报警起恒定时间内检测到响应动作的情况下,上述睡意等级判定部9将上述报警阈值TH变更为更高。
更具体而言,在睡意等级判定部9判定驾驶员的睡意等级时,通过相机3拍摄驾驶员的面部,根据该拍摄图像数据通过图像处理求出驾驶员的眼睑的打开情况的变化或眨眼模式的变化,并基于该结果判定驾驶员的睡意等级。该情况下,睡意等级以睡意程度越大其值越大这样的数值,例如0.0~5.0的数值求出。该睡意等级的判定方法是公知技术,所以省略详细的说明。
当上述睡意等级判定部9将判定出的睡意等级与报警阈值TH进行比较而判断为驾驶员有一定睡意时,在本实施方式中,例如使用如下那样的方法。即,在每恒定时间,例如每1秒缓存判定出的睡意等级,将按时间序列缓存的睡意等级回溯恒定宽度的判定时间窗数据量,在睡意等级全部超过报警阈值TH(例如3.0)的情况下,使报警判定标志有效。在报警判定标志有效的情况下,认为驾驶员有一定的睡意,上述报警控制部10执行预备报警。此外,在报警判定标志例如连续有效的情况下,在执行上次的预备报警后,留出规定的时间间隔(例如几秒~几十秒程度)执行下个预备报警。
在本实施方式中,通过基于声音数据的声音输出进行对于驾驶员的询问而执行预备报警。该情况下,报警控制部10对声音控制部12输出指令信号,声音控制部12使存储于声音存储器13的声音数据再生,从扬声器6输出询问的声音。作为询问的语句,例如为“不累吗?”、“累了吧?”这样的语句。此时,存储于声音存储器13的声音数据能够重写,所以也能够不是合成声音等,而使驾驶员知道的人的声音,例如家人、恋人、友人、公司的上司等的声音成为预备报警的声音。
听到预备报警的驾驶员在处于清醒状态(没那么有睡意)的情况下,在恒定时间内(例如数秒程度)执行规定响应动作,以便不进入正式报警就结束。这里,作为驾驶员的响应动作,驾驶员进行规定的姿势。例如,驾驶员进行在相机3前举手、上下摆头、左右摆头、张嘴中的任意一个姿势。报警控制部10基于利用相机3拍摄到的图像数据的图像识别,检测是否有规定响应动作,换句话说是否有上述的任意一个姿势。
报警控制部10在即使从预备报警发出起经过恒定时间,也未检测到驾驶员的响应动作,即规定的姿势的情况下,执行正式报警。在该正式报警中,进行例如从扬声器6输出唤醒驾驶员的睡意这样的声音,例如嘟嘟声。在本实施方式中,除此以外,通过送风装置8进行朝向驾驶员的面部部分吹送香味、冷气。另外,在显示装置7的画面进行例如催促驾驶员休息这样的提醒显示。
另一方面,在通过报警控制部10检测到恒定时间内的驾驶员的响应动作的情况下,上述睡意等级判定部9将报警阈值TH变更为更高。由此,使得从下次起的预备报警的判断以更深的睡意发出预备报警。具体而言,进行使报警阈值TH的数值例如每次增加0.1。在这次的报警阈值TH是3.0的情况下,下次的报警阈值TH为3.1。
并且,在本实施方式中,瞌睡报警控制装置2即使在上述睡意等级判定部9所进行的判定为报警阈值TH以下的状态,换句话说报警判定标志保持无效的状态持续的状态下,也在该时间持续规定时间例如30分钟以上的情况下,其后执行随机的预备报警。该随机预备报警也与上述的预备报警相同地进行,若听到预备报警的驾驶员在恒定时间内进行规定响应动作即规定的姿势,则不进行正式报警。在未检测到驾驶员的响应动作的情况下,执行与上述相同的正式报警。
但是,在执行了该随机预备报警的情况下,即使在听到预备报警的驾驶员在恒定时间内进行规定响应动作(姿势),也不进行增高报警阈值TH,报警阈值TH的数值保持现状不变。而且,在随机预备报警后执行了正式报警的情况下,上述睡意等级判定部9将报警阈值TH变更为更低。由此,从下次起的预备报警的判断以更浅的睡意发出预备报警。具体而言,进行将报警阈值TH的数值例如每次降低0.1。在这次的报警阈值TH是3.0的情况下,下次的报警阈值TH为2.9。
接下来,参照图2以及图3,对上述构成的瞌睡报警装置1的作用进行描述。图2的流程图示意性地示出车辆的行驶中(ACC接通中)的瞌睡报警控制装置2执行的、驾驶员的睡意等级的判定以及报警的处理顺序。即,首先,在步骤S1中,判定出驾驶员的睡意等级并缓存,在步骤S2中,判定出恒定宽度的判定时间窗内的多个数据的睡意等级。在步骤S3中,对判定时间窗内的睡意等级是否全部超过报警阈值TH(例如3.0)进行判断。此外,在睡意等级未超过报警阈值TH的情况下(在步骤S3中为否),如后述那样,进入从步骤S9开始的处理。
在睡意等级超过报警阈值TH的情况,换句话说报警判定标志有效的情况下(步骤S3中为是),在步骤S4中,执行预备报警。如上所述,该预备报警通过基于声音对驾驶员的询问进行。这里,图3示出随着时间经过的睡意等级的变动的情况的一个例子。这里,在超过报警阈值TH的睡意等级连续判定时间窗WN的情况下,报警判定标志有效,执行预备报警。图3的情况下,在时刻t1、时刻t2、时刻t3发出预备报警。另外,在图3标注斜线表示的区间是报警判定标志有效的区间。
在下个步骤S5中,判断在恒定时间内(例如几秒程度)是否未进行驾驶员的规定响应动作。如上述那样,作为驾驶员的响应动作,驾驶员进行规定的姿势,在相机3前举手、上下摆头、左右摆头、张嘴(或者开合)的任意一个。该情况下,若驾驶员处于充分的清醒状态,则能够听到预备报警的声音即询问容易地进行响应动作。然而,若驾驶员的睡意较大,则产生即使听到预备报警,也不能立刻进行规定的姿势的情形。
在从发出预备报警起规定时间内未由驾驶员进行规定的手势的情况下,判断为没有响应动作(步骤S5中为是),在下个步骤S6中,执行正式报警。在该正式报警中,如上述那样,进行报警音的输出、向驾驶员的面部部分的送风,督促驾驶员清醒。另外,在步骤S7中,上述报警阈值TH保持不变,重复进行从步骤S1开始的处理。
与此相对,在从发出预备报警起规定时间内有驾驶员所进行的响应动作的情况下(步骤S5中为否),进入步骤S8,报警阈值TH变更为比当前值高0.1。由此,报警阈值TH变更为更高,以便从下次起的预备报警的判断以更深的睡意发出预备报警。另外,此时,不进行正式报警,重复进行从步骤S1开始的处理。
这里,在驾驶员对于预备报警没有困难地进行响应动作的情况下,驾驶员的睡意不那么大,从驾驶员的主观来说,能够说成为进行该预备报警的契机的报警阈值TH相对较低。换言之,在有对预备报警的响应动作的检测的情况下,可以说以后的使报警阈值TH更高的一方能够进行与驾驶员的感觉更匹配的预备报警。因此,通过增高报警阈值TH,可以说报警阈值TH被修正为适合该驾驶员的数值。在没有驾驶员对预备报警的响应动作的检测的情况下,能够说驾驶员的睡意进展,所以能够说是适当的报警阈值。
在本实施方式中,除了基于上述的驾驶员的睡意等级的判定的预备报警以外,执行随机的预备报警。即,在上述的步骤S3中,判定出的驾驶员的睡意等级是报警阈值TH以下的相对较低的值的情况下(步骤S3中为否),在步骤S9中,对没有预备报警的状态持续的时间进行计数,以判定是否进行随机的预备报警。在下个步骤S10中,判断没有预备报警的状态是否持续恒定时间(例如30分钟~2小时)以上。在未持续恒定时间以上的情况下(步骤S10中为否),返回步骤S1。
另一方面,在没有预备报警的状态持续恒定时间的情况下(步骤S10中为是),在步骤S11中,通过基于声音输出的询问执行预备报警。在下个步骤S12中,判断在恒定时间内是否未进行驾驶员所进行的规定响应动作,即规定的姿势。该情况下,在大多数的情形下认为驾驶员处于清醒状态,驾驶员能够听到预备报警的声音(询问)容易地进行响应动作。在从发出预备报警起规定时间内有驾驶员所进行的响应动作的情况下(步骤S12中为否),进入步骤S13,报警阈值TH保持现状不变,重复进行从步骤S1开始的处理。
然而,在驾驶员有睡意的情况下,有时即使听见预备报警,也产生不能立刻进行规定的姿势的情形。在未进行驾驶员所进行的响应动作时(步骤S12中为是),在步骤S14执行正式报警。而且,在下个步骤S15中,报警阈值TH被变更为比当前值低0.1。由此,报警阈值TH变更为更低,以便从下次起的预备报警的判断以更浅的睡意发出预备报警。然后,重复进行从步骤S1开始的处理。
这里,在对于随机的预备报警未检测到驾驶员的响应动作的情况下,认为驾驶员的睡意进展,所以从驾驶员的主观来看,可以说之前未进行通常的预备报警是目前的报警阈值TH过高。因此,通过降低报警阈值TH,可以说报警阈值TH被修正为适合该驾驶员的数值。在对于随机的预备报警检测到驾驶员的响应动作的情况下,认为是驾驶员的清醒状态,所以认为报警阈值TH适当。
这样,根据实施方式的瞌睡报警装置1,能够得到如下的效果。即,在本实施方式中,在瞌睡报警控制装置2中,构成为判定车辆驾驶中的驾驶员的睡意等级,在超过报警阈值TH的情况,即报警判定标志有效的情况下进行预备报警时,在从发出预备报警起恒定时间内,检测驾驶员是否已进行规定响应动作,在检测到响应动作的情况下,将报警阈值TH变更为更高。因此,能够得到对于车辆驾驶中的驾驶员的睡意的等级,能够以与驾驶员的感觉更匹配的睡意等级适当地进行预备报警以及正式报警这样的优异效果。
而且,在本实施方式中,构成为在未进行驾驶员的睡意等级的判定,即以与报警阈值TH的比较为契机的预备报警的状态,换句话说报警判定标志保持无效不变的状态下,也在适当的定时随机地进行预备报警,并且在未检测到驾驶员的规定响应动作的情况下,进行正式报警督促驾驶员清醒,并且将报警阈值TH变更为更低。因此,能够使报警阈值TH更进一步恰当。另外,在未进行预备报警的时间持续了规定时间以上之后进行随机的预备报警,所以能够抑制进行随机的预备报警的频度过多而驾驶员感觉麻烦,相反过少而没有意义的情形。
特别是在本实施方式中,构成为将预备报警通过基于声音数据的声音输出进行对驾驶员的询问。由此,能够通过预备报警中的询问对于驾驶员给予刺激,能够返回清醒状态或维持清醒状态。此时,能够将声音数据构成为可重写,从而也能够使例如驾驶员知道的人的声音,例如家人、恋人、友人、公司的上司等的声音作为预备报警的声音,能够对驾驶员给予安心感或刺激,能够进行更有效的预备报警。
另外,特别是在本实施方式中,作为驾驶员对预备报警的规定响应动作,采用规定的姿势。由此,能够简单地完成驾驶员所进行的响应动作,并且能够通过姿势的执行维持驾驶员的清醒状态。并且,在本实施方式中,作为用于督促驾驶员从睡意中清醒的正式报警,不仅进行基于声音的报警,除此以外,也能够通过与其他的装置这里为送风装置8的协作,召唤驾驶员的触觉等感觉,从而为了督促清醒而更有效。
图4表示其他的实施方式。在该实施方式中,判断睡意等级判定部9判定出的驾驶员的睡意等级是否超过报警阈值TH的方法,换句话说决定报警判定标志的有效/无效的方法与上述实施方式不同。即,在本实施方式中,在每恒定时间,例如每1秒按时间序列缓存根据驾驶员的面部的拍摄图像由睡意等级判定部9判定出的睡意等级。图中,睡意等级的判定数据中的“OK”是判定为没有睡意即睡意等级为报警阈值TH以下的状态,“NG”是判定为睡意等级超过报警阈值TH而有睡意的状态,“?”是不能检测到驾驶员的面部等不能判定的状态。
而且,按输出周期(该情况下为1秒)回溯规定的判定时间窗的数据量,即图中作为判定时间窗的数据个数恒定的数据量(例如10个),求出“NG”的时间的合计。在“NG”的时间的合计为时间阈值(例如12秒)以上的情况下,使报警判定标志成为有效,进行预备报警。即使是这样的构成,也能够与上述实施方式相同地执行预备报警。此外,在报警判定标志例如连续有效的情况下,也在执行上次的预备报警后,例如留出几秒~几十秒左右的时间间隔(间隙)执行预备报警。
此外,虽然省略图示,但作为实施方式,也能够如以下那样变更。即,在上述实施方式中,仅通过进行1次通常的对预备报警的响应动作的检测,变更报警阈值th(图2的步骤S5、S8),但也可以构成为在对于预备报警连续多次(例如2次)检测出响应动作的情况下,变更报警阈值TH。由此,因为仅通过检测1次的响应动作不会变更报警阈值TH,所以能够排除通过例如1次的偶然情况的产生变更报警阈值TH的情况,而更适当地进行报警阈值TH的变更。
另外,在上述实施方式中,虽然采用了姿势作为驾驶员对预备报警的规定响应动作,但也可以构成为进行基于规定的声音的响应作为响应动作,基于通过麦克风4获取到的声音的识别检测是否有规定响应动作。由此,通过驾驶员执行基于声音的规定的响应(例如“没关系”、“不累”等)作为对预备报警的响应动作,可以说对话成立,根据对话这样的刺激能够维持驾驶员的清醒状态。也可以为驾驶员进行操作开关部中的规定的操作作为响应动作的构成。
在上述实施方式中,在预备报警持续规定时间以上未执行的情况下,执行随机的预备报警,但也可以为驾驶员能够变更该规定时间这样的构成。由此,能够使进行随机的预备报警的定时(时间间隔)与驾驶员的喜好、必要性等事情对应。另外,在上述实施方式中,在正式报警中,并用了作为其他的装置的送风装置8所进行的送风,但作为其他的装置,除此以外也考虑有设置于座椅的靠背部分或方向盘且对驾驶员赋予振动的振动装置、给予驾驶员的安全带的勒紧力的装置、灯饰等给予光的刺激的照明装置、在前挡风玻璃进行用于督促清醒的显示的平视显示器等。
在多个驾驶员想要驾驶1辆车辆的情况下,优选按各驾驶员设置报警阈值TH。该情况下,能够按每个驾驶员设定报警阈值TH并存储,设置在驾驶开始时通过面部、指纹、掌纹等的认证识别驾驶员的驾驶员识别装置,读出由该驾驶员识别装置识别出的驾驶员的报警阈值TH并使用。另外,在上述实施方式中,睡意等级的数值、报警阈值TH的数值、各时间等的数值只不过是举出了一个例子,能够进行各种变更。驾驶员的睡意的判断的方法、预备报警、正式报警的方式等也能够适当地变更来实施。
本发明根据实施例进行了描述,但应理解本发明并不局限于该实施例、结构。本发明也包含各种变形例、均等范围内的变形。另外,也将各种组合、方式、进一步包含仅一个要素、其以上或者其以下的其他组合、方式纳入本发明的范畴、思想范围。
Claims (10)
1.一种瞌睡报警装置,是搭载于车辆且用于防止驾驶员的瞌睡驾驶的瞌睡报警装置(1),具备:
睡意等级判定装置(9),判定驾驶员的睡意等级;
预备报警装置(10),根据比较所述睡意等级判定装置(9)判定出的睡意等级与报警阈值,在睡意等级超过报警阈值较高的情况下进行预备报警;
报警装置(10),在所述预备报警装置(10)的预备报警后,根据需要进行督促驾驶员从睡意中清醒的正式报警;
响应检测装置(10),在从发出所述预备报警装置(10)的预备报警起恒定时间内,检测驾驶员是否进行了规定响应动作;以及
阈值变更装置(9),在由所述响应检测装置(10)检测出响应动作的情况下,将所述报警阈值变更为更高。
2.根据权利要求1所述的瞌睡报警装置,其中,
所述阈值变更装置(9)在所述响应检测装置(10)连续多次检测到响应动作的情况下,变更所述报警阈值。
3.根据权利要求1或2所述的瞌睡报警装置,其中,
所述预备报警装置(10)通过基于声音数据的声音输出对驾驶员进行询问,从而执行预备报警。
4.根据权利要求3所述的瞌睡报警装置,其中,
所述声音数据构成为能重写。
5.根据权利要求1至4中任一项所述的瞌睡报警装置,其中,
对所述预备报警的驾驶员的规定响应动作由规定的姿势构成,
所述响应检测装置(10)基于利用相机(3)的图像识别检测是否有规定响应动作。
6.根据权利要求1至4中任一项所述的瞌睡报警装置,其中,
对所述预备报警的驾驶员的规定响应动作由基于规定声音的响应构成,
所述响应检测装置(10)基于识别通过麦克风(4)获取到的声音来检测是否有规定响应动作。
7.根据权利要求1至6中任一项所述的瞌睡报警装置,其中,
具备随机预备报警装置(10),该随机预备报警装置(10)在所述睡意等级判定装置(9)的判定为报警阈值以下的状态下,随机地执行预备报警,并且
所述阈值变更装置(9)在随机的预备报警后恒定时间内,由所述响应检测装置(10)未检测到驾驶员的规定响应动作的情况下,将所述报警阈值变更为更低。
8.根据权利要求7所述的瞌睡报警装置,其中,
所述随机预备报警装置(10)在未进行预备报警的时间持续了规定时间以上之后,执行随机的预备报警,并且能变更所述规定时间。
9.根据权利要求1至8中任一项所述的瞌睡报警装置,其中,
所述报警装置(10)与搭载于车辆的其他装置(8)协作地进行督促驾驶员从睡意中清醒的正式报警。
10.根据权利要求1至9中任一项所述的瞌睡报警装置,其中,
具备识别所述驾驶员的驾驶员识别装置,所述报警阈值按每个驾驶员设定。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017-244998 | 2017-12-21 | ||
JP2017244998A JP6965727B2 (ja) | 2017-12-21 | 2017-12-21 | 居眠り警報装置 |
PCT/JP2018/038668 WO2019123803A1 (ja) | 2017-12-21 | 2018-10-17 | 居眠り警報装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111492420A true CN111492420A (zh) | 2020-08-04 |
CN111492420B CN111492420B (zh) | 2022-08-26 |
Family
ID=66994047
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880081905.2A Active CN111492420B (zh) | 2017-12-21 | 2018-10-17 | 瞌睡报警装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11195405B2 (zh) |
JP (1) | JP6965727B2 (zh) |
CN (1) | CN111492420B (zh) |
DE (1) | DE112018005980T5 (zh) |
WO (1) | WO2019123803A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113034976A (zh) * | 2021-03-23 | 2021-06-25 | 地平线(上海)人工智能技术有限公司 | 报警方法和装置、计算机可读存储介质、电子设备 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3971858B1 (en) * | 2019-05-15 | 2025-01-15 | Nissan Motor Co., Ltd. | Driving assistance method and driving assistance system |
US12249189B2 (en) | 2019-08-12 | 2025-03-11 | Micron Technology, Inc. | Predictive maintenance of automotive lighting |
US10993647B2 (en) * | 2019-08-21 | 2021-05-04 | Micron Technology, Inc. | Drowsiness detection for vehicle control |
US12210401B2 (en) | 2019-09-05 | 2025-01-28 | Micron Technology, Inc. | Temperature based optimization of data storage operations |
JP7120258B2 (ja) * | 2019-10-16 | 2022-08-17 | 株式会社デンソー | 行動認識装置、及び行動認識方法 |
JP2021089479A (ja) * | 2019-12-02 | 2021-06-10 | 株式会社デンソー | 意識判定装置、及び意識判定方法 |
JP2021105981A (ja) * | 2019-12-26 | 2021-07-26 | パナソニックIpマネジメント株式会社 | 運転者監視装置及び運転者監視方法 |
JP7322745B2 (ja) * | 2020-02-19 | 2023-08-08 | いすゞ自動車株式会社 | 運転支援装置 |
JP7251524B2 (ja) * | 2020-07-01 | 2023-04-04 | トヨタ自動車株式会社 | 眠気兆候通知システム、眠気兆候通知方法、及び眠気兆候通知プログラム |
JP7540319B2 (ja) | 2020-12-11 | 2024-08-27 | 株式会社デンソー | 覚醒装置 |
US12136279B2 (en) * | 2022-12-12 | 2024-11-05 | Yazaki Corporation | Drowsiness detection device |
WO2024142690A1 (ja) * | 2022-12-27 | 2024-07-04 | パナソニックIpマネジメント株式会社 | 姿勢情報通知方法、姿勢情報通知システム、及びプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101256706A (zh) * | 2007-02-26 | 2008-09-03 | 株式会社电装 | 睡眠告警装置 |
JP2008204056A (ja) * | 2007-02-19 | 2008-09-04 | Tokai Rika Co Ltd | 運転支援装置 |
CN101763711A (zh) * | 2009-11-20 | 2010-06-30 | 海安县奇锐电子有限公司 | 开车防瞌睡装置 |
CN106364487A (zh) * | 2016-09-30 | 2017-02-01 | 上海沿锋汽车科技股份有限公司 | 一种用于监测驾驶员清醒状况的装置 |
CN206370136U (zh) * | 2017-01-03 | 2017-08-01 | 四川大学 | 一种防瞌睡报警器 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS562227A (en) | 1979-06-13 | 1981-01-10 | Nissan Motor Co Ltd | Dozing drive alarming device |
JP3686465B2 (ja) | 1995-11-06 | 2005-08-24 | 本田技研工業株式会社 | 車両用運転状況監視装置 |
JP2002183900A (ja) | 2000-12-14 | 2002-06-28 | Nissan Motor Co Ltd | 居眠り運転警報装置 |
EP2305106A1 (en) * | 2002-02-19 | 2011-04-06 | Volvo Technology Corporation | Method for monitoring and managing driver attention loads |
JP4910547B2 (ja) * | 2006-08-02 | 2012-04-04 | トヨタ自動車株式会社 | 眠気判定装置及び眠気判定プログラム |
JP4400624B2 (ja) * | 2007-01-24 | 2010-01-20 | トヨタ自動車株式会社 | 居眠り防止装置及び方法 |
DE102015206200A1 (de) * | 2015-04-08 | 2016-10-13 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Aufmerksamkeitserkennung eines Fahrzeugführers |
JP2016199207A (ja) | 2015-04-14 | 2016-12-01 | 株式会社東海理化電機製作所 | シートベルト警告装置 |
-
2017
- 2017-12-21 JP JP2017244998A patent/JP6965727B2/ja active Active
-
2018
- 2018-10-17 WO PCT/JP2018/038668 patent/WO2019123803A1/ja active Application Filing
- 2018-10-17 CN CN201880081905.2A patent/CN111492420B/zh active Active
- 2018-10-17 DE DE112018005980.4T patent/DE112018005980T5/de active Pending
-
2020
- 2020-05-26 US US16/883,803 patent/US11195405B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008204056A (ja) * | 2007-02-19 | 2008-09-04 | Tokai Rika Co Ltd | 運転支援装置 |
CN101256706A (zh) * | 2007-02-26 | 2008-09-03 | 株式会社电装 | 睡眠告警装置 |
CN101763711A (zh) * | 2009-11-20 | 2010-06-30 | 海安县奇锐电子有限公司 | 开车防瞌睡装置 |
CN106364487A (zh) * | 2016-09-30 | 2017-02-01 | 上海沿锋汽车科技股份有限公司 | 一种用于监测驾驶员清醒状况的装置 |
CN206370136U (zh) * | 2017-01-03 | 2017-08-01 | 四川大学 | 一种防瞌睡报警器 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113034976A (zh) * | 2021-03-23 | 2021-06-25 | 地平线(上海)人工智能技术有限公司 | 报警方法和装置、计算机可读存储介质、电子设备 |
CN113034976B (zh) * | 2021-03-23 | 2022-08-09 | 地平线(上海)人工智能技术有限公司 | 报警方法和装置、计算机可读存储介质、电子设备 |
Also Published As
Publication number | Publication date |
---|---|
US11195405B2 (en) | 2021-12-07 |
US20200286358A1 (en) | 2020-09-10 |
WO2019123803A1 (ja) | 2019-06-27 |
CN111492420B (zh) | 2022-08-26 |
JP2019113925A (ja) | 2019-07-11 |
JP6965727B2 (ja) | 2021-11-10 |
DE112018005980T5 (de) | 2020-07-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111492420B (zh) | 瞌睡报警装置 | |
US7982618B2 (en) | Wakefulness maintaining apparatus and method of maintaining wakefulness | |
US11430231B2 (en) | Emotion estimation device and emotion estimation method | |
JP5177102B2 (ja) | 運転支援装置 | |
EP3158392A2 (en) | System and method for responding to driver state | |
WO2020066757A1 (ja) | 危険運転防止装置 | |
JP2002183900A (ja) | 居眠り運転警報装置 | |
JP6701951B2 (ja) | 運転支援装置 | |
JP7589614B2 (ja) | ドライバ監視装置、ドライバ監視方法及びドライバ監視用コンピュータプログラム | |
JP7540319B2 (ja) | 覚醒装置 | |
JPH07156682A (ja) | 覚醒状態検出装置 | |
JP6977589B2 (ja) | 車両用警報装置 | |
KR101447060B1 (ko) | 운전자의 뇌파를 통해 차량을 제어하는 방법 및 장치 | |
JP2022099250A (ja) | 安全運転支援装置 | |
CN113879319B (zh) | 困倦征兆通知系统 | |
JP2020013554A (ja) | 覚醒度判定装置 | |
JP7613981B2 (ja) | 運転支援システム | |
JP2019012501A (ja) | 運転支援装置、運転支援方法、および運転支援プログラム | |
JP7528649B2 (ja) | オブジェクト認識制御装置およびオブジェクト認識制御方法 | |
WO2023281977A1 (ja) | 覚醒維持装置及び覚醒維持方法 | |
US12043265B2 (en) | Safety drive assist apparatus | |
US20220292948A1 (en) | Awakening device | |
KR102613180B1 (ko) | 차량 및 그 제어방법 | |
JP7151603B2 (ja) | 覚醒装置 | |
KR20160073556A (ko) | 동공인식 센서를 통한 졸음운전 방지 알람 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |