[go: up one dir, main page]

CN109431498A - 穿戴式多模态驾驶员生理状态监测系统 - Google Patents

穿戴式多模态驾驶员生理状态监测系统 Download PDF

Info

Publication number
CN109431498A
CN109431498A CN201811353853.8A CN201811353853A CN109431498A CN 109431498 A CN109431498 A CN 109431498A CN 201811353853 A CN201811353853 A CN 201811353853A CN 109431498 A CN109431498 A CN 109431498A
Authority
CN
China
Prior art keywords
signal
acquisition
human
computer interaction
modal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811353853.8A
Other languages
English (en)
Inventor
于海涛
武欣昱
王江
邓斌
魏熙乐
刘晨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201811353853.8A priority Critical patent/CN109431498A/zh
Publication of CN109431498A publication Critical patent/CN109431498A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration or pH-value ; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid or cerebral tissue
    • A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration or pH-value ; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid or cerebral tissue for measuring blood gases
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219—Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Optics & Photonics (AREA)
  • Pulmonology (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明涉及一种穿戴式多模态驾驶员生理状态监测系统，包括：穿戴式多模态生物信号采集装置，人机交互终端；其特征在于，所述的穿戴式多模态生物信号采集装置分别从佩戴者头、眼以及手腕采集多模态生物信号，用于对佩戴者生理状态的监测；所述的人机交互终端，用于设置采集参数以及采集单元使能信号的选择，并存储显示生物信号。所述的穿戴式多模态生物信号采集装置包括：EEG采集单元，眼动仪单元，PPG采集单元，信号整合模块，移动式微处理器。

Description

穿戴式多模态驾驶员生理状态监测系统
技术领域
本发明涉及车辆行驶安全领域，具体指一种穿戴式多模态驾驶员生理状态监测系统。
背景技术
公交车驾驶员在驾驶时的身体以及精神状况关系到旅客以及其他车辆驾驶员的生命安全。随着近10年来我国汽车数量的急剧增长，交通事故也随之增加。而驾驶员在驾驶时身体疲劳或精神状态不佳是导致交通事故的主要原因。因此实时准确地对驾驶员的生理状态进行监控对避免交通事故、保护驾驶员及乘客的生命财产安全有着重要意义。
但由于驾驶员的特殊工作环境，传统的生理检测仪器无法在狭小的驾驶室内对驾驶员生理状态进行检测。另外单一的监测指标也无法反映出驾驶者实际驾驶状态。
发明内容
针对现有技术缺陷，本发明目的是提供一种穿戴式多模态驾驶员生理状态监测系统，利用穿戴式采集装置从驾驶员采集脑电、脉搏、血氧浓度、眼球运动以及瞳孔收缩等多模态生物信息，实现驾驶员驾驶状态实时准确地监测。技术方案如下：
一种穿戴式多模态驾驶员生理状态监测系统，包括：穿戴式多模态生物信号采集装置，人机交互终端；其特征在于，
所述的穿戴式多模态生物信号采集装置分别从佩戴者头、眼以及手腕采集多模态生物信号，用于对佩戴者生理状态的监测；
所述的人机交互终端，用于设置采集参数以及采集单元使能信号的选择，并存储显示生物信号。
所述的穿戴式多模态生物信号采集装置包括：EEG采集单元，眼动仪单元，PPG采集单元，信号整合模块，移动式微处理器；
EEG采集单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集脑电信号，并将采集的脑电信号传输到信号整合模块；
眼动仪单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集眼球运动图像，并将采集的图像传输到信号整合模块；
PPG采集单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集心率和血氧浓度信号，并将采集的信号传输到信号整合模块；
所述信号整合模块，用于根据人机交互终端发出的信号采集控制信号缓存EEG采集单元、眼动仪单元和PPG采集单元采集到的生物信息，并且将一个时间单位内的三种生物信息整合为统一的数据格式，同时将整合后的数据发送给移动式微处理器；
所述移动式微处理器，用于接收由人机交互终端发出的采集控制信号以及采集参数，并向信号整合模块发出采集使能以及信号整合参数指令，控制系统采集生物信号，同时接收由信号整合模块传出的整合后的生物信号，进行预处理后传输到人机交互终端。
本发明的有益效果是实现了特殊环境下对驾驶员多模态生理状态的监测，通过穿戴式多模态采集设备，实现驾驶员在驾驶时生理状态的多角度实时监测，监测人员在发现异常状态时可立刻实施相应措施，保证车辆的行驶安全。
附图说明
图1为本发明的系统示意图；
图2为本发明的系统结构图；
图3为EEG采集单元结构图；
图4为眼动仪单元结构图；
图5为PPG采集单元结构图；
图中
1.穿戴式多模态生物信号采集装置2.人机交互终端3.EEG采集单元4.眼动仪单元5.PPG采集单元6.信号整合模块7.供电模块8.移动式微处理器9.电极阵列10.放大滤波电路11.A/D转换12.红外摄像头13.缓存14.图像处理模块15.红外发射器16.红外检测器17.信号处理模块18.A/D转换19.三轴陀螺仪
具体实施方式
结合附图对本发明的穿戴式多模态驾驶员生理状态监测系统。
本发明系统示意图与系统结构图分别如图1、图2所示，系统由穿戴式多模态生物信号采集装置1以及人机交互终端2两大部分组成。其中所述的穿戴式多模态生物信号采集装置1包括：EEG采集单元3，眼动仪单元4，PPG采集单元5，信号整合模块6，供电模块7，移动式微处理器8。移动式微处理器8向信号整合模块6发出采集使能以及信号整合参数指令，信号整合模块6控制EEG采集单元3、眼动仪单元4以及PPG采集单元5协同采集生物信号，同时缓存EEG采集单元9、眼动仪单元4和PPG采集单元5采集到的生物信息，并且将一个时间单位内的所有生物信息整合为统一的数据格式，将整合后的数据发送给移动式微处理器8。所述人机交互终端2用于设置采集参数以及采集单元使能信号的选择，并存储显示生物信号。使用者可以通过人机交互终端2对多模态生物信号的采集参数以及信号的种类进行设置。同时，采集到的生物信号也会在人机交互终端2上实时显示。
本发明的EEG采集单元结构图如图3所示，共包括电极阵列9、放大滤波模块10以及A/D转换模块11。电极阵列9采集原始脑电信号；放大滤波模块对原始脑电信号进行放大、滤波以及陷波处理，消除信号中工频干扰并使信号满足A/D转换模块11的输入范围。
本发明的眼动仪单元结构图如图4所示，共包括红外摄像头12、图像缓存模块13以及图像处理模块14。红外摄像头12分别记录左右眼球的运动状态，并将图像数据传输到图像缓存模块13；图像处理模块14从图像缓存模块13中不断读取图像数据并提取注视点、眼跳次数以及瞳孔收缩等生理信息。
本发明的PPG采集单元如图5所示，共包括红外发射器15、红外检测器16、A/D转换模块17、信号处理模块18以及三轴陀螺仪19。红外发射器15发射的红外线照人体皮肤上，经皮肤反射后由红外检测器16接收，再由A\D转换模块17转换成PPG信号传输到信号处理模块18；三轴陀螺仪19用于测量手腕的运动状态，并传输到信号处理模块18；信号处理模块根据手腕运动状态对PPG信号进行数据分析，提取出心率、血氧浓度等生理指标。

Claims (1)

1.一种穿戴式多模态驾驶员生理状态监测系统，包括：穿戴式多模态生物信号采集装置，人机交互终端；其特征在于，
所述的穿戴式多模态生物信号采集装置分别从佩戴者头、眼以及手腕采集多模态生物信号，用于对佩戴者生理状态的监测；
所述的人机交互终端，用于设置采集参数以及采集单元使能信号的选择，并存储显示生物信号。
所述的穿戴式多模态生物信号采集装置包括：EEG采集单元，眼动仪单元，PPG采集单元，信号整合模块，移动式微处理器；
EEG采集单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集脑电信号，并将采集的脑电信号传输到信号整合模块；
眼动仪单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集眼球运动图像，并将采集的图像传输到信号整合模块；
PPG采集单元，用于根据人机交互终端设置的采集参数和采集使能控制信号采集心率和血氧浓度信号，并将采集的信号传输到信号整合模块；
所述信号整合模块，用于根据人机交互终端发出的信号采集控制信号缓存EEG采集单元、眼动仪单元和PPG采集单元采集到的生物信息，并且将一个时间单位内的三种生物信息整合为统一的数据格式，同时将整合后的数据发送给移动式微处理器；
所述移动式微处理器，用于接收由人机交互终端发出的采集控制信号以及采集参数，并向信号整合模块发出采集使能以及信号整合参数指令，控制系统采集生物信号，同时接收由信号整合模块传出的整合后的生物信号，进行预处理后传输到人机交互终端。
CN201811353853.8A 2018-11-14 2018-11-14 穿戴式多模态驾驶员生理状态监测系统 Pending CN109431498A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811353853.8A CN109431498A (zh) 2018-11-14 2018-11-14 穿戴式多模态驾驶员生理状态监测系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811353853.8A CN109431498A (zh) 2018-11-14 2018-11-14 穿戴式多模态驾驶员生理状态监测系统

Publications (1)

Publication Number Publication Date
CN109431498A true CN109431498A (zh) 2019-03-08

Family

ID=65553405

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811353853.8A Pending CN109431498A (zh) 2018-11-14 2018-11-14 穿戴式多模态驾驶员生理状态监测系统

Country Status (1)

Country Link
CN (1) CN109431498A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369853A (zh) * 2020-03-19 2020-07-03 上海梦之路数字科技有限公司 一种医学整合式实验教学系统及其实现方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101480339A (zh) * 2009-01-09 2009-07-15 清华大学深圳研究生院 实现多种生理参数测量的方法及系统
CN104997500A (zh) * 2015-08-31 2015-10-28 奇瑞汽车股份有限公司 一种基于可穿戴设备的车载健康监测系统
US20160090097A1 (en) * 2014-09-29 2016-03-31 The Boeing Company System for fatigue detection using a suite of physiological measurement devices
CN106491104A (zh) * 2016-10-25 2017-03-15 湖南大学 基于智能穿戴设备的驾驶员状态智能实时监测系统和方法
CN107233103A (zh) * 2017-05-27 2017-10-10 西南交通大学 高铁调度员疲劳状态测评方法及系统
CN107669283A (zh) * 2017-10-29 2018-02-09 吉林大学 基于多特征融合的眼镜式驾驶疲劳监测预警装置及方法
CN108478207A (zh) * 2018-01-09 2018-09-04 南京航空航天大学 一种多模态大脑生理监测系统
CN108615110A (zh) * 2018-04-23 2018-10-02 吉林大学 基于视觉特性的驾驶风险评估系统
CN108765876A (zh) * 2018-05-31 2018-11-06 东北大学 基于多模信号的驾驶疲劳深度分析预警系统及方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101480339A (zh) * 2009-01-09 2009-07-15 清华大学深圳研究生院 实现多种生理参数测量的方法及系统
US20160090097A1 (en) * 2014-09-29 2016-03-31 The Boeing Company System for fatigue detection using a suite of physiological measurement devices
CN104997500A (zh) * 2015-08-31 2015-10-28 奇瑞汽车股份有限公司 一种基于可穿戴设备的车载健康监测系统
CN106491104A (zh) * 2016-10-25 2017-03-15 湖南大学 基于智能穿戴设备的驾驶员状态智能实时监测系统和方法
CN107233103A (zh) * 2017-05-27 2017-10-10 西南交通大学 高铁调度员疲劳状态测评方法及系统
CN107669283A (zh) * 2017-10-29 2018-02-09 吉林大学 基于多特征融合的眼镜式驾驶疲劳监测预警装置及方法
CN108478207A (zh) * 2018-01-09 2018-09-04 南京航空航天大学 一种多模态大脑生理监测系统
CN108615110A (zh) * 2018-04-23 2018-10-02 吉林大学 基于视觉特性的驾驶风险评估系统
CN108765876A (zh) * 2018-05-31 2018-11-06 东北大学 基于多模信号的驾驶疲劳深度分析预警系统及方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369853A (zh) * 2020-03-19 2020-07-03 上海梦之路数字科技有限公司 一种医学整合式实验教学系统及其实现方法

Similar Documents

Publication Publication Date Title
WO2021174618A1 (zh) 一种脑电图模式分类模型的训练方法、分类方法及系统
CN108615110B (zh) 基于视觉特性的驾驶风险评估系统
US7488294B2 (en) Biosensors, communicators, and controllers monitoring eye movement and methods for using them
US10039445B1 (en) Biosensors, communicators, and controllers monitoring eye movement and methods for using them
US20180186234A1 (en) Control system and method
CN111166357A (zh) 多传感器融合的疲劳监测装置系统及其监测方法
CN110710978B (zh) 一种基于眼动追踪-脑功能活动检测的多模态沉浸式同步采集系统
CN110013249B (zh) 一种便携式可调式的头戴癫痫监测仪
CN105725995B (zh) 一种驾驶分心行为的检测系统
KR20130064473A (ko) 생체 신호 송신 장치, 자동차 제어 장치, 이를 이용한 자동차 자동 제어 시스템 및 그 방법
CN110664417A (zh) 列车安全驾驶预警设备和系统
CN216021048U (zh) 一种双模态多通道脑功能监测装置
CN106798562A (zh) 基于近红外光谱成像驱动的前庭电刺激空间定向障碍对抗装置
CN108312964A (zh) 一种疲劳驾驶状态识别预警系统及方法
CN107811634A (zh) 一种基于移动终端的具有脑电检测的多功能智能帽子
Chen et al. A wearable sensor system for neonatal seizure monitoring
CN113693601A (zh) 一种融合脑电波和生理信号的多感知智能人机交互方法
Hamza Cherif et al. Monitoring driver health status in real time
EP4528660A1 (en) Human-machine interaction collection method, apparatus and system for wearable extended reality device
CN111645694A (zh) 一种基于姿态估计的驾驶员驾驶状态监测系统及方法
CN105534498A (zh) 一种基于物联网压电电缆应用技术的生命体动监测仪
CN109431498A (zh) 穿戴式多模态驾驶员生理状态监测系统
EP4226854A1 (en) Wearable multi-index integrated physiological intelligent sensor system and physiological index monitoring method
CN207029275U (zh) 能实时监测人体健康状况的汽车方向盘系统
CN206080499U (zh) 一种多功能医用腕带

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190308