JP6780182B2 - 音声分析による肺疾患の評価 - Google Patents
音声分析による肺疾患の評価 Download PDFInfo
- Publication number
- JP6780182B2 JP6780182B2 JP2018516182A JP2018516182A JP6780182B2 JP 6780182 B2 JP6780182 B2 JP 6780182B2 JP 2018516182 A JP2018516182 A JP 2018516182A JP 2018516182 A JP2018516182 A JP 2018516182A JP 6780182 B2 JP6780182 B2 JP 6780182B2
- Authority
- JP
- Japan
- Prior art keywords
- voice
- processor
- subject
- lung disease
- related parameters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 208000019693 Lung disease Diseases 0.000 title claims description 59
- 238000004458 analytical method Methods 0.000 title claims description 31
- 238000011156 evaluation Methods 0.000 title claims description 8
- 238000000034 method Methods 0.000 claims description 45
- 230000004044 response Effects 0.000 claims description 38
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 28
- 201000010099 disease Diseases 0.000 claims description 26
- 239000012530 fluid Substances 0.000 claims description 17
- 238000009825 accumulation Methods 0.000 claims description 13
- 230000003595 spectral effect Effects 0.000 claims description 12
- 230000006866 deterioration Effects 0.000 claims description 9
- 238000010801 machine learning Methods 0.000 claims description 8
- 206010011224 Cough Diseases 0.000 claims description 7
- 238000010295 mobile communication Methods 0.000 claims description 7
- 230000009466 transformation Effects 0.000 claims description 7
- 208000002151 Pleural effusion Diseases 0.000 claims description 6
- 206010037423 Pulmonary oedema Diseases 0.000 claims description 6
- 208000005333 pulmonary edema Diseases 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 208000037656 Respiratory Sounds Diseases 0.000 claims description 4
- 206010047924 Wheezing Diseases 0.000 claims description 4
- 238000010183 spectrum analysis Methods 0.000 claims description 3
- 210000001124 body fluid Anatomy 0.000 claims 2
- 239000010839 body fluid Substances 0.000 claims 2
- 230000001131 transforming effect Effects 0.000 claims 1
- 210000004072 lung Anatomy 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 13
- 239000003814 drug Substances 0.000 description 9
- 230000005713 exacerbation Effects 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 7
- 229940079593 drug Drugs 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000000241 respiratory effect Effects 0.000 description 5
- 238000000502 dialysis Methods 0.000 description 4
- 210000001260 vocal cord Anatomy 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000036541 health Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 208000006545 Chronic Obstructive Pulmonary Disease Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 208000006673 asthma Diseases 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 239000002934 diuretic Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 230000001052 transient effect Effects 0.000 description 2
- 206010007558 Cardiac failure chronic Diseases 0.000 description 1
- 208000004756 Respiratory Insufficiency Diseases 0.000 description 1
- 208000003028 Stuttering Diseases 0.000 description 1
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000001684 chronic effect Effects 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000003066 decision tree Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 230000010339 dilation Effects 0.000 description 1
- 208000035475 disorder Diseases 0.000 description 1
- 230000001882 diuretic effect Effects 0.000 description 1
- 229940030606 diuretics Drugs 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000011049 filling Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 239000007789 gas Substances 0.000 description 1
- 239000011440 grout Substances 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 238000002483 medication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000001301 oxygen Substances 0.000 description 1
- 229910052760 oxygen Inorganic materials 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000037081 physical activity Effects 0.000 description 1
- 210000003281 pleural cavity Anatomy 0.000 description 1
- 238000002203 pretreatment Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 201000004193 respiratory failure Diseases 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 210000002345 respiratory system Anatomy 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/08—Measuring devices for evaluating the respiratory organs
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4803—Speech analysis specially adapted for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4869—Determining body composition
- A61B5/4875—Hydration status, fluid retention of the body
- A61B5/4878—Evaluating oedema
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7253—Details of waveform analysis characterised by using transforms
- A61B5/7257—Details of waveform analysis characterised by using transforms using Fourier transforms
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1822—Parsing for meaning understanding
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/15—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being formant information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/18—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/24—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being the cepstrum
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/66—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for extracting parameters related to health condition
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
- G16B40/00—ICT specially adapted for biostatistics; ICT specially adapted for bioinformatics-related machine learning or data mining, e.g. knowledge discovery or pattern finding
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Epidemiology (AREA)
- Artificial Intelligence (AREA)
- Physiology (AREA)
- Primary Health Care (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Psychiatry (AREA)
- Mathematical Physics (AREA)
- Pulmonology (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Bioethics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Biotechnology (AREA)
- Evolutionary Biology (AREA)
- Theoretical Computer Science (AREA)
Description
本願は2015年10月8日出願の名称「音声分析による肺疾患の評価」の米国暫定出願第62/238,732(特許文献1)の恩恵を主張し、それはここに参照して取り入れられる。
胸水は、肺を取り囲む体液で満たされる空間である、胸膜腔に蓄積する余分な体液である。この過剰な体液は、肺の拡張を制限することにより呼吸を阻害する可能性がある。
いくつかの実施形態では、プロセッサは、音声のケプストラム分析を実行することにより音声を分析するように構成される。
いくつかの実施形態では、プロセッサは、音声を分析することにより、その音声の意味を識別するようにさらに構成され、ここでプロセッサは、意味に応答して状態を評価するように構成される。
いくつかの実施形態では、プロセッサは、被験者に電話をかけ、そして被験者が電話に応答する時に、質問を被験者に聞くことにより、音声を提供するように被験者に促すように構成される。
いくつかの実施形態では、疾患は肺水腫、および胸水から構成されるグループから選択される。
いくつかの実施形態では、音声関連パラメータは、音声の少なくとも1つのフォルマント周波数を含む。
いくつかの実施形態では、プロセッサは、フォルマント周波数をベースライン周波数と比較することにより肺疾患の状態を評価するように構成される。
いくつかの実施形態では、プロセッサは、音声関連パラメータに機械学習モデルを適用することにより、肺疾患の状態を評価するように構成される。
いくつかの実施形態では、音声関連パラメータは1組のメル周波数ケプストラム係数(MFCC)の導関数を含む。
いくつかの実施形態では、音声関連パラメータは1組の相対スペクトル変換知覚線形予測(RASTA−PLP)ケプストラム成分を含む。
いくつかの実施形態では、プロセッサは、音声内の咳音を識別することなく、かつ喘鳴音を識別することなく肺疾患の状態を評価するように構成される。
いくつかの実施形態では、プロセッサは、最初に被験者に対し音声を提供するように促すことなく、被験者の音声を分析するように構成される。
最初に、本発明のいくつかの実施形態による、肺疾患の状態を評価するためのシステム20の概略図である図1を参照する。システム20は、スマートフォン24または他の移動通信端末などのような通信および/またはコンピューティングデバイス、およびサーバ26を備える。肺水腫または胸水などの肺疾患に罹患している被験者22は、典型的には、被験者の通常の日常会話活動の経過中にスマートフォン24に向かって話す。スマートフォンは、被験者の音声をサーバ26に送信し、サーバ26は、肺状態の状態を評価するなどのため、以下でさらに説明するように、音声を分析する。(このような分析は、被験者が話しているときに、オフラインで、またはリアルタイムで実行してもよい。)次に、サーバは分析の結果をスマートフォンに返し、スマートフォンは、肺疾患の状態を示す、音声および/または映像出力として出力を生成する。例えば、サーバは、疾患の悪化のサーバの識別に応答して、スマートフォンを介して、悪化を示す警告を提供し、および/または被験者に医師と話すよう指示し、処方された薬物を服用し、および/または、服用する薬剤のタイプを調整するか、または投薬量を増加させることができる。逆に、被験者の状態の改善または安定化に応答して、システムは投薬量の減少を推奨してもよい。
(一般に、D次元、1記録あたりのF個のフレーム、およびN個の記録を仮定すると、アルゴリズムに供給される「トレーニングセット」は、サイズDxFNのマトリックスを含む。例えば、20個の記録(例えば10個の「ウェット」個六と10個の「ドライ」記録)、記録当たり150フレーム、および48次元とすると、トレーニングセットは48x3000のサイズのマトリックスを含む。)
Claims (41)
- 装置であって、
ネットワークインタフェース;および
プロセッサ;を有し、
前記プロセッサは、
前記ネットワークインタフェース経由で、余剰体液の蓄積に関係する肺疾患を罹患する被験者の音声を受信し、
前記音声を分析することにより、前記音声の1つまたはそれ以上の音声関連パラメータを識別し、
前記音声関連パラメータに応答して、前記肺疾患の状態を評価し、そして
前記評価に応答して、前記肺疾患の状態を示す出力を生成する、
ように構成される、ことを特徴とする装置。 - 前記プロセッサは、前記音声のスペクトル分析を実行することにより前記音声を分析するように構成される、ことを特徴とする請求項1に記載の装置。
- 前記プロセッサは、前記音声のケプストラム分析を実行することにより前記音声を分析するように構成される、ことを特徴とする請求項1に記載の装置。
- 前記プロセッサは、前記音声を分析することにより、前記音声の意味を識別するようにさらに構成され、ここで前記プロセッサは、前記意味に応答して前記状態を評価するように構成される、ことを特徴とする請求項1に記載の装置。
- 前記プロセッサは、前記被験者に対し、質問に口頭で応答することにより、前記音声を提供するように促すようにさらに構成される、ことを特徴とする請求項1に記載の装置。
- 前記プロセッサは、
前記被験者に電話をかけ、そして前記被験者が電話に応答する時に、前記質問を前記被験者に聞くことにより、
前記音声を提供するように前記被験者に促すように構成される、ことを特徴とする請求項5に記載の装置。 - 前記疾患は肺水腫、および胸水から構成されるグループから選択される、ことを特徴とする請求項1に記載の装置。
- 前記プロセッサは、前記状態の悪化を示す警告を提供することにより前記出力を生成するように構成される、ことを特徴とする請求項1に記載の装置。
- 前記音声関連パラメータは、前記音声の少なくとも1つのフォルマント周波数を含む、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記プロセッサは、前記フォルマント周波数をベースライン周波数と比較することにより前記肺疾患の状態を評価するように構成される、ことを特徴とする請求項9に記載の装置。
- 前記プロセッサは、
前記音声に対応する時間空間の信号のそれぞれのフレームに対し:
前記フレームのケプストラムを計算し;
その後、前記フレームの前記ケプストラムに対しローパスケプストラムリフタを適用し;
その後、前記ローパスケプストラムリフタを適用された前記ケプストラムを逆変換し;そして
その後、前記逆変換された、前記リフトされたケプストラムのピークを識別することにより、前記フレームのフォルマント周波数を識別し;
そして
前記フレームのそれぞれの前記フォルマント周波数に基づいて、前記音声の少なくとも1つのフォルマント周波数を識別する、
ことにより前記音声を分析するように構成される、ことを特徴とする請求項9に記載の装置。 - 前記プロセッサは、
分析のために:前記音声のエネルギーレベル、前記音声のピッチの安定性、前記音声のピッチの計算の信頼度、および前記音声のフォルマント周波数の安定性、からなるグループから選択される1つまたはそれ以上のメトリックに基づき、前記音声の少なくとも1つの部分を選択し、そして
その後、前記音声の前記選択された部分を分析する、
ことにより前記音声を分析するように構成される、ことを特徴とする請求項1−8のいずれか1項記載の装置。 - 前記プロセッサは、前記音声関連パラメータに機械学習モデルを適用することにより、前記肺疾患の状態を評価するように構成される、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記音声関連パラメータは1組のメル周波数ケプストラム係数(MFCC)を含む、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記音声関連パラメータは1組のメル周波数ケプストラム係数(MFCC)の導関数を含む、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記音声関連パラメータは1組の相対スペクトル変換知覚線形予測(RASTA−PLP)ケプストラム成分を含む、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記音声関連パラメータは1組の相対スペクトル変換知覚線形予測(RASTA−PLP)スペクトル成分を含む、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記プロセッサは、前記音声内の咳音を識別することなく、かつ喘鳴音を識別することなく肺疾患の状態を評価するように構成される、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 前記プロセッサは、最初に前記被験者に対し前記音声を提供するように促すことなく、前記被験者の前記音声を分析するように構成される、ことを特徴とする請求項1−8のいずれか1項記載の装置。
- 1つまたはそれ以上の装置を操作する方法であって、
前記方法は前記装置のそれぞれのプロセッサにより実行され、
余剰体液の蓄積に関係する肺疾患を罹患する被験者の音声を分析するステップにより、前記音声の1つまたはそれ以上の音声関連パラメータを識別するステップと;
前記音声関連パラメータに応答して、自動的に前記肺疾患の状態を評価するステップと;そして
前記評価に応答して、前記肺疾患の状態を示す出力を生成するステップと;
を有することを特徴とする1つまたはそれ以上の装置を操作する方法。 - 前記音声を分析するステップは、前記音声のスペクトル分析を実行するステップを有する、ことを特徴とする請求項20に記載の方法。
- 前記音声を分析するステップは、前記音声のケプストラム分析を実行するステップを有する、ことを特徴とする請求項20に記載の方法。
- 前記被験者の音声を自動的に分析することにより、前記音声の意味を識別するステップをさらに有し、前記状態を評価するステップは、前記意味に応答して前記状態を評価するステップを有する、ことを特徴とする請求項20に記載の方法。
- 前記被験者に対し、質問に口頭で応答することにより、前記音声を提供するように促すステップをさらに有する、ことを特徴とする請求項20に記載の方法。
- 前記被験者に対し音声を提供するように促すステップは、
前記被験者に自動的に電話をかけるステップと、そして
前記被験者が電話に応答する時に、前記プロセッサを使用して、前記質問を前記被験者に聞くステップと、
を有する、ことを特徴とする請求項24に記載の方法。 - 前記疾患は肺水腫、および胸水から構成されるグループから選択される、ことを特徴とする請求項20に記載の方法。
- 前記出力を生成するステップは、前記状態の悪化を示す警告を提供するステップを有する、ことを特徴とする請求項20に記載の方法。
- 前記音声関連パラメータは、前記音声の少なくとも1つのフォルマント周波数を含む、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記肺疾患の状態を評価するステップは、前記フォルマント周波数をベースライン周波数と比較することにより前記肺疾患の状態を評価するステップを有する、ことを特徴とする請求項28に記載の方法。
- 前記音声を分析するステップは、
前記音声に対応する時間空間の信号のそれぞれのフレームに対し:
前記フレームのケプストラムを計算するステップと;
その後、前記フレームの前記ケプストラムに対しローパスケプストラムリフタを適用するステップと;
その後、前記ローパスケプストラムリフタを適用された前記ケプストラムを逆変換するステップと;そして
その後、前記逆変換されたリフトされたケプストラムのピークを識別することにより、前記フレームのフォルマント周波数を識別するステップと;
そして
前記フレームのそれぞれの前記フォルマント周波数に基づいて、前記音声の少なくとも1つのフォルマント周波数を識別するステップと、
を有する、ことを特徴とする請求項28に記載の方法。 - 前記音声を分析するステップは:
前記音声のエネルギーレベル、前記音声のピッチの安定性、前記音声のピッチの計算の信頼度、および前記音声のフォルマント周波数の安定性、からなるグループから選択される1つまたはそれ以上のメトリックに基づき、前記音声の少なくとも1つの部分を分析のために選択するステップと;、そして
その後、前記音声の前記選択された部分を分析するステップと;
を有する、ことを特徴とする請求項20−27のいずれか1項記載の方法。 - 前記肺疾患の状態を評価するステップは、前記音声関連パラメータに機械学習モデルを適用するステップを有する、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記音声関連パラメータは1組のメル周波数ケプストラム係数(MFCC)を含む、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記音声関連パラメータは1組のメル周波数ケプストラム係数(MFCC)の導関数を含む、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記音声関連パラメータは1組の相対スペクトル変換知覚線形予測(RASTA−PLP)ケプストラム成分を含む、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記音声関連パラメータは1組の相対スペクトル変換知覚線形予測(RASTA−PLP)スペクトル成分を含む、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 肺疾患の状態を評価するステップは、前記音声内の咳音を識別することなく、そして喘鳴音を識別することなく肺疾患の状態を評価するステップを有する、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- 前記被験者の前記音声を分析するステップは、最初に前記被験者に対し前記音声を提供するように促すことなく、前記被験者の前記音声を分析するステップを有する、ことを特徴とする請求項20−27のいずれか1項記載の方法。
- システムであって:
移動通信端末と;そして
プロセッサを備えるサーバと;を有し、
前記プロセッサは、
前記移動通信端末から、余剰体液の蓄積に関係する肺疾患を罹患する被験者の音声を受信し、
前記音声を分析することにより、前記音声の1つまたはそれ以上の音声関連パラメータを識別し、
前記音声関連パラメータに応答して、前記肺疾患の状態を評価し、そして
前記評価に応答して、前記肺疾患の状態を示す出力を生成する、
ように構成される、
ことを特徴とするシステム。 - プログラム命令が保管される接触可能非一過性コンピュータ可読媒体であって、
前記命令は、プロセッサによって読み取られた場合に、前記プロセッサに対し、
余剰体液の蓄積に関係する肺疾患を罹患する被験者の音声を受信し、
前記音声を分析することにより、前記音声の1つまたはそれ以上の音声関連パラメータを識別し、
前記音声関連パラメータに応答して、前記肺疾患の状態を評価し、そして
前記評価に応答して、前記肺疾患の状態を示す出力を生成する、
ようにさせる、
ことを特徴とするコンピュータ可読媒体。 - 装置であって、
音響センサと;および
プロセッサと;を有し、
前記プロセッサは、
前記音響センサ経由で、余剰体液の蓄積に関係する肺疾患を罹患する被験者の音声を受信し、
前記音声を分析することにより、前記音声の1つまたはそれ以上の音声関連パラメータを識別し、
前記音声関連パラメータに応答して、前記肺疾患の状態を評価し、そして
前記評価に応答して、前記肺疾患の状態を示す出力を生成する、
ように構成される、ことを特徴とする装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201562238732P | 2015-10-08 | 2015-10-08 | |
US62/238,732 | 2015-10-08 | ||
PCT/IB2016/055954 WO2017060828A1 (en) | 2015-10-08 | 2016-10-05 | Assessment of a pulmonary condition by speech analysis |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018534026A JP2018534026A (ja) | 2018-11-22 |
JP2018534026A5 JP2018534026A5 (ja) | 2020-09-17 |
JP6780182B2 true JP6780182B2 (ja) | 2020-11-04 |
Family
ID=58487267
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018516182A Active JP6780182B2 (ja) | 2015-10-08 | 2016-10-05 | 音声分析による肺疾患の評価 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10796805B2 (ja) |
EP (1) | EP3359023B1 (ja) |
JP (1) | JP6780182B2 (ja) |
CN (1) | CN108135485B (ja) |
AU (1) | AU2016333816B2 (ja) |
WO (1) | WO2017060828A1 (ja) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2016333816B2 (en) | 2015-10-08 | 2018-09-27 | Cordio Medical Ltd. | Assessment of a pulmonary condition by speech analysis |
EP4529833A2 (en) * | 2017-02-12 | 2025-04-02 | Cardiokol Ltd. | Verbal periodic screening for heart disease |
US20190150849A1 (en) * | 2017-11-17 | 2019-05-23 | HD Data Incorporated | Spiroxmeter smart system |
JP2021506486A (ja) * | 2017-12-21 | 2021-02-22 | ザ ユニバーシティ オブ クィーンズランド | 呼吸器疾患を診断するために疾患シグネチャを使用して咳音を分析するための方法 |
JP6909733B2 (ja) * | 2018-01-26 | 2021-07-28 | 株式会社日立製作所 | 音声分析装置および音声分析方法 |
CN108417225A (zh) * | 2018-02-11 | 2018-08-17 | 广州市碳码科技有限责任公司 | 一种呼吸音监测方法、装置、终端及计算机可读存储介质 |
JP7076732B2 (ja) * | 2018-03-01 | 2022-05-30 | 公立大学法人広島市立大学 | アデノイド肥大判定装置、アデノイド肥大判定方法及びプログラム |
CN108766462B (zh) * | 2018-06-21 | 2021-06-08 | 浙江中点人工智能科技有限公司 | 一种基于梅尔频谱一阶导数的语音信号特征学习方法 |
US11380351B2 (en) * | 2018-09-20 | 2022-07-05 | Samsung Electronics Co., Ltd. | System and method for pulmonary condition monitoring and analysis |
US10847177B2 (en) | 2018-10-11 | 2020-11-24 | Cordio Medical Ltd. | Estimating lung volume by speech analysis |
US11011188B2 (en) | 2019-03-12 | 2021-05-18 | Cordio Medical Ltd. | Diagnostic techniques based on speech-sample alignment |
US11024327B2 (en) | 2019-03-12 | 2021-06-01 | Cordio Medical Ltd. | Diagnostic techniques based on speech models |
KR20210137502A (ko) * | 2019-03-12 | 2021-11-17 | 코디오 메디칼 리미티드 | 음성 샘플 정렬에 기반한 진단 기법 |
CN110111815A (zh) * | 2019-04-16 | 2019-08-09 | 平安科技(深圳)有限公司 | 动物异常声音监控方法及装置、存储介质、电子设备 |
CA3142423A1 (en) * | 2019-05-30 | 2020-12-03 | Insurance Services Office, Inc. | Systems and methods for machine learning of voice attributes |
JP7239109B2 (ja) * | 2019-06-12 | 2023-03-14 | 株式会社モリタ製作所 | 推定装置、推定システム、推定装置の作動方法、および推定用プログラム |
EP3838137A1 (en) * | 2019-12-19 | 2021-06-23 | Koninklijke Philips N.V. | Automated and objective symptom severity score |
US11232570B2 (en) | 2020-02-13 | 2022-01-25 | Olympus Corporation | System and method for diagnosing severity of gastritis |
US11484211B2 (en) * | 2020-03-03 | 2022-11-01 | Cordio Medical Ltd. | Diagnosis of medical conditions using voice recordings and auscultation |
US11877863B2 (en) * | 2020-03-27 | 2024-01-23 | Inkwell Health Ltd. | Apparatus, systems, and methods for monitoring respiratory function |
US11240579B2 (en) | 2020-05-08 | 2022-02-01 | Level 42 Ai | Sensor systems and methods for characterizing health conditions |
US11417342B2 (en) * | 2020-06-29 | 2022-08-16 | Cordio Medical Ltd. | Synthesizing patient-specific speech models |
EP3964134A1 (en) * | 2020-09-02 | 2022-03-09 | Hill-Rom Services PTE. LTD. | Lung health sensing through voice analysis |
US12023146B2 (en) * | 2020-10-08 | 2024-07-02 | International Business Machines Corporation | Multi-modal lung capacity measurement for respiratory illness prediction |
CN112472065A (zh) * | 2020-11-18 | 2021-03-12 | 天机医用机器人技术(清远)有限公司 | 基于咳嗽声识别的病症检测方法及其相关设备 |
US20220165295A1 (en) | 2020-11-23 | 2022-05-26 | Cordio Medical Ltd. | Detecting impaired physiological function by speech analysis |
JP2023550330A (ja) * | 2020-11-23 | 2023-12-01 | コルディオ メディカル リミテッド | 呼気濃度と音声解析から抽出したスペクトル包絡線からの生理機能障害の検出 |
US20220257175A1 (en) * | 2021-02-11 | 2022-08-18 | Samsung Electronics Co., Ltd | Speech-based pulmonary assessment |
KR102685274B1 (ko) * | 2022-09-16 | 2024-07-17 | 사회복지법인 삼성생명공익재단 | 음성 데이터 및 임상 정보를 이용하여 대상자의 폐질환의 중증도를 분류하는 방법 및 분석장치 |
WO2024058585A1 (ko) * | 2022-09-16 | 2024-03-21 | 사회복지법인 삼성생명공익재단 | 음성 데이터 및 임상 정보를 이용하여 대상자의 폐질환의 중증도를 분류하는 방법 및 분석장치 |
WO2024081343A1 (en) * | 2022-10-14 | 2024-04-18 | The Johns Hopkins University | Systems and methods for acoustic-based diagnosis |
Family Cites Families (97)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1219618A (en) | 1968-08-07 | 1971-01-20 | Vsesojusny Nii Med Priborostro | Apparatus for acoustic examination of the lungs |
US4838275A (en) | 1985-11-29 | 1989-06-13 | Lee Arnold St J | Home medical surveillance system |
JPH0482538A (ja) * | 1990-07-25 | 1992-03-16 | Hitachi Ltd | 呼吸音診断装置 |
US5864810A (en) | 1995-01-20 | 1999-01-26 | Sri International | Method and apparatus for speech recognition adapted to an individual speaker |
JPH09173320A (ja) * | 1995-12-25 | 1997-07-08 | Casio Comput Co Ltd | 音声検査装置 |
US5853005A (en) | 1996-05-02 | 1998-12-29 | The United States Of America As Represented By The Secretary Of The Army | Acoustic monitoring system |
FI2607U1 (fi) | 1996-06-17 | 1996-09-27 | Nokia Mobile Phones Ltd | Lisäyksikkö, joka on tarkoitettu kytkettäväksi digitaaliseen langattomaan puhelimeen |
US6168568B1 (en) | 1996-10-04 | 2001-01-02 | Karmel Medical Acoustic Technologies Ltd. | Phonopneumograph system |
US6241683B1 (en) | 1998-02-20 | 2001-06-05 | INSTITUT DE RECHERCHES CLINIQUES DE MONTRéAL (IRCM) | Phonospirometry for non-invasive monitoring of respiration |
US6389393B1 (en) | 1998-04-28 | 2002-05-14 | Texas Instruments Incorporated | Method of adapting speech recognition models for speaker, microphone, and noisy environment |
FI981508L (fi) | 1998-06-30 | 1999-12-31 | Nokia Mobile Phones Ltd | Menetelmä, laite ja järjestelmä käyttäjän tilan arvioimiseksi |
IL128000A0 (en) | 1999-01-11 | 1999-11-30 | Univ Ben Gurion | A method for the diagnosis of thought states by analysis of interword silences |
US6600949B1 (en) | 1999-11-10 | 2003-07-29 | Pacesetter, Inc. | Method for monitoring heart failure via respiratory patterns |
SE517026C2 (sv) | 2000-11-17 | 2002-04-02 | Forskarpatent I Syd Ab | Metod och anordning för talanalys |
US7035797B2 (en) * | 2001-12-14 | 2006-04-25 | Nokia Corporation | Data-driven filtering of cepstral time trajectories for robust speech recognition |
JP3582598B2 (ja) * | 2002-02-18 | 2004-10-27 | 貴司 吉峰 | 診断システム |
WO2003081578A1 (en) | 2002-03-21 | 2003-10-02 | U.S. Army Medical Research And Materiel Command | Methods and systems for detecting, measuring, and monitoring stress in speech |
US6983246B2 (en) | 2002-05-21 | 2006-01-03 | Thinkengine Networks, Inc. | Dynamic time warping using frequency distributed distance measures |
US7226422B2 (en) | 2002-10-09 | 2007-06-05 | Cardiac Pacemakers, Inc. | Detection of congestion from monitoring patient response to a recumbent position |
IL161562A0 (en) | 2002-11-11 | 2004-09-27 | Electronic Navigation Res Inst | Psychosomatic diagnosis system |
AU2004229488B2 (en) | 2003-04-10 | 2011-07-14 | Adidas Ag | Systems and methods for respiratory event detection |
US20080082018A1 (en) * | 2003-04-10 | 2008-04-03 | Sackner Marvin A | Systems and methods for respiratory event detection |
IL155955A0 (en) | 2003-05-15 | 2003-12-23 | Widemed Ltd | Adaptive prediction of changes of physiological/pathological states using processing of biomedical signal |
JP2006075447A (ja) | 2004-09-13 | 2006-03-23 | Hitachi Ltd | 携帯ヘルスチェック装置およびそれを用いた呼気分析サービス方法 |
US20060116878A1 (en) | 2004-11-30 | 2006-06-01 | Kenji Nagamine | Asthma diagnostic apparatus, asthma diagnostic method, and storage medium storing asthma diagnostic program |
US7762264B1 (en) | 2004-12-14 | 2010-07-27 | Lsvt Global, Inc. | Total communications and body therapy |
US20060167385A1 (en) | 2005-01-24 | 2006-07-27 | 3M Innovative Properties Company | Analysis of auscultatory sounds using voice recognition |
US9089275B2 (en) | 2005-05-11 | 2015-07-28 | Cardiac Pacemakers, Inc. | Sensitivity and specificity of pulmonary edema detection when using transthoracic impedance |
US7529670B1 (en) | 2005-05-16 | 2009-05-05 | Avaya Inc. | Automatic speech recognition system for people with speech-affecting disabilities |
US7398213B1 (en) | 2005-05-17 | 2008-07-08 | Exaudios Technologies | Method and system for diagnosing pathological phenomenon using a voice signal |
US7457753B2 (en) | 2005-06-29 | 2008-11-25 | University College Dublin National University Of Ireland | Telephone pathology assessment |
JP4786384B2 (ja) | 2006-03-27 | 2011-10-05 | 株式会社東芝 | 音声処理装置、音声処理方法および音声処理プログラム |
US8684900B2 (en) | 2006-05-16 | 2014-04-01 | Bao Tran | Health monitoring appliance |
US20080013747A1 (en) | 2006-06-30 | 2008-01-17 | Bao Tran | Digital stethoscope and monitoring instrument |
US20080275349A1 (en) | 2007-05-02 | 2008-11-06 | Earlysense Ltd. | Monitoring, predicting and treating clinical episodes |
US8221323B2 (en) * | 2007-08-03 | 2012-07-17 | Cardiac Pacemakers, Inc. | Using acoustic energy to compute a lung edema fluid status indication |
US8591430B2 (en) | 2007-09-14 | 2013-11-26 | Corventis, Inc. | Adherent device for respiratory monitoring |
US20090099848A1 (en) | 2007-10-16 | 2009-04-16 | Moshe Lerner | Early diagnosis of dementia |
WO2010123483A2 (en) | 2008-02-28 | 2010-10-28 | Mcclean Hospital Corporation | Analyzing the prosody of speech |
US20090326937A1 (en) | 2008-04-21 | 2009-12-31 | Microsoft Corporation | Using personalized health information to improve speech recognition |
EP2124223B1 (en) | 2008-05-16 | 2018-03-28 | Beyond Verbal Communication Ltd. | Methods and systems for diagnosing a pathological phenomenon using a voice signal |
GB0814442D0 (en) | 2008-08-08 | 2008-09-10 | Health Smart Ltd | Breathing Monitor |
US8320588B2 (en) | 2009-02-10 | 2012-11-27 | Mcpherson Jerome Aby | Microphone mover |
US8689606B2 (en) | 2009-03-23 | 2014-04-08 | Koninklijke Philips N.V. | Gas sensing using ultrasound |
WO2011011413A2 (en) | 2009-07-20 | 2011-01-27 | University Of Florida Research Foundation, Inc. | Method and apparatus for evaluation of a subject's emotional, physiological and/or physical state with the subject's physiological and/or acoustic data |
US20110021940A1 (en) | 2009-07-21 | 2011-01-27 | Edmond Chu | Incentive audio for pulmonary function diagnostics |
US9138167B1 (en) | 2009-09-25 | 2015-09-22 | Krispin Johan Leydon | Means for rendering key respiratory measurements accessible to mobile digital devices |
US9357921B2 (en) | 2009-10-16 | 2016-06-07 | At&T Intellectual Property I, Lp | Wearable health monitoring system |
US9492096B2 (en) | 2009-11-03 | 2016-11-15 | Vivaquant Llc | ECG sensing apparatuses, systems and methods |
US8758262B2 (en) * | 2009-11-25 | 2014-06-24 | University Of Rochester | Respiratory disease monitoring system |
CN102971755A (zh) | 2010-01-21 | 2013-03-13 | 阿斯玛西格诺斯公司 | 用于慢性病管理的早期告警方法和系统 |
MX2013001557A (es) | 2010-08-13 | 2013-06-28 | Respiratory Motion Inc | Dispositivos y metodos para el control de la variacion respiratoria mediante la medicion de volumenes, movimiento y variabilidad respiratoria. |
US20130190641A1 (en) | 2010-09-22 | 2013-07-25 | Meytar (Dital) Engineering Limited | Modular acoustic spirometer |
US8784311B2 (en) * | 2010-10-05 | 2014-07-22 | University Of Florida Research Foundation, Incorporated | Systems and methods of screening for medical states using speech and other vocal behaviors |
EP2438863A1 (en) | 2010-10-05 | 2012-04-11 | Phibio Science AB | System and methods for analysis of pause time durations in speech. |
EP2636369A4 (en) | 2010-11-04 | 2014-09-24 | Panasonic Corp | BIOMETRIC SOUND MEASURING DEVICE AND BIOMETRIC MEASUREMENT METHOD |
US9412161B2 (en) | 2011-01-25 | 2016-08-09 | Novartis Ag | Systems and methods for medical use of motion imaging and capture |
CN102125427B (zh) | 2011-01-29 | 2012-08-22 | 清华大学 | 一种手机体检系统 |
EP2670304B1 (en) | 2011-01-31 | 2020-04-01 | Koninklijke Philips N.V. | Automated spirogram analysis and interpretation |
CN103458782B (zh) | 2011-03-16 | 2016-02-17 | 皇家飞利浦有限公司 | 呼吸困难和水肿症状评估 |
US9070357B1 (en) | 2011-05-11 | 2015-06-30 | Brian K. Buchheit | Using speech analysis to assess a speaker's physiological health |
US20130018274A1 (en) | 2011-07-13 | 2013-01-17 | O'neill Alfonso V | System and device for testing pulmonary function |
GB201113572D0 (en) | 2011-08-05 | 2011-09-21 | Morgan David | A portable device for the monitoring of medical conitions |
US20140213925A1 (en) | 2011-09-20 | 2014-07-31 | Isonea Limited | Systems, methods and kits for measuring respiratory rate and dynamically predicting respiratory episodes |
CN202261466U (zh) | 2011-10-09 | 2012-05-30 | 江苏省莱科信息技术有限公司 | 一种具有肺活量检测功能的移动终端 |
CN102423262A (zh) | 2011-10-09 | 2012-04-25 | 江苏省莱科信息技术有限公司 | 一种具有肺活量检测功能的移动终端及其肺活量检测方法 |
CN102497472B (zh) | 2011-11-29 | 2014-09-10 | 惠州Tcl移动通信有限公司 | 基于手机麦克风的肺活量测试系统 |
WO2013089073A1 (ja) * | 2011-12-13 | 2013-06-20 | シャープ株式会社 | 情報解析装置、電子聴診器、情報解析方法、測定システム、制御プログラム、および、記録媒体 |
US20130158434A1 (en) | 2011-12-20 | 2013-06-20 | Delta Electronics, Inc. | Apparatus for voice assisted medical diagnosis |
US10098569B2 (en) * | 2012-03-29 | 2018-10-16 | The University Of Queensland | Method and apparatus for processing patient sounds |
JP6272308B2 (ja) | 2012-05-10 | 2018-01-31 | ユニバーシティ オブ ワシントン スルー イッツ センター フォー コマーシャリゼーション | 音ベースの肺活量測定のデバイス、システムおよび方法 |
US20140073993A1 (en) | 2012-08-02 | 2014-03-13 | University Of Notre Dame Du Lac | Systems and methods for using isolated vowel sounds for assessment of mild traumatic brain injury |
JP6270225B2 (ja) | 2012-09-05 | 2018-01-31 | コルディオ メディカル リミテッド | 肺活量及び体力を測定するシステム及び方法 |
WO2014045257A1 (en) | 2012-09-24 | 2014-03-27 | Koninklijke Philips N.V. | System and method for determining a person's breathing |
US9922641B1 (en) | 2012-10-01 | 2018-03-20 | Google Llc | Cross-lingual speaker adaptation for multi-lingual speech synthesis |
US9579056B2 (en) | 2012-10-16 | 2017-02-28 | University Of Florida Research Foundation, Incorporated | Screening for neurological disease using speech articulation characteristics |
CA2798337A1 (en) | 2012-12-04 | 2014-06-04 | University Of Winnipeg | Cardiovascular pulse wave analysis method and system |
WO2014107798A1 (en) | 2013-01-14 | 2014-07-17 | University Health Network | Mask and method for breathing disorder identification, characterization and/or diagnosis |
AU2014225626B2 (en) | 2013-03-06 | 2018-02-15 | Cerora, Inc. | Form factors for the multi-modal physiological assessment of brain health |
US20140302472A1 (en) | 2013-04-09 | 2014-10-09 | Xerox Business Services, Llc | Lamaze breathing coach |
US20140378810A1 (en) | 2013-04-18 | 2014-12-25 | Digimarc Corporation | Physiologic data acquisition and analysis |
US20140314212A1 (en) | 2013-04-22 | 2014-10-23 | Avaya Inc. | Providing advisory information associated with detected auditory and visual signs in a psap environment |
US10265012B2 (en) | 2013-05-20 | 2019-04-23 | Beyond Verbal Communication Ltd. | Method and system for determining a pre-multisystem failure condition using time integrated voice analysis |
US9183830B2 (en) * | 2013-11-01 | 2015-11-10 | Google Inc. | Method and system for non-parametric voice conversion |
WO2015168606A1 (en) | 2014-05-02 | 2015-11-05 | The Regents Of The University Of Michigan | Mood monitoring of bipolar disorder using speech analysis |
EP3160334B1 (en) | 2014-08-22 | 2021-12-01 | SRI International | Speech-based assessment of a patient's state-of-mind |
US10201307B2 (en) * | 2014-09-24 | 2019-02-12 | International Business Machines Corporation | System and method to measure, analyze, and model pulmonary function and disease utilizing temporal, spatial, and contextual data |
EP3211918B1 (en) | 2014-10-20 | 2021-08-25 | Sony Group Corporation | Voice processing system |
US20160302003A1 (en) * | 2015-04-08 | 2016-10-13 | Cornell University | Sensing non-speech body sounds |
JP6770527B2 (ja) * | 2015-04-16 | 2020-10-14 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 対象の疾患を検出するデバイス、システム、方法及びコンピュータプログラム |
US10672385B2 (en) | 2015-09-04 | 2020-06-02 | Honeywell International Inc. | Method and system for remotely training and commanding the speech recognition system on a cockpit via a carry-on-device in a connected aircraft |
US10706873B2 (en) | 2015-09-18 | 2020-07-07 | Sri International | Real-time speaker state analytics platform |
AU2016333816B2 (en) | 2015-10-08 | 2018-09-27 | Cordio Medical Ltd. | Assessment of a pulmonary condition by speech analysis |
EP3364859A4 (en) | 2015-10-20 | 2019-07-03 | Healthymize Ltd | SYSTEM AND METHOD FOR CONTROLLING AND DETERMINING A MEDICAL STATUS OF A USER |
WO2018021920A1 (en) | 2016-07-27 | 2018-02-01 | The University Of Canterbury | Maskless speech airflow measurement system |
WO2018075521A2 (en) * | 2016-10-17 | 2018-04-26 | Context Ai, Llc | Systems and methods for medical diagnosis and biomarker identification using physiological sensors and machine learning |
CN107622797B (zh) | 2017-09-26 | 2020-07-28 | 李涵之 | 一种基于声音的身体状况确定系统及方法 |
-
2016
- 2016-10-05 AU AU2016333816A patent/AU2016333816B2/en active Active
- 2016-10-05 JP JP2018516182A patent/JP6780182B2/ja active Active
- 2016-10-05 EP EP16853171.3A patent/EP3359023B1/en active Active
- 2016-10-05 WO PCT/IB2016/055954 patent/WO2017060828A1/en active Application Filing
- 2016-10-05 CN CN201680057768.XA patent/CN108135485B/zh active Active
- 2016-10-05 US US15/759,525 patent/US10796805B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3359023A4 (en) | 2019-05-22 |
CN108135485A (zh) | 2018-06-08 |
EP3359023A1 (en) | 2018-08-15 |
US10796805B2 (en) | 2020-10-06 |
WO2017060828A1 (en) | 2017-04-13 |
JP2018534026A (ja) | 2018-11-22 |
CN108135485B (zh) | 2021-08-17 |
AU2016333816A1 (en) | 2018-04-12 |
EP3359023B1 (en) | 2025-02-26 |
AU2016333816B2 (en) | 2018-09-27 |
US20190080803A1 (en) | 2019-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6780182B2 (ja) | 音声分析による肺疾患の評価 | |
US20220375491A1 (en) | Verbal periodic screening for heart disease | |
US20120116186A1 (en) | Method and apparatus for evaluation of a subject's emotional, physiological and/or physical state with the subject's physiological and/or acoustic data | |
JP7385299B2 (ja) | スピーチ分析による肺気量の推定 | |
US11752288B2 (en) | Speech-based breathing prediction | |
US12175998B2 (en) | Speech analysis devices and methods for identifying migraine attacks | |
US20210219893A1 (en) | System and method for measurement of vocal biomarkers of vitality and biological aging | |
US20230309839A1 (en) | Systems and methods for estimating cardiac arrythmia | |
US20240049981A1 (en) | Systems and methods for estimation of forced vital capacity using speech acoustics | |
WO2021132289A1 (ja) | 病態解析システム、病態解析装置、病態解析方法、及び病態解析プログラム | |
CN117898684B (zh) | 一种心力衰竭病情监测方法、装置、设备及可读存储介质 | |
US12138104B2 (en) | Respiration rate detection methodology for nebulizers | |
US20240233913A9 (en) | User analysis and predictive techniques for digital therapeutic systems | |
JPWO2021099279A5 (ja) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190619 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200630 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200715 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20200807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200826 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200901 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6780182 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |