JP6702539B2 - きこえの診断装置、診断方法、及びプログラム - Google Patents
きこえの診断装置、診断方法、及びプログラム Download PDFInfo
- Publication number
- JP6702539B2 JP6702539B2 JP2016032089A JP2016032089A JP6702539B2 JP 6702539 B2 JP6702539 B2 JP 6702539B2 JP 2016032089 A JP2016032089 A JP 2016032089A JP 2016032089 A JP2016032089 A JP 2016032089A JP 6702539 B2 JP6702539 B2 JP 6702539B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- task
- sounds
- discrimination
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
関連する環境音の認知に関する技術が知られている(例えば、非特許文献3から7参照)。
また、非特許文献2に記載の技術では、カテゴリーに分類された刺激音を網羅的に選定可能であるとしても、刺激音の音響特徴量を網羅的に選定できない。
また、非特許文献3から8に記載の技術のように、刺激音を網羅的に選定するためにカテゴリーによる分類を行い、分類に基づいて選定する方法が知られていても、音響特徴量を定量的・客観的に分類し、所望の音響特徴量を選択する方法は知られていない。
本発明は上記問題に鑑みてなされたものであり、個人の聴覚的な認知の診断をより的確に実施するきこえの診断装置、診断方法、及びプログラムを提供することを目的とする。
診断装置は、例えば、刺激音として環境音を用いる。この場合、「犬」と言っても様々な音(環境音)が考えられる。診断装置は、音響特徴量の定量化手法を用いることで、任意の刺激音であっても音響特徴量をそろえることを可能にする。
図1は、本実施形態の診断装置を示す構成図である。
診断装置1は、制御装置2とスピーカ3とを備える。制御装置2は、CPUと、ROM(Read Only Memory)、EEPROM(Electrically Erasable and Programmable Read Only Memory)、HDD(Hard Disk Drive)の不揮発性の記憶装置と、RAM(Random Access Memory)レジスタ等の揮発性の記憶装置と、を含むコンピュータであり、実行するプログラムにより、被験者個人の聴覚的な認知についての診断処理を実行する。聴覚的な認知についての診断処理についての詳細は後述する。制御装置2は、入力部21、表示部22、アンプ部23と、記憶部24と、操作入力認識部25と、制御部26と、音響再生部27と、判定処理部28とを備える。記憶部24は、周波数情報に関してはスペクトル重心、時間情報に関しては波形のエンベロープにおける尖度を用いて定量化された刺激音の音響特徴量と音響データとを関連付けた複数の刺激音を格納する。操作入力認識部25は、入力部21が検出した操作を、操作入力として受け付ける。制御部26は、所定の課題に応じて音響再生部27を制御するとともに、上記の課題に応じた質問画面を表示部22に表示させる。例えば、制御部26は、スペクトル重心、時間情報に関しては波形のエンベロープにおける尖度を用いて定量化された刺激音の音響特徴量と音響データとを関連付けられた複数の刺激音のうちから、少なくとも音響特徴量による分類分けを網羅するように所望の刺激音を選定し、選定した刺激音に基づいて、音に関する弁別課題と同定課題とを実施させる。弁別課題とは、例えば、2種類の音を聞き、2つの音が同じものであるか否かを問うものである。同定課題とは、例えば、1種類の刺激音を聞き、刺激音の名称を問うものである。
1 はじめに
普段、我々は日常生活の中で様々な音を用いながら生活している。知覚した音を用いることで、音声を介して会話をする、警告音を聞いて危険を察知するといったことが可能になる。聴覚障害者の中にも同様に音を活用して生活している者は多い。
図2において、音の選定方法には犬の鳴き声などを動物(「種類」)、野菜を切る音などを家の中(「聴取場面」)といったように刺激音を分類して偏りのないように選定する方法や、刺激音の周波数帯域や時間変化の周期性をもとに定性的・主観的に分類して選定する方法がある。
また、図2から、課題形式では同定課題が中心であることがわかる。同定課題とは呈示された刺激音が何の音であるか、名称を答えるものである。
2.1 音響的特徴量による分類
制御装置2における環境音の認知には、主に時間情報と周波数情報が手がかりとして用いる。例えば、制御装置2は、周波数領域の特徴を評価する値としてspectral centroid、時間領域の特徴を評価する値として波形のエンベロープについてのkurtosis を用いる。
spectral centroid は、スペクトルの重心であり、音色の明るさと相関のある数値である(参考:Schubert et al., Does timbral brightness scale with frequency and spectral centroid?, Acta acustica united with acustica, Vol. 92, No. 5, pp. 820-825, 2006.)。
実験に用いる音について、先行研究をもとに音の種類や聴取場面による分類を行い、識別困難な一部の音を除外する。例えば、中川らの知見(参考:中川., 聴覚障害学生の環境音認知, 横浜国立大学教育人間科学部紀要, Vol. I, No. 1, 1998.)を参考に分類を行った結果、566 音は、「自然の音」32 音、「家の中の音」266 音、「乗り物の音」172 音、「動物の音」73音、「町の中の音」23 音の5 つに分けられた。今回の実験では単独の環境音を対象としたため、この5 つのうち、複数の環境音が混じっている「町の中の音」は今回の実験では除外した。
刺激音には、「新効果音大全集」K30X5004〜6, 5009,「著作権フリーデジタル音素材集音・辞典」HR-AJ03,06, 08 の中のデータを用いた。日常生活で聴取する機会が多く、具体的な名称を答えやすいものであることと、spectral centroid、 エンベロープのkurtosis の値をある程度網羅し、カテゴリーについても網羅することを条件として2 秒〜30 秒の9 種類を選んだ。刺激音とカテゴリーの一覧を図8に示す。図8は、刺激音とカテゴリーの一覧を示す図である。診断装置1による聴取実験の弁別課題と同定課題では図8の9 種類の刺激音を共通で用いた。例えば、「自然の音」のカテゴリーには、刺激音としての「雷」、「風雨」が含まれる。「家の中の音」のカテゴリーには、刺激音としての「野菜を切る音」、「タイピングの音」、「足音」が含まれる。「乗り物の音」のカテゴリーには、刺激音としての「救急車のサイレン」、「車の走行音」が含まれる。「動物の音」のカテゴリーには、刺激音としての「犬の鳴き声」、「小鳥のさえずり」が含まれる。
診断装置1は、1 種類の音につき、特徴的であると考えられる2 秒間を切り取って刺激音とした。また,刺激音の音圧はITU 1770.1 のラウドネスの算出方法に従ってそろえた。
3.1 実験条件
実験参加者実験参加者は19 歳から27 歳の大学生・大学院生15 名(男性6 名、女性9 名、平均年齢22.2歳)である。全員が先天性の感音難聴者であり、補聴器を装用していた。なお、実験参加者の裸耳(補聴器を装用していない状態)における平均聴力レベルは88 dBHL〜109 dBHL であった。また、この実験は筑波大学図書館情報メディア系研究倫理審査委員会の承認を得ている。
実験環境実験は筑波大学春日キャンパスの簡易防音室で行われた。実験室の暗騒音は概ね35.3〜35.8dBSPL であった。
図9を参照して、実験の手順について説明する。図9は、実験の手順を示す図である。
なお、下記する手順の他に、実験に先立ち、実験参加者に対し事前のアンケート(事前アンケート)と、実験終了後にインタビューを実施した。
診断装置1は、制御装置2に接続されたスピーカ3から、刺激音を被験者に呈示する。例えば、制御装置2は、Apple 社製,MacBook Proであり、スピーカ3は、GENELEC 社製,8020CPMである。スピーカ3は、中心が床から0.95 mの高さで、実験参加者の耳から約1.2m の位置になるよう設置した。刺激音の呈示音圧は、実験開始前に、実験参加者である被験者によって、被験者ごとに適した音量になるように自由に調節してもらった。
診断装置1は、弁別課題の2 秒の刺激音を2 回再生する。弁別課題実験参加者は、2 秒の刺激音を2 回きいた後、両者が同じであるかどうかを制御装置2の入力部21であるキーボードを用いて回答した。制御装置2は、その回答の結果を受け付けて記憶する。
診断装置1は、同定課題の2 秒の刺激音を1 回再生する。同定課題実験参加者は2 秒の刺激音を1 回だけきき、音の名称もしくは擬音語を自由記述により解答することとした。同定課題実験参加者は、刺激音が検知できなかった場合は、「聞こえない」と解答した。
診断装置1は、分析において、45 通りの刺激音の組み合わせを3回行った弁別課題に関しては、3 回中2 回以上誤ったものを誤答として扱った。また、診断装置1は、「聞こえない」と解答があったものについては、分析の対象から除外した。
診断装置1は、前節で述べた音響特徴量をもとに刺激音をプロットし、弁別課題の正答率が低いものほど太い点線で結び、同定課題の正答率を灰色で表した円グラフで示し、その結果を図12に示す。
4.1 各課題における正答率の比較
図10に示したように、弁別課題と同定課題の正答率の比較から、弁別課題の正答率が有意に高いと認められた。すなわち、聴覚障害者においては、弁別の能力と同定の能力には差があることが分かる。
同定課題で正解なしの場合、弁別課題が不正解のものもみられた(F)が、(E)の場合よりも少なく、弁別ができなかったために同定ができなかったという場合はあまりみられなかった。
上記と類似した解答が他2 名にみられた。同定課題において1 音正解している場合には、複数の刺激音に対して同じ解答をしている。このことから、聴覚障害者は環境音を知覚する際、主要な音響特徴量を用いて同定をしているのではないかと推測される。そのため、主要な音響特徴量が類似している場合は、異なる名称の音であっても同じ名称の音であると同定する可能性がある。
弁別課題において正答率の低かったものは「風雨-車の走行音」、「雷-車の走行音」の組み合わせであった。図12を見ると風雨と車の走行音はkurtosis の値が近く、時間変化の少ない音であるために誤り、車の走行音と雷の音はspectral centroid の値が近く、音色が似ていたために誤ったと推測される。
図12は全実験参加者の結果をまとめたものであるが、診断装置1が実験参加者毎に個別に同様な図を作成することによって個人のきこえを概観するための一助となることが期待される。
実施形態の変形例について説明する。上記の実施形態では、弁別課題の難易度は、各被験者に共通のものとして実施した。本変形例では、弁別課題の難易度を被験者毎に設定可能とする。例えば、聴覚障害者の障害の程度により聴力などに個人差がみられる。診断奏し1は、被験者の聴力などの個人差に応じた難易度の課題を設定する。例えば、上記のように異なる難易度の課題は、聴力などの個人差に応じて刺激音の組み合わせ(セット)を変える、あるいは試行回数を変えるなどの課題の設定と試験の実施条件とを調整して決定されるようにしてもよい。
上記のとおり、変形例の診断装置1は、実施形態の診断装置1と同様の効果を奏することに加えて、被験者の個人差に応じた弁別課題の難易度に基づいた試験を実施することができる。
例えば、診断装置1は、聾学校の教育指導現場の統一的な診断を支援する。図13と図14は、本実施形態の診断装置の応用例を示す図である。図13に示すように、診断装置1は、被験者である生徒S自らの操作に代えて教師T等の操作により、制御装置2内に予め用意された刺激音のセットを用いて、簡易的な診断を行ってもよい。図14に示すように、診断装置1は、制御装置2に代えて、スマートフォンなどの携帯型端末装置2Aを用いて構成してもよい。診断装置1は、被験者である生徒S自らの操作により、携帯型端末装置2A内に予め用意された刺激音のセットを用いて、簡易的な診断を行ってもよい。なお、教師T等は、必要に応じて携帯型端末装置2Aの操作や課題についての対応を指導してもよい。上記の診断の結果は、聴覚活用の指導等に利用されることにより、より的確な指導を実施することができる。
例えば、診断装置1は、耳鼻科や小児科におけるきこえの診断で利用されてもよい。図15は、本実施形態の診断装置の応用例を示す図である。図15に示すように、医者Dは重度の聴覚障害者や小児等の患者Cに向けたきこえの診断に診断装置1を利用することにより、診断装置1は、その診断を支援することができる。診断装置1は、オージオグラムと合わせて用いられることでより詳細な診断の実施を支援することができる。
例えば、図16に示すように、診断装置1を、制御装置2に代えて、スマートフォンなどの携帯型端末装置2Aを用いて構成してもよい。図16は、本実施形態の診断装置の応用例を示す図である。携帯型端末装置2Aのアプリケーションプログラムの実行によって、本実施形態に示す処理を実施可能とすることにより、携帯型端末装置2Aの音声発生手段から発した音響のきこえ具合を、携帯型端末装置2Aの利用者自らが携帯型端末装置2Aに登録することが可能になる。このように診断装置1として携帯型端末装置2Aを用いることで、携帯型端末装置2Aの利用者自らが、自身のきこえ具合(聴覚の状態)を簡易的に、かつ客観的に判断することが可能にする。
Claims (4)
- 周波数情報に関してはスペクトル重心、時間情報に関しては波形のエンベロープにおける尖度を用いて定量化された刺激音の音響特徴量と音響データとを関連付けられた複数の刺激音のうちから、少なくとも前記音響特徴量による分類分けを網羅するように所望の刺激音を選定し、前記選定した刺激音に基づいて、音に関する弁別課題と同定課題とを実施させる制御部と、
前記弁別課題と同定課題の実施の結果から、前記弁別課題で正解しており、前記同定課題で正解していた場合に、前記刺激音を同定可能であると判定する判定処理部と
を備える診断装置。 - 前記制御部は、
前記音響特徴量と前記刺激音のカテゴリとに基づいて、前記刺激音を分類分けして、前記分類分けを網羅するように所望の刺激音を選定する
請求項1記載の診断装置。 - 周波数情報に関してはスペクトル重心、時間情報に関しては波形のエンベロープにおける尖度を用いて定量化された刺激音の音響特徴量と音響データとを関連付けられた複数の刺激音のうちから、少なくとも前記音響特徴量による分類分けを網羅するように所望の刺激音を選定し、前記選定した刺激音に基づいて、音に関する弁別課題と同定課題とを実施させるステップと、
コンピュータが、前記弁別課題と同定課題の実施の結果から、前記弁別課題で正解しており、前記同定課題で正解していた場合に、前記刺激音を同定可能であると判定するステップと
を含む診断方法。 - 周波数情報に関してはスペクトル重心、時間情報に関しては波形のエンベロープにおける尖度を用いて定量化された刺激音の音響特徴量と音響データとを関連付けられた複数の刺激音のうちから、少なくとも前記音響特徴量による分類分けを網羅するように所望の刺激音を選定し、前記選定した刺激音に基づいて、音に関する弁別課題と同定課題とを実施させるステップと、
前記弁別課題と同定課題の実施の結果から、前記弁別課題で正解しており、前記同定課題で正解していた場合に、前記刺激音を同定可能であると判定するステップと
を診断装置のコンピュータに実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016032089A JP6702539B2 (ja) | 2016-02-23 | 2016-02-23 | きこえの診断装置、診断方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016032089A JP6702539B2 (ja) | 2016-02-23 | 2016-02-23 | きこえの診断装置、診断方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017148175A JP2017148175A (ja) | 2017-08-31 |
JP6702539B2 true JP6702539B2 (ja) | 2020-06-03 |
Family
ID=59741251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016032089A Active JP6702539B2 (ja) | 2016-02-23 | 2016-02-23 | きこえの診断装置、診断方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6702539B2 (ja) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6146147A (en) * | 1998-03-13 | 2000-11-14 | Cognitive Concepts, Inc. | Interactive sound awareness skills improvement system and method |
CN102781321B (zh) * | 2010-06-11 | 2015-04-08 | 松下电器产业株式会社 | 听力判定系统及其方法 |
-
2016
- 2016-02-23 JP JP2016032089A patent/JP6702539B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017148175A (ja) | 2017-08-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Fuller et al. | The musician effect: does it persist under degraded pitch conditions of cochlear implant simulations? | |
Szychowska et al. | The influence of audio-visual interactions on the annoyance ratings for wind turbines | |
Carroll et al. | Fundamental frequency is critical to speech perception in noise in combined acoustic and electric hearing | |
Gygi et al. | The incongruency advantage for environmental sounds presented in natural auditory scenes. | |
Chen et al. | Predicting the intelligibility of vocoded and wideband Mandarin Chinese | |
Shafiro et al. | Environmental sound training in cochlear implant users | |
Roy et al. | Assessment of sound quality perception in cochlear implant users during music listening | |
Nittrouer et al. | Improving speech-in-noise recognition for children with hearing loss: Potential effects of language abilities, binaural summation, and head shadow | |
CN102467906B (zh) | 听力检测方法及系统 | |
JP7626567B2 (ja) | 発話信号を使っての幼児のための補聴器の有効確認のためのシステムおよび方法 | |
Hillock-Dunn et al. | Effects of nonlinear frequency compression on speech identification in children with hearing loss | |
Deroche et al. | Sensitivity of school-aged children to pitch-related cues | |
Kovačić et al. | Voice gender perception by cochlear implantees | |
Benard et al. | Perceptual learning of temporally interrupted spectrally degraded speech | |
Zaltz et al. | Children with normal hearing are efficient users of fundamental frequency and vocal tract length cues for voice discrimination | |
Walravens et al. | Consistency of hearing aid setting preference in simulated real-world environments: Implications for trainable hearing aids | |
Jaekel et al. | Age effects on perceptual restoration of degraded interrupted sentences | |
Simoes et al. | Musical perception assessment of people with hearing impairment: a systematic review and meta-analysis | |
Yadav et al. | Autophonic loudness of singers in simulated room acoustic environments | |
JP6702539B2 (ja) | きこえの診断装置、診断方法、及びプログラム | |
Scharine et al. | Auditory perception and cognitive performance | |
Von Hünerbein et al. | Wind turbine amplitude modulation: research to improve understanding as to its cause & effect | |
Reuter et al. | Distortion product otoacoustic emission of symphony orchestra musicians before and after rehearsal | |
Witte et al. | Test-retest reliability of the urban outdoor situated phoneme (SiP) test | |
Xu et al. | Recording and evaluation of an American dialect version of the Four Alternative Auditory Feature test |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191120 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200207 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200414 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200424 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6702539 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |