JP7512391B2 - ノイズ制御システム及び方法 - Google Patents
ノイズ制御システム及び方法 Download PDFInfo
- Publication number
- JP7512391B2 JP7512391B2 JP2022535898A JP2022535898A JP7512391B2 JP 7512391 B2 JP7512391 B2 JP 7512391B2 JP 2022535898 A JP2022535898 A JP 2022535898A JP 2022535898 A JP2022535898 A JP 2022535898A JP 7512391 B2 JP7512391 B2 JP 7512391B2
- Authority
- JP
- Japan
- Prior art keywords
- noise
- signal
- sound
- determining
- primary
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1785—Methods, e.g. algorithms; Devices
- G10K11/17857—Geometric disposition, e.g. placement of microphones
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17873—General system configurations using a reference signal without an error signal, e.g. pure feedforward
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17879—General system configurations using both a reference signal and an error signal
- G10K11/17881—General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/60—Mounting or interconnection of hearing aid parts, e.g. inside tips, housings or to ossicles
- H04R25/604—Mounting or interconnection of hearing aid parts, e.g. inside tips, housings or to ossicles of acoustic or vibrational transducers
- H04R25/606—Mounting or interconnection of hearing aid parts, e.g. inside tips, housings or to ossicles of acoustic or vibrational transducers acting directly on the eardrum, the ossicles or the skull, e.g. mastoid, tooth, maxillary or mandibular bone, or mechanically stimulating the cochlea, e.g. at the oval window
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
- G10K11/17815—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the reference signals and the error signals, i.e. primary path
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1781—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
- G10K11/17813—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms
- G10K11/17817—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the acoustic paths, e.g. estimating, calibrating or testing of transfer functions or cross-terms between the output signals and the error signals, i.e. secondary path
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1785—Methods, e.g. algorithms; Devices
- G10K11/17853—Methods, e.g. algorithms; Devices of the filter
- G10K11/17854—Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
- G10K11/17875—General system configurations using an error signal without a reference signal, e.g. pure feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/10—Applications
- G10K2210/108—Communication systems, e.g. where useful sound is kept and noise is cancelled
- G10K2210/1081—Earphones, e.g. for telephones, ear protectors or headsets
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3026—Feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3027—Feedforward
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3033—Information contained in memory, e.g. stored signals or transfer functions
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3044—Phase shift, e.g. complex envelope processing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/30—Means
- G10K2210/301—Computational
- G10K2210/3055—Transfer function of the acoustic system
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/50—Miscellaneous
- G10K2210/512—Wide band, e.g. non-recurring signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2410/00—Microphones
- H04R2410/05—Noise reduction with a separate noise microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/01—Hearing devices using active noise cancellation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/13—Hearing devices using bone conduction transducers
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Neurosurgery (AREA)
- Human Computer Interaction (AREA)
- Neurology (AREA)
- Dermatology (AREA)
- Biomedical Technology (AREA)
- General Physics & Mathematics (AREA)
- Otolaryngology (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
- Circuit For Audible Band Transducer (AREA)
- Exhaust Silencers (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
- Details Of Audible-Bandwidth Transducers (AREA)
Description
ここで、Atは、フィードフォワード式ノイズ制御経路におけるアンチノイズ音を決定するための振幅調整係数を指す。
ここで、Sn(n)は低減対象のノイズ210を表すノイズ信号、Atは振幅調整係数、
はノイズ補正信号、
はノイズ信号Sn(n)と同じ振幅を有するが、位相が逆の信号を指す。ノイズ補正信号は、骨伝導スピーカー223の入力信号として用いられて、ノイズ210を低減するためのアンチノイズ音を生成してもよい。
は、複数のサブバンドノイズ補正信号を含んでもよい。例えば、ノイズ補正信号を
として表すことができ、ここで、Aiはi番目のサブバンドノイズ信号の振幅調整係数、Nはサブバンドノイズ信号の計数(又は数)、
はi番目のサブバンドノイズ信号Si(n)と同じ振幅を有するが、位相が逆の信号を指す。
との位相差につながる可能性がある。位相差がフィルタの安定性に与える影響と、位相差に起因する周囲ノイズ(例えば、高周波の周囲ノイズ)とを低減又は除去するためには、位相差を補償する必要がある。例えば、ノイズ210のノイズ補正信号を生成するために位相補償を行う必要がある。周波数領域の位相シフトは、時間領域の遅延にマッピングされてもよい。位相補償は、空気伝導音が空気伝導経路211に沿って蝸牛207に伝達されるのに要する第1の時間と、骨伝導音が骨伝導経路221に沿って蝸牛207に伝達されるのに要する第2の時間との間の時間差ΔTに基づいて行われてもよい。例えば、位相補償されたノイズ補正信号を
として表すことができる。他の例として、位相補償されたノイズ補正信号は、複数のサブバンドノイズ補正信号を含んでもよい。例えば、位相補償されたノイズ補正信号を
として表すことができる。
であってもよい。
ここで、kは1.5、2.0、2.5、3.5又は5.0等の任意の正数を指す。
)は、ノイズ信号411(例えば、Sn(n))と同じ振幅を有するが、位相が逆のものであってもよい。本明細書に用いられるように、「逆位相」とは、特定の周波数において、ノイズ補正信号413の最大値がノイズ信号411の最小値に相当することを指す。理想的には、ノイズ信号411とノイズ補正信号413とは、相殺的干渉により互いに中和することができる。
を決定するように構成されてもよい。残留ノイズ補正信号
は、ノイズ信号en(n)を相殺的干渉によりキャンセル又は低減するために用いられてもよい。
として表すことができ、ここで、Abはフィードバック式ノイズ制御経路の振幅調整係数を指す。他の例として、残留ノイズ補正信号は、それぞれが残留ノイズのサブバンド周波数を有する複数のサブバンド残留ノイズ補正信号を含んでもよい。残留ノイズ補正信号は
として表すことができ、ここで、Aiはi番目のサブバンド残留ノイズ信号の振幅調整係数、Nはサブバンド残留ノイズ信号の数、
はi番目のサブバンド残留ノイズ信号ei(n)と同じ振幅を有するが、位相が逆(逆位相として知られている)の信号を指す。
)を生成するように構成されてもよい。例えば、フィードバック式信号プロセッサ522は、A/D変換器、変調器、D/A変換器等、又はこれらの任意の組み合わせを含んでもよい。フィードバック式信号プロセッサ522のA/D変換器は、アナログ残留ノイズ信号en(t)をデジタル残留ノイズ信号en(n)に変換するように構成されてもよい。A/D変換器のサンプリング周波数は、アナログ残留ノイズ信号en(t)の最大周波数の2倍よりも大きくてもよい。変調器は、デジタル残留ノイズ信号en(n)に対して位相反転を行って残留ノイズ補正信号
を生成するように構成されてもよい。いくつかの実施形態において、フィードバック式信号プロセッサ522は、デジタル残留ノイズ信号en(n)とkeとに基づいて、残留ノイズ補正信号
を決定してもよい。D/A変換器は、デジタルアナログ変換を行って残留ノイズ補正信号
をアナログ残留ノイズ補正信号
に変換するように構成されてもよい。アナログ残留ノイズ補正信号
は、骨伝導スピーカー540の入力信号として用いられてもよい。骨伝導スピーカー540は、アナログ残留ノイズ補正信号
に基づいて、残留ノイズを低減又はキャンセルするためのアンチノイズ音を決定するように構成されてもよい。
を生成するために、デジタル一次ノイズ信号Sn(n)に対して位相反転を行い、選択的に位相補償を行ってもよく、ここで、ΔTは空気伝導音が空気伝導経路211に沿って蝸牛207に伝達される第1の時間と、骨伝導音が骨伝導経路221に沿って蝸牛207に伝達される第2の時間との間の時間差を指す。振幅変調器は、振幅調整係数Atに応じて信号
に対して振幅変調を行って一次ノイズ補正信号
を生成してもよい。
)を決定するように構成されてもよい。残留ノイズ信号は、残留ノイズを表す電気信号であってもよい。フィードバック式信号プロセッサ522aは、A/D変換器810及び変調器860を含んでもよい。変調器860は、位相変調器及び/又は振幅変調器を含んでもよい。変調器860は、上述した変調器850と類似する機能を有してもよい。
を生成してもよい。
として表すことができ、ここで、ΔTは、図2Bに関連して説明した、空気伝導音が空気伝導経路211に沿って蝸牛207に伝達される第1の時間と、骨伝導音が骨伝導経路221に沿って蝸牛207に伝達される第2の時間との間の時間差を指す。
として表すことができる。他の例として、一次ノイズ補正信号911を
として表すことができる。
)を決定するように構成されてもよい。
を生成するために、デジタル一次ノイズ信号Sn(n)に対して位相反転を行い、選択的に位相補償を行ってもよく、ここで、keは、基準値と骨伝導経路を介する音の伝達時刻との間の時間差を指す。時間差keの更なる説明については、本開示において他の箇所で見出すことができる。例えば、図9及びその関連する説明を参照されたい。振幅変調器は、振幅調整係数Atに応じて信号
に対して振幅変調を行って一次ノイズ補正信号
を生成してもよい。
)を決定するように構成されてもよい。
として表すことができる。いくつかの他の実施形態において、データ処理装置110Cは、2つの通信チャネルを介して、一次ノイズ補正信号1011と残留ノイズ補正信号813とをそれぞれ出力してもよい。
を生成してもよく、ここで、Atはフィードフォワード式ノイズ制御経路に対応する振幅調整係数を指し、ΔTは空気伝導音が空気伝導経路211に沿って蝸牛207に伝達される第1の時間と、骨伝導音が骨伝導経路221に沿って蝸牛207に伝達される第2の時間との間の時間差を指す。
生成してもよい。
は、増幅器又はいくつかの他のアナログ回路を用いて決定されてもよい。他の例として、データ処理装置110Dは、遅延回路(例えば、オールパスインダクタ-コンデンサ(LC)回路遅延線、アクティブ型アナログ遅延線)又はいくつかの他のアナログ回路を用いて、一次ノイズ信号に対して位相補償を行ってもよい。
)と残留ノイズ補正信号1113(例えば、
とを合成して合成ノイズ補正信号1115(例えば、
)を決定して出力してもよい。他の例として、データ処理装置110Dは、2つの通信チャネルを介して、一次ノイズ補正信号1111と残留ノイズ補正信号1113とをそれぞれ出力してもよい。
に対して位相変調及び/又は振幅変調を行うことにより、デジタル一次ノイズ補正信号
を決定するように構成されてもよい。変調器1250は、位相変調器及び/又は振幅変調器を含んでもよい。例えば、位相変調器は、逆位相信号
に対して位相補償を行って信号
を生成してもよい。振幅変調器は、振幅変調係数Atに応じて信号
に対して振幅変調を行ってデジタル一次ノイズ補正信号
を生成してもよい。
を生成してもよい。他の例として、変調器1350は、一次ノイズ補正信号を
として決定してもよい。ここで、Atは振幅調整係数を指し、ΔTは空気伝導音が空気伝導経路211に沿って蝸牛207に伝達される第1の時間と、骨伝導音が骨伝導経路221に沿って蝸牛207に伝達される第2の時間との間の時間差を指す。位相補償及び振幅変調の更なる説明については、本開示において他の箇所で見出すことができる。例えば、図2B及びその関連する説明を参照されたい。
となるように、適応制御、例えば、振幅調整係数Atの調整、及び/又は、時間差ΔTの調整を行うように構成されてもよい。適応制御により、アクティブノイズ制御を実現することができる。
Claims (11)
- ユーザの耳を開いたまま利用可能なヘッドホンに用いられるノイズ低減システムであって、
第1の音経路を介してユーザに伝達される第1のノイズを検出し、前記第1のノイズを表す第1のノイズ信号を決定するように構成される第1の検出器と、
前記ユーザが知覚する第2のノイズを検出し、前記第2のノイズを表す第2のノイズ信号を決定するように構成される第2の検出器と、
第1のノイズ補正信号及び第2のノイズ補正信号を決定するように構成されるプロセッサであって、
前記第1の音経路の第1の伝達関数を決定し、
前記第1の音経路とは異なる第2の音経路の第2の伝達関数を決定し、
前記第1の伝達関数と前記第2の伝達関数とに基づいて振幅調整係数を決定し、
前記第1のノイズ信号と前記振幅調整係数とに基づいて前記第1のノイズ補正信号を決定し、
前記第2のノイズ補正信号が前記第2のノイズ信号に基づいて決定されるプロセッサと、
前記第1のノイズ補正信号と前記第2のノイズ補正信号とに基づいて音を生成するように構成されるスピーカーであって、前記音が、前記第2の音経路を介して前記ユーザに伝達されるスピーカーとを含み、
前記第1の検出器は、空気伝導マイクロフォンであり、前記第1の音経路は、空気伝導経路であり、
前記スピーカーは、骨伝導スピーカーであり、前記第2の音経路は、骨伝導経路である
ノイズ低減システム。 - 前記第2のノイズは、前記ユーザの内耳に残留した音を含む、請求項1に記載のシステム。
- 前記第2の検出器は、神経監視装置又は脳波監視装置である、請求項1又は2に記載のシステム。
- 前記第1のノイズ信号を1つ又は複数のサブバンドノイズ信号に分解するように構成される1つ又は複数のフィルタをさらに含む、請求項1~3のいずれか1項に記載のシステム。
- 前記プロセッサは、A/D変換器及び変調器を含み、前記変調器は、振幅変調及び/又は位相変調を行うように構成される、請求項1~4のいずれか1項に記載のシステム。
- 前記プロセッサは、さらに、前記第1の音経路を介して伝達される第1の音と、前記第2の音経路を介して伝達される第2の音との間の第1の時間差を決定するように構成される、請求項1から5のいずれか一項に記載のシステム。
- 前記第1のノイズ信号に基づいて前記第1のノイズ補正信号を決定するステップは、
前記第1のノイズ信号の逆位相信号を決定するステップと、
前記第1の時間差と前記逆位相信号とに基づいて前記第1のノイズ補正信号を決定するステップとを含む、請求項6に記載のシステム。 - 前記第2の検出器は、さらに、基準値と、前記ユーザの前記第2の音経路を介した音の伝達時刻との間の第2の時間差を検出するように構成される、請求項1~7のいずれか1項に記載のシステム。
- 前記第1のノイズ信号に基づいて前記第1のノイズ補正信号を決定するステップは、
前記第2の時間差と前記第1のノイズ信号とに基づいて、前記第1のノイズ補正信号を決定するステップを含む、請求項8に記載のシステム。 - 前記第2のノイズ信号に基づいて前記第2のノイズ補正信号を決定するステップは、
振幅調整係数を決定するステップと、
前記第1の音経路及び前記第2の音経路を介して伝達される音の第1の時間差を決定するステップと、
前記第2のノイズ信号の逆位相信号を決定するステップと、
前記振幅調整係数と、前記第1の時間差と、前記第2のノイズ信号の逆位相信号とに基づいて前記第2のノイズ補正信号を決定するステップとを含む、請求項1~9のいずれか1項に記載のシステム。 - ユーザの耳を開いたまま利用可能なヘッドホンに用いられるノイズ低減方法であって、
第1の音経路を介してユーザに伝達され、第1の検出器によって検出された第1のノイズを検出することにより、第1のノイズ信号を決定するステップと、
前記ユーザが知覚し、第2の検出器によって検出された第2のノイズを検出することにより、第2のノイズ信号を決定するステップと、
プロセッサによって、第1のノイズ補正信号及び第2のノイズ補正信号を決定するステップであって、
前記第1の音経路の第1の伝達関数を決定するステップと、
前記第1の音経路とは異なる第2の音経路の第2の伝達関数を決定するステップと、
前記第1の伝達関数と前記第2の伝達関数とに基づいて振幅調整係数を決定するステップと、
前記第1のノイズ信号と前記振幅調整係数とに基づいて前記第1のノイズ補正信号を決定するステップと、
前記第2のノイズ補正信号が前記第2のノイズ信号に基づいて決定される
ステップと、
スピーカーによって、前記第1のノイズ補正信号と前記第2のノイズ補正信号とに基づいて音を生成するステップであって、前記音が、前記第2の音経路を介して前記ユーザに伝達されるステップとを含み、
前記第1の検出器は、空気伝導マイクロフォンであり、前記第1の音経路は、空気伝導経路であり、
前記スピーカーは、骨伝導スピーカーであり、前記第2の音経路は、骨伝導経路である
ノイズ低減方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2019/124894 WO2021114181A1 (en) | 2019-12-12 | 2019-12-12 | Systems and methods for noise control |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023506802A JP2023506802A (ja) | 2023-02-20 |
JP7512391B2 true JP7512391B2 (ja) | 2024-07-08 |
Family
ID=76317182
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022535898A Active JP7512391B2 (ja) | 2019-12-12 | 2019-12-12 | ノイズ制御システム及び方法 |
Country Status (11)
Country | Link |
---|---|
US (3) | US11315540B2 (ja) |
EP (1) | EP4035153A4 (ja) |
JP (1) | JP7512391B2 (ja) |
CN (1) | CN114787910A (ja) |
AU (1) | AU2019477919B2 (ja) |
BR (1) | BR112022008579A2 (ja) |
CA (1) | CA3158477C (ja) |
CO (1) | CO2022007681A2 (ja) |
MX (1) | MX2022006246A (ja) |
PE (1) | PE20221181A1 (ja) |
WO (1) | WO2021114181A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11501745B1 (en) * | 2019-05-10 | 2022-11-15 | Lloyd Baggs Innovations, Llc | Musical instrument pickup signal processing system |
AU2019477919B2 (en) | 2019-12-12 | 2023-09-14 | Shenzhen Shokz Co., Ltd. | Systems and methods for noise control |
CN112992114B (zh) * | 2019-12-12 | 2024-06-18 | 深圳市韶音科技有限公司 | 噪声控制系统和方法 |
MX2022011993A (es) | 2020-03-31 | 2022-10-20 | Shenzhen Shokz Co Ltd | Dispositivo de salida acustica. |
DE102022204857A1 (de) * | 2022-05-17 | 2023-11-23 | Vimelio GmbH | Verfahren, Modulsystem und System zur Verringerung von medizinischen Instrumenten hervorgerufene Schallbelastungen |
CN117198264A (zh) * | 2023-11-06 | 2023-12-08 | 江西红声技术有限公司 | 主动降噪处理方法、系统、可读存储介质及计算机设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001056693A (ja) | 1999-08-20 | 2001-02-27 | Matsushita Electric Ind Co Ltd | 騒音低減装置 |
JP2012249097A (ja) | 2011-05-27 | 2012-12-13 | Kyocera Corp | 音声出力装置 |
JP2012533091A (ja) | 2009-07-10 | 2012-12-20 | クゥアルコム・インコーポレイテッド | 適応アクティブ雑音消去のためのシステム、方法、装置、およびコンピュータ可読媒体 |
JP2013242532A (ja) | 2012-05-21 | 2013-12-05 | Harman Becker Automotive Systems Gmbh | 能動ノイズ低減 |
JP2014134809A (ja) | 2009-04-28 | 2014-07-24 | Bose Corp | 音依存のanr信号処理調整 |
US20170110106A1 (en) | 2015-10-16 | 2017-04-20 | Avnera Corporation | Calibration and stabilization of an active notice cancelation system |
JP2017142485A (ja) | 2015-11-19 | 2017-08-17 | パロット ドローンズ | ヘッドセットユーザの音声活動の存在又は不存在に応じてアクティブノイズコントロール、閉塞防止制御、及び、受動減衰相殺を伴うオーディオヘッドセット |
US20180226064A1 (en) | 2017-02-06 | 2018-08-09 | Silencer Devices, LLC | Noise Cancellation Using Segmented, Frequency-Dependent Phase Cancellation |
JP2019152861A (ja) | 2018-03-05 | 2019-09-12 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | 集中レベルに基づく、知覚される周囲音の制御 |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5001763A (en) | 1989-08-10 | 1991-03-19 | Mnc Inc. | Electroacoustic device for hearing needs including noise cancellation |
US6175633B1 (en) * | 1997-04-09 | 2001-01-16 | Cavcom, Inc. | Radio communications apparatus with attenuating ear pieces for high noise environments |
US6396930B1 (en) * | 1998-02-20 | 2002-05-28 | Michael Allen Vaudrey | Active noise reduction for audiometry |
DE102005016021A1 (de) | 2005-04-07 | 2006-10-12 | Airbus Deutschland Gmbh | Aktives Gegenschallsystem mit spezieller Anordnung der Sekundäraktuatoren zur Reduzierung eines Schalldurchgangs an einer offenen Grenzfläche zweier Volumina, aktive Gegenschallsystem-Anordnung, Verfahren zur aktiven Schallwellenreduzierung und Verwendung eines aktiven Gegenschallsystems zur aktiven Schallwellenreduzierung für ein zumindest teilweise geöffnetes Kontrollvolumen |
US20070127757A2 (en) * | 2005-07-18 | 2007-06-07 | Soundquest, Inc. | Behind-The-Ear-Auditory Device |
JP5315506B2 (ja) * | 2006-03-22 | 2013-10-16 | ボーン・トーン・コミュニケイションズ・リミテッド | 骨伝導音伝播のための方法及びシステム |
GB2436657B (en) | 2006-04-01 | 2011-10-26 | Sonaptic Ltd | Ambient noise-reduction control system |
GB2445984B (en) | 2007-01-25 | 2011-12-07 | Sonaptic Ltd | Ambient noise reduction |
WO2008097904A2 (en) | 2007-02-02 | 2008-08-14 | Personics Holdings Inc. | Method and device for evaluating auditory health |
US8611560B2 (en) | 2007-04-13 | 2013-12-17 | Navisense | Method and device for voice operated control |
EP2294835A4 (en) * | 2008-05-22 | 2012-01-18 | Bone Tone Comm Ltd | METHOD AND SYSTEM FOR PROCESSING SIGNALS |
US8189799B2 (en) | 2009-04-09 | 2012-05-29 | Harman International Industries, Incorporated | System for active noise control based on audio system output |
US20100296666A1 (en) | 2009-05-25 | 2010-11-25 | National Chin-Yi University Of Technology | Apparatus and method for noise cancellation in voice communication |
CN101924967A (zh) | 2010-08-20 | 2010-12-22 | 黎晓 | 降噪耳机及降低耳机噪音和失真的方法 |
US20140126733A1 (en) | 2012-11-02 | 2014-05-08 | Daniel M. Gauger, Jr. | User Interface for ANR Headphones with Active Hear-Through |
US9462376B2 (en) | 2013-04-16 | 2016-10-04 | Cirrus Logic, Inc. | Systems and methods for hybrid adaptive noise cancellation |
FR3006093B1 (fr) * | 2013-05-23 | 2016-04-01 | Elno | Dispositif acoustique apte a realiser une reduction active de bruit |
KR101456887B1 (ko) | 2013-06-04 | 2014-11-12 | 한국철도기술연구원 | 골전도 스피커를 이용한 소음저감 시스템 |
US20160127815A1 (en) * | 2013-06-07 | 2016-05-05 | Sony Corporation | Input device and transmitting method, host device and receiving method, and signal processing system and transceiving method |
US9324313B1 (en) * | 2013-10-23 | 2016-04-26 | Google Inc. | Methods and systems for implementing bone conduction-based noise cancellation for air-conducted sound |
US10257619B2 (en) | 2014-03-05 | 2019-04-09 | Cochlear Limited | Own voice body conducted noise management |
FR3019961A1 (fr) | 2014-04-11 | 2015-10-16 | Parrot | Casque audio a controle actif de bruit anc avec reduction du souffle electrique |
CN104602163B (zh) | 2014-12-31 | 2017-12-01 | 歌尔股份有限公司 | 主动降噪耳机及应用于该耳机的降噪控制方法和系统 |
US10937407B2 (en) * | 2015-10-26 | 2021-03-02 | Staton Techiya, Llc | Biometric, physiological or environmental monitoring using a closed chamber |
EP3182721A1 (en) | 2015-12-15 | 2017-06-21 | Sony Mobile Communications, Inc. | Controlling own-voice experience of talker with occluded ear |
CN105721973B (zh) * | 2016-01-26 | 2019-04-05 | 王泽玲 | 一种骨传导耳机及其音频处理方法 |
US9704471B1 (en) * | 2016-03-30 | 2017-07-11 | Bose Corporation | Adaptive modeling of secondary path in an active noise control system |
CN106601227A (zh) * | 2016-11-18 | 2017-04-26 | 北京金锐德路科技有限公司 | 音频采集方法和装置 |
US11045118B2 (en) * | 2017-04-06 | 2021-06-29 | Dean Robert Gary Anderson | Systems, devices, and methods for determining hearing ability and treating hearing loss |
WO2019053996A1 (ja) * | 2017-09-13 | 2019-03-21 | ソニー株式会社 | ヘッドホン装置 |
CN109729471A (zh) * | 2017-10-27 | 2019-05-07 | 北京金锐德路科技有限公司 | 用于脖戴式语音交互耳机的anc降噪装置 |
CN108847208B (zh) | 2018-05-04 | 2020-11-27 | 歌尔科技有限公司 | 一种降噪处理方法、装置和耳机 |
CN110136731B (zh) * | 2019-05-13 | 2021-12-24 | 天津大学 | 空洞因果卷积生成对抗网络端到端骨导语音盲增强方法 |
EP4004915B1 (en) | 2019-09-30 | 2024-05-15 | Shenzhen Shokz Co., Ltd. | Systems and methods for noise reduction using sub-band noise reduction technique |
AU2019477919B2 (en) | 2019-12-12 | 2023-09-14 | Shenzhen Shokz Co., Ltd. | Systems and methods for noise control |
-
2019
- 2019-12-12 AU AU2019477919A patent/AU2019477919B2/en active Active
- 2019-12-12 WO PCT/CN2019/124894 patent/WO2021114181A1/en active Application Filing
- 2019-12-12 JP JP2022535898A patent/JP7512391B2/ja active Active
- 2019-12-12 MX MX2022006246A patent/MX2022006246A/es unknown
- 2019-12-12 EP EP19955436.1A patent/EP4035153A4/en active Pending
- 2019-12-12 BR BR112022008579A patent/BR112022008579A2/pt unknown
- 2019-12-12 CA CA3158477A patent/CA3158477C/en active Active
- 2019-12-12 PE PE2022000811A patent/PE20221181A1/es unknown
- 2019-12-12 CN CN201980102834.4A patent/CN114787910A/zh active Pending
-
2021
- 2021-01-06 US US17/142,318 patent/US11315540B2/en active Active
-
2022
- 2022-03-30 US US17/657,354 patent/US11830469B2/en active Active
- 2022-05-31 CO CONC2022/0007681A patent/CO2022007681A2/es unknown
-
2023
- 2023-11-07 US US18/504,121 patent/US12223940B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001056693A (ja) | 1999-08-20 | 2001-02-27 | Matsushita Electric Ind Co Ltd | 騒音低減装置 |
JP2014134809A (ja) | 2009-04-28 | 2014-07-24 | Bose Corp | 音依存のanr信号処理調整 |
JP2012533091A (ja) | 2009-07-10 | 2012-12-20 | クゥアルコム・インコーポレイテッド | 適応アクティブ雑音消去のためのシステム、方法、装置、およびコンピュータ可読媒体 |
JP2012249097A (ja) | 2011-05-27 | 2012-12-13 | Kyocera Corp | 音声出力装置 |
JP2013242532A (ja) | 2012-05-21 | 2013-12-05 | Harman Becker Automotive Systems Gmbh | 能動ノイズ低減 |
US20170110106A1 (en) | 2015-10-16 | 2017-04-20 | Avnera Corporation | Calibration and stabilization of an active notice cancelation system |
JP2017142485A (ja) | 2015-11-19 | 2017-08-17 | パロット ドローンズ | ヘッドセットユーザの音声活動の存在又は不存在に応じてアクティブノイズコントロール、閉塞防止制御、及び、受動減衰相殺を伴うオーディオヘッドセット |
US20180226064A1 (en) | 2017-02-06 | 2018-08-09 | Silencer Devices, LLC | Noise Cancellation Using Segmented, Frequency-Dependent Phase Cancellation |
JP2019152861A (ja) | 2018-03-05 | 2019-09-12 | ハーマン インターナショナル インダストリーズ インコーポレイテッド | 集中レベルに基づく、知覚される周囲音の制御 |
Also Published As
Publication number | Publication date |
---|---|
EP4035153A4 (en) | 2022-09-28 |
US12223940B2 (en) | 2025-02-11 |
US20220223131A1 (en) | 2022-07-14 |
WO2021114181A1 (en) | 2021-06-17 |
CN114787910A (zh) | 2022-07-22 |
CA3158477C (en) | 2024-04-02 |
US11315540B2 (en) | 2022-04-26 |
EP4035153A1 (en) | 2022-08-03 |
AU2019477919B2 (en) | 2023-09-14 |
CA3158477A1 (en) | 2021-06-17 |
KR20220110294A (ko) | 2022-08-05 |
PE20221181A1 (es) | 2022-08-05 |
BR112022008579A2 (pt) | 2022-08-09 |
US20240071355A1 (en) | 2024-02-29 |
MX2022006246A (es) | 2022-06-22 |
US11830469B2 (en) | 2023-11-28 |
US20210183353A1 (en) | 2021-06-17 |
CO2022007681A2 (es) | 2022-08-19 |
AU2019477919A1 (en) | 2022-05-19 |
JP2023506802A (ja) | 2023-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7512391B2 (ja) | ノイズ制御システム及び方法 | |
CN106878895B (zh) | 包括改进的反馈抵消系统的听力装置 | |
CN106507258B (zh) | 一种听力装置及其运行方法 | |
CN111432318B (zh) | 包括直接声音补偿的听力装置 | |
Pisha et al. | A wearable, extensible, open-source platform for hearing healthcare research | |
US11825269B2 (en) | Feedback elimination in a hearing aid | |
US11115759B1 (en) | System and method for aiding hearing | |
US12096184B2 (en) | Hearing aid comprising a feedback control system | |
CN112992114B (zh) | 噪声控制系统和方法 | |
KR102795928B1 (ko) | 노이즈 제어를 위한 시스템들 및 방법들 | |
RU2797926C1 (ru) | Системы и способы устранения шумов | |
CN207995324U (zh) | 脖戴式语音交互耳机 | |
US11968500B2 (en) | Hearing device or system comprising a communication interface | |
JP7556609B2 (ja) | 触覚伝達システム,触覚伝達装置,触覚伝達プログラム及び触覚伝達方法 | |
Brammer et al. | Understanding speech when wearing communication headsets and hearing protectors with subband processing | |
US11812224B2 (en) | Hearing device comprising a delayless adaptive filter | |
EP4518356A1 (en) | A hearing aid comprising a loop transfer function estimator and a method of training a loop transfer function estimator | |
US20240430625A1 (en) | Hearing aid comprising an active noise cancellation system | |
JP2023173365A (ja) | スピーカ装置及びスピーカシステム | |
CN119511755A (zh) | 经神经网络改进听力损失仿真 | |
Fulop et al. | REVIEWS OF ACOUSTICAL PATENTS |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220614 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220621 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230731 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231020 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240409 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240610 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240626 |