CN107110963B - 用于利用声音检测飞行器位置和速度的系统及方法 - Google Patents
用于利用声音检测飞行器位置和速度的系统及方法 Download PDFInfo
- Publication number
- CN107110963B CN107110963B CN201580073011.5A CN201580073011A CN107110963B CN 107110963 B CN107110963 B CN 107110963B CN 201580073011 A CN201580073011 A CN 201580073011A CN 107110963 B CN107110963 B CN 107110963B
- Authority
- CN
- China
- Prior art keywords
- audio signals
- signal source
- signal
- determining
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000005236 sound signal Effects 0.000 claims abstract description 187
- 238000004458 analytical method Methods 0.000 claims abstract description 87
- 238000012545 processing Methods 0.000 claims abstract description 19
- 238000001514 detection method Methods 0.000 claims description 60
- 238000004590 computer program Methods 0.000 claims description 28
- 238000003491 array Methods 0.000 claims description 12
- 239000011159 matrix material Substances 0.000 claims description 9
- 239000000758 substrate Substances 0.000 claims description 4
- 238000002604 ultrasonography Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 12
- 230000000694 effects Effects 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 3
- 230000007812 deficiency Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002592 echocardiography Methods 0.000 description 1
- 230000007340 echolocation Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
- G01S5/28—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves by co-ordinating position lines of different shape, e.g. hyperbolic, circular, elliptical or radial
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/14—Systems for determining distance or velocity not using reflection or reradiation using ultrasonic, sonic, or infrasonic waves
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/04—Structural association of microphone with electric circuitry therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S2205/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S2205/01—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations specially adapted for specific applications
- G01S2205/03—Airborne
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Abstract
提供一种用于确定信号源位置和速度的系统及用于制造和使用所述系统的方法。一种示例性方法包括通过对多个音频信号执行方向分析并对所述音频信号执行强度分析来确定信号源位置和速度。另一种示例性方法包括确定信号源是否在与移动平台碰撞的航线上并且提供用于改变所述移动平台的所述航线以避免与所述信号源碰撞的指令。一种示例系统包括声学感测系统,包括第一主麦克风阵列、副麦克风、以及处理装置,所述处理装置用于通过对多个音频信号执行方向分析并对所述音频信号执行强度分析来确定信号源速度和位置。
Description
技术领域
本发明总体涉及物体检测,并且更具体地但不排他地,涉及确定信号源位置和速度。
背景技术
随着无人机的发展,无人机的飞行安全问题越来越受到关注。在同一空域中,经常有多架飞行器,包括飞机和无人机等。在许多情况下,这些飞行器之间无法进行直接通信,因此,选定飞行器难以获知所述区域内其他飞行器的速度和位置。传统的解决方法包括使用地面雷达来检测飞行器的位置和速度,或者依靠飞行器操作员的视觉来避让其他飞行器。然而,由于小型无人机不容易被雷达观察到也不能依靠人类操作员的视觉,这些传统方法不容易应用于小型无人机。不幸地,当前的解决方案未能充分地为飞行器提供自我判定与自我检测(例如,对其他飞行器的自主判定和检测)的能力。
鉴于以上所述,需要一种改进的飞行器位置和速度检测系统,以尽力克服传统方法的以上提及的障碍及缺陷。
发明内容
一个方面包括一种确定信号源位置和速度的方法,所述方法包括对多个音频信号执行方向分析并对所述音频信号执行强度分析。在一个实施方式中,所述执行方向分析和所述执行强度分析中的至少一项是基于多普勒分析。另一实施方式还包括从主麦克风阵列获取第一组音频信号。另一实施方式还包括从副麦克风获取第一噪声音频信号。又一实施方式包括从第一组中的每个音频信号减去所述噪声音频信号。再一实施方式包括基于所述减法产生第一组处理过的音频信号。
一个实施方式包括对所述第一组处理过的音频信号执行频率估计。另一实施方式包括基于所述第一组处理过的音频信号确定第一信号源的信号方向。又一实施方式包括基于所述减法产生第二组处理过的音频信号。再一实施方式包括对所述第二组处理过的音频信号执行频率估计。另一实施方式包括基于所述第二组处理过的音频信号确定第一信号源的信号方向。
一个实施方式包括确定所述信号源是正在接近还是正在远离检测位置。另一实施方式包括通过对第一组及第二组处理过的音频信号执行多普勒分析来确定所述信号源是正在接近还是正在远离检测位置。又一实施方式包括确定信号源离所述检测位置的距离。在再一实施方式中,确定信号源离所述检测位置的距离包括基于接收到的信号强度进行的判定。另一实施方式包括基于所述对多个音频信号执行多普勒分析、基于所述对多个音频信号执行方向分析并且基于所述对多个音频信号执行强度分析,预测未来信号源位置和速度。
另一方面包括一种避让信号源的方法,所述方法包括基于通过上述方法的实施方式所确定的信号源位置和速度来确定信号源是否在与移动平台的检测位置碰撞的航线上,以及通过改变所述移动平台的航线来避让所述信号源。
在一个实施方式中,所述改变所述移动平台的航线包括在远离所述确定信号源位置的相反方向上移动。在另一实施方式中,所述改变所述移动平台的航线包括在远离所述确定信号源位置的正交方向上移动。在又一实施方式中,所述改变所述移动平台的航线包括绕着所述确定信号源位置移动。在再一实施方式中,所述改变所述移动平台的航线包括停止移动并原地悬停。在一个实施方式中,所述移动平台是飞行器。在另一实施方式中,所述飞行器是无人机。
又一方面包括一种用于确定信号源位置和速度的计算机程序产品,所述计算机程序产品编码于一个或多个机器可读存储介质上且包括用于执行上述实施方式的指令。再一方面包括一种用于避让信号源的计算机程序产品,所述计算机程序产品编码于一个或多个机器可读存储介质上且包括用于执行上述实施方式的指令。
一个方面包括一种计算机程序产品,其中如上所述的确定信号源位置和速度的实施方式作为存储于非暂时性存储介质上的一系列指令提供。另一方面包括一种计算机程序产品,其中如上所述的避让信号源的实施方式作为存储于非暂时性存储介质上的一系列指令提供。
又一方面包括一种用于确定物理空间中的光流的计算机程序产品,所述计算机程序产品编码于非暂时性机器可读存储介质上,且包括用于从第一组音频信号中的多个音频信号中的每一个减去噪声音频信号以产生第一组处理过的音频信号的指令、用于对所述第一组处理过的音频信号执行频率估计的指令、用于基于所述第一组处理过的音频信号确定第一信号源的信号方向的指令、用于产生第二组处理过的音频信号的指令、用于对所述第二组处理过的音频信号执行频率估计的指令、用于基于所述第二组处理过的音频信号确定第一信号源的信号方向的指令、用于基于所述第二组处理过的音频信号确定第一信号源的信号方向的指令、用于确定所述信号源是正在接近还是正在远离检测位置的指令、用于通过对第一组及第二组处理过的音频信号执行多普勒分析以确定所述信号源是正在接近还是正在远离检测位置的指令,以及用于基于所述多普勒分析、所述方向分析及所述强度分析确定信号源位置和速度的指令。
又一方面包括一种用于确定物理空间中的光流的计算机程序产品,所述计算机程序产品编码于非暂时性机器可读存储介质上,且包括用于对第一组音频信号执行频率估计的指令、用于基于所述第一组音频信号确定第一信号源的信号方向的指令、用于对第二组音频信号执行频率估计的指令、用于基于第二组音频信号确定第一信号源的信号方向的指令、用于基于第二组音频信号确定第一信号源的信号方向的指令、用于确定所述信号源是正在接近还是正在远离检测位置的指令、用于通过对第一组及第二组的音频信号执行多普勒分析来确定所述信号源是正在接近还是正在远离检测位置的指令,以及用于基于所述多普勒分析、所述方向分析及所述强度分析确定信号源位置和速度的指令。
一个方面包括一种确定信号源位置和速度的方法,所述方法包括对第一组音频信号执行频率估计,基于所述第一组音频信号确定信号源的第一信号方向,对第二组音频信号执行频率估计,基于所述第二组音频信号确定所述信号源的第二信号方向,通过对所述第一组及第二组音频信号执行多普勒分析以确定所述信号源是正在接近还是正在远离检测位置,基于所述第一组及第二组音频信号的信号强度来确定信号源离所述检测位置的距离,以及基于所述多普勒分析、所述方向分析及所述强度分析来确定信号源位置和距离。一个实施方式还包括基于所述多普勒分析、所述方向分析及所述强度分析预测未来信号源位置和速度。
另一方面包括一种避让信号源的方法,所述方法包括基于通过根据以上方面的确定信号源位置和速度的方法所确定的信号源位置和速度来确定信号源是否在与移动平台的检测位置碰撞的航线上,以及通过改变所述移动平台的航线来避让所述信号源。在一个实施方式中,所述移动平台是飞行器。在另一实施方式中,所述飞行器是无人机。
又一方面包括一种用于确定信号源位置和速度的系统,其中所述系统实现上述实施方式。另一方面包括一种用于避让信号源的系统,其中所述系统实现上述实施方式。
一个方面包括一种用于确定信号源位置和速度的计算机程序产品,所述计算机程序产品编码于一个或多个机器可读存储介质上且包括用于执行上述实施方式的指令。另一方面包括一种用于避让信号源的计算机程序产品,所述计算机程序产品编码于一个或多个机器可读存储介质上且包括用于执行上述实施方式的指令。
又一方面包括一种计算机程序产品,其中如在以上实施方式中所描述的确定信号源位置和速度的方法作为存储于非暂时性存储介质上的一系列指令来提供。再一实施方式包括一种计算机程序产品,其中上述实施方式的避让信号源的方法作为存储于非暂时性存储介质上的一系列指令来提供。
一个方面包括一种声学感测系统,所述系统包括第一主麦克风阵列;副麦克风;以及处理装置,其用于基于多个音频信号的多普勒分析、方向分析及强度分析来确定信号源位置和速度。
另一方面包括一种声学感测系统,所述系统包括外壳;第一主麦克风阵列,其定位在所述外壳上且包括多个麦克风;第一副麦克风,其定位在所述外壳上,所述第一副麦克风可操作地连接至所述第一主麦克风阵列;以及处理装置,其基于多个音频信号的方向分析及强度分析来确定信号源位置和速度。
在一个实施方式中,所述确定信号源位置和速度进一步地是基于多普勒分析。在另一实施方式中,第一主麦克风阵列和第一副麦克风在外壳上定位在平行但不同的平面内。在又一实施方式中,所述第一主麦克风阵列指向第一方向并且所述第一副麦克风指向不同于所述第一方向的第二方向。在再一实施方式中,所述第一方向与所述第二方向相反。在另一实施方式中,所述第一方向大致垂直于所述第二方向。
在一个实施方式中,所述第一主麦克风阵列的麦克风以具有行和列的矩阵配置定位在基板上。在另一实施方式中,所述第一主麦克风阵列的麦克风定位在基本相同的平面内。
一个实施方式包括处理器和存储器,所述处理器和存储器定位在所述外壳内且可操作地连接至所述第一主麦克风阵列及所述第一副麦克风。另一实施方式包括第二主麦克风阵列,所诉第二主麦克风阵列定位在所述外壳上且可操作地连接至所述第一主麦克风阵列及所述第一副麦克风。又一实施方式包括第二副麦克风,所述第二副麦克风定位在所述外壳上且可操作地连接至所述第一和第二主麦克风阵列及所述第一副麦克风。
在一个实施方式中,所述第一主麦克风阵列指向第一方向,所述第一副麦克风指向第二方向,所述第二主麦克风阵列指向第三方向,所述第二副麦克风指向第四方向;并且所述第一、第二、第三及第四方向中的至少两个是不同的方向。在另一实施方式中,所述第一方向与所述第二方向相反,并且所述第三方向与所述第四方向相反。
在一个实施方式中,第一主麦克风阵列和第一副麦克风在外壳定位在平行但不同的平面内;并且第二主麦克风阵列和第二副麦克风在外壳上定位在平行但不同的平面内,所述平面大致垂直于第一主麦克风阵列和第一副麦克风位置。在另一实施方式中,所述第一主麦克风阵列和第一副麦克风用于检测超声。在又一实施方式中,所述第一主麦克风阵列和第一副麦克风用于检测次声。
在一个实施方式中,所述处理装置进一步用于从第一组音频信号的多个音频信号中的每一个减去由副麦克风获取的背景噪声音频信号,以产生第一组处理过的音频信号。在另一实施方式中,所述处理装置更进一步用于对所述第一组处理过的音频信号执行频率估计。在又一实施方式中,所述处理装置进一步被配置用于基于所述第一组处理过的音频信号确定信号源的信号方向。在另一实施方式中,所述处理装置进一步用于产生第二组处理过的音频信号。
在一个实施方式中,所述处理装置进一步用于对所述第二组处理过的音频信号执行频率估计。在另一实施方式中,所述处理装置进一步用于基于所述第二组处理过的音频信号确定所述信号源的第二信号方向。在又一实施方式中,所述处理装置进一步用于确定所述信号源是正在接近还是正在远离检测位置。在再一实施方式中,所述处理装置进一步用于确定信号源离所述检测位置的距离。在另一实施方式中,所述处理装置进一步用于基于多个音频信号的所述多普勒分析、所述方向分析及所述强度分析,预测未来信号源位置和速度。
另一方面包括一种移动平台,所述移动平台包括外壳;第一主麦克风阵列,其定位在所述外壳上且包括多个麦克风;第一副麦克风,其定位在所述外壳上,所述第一副麦克风可操作地连接至所述第一主麦克风阵列;以及处理装置,其基于声学感测系统的多个音频信号的方向分析及强度分析来确定信号源位置和速度。在一个实施方式中,所述移动平台是无人机。
附图说明
图1是图示了用于确定信号源位置和速度的系统的实施方式的示例性网络图。
图2是图示了所述系统的备选实施方式的示例性网络图,其中所述系统进一步地包括副麦克风。
图3是图示了图2的用于确定信号源位置和速度的系统的实施方式的示例性侧视图,其中所述系统定位在外壳上。
图4是图示了图2的用于确定信号源位置和速度的系统的备选实施方式的示例性网络图,其中所述系统可操作地连接至移动平台。
图5是图示了当第二移动平台朝向图4的移动平台移动时由多普勒效应产生的更高信号频率的示例性详图。
图6是图示了当图4的第二移动平台朝向图4的移动平台移动时由多普勒效应产生的更低信号频率的示例性详图。
图7是图示了飞行器检测和避让方法的实施方式的示例性流程图。
图8是图示了飞行器检测和避让方法的另一实施方式的示例性流程图。
图9是图示了识别信号源如飞行器的位置和速度的方法的示例性流程图。
图10是图示了识别信号源如飞行器的位置和速度的另一种方法的示例性流程图。
图11是图示了识别信号源如飞行器的位置和速度的又一种方法的示例性流程图。
图12是图示了飞行器音频签名的示例的一组三个图表。
图13是图示了由图1或图2的系统接收的音频信号的示例的一组三个图表,其中所述系统确定所述信号对应于图12的相应飞行器音频签名。
图14是图示了在MUSIC算法的实现过程中基于频率的内积倒数的变化之间的关系的示例性图表。
图15是图示了在MUSIC算法的实现过程中信号空间可以随信号的入射角的变化而改变的示例性图表。
图16是图示了通过网络可操作地连接至基站的第一飞行器的示例性网络图。
图17是图示了图2的检测系统的备选实施方式的详图,其中所述系统定位在第一飞行器上,且包括定位在所述飞行器的相反两侧上且指向相反方向的第一和第二麦克风阵列以及第一和第二副麦克风。
图18是图示了图17的检测系统的备选实施方式的详图,第一和第二麦克风阵列以及第一和第二副麦克风相垂直地定位在飞行器上并且向外指。
图19是图示了图1的检测系统的另一备选实施方式的详图,其中所述检测系统包括单个麦克风阵列。
图20是图示了图19的检测系统的再一备选实施方式的详图,其中所述检测系统包括定位在飞行器上的四个分开的麦克风阵列。
应当注意,附图并未按比例绘制,并且为了说明目的,在所有附图中通常使用相似的参考号表示具有类似结构或功能的元件。还应当注意,附图仅仅旨在便于描述优选实施方式。附图并未图示到所描述实施方式的每个方面且并不限制本公开的范围。
具体实施方式
由于当前可用的飞行器位置和速度检测系统的不足,一种使用声音确定信号源位置和速度的系统可以证明是所希望的并且为广泛的应用提供基础,诸如检测和避让正在接近的飞行器。根据本文所公开的一个实施方式,通过如图1所示的信号源位置和速度检测系统100可以达到这样的效果。
转到图1,根据一个实施方式,飞行器位置和速度检测系统100被示出为包括主麦克风阵列110,主麦克风阵列110可操作地连接至感测装置120。如图1所示,感测装置120可以包括处理器121和/或存储器122,存储器122可以与处理器121分离(如图1所示),或至少部分地与处理器121集成。在不同的实施方式中,主麦克分阵列110可以包括多个麦克风112,多个麦克风112用于接收音频信号并且以由多个行R和列C限定的矩阵配置114定位在基板111上。尽管仅为了说明目的而将阵列110示出为包括呈矩阵配置114的二十个麦克风112,但阵列110可以包括以任何合适的排列定位的任何合适数量的麦克风112。例如,如图1中所描绘,阵列110中的麦克风112可以定位在基本相同的平面中并且/或者在矩阵配置114中等间隔设置。
转到图2,根据另一实施方式,飞行器位置和速度检测系统100被示出为包括各自可操作地连接至感测装置120的主麦克风阵列110和副麦克风130。副麦克风130可以包括定位在基板131上的麦克风112。如本文所讨论的,副麦克风130可用于接收噪声音频信号,诸如环境声音。
尽管仅为了说明目的而将副麦克风130示出为包括单个麦克风112,但副麦克风130可以包括以任何合适的排列定位的任何合适数量的麦克风112。阵列110的麦克风112以及副麦克风130的麦克风112可以是相同及/或不同类型的麦克风。附加地,每个麦克风112可以可操作来检测任何合适频率、包括次声频、声频及/或超声频的声波。合适类型的麦克风112可以包括但不限于电容式麦克风、动圈式麦克风、带式麦克风、碳粒麦克风、压电麦克风、光纤麦克风、激光麦克风、液体麦克风、MEMS麦克风等。每个麦克风112可以具有任何合适的感测模式,包括全指向性、双指向性、亚心型、心型、锐心型、超心型、枪型等。
尽管在图2中仅为了说明目的而将位置和速度检测系统100示出为包括一个主麦克风阵列110和一个副麦克风130,但位置和速度检测系统100可以包括任何合适数量的主麦克风阵列110和/或副麦克风130(参见,例如图17及18)。换言之,主麦克风阵列110可以包括一个或多个麦克风阵列,并且主麦克风阵列110中的每一个麦克风阵列可以与另一麦克风阵列分离并且/或者至少部分地集成。附加地及/或可替换地,所述主麦克风阵列110或副麦克风130可以是不存在的。例如,在一些实施方式中,可能并不使用副麦克风130执行噪声降低,因此副麦克风130可以不存在(参见,例如图1、19及20)。
如图3所示,位置和速度检测系统100可以定位在外壳240上。例如,主麦克风阵列110可以定位在外壳240的第一侧241上并指向第一方向211A,而副麦克风130可以定位在外壳240的第二侧242上并指向第二方向211B。第二方向211B与第一方向211A相反,换言之,第一方向211A基本上垂直于第二方向211B。
尽管图3仅为了说明目的而将主麦克风阵列110和副麦克风130在平行平面中定位在外壳240的相反侧上并且指向相反的方向211A、111B,但主阵列110和副麦克风130可以任何合适的关系来定位,包括在垂直的平面中等。换言之,第一方向111A与第二方向111B之间所形成的角度(未示出)可以包括任何合适的角度、包括180°、90°、45°等,及/或任何合适的角度范围。附加地,一些实施方式可以包括具有任何合适的关系的任何合适的多个阵列110及/或副麦克风130。
本文所讨论的示例涉及使用系统100通过声音对信号源(诸如无人机(UAV)或其他飞行器)的位置和速度进行检测;然而,又一实施方式可以涉及对其他静止及/或运动物体(包括载运工具、人、动物、装置等)的位置和速度进行检测,并且所公开示例和说明性实施方式不应当被解释为对所公开系统100的范围进行限制。
附加地,在系统100定位在飞行器上的一些实施方式中,系统100可以检测飞行器从物体反射的声音签名,并且使用这个检测来避让物体。例如,系统100可以使用回声定位技术基于来自系统100定位在其上的飞行器的声音的回声来避让物体。
不同的实施方式可以包括地基组件1105(图16所示),其用于检测至少一个第二飞行器305(图16所示)的位置和速度。在其他施方式中,并且如图4-6所描绘,系统100可以可操作地连接至第一飞行器200(包括无人机(UAV))及/或定位在第一飞行器200上。例如,如图5及图6所描绘,阵列110可以定位在第一飞行器200的第一侧315上,并且副麦克风130可以定位在第一飞行器200的第二侧320上。
如图4所示,第一飞行器200可以包括外壳201及多个旋翼202,多个旋翼202可旋转地联接到外壳201。旋翼202旋转来为第一飞行器200提供推进和旋转能力。第一飞行器200可以发出由旋翼202及/或为旋翼202供电的电机(未示出)的旋转造成的声音。这种声音在第一飞行器200操作时是基本上不变的并且相比于环境声音来说是独特的。由于对于不同类型的第一飞行器200及/或第二飞行器305来说是独特的,由第一飞行器200及/或第二飞行器305发出的声音可以提供第一飞行器200的独特的音频签名。因此,操作中的第一飞行器200及/或第二飞行器305的这种独特的音频签名可以用于确定其相对于本文所讨论的检测系统100的位置和速度。此外,在检测系统100是第一飞行器200的部分的情况下,检测其他飞行器305的位置和速度可以允许如本文所讨论的对这些其他飞行器305的避让。
尽管本文仅出于说明的目的而将第一飞行器200示出为是四旋翼UAV,但应当清楚的是,任何合适类型的第一飞行器200可以包括检测系统100。此外,当第一飞行器200及/或移动平台可以包括UAV时,所述飞行器及/或移动平台可以另外地及/或备选地包括飞机、喷气式飞机、直升机等。
图7和图8是图示了根据实施方式的飞行器检测和避让方法400、500的流程图。参考图7及图8,在方框420中,识别对应于至少一个飞行器的至少一音频信号。识别对应于一个或多个飞行器的一个或多个信号可以用任何合适的方式来完成。例如,如上面讨论的,飞行器可以发出可以被识别为与其他环境声音不同的音频签名。音频签名可以包括一定范围的频率、一组频率峰值、单个频率峰值,及/或一个或多个频率峰值或频率范围的模式。
例如,图12包括示例性音频签名901、902、903的三个图表900A、900B及900C。第一图表900A显示了包括单个频率峰值的音频签名901。第二图表900B显示了包括分组范围的频率峰值的音频签名902。第三图表900C显示了包括三个分开的频率峰值的音频签名903。在一些实施方式中,识别与所选择飞行器相关联的信号可以包括识别与所选择飞行器的已知音频签名901、902、903直接地(及/或密切地)匹配的信号。
然而,如本文所讨论,第二飞行器305(如图5和图6所示)的音频签名可以取决于多普勒效应而被感知为较高或较低。换言之,信号源及/或检测系统100相对于第一飞行器200的运动可以改变检测系统100所接收到的声音的感知频率。因此,在一些实施方式中,识别与飞行器相关联的信号可以包括识别与给定音频信号匹配但已经频移到较高或较低的信号。例如,图13图示了图表900D、900E、900F,它们显示了可以与图12所示的音频签名901、902、903匹配的相应的接收到的信号904、905、906。
图表900D显示了可以被识别为对应于音频签名901的接收到的信号904(虚线)。在这个示例中,因为第二飞行器305正在接近系统100(参见,例如图5),接收到的信号904的频率与基准频率901相比向上频移。
图表900E显示了可以被识别为对应于音频签名902的接收到的信号905(虚线)。在这个示例中,因为第二飞行器305正在移动远离系统100(参见,如图6),接收到的信号905的频率与基准频率902相比向下频移。在这个示例中,可以基于签名峰值的数量、相似强度的签名及/或每一个签名峰值的相同位移距离来识别基准频率902与接收到的信号905之间的对应性。
图表900F显示了可以被识别为对应于音频签名903的接收到的信号906(虚线)。在这个示例中,因为所述第二飞行器305正在接近系统100(参见,如图5),接收到的信号906的频率与基准频率903相比向上频移。在这个示例中,可以基于签名峰值的数量、相似强度的签名及/或每一个签名峰值的相同位移距离来识别基准频率903与接收到的信号906之间的对应性。
尽管可以识别飞行器自然发生的音频签名(例如,电机及/或旋翼的音频签名),但在一些实施方式中,飞行器可能包括扬声器,所述扬声器广播音频签名及/或其他独特的识别信号,诸如序列号等。这种音频签名可以是如上讨论的音频签名,包括模式。例如,在一个实施方式中,音频签名可以在签名901、902及903之间循环,其中每一个具有一秒钟的时长。在另一示例中,可以在一个或多个选定的时间段开始及停止广播音频签名903以产生一种模式(例如,类似摩斯码)。这种音频签名可以是次声波、声波及/或超声波。在一些实施方式中,针对每一个给定飞行器可以提供独特的音频签名(例如,类似MAC地址),以使得可以基于每一个飞行器所关联的独特的音频签名来识别每一个飞行器。
转回至图7和图8,方法400、500继续到方框600,在方框600中,识别第二飞行器305的位置和速度。在判定方框430中,确定第二飞行器305(图5和图6所示)是否在与第一飞行器200(图5和图6所示)碰撞的航线上。例如,可以将第一飞行器200的速度和位置与所确定的第二飞行器305的速度和位置进行比较以确定是否有可能发生碰撞。
如果确定不存在碰撞航线,那么方法400、500继续到方框440,在方框440中,保持当前航线。然而,如果确定存在碰撞航线,方法400、500继续到方框450,在方框450中,执行避让操作。避让操作可以包括可以防止碰撞的任何合适的航线修正或移动,包括在远离正在接近的第二飞行器305的相反方向上移动;在远离正在接近的第二飞行器305的正交方向上移动;绕着正在接近的第二飞行器305移动;或原地悬停以允许正在接近的第二飞行器305过去。
在判定方框460处,确定第二飞行器305是否结束其飞行,并且如果是,则方法400、500在方框499中完成。然而,如果第二飞行器305的飞行并未结束,那么方法400循环回到方框420(如图7所示),或备选地,方法500循环回到方框410(如图8所示),如下文更详细讨论的。因此,方法400、500在第一飞行器200正在飞行时继续执行,以使得所第一飞行器200能够继续检测并避让可能正在接近的或邻近的其他飞行器305。
在一些实施方式中,可以对音频信号进行预处理以去除噪声。例如,参考图8,方法500从方框410开始,在方框410中,对音频信号进行处理以去除噪声。在不同的实施方式中,阵列110的麦克风112各自可以接收相应的音频信号,并且可以从由阵列110的麦克风112接收到的相应音频信号中减去从副麦克风130接收的噪声音频信号。
在不同的实施方式中,假设从副麦克风130接收的噪声信号基本上表示背景噪声,并且来自阵列110的麦克风112的音频信号表示所希望的目标信号加上背景噪声。因此,通过从来自阵列110的麦克风112的相应音频信号中减去来自副麦克风130的音频信号可以得到所希望的目标信号。
因此,以下可以是有利的:将阵列110定位在UAV外壳201(如图4所示)的选定部分上,所述选定部分与副麦克风130在UAV外壳201上所定位的部分相反及/或远离。副麦克风130因此可以主要地(及/或仅仅)接收环境背景噪声,而不是接收背景噪声和目标信号。例如,参考图5和图6,第二飞行器305不是正在接近(如图5所示)就是正在移动远离(如图6所示)第一飞行器200。更具体地说,第二飞行器305不是正在接近就是正在远离定位在第一飞行器200的外壳205的第一侧315上的阵列110。来自第二飞行器305的声音310因而首先遇到阵列110并且在到达副麦克风130之前被显著减弱及/或阻挡。换言之,可以在与副麦克风130相比显著更高的水平下检测到来自第二飞行器305的音频信号或声音310。阵列110和副麦克风130的相对布局可以使得从阵列110的麦克风112的音频信号中减去副麦克风130的噪声信号的结果是从第二飞行器305发出的声音310。
相比之下,在一些实施方式中,并不是从由阵列110获取的音频信号中去除副麦克风130的噪声信号。因此,在方框410处,可以如本文所描述地处理或以其他方式处置由阵列110获取的音频信号而不进行噪声去除。换句话说,在一些实施方式中,系统100可以省略掉副麦克风130。例如,如上讨论,图7是图示了根据备选实施方式的飞行器检测和避让方法400的流程图,其中可以不从接收到的音频信号去除噪声。
图9图示了确定信号源(诸如第二飞行器305)的位置和速度的方法600的示范性实施方式600A。在方框610中,对多个音频信号执行方向分析,并且在方框620中,对所述音频信号执行强度分析。方框610处的方向分析可以用任何合适的方式执行,包括下文更为详细地描述的方法。方框620处的强度分析可以包括确定音频信号的相对强度。例如,可以将所接收的音频信号与可以与信号源的类型相关联的基准强度进行比较。强度分析可以用于确定信号源(诸如第二飞行器305)与系统100的相对距离。
在不同的实施方式中,可以通过观察所确定的信号源位置的变化来确定信号源的位置和速度,所述变化包括信号源的距离及/或方向。
图10图示了确定信号源(诸如第二飞行器305)的位置和速度的方法600的示范性实施方式600B。方法600从方框710开始,在方框710中,对第一信号样本进行频率估计。
例如,假设矩阵A表示信号源的属性(称为(A={a1,a2,...,aN})),ai是频率(f)及/或入射角(θ)的函数。进一步地假设F表示源信号并且W指示噪声。所接收的复合源和噪声信号可以指示为X=AF+W。假设Rx指示X的协方差矩阵,Rx矩阵的特征值为{λ1,λ2,...,λN}。如果信号源具有D个信号,那么在特征值中,N-D个特征值是相等的。换言之,{λD+1,λD+2,...,λD+N}对应于噪声空间而其他的D个特征值对应于信号空间。进一步地假设EN指示对应于Rx矩阵中的特征值{λD+1,λD+2,...,λD+N}的特征向量。这些特征向量指示噪声空间。噪声空间和信号空间可以必然地是正交的。因此,如果信号空间和噪声空间是正交的,则信号空间和噪声空间的内积为0。此外,假设P(ω)=1/a*(ω)ENEN*a(ω)指示内积的倒数。图14中图示了信号功率P的变化与角频率ω之间的关系,其中图中对应于每个峰值的频率指示相应声源的频率。
在方框720中,可以确定第一信号样本源的信号方向。例如,在一个实施方式中,可以计算信号空间和噪声空间的内积。与以上讨论的频率估计相比,这里的信号空间可以随着入射角的变化而改变,这由公式P(θ)=1/a*(θ)ENEN *a(θ)表示如图15所示,对应于每个峰值的角度指示相应声源的方向。信号的强度与这个峰值成比例。
.在又一实施方式中,可以用任何合适的方式执行频率估计和信号方向确定。例如,频率估计和信号方向确定可以作为实施多信号分类算法(MUSIC算法)的部分发生(参见例如Schmidt,IEEE Transactions On Antennas And Propagation,Vol.AP-34.No.3,March 1986,其出于所有目的以全文引用的方式并入本文)。
在方框730中,对第二信号样本进行频率估计,并且在方框740中,确定第二信号样本源的信号方向。在方框750中,确定信号源是正在接近还是正在移动远离第一飞行器200。例如,如图5所示,在信号源(即第二飞行器305)正在朝感测飞行器200移动的情况下,多普勒效应导致来自第二飞行器350的声音310A的频率被感知为比第二飞行器350静止或移动远离感测飞行器200时高。
相比之下,如图6所示,在信号源(即第二飞行器305)正在移动远离感测飞行器200的情况下,多普勒效应导致来自第二飞行器350的声音310A的频率被感知为比第二飞行器350静止或正在朝感测飞行器200移动时低。
换言之,正在朝感测飞行器200移动的第二飞行器305的信号源导致声波310A压缩,因此被感知为具有较高的频率或较高的音高。在另一方面,正在移动远离感测飞行器200的第二飞行器305的信号源导致声波310A扩展,因此被感知为具有较低的频率或较低的音高。因此,通过比较连续信号源样本的频率,可以确定信号源是正在接近还是正在移动远离。
附加地及/或备选地,也可以使用信号强度来确定信号源是正在接近还是正在移动远离。例如,在信号强度和信号的音高增加的情况下,可以确定信号源正在接近。类似地,在信号强度和信号的音高减小的情况下,可以确定信号源正在移动远离。
因此,根据多普勒效应,可以确定信号源是正在接近还是正在移动远离。信号源的强度可以帮助进行这种确定。例如,如果频率正在增加且强度正在上升,可以确定信号源正在接近。否则,可以确定信号源正在移动远离。
在方框760中,可以确定信号源与主麦克风阵列110的距离。例如,在一些实施方式中,可以基于信号的强度来进行这种确定。换言之,可以确定较响亮的信号比较安静的信号更近。在一些实施方式中,可以基于对应于给定信号源的已知的或假设的距离和强度值来计算距离。例如,如果确定信号源是“A类型”的UAV,这个UAV在不同距离处的操作强度可以是已知的,并且可以将所接收的信号的强度与这些已知的值进行比较以估计距离值。在其他实施方式中,可以基于给定信号源的假设操作强度来估计距离值。在一些实施方式中,距离可以具有距离单位(例如,米)或可以大概地描述距离范围(例如很远、远、近、很近等)。
在方框770中,确定信号源的当前位置和速度。例如,这种确定可以是基于如本文所时论的一个或多个信号方向确定、距离确定及/或接近/移动远离确定。
在方框780中,任选地可以确定信号源的方位。例如,除了如以上参考方框770所描述的计算信号源的当前位置,也可以有利的是对信号源的方位或未来位置及/或一个/多个速度进行估计。这种确定可以是基于如本文所讨论的一个或多个速度确定、位置确定、信号方向确定、距离确定及/或接近或移动远离确定。
在不同的实施方式中,并不存在方框780处的对信号源的方位进行确定。例如,图11图示了确定信号源(诸如第二飞行器305)的位置和速度的方法600的示范性实施方式600C,其中就没有对信号源方位进行确定。
附加地,本文所描述的任何方法可以体现在计算机产品上,所述计算机产品编码于非暂时性机器可读存储介质上。例如,非暂时性机器可读存储介质可以包括便携式存储器装置(诸如闪存盘),或与装置相关联的存储器,所述装置诸如图1和图2所示的作为感测装置120的部分的存储器122。这种计算机产品可以由任何合适的处理装置执行,所述处理装置可以包括图1中和图2所示的作为感测装置120的部分的处理器121。
附加地,尽管本文所讨论的不同实施方式涉及第一飞行器200检测第二飞行器305(图5和图6所示),但在一些实施方式中,地面运载工具、站台或装置也可以包括检测系统100。在又一些实施方式种,地面运载工具、站台或装置可以可操作地连接到一个或多个第一飞行器200,这可以有利于与第一飞行器200共享数据,包括可能未被配置用于共享数据的其他飞行器305的位置。
例如,图16是图示了包括第一飞行器200的系统1100的示例性网络图,第一飞行器200通过网络1110可操作地连接至基站1105。基站1105和第一飞行器200各自可以包括相应检测系统100。因此,在不同的实施方式中,基站1105和第一飞行器200中的一个或两个可以检测不同物体(包括第二飞行器305)的位置和速度。由基站1105和第一飞行器200两者检测第二飞行器305的位置和速度可以是有利的,因为这种检测可以通过网络1110共享并且用于提高所确定的第二飞行器305的位置和速度的准确性。附加地,对于基站1105来说,可能有利的是检测第一飞行器200的位置和速度,这样可以通过网络1110向第一飞行器200提供位置和速度,以使得第一飞行器200具有关于它自身的位置和速度的数据。
图17-20描绘了飞行器的四个备选实施方式1210、1220、1230、1240的示例,所述飞行器包括主麦克风阵列110和副麦克风130的选定组合。图17是定位在第一飞行器1210上的检测系统100的示例性备选实施方式,其中检测系统100包括定位在飞行器1210的相反侧上并且指向相反方向的第一和第二主麦克风阵列110以及第一和第二副麦克风130。这种实施方式有利于加强对从飞行器1210的相反侧接近的信号源的检测。
图18是定位在第一飞行器1220上的检测系统100的另一示例性备选实施方式,其中检测系统100包括相垂直地定位在飞行器1220上并且向外指的第一和第二主麦克风阵列110以及第一和第二副麦克风130。这种实施方式有利于加强对从飞行器1220的不同侧接近的信号源的检测。
因此,如图17和图18所示,在一些实施方式中,检测系统100可以包括指向第一方向的第一主麦克风阵列;指向第二方向的第一副麦克风;指向第三方向的第二主麦克风阵列;以及指向第四方向的第二副麦克风。在不同的实施方式中,所述第一、第二、第三、及第四方向中的至少两个可以是不同的方向。
图19是定位在飞行器1230上的检测系统100的又一示例性备选实施方式,其中检测系统100包括单个主麦克风阵列110。在不需要通过副麦克风130进行噪声去除的情况下,这种实施例可以是有利的。
图20是定位在第一飞行器1240上的检测系统100的再一个示例性备选实施方式,其中检测系统100包括定位在飞行器1240上的四个独立的主麦克风阵列110。在不需要通过副麦克风130进行噪声去除的情况下,这种实施方式对于加强对从飞行器1240的不同侧接近的信号源的检测可以是有利的。
所描述实施方式易于有各种修改和替代形式,并且其具体示例在附图中已通过举例的方式示出并在本文中进行了详细描述。然而应当理解,所描述实施方式并不限于所公开的特定形式或方法,而是相反,本公开将覆盖所有修改、等效项和替代方案。
Claims (48)
1.一种用于飞行器的确定信号源位置和速度的方法,包括:
对多个音频信号执行方向分析并对所述音频信号执行强度分析,以确定所述信号源的位置和速度;
确定所述信号源是正在接近还是正在移动远离检测位置,包括:从主麦克风阵列获取第一组音频信号和第二组音频信号;
从副麦克风获取第一噪声音频信号;
从所述第一组中的每一个音频信号中减去所述噪声音频信号产生第一组处理过的音频信号;
基于从第二组中的每一个音频信号中减去所述噪声音频信号产生第二组处理过的音频信号;
对所述第一组处理过的音频信号和所述第二组处理过的音频信号执行多普勒分析。
2.如权利要求1所述的方法,其中,所述执行方向分析和所述执行强度分析中的至少一项是基于多普勒分析。
3.如权利要求1所述的方法,其还包括对所述第一组处理过的音频信号进行频率估计。
4.如权利要求3所述的方法,其还包括基于所述第一组处理过的音频信号确定所述信号源的信号方向。
5.如权利要求4所述的方法,其还包括对所述第二组处理过的音频信号进行频率估计。
6.如权利要求5所述的方法,其还包括基于所述第二组处理过的音频信号确定所述信号源的信号方向。
7.如权利要求1-6中任一项所述的方法,其还包括基于所述对所述第一组处理过的音频信号和所述第二组处理过的音频信号执行多普勒分析、基于所述对多个音频信号执行所述方向分析并且基于所述对所述多个音频信号执行所述强度分析,预测未来信号源位置和速度。
8. 一种避让信号源的方法,其包括:
基于通过如权利要求1-7中任一项所述的方法所确定的信号源位置和速度,确定信号源是否在与移动平台的检测位置碰撞的航线上;以及
通过改变所述移动平台的所述航线来避让所述信号源。
9.如权利要求8所述的方法,其中所述改变所述移动平台的所述航线包括在远离所述确定的信号源位置的相反方向上移动。
10.如权利要求8所述的方法,其中所述改变所述移动平台的所述航线包括在远离所述确定的信号源位置的正交方向上移动。
11.如权利要求8所述的方法,其中所述改变所述移动平台的所述航线包括绕所述确定的信号源位置移动。
12.如权利要求8所述的方法,其中所述改变所述移动平台的所述航线包括中止移动并原地悬停。
13.如权利要求8-12中任一项所述的方法,其中所述移动平台是飞行器。
14.如权利要求13所述的方法,其中所述飞行器是无人机。
15.一种机器可读存储介质,存储有用于确定信号源位置和速度的计算机程序产品,所述计算机程序产品包括用于执行如权利要求1-7中任一项所述的方法的指令。
16.一种机器可读存储介质,存储有用于避让信号源的计算机程序产品,所述计算机程序产品包括用于执行如权利要求8-14中任一项所述的方法的指令。
17.一种非暂时性机器可读存储介质,存储有用于确定信号源在物理空间中的位置和速度的计算机程序产品,所述计算机程序产品编码于非暂时性机器可读存储介质上并且包括:
用于从第一组音频信号的多个音频信号中的每一个中减去噪声音频信号以产生第一组处理过的音频信号的指令;
用于对所述第一组处理过的音频信号进行频率估计的指令;
用于基于所述第一组处理过的音频信号确定所述信号源的信号方向的指令;用于基于从第二组中的每一个音频信号中减去所述噪声音频信号以产生第二组处理过的音频信号的指令;
用于对所述第二组处理过的音频信号进行频率估计的指令;
用于基于所述第二组处理过的音频信号确定所述信号源的信号方向的指令;
用于对所述第一组处理过的音频信号和所述第二组处理过的音频信号执行多普勒分析以确定所述信号源是正在接近还是正在移动远离检测位置的指令;以及
用于基于所述多普勒分析、对多个音频信号执行方向分析和对所述音频信号执行强度分析确定信号源位置和速度的指令。
18.一种非暂时性机器可读存储介质,存储有用于确定信号源位置和速度的计算机程序产品,所述计算机程序产品编码于非暂时性机器可读存储介质上并且包括:
用于对第一组音频信号进行频率估计的指令;
用于基于所述第一组音频信号确定所述信号源的信号方向的指令;
用于对第二组音频信号进行频率估计的指令;
用于基于所述第二组音频信号确定所述信号源的信号方向的指令;
用于对所述第一组音频信号和所述第二组音频信号执行多普勒分析以确定所述信号源是正在接近还是正在移动远离检测位置的指令;以及
用于基于所述多普勒分析、对多个音频信号执行方向分析和对所述音频信号执行强度分析确定信号源位置和速度的指令。
19.一种用于飞行器的确定信号源位置和速度的方法,其包括:
对第一组音频信号进行频率估计;
基于所述第一组音频信号确定信号源的第一信号方向;
对第二组音频信号进行频率估计;
基于所述第二组音频信号确定所述信号源的第二信号方向;
通过对所述第一组音频信号和所述第二组音频信号执行多普勒分析来确定所述信号源是正在接近还是正在移动远离检测位置;以及
基于所述多普勒分析、对多个音频信号执行方向分析和对所述音频信号执行强度分析确定信号源位置和速度。
20.如权利要求19所述的方法,其还包括基于所述多普勒分析、所述方向分析和所述强度分析预测未来信号源位置和速度。
21. 一种避让信号源的方法,其包括:
基于通过根据权利要求19或20所述的确定信号源位置和速度的方法所确定的信号源位置和速度,确定信号源是否在与移动平台上的检测位置碰撞的航线上;以及
通过改变所述移动平台的所述航线来避让所述信号源。
22.如权利要求21所述的方法,其中所述移动平台是飞行器。
23.如权利要求22所述的方法,其中所述飞行器是无人机。
24.一种用于飞行器的确定信号源位置和速度的系统,其中所述系统用于实施一种方法包括:
对第一组音频信号进行频率估计;
基于所述第一组音频信号确定信号源的第一信号方向;
对第二组音频信号进行频率估计;
基于所述第二组音频信号确定所述信号源的第二信号方向;
通过对所述第一组音频信号和所述第二组音频信号执行多普勒分析来确定所述信号源是正在接近还是正在移动远离检测位置;以及
基于所述多普勒分析、对多个音频信号执行方向分析和对所述音频信号执行强度分析确定信号源位置和速度。
25.一种用于避让信号源的系统,其中所述系统用于实施一种方法包括:
对第一组音频信号进行频率估计;
基于所述第一组音频信号确定信号源的第一信号方向;
对第二组音频信号进行频率估计;
基于所述第二组音频信号确定所述信号源的第二信号方向;
通过对所述第一组音频信号和所述第二组音频信号执行多普勒分析来确定所述信号源是正在接近还是正在移动远离检测位置;以及
基于所述多普勒分析、对多个音频信号执行方向分析和对所述音频信号执行强度分析确定信号源位置和速度;
基于确定的信号源位置速度确定所述信号源是否在与移动平台上的检测位置碰撞的航线上,其中,所述移动平台包括飞行器;以及
通过改变所述移动平台的所述航线来避让所述信号源。
26.一种非暂时性机器可读存储介质,存储有用于确定信号源位置和速度的计算机程序产品,所述计算机程序产品包括用于执行如权利要求19或20所述的方法的指令。
27.一种非暂时性机器可读存储介质,存储有用于避让信号源的计算机程序产品,所述计算机程序产品包括用于执行如权利要求21-23中任一项所述的方法的指令。
28.一种用于飞行器的声学感测系统,其包括:
第一主麦克风阵列,用于获取第一组音频信号和第二组音频信号;
第一副麦克风;以及
处理装置,所述处理装置用于:
基于多个音频信号的多普勒分析、对所述多个音频信号执行方向分析和对所述音频信号执行强度分析来确定信号源位置和速度;
从所述第一组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第一组处理过的音频信号;
对所述第一组处理过的音频信号进行频率估计;
基于所述第一组处理过的音频信号确定信号源的信号方向;
从所述第二组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第二组处理过的音频信号;
对所述第二组处理过的音频信号进行频率估计;
基于所述第二组处理过的音频信号确定所述信号源的第二信号方向。
29.一种用于飞行器的声学感测系统,其包括:
外壳;
第一主麦克风阵列,用于获取第一组音频信号和第二组音频信号,所述第一主麦克风阵列定位在所述外壳上并且包括多个麦克风;
第一副麦克风,所述第一副麦克风定位在所述外壳上,所述第一副麦克风连接至所述第一主麦克风阵列;以及
处理装置,所述处理装置用于:
基于多个音频信号的方向分析和对所述音频信号执行强度分析来确定信号源位置和速度;
从所述第一组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第一组处理过的音频信号;
对所述第一组处理过的音频信号进行频率估计;
基于所述第一组处理过的音频信号确定信号源的信号方向;
从所述第二组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第二组处理过的音频信号;
对所述第二组处理过的音频信号进行频率估计;
基于所述第二组处理过的音频信号确定所述信号源的第二信号方向。
30.如权利要求29所述的声学感测系统,其中所述确定信号源位置和速度还基于多普勒分析。
31.如权利要求29或30所述的声学感测系统,其中所述第一主麦克风阵列和所述第一副麦克风在所述外壳上定位在平行但不同的平面中。
32.如权利要求29-30中任一项所述的声学感测系统,其中所述第一主麦克风阵列指向第一方向并且所述第一副麦克风指向与所述第一方向不同的第二方向。
33.如权利要求32所述的声学感测系统,其中所述第一方向与所述第二方向相反。
34.如权利要求32所述的声学感测系统,其中所述第一方向垂直于所述第二方向。
35.如权利要求29-30中任一项所述的声学感测系统,其中所述第一主麦克风阵列中的所述麦克风以具有行和列的矩阵配置定位在基板上。
36.如权利要求29-30中任一项所述的声学感测系统,其中所述第一主麦克风阵列中的所述麦克风定位在同一平面中。
37.如权利要求29-30中任一项所述的声学感测系统,其还包括处理器和存储器,所述处理器和所述存储器定位在所述外壳内并且连接至所述第一主麦克风阵列和所述第一副麦克风。
38.如权利要求29-30中任一项所述的声学感测系统,其还包括第二主麦克风阵列,所述第二主麦克风阵列定位在所述外壳上并且连接至所述第一主麦克风阵列和所述第一副麦克风。
39. 如权利要求38所述的声学感测系统,其还包括第二副麦克风,所述第二副麦克风定位在所述外壳上并且连接至所述第一主麦克风阵列和所述第二主麦克风阵列以及所述第一副麦克风。
40.如权利要求39所述的声学感测系统,其中
所述第一主麦克风阵列指向第一方向;
所述第一副麦克风指向第二方向;
所述第二主麦克风阵列指向第三方向;
所述第二副麦克风指向第四方向;并且
其中所述第一方向、所述第二方向、所述第三方向及所述第四方向中的至少有两个是不同的方向。
41.如权利要求40所述的声学感测系统,其中所述第一方向与所述第二方向相反并且所述第三方向与所述第四方向相反。
42. 如权利要求39所述的声学感测系统,
其中所述第一主麦克风阵列和所述第一副麦克风在平行但不同的平面中定位在所述外壳上;并且
其中所述第二主麦克风阵列和所述第二副麦克风在平行但不同的平面中定位在所述外壳上。
43.如权利要求29-30中任一项所述的声学感测系统,其中所述第一主麦克风阵列和所述第一副麦克风用于检测超声。
44.如权利要求29-30中任一项所述的声学感测系统,其中所述第一主麦克风阵列和所述第一副麦克风用于检测次声。
45.如权利要求29所述的声学感测系统,其中所述处理装置还用于确定所述信号源是正在接近还是正在移动远离检测位置。
46.如权利要求30所述的声学感测系统,其中所述处理装置还用于基于多个音频信号的所述多普勒分析、所述方向分析和所述强度分析,预测未来信号源位置和速度。
47.一种移动平台,其包括:
外壳;
第一主麦克风阵列,用于获取第一组音频信号和第二组音频信号,其中,所述第一主麦克风阵列定位在所述外壳上并且包括多个麦克风;
第一副麦克风,所述第一副麦克风定位在所述外壳上并且连接至所述第一主麦克风阵列;以及
处理装置,所述处理装置用于:
基于多个音频信号的方向分析和对所述音频信号执行强度分析来确定信号源位置和速度;
从所述第一组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第一组处理过的音频信号;
对所述第一组处理过的音频信号进行频率估计;
基于所述第一组处理过的音频信号确定信号源的信号方向;
从所述第二组音频信号中的多个音频信号中的每一个中减去由所述第一副麦克风获取的背景噪声音频信号以产生第二组处理过的音频信号;
对所述第二组处理过的音频信号进行频率估计;
基于所述第二组处理过的音频信号确定所述信号源的第二信号方向。
48.如权利要求47所述的移动平台,其中所述移动平台是无人机。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2015/072160 WO2016123746A1 (en) | 2015-02-03 | 2015-02-03 | System and method for detecting aerial vehicle position and velocity via sound |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107110963A CN107110963A (zh) | 2017-08-29 |
CN107110963B true CN107110963B (zh) | 2021-03-19 |
Family
ID=56563296
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580073011.5A Expired - Fee Related CN107110963B (zh) | 2015-02-03 | 2015-02-03 | 用于利用声音检测飞行器位置和速度的系统及方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10473752B2 (zh) |
JP (1) | JP6188105B2 (zh) |
CN (1) | CN107110963B (zh) |
WO (1) | WO2016123746A1 (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9824589B1 (en) * | 2016-09-15 | 2017-11-21 | Ford Global Technologies, Llc | Vehicle collision risk detection |
CN106742000B (zh) * | 2017-03-13 | 2023-06-20 | 芜湖博高光电科技股份有限公司 | 一种无源定位寻的装置 |
CN106873626B (zh) * | 2017-03-31 | 2020-07-03 | 芜湖博高光电科技股份有限公司 | 一种无源定位寻的系统 |
CN106997205B (zh) * | 2017-04-27 | 2019-10-01 | 西南科技大学 | 一种用于移动机器人对目标定位和跟踪的系统及方法 |
GB2563935B (en) * | 2017-06-30 | 2022-04-13 | The Royal Veterinary College | Obstacle detection |
CN107677992B (zh) * | 2017-09-30 | 2021-06-22 | 深圳市沃特沃德股份有限公司 | 移动侦测方法、装置和监控设备 |
KR102229267B1 (ko) * | 2018-01-29 | 2021-03-19 | 이스라엘 에어로스페이스 인더스트리즈 리미티드 | 무인 운송 수단의 근접 항법 |
US10957209B2 (en) * | 2018-09-25 | 2021-03-23 | Intel Corporation | Methods and apparatus for preventing collisions between drones based on drone-to-drone acoustic communications |
US10761176B1 (en) * | 2018-10-16 | 2020-09-01 | Honeywell International Inc. | Systems and methods for distance independent differential signature detection |
US11754708B1 (en) * | 2018-12-10 | 2023-09-12 | Amazon Technologies, Inc. | Object detection using propeller noise |
US11594142B1 (en) * | 2018-12-12 | 2023-02-28 | Scientific Applications & Research Associates, Inc | Terrestrial acoustic sensor array |
DE102018222862A1 (de) * | 2018-12-21 | 2020-06-25 | Robert Bosch Gmbh | Verfahren und System zur Lokalisierung einer Akustikquelle relativ zu einem Fahrzeug |
US11714098B2 (en) | 2019-04-22 | 2023-08-01 | Rosemount Aerospace Inc. | Acoustic air data systems |
US11858625B1 (en) * | 2019-06-21 | 2024-01-02 | Amazon Technologies, Inc. | Object detection using propeller noise |
KR102332110B1 (ko) * | 2019-08-12 | 2021-11-30 | 김희경 | 편대 및 군집비행을 위한 충돌방지시스템을 적용한 드론 |
US11237241B2 (en) * | 2019-10-10 | 2022-02-01 | Uatc, Llc | Microphone array for sound source detection and location |
EP4085445A4 (en) * | 2019-12-31 | 2024-02-21 | Zipline International Inc. | CORRELATED MOTION AND DETECTION FOR AIRCRAFT |
EP4085444A4 (en) * | 2019-12-31 | 2024-04-10 | Zipline International Inc. | Acoustic based detection and avoidance for aircraft |
US11557213B1 (en) * | 2020-03-30 | 2023-01-17 | Amazon Technologies, Inc. | Air-traffic system |
US20230102079A1 (en) * | 2021-09-30 | 2023-03-30 | Aptiv Technologies Limited | Accurate and Efficient Electromagnetic Response for a Sensor Simulator |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR900004373B1 (ko) * | 1986-11-28 | 1990-06-23 | 가부시끼 가이샤 오오젠 | 이동체의 이동속도 측정장치 |
JPH05142335A (ja) * | 1991-11-15 | 1993-06-08 | Nec Corp | ソーナー装置 |
JP2687083B2 (ja) * | 1992-10-20 | 1997-12-08 | トヨタ自動車株式会社 | ドップラ式対地車速検出装置 |
JPH0792264A (ja) * | 1993-09-24 | 1995-04-07 | Aisin Seiki Co Ltd | 車載用車速計測装置 |
JPH102748A (ja) | 1996-06-19 | 1998-01-06 | Matsushita Electric Ind Co Ltd | 自律航法装置 |
JPH1012748A (ja) * | 1996-06-21 | 1998-01-16 | Sony Corp | 半導体装置の製造方法 |
JP2001166025A (ja) * | 1999-12-14 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 音源の方向推定方法および収音方法およびその装置 |
US20030006887A1 (en) * | 2001-07-03 | 2003-01-09 | Bruce Rossini | Self-contained back-up warning system |
WO2005125267A2 (en) * | 2004-05-05 | 2005-12-29 | Southwest Research Institute | Airborne collection of acoustic data using an unmanned aerial vehicle |
US20160066087A1 (en) * | 2006-01-30 | 2016-03-03 | Ludger Solbach | Joint noise suppression and acoustic echo cancellation |
US20080150755A1 (en) * | 2006-11-15 | 2008-06-26 | Alice Jane Van Zandt | Emergency Vehicle Indicator |
US7606115B1 (en) | 2007-10-16 | 2009-10-20 | Scientific Applications & Research Associates, Inc. | Acoustic airspace collision detection system |
PL2065726T3 (pl) * | 2007-11-13 | 2012-07-31 | Univ Oslo | Ultradźwiękowy system lokalizacji stref o wysokiej przepustowości |
DE102008021701A1 (de) * | 2008-04-28 | 2009-10-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und Vorrichtung zur Lokalisation mindestens eines Gegenstandes |
US8543265B2 (en) * | 2008-10-20 | 2013-09-24 | Honeywell International Inc. | Systems and methods for unmanned aerial vehicle navigation |
US8059489B1 (en) | 2009-04-17 | 2011-11-15 | The Boeing Company | Acoustic airport surveillance system |
US8718290B2 (en) * | 2010-01-26 | 2014-05-06 | Audience, Inc. | Adaptive noise reduction using level cues |
CN103155032B (zh) * | 2010-08-27 | 2016-10-19 | 诺基亚技术有限公司 | 用于去除非所需声音的麦克风装置和方法 |
US9571925B1 (en) * | 2010-10-04 | 2017-02-14 | Nortek Security & Control Llc | Systems and methods of reducing acoustic noise |
KR101103794B1 (ko) * | 2010-10-29 | 2012-01-06 | 주식회사 마이티웍스 | 멀티 빔 음향시스템 |
CN103069297A (zh) * | 2011-01-18 | 2013-04-24 | 松下电器产业株式会社 | 车辆方向确定装置、车辆方向确定方法及其程序 |
JP5516455B2 (ja) * | 2011-02-23 | 2014-06-11 | トヨタ自動車株式会社 | 接近車両検出装置及び接近車両検出方法 |
US9368028B2 (en) * | 2011-12-01 | 2016-06-14 | Microsoft Technology Licensing, Llc | Determining threats based on information from road-based devices in a transportation-related context |
US9360546B2 (en) * | 2012-04-13 | 2016-06-07 | Qualcomm Incorporated | Systems, methods, and apparatus for indicating direction of arrival |
CN102682765B (zh) * | 2012-04-27 | 2013-09-18 | 中咨泰克交通工程集团有限公司 | 高速公路音频车辆检测装置及其方法 |
US8774368B2 (en) * | 2012-06-08 | 2014-07-08 | Avaya Inc. | System and method to use enterprise communication systems to measure and control workplace noise |
JP5896854B2 (ja) * | 2012-07-26 | 2016-03-30 | 株式会社日立製作所 | 目標運動解析方法及び目標運動解析装置 |
CN102830243B (zh) * | 2012-08-31 | 2015-05-06 | 成都定为电子技术有限公司 | 一种运动球体旋转速度的测量方法与装置 |
US9301070B2 (en) * | 2013-03-11 | 2016-03-29 | Arris Enterprises, Inc. | Signature matching of corrupted audio signal |
KR102127640B1 (ko) * | 2013-03-28 | 2020-06-30 | 삼성전자주식회사 | 휴대 단말 및 보청기와 휴대 단말에서 음원의 위치를 제공하는 방법 |
US20150195644A1 (en) * | 2014-01-09 | 2015-07-09 | Microsoft Corporation | Structural element for sound field estimation and production |
CN104155644B (zh) * | 2014-08-20 | 2017-01-25 | 西安电子科技大学 | 一种基于声音传感器的测距方法及系统 |
WO2016029469A1 (en) * | 2014-08-29 | 2016-03-03 | SZ DJI Technology Co., Ltd. | An unmanned aerial vehicle (uav) for collecting audio data |
US9396632B2 (en) * | 2014-12-05 | 2016-07-19 | Elwha Llc | Detection and classification of abnormal sounds |
-
2015
- 2015-02-03 CN CN201580073011.5A patent/CN107110963B/zh not_active Expired - Fee Related
- 2015-02-03 WO PCT/CN2015/072160 patent/WO2016123746A1/en active Application Filing
- 2015-02-03 JP JP2016540520A patent/JP6188105B2/ja not_active Expired - Fee Related
-
2017
- 2017-04-19 US US15/490,939 patent/US10473752B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US10473752B2 (en) | 2019-11-12 |
JP6188105B2 (ja) | 2017-08-30 |
JP2017515092A (ja) | 2017-06-08 |
WO2016123746A1 (en) | 2016-08-11 |
US20170219686A1 (en) | 2017-08-03 |
CN107110963A (zh) | 2017-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107110963B (zh) | 用于利用声音检测飞行器位置和速度的系统及方法 | |
US10514711B2 (en) | Flight control using computer vision | |
Sedunov et al. | Stevens drone detection acoustic system and experiments in acoustics UAV tracking | |
Basiri et al. | On-board relative bearing estimation for teams of drones using sound | |
US20190339384A1 (en) | System and method of radar-based obstacle avoidance for unmanned aerial vehicles | |
Blanchard et al. | Acoustic localization and tracking of a multi-rotor unmanned aerial vehicle using an array with few microphones | |
EP2667216B1 (en) | Passive acoustic ranging system using atmospheric dispersion | |
WO2019067695A1 (en) | FLIGHT CONTROL USING VISION BY COMPUTER | |
US20210233416A1 (en) | Unmanned aircraft, information processing method, and recording medium | |
Ishiki et al. | Design model of microphone arrays for multirotor helicopters | |
CN105203999A (zh) | 旋翼飞行器预警装置及预警方法 | |
Sinitsyn et al. | Determination of aircraft current location on the basis of its acoustic noise | |
JP2023508611A (ja) | 航空機の音響ベースの検知及び回避 | |
KR20230086389A (ko) | 무인기 재밍 장치 및 방법 | |
Washizaki et al. | Position estimation of sound source on ground by multirotor helicopter with microphone array | |
Stinco et al. | Source localization using an acoustic vector sensor hosted on a buoyancy glider | |
US9612310B2 (en) | Method and apparatus for determining the direction of arrival of a sonic boom | |
Guarato et al. | Ultrasonic sonar system for target localization with one emitter and four receivers: Ultrasonic 3D localization | |
CN113822372A (zh) | 基于YOLOv5神经网络的无人机检测方法 | |
Didkovskyi et al. | Simple acoustic array for small UAV detection | |
US11656639B2 (en) | Information processing method, unmanned aerial vehicle, and unmanned aerial vehicle control system | |
Blass et al. | Experimental evaluation of acoustic drone tracking using mobile microphone arrays | |
Sharma et al. | Acoustic Beamforming for Object-relative Distance Estimation and Control in Unmanned Air Vehicles using Propulsion System Noise | |
CN112771463A (zh) | 无人飞行体、信息处理方法以及程序 | |
Gazzah | A maneuvering uniform circular array of directional sensors for improved source localization accuracy |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210319 |