RU2016116896A - Способ локализации источника звука и гуманоидный робот, использующий такой способ - Google Patents
Способ локализации источника звука и гуманоидный робот, использующий такой способ Download PDFInfo
- Publication number
- RU2016116896A RU2016116896A RU2016116896A RU2016116896A RU2016116896A RU 2016116896 A RU2016116896 A RU 2016116896A RU 2016116896 A RU2016116896 A RU 2016116896A RU 2016116896 A RU2016116896 A RU 2016116896A RU 2016116896 A RU2016116896 A RU 2016116896A
- Authority
- RU
- Russia
- Prior art keywords
- specified
- microphones
- subset
- vector
- inter
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/80—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
- G01S3/802—Systems for determining direction or deviation from predetermined direction
- G01S3/808—Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems
- G01S3/8083—Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems determining direction of source
Claims (23)
1. Способ локализации источника звука, включающий этапы, на которых:
a) улавливают звуковые сигналы от источника звука, подлежащего локализации, с помощью набора из по меньшей мере трех микрофонов(M1, M2, M3, M4);
b) выбирают по меньшей мере три пары микрофонов из указанного набора микрофонов и, для каждой указанной пары, рассчитывают обобщенную взаимную корреляцию уловленных звуковых сигналов, указанный расчет осуществляют для множества значений задержки - называемой межслуховой разницей во времени - между указанными звуковыми сигналами;
c) на основании указанных обобщенных взаимных корреляций, рассчитывают направленную мощность отклика, выраженную в зависимости от вектора межслуховых разниц во времени для каждой указанной пары микрофонов;
d) определяют вектор межслуховых разниц во времени, который максимизирует указанную направленную мощность отклика; и
e) оценивают направление локализации указанного источника звука в зависимости от вектора межслуховых разниц во времени, определенного во время указанного этапа d),
отличающийся тем, что:
- указанные этапы c) и d) осуществляют, рассматривая множество векторов межслуховых разниц во времени, формирующих набор (E), который включает в себя: первый поднабор (E1) векторов совместимых со звуковыми сигналами, происходящими от единственного источника звука, на бесконечном удалении от указанных микрофонов; и второй поднабор (E2) векторов не совместимых со звуковыми сигналами, происходящими от единственного источника, на бесконечном удалении от указанных микрофонов; и тем, что:
- каждый вектор указанного первого поднабора связан с направлением локализации соответствующего единственного источника звука, и каждый вектор указанного второго поднабора связан с направлением локализации, связанным с вектором указанного первого поднабора, который к нему наиболее близок согласно предопределенной метрике; и тем, что:
- направление, оцененное на указанном этапе e) представляет собой направление, связанное с вектором межслуховых разниц во времени, определенным на указанном этапе d).
2. Способ по п.1, в котором обобщенные взаимные корреляции, рассчитываемые во время этапа b) являются типа GCC-PHAT,соответствующего взаимной корреляции предварительно отбеленных сигналов.
3. Способ по любому из предшествующих пунктов, в котором во время указанного этапа b), выбирают все пары микрофонов указанного множества.
4. Способ по любому из предшествующих пунктов, в котором указанная направленная мощность отклика может быть задана суммой, или пропорциональна сумме обобщенных взаимных корреляций для указанных пар микрофонов.
5. Способ по любому из предшествующих пунктов, в котором указанный первый поднабор состоит из векторов указанного набора, компоненты которого удовлетворяют условию, называемому условием Шаля:
τij+τjk=τik
где индексы i≠j≠k, представляют различные микрофоны указанного набора, а τij, τjk и τik представляют межслуховые разницы во времени, соответственно, для пар (i,j), (j,k) и (i,k)
6. Способ по любому из предшествующих пунктов, в котором указанный второй поднабор состоит из векторов указанного набора, не принадлежащих указанному первому поднабору и расстояние которых до вектора указанного первого поднабора, определенного согласно указанной предопределенной метрики и после нормализации, является меньше, чем предопределенный порог.
7. Способ по любому из предшествующих пунктов, в котором указанная предопределенная метрика является евклидовой метрикой.
8. Способ по любому из предшествующих пунктов, в котором указанный этап e) осуществляют с помощью таблицы (LUT) соответствия, связывающей направление локализации с каждым значением указанного набора.
9. Гуманоидный робот, включающий в себя:
- набор из по меньшей мере трех микрофонов (M1, M2, M3, M4); и
- процессор (PR), соединенный с указанными микрофонами для получения на вход звуковых сигналов, улавливаемых микрофонами, и запрограммированный или сконфигурированный для осуществления способа по любому из предшествующих пунктов.
10. Гуманоидный робот по п.9, в котором указанные микрофоны установлены на верхней поверхности головы (THR) указанного робота.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1359515A FR3011377B1 (fr) | 2013-10-01 | 2013-10-01 | Procede de localisation d'une source sonore et robot humanoide utilisant un tel procede |
| FR1359515 | 2013-10-01 | ||
| PCT/EP2014/070783 WO2015049199A1 (fr) | 2013-10-01 | 2014-09-29 | Procede de localisation d'une source sonore et robot humanoide utilisant un tel procede |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| RU2016116896A true RU2016116896A (ru) | 2017-11-10 |
| RU2642157C2 RU2642157C2 (ru) | 2018-01-24 |
Family
ID=50023689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2016116896A RU2642157C2 (ru) | 2013-10-01 | 2014-09-29 | Способ локализации источника звука и гуманоидный робот, использующий такой способ |
Country Status (11)
| Country | Link |
|---|---|
| US (1) | US10222447B2 (ru) |
| EP (1) | EP3052958B1 (ru) |
| JP (1) | JP6521954B2 (ru) |
| CN (1) | CN106030331B (ru) |
| AU (1) | AU2014331210B2 (ru) |
| BR (1) | BR112016007215A2 (ru) |
| CA (1) | CA2925934C (ru) |
| FR (1) | FR3011377B1 (ru) |
| MX (1) | MX2016004207A (ru) |
| RU (1) | RU2642157C2 (ru) |
| WO (1) | WO2015049199A1 (ru) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105096956B (zh) * | 2015-08-05 | 2018-11-20 | 百度在线网络技术（北京）有限公司 | 基于人工智能的智能机器人的多声源判断方法及装置 |
| KR102444061B1 (ko) * | 2015-11-02 | 2022-09-16 | 삼성전자주식회사 | 음성 인식이 가능한 전자 장치 및 방법 |
| KR102392113B1 (ko) * | 2016-01-20 | 2022-04-29 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 음성 명령 처리 방법 |
| CN107340498A (zh) * | 2016-05-03 | 2017-11-10 | 深圳光启合众科技有限公司 | 机器人及声源位置的确定方法和装置 |
| CN107071652B (zh) * | 2016-12-27 | 2023-08-04 | 深圳市优必选科技有限公司 | 一种服务机器人 |
| CN106842111B (zh) * | 2016-12-28 | 2019-03-29 | 西北工业大学 | 基于传声器镜像的室内声源定位方法 |
| JP6976131B2 (ja) | 2017-10-16 | 2021-12-08 | 三菱重工サーマルシステムズ株式会社 | 空調システム及び空調制御方法 |
| US11565365B2 (en) * | 2017-11-13 | 2023-01-31 | Taiwan Semiconductor Manufacturing Co., Ltd. | System and method for monitoring chemical mechanical polishing |
| CN108962263B (zh) * | 2018-06-04 | 2019-09-20 | 百度在线网络技术（北京）有限公司 | 一种智能设备控制方法及系统 |
| CN110716177B (zh) * | 2019-10-22 | 2022-09-09 | 哈尔滨工程大学 | 分布式声学定位网络中多目标分类方法 |
| CN112438660A (zh) * | 2020-09-23 | 2021-03-05 | 深圳市修远文化创意有限公司 | 一种基于扫地机器人的语音定位方法及相关装置 |
| CN112526452A (zh) * | 2020-11-24 | 2021-03-19 | 杭州萤石软件有限公司 | 声源检测方法、云台摄像机、智能机器人及存储介质 |
| CN112379330B (zh) * | 2020-11-27 | 2023-03-10 | 浙江同善人工智能技术有限公司 | 一种多机器人协同的3d声源识别定位方法 |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6453246B1 (en) | 1996-11-04 | 2002-09-17 | 3-Dimensional Pharmaceuticals, Inc. | System, method, and computer program product for representing proximity data in a multi-dimensional space |
| US20030072456A1 (en) * | 2001-10-17 | 2003-04-17 | David Graumann | Acoustic source localization by phase signature |
| WO2006059806A1 (ja) * | 2004-12-03 | 2006-06-08 | Honda Motor Co., Ltd. | 音声認識装置 |
| US20080071540A1 (en) * | 2006-09-13 | 2008-03-20 | Honda Motor Co., Ltd. | Speech recognition method for robot under motor noise thereof |
| US8233353B2 (en) * | 2007-01-26 | 2012-07-31 | Microsoft Corporation | Multi-sensor sound source localization |
| KR101483269B1 (ko) * | 2008-05-06 | 2015-01-21 | 삼성전자주식회사 | 로봇의 음원 위치 탐색 방법 및 그 장치 |
| KR101442172B1 (ko) * | 2008-05-14 | 2014-09-18 | 삼성전자주식회사 | 검색 공간 클러스터링 방법을 이용한 실시간ｓｒｐ-ｐｈａｔ 음원 위치 탐색 시스템 및 제어방법 |
| CN201210187Y (zh) * | 2008-06-13 | 2009-03-18 | 河北工业大学 | 一种自主搜寻声源的机器人 |
| US8233352B2 (en) * | 2009-08-17 | 2012-07-31 | Broadcom Corporation | Audio source localization system and method |
| JP2012234150A (ja) * | 2011-04-18 | 2012-11-29 | Sony Corp | 音信号処理装置、および音信号処理方法、並びにプログラム |
| CN102809742B (zh) * | 2011-06-01 | 2015-03-18 | 杜比实验室特许公司 | 声源定位设备和方法 |
| KR20130048075A (ko) * | 2011-11-01 | 2013-05-09 | 삼성전자주식회사 | 다중 음원 위치추적장치 및 그 위치추적방법 |
| CN102707262A (zh) * | 2012-06-20 | 2012-10-03 | 太仓博天网络科技有限公司 | 一种基于麦克风阵列的声源定位系统 |
-
2013
- 2013-10-01 FR FR1359515A patent/FR3011377B1/fr not_active Expired - Fee Related
-
2014
- 2014-09-29 BR BR112016007215-4A patent/BR112016007215A2/pt not_active Application Discontinuation
- 2014-09-29 WO PCT/EP2014/070783 patent/WO2015049199A1/fr active Application Filing
- 2014-09-29 CN CN201480054849.5A patent/CN106030331B/zh active Active
- 2014-09-29 JP JP2016519371A patent/JP6521954B2/ja active Active
- 2014-09-29 CA CA2925934A patent/CA2925934C/fr not_active Expired - Fee Related
- 2014-09-29 EP EP14777580.3A patent/EP3052958B1/fr active Active
- 2014-09-29 RU RU2016116896A patent/RU2642157C2/ru not_active IP Right Cessation
- 2014-09-29 AU AU2014331210A patent/AU2014331210B2/en not_active Ceased
- 2014-09-29 MX MX2016004207A patent/MX2016004207A/es unknown
- 2014-09-29 US US15/025,539 patent/US10222447B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| EP3052958A1 (fr) | 2016-08-10 |
| FR3011377A1 (fr) | 2015-04-03 |
| AU2014331210B2 (en) | 2017-08-10 |
| EP3052958B1 (fr) | 2019-11-20 |
| MX2016004207A (es) | 2017-08-16 |
| US10222447B2 (en) | 2019-03-05 |
| CA2925934A1 (fr) | 2015-04-09 |
| AU2014331210A1 (en) | 2016-05-19 |
| JP2016537622A (ja) | 2016-12-01 |
| CN106030331B (zh) | 2019-12-24 |
| RU2642157C2 (ru) | 2018-01-24 |
| CA2925934C (fr) | 2020-07-28 |
| CN106030331A (zh) | 2016-10-12 |
| FR3011377B1 (fr) | 2015-11-06 |
| WO2015049199A1 (fr) | 2015-04-09 |
| BR112016007215A2 (pt) | 2018-01-23 |
| JP6521954B2 (ja) | 2019-05-29 |
| US20160274212A1 (en) | 2016-09-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2016116896A (ru) | Способ локализации источника звука и гуманоидный робот, использующий такой способ | |
| NZ754204A (en) | Object tracking system optimization and tools | |
| MX2016009025A (es) | Seleccion de precision de vector de movimiento. | |
| JP2016039410A5 (ru) | ||
| PH12016501255A1 (en) | Improved molecular breeding methods | |
| JP5022461B2 (ja) | マイクアレイ・ネットワークシステムおよび該システムを用いた音源定位方法 | |
| JP2017046322A5 (ru) | ||
| WO2015168780A3 (en) | Indexing method and system | |
| Youssef et al. | A binaural sound source localization method using auditive cues and vision | |
| GB2592166A9 (en) | Methods of estimating a position of a rotor in a motor under transient and systems thereof | |
| WO2017197143A3 (en) | Virtual pathology for dermatology | |
| WO2015079366A3 (en) | System and method for facilitating optimization of cooling efficiency of a data center | |
| RU2018133450A (ru) | Устройство для генерирования синтезированного 2d-изображения объекта с улучшенной глубиной резкости | |
| JP2019512188A5 (ru) | ||
| EP2902117A3 (en) | Electro-acoustic transducer | |
| WO2015181604A8 (en) | A computer implemented method for identifying channels from representative data in a 3d volume and a computer program product implementing the method | |
| JP2014157509A5 (ru) | ||
| WO2015145254A3 (en) | Method, apparatus, and system for comp-based resource allocation | |
| WO2016060780A9 (en) | Systems and methods for providing data channels at a die-to-die interface | |
| MY173084A (en) | Adaptive-window edit distance algorithm computation | |
| WO2018136123A3 (en) | SWITCHABLE TOPOLOGY MACHINE | |
| JP2013546084A5 (ru) | ||
| RU2015100121A (ru) | Однослойный перцептрон на основе динамических нейронов | |
| JP2015228188A5 (ru) | ||
| RU2014101145A (ru) | Многофункциональная адаптивная антенная решетка |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20190930 |