JP2008542798A - コンピュータ対話型処理と共に使用する選択的音源聴音 - Google Patents
コンピュータ対話型処理と共に使用する選択的音源聴音 Download PDFInfo
- Publication number
- JP2008542798A JP2008542798A JP2008510282A JP2008510282A JP2008542798A JP 2008542798 A JP2008542798 A JP 2008542798A JP 2008510282 A JP2008510282 A JP 2008510282A JP 2008510282 A JP2008510282 A JP 2008510282A JP 2008542798 A JP2008542798 A JP 2008542798A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- listening zone
- listening
- initial
- zone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000002452 interceptive effect Effects 0.000 title claims description 22
- 238000012545 processing Methods 0.000 title description 35
- 238000000034 method Methods 0.000 claims abstract description 216
- 230000003287 optical effect Effects 0.000 claims abstract description 36
- 238000004590 computer program Methods 0.000 claims abstract description 21
- 238000001514 detection method Methods 0.000 claims description 73
- 230000005236 sound signal Effects 0.000 claims description 69
- 230000000007 visual effect Effects 0.000 claims description 50
- 230000004044 response Effects 0.000 claims description 47
- 230000006870 function Effects 0.000 claims description 35
- 230000008859 change Effects 0.000 claims description 31
- 238000003860 storage Methods 0.000 claims description 31
- 238000001914 filtration Methods 0.000 claims description 25
- 238000000926 separation method Methods 0.000 claims description 22
- 238000012512 characterization method Methods 0.000 claims description 12
- 230000002829 reductive effect Effects 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 claims description 11
- 238000009826 distribution Methods 0.000 claims description 11
- 230000001133 acceleration Effects 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000005070 sampling Methods 0.000 claims description 5
- 230000002708 enhancing effect Effects 0.000 claims 3
- 230000010255 response to auditory stimulus Effects 0.000 claims 2
- 230000008569 process Effects 0.000 abstract description 13
- 238000003672 processing method Methods 0.000 abstract description 2
- 230000007717 exclusion Effects 0.000 abstract 1
- 239000011159 matrix material Substances 0.000 description 51
- 238000010586 diagram Methods 0.000 description 39
- 230000000875 corresponding effect Effects 0.000 description 28
- 238000013507 mapping Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 11
- 238000012880 independent component analysis Methods 0.000 description 11
- 238000003491 array Methods 0.000 description 10
- 230000003993 interaction Effects 0.000 description 10
- 238000012546 transfer Methods 0.000 description 10
- 230000002093 peripheral effect Effects 0.000 description 8
- 230000004807 localization Effects 0.000 description 7
- 238000000348 solid-phase epitaxy Methods 0.000 description 7
- 101000893549 Homo sapiens Growth/differentiation factor 15 Proteins 0.000 description 6
- 101000692878 Homo sapiens Regulator of MON1-CCZ1 complex Proteins 0.000 description 6
- 102100026436 Regulator of MON1-CCZ1 complex Human genes 0.000 description 6
- 230000008901 benefit Effects 0.000 description 6
- 238000004422 calculation algorithm Methods 0.000 description 6
- 230000001934 delay Effects 0.000 description 6
- 102000008482 12E7 Antigen Human genes 0.000 description 5
- 108010020567 12E7 Antigen Proteins 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 5
- 230000003247 decreasing effect Effects 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 235000009508 confectionery Nutrition 0.000 description 4
- 238000013500 data storage Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000000513 principal component analysis Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 229920013636 polyphenyl ether polymer Polymers 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000000670 limiting effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000002195 synergetic effect Effects 0.000 description 2
- 230000036962 time dependent Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 102100032912 CD44 antigen Human genes 0.000 description 1
- 101000868273 Homo sapiens CD44 antigen Proteins 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000001364 causal effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000011112 process operation Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/424—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/105—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1081—Input via voice recognition
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
- A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/6063—Methods for processing data by generating or executing the game program for sound processing
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/69—Involving elements of the real world in the game world, e.g. measurement in live races, real video
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Circuit For Audible Band Transducer (AREA)
- Position Input By Displaying (AREA)
- Stereophonic System (AREA)
- User Interface Of Digital Computer (AREA)
- Mechanical Control Devices (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
Abstract
Description
X00=FT([x0(t−0),x0(t−1),x0(t−2),…,x0(t−N−1+0)])
X01=FT([x0(t−1),x0(t−2),x0(t−3),…,x0(t−N−1+1)])
……
X09=FT([x0(t−9),x0(t−10)x0(t−2),…,x0(t−N−1+10)])
x01=FT([x1(t−0),x1(t−1),x1(t−2),…,x1(t−N−1+0)])
x11=FT([x1(t−1),x1(t−2),x1(t−3),…,x1(t−N−1+1)])
……
x19=FT([x1(t−9),x1(t−10)x1(t−2),…,x1(t−N−1+10)])
x20=FT([x2(t−0)),x2(t−1),x2(t−2),…,x2(t−N−1+0)])
x21=FT([x2(t−1),x2(t−2),x2(t−3),…,x2(t−N−1+1)])
……
x29=FT([x2(t−9),x2(t−10)x2(t−2),…,x2(t−N−1+10)])
x30=FT([x3(t−0),x3(t−1),x3(t−2),…,x3(t−N−1+0)]
x31=FT([x3(t−1),x3(t−2),x3(t−3),…,x3(t−N−1+1)])
……
X39=FT([x3(t−9),x3(t−10)x3(t−2),…,x3(t−N−1+10)])
フィルタが音源2004を含むセクタを選択するように設定されている場合、減衰はほぼ1に等しい。このため、音源2004は、フィルタF0、F1、F2およびF3の設定を、あるセクタから別のセクタに切り替えて、異なるセクタの減衰を決定することによってトラッキングすることができる。異なる聴取セクタの減衰の決定を使用する対象音声検出方法2020は、図25Dのフロー図に示すように進みうる。2022において、最初に、事前較正された聴取セクタのいずれかが選択されうる。例えば、セクタS4(前方の聴取方向にほぼ対応している)が、既定の初期聴取セクタとして選択されうる。2024において、この初期傾聴セクタについて、入力信号エネルギーの減衰が決定される。2026において、減衰が最適値にない場合、2028において、別の事前較正されたセクタが選択されうる。
Claims (177)
- 初期聴取ゾーンを検出するステップと、
マイクロフォンアレイによって、キャプチャされた音をキャプチャするステップと、
前記キャプチャされた音および前記初期聴取ゾーンに基づいて、前記初期聴取ゾーン内の音を含む初期音を識別するステップと、
前記初期聴取ゾーンを調整して、前記調整された聴取ゾーンを形成するステップと、
前記キャプチャされた音および前記調整された聴取ゾーンに基づいて、前記調整された聴取ゾーン内の音を含む調整された音を識別するステップと、を有する方法。 - 前記初期音を生成するために、前記キャプチャされた音の一部を破棄するステップを更に有する請求項1に記載の方法。
- 前記キャプチャされた音は、前記初期聴取ゾーンの外からの音を含む請求項1に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの領域を拡大するステップを更に有する請求項1に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの領域を縮小するステップを更に有する請求項1に記載の方法。
- 前記初期聴取ゾーンは、フィルタ係数の組によって表現される請求項1に記載の方法。
- 前記調整された聴取ゾーンは、フィルタ係数の組によって表現される請求項1に記載の方法。
- 前記調整された音を送信するステップを更に有する請求項1に記載の方法。
- 前記調整された音を記憶するステップを更に有する請求項1に記載の方法。
- 前記調整された音は、前記調整された聴取ゾーン内で発生した音を含み、前記調整された聴取ゾーンの外からの音が除外されている請求項1に記載の方法。
- 調整する前記ステップは、前記調整された聴取ゾーンの外で検出された音に基づいて前記初期聴取ゾーンを拡大するステップを更に有する請求項1に記載の方法。
- 前記調整された聴取ゾーンは、前記調整された聴取ゾーンの外で検出された前記音の位置を含む請求項11に記載の方法。
- 前記初期聴取ゾーンを調整する前記ステップは、前記キャプチャされた音の位置および前記初期聴取ゾーンに基づく請求項1に記載の方法。
- 前記調整された聴取ゾーンは、前記キャプチャされた音の前記位置を含む請求項13に記載の方法。
- マイクロフォンアレイは1つを超えるマイクロフォンを有する請求項1に記載の方法。
- マイクロフォンアレイによってカバーされる音場を検出するステップと、
それぞれが前記音場の一部を表している複数の聴取ゾーンを定義するステップと、
複数の聴取ゾーンから選択された聴取ゾーンを指定するステップと、
前記選択された聴取ゾーンをプロファイルに記憶するステップと、を有する方法。 - 前記複数の聴取ゾーンのそれぞれの領域はフィルタ係数の組によって表現される請求項16に記載の方法。
- 前記複数の聴取ゾーンを表現している領域は、前記マイクロフォンアレイによってカバーされる音場を含む請求項16に記載の方法。
- 音を求めてマイクロフォンアレイによってモニタすべき聴取ゾーンを検出するように構成された領域検出モジュールと、
前記聴取ゾーンからの音を記憶するように構成された記憶モジュールと、
前記聴取ゾーンを調整するように構成された領域調整モジュールと、
前記聴取ゾーンから発生する音を検出するように構成された音検出モジュールと、を有するシステム。 - 前記聴取ゾーンと関連するパラメータを記憶するように構成された領域プロファイルモジュールを更に有する請求項19に記載のシステム。
- 前記パラメータは、前記聴取ゾーンによってカバーされる領域を示すフィルタ係数の組である請求項19に記載のシステム。
- 初期聴取ゾーンを検出するステップと、
マイクロフォンアレイによって、キャプチャされた音をキャプチャするステップと、
前記キャプチャされた音および前記初期聴取ゾーンに基づいて、前記初期聴取ゾーン内の音を含む初期音を識別するステップと、
前記初期聴取ゾーンを調整して、前記調整された聴取ゾーンを形成するステップと、
前記キャプチャされた音および前記調整された聴取ゾーンに基づいて、前記調整された聴取ゾーン内の音を含む調整された音を識別するステップと、を有する方法を実行する計算機実行可能命令を有する計算機可読媒体。 - 音を求めてモニタすべき初期領域を表す初期聴取ゾーンを検出するステップと、
視覚装置の視野を検出するステップと、
前記視覚装置の前記視野を前記初期聴取ゾーンの前記初期領域と比較するステップと、
前記初期聴取ゾーンを調整して、前記視野と前記初期領域との比較に基づいて調整された領域を含む前記調整された聴取ゾーンを形成するステップと、を有する方法。 - 前記調整された領域から発せられる音をキャプチャするステップを更に有する請求項23に記載の方法。
- 前記初期領域から発せられる音をキャプチャするステップを更に有する請求項23に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの前記初期領域を拡大するステップを更に有する請求項23に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの前記初期領域を縮小するステップを更に有する請求項23に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの前記初期領域の位置を移動させるステップを更に有する請求項23に記載の方法。
- 前記初期聴取ゾーンは、フィルタ係数の組によって表現される請求項23に記載の方法。
- 前記調整された聴取ゾーンは、フィルタ係数の組によって表現される請求項23に記載の方法。
- マイクロフォンアレイによって、前記調整された聴取ゾーンから調整された音をキャプチャするステップを更に有する請求項23に記載の方法。
- 前記調整された音を送信するステップを更に有する請求項31に記載の方法。
- 前記調整された音を記憶するステップを更に有する請求項31に記載の方法。
- マイクロフォンアレイは1つを超えるマイクロフォンを有する請求項31に記載の方法。
- 前記視覚装置はスチルカメラである請求項23に記載の方法。
- 前記視覚装置はスチルカメラである請求項23に記載の方法。
- 前記初期聴取ゾーンは、フィルタ係数の組によって表現される請求項23に記載の方法。
- 前記調整された聴取ゾーンは、フィルタ係数の組によって表現される請求項23に記載の方法。
- 視覚装置からの画像を検出するステップと、
前記画像と関連する領域から発せられた音を検出するように構成された聴取ゾーンを形成するステップと、
前記聴取ゾーンから発せられた音をキャプチャするステップと、
前記画像に基づいて前記聴取ゾーンを動的に調整するステップと、有する方法。 - 前記動的に調整する前記ステップは、前記聴取ゾーンを拡大するステップを更に有する請求項39に記載の方法。
- 前記動的に調整する前記ステップは、前記聴取ゾーンを縮小するステップを更に有する請求項39に記載の方法。
- 前記動的に調整する前記ステップは、前記聴取ゾーンを別の位置に移動させるステップを更に有する請求項39に記載の方法。
- 前記画像は、ビデオのセグメントを形成する複数の画像のうちの1つである請求項39に記載の方法。
- 音を求めてモニタすべき聴取ゾーンを検出するように構成された領域検出モジュールと、
視覚装置によってモニタされる視野を検出するように構成された視野検出モジュールと、
前記視野に基づいて前記聴取ゾーンを調整するように構成された領域調整モジュールと、
前記聴取ゾーンから発せられた音を検出するように構成された音検出モジュールと、を有するシステム。 - 前記聴取ゾーンと関連する領域は、フィルタ係数の組によって記述される請求項44に記載のシステム。
- 音を求めてモニタすべき初期領域を表す初期聴取ゾーンを検出するステップと、
前記初期聴取ゾーン内で初期音を検出するステップと、
前記初期聴取ゾーンを調整して、調整された領域を含む前記調整された聴取ゾーンを形成するステップと、を有し、前記初期音は前記調整された聴取ゾーン内から発せられる方法。 - 前記調整された領域から発せられる音をキャプチャするステップを更に有する請求項46に記載の方法。
- 前記初期領域から発せられる音をキャプチャするステップを更に有する請求項46に記載の方法。
- 調整する前記ステップは、前記初期聴取ゾーンの前記初期領域を狭めるステップを更に有する請求項46に記載の方法。
- 前記初期音の初期騒音レベルを検出するステップを更に有する請求項46に記載の方法。
- 前記初期騒音レベルをしきい値レベルと比較するステップを更に有する請求項50に記載の方法。
- 前記しきい値レベルは、背景音の検出を低減させるように予め決定されている請求項51に記載の方法。
- 前記初期聴取ゾーンを調整する前記ステップは、前記初期の騒音レベルが前記しきい値レベルを上回ると行われる請求項51に記載の方法。
- 前記初期聴取ゾーンは、フィルタ係数の組によって表現される請求項46に記載の方法。
- 前記調整された聴取ゾーンは、フィルタ係数の組によって表現される請求項46に記載の方法。
- マイクロフォンアレイによって、前記調整された聴取ゾーンから調整された音をキャプチャするステップを更に有する請求項46に記載の方法。
- 前記調整された音を送信するステップを更に有する請求項56に記載の方法。
- 前記調整された音を記憶するステップを更に有する請求項56に記載の方法。
- マイクロフォンアレイは1つを超えるマイクロフォンを有する請求項56に記載の方法。
- 前記調整された音の調整された騒音レベルを検出するステップを更に有する請求項56に記載の方法。
- 前記調整された騒音レベルをしきい値レベルと比較するステップを更に有する請求項60に記載の方法。
- 前記しきい値レベルが前記調整された音レベルを上回る時に、前記調整された聴取ゾーンを前記初期聴取ゾーンに戻すステップを更に有する請求項61に記載の方法。
- 前記初期聴取ゾーンは、フィルタ係数の組によって表現される請求項46に記載の方法。
- 前記調整された聴取ゾーンは、フィルタ係数の組によって表現される請求項46に記載の方法。
- 音を求めてモニタすべき初期聴取ゾーンを検出するように構成された領域検出モジュールと、
前記初期聴取ゾーンから発せられた音を検出し、前記音の位置を検出するように構成された音検出モジュールと、
前記音の前記位置に基づいて前記初期聴取ゾーンを調整し、前記音の前記位置を含む調整された聴取ゾーンを形成するように構成された領域調整モジュールと、を有するシステム。 - 前記調整された聴取ゾーンは、フィルタ係数の組によって記述される請求項65に記載のシステム。
- 前記音検出モジュールは、前記初期聴取ゾーンから発せられた前記音の音レベルを検出するように構成されている請求項65に記載のシステム。
- 前記領域調整モジュールは、前記音レベルがしきい値レベルを上回っていることに基づいて前記初期聴取ゾーンを調整するように構成されている請求項67に記載のシステム。
- 前記音検出モジュールに結合されたマイクロフォンまたはマイクロフォンアレイを更に有する請求項65に記載のシステム。
- 前記マイクロフォンアレイは、一次元のアレイに配置された2つ以上のマイクロフォンを有する請求項69に記載のシステム。
- 前記マイクロフォンアレイは、二次元のアレイに配置された3つ以上のマイクロフォンを有する請求項69に記載のシステム。
- 前記マイクロフォンアレイは、三次元のアレイに配置された4つ以上のマイクロフォンを有する請求項69に記載のシステム。
- 音を求めてモニタすべき初期領域を表す初期聴取ゾーンを検出するステップと、
前記初期聴取ゾーン内で初期音を検出するステップと、
前記初期聴取ゾーンを調整して、調整された領域を含む前記調整された聴取ゾーンを形成するステップと、を有し、前記初期音は前記調整された聴取ゾーン内から発せられる方法を実行する計算機実行可能命令を有する計算機可読媒体。 - 2つ以上のマイクロフォンM0,…,MMを有するマイクロフォンアレイを使用する標的音検出のための方法であって、各マイクロフォンは、複数のフィルタと結合されており、前記フィルタは前記マイクロフォンによって検出された音に対応する入力信号をフィルタして、フィルタされた出力を生成するように構成されている方法であって、前記方法は、
1つ以上の対応する事前較正された聴取ゾーンを決定するために、前記複数のフィルタに対して、所定の聴取ゾーン内で発生した音に対応する前記入力信号の一部を検出して、前記所定の聴取セクタの外で発生する音をフィルタ除去するように選択されたフィルタパラメータの1つ以上の組を事前較正するステップと、
特定の事前較正された聴取ゾーンに対応するフィルタ係数の組を前記複数のフィルタに適用することによって、実行時に、前記特定の事前較正された聴取ゾーンを選択するステップと、を有し、これにより、前記マイクロフォンアレイが、前記特定の聴取ゾーン内で発生した音を検出して、前記特定の聴取ゾーンの外で発生する音をフィルタ除去することができる方法。 - 前記フィルタパラメータの複数の組を事前較正する前記ステップは、有限インパルス応答(FIR)フィルタ係数の組を決定するためにブラインド音源分離を使用するステップを有する請求項74に記載の方法。
- 前記1つ以上の聴取ゾーンは、画像キャプチャユニットの視野に対応する聴取ゾーンを含み、これにより、前記マイクロフォンアレイが、前記画像キャプチャユニットの前記視野内で発生した音を検出して、前記画像キャプチャユニットの前記視野の外で発生する音をフィルタすることができる請求項74に記載の方法。
- 前記1つ以上の聴取ゾーンは複数の異なる聴取ゾーンを含む請求項74に記載の方法。
- 実行時に、特定の事前較正された聴取ゾーンを選択する前記ステップは、1つ以上のゾーンについて前記入力信号の減衰の値を決定するステップと、前記減衰が最適値に最も近いセクタを選択するステップと、を有する請求項77に記載の方法。
- 前記複数の事前較正された聴取ゾーンは約18のセクタを含み、各セクタは約20°の角度幅を有し、これにより、前記複数の事前較正されたセクタは、前記マイクロフォンアレイを取り囲む約360°をなす請求項77に記載の方法。
- 実行時に、特定の事前較正された聴取ゾーンを選択する前記ステップは、音源を含む事前較正された聴取ゾーンを選択するステップを有する請求項74に記載の方法。
- 実行時に、特定の事前較正された聴取ゾーンを選択する前記ステップは、複数の聴取ゾーンの初期ゾーンを選択するステップと、
音源が前記初期ゾーン内に存在するか、前記初期セクタの特定の側に存在するかを決定するステップと、
前記音源が前記初期ゾーンに存在しない場合に、前記初期ゾーンの前記特定の側にある異なる聴取ゾーンを選択するステップと、を有し、前記異なる聴取ゾーンは、前記入力信号の減衰が最適値に最も近いという特徴を有する請求項74に記載の方法。 - 音源が前記初期ゾーン内に存在するか、前記初期ゾーンの特定の側に存在するかを決定する前記ステップは、前記入力信号および前記出力信号から、前記入力信号の減衰を計算するステップと、前記減衰を最適値と比較するステップと、を有する請求項81に記載の方法。
- 実行時に、特定の事前較正された聴取ゾーンを選択する前記ステップは、所定の聴取ゾーンについて、力信号の減衰がしきい値を下回るかどうかを決定するステップを有する請求項74に記載の方法。
- 実行時に、特定の事前較正された聴取ゾーンを選択する前記ステップは、音源を含む事前較正された聴取セクタを選択するステップを有し、前記方法は、画像キャプチャユニットを、前記音源を含む前記事前較正された聴取ゾーンの方に機械的に向けるステップを更に有する請求項74に記載の方法。
- 前記1つ以上の事前較正された聴取ゾーンは、複数の異なる事前較正された聴取ゾーンを含み、前記方法は、
前記マイクロフォンアレイによって音を検出するステップと、
前記音の発生源を含む特定の事前較正された聴取ゾーンを識別するステップと、
前記音または前記音の前記発生源を特徴付けるステップと、
前記音の特徴付けに応じて、前記音を強調またはフィルタ除去するステップと、を有する請求項74に記載の方法。 - 前記音の特徴付けに応じて、前記音を強調またはフィルタ除去する前記ステップは、前記音または前記発生源が背景ノイズに関連する場合に、前記音をフィルタ除去するステップを有する請求項85に記載の方法。
- 前記音または前記音の前記発生源を特徴付ける前記ステップは、
前記音に対する周波数分布を決定するステップと、
既知の音または音の発生源に対する1つ以上の音響モデルに対して、前記周波数分布を比較するステップと、を有する請求項85に記載の方法。 - 前記音または前記音の前記発生源を特徴付けるステップは、前記音または前記音の前記発生源が1つ以上の所定の特徴を有するかどうかを決定するために前記音を分析するステップを有する請求項85に記載の方法。
- 前記音が1つ以上の所定の特徴を有すると決定された場合に、電子装置の少なくとも1つの要素を制御することを目的として、少なくとも1つの制御信号を生成するステップを更に有する請求項88に記載の方法。
- 前記電子装置はビデオゲームコントローラであり、前記制御信号は、前記ビデオゲームコントローラに対して、前記音の発生源からの音に応じてゲームコマンドを実行させる請求項89に記載の方法。
- 前記音の特徴付けに応じて、前記音を強調またはフィルタ除去する前記ステップは、
前記音声信号のノイズ妨害を前記音声信号の残りの成分に対して拡大するステップと、
前記音声信号のサンプリングレートを下げるステップと、
検出信号を定義するために、前記サンプリングレートを下げた前記音声信号に偶数次の導関数を適用するステップと、
前記検出信号の統計平均に従って前記音声信号の前記ノイズ妨害を調整するステップと、を有する請求項74に記載の方法。 - 前記電子装置は乳児モニタである請求項74に記載の方法。
- 前記電子装置はジョイスティックコントローラを有するビデオゲームユニットであり、前記方法は、
前記音または前記音の発生源が1つ以上の所定の特徴を有すると決定された場合に、前記ビデオゲームユニットの少なくとも1つの要素を制御することを目的として、少なくとも1つの制御信号を生成するステップと、
前記ジョイスティックコントローラにより1つ以上の追加の制御信号を生成するステップと、を更に有する請求項74に記載の方法。 - 前記ジョイスティックコントローラにより1つ以上の追加の制御信号を生成する前記ステップは、前記ジョイスティックコントローラにある1つ以上の光源により光信号を生成するステップと、画像キャプチャユニットにより前記光信号を受信するステップと、を有する請求項93に記載の方法。
- 光信号を受信する前記ステップは、1つ以上の光源を含む1つ以上の画像をキャプチャするステップと、前記ジョイスティックコントローラの位置または向きを決定するか、前記ジョイスティックコントローラからのテレメトリ信号を復号化するか、この両方を行うために前記1つ以上の画像を分析するステップと、を有する請求項94に記載の方法。
- 前記ジョイスティックコントローラにより1つ以上の追加の制御信号を生成する前記ステップは、前記ジョイスティックコントローラにある慣性センサにより位置および/または向きの信号を生成するステップを有する請求項93に記載の方法。
- 前記位置および/または向きの信号から決定された位置および/または向きのドリフトを補償するステップを更に有する請求項96に記載の方法。
- ドリフトを補償する前記ステップは、初期位置の値を、前記位置および/または向きの信号から決定された計算された現在の位置の値に設定するステップを有する請求項97に記載の方法。
- ドリフトを補償する前記ステップは、画像キャプチャユニットにより、前記ジョイスティックコントローラの画像をキャプチャするステップと、前記ジョイスティックコントローラの位置を決定するために前記画像を分析するステップと、前記ジョイスティックコントローラの前記位置の現在値を、前記画像の分析から決定された前記ジョイスティックコントローラの前記位置に設定するステップと、を有する請求項97に記載の方法。
- 前記慣性センサからの信号内の偽のデータを補償するステップを更に有する請求項97に記載の方法。
- 対象音検出装置であって、
2つ以上のマイクロフォンM0,…,MMを有するマイクロフォンアレイと、
各マイクロフォンに結合されており、前記マイクロフォンによって検出された音に対応する入力信号をフィルタして、フィルタされた出力を生成するように構成された複数のフィルタと、
前記マイクロフォンアレイおよび前記複数のフィルタに結合されたプロセッサと、
前記プロセッサに結合されたメモリと、
1つ以上の事前較正された聴取ゾーンに対応して、前記メモリ内に実装されたフィルタパラメータの1つ以上の組と、を有し、フィルタパラメータの各組は、所定の聴取ゾーン内で発生した音に対応する前記入力信号の一部を検出するように選択されており、前記所定の聴取ゾーンの外で発生する音をフィルタ除去し、
前記メモリは、プロセッサ実行可能命令の組を格納しており、前記命令は実行されると、前記装置に対して実行時に特定の事前較正された聴取ゾーンを選択させ、その際、前記特定の事前較正された聴取ゾーンに対応するフィルタパラメータの組が前記複数のフィルタに適用され、
これにより、前記装置は、前記特定の事前較正された聴取ゾーン内で発生した音を検出して、前記特定の事前較正された聴取ゾーンの外で発生する音をフィルタ除去できるようになる装置。 - 前記1つ以上の事前較正された聴取ゾーンは、複数の異なる事前較正された聴取ゾーンを含む請求項101に記載の装置。
- 前記複数の事前較正された聴取ゾーンは約18のセクタを含み、各セクタは約20°の角度幅を有し、これにより、前記複数の事前較正されたセクタは、前記マイクロフォンアレイを取り囲む約360°をなす請求項101に記載の装置。
- 前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、音の発生源を含む事前較正された聴取ゾーンを選択させる1つ以上の命令を有する請求項101に記載の装置。
- 前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、音源が前記初期聴取ゾーン内に存在するか、前記初期聴取ゾーンの特定の側に存在するかを決定させ、前記音源が前記聴取初期ゾーンに存在しない場合に、前記初期聴取ゾーンの前記特定の側にある異なる聴取ゾーンを選択させる1つ以上の命令を有し、前記異なる聴取ゾーンは、前記入力信号の減衰が最適値に最も近いという特徴を有する請求項101に記載の装置。
- 実行されると、前記装置に対して、音源が前記初期聴取ゾーン内に存在するか、前記初期聴取ゾーンの特定の側に存在するかを決定させる前記1つ以上の命令は、実行されると、前記入力信号および前記出力信号から、前記入力信号の減衰を計算させ、前記減衰を最適値と比較させる1つ以上の命令を有する請求項105に記載の装置。
- 前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、1つ以上のセクタについて前記入力信号の減衰の値を決定させ、前記減衰が最適値に最も近い聴取ゾーンを選択させる1つ以上の命令を有する請求項101に記載の装置。
- 前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、所定の聴取ゾーンについて、入力信号の減衰がしきい値を下回っているかどうかを決定させる1つ以上の命令を有する請求項101に記載の装置。
- 前記プロセッサに結合された画像キャプチャユニットを更に有し、前記1つ以上の聴取セクタは、前記画像キャプチャユニットの視野に対応する聴取ゾーンを有する請求項101に記載の装置。
- 前記プロセッサに結合された画像キャプチャユニットと、前記プロセッサに結合された1つ以上のポインティングアクチュエータと、を更に有し、前記ポインティングアクチュエータは、前記プロセッサによって生成された信号に応えて、前記画像キャプチャユニットを視覚方向に向けるように適合されており、前記メモリは、実行されると、前記アクチュエータに対して、前記画像キャプチャユニットを前記特定の事前較正された聴取ゾーンの方向に向けさせるプロセッサ実行可能命令の組を格納している請求項101に記載の装置。
- 前記1つ以上の事前較正された聴取ゾーンは、複数の異なる聴取ゾーンを含み、前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、
前記マイクロフォンアレイによって音を検出させ、
前記音の発生源を含む特定の事前較正された聴取ゾーンを識別させ、
前記音または前記音の前記発生源を特徴付けさせ、
前記音の特徴付けに応じて、前記音を強調またはフィルタさせる1つ以上の命令を有する請求項101に記載の装置。 - 前記命令の組は、実行されると、前記装置に対して、前記音または前記発生源が関連する背景ノイズである場合に、前記音をフィルタ除去させる1つ以上の命令を有する請求項111に記載の装置。
- 前記装置に対して、前記音または前記音の前記発生源を特徴付けさせる前記命令は、実行されると、前記装置に対して、
前記音に対する周波数分布を決定させ、
既知の音または音の発生源に対する1つ以上の音響モデルに対して、前記周波数分布を比較させる命令を有する請求項111に記載の装置。 - 前記1つ以上の音響モデルは前記メモリに記憶されている請求項113に記載の装置。
- 前記装置に対して、前記音または前記音の前記発生源を特徴付けさせる前記命令は、実行されると、前記装置に対して、前記音が1つ以上の所定の特徴を有するかどうかを決定するために前記音を分析させる命令を有する請求項111に記載の装置。
- 前記プロセッサ実行可能命令の組は、実行されると、前記装置に対して、前記音が1つ以上の所定の特徴を有すると決定された場合に、電子装置の少なくとも1つの要素を制御することを目的として、少なくとも1つの制御信号を生成させる1つ以上の命令を更に有する請求項115に記載の装置。
- 前記装置はビデオゲームコントローラであり、前記制御信号は、前記ビデオゲームコントローラに対して、前記音の発生源からの音に応じてゲームコマンドを実行させる請求項116に記載の装置。
- 前記装置は乳児モニタである請求項101に記載の装置。
- 前記プロセッサに結合されたジョイスティックコントローラを更に有する請求項101に記載の装置。
- 前記ジョイスティックコントローラは、前記プロセッサと結合された慣性センサを有する請求項119に記載の装置。
- 前記慣性センサは加速時計またはジャイロスコープを有する請求項120に記載の装置。
- 前記プロセッサ実行可能命令は、実行されると、前記慣性センサからの位置および/または向きの信号から決定された位置および/または向きのドリフトを補償させる1つ以上の命令を有する請求項120に記載の装置。
- 移動を補償することは、初期位置の値を、前記位置および/または向きの信号から決定された計算された現在の位置の値に設定することを有する請求項122に記載の装置。
- 移動を補償することは、画像キャプチャユニットにより、前記ジョイスティックコントローラの画像をキャプチャすることと、前記ジョイスティックコントローラの位置を決定するために前記画像を分析することと、前記ジョイスティックコントローラの前記位置の現在値を、前記画像の分析から決定された前記ジョイスティックコントローラの前記位置に設定することと、を有する請求項122に記載の装置。
- 前記ジョイスティックコントローラは1つ以上の光源を有し、前記装置は画像キャプチャユニットを更に有し、前記プロセッサ実行可能命令は、実行されると、前記画像キャプチャユニットに対して、画像キャプチャ装置の前の視野をモニタさせ、前記視野内で前記光源を識別させ、前記光源から発せられる光の変化を検出させ、前記変化の検出に応えて、前記プロセッサへの入力コマンドを発生させる1つ以上の命令を有する請求項119に記載の装置。
- 前記ジョイスティックコントローラは1つ以上の光源を有し、前記装置は画像キャプチャユニットを更に有し、前記プロセッサ実行可能命令は、実行されると、前記画像キャプチャユニットに対して、前記光源から発せられる光の変化を検出させ、前記ジョイスティックコントローラの位置または向きを決定するか、前記ジョイスティックコントローラからのテレメトリ信号を復号化するか、この両方を行うために前記1つ以上の画像を分析させる1つ以上の命令を有する請求項119に記載の装置。
- 前記光源は、線形のアレイに構成された2つ以上の光源を有する請求項126に記載の装置。
- 前記光源は、線形のアレイに構成された2つ以上の光源を有する請求項126に記載の装置。
- 前記光源は、前記画像キャプチャユニットが前記光源を見やすいように、前記ジョイスティックコントローラの2つ以上の異なる側に配置されている請求項126に記載の装置。
- 前記ジョイスティックコントローラに取り付けられた慣性センサを更に有し、前記慣性センサからの信号、および前記1つ以上の光源をトラッキングすることにより前記画像キャプチャユニットから生成された信号が、ゲームシステムへの入力として使用される請求項126に記載の装置。
- 前記ジョイスティックコントローラに取り付けられた慣性センサを更に有し、前記慣性センサからの信号は、トラッキング情報入力の一部となり、前記1つ以上の光源をトラッキングすることにより前記画像キャプチャユニットから生成された信号は、前記トラッキング情報入力の別の部分となる請求項126に記載の装置。
- 前記プロセッサ実行可能命令は、実行されると、前記慣性センサからの信号内の偽のデータを補償させる1つ以上の命令を有する請求項120に記載の装置。
- 2つ以上のマイクロフォンM0,…,MMを有するマイクロフォンアレイを使用する標的音検出のための方法であって、各マイクロフォンは、複数のフィルタと結合されており、前記フィルタは前記マイクロフォンによって検出された音に対応する入力信号をフィルタして、フィルタされた出力を生成するように構成されている方法を実行する計算機実行可能命令が実装されている計算機可読媒体であって、前記方法は、
1つ以上の対応する事前較正された聴取ゾーンを決定するために、前記複数のフィルタに対して、所定の聴取ゾーン内で発生した音に対応する前記入力信号の一部を検出して、前記所定の聴取セクタの外で発生する音をフィルタ除去するように選択されたフィルタパラメータの1つ以上の組を事前較正するステップと、
特定の事前較正された聴取ゾーンに対応するフィルタ係数の組を前記複数のフィルタに適用することによって、実行時に、前記特定の事前較正された聴取ゾーンを選択するステップと、を有し、これにより、前記マイクロフォンアレイが、前記特定の聴取ゾーン内で発生した音を検出して、前記特定の聴取ゾーンの外で発生する音をフィルタ除去することができる計算機可読媒体。 - コンピュータプログラムとの対話機能中に音をキャプチャする装置であって、
音声キャプチャユニットを有し、前記音声キャプチャユニットは、1つ以上の音源を識別するように構成されており、前記音声キャプチャユニットは、聴取ゾーンを決定するために分析されうるデータを生成し、前記聴取ゾーンにおいて音が処理されて、前記焦点ゾーンの外の音がほぼ除去され、前記焦点ゾーンについてキャプチャされ、処理された音が、前記コンピュータプログラムとの対話機能に使用される装置。 - 前記音声キャプチャユニットはマイクロフォンのアレイを有し、前記マイクロフォンのアレイは、前記1つ以上の音源からの音を受け取るように構成されており、前記1つ以上の音源の前記音は、前記マイクロフォンのそれぞれへの音経路を定義している請求項134に記載の装置。
- 前記音経路は、画像および音をキャプチャするために、前記装置に対する前記1つ以上の音源のそれぞれの方向の計算を可能にする特定の遅延を含む請求項135に記載の装置。
- 前記アレイ内のマイクロフォン同士の間隔は、約0.5cm〜約2cmである請求項135に記載の装置。
- 音を求めてマイクロフォンアレイによってモニタすべき聴取ゾーンを検出するように構成された領域検出モジュールと、
前記聴取ゾーンからの音を記憶するように構成された記憶モジュールと、
前記聴取ゾーンを調整するように構成された領域調整モジュールと、
前記聴取ゾーンから発生する音を検出するように構成された音検出モジュールと、を更に有する請求項134に記載の装置。 - 音を求めてモニタすべき聴取ゾーンを検出するように構成された領域検出モジュールと、
視覚装置によってモニタされる視野を検出するように構成された視野検出モジュールと、
前記視野に基づいて前記聴取ゾーンを調整するように構成された領域調整モジュールと、
前記聴取ゾーンから発せられた音を検出するように構成された音検出モジュールと、を更に有する請求項134に記載の装置。 - 音を求めてモニタすべき初期聴取ゾーンを検出するように構成された領域検出モジュールと、
前記初期聴取ゾーンから発せられた音を検出し、前記音の位置を検出するように構成された音検出モジュールと、
前記音の前記位置に基づいて前記初期聴取ゾーンを調整し、前記音の前記位置を含む調整された聴取ゾーンを形成するように構成された領域調整モジュールと、を更に有する請求項134に記載の装置。 - 前記音声キャプチャユニットは、2つ以上のマイクロフォンを有するマイクロフォンアレイと、
各マイクロフォンに結合されており、前記マイクロフォンによって検出された音に対応する入力信号をフィルタして、フィルタされた出力を生成するように構成された複数のフィルタと、を有する請求項134に記載の装置。 - 前記マイクロフォンアレイおよび前記複数のフィルタに結合されたプロセッサと、
前記プロセッサに結合されたメモリと、
1つ以上の事前較正された聴取ゾーンに対応して、前記メモリ内に実装されたフィルタパラメータの1つ以上の組と、を更に有し、フィルタパラメータの各組は、所定の聴取ゾーン内で発生した音に対応する前記入力信号の一部を検出するように選択されており、前記所定の聴取ゾーンの外で発生する音をフィルタ除去し、
前記メモリは、プロセッサ実行可能命令の組を格納しており、前記命令は実行されると、前記装置に対して実行時に特定の事前較正された聴取ゾーンを選択させ、その際、前記特定の事前較正された聴取ゾーンに対応するフィルタパラメータの組が前記複数のフィルタに適用され、
これにより、前記装置は、前記特定の事前較正された聴取ゾーン内で発生した音を検出して、前記特定の事前較正された聴取ゾーンの外で発生する音をフィルタ除去できるようになる請求項141に記載の装置。 - 前記コンピュータプログラムはゲームプログラムである請求項134に記載の装置。
- コンピュータプログラムとの対話機能中の選択的な音源聴取のための方法であって、
2つ以上の音源キャプチャマイクロフォンにおいて1つ以上の音源からの入力を受信するステップと、
前記1つ以上の音源のそれぞれの前記受信された入力について方向を識別するステップと、
聴取ゾーンの識別された方向にない音源をフィルタ除去するステップと、を有し、前記聴取ゾーンは前記コンピュータプログラムとの前記対話機能のために前記音源を提供している方法。 - 方向を識別して、音源をフィルタ除去する前記ステップは、
初期聴取ゾーンを検出するステップと、
マイクロフォンアレイによって、キャプチャされた音をキャプチャするステップと、
前記キャプチャされた音および前記初期聴取ゾーンに基づいて、前記初期聴取ゾーン内の音を含む初期音を識別するステップと、
前記初期聴取ゾーンを調整して、前記調整された聴取ゾーンを形成するステップと、
前記キャプチャされた音および前記調整された聴取ゾーンに基づいて、前記調整された聴取ゾーン内の音を含む調整された音を識別するステップと、を有する請求項144に記載の方法。 - 前記2つ以上のマイクロフォンによって受信された前記入力が1つ以上の所定の特徴を有するかどうかを決定するために、前記入力を分析するステップを更に有する請求項144に記載の方法。
- 前記音が1つ以上の所定の特徴を有すると決定された場合に、前記コンピュータプログラムの少なくとも1つの要素を制御するように構成された少なくとも1つの制御信号を生成するステップを更に有する請求項146に記載の方法。
- 方向を識別して、音源をフィルタ除去する前記ステップは、
音を求めてモニタすべき初期領域を表す初期聴取ゾーンを検出するステップと、
視覚装置の視野を検出するステップと、
前記視覚装置の前記視野を前記初期聴取ゾーンの前記初期領域と比較するステップと、
前記初期聴取ゾーンを調整して、前記視野と前記初期領域との比較に基づいて調整された領域を含む前記調整された聴取ゾーンを形成するステップと、を有する請求項144に記載の方法。 - 方向を識別して、音源をフィルタ除去する前記ステップは、
視覚装置からの画像を検出するステップと、
前記画像と関連する領域から発せられた音を検出するように構成された聴取ゾーンを形成するステップと、
前記聴取ゾーンから発せられた音をキャプチャするステップと、
前記画像に基づいて前記聴取ゾーンを動的に調整するステップと、を有する請求項144に記載の方法。 - 前記聴取ゾーンは、フィルタ係数の組によって表現される請求項144に記載の方法。
- 前記フィルタ係数の組は事前較正された聴取ゾーンに対応している請求項150に記載の方法。
- ジョイスティックコントローラを有するビデオゲームユニットにおいて動作を制御するための方法であって、
前記ジョイスティックコントローラにより慣性信号および/または光信号を生成するステップと、
前記慣性信号および/または光信号を使用して前記ジョイスティックコントローラの位置および/または向きをトラッキングするステップと、を有する方法。 - 前記慣性信号および/または光信号を生成する前記ステップは、前記ジョイスティックコントローラに取り付けられた加速度計またはジャイロスコープにより慣性信号を生成するステップを有する請求項152に記載の方法。
- 前記慣性信号および/または光信号を生成する前記ステップは、前記ジョイスティックコントローラに取り付けられた1つ以上の光源により光信号を生成するステップを有する請求項152に記載の方法。
- 前記ジョイスティックコントローラの位置および/または向きをトラッキングする前記ステップは、前記光信号を含む1つ以上の画像をキャプチャするステップと、前記1つ以上の画像から前記光源の移動をトラッキングするステップと、を有する請求項154に記載の方法。
- 前記慣性信号および/または光信号を生成する前記ステップは、前記ジョイスティックコントローラに取り付けられた加速度計またはジャイロスコープにより慣性信号を生成するステップと、前記ジョイスティックコントローラに取り付けられた1つ以上の光源により光信号を生成するステップと、を有する請求項152に記載の方法。
- 前記慣性信号と前記光信号の両方が前記ゲームユニットへの入力として使用される請求項156に記載の方法。
- 前記慣性信号は、前記ゲームユニットへのトラッキング情報入力の一部となり、前記光信号は前記トラッキング情報入力の別の部分となる請求項157に記載の方法。
- 前記慣性信号内の偽のデータを補償するステップを更に有する請求項152に記載の方法。
- 前記光信号からテレメトリ信号を符号化し、前記光信号から前記テレメトリ信号を復号化して、前記復号化されたテレメトリ信号に応じてゲームコマンドを実行するステップを更に有する請求項152に記載の方法。
- ビデオゲームにおける動作を制御するための装置であって、
プロセッサと、
前記プロセッサに結合されたメモリと、
前記プロセッサに結合され、慣性センサおよび光源を有するジョイスティックコントローラと、
前記メモリに記憶された1つ以上のプロセッサ実行可能命令と、を有し、前記命令は、前記プロセッサによって実行されると、前記装置に対して、前記慣性センサからの慣性信号および/または前記光源からの光信号を使用して前記ジョイスティックコントローラの位置および/または向きをトラッキングさせる装置。 - 前記慣性センサは、前記ジョイスティックコントローラに取り付けられた加速度計またはジャイロスコープである請求項65に記載の装置。
- 前記光源は、前記ジョイスティックコントローラに取り付けられた1つ以上の発光ダイオードを有する請求項65に記載の装置。
- 前記プロセッサに結合された画像キャプチャユニットを更に有し、前記1つ以上のプロセッサ実行可能命令は、実行されると、前記画像キャプチャユニットに対し、前記光信号を含む1つ以上の画像をキャプチャさせる1つ以上の命令と、実行されると、前記1つ以上の画像からの前記光源の移動をトラッキングさせる1つ以上の命令を有する請求項67に記載の装置。
- 前記慣性センサは、前記ジョイスティックコントローラに取り付けられた加速度計であり、光源は、前記ジョイスティックコントローラに取り付けられた1つ以上の発光ダイオードを有する請求項65に記載の装置。
- 前記加速度計からの慣性信号と前記発光ダイオードからの光信号の両方が、前記ビデオゲームユニットへの入力として使用される請求項69に記載の装置。
- 前記慣性信号は、前記ゲームユニットへのトラッキング情報入力の一部となり、前記光信号は前記トラッキング情報入力の別の部分となる請求項70に記載の装置。
- 前記1つ以上のプロセッサ実行可能命令は、実行されると、前記慣性信号内の偽のデータを補償させる1つ以上の命令を有する請求項71に記載の装置。
- ジョイスティックコントローラを有するビデオゲームユニットにおいて動作を制御するための方法であって、
前記ジョイスティックコントローラに取り付けられた光源のアレイにより1つ以上の光信号を生成するステップと、
前記ジョイスティックコントローラの位置および/または向きをトラッキングするステップと、
前記1つ以上の光信号に1つ以上のテレメトリ信号を符号化するステップと、
前記ジョイスティックコントローラの前記位置および/または向きに応えて、および/または前記1つ以上の光信号に符号化されたテレメトリ信号に応えて、1つ以上のゲーム命令を実行するステップと、のうちの少なくとも1つを有する方法。 - 前記光源は、線形のアレイに構成された2つ以上の光源を有する請求項169に記載の方法。
- 前記光源は、矩形または弓状に構成された複数の光源を有する請求項169に記載の方法。
- 前記光源は、前記画像キャプチャユニットが前記光源を見やすいように、前記ジョイスティックコントローラの2つ以上の異なる側に配置されている請求項169に記載の方法。
- ビデオゲームにおける動作を制御するための装置であって、
プロセッサと、
前記プロセッサに結合されたメモリと、
前記プロセッサに結合され、光源のアレイが取り付けられたジョイスティックコントローラと、
前記メモリに記憶された1つ以上のプロセッサ実行可能命令と、を有し、前記命令は、前記プロセッサによって実行されると、前記装置に対して、前記光源のアレイにより1つ以上の光信号を生成させ、
前記ジョイスティックコントローラの位置および/または向きをトラッキングさせ、
前記1つ以上の光信号に1つ以上のテレメトリ信号を符号化させ、
前記ジョイスティックコントローラの前記位置および/または向きに応えて、および/または前記1つ以上の光信号に符号化されたテレメトリ信号に応えて、1つ以上のゲーム命令を実行させる、のうちの少なくとも1つを実行させる装置。 - 前記光源のアレイは、線形のアレイに構成された2つ以上の光源を有する請求項173に記載の装置。
- 前記光源のアレイは、矩形または弓状に構成された複数の光源を有する請求項173に記載の装置。
- 前記光源は、前記画像キャプチャユニットが前記光源を見やすいように、前記ジョイスティックコントローラの2つ以上の異なる側に配置されている請求項173に記載の装置。
- ビデオゲームユニット用のコントローラであって、
前記コントローラに取り付けられ、前記ビデオゲームユニットに光信号を提供して、画像キャプチャユニットによる前記光源のトラッキングを容易にするように、および/または前記光信号によって前記ゲームユニットに入力チャネルを提供するように適合された1つ以上の光源であって、の光源と、
前記コントローラに取り付けられ、前記ジョイスティックコントローラの位置または向きに関する信号を前記ゲームユニットに提供するように構成された慣性センサと、
前記コントローラに取り付けられ、前記コントローラをトラッキングするためおよび/または前記音声信号によって前記ビデオゲームユニットに入力チャネルを提供するために、前記ゲームユニットへの音声信号を生成するように構成されたスピーカと、を有するコントローラ。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US67841305P | 2005-05-05 | 2005-05-05 | |
US60/678,413 | 2005-05-05 | ||
US71814505P | 2005-09-15 | 2005-09-15 | |
US60/718,145 | 2005-09-15 | ||
PCT/US2006/017483 WO2006121896A2 (en) | 2005-05-05 | 2006-05-04 | Microphone array based selective sound source listening and video game control |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008542798A true JP2008542798A (ja) | 2008-11-27 |
JP4886770B2 JP4886770B2 (ja) | 2012-02-29 |
Family
ID=36942221
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008510282A Active JP4886770B2 (ja) | 2005-05-05 | 2006-05-04 | コンピュータ対話型処理と共に使用する選択的音源聴音 |
Country Status (5)
Country | Link |
---|---|
EP (2) | EP2352149B1 (ja) |
JP (1) | JP4886770B2 (ja) |
AT (1) | ATE491503T1 (ja) |
DE (1) | DE602006018897D1 (ja) |
WO (1) | WO2006121896A2 (ja) |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007183637A (ja) * | 2006-01-09 | 2007-07-19 | Honda Research Inst Europe Gmbh | 反響のある環境での音源定位に適当な測定ウィンドウの決定 |
JP2011039265A (ja) * | 2009-08-11 | 2011-02-24 | Nippon Telegr & Teleph Corp <Ntt> | 目的信号強調装置とその方法と、プログラム |
JP2012507068A (ja) * | 2008-10-27 | 2012-03-22 | 株式会社ソニー・コンピュータエンタテインメント | 視覚情報を通信するためのコントロールデバイス |
JP2013513306A (ja) * | 2009-12-02 | 2013-04-18 | オーディエンス,インコーポレイテッド | オーディオズーム |
JP2013078118A (ja) * | 2011-09-15 | 2013-04-25 | Jvc Kenwood Corp | ノイズ低減装置、音声入力装置、無線通信装置、およびノイズ低減方法 |
US9536540B2 (en) | 2013-07-19 | 2017-01-03 | Knowles Electronics, Llc | Speech signal separation and synthesis based on auditory scene analysis and speech modeling |
US9558755B1 (en) | 2010-05-20 | 2017-01-31 | Knowles Electronics, Llc | Noise suppression assisted automatic speech recognition |
US9668048B2 (en) | 2015-01-30 | 2017-05-30 | Knowles Electronics, Llc | Contextual switching of microphones |
US9699554B1 (en) | 2010-04-21 | 2017-07-04 | Knowles Electronics, Llc | Adaptive signal equalization |
JP2017175474A (ja) * | 2016-03-24 | 2017-09-28 | パナソニックIpマネジメント株式会社 | モニタリングシステム及びモニタリング方法 |
US9820042B1 (en) | 2016-05-02 | 2017-11-14 | Knowles Electronics, Llc | Stereo separation and directional suppression with omni-directional microphones |
US9838784B2 (en) | 2009-12-02 | 2017-12-05 | Knowles Electronics, Llc | Directional audio capture |
US9978388B2 (en) | 2014-09-12 | 2018-05-22 | Knowles Electronics, Llc | Systems and methods for restoration of speech components |
JP2019053180A (ja) * | 2017-09-14 | 2019-04-04 | 株式会社東芝 | 音響処理装置、音声認識装置、音響処理方法、音声認識方法、音響処理プログラム及び音声認識プログラム |
JP2020205592A (ja) * | 2016-09-23 | 2020-12-24 | アップル インコーポレイテッドApple Inc. | 音声制御電子機器 |
Families Citing this family (47)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8947347B2 (en) | 2003-08-27 | 2015-02-03 | Sony Computer Entertainment Inc. | Controlling actions in a video game unit |
US8797260B2 (en) | 2002-07-27 | 2014-08-05 | Sony Computer Entertainment Inc. | Inertially trackable hand-held controller |
US9393487B2 (en) | 2002-07-27 | 2016-07-19 | Sony Interactive Entertainment Inc. | Method for mapping movements of a hand-held controller to game commands |
US8233642B2 (en) | 2003-08-27 | 2012-07-31 | Sony Computer Entertainment Inc. | Methods and apparatuses for capturing an audio signal based on a location of the signal |
US10086282B2 (en) | 2002-07-27 | 2018-10-02 | Sony Interactive Entertainment Inc. | Tracking device for use in obtaining information for controlling game program execution |
US8139793B2 (en) | 2003-08-27 | 2012-03-20 | Sony Computer Entertainment Inc. | Methods and apparatus for capturing audio signals based on a visual image |
US8570378B2 (en) | 2002-07-27 | 2013-10-29 | Sony Computer Entertainment Inc. | Method and apparatus for tracking three-dimensional movements of an object using a depth sensing camera |
US7850526B2 (en) | 2002-07-27 | 2010-12-14 | Sony Computer Entertainment America Inc. | System for tracking user manipulations within an environment |
US8313380B2 (en) | 2002-07-27 | 2012-11-20 | Sony Computer Entertainment America Llc | Scheme for translating movements of a hand-held controller into inputs for a system |
US9174119B2 (en) | 2002-07-27 | 2015-11-03 | Sony Computer Entertainement America, LLC | Controller for providing inputs to control execution of a program when inputs are combined |
US8160269B2 (en) | 2003-08-27 | 2012-04-17 | Sony Computer Entertainment Inc. | Methods and apparatuses for adjusting a listening area for capturing sounds |
US8781151B2 (en) | 2006-09-28 | 2014-07-15 | Sony Computer Entertainment Inc. | Object detection using video input combined with tilt angle information |
USRE48417E1 (en) | 2006-09-28 | 2021-02-02 | Sony Interactive Entertainment Inc. | Object direction using video input combined with tilt angle information |
US8310656B2 (en) | 2006-09-28 | 2012-11-13 | Sony Computer Entertainment America Llc | Mapping movements of a hand-held controller to the two-dimensional image plane of a display screen |
DE602007004185D1 (de) * | 2007-02-02 | 2010-02-25 | Harman Becker Automotive Sys | System und Verfahren zur Sprachsteuerung |
JP2010533006A (ja) * | 2007-03-01 | 2010-10-21 | ソニー コンピュータ エンタテインメント アメリカ リミテッド ライアビリテイ カンパニー | 仮想世界とコミュニケーションを取るためのシステムおよび方法 |
US7974841B2 (en) * | 2008-02-27 | 2011-07-05 | Sony Ericsson Mobile Communications Ab | Electronic devices and methods that adapt filtering of a microphone signal responsive to recognition of a targeted speaker's voice |
JP6377312B2 (ja) * | 2010-11-10 | 2018-08-22 | 株式会社ユニバーサルエンターテインメント | ゲーミングマシン |
US9563265B2 (en) * | 2012-01-12 | 2017-02-07 | Qualcomm Incorporated | Augmented reality with sound and geometric analysis |
US10204638B2 (en) | 2013-03-12 | 2019-02-12 | Aaware, Inc. | Integrated sensor-array processor |
US10049685B2 (en) | 2013-03-12 | 2018-08-14 | Aaware, Inc. | Integrated sensor-array processor |
US9443529B2 (en) | 2013-03-12 | 2016-09-13 | Aawtend, Inc. | Integrated sensor-array processor |
KR20160122835A (ko) | 2014-03-18 | 2016-10-24 | 로베르트 보쉬 게엠베하 | 적응형 음향 강도 분석장치 |
GB2533373B (en) | 2014-12-18 | 2018-07-04 | Canon Kk | Video-based sound source separation |
US9554207B2 (en) | 2015-04-30 | 2017-01-24 | Shure Acquisition Holdings, Inc. | Offset cartridge microphones |
US9565493B2 (en) | 2015-04-30 | 2017-02-07 | Shure Acquisition Holdings, Inc. | Array microphone system and method of assembling the same |
US9530426B1 (en) | 2015-06-24 | 2016-12-27 | Microsoft Technology Licensing, Llc | Filtering sounds for conferencing applications |
WO2017163688A1 (en) * | 2016-03-24 | 2017-09-28 | Panasonic Intellectual Property Management Co., Ltd. | Monitoring system and monitoring method |
US10074012B2 (en) | 2016-06-17 | 2018-09-11 | Dolby Laboratories Licensing Corporation | Sound and video object tracking |
US10367948B2 (en) | 2017-01-13 | 2019-07-30 | Shure Acquisition Holdings, Inc. | Post-mixing acoustic echo cancellation systems and methods |
US11215709B2 (en) | 2017-04-21 | 2022-01-04 | Hewlett-Packard Development Company, L.P. | Audio data gather |
WO2019231632A1 (en) | 2018-06-01 | 2019-12-05 | Shure Acquisition Holdings, Inc. | Pattern-forming microphone array |
US11297423B2 (en) | 2018-06-15 | 2022-04-05 | Shure Acquisition Holdings, Inc. | Endfire linear array microphone |
EP3854108A1 (en) | 2018-09-20 | 2021-07-28 | Shure Acquisition Holdings, Inc. | Adjustable lobe shape for array microphones |
US11558693B2 (en) | 2019-03-21 | 2023-01-17 | Shure Acquisition Holdings, Inc. | Auto focus, auto focus within regions, and auto placement of beamformed microphone lobes with inhibition and voice activity detection functionality |
JP2022526761A (ja) | 2019-03-21 | 2022-05-26 | シュアー アクイジッション ホールディングス インコーポレイテッド | 阻止機能を伴うビーム形成マイクロフォンローブの自動集束、領域内自動集束、および自動配置 |
CN113841419A (zh) | 2019-03-21 | 2021-12-24 | 舒尔获得控股公司 | 天花板阵列麦克风的外壳及相关联设计特征 |
CN114051738A (zh) | 2019-05-23 | 2022-02-15 | 舒尔获得控股公司 | 可操纵扬声器阵列、系统及其方法 |
EP3977449A1 (en) | 2019-05-31 | 2022-04-06 | Shure Acquisition Holdings, Inc. | Low latency automixer integrated with voice and noise activity detection |
WO2021021075A1 (en) | 2019-07-26 | 2021-02-04 | Hewlett-Packard Development Company, L.P. | Noise filtrations based on radar |
JP2022545113A (ja) | 2019-08-23 | 2022-10-25 | シュアー アクイジッション ホールディングス インコーポレイテッド | 指向性が改善された一次元アレイマイクロホン |
KR20190107623A (ko) * | 2019-09-02 | 2019-09-20 | 엘지전자 주식회사 | 사이니지 장치 및 이의 동작 방법 |
US11552611B2 (en) | 2020-02-07 | 2023-01-10 | Shure Acquisition Holdings, Inc. | System and method for automatic adjustment of reference gain |
CN111580049B (zh) * | 2020-05-20 | 2023-07-14 | 陕西金蝌蚪智能科技有限公司 | 动态目标声源跟踪监测方法及终端设备 |
WO2021243368A2 (en) | 2020-05-29 | 2021-12-02 | Shure Acquisition Holdings, Inc. | Transducer steering and configuration systems and methods using a local positioning system |
WO2022165007A1 (en) | 2021-01-28 | 2022-08-04 | Shure Acquisition Holdings, Inc. | Hybrid audio beamforming system |
CN115022716A (zh) * | 2022-05-09 | 2022-09-06 | 海信视像科技股份有限公司 | 显示设备、声场调整方法、存储介质和程序产品 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002007057A (ja) * | 2000-06-23 | 2002-01-11 | Shinsedai Kk | プロセサ用入力装置 |
JP2002091692A (ja) * | 2000-09-12 | 2002-03-29 | Seiko Instruments Inc | ポインティングシステム |
JP2004192306A (ja) * | 2002-12-11 | 2004-07-08 | Nippon Telegr & Teleph Corp <Ntt> | 表示位置変更装置、表示位置変更方法、表示位置変更プログラム及びそのプログラムを記録した記録媒体 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5335011A (en) * | 1993-01-12 | 1994-08-02 | Bell Communications Research, Inc. | Sound localization system for teleconferencing using self-steering microphone arrays |
US5473701A (en) * | 1993-11-05 | 1995-12-05 | At&T Corp. | Adaptive microphone array |
DE19540795C2 (de) * | 1995-11-02 | 2003-11-20 | Deutsche Telekom Ag | Verfahren zur Sprecherlokalisierung mit Hilfe eines Mikrofonarrays |
US5892501A (en) * | 1996-01-17 | 1999-04-06 | Lg Electronics Inc, | Three dimensional wireless pointing device |
US6144367A (en) * | 1997-03-26 | 2000-11-07 | International Business Machines Corporation | Method and system for simultaneous operation of multiple handheld control devices in a data processing system |
US6173059B1 (en) * | 1998-04-24 | 2001-01-09 | Gentner Communications Corporation | Teleconferencing system with visual feedback |
JP3841132B2 (ja) * | 1998-06-01 | 2006-11-01 | 株式会社ソニー・コンピュータエンタテインメント | 入力位置検出装置及びエンタテインメントシステム |
US6417836B1 (en) * | 1999-08-02 | 2002-07-09 | Lucent Technologies Inc. | Computer input device having six degrees of freedom for controlling movement of a three-dimensional object |
EP1184676B1 (en) * | 2000-09-02 | 2004-05-06 | Nokia Corporation | System and method for processing a signal being emitted from a target signal source into a noisy environment |
KR100846761B1 (ko) * | 2001-09-11 | 2008-07-16 | 삼성전자주식회사 | 포인터 표시방법, 그 포인팅 장치, 및 그 호스트 장치 |
US6990639B2 (en) * | 2002-02-07 | 2006-01-24 | Microsoft Corporation | System and process for controlling electronic components in a ubiquitous computing environment using multimodal integration |
US20030160862A1 (en) * | 2002-02-27 | 2003-08-28 | Charlier Michael L. | Apparatus having cooperating wide-angle digital camera system and microphone array |
JP4195267B2 (ja) * | 2002-03-14 | 2008-12-10 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 音声認識装置、その音声認識方法及びプログラム |
US7613310B2 (en) * | 2003-08-27 | 2009-11-03 | Sony Computer Entertainment Inc. | Audio input system |
US7970147B2 (en) | 2004-04-07 | 2011-06-28 | Sony Computer Entertainment Inc. | Video game controller with noise canceling logic |
US6917688B2 (en) * | 2002-09-11 | 2005-07-12 | Nanyang Technological University | Adaptive noise cancelling microphone system |
EP1411461A1 (en) * | 2002-10-14 | 2004-04-21 | STMicroelectronics S.r.l. | User controlled device for sending control signals to an electric appliance, in particular user controlled pointing device such as mouse or joystick, with 3D-motion detection |
US7519186B2 (en) * | 2003-04-25 | 2009-04-14 | Microsoft Corporation | Noise reduction systems and methods for voice applications |
ATE339757T1 (de) * | 2003-06-17 | 2006-10-15 | Sony Ericsson Mobile Comm Ab | Verfahren und vorrichtung zur sprachaktivitätsdetektion |
-
2006
- 2006-05-04 AT AT06752342T patent/ATE491503T1/de not_active IP Right Cessation
- 2006-05-04 WO PCT/US2006/017483 patent/WO2006121896A2/en active Application Filing
- 2006-05-04 EP EP10012183.9A patent/EP2352149B1/en active Active
- 2006-05-04 JP JP2008510282A patent/JP4886770B2/ja active Active
- 2006-05-04 EP EP06752342A patent/EP1878013B1/en active Active
- 2006-05-04 DE DE602006018897T patent/DE602006018897D1/de active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002007057A (ja) * | 2000-06-23 | 2002-01-11 | Shinsedai Kk | プロセサ用入力装置 |
JP2002091692A (ja) * | 2000-09-12 | 2002-03-29 | Seiko Instruments Inc | ポインティングシステム |
JP2004192306A (ja) * | 2002-12-11 | 2004-07-08 | Nippon Telegr & Teleph Corp <Ntt> | 表示位置変更装置、表示位置変更方法、表示位置変更プログラム及びそのプログラムを記録した記録媒体 |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007183637A (ja) * | 2006-01-09 | 2007-07-19 | Honda Research Inst Europe Gmbh | 反響のある環境での音源定位に適当な測定ウィンドウの決定 |
JP4662912B2 (ja) * | 2006-01-09 | 2011-03-30 | ホンダ リサーチ インスティテュート ヨーロッパ ゲーエムベーハー | 反響のある環境での音源定位に適当な測定ウィンドウの決定 |
JP2012507068A (ja) * | 2008-10-27 | 2012-03-22 | 株式会社ソニー・コンピュータエンタテインメント | 視覚情報を通信するためのコントロールデバイス |
JP2011039265A (ja) * | 2009-08-11 | 2011-02-24 | Nippon Telegr & Teleph Corp <Ntt> | 目的信号強調装置とその方法と、プログラム |
US9838784B2 (en) | 2009-12-02 | 2017-12-05 | Knowles Electronics, Llc | Directional audio capture |
JP2013513306A (ja) * | 2009-12-02 | 2013-04-18 | オーディエンス,インコーポレイテッド | オーディオズーム |
US9699554B1 (en) | 2010-04-21 | 2017-07-04 | Knowles Electronics, Llc | Adaptive signal equalization |
US9558755B1 (en) | 2010-05-20 | 2017-01-31 | Knowles Electronics, Llc | Noise suppression assisted automatic speech recognition |
JP2013078118A (ja) * | 2011-09-15 | 2013-04-25 | Jvc Kenwood Corp | ノイズ低減装置、音声入力装置、無線通信装置、およびノイズ低減方法 |
US9536540B2 (en) | 2013-07-19 | 2017-01-03 | Knowles Electronics, Llc | Speech signal separation and synthesis based on auditory scene analysis and speech modeling |
US9978388B2 (en) | 2014-09-12 | 2018-05-22 | Knowles Electronics, Llc | Systems and methods for restoration of speech components |
US9668048B2 (en) | 2015-01-30 | 2017-05-30 | Knowles Electronics, Llc | Contextual switching of microphones |
JP2017175474A (ja) * | 2016-03-24 | 2017-09-28 | パナソニックIpマネジメント株式会社 | モニタリングシステム及びモニタリング方法 |
US9820042B1 (en) | 2016-05-02 | 2017-11-14 | Knowles Electronics, Llc | Stereo separation and directional suppression with omni-directional microphones |
JP2020205592A (ja) * | 2016-09-23 | 2020-12-24 | アップル インコーポレイテッドApple Inc. | 音声制御電子機器 |
JP7050864B2 (ja) | 2016-09-23 | 2022-04-08 | アップル インコーポレイテッド | 音声制御電子機器 |
US11693488B2 (en) | 2016-09-23 | 2023-07-04 | Apple Inc. | Voice-controlled electronic device |
US11693487B2 (en) | 2016-09-23 | 2023-07-04 | Apple Inc. | Voice-controlled electronic device |
JP2019053180A (ja) * | 2017-09-14 | 2019-04-04 | 株式会社東芝 | 音響処理装置、音声認識装置、音響処理方法、音声認識方法、音響処理プログラム及び音声認識プログラム |
Also Published As
Publication number | Publication date |
---|---|
EP1878013B1 (en) | 2010-12-15 |
ATE491503T1 (de) | 2011-01-15 |
DE602006018897D1 (de) | 2011-01-27 |
EP2352149A2 (en) | 2011-08-03 |
EP2352149B1 (en) | 2013-09-04 |
JP4886770B2 (ja) | 2012-02-29 |
WO2006121896A2 (en) | 2006-11-16 |
EP2352149A3 (en) | 2012-08-29 |
WO2006121896A3 (en) | 2007-06-28 |
EP1878013A2 (en) | 2008-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4886770B2 (ja) | コンピュータ対話型処理と共に使用する選択的音源聴音 | |
US8947347B2 (en) | Controlling actions in a video game unit | |
US8073157B2 (en) | Methods and apparatus for targeted sound detection and characterization | |
US7783061B2 (en) | Methods and apparatus for the targeted sound detection | |
US7803050B2 (en) | Tracking device with sound emitter for use in obtaining information for controlling game program execution | |
US20110014981A1 (en) | Tracking device with sound emitter for use in obtaining information for controlling game program execution | |
US8303405B2 (en) | Controller for providing inputs to control execution of a program when inputs are combined | |
US8723984B2 (en) | Selective sound source listening in conjunction with computer interactive processing | |
US8233642B2 (en) | Methods and apparatuses for capturing an audio signal based on a location of the signal | |
JP5339900B2 (ja) | コンピューターインタラクティブ処理による選択的音源聴取 | |
JP4553917B2 (ja) | ゲームプログラムの実行を制御するための入力を取得する方法 | |
US9174119B2 (en) | Controller for providing inputs to control execution of a program when inputs are combined | |
US20110086708A1 (en) | System for tracking user manipulations within an environment | |
US20140342827A1 (en) | Inertially trackable hand-held controller | |
TW201246950A (en) | Method of controlling audio recording and electronic device | |
WO2023133544A2 (en) | Virtual and mixed reality audio system environment correction | |
EP4162674A1 (en) | Systems, devices, and methods of acoustic echo cancellation based on display orientation | |
KR101020510B1 (ko) | 다중 입력 게임 제어 믹서 | |
KR101020509B1 (ko) | 프로그램의 실행을 제어하기 위한 입력을 획득하는 방법 | |
WO2007130819A2 (en) | Tracking device with sound emitter for use in obtaining information for controlling game program execution | |
EP1852164A2 (en) | Obtaining input for controlling execution of a game program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100714 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100818 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20101126 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110106 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20110111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110307 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110531 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110831 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20110909 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111115 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111209 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141216 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4886770 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |