JP2011254188A - 音声信号処理装置、マイクロホン装置、音声信号処理方法、プログラム - Google Patents
音声信号処理装置、マイクロホン装置、音声信号処理方法、プログラム Download PDFInfo
- Publication number
- JP2011254188A JP2011254188A JP2010125501A JP2010125501A JP2011254188A JP 2011254188 A JP2011254188 A JP 2011254188A JP 2010125501 A JP2010125501 A JP 2010125501A JP 2010125501 A JP2010125501 A JP 2010125501A JP 2011254188 A JP2011254188 A JP 2011254188A
- Authority
- JP
- Japan
- Prior art keywords
- sliding
- sliding operation
- audio signal
- microphone
- detection unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03547—Touch pads, in which fingers can move on a surface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0362—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 1D translations or rotations of an operating part of the device, e.g. scroll wheels, sliders, knobs, rollers or belts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
- G06F3/0433—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves in which the acoustic waves are either generated by a movable member and propagated within a surface layer or propagated within a surface layer and captured by a movable member
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R9/00—Transducers of moving-coil, moving-strip, or moving-wire type
- H04R9/08—Microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
- H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
- H04R2430/03—Synergistic effects of band splitting and sub-band processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
Abstract
【解決手段】マイクロホンによって集音された音声信号についての摺動操作によって生ずる摺動音声信号成分のエネルギーレベルを監視する。そして、エネルギーレベルが第1のレベル以上となっている時間が第1の時間以上継続した場合に、摺動操作の開始と判定する。また摺動音声信号成分のエネルギーレベルが第2のレベル未満となっている時間が第2の時間継続した場合に、摺動操作の終了と判定する。これらの摺動操作の判定に応じて、所定の制御処理を行う。
【選択図】図1
Description
通常、電子機器の機能に応じて、これらの操作デバイスが搭載されるが、一方で、電子機器の機能や使用形態によっては、なるべく操作キーを少なくしたり、より使用性のよい操作、効率的な操作ができるようにすることが求められている。
例えば携帯用音楽プレーヤの操作として、ユーザが装着しているヘッドホン部分にマイクロホンが取り付けられている場合を考える。ユーザは、携帯用音楽プレーヤは、通常衣服のポケットや鞄などに入れているが、ヘッドホン部分のマイクロホン周辺をタッピングすることで所定の操作が可能とされれば、わざわざ携帯用音楽プレーヤを取り出さなくてもよいためである。
例えば早送り再生としての「ボタンを押している間、再生しながらの早送りを行う操作」や、或いは「ボタンを押している間、再生ピッチや再生速度を変える」などのアクションには不向きである。
例えばタッピング操作を音量のアップ/ダウンに適用する場合、1回の叩打に応じて1段階の音量のアップ(又はダウン)を行うという方式が考えられる。すると素早く大幅に音量を上げたい(下げたい)場合には、タッピング操作の場合、何回も叩打しなければならず、素早い操作も難しい。また直感的な操作とならず、使用性が良いものともならないことがある。
そこで本発明では、マイクロホンを入力デバイスとして使用して、継続的な操作や操作量を指定するような操作も可能とし、マイクロホンを用いた操作入力方式の有効利用を可能とすることを目的とする。
また、上記摺動操作検知部は、上記判定処理として、上記摺動音声信号成分のエネルギーレベルが第1のレベル以上となっている時間が第1の時間以上継続した場合に、摺動操作の開始と判定する。
さらに、上記摺動操作検知部は、上記判定処理として、上記摺動音声信号成分のエネルギーレベルが第2のレベル未満となっている時間が第2の時間継続した場合に、摺動操作の終了と判定する。
また上記摺動操作検知部は、指又は摺動具によるマイクロホン自体又はその周辺部に対する周回状の摺動によって発生する摺動音声信号成分を用いて上記判定処理を行う。
或いは上記摺動操作検知部には、複数チャンネルの音声信号が入力され、上記摺動操作検知部は、複数の各チャンネルの音声信号のそれぞれについて、上記判定処理を行い、各チャンネルについての摺動操作の開始及び終了を判定する。
或いは、上記摺動操作検知部には、複数チャンネルの音声信号が入力され、上記摺動操作検知部は、複数の各チャンネルの音声信号のうちで摺動音声信号成分が含まれるチャンネルを判定するチャンネル判定処理と、上記複数チャンネルの摺動音声信号成分を加算または減算した信号についての上記判定処理とを行い、摺動操作の開始及び終了の判定と、摺動操作が行われたチャンネルの判定を行う。
また上記摺動操作検知部は、さらに、入力された音声信号から摺動操作箇所を検出し、上記制御部は、上記摺動操作検知部で判定された、摺動操作の開始から終了までの期間、上記摺動操作検知部で検出された摺動操作箇所について設定された所定の制御処理を行う。
またマイクロホンをさらに備え、上記マイクロホンによって集音された音声信号が上記摺動操作検知部に入力されるようにする。
また本発明のマイクロホン装置は、マイクロホンと、上記マイクロホンの周辺部位に設けられた、摺動操作方向によって異なる音声信号成分を生じさせる有方向音源部とを有する。
また本発明のマイクロホン装置は、マイクロホンと、上記マイクロホンの周辺部位に設けられた、摺動操作時に異なる音声信号成分を生じさせる複数の摺動音源部とを有する。
本発明のプログラムは、上記摺動操作検知ステップと制御ステップとを演算処理装置に実行させるプログラムである。
このためユーザはマイクロホン或いはその周辺を指などで摺動、即ち指等で触れながらなぞるように動かし続ける操作として、所定の操作を行うようにする。
その場合、摺動によって発生する音がマイクロホンによって集音される。このためマイクロホンから音声信号処理装置に入力される音声信号には、摺動によって発生した音の音声信号成分(摺動音声信号成分)が含まれることとなる。そこでその摺動音声信号成分をエネルギーレベルや振幅から、摺動操作の開始と終了を判定する。これによって摺動操作の継続時間によって、継続的な操作や操作量を認識できる。つまり、マイクロホンやその周辺部の摺動操作を、継続的な操作や操作量を伴った操作として認識し、それに応じた制御処理を行うことが可能となる。
またマイクロホンを用いて、通常ダイヤルやスライドレバーを用いることが便利な操作も適切に行うことができ、機器コストの削減、装置構成の簡略化などにも適している。
<1.基本構成及び処理>
<2.NCヘッドホンに適用した実施の形態>
[2−1:NCヘッドホンの構成]
[2−2:摺動操作検知部(構成例I)]
[2−3:摺動操作検知部(構成例II)]
[2−4:摺動操作検知部(構成例III)]
<3.摺動ガイドを備えた実施の形態>
<4.有方向音源部を備えた実施の形態>
<5.摺動ガイド及び有方向音源部を備えた実施の形態>
<6.摺動音源部を備えた実施の形態>
<7.各種機器に適用した実施の形態及び変形例>
<8.プログラム>
まず本発明の実施の形態としての基本構成を説明する。
本発明は、本来、機器に設置され収音目的で使われているマイクロホン(以下「マイク」と略称する)デバイスを、機器の機能をコントロールするための各種の操作入力のセンサとして使うシステムを前提とする。
先に示した特許文献1のように、マイクまたは周辺部を叩くこと(叩打)で、機能の切り替えまたはON/OFFをするものは提案されていた。しかし各種の機器には、リアルタイムに特定の時間幅を指定する必要がある機能や操作量を指定することが適した機能もある。この場合、通常のスイッチで言えば、押しボタンスイッチを一定時間押しっぱなしにする、などに相当する機能であるが、マイクに対する叩打で操作する方式では、そのような機能の操作に適していない。
そこで本発明の実施の形態では、マイクデバイス又はその近辺において、指などで触り続けながら動かす「摺動操作」により操作入力を可能と、継続的な操作や操作量を指定する操作に適したユーザインターフェースを提供する。
以下説明していく実施の形態は、このような本発明を採用して摺動操作による操作入力を認識する音声信号処理装置を搭載した各種の電子機器となる。
この図1では、音声信号処理部1、マイク4、マイクアンプ5、A/D変換器6、通常処理系7を示している。
音声信号処理部1は摺動操作検知部2と制御部3を備える。この音声信号処理部1が本発明の音声信号処理装置に相当する。音声信号処理部1は、例えばCPU(Central Processing Unit)やDSP(Digital Signal Processor)等で形成される。
民生電子機器においては、既に様々な目的でマイク4が設けられている。或いは別体のマイク4が接続可能とされている。
例えば、携帯電話機や、録画とともに録音機能の付いたデジタルカメラ、ICレコーダ、音声コミュニケーション機能を持つパーソナルコンピュータなどの情報処理装置、モバイル機器、ノイズキャンセリングヘッドホン(以下「NCヘッドフォン」)などがある。
これら各種の電子機器では、マイク入力音声信号について、それぞれ機能に応じた処理系が搭載されている。
例えば記録媒体への録音を行う機能を有する機器であれば、録音のための圧縮処理、記録用エンコード処理、記録媒体への記録処理等を行う部位が、図1の通常処理系7となる。
また携帯電話機等の通信可能な機器において、音声信号を送信する機能を有する機器であれば、圧縮処理、送信用エンコード処理、送信処理等を行う部位が、図1の通常処理系7となる。
さらに図3以降で説明するNCヘッドフォンの場合、ノイズキャンセル処理を行う機能部分が通常処理系7に相当する。
通常処理系7では、入力された音声信号について、これらの機能に応じた処理を行う。
まず摺動操作検知部2では、時間軸のみの処理でユーザの摺動操作の開始及び終了を検知する。
具体的には、入力された音声信号のうちの摺動音声信号成分のエネルギーレベルが第1のレベル以上となっている時間が第1の時間以上継続した場合に、摺動操作の開始と判定する。このとき摺動操作検知部2は、摺動開始検知信号SdetSを制御部3に出力する。
また開始判定後は、摺動音声信号成分のエネルギーレベルが第2のレベル未満となっている時間が第2の時間継続した場合に、摺動操作の終了と判定する。このとき摺動操作検知部2は、摺動終了検知信号SdetEを制御部3に出力する。
つまりこの開始判定から終了判定までが、摺動操作が継続されている期間と判定される。
なお後述するが、摺動開始検知信号SdetS、摺動終了検知信号SdetEの信号形式は多様に考えられる。摺動開始検知信号SdetSと摺動終了検知信号SdetEは独立した2系統の信号である必要はなく、あくまで制御部3が摺動開始と摺動終了を認識できる信号であればよい。
また制御部3は、摺動開始検知信号SdetEによって、摺動操作検知部2により摺動操作の終了が検知されたことを認識したら、実行している制御処理を終了する。
或いは制御部3は、摺動開始検知信号SdetSから摺動開始検知信号SdetEまでの期間長、即ちユーザが摺動操作を継続している期間長を、操作量として認識して所定の制御処理を行う。
図2(a)はパーソナルコンピュータ100を示している。このパーソナルコンピュータ100には、例えばキーボード近辺の筐体平面部にマイク4が設けられているとする。
拡大して示すように、ユーザは、指やペン状のポインタ等の摺動具で、マイク4の上面又は周辺をなぞるような摺動操作を行う。
その摺動操作によって発生した音がマイク4によって収音され、図1の構成で摺動操作検知部2に供給される。摺動操作検知部2では、入力音声信号のうちで摺動音声信号成分の振幅又はエネルギーレベル(振幅の絶対値)を観測して、摺動操作の開始、終了を判定する。
ユーザは、指等で、マイク4の上面又は周辺をなぞるような摺動操作を行う。
上記同様に、摺動操作によって発生した音がマイク4によって収音され、図1の構成で摺動操作検知部2に供給される。摺動操作検知部2では、入力音声信号のうちで摺動音声信号成分の振幅又はエネルギーレベル(振幅の絶対値)を観測して、摺動操作の開始、終了を判定する。
なお、摺動操作に関して図2(a)(b)では、直線的な摺動操作を描写してあるが、円状(周回状)の摺動操作をユーザが行うものとしてもよい。
直線的な摺動操作は時間的に短時間しか維持しにくい面があり、結果、ユーザの思ったような制御ができない場合がある。このような場合、たとえばマイク4の周囲に関して円状に摺動させるようにすれば、ユーザは容易に摺動操作を続けやすい。
図1のようにマイク入力音声信号が常時入力される音声信号処理部1において、ステップF1として摺動操作の開始の判定が行われる。これは摺動操作検知部2の処理である。そしてユーザの操作入力としての摺動操作が開始されたと判定された場合は、ステップF2からF3に進み、制御部3の処理として当該操作入力に応じた制御処理を開始する。
また、ステップF4で摺動操作検知部2の処理として、ユーザの摺動操作の終了の判定を行う。そして摺動操作が終了されたと判定された場合は、ステップF2からF3に進み、制御部3が実行していた当該操作入力に応じた動作を終了させる。
また他の電子機器の例についても後述する。
[2−1:NCヘッドホンの構成]
図4は、携帯用のメディアプレーヤ20等の音楽再生機器に接続して用いるノイズキャンセリングヘッドホン(NCヘッドフォン)10を模式的に示している。
メディアプレーヤ20は、内部の記録媒体に記録された音楽等のデータを再生し、L、Rの2チャンネル音声信号を、接続されたNCヘッドフォン10に出力する。
ヘッドホン部11は、ユーザの左右両耳に対応した各スピーカハウジング内にLチャンネルとRチャンネルのスピーカ13L、13Rを有する。
この例の場合、いわゆるフィードフォワード方式のノイズキャンセル処理を行うものとしており、マイク12L、12Rが、左右の各スピーカハウジングの外部音声を集音するように設けられている。
またフィードフォワード方式のノイズキャンセル処理を行うNCヘッドフォン10に限られず、フィードバック方式のノイズキャンセル処理を行うものでもよい。
ノイズキャンセルユニット14は、メディアプレーヤ20から供給されてくる再生音楽等の音声信号に対してノイズ低減音声信号をミックスすることで、外部ノイズの低減された音声信号をスピーカ13L、13Rから出力させるものである。
簡単に言えば次のようにノイズ低減を行う。
スピーカハウジングに取り付けられたマイク12L、12Rは、スピーカハウジングを介してユーザの耳に達する外部ノイズを集音する。ノイズキャンセルユニット14は、このマイク12L、12Rで集音した外部ノイズの音声信号から、外部ノイズとは音響的に逆相のノイズ低減音声信号を生成する。そして生成したノイズ低減音声信号を、再生音楽等の音声信号に合成してスピーカ13L、13Rに供給する。
従ってスピーカ13L、13Rから出力される音声には、外部ノイズの逆相成分が含まれているため、この逆相成分と、実際にスピーカハウジングを介して漏れ込む外部ノイズとが空間的に相殺されることになり、ユーザの聴覚には外部ノイズ成分が低減されて本来の再生音楽の出力音声が届くものとなる。
ノイズキャンセルユニット14は、マイクアンプ31L、31R、A/D変換器32L、32R、DSPまたはCPUによる主処理部33、メモリ部40、パワーアンプ42L、42R、A/D変換器41L、41Rを有する。
主処理部33には、ノイズキャンセル部34,ゲイン部35、加算器36L、36R、摺動操作検知部37、制御部38、イコライザ39が設けられる。
メディアプレーヤ20からは、いわゆるヘッドホン出力としてのLチャンネル、Rチャンネルの再生音声信号SA−L,SA−Rが供給される。
この再生音声信号SA−L,SA−Rは、A/D変換器41L、41Rでデジタル信号化される。そしてイコライザ39で振幅−周波数特性補正や位相−周波数特性補正、あるいはその両方などの音質補正がなされる。
イコライザ39の補正処理は制御部38からの制御信号SG3に基づいて実行される。例えば周波数特性の指示などが制御信号SG3によってなされる。
パワーアンプ42L、42Rはデジタルアンプで構成されても良いし、D/A変換器とアナログアンプで構成されても良い。
そしてパワーアンプ42L、42Rからの出力が、スピーカ13L、13Rに対する駆動信号とされ、スピーカ13L、13Rから再生音声信号SA−L,SA−Rに基づく音声出力が行われる。
マイク12L、12Rで集音された音声信号SmL,SmRは、ノイズキャンセルユニット14におけるマイクアンプ31L、31Rで増幅された後、A/D変換器32L、32Rでデジタル信号化される。
A/D変換器32L、32Rから出力されるデジタル化された音声信号SmL,SmRは、ノイズキャンセル部34に供給される。ノイズキャンセル部34は上述したフィードフォワード方式でのノイズ低減音声信号を生成するデジタルフィルタとされる。このノイズキャンセル部34は、制御部38から制御信号SG1で指示されるフィルタ係数で、音声信号SmL,SmRのそれぞれについてのフィルタ処理を行い、Lチャンネル及びRチャンネルのノイズ低減音声信号を生成する。
そしてゲイン部35からのLチャンネル及びRチャンネルのノイズ低減音声信号は加算器36L、36Rに供給される、上述のように再生音声信号SA−L,SA−Rとそれぞれ加算される。
このようなノイズ低減音声信号が加算された再生音声信号SA−L,SA−Rにより、スピーカ13L、13Rから再生音声が出力されることで、上述のようなノイズ低減機能が発揮される。
マイク12L、12Rで集音された音声信号SmL,SmRは、摺動操作検知部37にも供給される。
摺動操作検知部37の構成及び動作は詳しく後述するが、摺動操作検知部37では、時間軸のみの処理でユーザのマイク12L、12R又はその周辺への摺動操作を検知する。具体的には、入力された音声信号SmL,SmRにおける摺動音声信号成分のエネルギーレベルが第1の時間以上継続して所定値を越えている状態となったら、摺動操作の開始と判断する。そしてユーザの操作入力の開始を通知するため、摺動開始検知信号SdetSを制御部38に出力する。
また摺動操作検知部37は、摺動操作開始後は、摺動音声信号成分のエネルギーレベルが第2の時間以上継続して所定値未満となったら、摺動操作の終了と判断する。そしてユーザの操作入力の終了を通知するため、摺動開始検知信号SdetEを制御部38に出力する。
特に本例では、制御部38はユーザの摺動操作に対応して制御処理を行う機能を備える。即ち制御部38は、摺動開始検知信号SdetS、摺動終了検知信号SdetEによって把握される摺動操作が実行されている期間、摺動操作について設定された所定の制御処理を行う。例えば摺動操作入力による操作の検知に応じて、制御信号SG4としてメディアプレーヤ20へ操作入力情報を送信することなどを行う。
メモリ部40は、制御部38が制御処理において参照する情報が記憶されている。例えばメモリ部40には、ノイズキャンセル部34やイコライザ39におけるフィルタ係数の情報等が記憶されている。
例えば、
− 摺動操作期間中、ユーザの希望する再生位置まで、音を聞きながらFF(早送り)/REW(早戻し)の制御。
− 摺動操作期間中だけ再生オフ、ノイズキャンセルオフの制御(すぐに終わる会話などをしたい時に適した状態とする制御)。
− 摺動操作期間中だけノイズキャンセル機能をオフして環境音を聞き取りやすくする動作の制御。
− 摺動操作期間を操作量として、ユーザの希望するボリューム位置まで、音量アップまたは音量ダウンさせる制御。
− 摺動操作期間を操作量として、ユーザの希望する再生スピードまで、再生速度アップまたは再生速度ダウンの制御。
− 摺動操作期間を操作量として、ユーザの希望する再生ピッチまで、再生ピッチをアップまたはダウンさせる制御。
− 摺動操作期間中、音楽又はビデオ等の複数のコンテンツを順次、部分的に再生させる制御。即ちユーザが部分的に視聴しながらコンテンツを順番に検索できるようにし、摺動操作を止めた時点のコンテンツを再生させるような動作の制御。
などがあげられる。
また後述するが、マイク12Lの摺動操作とマイク12Rの摺動操作を区別して検知する場合は、2種類の操作内容を割り当てることができる。その場合、例えばマイク12Lの摺動操作をボリュームアップ、マイク12Rの摺動操作をボリュームダウンとすれば、制御部38は摺動操作検知部37による摺動操作の検知に応じて、メディアプレーヤ20に「ボリュームアップ」又は「ボリュームダウン」のコマンドを送信する処理を行うこととなる。
さらに、後述するが、摺動方向や摺動箇所などで操作を区別することも可能であり、またそれらと左右マイク12L、12Rの組み合わせなどで、多様な操作を区別して設定することもできる。その場合も、制御部38はそれらの摺動操作の検知に応じて、所定のコマンドをメディアプレーヤ20に送信する。
例えば摺動操作に応じて、制御信号SG1による制御でノイズキャンセル部34のフィルタ係数の切り替えを行うようにしても良い。例えば摺動操作期間にフィルタ係数を短時間単位で切り替えていき、ユーザが現状に適したフィルタ特性を選択できるような動作の制御も可能である。
一般的に、ノイズ環境特性は、周波数特性で観察したとしても、飛行場、駅のプラットホーム、電車内、工場などの場所の環境によって大きく異なっている。したがって、ノイズ低減のためのフィルタ特性は、本来は、各ノイズ環境特性に合わせた最適なものを用いることが望まれる。そのため、ユーザがマイク12L、12Rの摺動操作によって、最も適したフィルタ特性を切り替えて選んでいけるようにすることは有用である。
以下、摺動操作検知部37の構成及び動作を説明する。ここではまず図6に示す構成例Iについて説明する。
この構成例Iは、マイク12L、12Rからの音声信号SmL,SmRについて共通に摺動操作を検知する構成例である。
摺動操作検知部37は、加算器51,ローパスフィルタ52、絶対値化回路53、ローパスフィルタ54、判定処理部55を備える。
一般に、摺動によって発生する音の音声信号成分は低域に高いエネルギーを持つため、ローパスフィルタ52で摺動音声信号成分を抽出することが考えられるが、材質によっては所定の通過帯域を持つバンドパスフィルタを用いる場合も考えられる。
いずれにしても、まず、摺動音声信号成分のエネルギーレベルが高い周波数帯域が抽出されればよい。
絶対値化回路53で絶対値化された信号S0はローパスフィルタ54を介して、音声信号SmL,SmRのエネルギーレベルを表した信号Sとされて判定処理部55に入力される。ローパスフィルタ54のカットオフ周波数fc2は、信号S0を包絡線信号化するための周波数に設定される。
判定処理部では信号Sについて後述する処理で摺動操作の開始、終了を検知する。そして検知の結果、摺動開始検知信号SdetS、摺動終了検知信号SdetEを制御部38に出力する。
図6は、摺動操作があったときの信号S0,信号Sの波形の例を示している。
上述したようにローパスフィルタ52は、摺動音声信号成分を抽出する。このローパスフィルタ52の出力は、摺動音声信号成分であるが、正/負の値を持つ振幅であるため、負の振幅もエネルギーレベルとして判断するために絶対値化回路53で絶対値化された信号S0とする。
摺動操作期間中は、図のように信号S0のエネルギーレベル(絶対値化された摺動音声信号成分の振幅レベル)が高くなる。
ただし、ユーザの摺動操作は不安定であり、必ずしも一定の速度及び強さで擦られるものではなく、そのため振幅は微少な時間で変動する。
これをローパスフィルタ54でエンベロープ化した信号Sとすることで、摺動操作期間として、高いエネルギーレベルの継続する期間を判定しやすいものとすることができる。
判定処理部55では、この信号Sから、図示する摺動操作期間、つまり制御対象に対して摺動操作に応じた機能の制御を行う期間を判定する。
判定処理部55は入力される信号Sに対して図8の摺動操作判定処理を行う。
まずステップF101で判定処理部55は、信号Sのレベルが閾値TH1より高いか否かを判断する。
図9には信号Sの波形と閾値TH1、TH2を示している。閾値TH1は、信号Sのエネルギーレベルが増大したか否かを判断する閾値である。一方、閾値TH2は、信号Sのエネルギーレベルが減少したか否かを判断する閾値である。
信号Sが閾値TH1を越えたときに判定処理部55はステップF102に進む。
ステップF102では判定処理部55は、まずカウンタCn1を0にリセットし、カウントをスタートさせる。
そして判定処理部55はステップF103でカウンタCn1をインクリメントしていきながら、ステップF104,F105の判断を行っていく。
また、ステップF105では、カウンタCn1の値が、第1の時間THtm1に達したかどうかを判断する。
第1の時間THtm1とは、図9に示すような所定時間である。これは、信号Sのエネルギー増大が瞬間的に起こったのではなく、摺動操作に伴う継続的なエネルギーレベルの増大であると判断するための時間として設定される。
もしステップF104で信号Sが閾値TH1より低いことが検出された場合は、ステップF101で検出したエネルギーレベルの増大は瞬間的なものであり、摺動操作によるものではないと判断して、「R」で示すようにステップF101に戻る。つまり摺動操作が開始されたのではないと判断する。
一方、ステップF105でカウンタCn1の値が第1の時間THtm1に達した場合とは、信号Sのエネルギーレベルが閾値TH1より大きい状態が継続したと判断される場合となる。
このとき判定処理部55はステップF106に進み、摺動操作が開始されたと判定する。そして制御部38に対して摺動開始検知信号SdetSを出力する。
まずステップF107では、信号Sを閾値TH2と比較し、閾値TH2未満となったか否かを判別する。
図9に示すように、例えば閾値TH2は、閾値TH1より多少低いレベルに設定されている。この閾値TH2は、信号Sのエネルギーレベルの低下を判定するための値である。
ステップF108で判定処理部55はカウンタCn2を0にリセットし、カウントをスタートさせる。
そして判定処理部55はステップF109でカウンタCn2をインクリメントしていきながら、ステップF110,F111の判断を行っていく。
また、ステップF111では、カウンタCn2の値が、第2の時間THtm2に達したかどうかを判断する。
第2の時間THtm2とは、図9に示すような所定時間である。これは、信号Sのエネルギー減少が瞬間的に起こったのではなく、摺動操作の終了に伴う継続的なエネルギーレベルの低下であると判断するための時間として設定される。
例えば図9には、摺動開始後、期間tmAとして、一時的に信号Sのエネルギーレベルが閾値TH2より低下した状態を示している。この場合、期間tmAは第2の時間THtm2より短い期間である。このような場合は、摺動操作中の一時的なレベル低下とする。
ユーザによる摺動操作は必ずしも規則的な摺動ではなく、先に述べたように固定の強さで一定の速度の摺動となるわけではない。また摺動時の指の引っかかりなどで、瞬間的に摺動が停止することも通常に発生する。
このため、信号Sのエネルギーレベルの低下がみられたときに直ぐに摺動操作が終了されたと判断することは適切でなく、そのため第2の時間THtm2を設定し、低下した期間が第2の時間THtm2未満であれば、摺動操作は終わっていないとするものである。
このとき判定処理部55はステップF112に進み、摺動操作が終了されたと判定する。そして制御部38に対して摺動終了検知信号SdetEを出力する。
例えば図9では、2回目に信号Sのエネルギーレベルが閾値TH2より低下した後は、エネルギーレベルが低下した状態が第2の時間THtm2以上継続している。その場合、摺動操作の終了と判定される。
摺動操作があった場合、マイクロホン入力信号における所定帯域の音声信号(摺動音声信号成分)のエネルギーレベル(振幅)が大きくなる。そこで摺動音声信号成分のエネルギーを監視することで、波形解析等を行わず、エネルギー増減判定で摺動操作を検知することができる。
これによって操作検知のための処理負担の軽減、それによる低コスト化の促進が可能となる。特にNCヘッドフォン10のノイズキャンセルユニット14のように小型でリソースの小さい機器において、このように簡易な動作で必要な検知処理が可能となることは、非常に有効である。
また操作入力の検知処理は、不定期のユーザ操作に対応するために常に実行していなければならない。このため時間軸の信号処理として計算量の小さい処理であることで、常に実行していく処理として適している。
さらに簡易な処理であることで摺動操作の開始や終了の検知時間が短縮されレスポンスの良い装置動作が可能となる。
例えば摺動中に指が多少休むことや不定期なノイズの混入などにより、極一時的にエネルギーレベルが下がっても、次にすぐにエネルギーレベルが大きくなるのであれば、摺動操作は継続されていると判断する。
これにより、ユーザ操作の検知として好適かつユーザの意志に沿った操作終了検知ができる。つまり、ユーザは丁寧な摺動をすることに、さほど気を遣わなくてもよく操作が容易である。
例えば鞄などを持って片方の手がふさがっているときに、空いている手で摺動操作を行うことが容易となり、操作性が良いものとすることができる。
制御部38がメディアプレーヤ20の動作を制御するコマンドを送信することとすれば、ユーザは通勤時などにメディアプレーヤ20をポケットや鞄にしまったまま操作ができる。
また、マイク12L、12R又はその周辺を摺動する方式であるため、タッチセンサなど特殊なセンサを使わなくても通常の(安価な)マイクと、CPU/DSP等の信号処理部があれば実装できるため、コスト削減に役立つ。
さらに本例のNCヘッドフォン10の場合、ノイズキャンセル機能のためにヘッドホン部11にマイク12L、12Rが設けられている。このマイク12L、12Rを利用して摺動操作を可能とするものであるため、操作入力のための新たなセンサデバイスを設けることは不要であり、その点でもコスト削減に適しており、また装置構成部品の増大ということもない。
構成例IIとしての摺動操作検知部37を図10で説明する。
この構成例IIは、LチャンネルとRチャンネル、即ちマイク12L、12Rを、それぞれ別の操作に割り当てることができるようにする例である。
例えばマイク12Lの摺動操作をボリュームアップ、マイク12Rの摺動操作をボリュームダウンなどとすることができるような構成例である。
即ちマイク12Lからの音声信号SmLに対して、ローパスフィルタ52L、絶対値化回路53L、ローパスフィルタ54L、判定処理部55Lを設ける。またマイク12Rからの音声信号SmRに対して、ローパスフィルタ52R、絶対値化回路53R、ローパスフィルタ54R、判定処理部55Rを設ける。
また判定処理部55L、55Rは、それぞれが例えば図8のような摺動操作の開始、終了の判定処理を行えばよい。
そして判定処理部55Lは音声信号SmLから得られる信号Sについて摺動操作の開始を検知したら摺動開始検知信号SdetS(L)を制御部38に出力し、また摺動操作の終了を検知したら摺動終了検知信号SdetE(L)を制御部38に出力する。
また判定処理部55Rは音声信号SmRから得られる信号Sについて摺動操作の開始を検知したら摺動開始検知信号SdetS(R)を制御部38に出力し、また摺動操作の終了を検知したら摺動終了検知信号SdetE(R)を制御部38に出力する。
続いて構成例IIIを図11に示す。これは上記構成例IIと同様に、LチャンネルとRチャンネル、即ちマイク12L、12Rを、それぞれ別の操作に割り当てることができるようにする例である。上記構成例IIの場合は、摺動操作検知部37に単純に2系統の摺動操作検知処理系を搭載するため、構成負担が大きくなる。この構成例IIIは構成負担を軽減できる例である。
この構成例IIIでは、摺動操作検知部37は、複数の各チャンネルの音声信号SmL,SmRのうちで摺動音声信号成分が含まれるチャンネルを判定するチャンネル判定処理と、複数チャンネルの摺動音声信号成分を加算または減算した音声信号についての摺動操作開始/終了の判定処理とを行う。これにより摺動操作の検知及び摺動操作が行われたチャンネルの検知を行うものである。
また、マイク12Rからの音声信号SmRはローパスフィルタ52Rに入力され、カットオフ周波数fc1で摺動音声信号成分が抽出される。
またローパスフィルタ52Rの出力は絶対値化回路56Rと減算器59に供給される。
絶対値化回路56Lはローパスフィルタ52Lの出力を絶対値化して減算器57に供給する。絶対値化回路56Rはローパスフィルタ52Rの出力を絶対値化して減算器57に供給する。
従って減算器57の出力としては、左右チャンネルの音声信号SmL,SmRの各摺動音声信号成分のエネルギーレベルの差分が現れることになる。
この減算器57の出力はカットオフ周波数fc2のローパスフィルタ58で包絡線信号とされて判定処理部55に供給される。
判定処理部55では、マイク12L、12Rのいずれかに対して摺動操作がなされたときは、この包絡線信号の正負判定により、マイク12L、12Rのどちらに対する摺動操作であったかを検出できる。
マイク12L、12Rのうちで一方が摺動操作された場合、その摺動操作された方の音声信号の摺動音声信号成分のエネルギーが増大するが、従って減算器59の出力としては、その摺動操作によるエネルギー増大成分が現れる。
この減算器59の出力は絶対値化回路53で絶対値化され、カットオフ周波数fc2のローパスフィルタ54で包絡線化された信号Sとされて判定処理部55に供給される。
なお図12において、上記図8と同一の処理については同一のステップ番号を付し、重複説明は避ける。
この図12の処理では、ステップF101〜F106で、図8の場合と同様に摺動操作の開始の判定を行う。
そしてステップF106で摺動開始と判定した場合、判定処理部55は、ステップF130でL/R判定を行う。
即ち、この時点で図11のローパスフィルタ58からの信号の正負を判定する。図11のように減算器57でLチャンネルの絶対値化信号からRチャンネルの絶対値化信号が減算される構成の場合、ローパスフィルタ58からの信号が正であればLチャンネル、負であればRチャンネルと判定する。
このL/R判定は、マイク12L、12Rのどちらで摺動操作されたかを検出する処理となる。そして判定処理部55は、L/Rの判定結果を示すLチャンネル/Rチャンネルの判定信号D−LRを制御部38に出力する。
従って、摺動操作の開始が検知された場合、制御部38には、摺動開始検知信号SdetSと判定信号D−LRが供給されることとなる。
そして摺動操作が終了されたと判定されたら、判定処理部55はステップF112で制御部38に対して摺動終了検知信号SdetEを出力する。
なお、減算器59に代えて加算器を用いることも考えられる。
続いてマイク側に摺動操作位置をガイドする摺動ガイドを備えた実施の形態について説明する。本発明のマイクロホン装置の実施の形態ともなるものである。
先に図2においてマイク4に対する摺動操作の態様について示したが、その場合は、摺動操作とは単にマイク4が形成された部位を擦るような操作であると述べた。
これに対し、図13にはマイク4の周辺に摺動ガイド8を設けた構成を示している。
この図13(a)の場合、マイク4の周囲にリング状の摺動ガイド8が形成されている。
図13(b)も図2(b)と同様に、例えばノイズキャンセルイング用にマイク4が設けられたヘッドホン(イヤホン)200の一部を示しているが、この場合もマイク4の周囲にリング状の摺動ガイド8が形成されている。
この図13(a)(b)の場合は、凹状、つまりリング状の溝がマイク4の周囲に形成されている例としているが、凸状(レール状)のリングとしてもよい。
そして摺動ガイド8に案内されながらユーザが周回状の摺動操作を行うことによれば、比較的長い時間摺動操作を続けるといったことも容易となる。
また摺動ガイド8を設けることによって、ユーザの摺動操作がマイク4から離れた位置で行われて適切に操作判定ができなかったり、ユーザがどのあたりを摺動すればよいかがわからなくなるといったこともなくなる。
さらにマイクロホン装置の実施の形態として、図14にマイク4の周辺に摺動操作方向によって異なる音声信号成分を生じさせる有方向音源部9を備えた例を説明する。
図14(a)(b)も、図2,図13と同様にパーソナルコンピュータ100やヘッドホン200での例を示しているが、これらにおいてマイク4の周囲が、有方向音源部9とされている。
有方向音源部9の一例を図15に挙げる。例えば図15(a)では相互接触で音が鳴るような材質のもの、繊維状、根はばね性質を持つものを示している。これは、このような性質を持つ材料であっても良いし、型などで作った構造物でもかまわない。
この場合、例えば図15(b)のように、右側に摺動操作すれば相互接触しやすく、音が発生しやすいが、図15(c)のように左側へ摺動操作する場合には、相互接触しないため音が発生しにくいという性質があるものとされる。
つまり摺動操作方向によって発生する音の周波数特性が異なる。この両者の音の違いを検出することで、方向別に異なる制御処理を行うことができる。
また金属、ゴム、樹脂等の材料やそれらの組み合わせで作った構造物でも、構造形状により異なる方向で触れたときに異なる音が出るようにすることができ、有方向音源部9とすることができる。
もちろん音が異なることとなる摺動方向も図15のように往路、復路で異なる場合だけでなく、X方向と、それに直交するY方向で音が異なるようにすることも可能である。さらには、X方向、Y方向、斜め方向で音が異なるようにすることも可能である。
またさらに、図20(a)に示すように、X方向順方向(X1)、X方向逆方向(X2)、Y方向順方向(Y1)、Y方向逆方向(Y2)で音が異なるようにすることも可能である。
この場合、X方向の往復摺動時と、Y方向の往復摺動時に発生する音が異なることで、例えば図1に記載した摺動操作検知部2は、摺動操作の開始、終了だけでなく、X方向摺動操作であるかY方向摺動操作であるかも判定できる。制御部3は、その判定に応じた制御処理を行うことができる。
そのためユーザが、X方向の摺動操作とY方向の摺動操作とを意識して区別して行い、それによって異なる内容の操作入力を行うことができる。
この図16は、図1に示した基本構成のうち、摺動操作検知部2の内部構成を詳しく示したものである。
この場合、摺動操作検知部2は、摺動操作によって発生する摺動音声信号成分を用いた判定処理により、摺動操作の開始及び終了を判定するとともに、さらに、入力された音声信号から摺動操作方向を検出する。
そして制御部3は、摺動操作検知部2で判定された、摺動操作の開始から終了までの期間、摺動操作検知部で検出された摺動操作方向について設定された所定の制御処理を行う。
即ちローパスフィルタ52はマイク4によって得られた音声信号から摺動音声信号成分を抽出する。ローパスフィルタとしているが、有方向音源部9の材質や構造によってはバンドパスフィルタとすることが好適な場合もある。
この摺動音声信号成分は絶対値化回路53で絶対値化され、ローパスフィルタ54でエンベロープ化された信号Sとして判定処理部55に供給される。
開始終了検知処理ブロック55aは、信号Sから摺動操作の開始及び終了を判定し、それらに応じて摺動開始検知信号SdetS、摺動終了検知信号SdetEを制御部3に出力する。
バンドパスフィルタ61−1の通過帯域中心周波数はfc3とされる。
バンドパスフィルタ61−2の通過帯域中心周波数はfc4とされる。
バンドパスフィルタ61−3の通過帯域中心周波数はfc5とされる。
バンドパスフィルタ61−4の通過帯域中心周波数はfc6とされる。
絶対値化回路62−1,62−2,62−3,62−4は、それぞれバンドパスフィルタ61−1、61−2,61−3,61−4の出力を絶対値化した信号S1,S2,S3,S4を、判定処理部55における摺動方向検知ブロック55bに供給する。
なお図17において、上記図8と同一の処理については同一のステップ番号を付し、重複説明は避ける。
この図17の処理では、ステップF101〜F106で、開始終了検知処理ブロック55a側の処理として、図8の場合と同様に摺動操作の開始の判定を行う。
そしてステップF106で摺動開始と判定し、摺動開始検知信号SdetSを出力した場合、判定処理部55は摺動方向検知ブロック55bの処理として、ステップF140の摺動方向判定及び摺動方向判定信号Sdの出力を行う。
図18(a)(b)は、有方向音源部9が面ファスナー状のものであるとした場合の順方向、逆方向の摺動時の周波数特性を示している。
順方向摺動時には、図18(a)のPeak1、Peak2として示す周波数のピークがみられる。また逆方向摺動時には、図18(b)のPeak3、Peak4として示す周波数のピークがみられる。例えばこのような摺動方向による周波数特性の違いを利用して摺動方向判定を行う。
図19(a)に示すように、バンドパスフィルタ61−1〜61−4の各通過中心周波数fc3〜fc6は、上記図18のPeak1〜Peak4に対応する50Hz、150Hz、3KHz、7KHzとされているとする。
また逆方向摺動モデルパターンとして示すように、信号S1〜S4については、逆方向摺動時にはPeak3、Peak4がみられる周波数特性となる。
摺動方向検知ブロック55bには、このように信号S1〜S4に対応するモデルパターンが予めプリセットされている。
そして入力された信号S1〜S4の各レベルから、その周波数特性がどちらのモデルパターンに近いかをパターンマッチングで判定する。そしてその結果で摺動方向を判定する。
例えばここに示す例では入力された信号S1〜S4による周波数特性は、順方向摺動モデルパターンに近いとされる。従って摺動方向は順方向と判定されることとなる。
さらに、図20(a)のように、X方向順方向(X1)、X方向逆方向(X2)、Y方向順方向(Y1)、Y方向逆方向(Y2)で摺動操作を区別する場合も同様に考えられる。例えば図20(b)のように、摺動方向X1,X2,Y1,Y2のそれぞれに応じた周波数特性のモデルパターンを用意しておく。そして入力された信号S1〜S4の各レベルから得られる周波数特性が、どのモデルパターンに近いかを判定することで、摺動方向X1,X2,Y1,Y2のいずれかを判別できる。
例えば摺動方向が順方向なら帯域Aがピークとなり、逆方向なら帯域Bがピークとなることが顕著であるなら、帯域A,Bの2つのバンドパスフィルタを設ける構成でも良い。また、場合によっては5以上のバンドパスフィルタで5以上の帯域に分けて周波数特性のマッチングを行ってもよい。
従って摺動操作の開始が検知された場合、ステップF106,F140の処理で、制御部38には、摺動開始検知信号SdetSと摺動方向判定信号Sdが供給されることとなる。
そして摺動操作が終了されたと判定されたら、判定処理部55はステップF112で制御部38に対して摺動終了検知信号SdetEを出力する。
従って1つのマイク4による摺動操作で2以上の操作入力が可能となる。
さらに上述したNCヘッドフォン10における構成例II、IIIのように複数のマイクによる摺動操作を区別すれば、さらに多様な種類の操作が可能となる。
図21で摺動ガイド8及び有方向音源部9の両方を備えた例を説明する。
図21(a)(b)も、図2,図13,図14と同様にパーソナルコンピュータ100やヘッドホン200での例を示しているが、この図21(a)(b)ではマイク4の周囲は、摺動ガイド8が有方向音源部9とされている。
ユーザは、矢印R1、R2に示すように、摺動ガイド8に沿って右回り摺動、左回り摺動の各操作を区別して操作入力を行うことができる。
そして制御部3は、摺動方向に応じた制御処理を行うことができる。例えば、ボリュームのアップ/ダウンや、チャンネルまたは再生コンテンツの送り/戻しなど、通常のAV機器で使うような直感的な操作が可能となり、よりユーザの利便性が高まる。
次にマイク4の周辺部位に、摺動操作時に異なる音声信号成分を生じさせる複数の摺動音源部を有する構成を説明する。
例えば図22(a)はマイク4の周囲にリング状の2つの摺動音源部8a,8bを設けた例である。
また図22(b)はマイク4の近辺に直線状の2つの摺動音源部8a,8bを設けた例である。
いずれの場合も、摺動音源部8a,8bは、それぞれが材質又は形状が異なる等とし、摺動時に異なる音を発生させるものとされている。
摺動操作がなされた箇所とは、摺動音源部8a,8bのいずれが摺動されたかという判別である。摺動音源部8a,8bは、それぞれが摺動時に異なる音を発生させるものであるから、この場合も、図16のような構成及び処理でよい。
つまり摺動箇所の判定は、各摺動音源部8a,8bで得られる音の周波数特性のパターンマッチング判定で可能となる。そして摺動操作検知部2は、摺動操作の開始及び終了の判定に応じて摺動開始検知信号SdetS、摺動終了検知信号SdetEを制御部3に出力し、また摺動箇所の判定信号を出力する。
なお、このような摺動箇所による区別と、上述した摺動方向の区別、さらには複数のマイク4の区別を組み合わせて多様な操作入力を可能とすることもできる。
ここまで各種の実施の形態を述べてきたが、本発明は多様な電子機器に適用できることは上述したとおりである。以下では、具体的な電子機器に適用した場合についての構成や効果、変形例などを例示していく。
即ちノイズキャンセルユニット14の機能をメディアプレーヤ20に内蔵する場合である。この場合、メディアプレーヤ20が本発明の実施の形態の音声信号処理部1を搭載した具体的な装置となり、上述したNCヘッドフォン10の効果と同様の効果を発揮できる。
その場合のマイク4は、接続されるヘッドホン装置に搭載されるものでも良いし、マイク入力端子に接続されたヘッドホン装置とは別体のマイク機器でもよい。もちろんメディアプレーヤ20の本体にマイクを内蔵する場合、そのマイクを用いても良い。
例えばデジタルスチルカメラでは、撮像画像再生時、検索時のスクロール操作などを摺動操作で行うことが考えられる。ビデオカメラでは、例えば撮像対象のズーム、カメラズーム操作に用いることが考えられる。
またゲーム機であれば、マイク4に対する摺動操作をゲーム上の操作に利用することもできる。
またテレビジョン受像器ではマイク4に対する摺動操作をチャンネル選択のためのスクロール操作、ボリューム操作などに利用することができる。
これらの機器に音声入力用のマイクを設ける場合、そのマイクを摺動操作することによる操作入力が可能となる。例えばパーソナルコンピュータやモバイルPCで搭載されている通信用ステレオマイクを用いて、摺動操作検知による操作を認識し、所定の処理を行うようにすることができる。例えば摺動操作を、マウス操作、ポインティング操作、スクロール操作などに割り当てることが考えられる。
また携帯電話機の場合、マイクは当然に設けられるため、これを利用することでマイクデバイスの新規搭載負担なく、本発明を適用できる。例えば電話番号やアドレス、送信先名などの検索時のスクロール操作などへの適用が好適である。
また、摺動操作による操作内容としては、記録再生に関する操作、送受信に関する操作、メニュー操作、エンター操作、電源オン/オフ操作など多様な例が考えられる。
なお小型機器であるため、必然的に内部に搭載されるCPUやDSPのリソースは限られたものであり、検知のアルゴリズムは、より軽いものであることが望まれる、という背景がある。
そのため上述した時間軸でエネルギー判定処理を行い、周波数解析等を行わないで摺動操作検知を行う実施の形態のアルゴリズムはより有効である。
さらに、ユーザが指で摺動操作を行う場合でも、指の腹で摺動操作する場合と、爪の先で摺動操作する場合とでは、発生する摺動音が異なる。つまり摺動音声信号成分の周波数特性が異なることから、摺動操作検知部2において区別して摺動操作を判定できる。このため、摺動操作が指の腹によるものであるか爪によるものであるかを異なる操作に割り当てることで、摺動操作可能な操作内容を増やすことも考えられる。
また摺動操作に用いるマイクはステレオマイクロホン、モノラルマイクロホン、多チャンネルマイクロホンのいずれであってもよい。
例えば摺動開始検知信号SdetS、摺動終了検知信号SdetEとして、それぞれパルスがHレベルとなる信号でもよいし、摺動開始でHレベルに立ち上がり、摺動終了でLレベルに立ち下がるパルスでもよい。つまり摺動操作期間中に継続してHレベルとなっているパルスである。もちろんパルス論理は逆でも良い。
さらには摺動期間中に周波数の高いパルスを繰り返し出力するような信号形式でもよい。
本発明の実施の形態のプログラムは、摺動操作検知ステップと制御ステップとを演算処理装置に実行させるプログラムである。
摺動操作検知ステップは、一体又は別体接続されたマイクロホンによって集音された音声信号における、マイクロホン自体又はその周辺部に対する摺動操作によって発生する摺動音声信号成分を用いた判定処理により、摺動操作の開始及び終了を判定する。
制御ステップは、摺動操作検知ステップで判定された、摺動操作の開始から終了までの期間、摺動操作について設定された所定の制御処理を行う。
あるいはまた、フレキシブルディスク、CD−ROM(Compact Disc Read Only Memory)、MO(Magnet optical)ディスク、DVD、ブルーレイディスク、磁気ディスク、半導体メモリ、メモリカードなどのリムーバブル記録媒体に、一時的あるいは永続的に格納(記録)しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
また、プログラムは、リムーバブル記録媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、LAN(Local Area Network)、インターネットなどのネットワークを介してダウンロードすることもできる。
Claims (15)
- マイクロホンによって集音された音声信号が入力されるとともに、入力された音声信号における、マイクロホン自体又はその周辺部に対する摺動操作によって発生する摺動音声信号成分を用いた判定処理により、摺動操作の開始及び終了を判定する摺動操作検知部と、
上記摺動操作検知部で判定された、摺動操作の開始から終了までの期間、摺動操作について設定された所定の制御処理を行う制御部と、
を備えた音声信号処理装置。 - 上記摺動操作検知部は、上記判定処理として、上記摺動音声信号成分のエネルギーレベルが第1のレベル以上となっている時間が第1の時間以上継続した場合に、摺動操作の開始と判定する請求項1に記載の音声信号処理装置。
- 上記摺動操作検知部は、上記判定処理として、上記摺動音声信号成分のエネルギーレベルが第2のレベル未満となっている時間が第2の時間継続した場合に、摺動操作の終了と判定する請求項2に記載の音声信号処理装置。
- 上記摺動操作検知部は、指又は摺動具によるマイクロホン自体又はその周辺部に対する周回状の摺動によって発生する摺動音声信号成分を用いて上記判定処理を行う請求項3に記載の音声信号処理装置。
- 上記摺動操作検知部には、複数チャンネルの音声信号が入力され、
上記摺動操作検知部は、複数チャンネルの音声信号を加算した音声信号について、上記判定処理を行う請求項3に記載の音声信号処理装置。 - 上記摺動操作検知部には、複数チャンネルの音声信号が入力され、
上記摺動操作検知部は、複数の各チャンネルの音声信号のそれぞれについて、上記判定処理を行い、各チャンネルについての摺動操作の開始及び終了を判定する請求項3に記載の音声信号処理装置。 - 上記摺動操作検知部には、複数チャンネルの音声信号が入力され、
上記摺動操作検知部は、複数の各チャンネルの音声信号のうちで摺動音声信号成分が含まれるチャンネルを判定するチャンネル判定処理と、上記複数チャンネルの摺動音声信号成分を加算または減算した信号についての上記判定処理とを行い、摺動操作の開始及び終了の判定と、摺動操作が行われたチャンネルの判定を行う請求項3に記載の音声信号処理装置。 - 上記摺動操作検知部は、さらに、入力された音声信号から摺動操作方向を検出し、
上記制御部は、上記摺動操作検知部で判定された、摺動操作の開始から終了までの期間、上記摺動操作検知部で検出された摺動操作方向について設定された所定の制御処理を行う請求項1に記載の音声信号処理装置。 - 上記摺動操作検知部は、さらに、入力された音声信号から摺動操作箇所を検出し、
上記制御部は、上記摺動操作検知部で判定された、摺動操作の開始から終了までの期間、上記摺動操作検知部で検出された摺動操作箇所について設定された所定の制御処理を行う請求項1に記載の音声信号処理装置。 - マイクロホンをさらに備え、
上記マイクロホンによって集音された音声信号が上記摺動操作検知部に入力される請求項1に記載の音声信号処理装置。 - マイクロホンと、
上記マイクロホンの周辺部位に形成されて摺動操作位置をガイドする摺動ガイド部と、
を有するマイクロホン装置。 - マイクロホンと、
上記マイクロホンの周辺部位に設けられた、摺動操作方向によって異なる音声信号成分を生じさせる有方向音源部と、
を有するマイクロホン装置。 - マイクロホンと、
上記マイクロホンの周辺部位に設けられた、摺動操作時に異なる音声信号成分を生じさせる複数の摺動音源部と、
を有するマイクロホン装置。 - マイクロホンによって集音された音声信号における、マイクロホン自体又はその周辺部に対する摺動操作によって発生する摺動音声信号成分を用いた判定処理により、摺動操作の開始及び終了を判定する摺動操作検知ステップと、
上記摺動操作検知ステップで判定された、摺動操作の開始から終了までの期間、摺動操作について設定された所定の制御処理を行う制御ステップと、
を備えた音声信号処理方法。 - マイクロホンによって集音された音声信号における、マイクロホン自体又はその周辺部に対する摺動操作によって発生する摺動音声信号成分を用いた判定処理により、摺動操作の開始及び終了を判定する摺動操作検知ステップと、
上記摺動操作検知ステップで判定された、摺動操作の開始から終了までの期間、摺動操作について設定された所定の制御処理を行う制御ステップと、
を演算処理装置に実行させるプログラム。
Priority Applications (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010125501A JP5593851B2 (ja) | 2010-06-01 | 2010-06-01 | 音声信号処理装置、音声信号処理方法、プログラム |
EP11165430.7A EP2393305B1 (en) | 2010-06-01 | 2011-05-10 | Sound signal processing apparatus, microphone apparatus, sound signal processing method, and program |
TW100117403A TW201218785A (en) | 2010-06-01 | 2011-05-18 | Sound signal processing apparatus, microphone apparatus, sound signal processing method, and program |
KR1020110049025A KR20110132247A (ko) | 2010-06-01 | 2011-05-24 | 음성 신호 처리 장치, 마이크로폰 장치, 음성 신호 처리 방법 및 프로그램 |
US13/115,224 US8699718B2 (en) | 2010-06-01 | 2011-05-25 | Sound signal processing apparatus, microphone apparatus, sound signal processing method, and program |
CN201110146890.3A CN102333266B (zh) | 2010-06-01 | 2011-05-25 | 声音信号处理装置、方法、程序以及麦克风装置 |
SG2011038072A SG176404A1 (en) | 2010-06-01 | 2011-05-26 | Sound signal processing apparatus, microphone apparatus, sound signal processing method, and program |
BRPI1102464-0A BRPI1102464A2 (pt) | 2010-06-01 | 2011-05-26 | aparelho de processamento de sinal de som, aparelho de microfone, método de processamento de sinal de som, e , programa |
US14/190,926 US9485569B2 (en) | 2010-06-01 | 2014-02-26 | Sound signal processing apparatus, microphone apparatus, sound signal processing method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010125501A JP5593851B2 (ja) | 2010-06-01 | 2010-06-01 | 音声信号処理装置、音声信号処理方法、プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011254188A true JP2011254188A (ja) | 2011-12-15 |
JP2011254188A5 JP2011254188A5 (ja) | 2013-05-30 |
JP5593851B2 JP5593851B2 (ja) | 2014-09-24 |
Family
ID=44530007
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010125501A Expired - Fee Related JP5593851B2 (ja) | 2010-06-01 | 2010-06-01 | 音声信号処理装置、音声信号処理方法、プログラム |
Country Status (8)
Country | Link |
---|---|
US (2) | US8699718B2 (ja) |
EP (1) | EP2393305B1 (ja) |
JP (1) | JP5593851B2 (ja) |
KR (1) | KR20110132247A (ja) |
CN (1) | CN102333266B (ja) |
BR (1) | BRPI1102464A2 (ja) |
SG (1) | SG176404A1 (ja) |
TW (1) | TW201218785A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6416995B1 (ja) * | 2017-07-12 | 2018-10-31 | レノボ・シンガポール・プライベート・リミテッド | 携帯型情報処理装置、携帯型情報処理装置のコマンド入力方法、及びコンピュータが実行可能なプログラム |
Families Citing this family (75)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5716287B2 (ja) | 2010-04-07 | 2015-05-13 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法、プログラム |
JP5593852B2 (ja) | 2010-06-01 | 2014-09-24 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法 |
JP5593851B2 (ja) | 2010-06-01 | 2014-09-24 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法、プログラム |
US8908877B2 (en) | 2010-12-03 | 2014-12-09 | Cirrus Logic, Inc. | Ear-coupling detection and adjustment of adaptive response in noise-canceling in personal audio devices |
US9142207B2 (en) | 2010-12-03 | 2015-09-22 | Cirrus Logic, Inc. | Oversight control of an adaptive noise canceler in a personal audio device |
US8948407B2 (en) | 2011-06-03 | 2015-02-03 | Cirrus Logic, Inc. | Bandlimiting anti-noise in personal audio devices having adaptive noise cancellation (ANC) |
US9076431B2 (en) | 2011-06-03 | 2015-07-07 | Cirrus Logic, Inc. | Filter architecture for an adaptive noise canceler in a personal audio device |
US9824677B2 (en) | 2011-06-03 | 2017-11-21 | Cirrus Logic, Inc. | Bandlimiting anti-noise in personal audio devices having adaptive noise cancellation (ANC) |
US9214150B2 (en) | 2011-06-03 | 2015-12-15 | Cirrus Logic, Inc. | Continuous adaptation of secondary path adaptive response in noise-canceling personal audio devices |
US8958571B2 (en) * | 2011-06-03 | 2015-02-17 | Cirrus Logic, Inc. | MIC covering detection in personal audio devices |
US9318094B2 (en) | 2011-06-03 | 2016-04-19 | Cirrus Logic, Inc. | Adaptive noise canceling architecture for a personal audio device |
US9325821B1 (en) * | 2011-09-30 | 2016-04-26 | Cirrus Logic, Inc. | Sidetone management in an adaptive noise canceling (ANC) system including secondary path modeling |
US9208772B2 (en) * | 2011-12-23 | 2015-12-08 | Bose Corporation | Communications headset speech-based gain control |
CN102547511B (zh) * | 2011-12-28 | 2014-11-26 | 谭青松 | 耳机控制方法及耳机 |
US9781529B2 (en) | 2012-03-27 | 2017-10-03 | Htc Corporation | Electronic apparatus and method for activating specified function thereof |
US9014387B2 (en) | 2012-04-26 | 2015-04-21 | Cirrus Logic, Inc. | Coordinated control of adaptive noise cancellation (ANC) among earspeaker channels |
US9142205B2 (en) | 2012-04-26 | 2015-09-22 | Cirrus Logic, Inc. | Leakage-modeling adaptive noise canceling for earspeakers |
US9123321B2 (en) | 2012-05-10 | 2015-09-01 | Cirrus Logic, Inc. | Sequenced adaptation of anti-noise generator response and secondary path response in an adaptive noise canceling system |
US9076427B2 (en) | 2012-05-10 | 2015-07-07 | Cirrus Logic, Inc. | Error-signal content controlled adaptation of secondary and leakage path models in noise-canceling personal audio devices |
US9082387B2 (en) | 2012-05-10 | 2015-07-14 | Cirrus Logic, Inc. | Noise burst adaptation of secondary path adaptive response in noise-canceling personal audio devices |
US9319781B2 (en) | 2012-05-10 | 2016-04-19 | Cirrus Logic, Inc. | Frequency and direction-dependent ambient sound handling in personal audio devices having adaptive noise cancellation (ANC) |
US9318090B2 (en) | 2012-05-10 | 2016-04-19 | Cirrus Logic, Inc. | Downlink tone detection and adaptation of a secondary path response model in an adaptive noise canceling system |
US9225307B2 (en) | 2012-06-28 | 2015-12-29 | Sonos, Inc. | Modification of audio responsive to proximity detection |
US9532139B1 (en) | 2012-09-14 | 2016-12-27 | Cirrus Logic, Inc. | Dual-microphone frequency amplitude response self-calibration |
US9134856B2 (en) | 2013-01-08 | 2015-09-15 | Sony Corporation | Apparatus and method for controlling a user interface of a device based on vibratory signals |
US9107010B2 (en) | 2013-02-08 | 2015-08-11 | Cirrus Logic, Inc. | Ambient noise root mean square (RMS) detector |
US9369798B1 (en) | 2013-03-12 | 2016-06-14 | Cirrus Logic, Inc. | Internal dynamic range control in an adaptive noise cancellation (ANC) system |
US9106989B2 (en) | 2013-03-13 | 2015-08-11 | Cirrus Logic, Inc. | Adaptive-noise canceling (ANC) effectiveness estimation and correction in a personal audio device |
US9414150B2 (en) | 2013-03-14 | 2016-08-09 | Cirrus Logic, Inc. | Low-latency multi-driver adaptive noise canceling (ANC) system for a personal audio device |
US9215749B2 (en) | 2013-03-14 | 2015-12-15 | Cirrus Logic, Inc. | Reducing an acoustic intensity vector with adaptive noise cancellation with two error microphones |
US9635480B2 (en) | 2013-03-15 | 2017-04-25 | Cirrus Logic, Inc. | Speaker impedance monitoring |
US9324311B1 (en) | 2013-03-15 | 2016-04-26 | Cirrus Logic, Inc. | Robust adaptive noise canceling (ANC) in a personal audio device |
US9208771B2 (en) | 2013-03-15 | 2015-12-08 | Cirrus Logic, Inc. | Ambient noise-based adaptation of secondary path adaptive response in noise-canceling personal audio devices |
US9467776B2 (en) | 2013-03-15 | 2016-10-11 | Cirrus Logic, Inc. | Monitoring of speaker impedance to detect pressure applied between mobile device and ear |
US10206032B2 (en) | 2013-04-10 | 2019-02-12 | Cirrus Logic, Inc. | Systems and methods for multi-mode adaptive noise cancellation for audio headsets |
US9066176B2 (en) | 2013-04-15 | 2015-06-23 | Cirrus Logic, Inc. | Systems and methods for adaptive noise cancellation including dynamic bias of coefficients of an adaptive noise cancellation system |
US9462376B2 (en) | 2013-04-16 | 2016-10-04 | Cirrus Logic, Inc. | Systems and methods for hybrid adaptive noise cancellation |
US9460701B2 (en) | 2013-04-17 | 2016-10-04 | Cirrus Logic, Inc. | Systems and methods for adaptive noise cancellation by biasing anti-noise level |
US9478210B2 (en) | 2013-04-17 | 2016-10-25 | Cirrus Logic, Inc. | Systems and methods for hybrid adaptive noise cancellation |
US9578432B1 (en) | 2013-04-24 | 2017-02-21 | Cirrus Logic, Inc. | Metric and tool to evaluate secondary path design in adaptive noise cancellation systems |
US9264808B2 (en) | 2013-06-14 | 2016-02-16 | Cirrus Logic, Inc. | Systems and methods for detection and cancellation of narrow-band noise |
US9392364B1 (en) | 2013-08-15 | 2016-07-12 | Cirrus Logic, Inc. | Virtual microphone for adaptive noise cancellation in personal audio devices |
US9666176B2 (en) | 2013-09-13 | 2017-05-30 | Cirrus Logic, Inc. | Systems and methods for adaptive noise cancellation by adaptively shaping internal white noise to train a secondary path |
US9508345B1 (en) | 2013-09-24 | 2016-11-29 | Knowles Electronics, Llc | Continuous voice sensing |
US9620101B1 (en) | 2013-10-08 | 2017-04-11 | Cirrus Logic, Inc. | Systems and methods for maintaining playback fidelity in an audio system with adaptive noise cancellation |
US20150128095A1 (en) * | 2013-11-07 | 2015-05-07 | Tencent Technology (Shenzhen) Company Limited | Method, device and computer system for performing operations on objects in an object list |
US9271064B2 (en) * | 2013-11-13 | 2016-02-23 | Personics Holdings, Llc | Method and system for contact sensing using coherence analysis |
US9532155B1 (en) | 2013-11-20 | 2016-12-27 | Knowles Electronics, Llc | Real time monitoring of acoustic environments using ultrasound |
US9704472B2 (en) | 2013-12-10 | 2017-07-11 | Cirrus Logic, Inc. | Systems and methods for sharing secondary path information between audio channels in an adaptive noise cancellation system |
US10382864B2 (en) | 2013-12-10 | 2019-08-13 | Cirrus Logic, Inc. | Systems and methods for providing adaptive playback equalization in an audio device |
US10219071B2 (en) | 2013-12-10 | 2019-02-26 | Cirrus Logic, Inc. | Systems and methods for bandlimiting anti-noise in personal audio devices having adaptive noise cancellation |
US9369557B2 (en) | 2014-03-05 | 2016-06-14 | Cirrus Logic, Inc. | Frequency-dependent sidetone calibration |
US9479860B2 (en) | 2014-03-07 | 2016-10-25 | Cirrus Logic, Inc. | Systems and methods for enhancing performance of audio transducer based on detection of transducer status |
US9648410B1 (en) | 2014-03-12 | 2017-05-09 | Cirrus Logic, Inc. | Control of audio output of headphone earbuds based on the environment around the headphone earbuds |
US9437188B1 (en) | 2014-03-28 | 2016-09-06 | Knowles Electronics, Llc | Buffered reprocessing for multi-microphone automatic speech recognition assist |
US9319784B2 (en) | 2014-04-14 | 2016-04-19 | Cirrus Logic, Inc. | Frequency-shaped noise-based adaptation of secondary path adaptive response in noise-canceling personal audio devices |
DK3149966T3 (en) * | 2014-05-30 | 2018-09-03 | Sonova Ag | A METHOD FOR CONTROLING A HEARING DEVICE THROUGH TOUCH MOVEMENTS, A TOUCH MOVEMENT CONTROL HEARING AND A METHOD OF ADAPTING A TOUCH MOVEMENT CONTROLLED HEARING |
US9609416B2 (en) | 2014-06-09 | 2017-03-28 | Cirrus Logic, Inc. | Headphone responsive to optical signaling |
US10181315B2 (en) | 2014-06-13 | 2019-01-15 | Cirrus Logic, Inc. | Systems and methods for selectively enabling and disabling adaptation of an adaptive noise cancellation system |
US9478212B1 (en) | 2014-09-03 | 2016-10-25 | Cirrus Logic, Inc. | Systems and methods for use of adaptive secondary path estimate to control equalization in an audio device |
US9552805B2 (en) | 2014-12-19 | 2017-01-24 | Cirrus Logic, Inc. | Systems and methods for performance and stability control for feedback adaptive noise cancellation |
US10026388B2 (en) | 2015-08-20 | 2018-07-17 | Cirrus Logic, Inc. | Feedback adaptive noise cancellation (ANC) controller and method having a feedback response partially provided by a fixed-response filter |
US9578415B1 (en) | 2015-08-21 | 2017-02-21 | Cirrus Logic, Inc. | Hybrid adaptive noise cancellation system with filtered error microphone signal |
US10013966B2 (en) | 2016-03-15 | 2018-07-03 | Cirrus Logic, Inc. | Systems and methods for adaptive active noise cancellation for multiple-driver personal audio device |
US10582290B2 (en) * | 2017-02-21 | 2020-03-03 | Bragi GmbH | Earpiece with tap functionality |
CN107809703A (zh) * | 2017-11-15 | 2018-03-16 | 联想(北京)有限公司 | 一种电子设备 |
US20190191246A1 (en) * | 2017-12-14 | 2019-06-20 | AIWA Corporation | System and Method of Intra-Speaker Network Sound Delivery |
EP3627854B1 (en) * | 2018-09-18 | 2023-06-07 | Sonova AG | Method for operating a hearing system and hearing system comprising two hearing devices |
TWI692253B (zh) * | 2018-11-22 | 2020-04-21 | 塞席爾商元鼎音訊股份有限公司 | 耳機組控制方法和耳機組 |
CN111246326B (zh) * | 2018-11-29 | 2022-03-11 | 原相科技股份有限公司 | 耳机组控制方法和耳机组 |
US10969873B2 (en) * | 2019-04-12 | 2021-04-06 | Dell Products L P | Detecting vibrations generated by a swipe gesture |
CN111370026A (zh) * | 2020-02-25 | 2020-07-03 | 维沃移动通信有限公司 | 设备状态检测方法及电子设备 |
CN112118506B (zh) * | 2020-09-29 | 2022-11-11 | 英华达(上海)科技有限公司 | 耳机降噪模式控制方法、系统、设备及存储介质 |
FR3122510A1 (fr) * | 2021-04-30 | 2022-11-04 | Sagemcom Broadband Sas | Commande par glissement sur des boutons virtuels |
CN114371796A (zh) * | 2022-01-10 | 2022-04-19 | 上海深聪半导体有限责任公司 | 一种识别触摸位置的方法、设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000235452A (ja) * | 1999-02-15 | 2000-08-29 | Tokai Rika Co Ltd | タッチ操作入力装置 |
EP1762926A2 (en) * | 2005-09-09 | 2007-03-14 | Samsung Electronics Co., Ltd. | Method and apparatus to control operation of multimedia device |
US20080234842A1 (en) * | 2007-03-21 | 2008-09-25 | Microsoft Corporation | Microphones as contact sensors for device control |
US20090046868A1 (en) * | 2004-09-23 | 2009-02-19 | Thomson Licensing | Method and apparatus for controlling a headphone |
JP2009134451A (ja) * | 2007-11-29 | 2009-06-18 | Shin Etsu Polymer Co Ltd | 電子機器およびその制御法 |
JP2009217733A (ja) * | 2008-03-12 | 2009-09-24 | Yahoo Japan Corp | 手書き文字認識装置 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003516576A (ja) * | 1999-12-08 | 2003-05-13 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | ポータブル通信装置及びその通信方法 |
JP2001306254A (ja) * | 2000-02-17 | 2001-11-02 | Seiko Epson Corp | 打音検出による入力機能 |
US7394911B2 (en) * | 2003-07-08 | 2008-07-01 | Sonian Roskilde A/S | Control panel with activation zone |
WO2006075275A1 (en) * | 2005-01-12 | 2006-07-20 | Koninklijke Philips Electronics N.V. | Audio entertainment system, method, computer program product |
US7966084B2 (en) * | 2005-03-07 | 2011-06-21 | Sony Ericsson Mobile Communications Ab | Communication terminals with a tap determination circuit |
US20140169582A1 (en) * | 2006-06-30 | 2014-06-19 | Plantronics, Inc. | User interface for intelligent headset |
US7978091B2 (en) * | 2006-08-24 | 2011-07-12 | Navisense | Method and device for a touchless interface |
US20080130910A1 (en) * | 2006-11-30 | 2008-06-05 | Motorola, Inc. | Gestural user interface devices and methods for an accessory to a wireless communication device |
JP4997962B2 (ja) | 2006-12-27 | 2012-08-15 | ソニー株式会社 | 音声出力装置、音声出力方法、音声出力処理用プログラムおよび音声出力システム |
GB0724005D0 (en) * | 2007-12-07 | 2008-01-16 | Univ Glasgow | Controller |
US20090270141A1 (en) * | 2008-04-29 | 2009-10-29 | Sony Ericsson Mobile Communications Ab | Apparatus having input means with rugged surface |
US8418084B1 (en) * | 2008-05-30 | 2013-04-09 | At&T Intellectual Property I, L.P. | Single-touch media selection |
JP5061087B2 (ja) | 2008-11-28 | 2012-10-31 | 株式会社豊田自動織機 | ばり取り装置付き摩擦圧接機と該ばり取り装置付き摩擦圧接機のばり取り方法 |
US20100172522A1 (en) * | 2009-01-07 | 2010-07-08 | Pillar Ventures, Llc | Programmable earphone device with customizable controls and heartbeat monitoring |
US20110096036A1 (en) * | 2009-10-23 | 2011-04-28 | Mcintosh Jason | Method and device for an acoustic sensor switch |
US8880206B2 (en) * | 2010-03-11 | 2014-11-04 | Sony Corporation | Touch-sensitive sensor |
JP5716287B2 (ja) | 2010-04-07 | 2015-05-13 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法、プログラム |
CA2702216C (en) * | 2010-05-20 | 2012-02-07 | Research In Motion Limited | Gesture based smart headphone |
JP5593851B2 (ja) | 2010-06-01 | 2014-09-24 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法、プログラム |
JP5593852B2 (ja) | 2010-06-01 | 2014-09-24 | ソニー株式会社 | 音声信号処理装置、音声信号処理方法 |
US8787599B2 (en) * | 2010-09-20 | 2014-07-22 | Plantronics, Inc. | Reduced microphone handling noise |
-
2010
- 2010-06-01 JP JP2010125501A patent/JP5593851B2/ja not_active Expired - Fee Related
-
2011
- 2011-05-10 EP EP11165430.7A patent/EP2393305B1/en not_active Not-in-force
- 2011-05-18 TW TW100117403A patent/TW201218785A/zh unknown
- 2011-05-24 KR KR1020110049025A patent/KR20110132247A/ko not_active Application Discontinuation
- 2011-05-25 CN CN201110146890.3A patent/CN102333266B/zh not_active Expired - Fee Related
- 2011-05-25 US US13/115,224 patent/US8699718B2/en not_active Expired - Fee Related
- 2011-05-26 BR BRPI1102464-0A patent/BRPI1102464A2/pt not_active IP Right Cessation
- 2011-05-26 SG SG2011038072A patent/SG176404A1/en unknown
-
2014
- 2014-02-26 US US14/190,926 patent/US9485569B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000235452A (ja) * | 1999-02-15 | 2000-08-29 | Tokai Rika Co Ltd | タッチ操作入力装置 |
US20090046868A1 (en) * | 2004-09-23 | 2009-02-19 | Thomson Licensing | Method and apparatus for controlling a headphone |
EP1762926A2 (en) * | 2005-09-09 | 2007-03-14 | Samsung Electronics Co., Ltd. | Method and apparatus to control operation of multimedia device |
US20080234842A1 (en) * | 2007-03-21 | 2008-09-25 | Microsoft Corporation | Microphones as contact sensors for device control |
JP2009134451A (ja) * | 2007-11-29 | 2009-06-18 | Shin Etsu Polymer Co Ltd | 電子機器およびその制御法 |
JP2009217733A (ja) * | 2008-03-12 | 2009-09-24 | Yahoo Japan Corp | 手書き文字認識装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6416995B1 (ja) * | 2017-07-12 | 2018-10-31 | レノボ・シンガポール・プライベート・リミテッド | 携帯型情報処理装置、携帯型情報処理装置のコマンド入力方法、及びコンピュータが実行可能なプログラム |
US10802790B2 (en) | 2017-07-12 | 2020-10-13 | Lenovo (Singapore) Pte. Ltd. | Portable computing devices and command input methods for the portable computing devices |
Also Published As
Publication number | Publication date |
---|---|
US9485569B2 (en) | 2016-11-01 |
CN102333266B (zh) | 2016-06-15 |
CN102333266A (zh) | 2012-01-25 |
TW201218785A (en) | 2012-05-01 |
EP2393305A3 (en) | 2014-09-17 |
US20140177851A1 (en) | 2014-06-26 |
US20110293102A1 (en) | 2011-12-01 |
BRPI1102464A2 (pt) | 2012-11-06 |
EP2393305B1 (en) | 2017-03-15 |
SG176404A1 (en) | 2011-12-29 |
EP2393305A2 (en) | 2011-12-07 |
KR20110132247A (ko) | 2011-12-07 |
US8699718B2 (en) | 2014-04-15 |
JP5593851B2 (ja) | 2014-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5593851B2 (ja) | 音声信号処理装置、音声信号処理方法、プログラム | |
JP5716287B2 (ja) | 音声信号処理装置、音声信号処理方法、プログラム | |
JP6822586B2 (ja) | ヘッドホン、再生制御方法、並びにプログラム | |
US20140079239A1 (en) | System and apparatus for controlling a user interface with a bone conduction transducer | |
JP2014033444A (ja) | モバイル装置及び制御方法 | |
JP6927331B2 (ja) | 情報処理装置、情報処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130416 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130416 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140327 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140708 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140721 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5593851 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |