JP2016225884A - 集音装置、及び集音装置の制御方法 - Google Patents
集音装置、及び集音装置の制御方法 Download PDFInfo
- Publication number
- JP2016225884A JP2016225884A JP2015111657A JP2015111657A JP2016225884A JP 2016225884 A JP2016225884 A JP 2016225884A JP 2015111657 A JP2015111657 A JP 2015111657A JP 2015111657 A JP2015111657 A JP 2015111657A JP 2016225884 A JP2016225884 A JP 2016225884A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- speaker
- microphone array
- voice
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 39
- 238000012545 processing Methods 0.000 claims description 60
- 238000005259 measurement Methods 0.000 abstract description 11
- 238000004891 communication Methods 0.000 description 19
- 238000000926 separation method Methods 0.000 description 10
- 238000012360 testing method Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000011946 reduction process Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 239000011358 absorbing material Substances 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 210000001260 vocal cord Anatomy 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47C—CHAIRS; SOFAS; BEDS
- A47C7/00—Parts, details, or accessories of chairs or stools
- A47C7/36—Support for the head or the back
- A47C7/38—Support for the head or the back for the head
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/80—Head-rests
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/025—Arrangements for fixing loudspeaker transducers, e.g. in a box, furniture
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47C—CHAIRS; SOFAS; BEDS
- A47C7/00—Parts, details, or accessories of chairs or stools
- A47C7/62—Accessories for chairs
- A47C7/72—Adaptations for incorporating lamps, radio sets, bars, telephones, ventilation, heating or cooling arrangements or the like
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/90—Details or parts not otherwise provided for
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Aviation & Aerospace Engineering (AREA)
- Transportation (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Circuit For Audible Band Transducer (AREA)
- Chair Legs, Seat Parts, And Backrests (AREA)
- Seats For Vehicles (AREA)
- Details Of Audible-Bandwidth Transducers (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
Abstract
【課題】部品点数の低減や構造の複雑化を抑えつつ、発話者の音声を高精度に取得し易い集音装置、及び集音装置の制御方法を提供する。
【解決手段】発話者である乗員の音声を取得する動作モード（発話モード、通話モード）か否かを判定し（ステップＳ１Ａ）、他の動作モード（音声再生モード、頭部位置測定モード）であった場合に、マイクアレイの指向性を乗員の外側、又は無指向に設定し（ステップＳ４Ａ、Ｓ５Ａ）、マイクアレイの入力音声を取得し、乗員の音声を取得する動作モード（発話モード、通話モード）の場合に、マイクアレイの指向性を乗員に向けるようにした（ステップＳ２Ａ）。
【選択図】図６
【解決手段】発話者である乗員の音声を取得する動作モード（発話モード、通話モード）か否かを判定し（ステップＳ１Ａ）、他の動作モード（音声再生モード、頭部位置測定モード）であった場合に、マイクアレイの指向性を乗員の外側、又は無指向に設定し（ステップＳ４Ａ、Ｓ５Ａ）、マイクアレイの入力音声を取得し、乗員の音声を取得する動作モード（発話モード、通話モード）の場合に、マイクアレイの指向性を乗員に向けるようにした（ステップＳ２Ａ）。
【選択図】図６
Description
本発明は、複数のマイクを並べたマイクアレイの指向性を制御可能な集音装置、及び集音装置の制御方法に関する。
車のダッシュボードや天井、ハンドルなどにマイクを搭載し、ハンズフリー通話や音声認識を行う車載装置が知られている。この種の集音を行う装置（以下、集音装置）には、さらに高性能化する為に、複数のマイクを並べたマイクアレイを備え、ビームフォーミング制御によりマイクアレイの指向性を制御するものが提案されている（例えば、特許文献１参照）。
この特許文献１では、自動車に備えられたバックミラー又は座席の位置に基づいて自動車内の発話者の頭部の位置を検出する位置検出器を備え、検出された頭部の位置、及び各マイクの位置に基づいて指向性演算処理を行うようにしている。
この特許文献１では、自動車に備えられたバックミラー又は座席の位置に基づいて自動車内の発話者の頭部の位置を検出する位置検出器を備え、検出された頭部の位置、及び各マイクの位置に基づいて指向性演算処理を行うようにしている。
しかし、従来の構成は、バックミラー又は座席の位置を物理的に検出する位置検出器が必要であり、部品点数の増減や構造の複雑化を招きやすい。
本発明は、上述した事情に鑑みてなされたものであり、部品点数の低減や構造の複雑化を抑えつつ、発話者の音声を高精度に取得し易い集音装置、及び集音装置の制御方法を提供することを目的とする。
本発明は、上述した事情に鑑みてなされたものであり、部品点数の低減や構造の複雑化を抑えつつ、発話者の音声を高精度に取得し易い集音装置、及び集音装置の制御方法を提供することを目的とする。
上記目的を達成するために、本発明は、複数のマイクを並べたマイクアレイの指向性を制御可能な集音装置において、発話者の音声を取得する第１状態か否かを判定する判定部と、前記第１状態ではない第２状態の場合に、前記マイクアレイの指向性を前記発話者の外側、又は無指向に設定して前記マイクアレイの入力音声を取得し、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者に向ける制御部とを備えることを特徴とする。
上記構成において、前記マイクアレイは前記発話者の後方に配置され、前記制御部は、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者の後頭部から首までの範囲に設定するようにしても良い。
また、上記構成において、前記制御部は、前記第２状態で取得した前記入力音声に基づいて周囲ノイズを取得し、前記第１状態の場合に、前記マイクアレイの入力音声から前記周囲ノイズを除去するノイズ除去処理を行うようにしても良い。
また、上記構成において、前記集音装置は、所定のスピーカーを介して音声を出力する音声出力部を有するとともに、動作モードとして、前記発話者の音声を取得する発話モードと、前記スピーカーを介して音声を出力するとともに前記発話者の音声を取得する通話モードとを備え、
前記第２状態は、前記発話モード、及び前記通話モードにおける前記発話者の音声を取得しない状態を含むようにしても良い。
前記第２状態は、前記発話モード、及び前記通話モードにおける前記発話者の音声を取得しない状態を含むようにしても良い。
また、上記構成において、前記動作モードとして、前記スピーカーから出力されて前記発話者で反射した反射音を取得し、前記反射音に基づいて前記発話者の位置を特定する位置特定モードを備え、前記第２状態は、前記位置特定モードの状態を含み、前記第１状態では、前記位置特定モードで特定した前記発話者の位置に応じて前記マイクアレイの指向性を制御するようにしても良い。
また、上記構成において、前記音声出力部は、前記スピーカーを介して音声を出力する音声出力モードのときに、超音波の信号を前記スピーカーから出力してその反射音を取得し、前記反射音に基づいて前記発話者の位置を特定する位置特定処理を行うようにしても良い。
また、上記構成において、前記マイクアレイと前記スピーカーは、前記発話者の後方に配置される筐体に配置されるようにしても良い。また、上記構成において、前記筐体は、ヘッドレストであるようにしても良い。
また、本発明は、複数のマイクを並べたマイクアレイの指向性を制御可能な集音装置の制御方法において、発話者の音声を取得する第１状態か否かを判定するステップと、前記第１状態ではない第２状態の場合に、前記マイクアレイの指向性を前記発話者の外側、又は無指向に設定して前記マイクアレイの入力音声を取得し、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者に向けるステップとを実行することを特徴とする。
本発明では、発話者の音声を取得する第１状態か否かを判定し、前記第１状態ではない第２状態の場合に、前記マイクアレイの指向性を前記発話者の外側、又は無指向に設定して前記マイクアレイの入力音声を取得し、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者に向けるので、マイクアレイの指向性を発話者の外側、又は無指向に設定したときの入力音声に基づいて、発話時の音声処理に役立つ情報である周囲ノイズや発話者の位置情報を得ることが可能になる。この得た情報を用いて、発話時に周囲ノイズの除去や指向性制御などの音声処理を行うことが可能となり、専用の位置検出器などが不要である。従って、部品点数の低減や構造の複雑化を抑えつつ、発話者の音声を高精度に取得し易くなる。
以下、図面を参照して本発明の実施の形態について説明する。
（第１実施形態）
図１は第１実施形態に係るヘッドレスト装置１１の使用例を示した図である。図２はヘッドレスト装置１１の斜視図であり、図３はヘッドレスト装置１１の側断面図である。なお、各図において、乗員Ｍを基準にした各方向のうちの前方を符号Ｆを付して示し、上方を符号Ｕを付して示し、左方を符号Ｌを付して示している。
図１に示すように、このヘッドレスト装置１１は、車両（本実施形態では自動車）に設けられた乗員用シート１２に設置され、この乗員用シート１２に着座する乗員（本実施形態では運転者）Ｍの頭ＭＨの後方に配置されるヘッドレストとして機能する。なお、このヘッドレスト装置１１は、自動車に限らず、飛行機、船舶、電車などの様々な車両に採用できる。また、このヘッドレスト装置１１は、車両に採用する場合に限らず、オフィスチェアやソファーなどのオフィスや住宅で使用される家具にも応用可能であり、要はヘッドレストを備える機器に広く適用可能である。
（第１実施形態）
図１は第１実施形態に係るヘッドレスト装置１１の使用例を示した図である。図２はヘッドレスト装置１１の斜視図であり、図３はヘッドレスト装置１１の側断面図である。なお、各図において、乗員Ｍを基準にした各方向のうちの前方を符号Ｆを付して示し、上方を符号Ｕを付して示し、左方を符号Ｌを付して示している。
図１に示すように、このヘッドレスト装置１１は、車両（本実施形態では自動車）に設けられた乗員用シート１２に設置され、この乗員用シート１２に着座する乗員（本実施形態では運転者）Ｍの頭ＭＨの後方に配置されるヘッドレストとして機能する。なお、このヘッドレスト装置１１は、自動車に限らず、飛行機、船舶、電車などの様々な車両に採用できる。また、このヘッドレスト装置１１は、車両に採用する場合に限らず、オフィスチェアやソファーなどのオフィスや住宅で使用される家具にも応用可能であり、要はヘッドレストを備える機器に広く適用可能である。
このヘッドレスト装置１１は、ヘッドレスト装置１１の外形状を形成する中空の筐体１３と、筐体１３から下方に延びる左右一対のヘッドレストステー１４とを備えている。
筐体１３には、衝撃緩和用のクッション材（不図示）と、音声入出力ユニット２１とが収容されている。音声入出力ユニット２１は、左右一対のスピーカー２２と、複数のマイクロフォン（以下、マイクと言う）２３と、回路基板２４とを備えており、回路基板２４の制御の下、スピーカー２２を介して音声を出力し、マイク２３を介して外部音声を入力（集音）する。これによって、ヘッドレスト装置１１は音声の入出力機能を具備する。
筐体１３には、衝撃緩和用のクッション材（不図示）と、音声入出力ユニット２１とが収容されている。音声入出力ユニット２１は、左右一対のスピーカー２２と、複数のマイクロフォン（以下、マイクと言う）２３と、回路基板２４とを備えており、回路基板２４の制御の下、スピーカー２２を介して音声を出力し、マイク２３を介して外部音声を入力（集音）する。これによって、ヘッドレスト装置１１は音声の入出力機能を具備する。
図２及び図３に示すように、音声入出力ユニット２１は、前後方向に短い薄型に形成され、筐体１３の前側空間に収容される。このように前後方向に薄いコンパクト形状にすることにより、様々な形状のヘッドレスト（つまり、様々な形状の筐体１３）に音声入出力ユニット２１を収容し易くなる。
また、筐体１３は、ヘッドレストステー１４を介して上下に移動自在であり、且つ、ヘッドレストステー１４に対して前後に傾動自在（図３中、傾動方向を矢印Ｋで示す）である。これによって、乗員Ｍの頭ＭＨの位置に合わせて筐体１３の位置を適切に調整可能である。
また、筐体１３は、ヘッドレストステー１４を介して上下に移動自在であり、且つ、ヘッドレストステー１４に対して前後に傾動自在（図３中、傾動方向を矢印Ｋで示す）である。これによって、乗員Ｍの頭ＭＨの位置に合わせて筐体１３の位置を適切に調整可能である。
左右一対のスピーカー２２は、筐体１３の前板部１３Ａに左右に間隔を空けて配置され、前方に向けて音を出力する。これらスピーカー２２には、上下方向に長い縦長のスピーカーが用いられる。これにより、乗員Ｍの頭ＭＨの位置が上下に変動しても、乗員Ｍの頭ＭＨに向けて音声を出力可能である。また、ヘッドレスト装置１１を上下させることによっても、乗員Ｍの体格の違いによって頭ＭＨの位置が異なったとしても、乗員Ｍの頭ＭＨに向けて音声を出力可能である。
また、複数のマイク２３は、左右のスピーカー２２の間に配置され、少なくともヘッドレスト前方の音を集音可能に設けられる。これらマイク２３の後方、且つ、左右のスピーカー２２の間に回路基板２４が配置されている。このようにして、マイク２３、回路基板２４及びスピーカー２２をコンパクトに配置し、全体の小型化が図られている。
また、複数のマイク２３は、左右のスピーカー２２の間に配置され、少なくともヘッドレスト前方の音を集音可能に設けられる。これらマイク２３の後方、且つ、左右のスピーカー２２の間に回路基板２４が配置されている。このようにして、マイク２３、回路基板２４及びスピーカー２２をコンパクトに配置し、全体の小型化が図られている。
なお、本実施形態では、回路基板２４にマイク２３が装着されているが、マイク２３を回路基板２４から離して設けるようにしても良い。
また、音声入出力ユニット２１は筐体１３の前側空間に収容されるので、筐体１３の角度が変わってもスピーカー２２及び各マイク２３を前方に向けたレイアウトを維持できる。
また、音声入出力ユニット２１は筐体１３の前側空間に収容されるので、筐体１３の角度が変わってもスピーカー２２及び各マイク２３を前方に向けたレイアウトを維持できる。
図４はヘッドレスト装置１１を乗員Ｍの頭ＭＨと共に上方から見た図である。
図４に示すように、ヘッドレスト装置１１の筐体１３の前方には、乗員Ｍの頭ＭＨが位置するので、左右一対のスピーカー２２の音を乗員Ｍの左右の耳へ向けて効率良く出力することができる。
複数（本構成では２個）のマイク２３は、左右に間隔を空けて同じ高さに配置されており、ヘッドレスト前方からの音をそれぞれ集音する。これらマイク２３自体は無指向性マイクが使用され、乗員Ｍの声を含む周囲の音を広く集音することができる。
図４に示すように、ヘッドレスト装置１１の筐体１３の前方には、乗員Ｍの頭ＭＨが位置するので、左右一対のスピーカー２２の音を乗員Ｍの左右の耳へ向けて効率良く出力することができる。
複数（本構成では２個）のマイク２３は、左右に間隔を空けて同じ高さに配置されており、ヘッドレスト前方からの音をそれぞれ集音する。これらマイク２３自体は無指向性マイクが使用され、乗員Ｍの声を含む周囲の音を広く集音することができる。
なお、乗員Ｍが話した際には、乗員Ｍの後頭部から首（頸椎）の範囲の皮膚を通して声帯の音声が後方に出ており、この音声を集音することにより乗員Ｍの声を的確に集音できる。また、本実施形態のマイク２３は左右に間隔を空けて配置されているので、特に左右からの音を異なる位相で集音することができ、左右の音を判別し易い。
図３に示すように、マイク２３前方の開口部（マイク開口部）２３Ｋは、音声入出力ユニット２１の設置角度やヘッドレストの角度調整位置が変わっても影響を受けないように、前方に行くほど拡径するすり鉢状の開口形状に形成されている。これによって、音声入出力ユニット２１がどのようなレイアウトやヘッドレストの調整角度であっても、乗員Ｍの後頭部から首の間で後方に発せられる乗員Ｍの音声などを拾い易くなり、様々な車種への展開がし易い。
図４に示すように、ヘッドレスト装置１１の左右両端部は、音を通さない音カット構造とされる。これにより、左右のスピーカー２２から後方などに漏れる音声がカットされ、マイク２３に入る音への影響を抑えることができる。なお、音カット構造は、スピーカー２２後方に吸音材を設ける等の公知の音カット構造を適用すれば良い。
図５は音声入出力ユニット２１の電気的構成を示すブロック図である。
回路基板２４は、コネクタ３１、３２、ＤＣ−ＤＣ変換器３３、通信部３４、音声処理部３５、アンプ３６、及びリモートコントロール３７を実装して構成されている。
コネクタ３１には、車両電源４１が供給されるとともに、乗員Ｍが操作する操作部４２の操作信号が入力される。また、他のコネクタ３２には、マイク２３がそれぞれ接続される。ＤＣ−ＤＣ変換器３３は、車両電源４１からの電力を所定の電力に直流変換し、音声入出力ユニット２１の各部に供給する。
回路基板２４は、コネクタ３１、３２、ＤＣ−ＤＣ変換器３３、通信部３４、音声処理部３５、アンプ３６、及びリモートコントロール３７を実装して構成されている。
コネクタ３１には、車両電源４１が供給されるとともに、乗員Ｍが操作する操作部４２の操作信号が入力される。また、他のコネクタ３２には、マイク２３がそれぞれ接続される。ＤＣ−ＤＣ変換器３３は、車両電源４１からの電力を所定の電力に直流変換し、音声入出力ユニット２１の各部に供給する。
通信部３４は、他の機器（不図示）と通信する通信装置として機能し、本実施形態では、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの通信規格に従った近距離無線通信を行う。この通信部３４は、受信結果を音声処理部３５に出力し、また、音声処理部３５を介して入力したマイク音声を他の機器に送信する。なお、通信は無線通信に限らず、有線通信でも良い。
他の機器は、例えば、携帯電話（スマートフォンを含む）、タブレット端末、カーオーディオ、及びカーナビゲーション装置などである。
他の機器は、例えば、携帯電話（スマートフォンを含む）、タブレット端末、カーオーディオ、及びカーナビゲーション装置などである。
音声処理部３５は、マイクアンプを備えた音響ＤＳＰ（Digital Signal Pocessor）で構成される。この音声処理部３５は、予め記憶された制御プログラムを実行することにより、現在の動作状態（動作モードなど）を判定する判定部、この音声入出力ユニット２１の各部を制御する制御部、及び、各種演算処理を行う演算処理部、各マイク２３からの入力音声を増幅する音声増幅部などとして機能する。この音声処理部３５及び通信部３４によって、後段に説明するように、他の機器と音声入出力ユニット２１との連係処理が実現される。
音声処理部３５が行う演算処理には、マイク入力のビームフォーミング制御（演算）処理、マイク入力のノイズレベルに応じた再生出力制御（スピーカー出力を間引く演算処理を含む）、頭部位置測定モードのテストトーン出力、マイク入力により距離演算処理、マイク音声の音声認識処理などがある。
音声処理部３５が行う演算処理には、マイク入力のビームフォーミング制御（演算）処理、マイク入力のノイズレベルに応じた再生出力制御（スピーカー出力を間引く演算処理を含む）、頭部位置測定モードのテストトーン出力、マイク入力により距離演算処理、マイク音声の音声認識処理などがある。
ビームフォーミング制御処理は、複数のマイク２３を有するマイクアレイ２３Ａの指向性を制御する処理である。より具体的には、音源から各マイク２３への音波伝搬がそれぞれ異なることに基づき特定の方向からの音を強調、或いは低減する。例えば、複数種類の指向性パターンを有し、パターンの切り替えや各パターンのパラメータの変更により、乗員Ｍの音声を高精度に集音する指向性パターンに切り替えたり、周囲の音声（ノイズなど）を高精度に集音する指向性パターンに切り替えたりする。
マイク入力のノイズレベルに応じた再生出力制御は、周囲ノイズの影響を小さくするように音量制御、或いは周波数制御する処理である。以下、各マイク２３を特に区別する必要がない場合はマイクアレイ２３Ａと表記する。
マイク入力のノイズレベルに応じた再生出力制御は、周囲ノイズの影響を小さくするように音量制御、或いは周波数制御する処理である。以下、各マイク２３を特に区別する必要がない場合はマイクアレイ２３Ａと表記する。
頭部位置測定モードは、スピーカー２２からテスト信号を出力し、マイクアレイ２３Ａで集音した反射音に基づき乗員Ｍの頭ＭＨの位置を測定するモードである。このモードでは、乗員Ｍの頭ＭＨとマイクアレイ２３Ａとの間の離間距離Ｌ１（図４参照）を算出する位置特定処理が実施される。この離間距離Ｌ１は、ビームフォーミング制御によって頭ＭＨにマイクアレイ２３Ａの指向性を制御する際に用いられる。
なお、これらの処理は公知の処理を広く適用することができる。これらによって、シート位置や乗員Ｍの体格、マイクアレイ２３Ａとの離間距離Ｌ１などの影響による乗員Ｍの集音音声の品質劣化や音声認識率の劣化を抑えることができる。
なお、これらの処理は公知の処理を広く適用することができる。これらによって、シート位置や乗員Ｍの体格、マイクアレイ２３Ａとの離間距離Ｌ１などの影響による乗員Ｍの集音音声の品質劣化や音声認識率の劣化を抑えることができる。
ところで、指向性などの精度を上げるために耳や頭の位置をセンサーで特定する構成にした場合、非常に複雑なシステムとなってしまい、大幅なコストアップを招いてしまう。また、乗員Ｍが顔を動かすことを考慮すると、顔の周りにアームなどでマイクアレイ２３Ａを設置した場合にマイクアレイ２３Ａなどが邪魔になるおそれがあり、エアバッグ動作時の影響を考慮する必要も生じる。
本実施形態では、乗員Ｍの頭ＭＨの後方にマイクアレイ２３Ａを配置し、マイクアレイ２３Ａの指向性を制御することによって乗員Ｍの声を集音することにより、部品点数の低減や構造の複雑化を抑え、乗員Ｍの顔の動きを阻害することなく、音声認識やハンズフリー通話などを実現できるようにしている。
本実施形態では、乗員Ｍの頭ＭＨの後方にマイクアレイ２３Ａを配置し、マイクアレイ２３Ａの指向性を制御することによって乗員Ｍの声を集音することにより、部品点数の低減や構造の複雑化を抑え、乗員Ｍの顔の動きを阻害することなく、音声認識やハンズフリー通話などを実現できるようにしている。
アンプ３６は、音声処理部３５の制御の下、通信部３４を介して取得した音声データに基づきスピーカー２２を駆動し、音声データに対応する音声をスピーカー２２から出力させる。このアンプ３６にデジタルアンプを適用することで、アンプ３６の小型化などが可能になる。
リモートコントロール３７は、操作部４２の操作信号に基づいて音声処理部３５の動作を制御する。操作部４２は、乗員Ｍの操作を受け付け、音声入出力ユニット２１の動作モードなどを切り替える。
リモートコントロール３７は、操作部４２の操作信号に基づいて音声処理部３５の動作を制御する。操作部４２は、乗員Ｍの操作を受け付け、音声入出力ユニット２１の動作モードなどを切り替える。
この動作モードには、乗員Ｍの頭ＭＨの位置（図４に示す離間距離Ｌ１）を測定する頭部位置測定モード、他の機器から送られた音声（楽曲やナビゲーション音声など）を再生する音声再生モード、乗員Ｍの発話音声を認識する発話モード、及び、携帯電話を用いたハンズフリー通話を実現する通話モードなどがある。
次に、この音声入出力ユニット２１の動作を説明する。
図６はマイクアレイ２３Ａの指向性に関する制御を示すフローチャートである。
この図に示すように、この音声入出力ユニット２１において、音声処理部３５は乗員（発話者）Ｍの音声を取得する所定の動作モードか否かを判定しており（ステップＳ１Ａ）、この判定結果に応じて、マイクアレイ２３Ａの指向性を変更する制御を行うようになっている（ステップＳ２Ａ、Ｓ４Ａ、Ｓ５Ａ）。
図６はマイクアレイ２３Ａの指向性に関する制御を示すフローチャートである。
この図に示すように、この音声入出力ユニット２１において、音声処理部３５は乗員（発話者）Ｍの音声を取得する所定の動作モードか否かを判定しており（ステップＳ１Ａ）、この判定結果に応じて、マイクアレイ２３Ａの指向性を変更する制御を行うようになっている（ステップＳ２Ａ、Ｓ４Ａ、Ｓ５Ａ）。
詳述すると、音声処理部３５は、乗員Ｍの音声を取得する動作モード（発話モード、通話モード）の場合（ステップＳ１Ａ；ＹＥＳ）、マイクアレイ２３Ａの指向性を乗員Ｍに向ける（ステップＳ２Ａ）。一方、音声処理部３５は、上記動作モードでない場合（ステップＳ１Ａ；ＮＯ）、音声再生モードか否かを判定し（ステップＳ３Ａ）、音声再生モードの場合（ステップＳ３Ａ；ＹＥＳ）、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向ける（ステップＳ４Ａ）。なお、マイクアレイ２３Ａの指向性制御を解除するか、乗員Ｍの左右外側へ向けるかは、ユーザ（乗員Ｍなど）が設定する初期設定などに従えば良い。
また、音声再生モードでない場合（ステップＳ３Ａ；ＮＯ）、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除する（ステップＳ５Ａ）。なお、指向性制御を解除した場合は無指向となる。
また、音声再生モードでない場合（ステップＳ３Ａ；ＮＯ）、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除する（ステップＳ５Ａ）。なお、指向性制御を解除した場合は無指向となる。
次いで、各動作モードのときのスピーカー２２及びマイクアレイ２３Ａに関する制御を説明する。
図７は頭部位置測定モード時の制御（位置特定処理）を示すフローチャートである。
頭部位置測定モードの場合、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除した後（ステップＳ５Ａ）、テスト信号（例えば、テストトーン）をスピーカー２２から出力させ（ステップＳ２Ｂ）、マイクアレイ２３Ａによりテスト信号の反射音を取得する（ステップＳ３Ｂ）。
この場合、スピーカー２２の音は、乗員Ｍの頭ＭＨで反射してマイクアレイ２３Ａに集音される。より具体的には、乗員Ｍの後頭部から首までのいずれかの範囲で反射したテスト信号の音などがマイクアレイ２３Ａに集音される。音声処理部３５は、マイク２３の入力音声から反射音を特定する処理を行うことにより、テスト信号の反射音を取得する。
図７は頭部位置測定モード時の制御（位置特定処理）を示すフローチャートである。
頭部位置測定モードの場合、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除した後（ステップＳ５Ａ）、テスト信号（例えば、テストトーン）をスピーカー２２から出力させ（ステップＳ２Ｂ）、マイクアレイ２３Ａによりテスト信号の反射音を取得する（ステップＳ３Ｂ）。
この場合、スピーカー２２の音は、乗員Ｍの頭ＭＨで反射してマイクアレイ２３Ａに集音される。より具体的には、乗員Ｍの後頭部から首までのいずれかの範囲で反射したテスト信号の音などがマイクアレイ２３Ａに集音される。音声処理部３５は、マイク２３の入力音声から反射音を特定する処理を行うことにより、テスト信号の反射音を取得する。
次に、音声処理部３５は、上記反射音の遅延時間（テスト信号を出力してからマイク２３に集音されるまでの時間）に基づいて、スピーカー２２の音が反射した箇所との距離、つまり、乗員Ｍの後頭部から首までの範囲との距離である離間距離Ｌ１を算出する（ステップＳ４Ｂ）。そして、音声処理部３５は、算出した離間距離Ｌ１の情報を不図示のメモリに記憶し（ステップＳ５Ｂ）、この離間距離Ｌ１の情報を、ビームフォーミング制御の指向性を設定するためのフォーミング制御情報に活用する（ステップＳ６Ｂ）。
すなわち、音声処理部３５は、マイクアレイ２３Ａの指向性を制御する際に、上記離間距離Ｌ１に基づいて、乗員Ｍの後頭部から首までの範囲からの音を効率良く集音できるようにマイクアレイ２３Ａの指向性を設定する。この指向性の設定は、複数の指向性パターンの中から最適な指向性パターンを選択する処理などの公知の制御を適用すれば良い。
すなわち、音声処理部３５は、マイクアレイ２３Ａの指向性を制御する際に、上記離間距離Ｌ１に基づいて、乗員Ｍの後頭部から首までの範囲からの音を効率良く集音できるようにマイクアレイ２３Ａの指向性を設定する。この指向性の設定は、複数の指向性パターンの中から最適な指向性パターンを選択する処理などの公知の制御を適用すれば良い。
なお、この頭部位置測定モードは、マイクアレイ２３Ａの指向性制御を行う動作モード（例えば、発話モードや通話モード）への移行前に行われる。例えば、発呼時や着信音が鳴っていて通話状態になる前などに行っても良い。
図８は音声再生モード時の制御を示すフローチャートである。
なお、音声再生モードは、他の機器から送られた音声（曲やナビゲーション音声など）を再生する動作モードであるため、スピーカー２２から対応する音声が出力される。
音声再生モードの場合、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向けた状態で（ステップＳ４Ａ）、マイクアレイ２３Ａの入力音声を取得する（ステップＳ２Ｃ）。
なお、音声再生モードは、他の機器から送られた音声（曲やナビゲーション音声など）を再生する動作モードであるため、スピーカー２２から対応する音声が出力される。
音声再生モードの場合、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向けた状態で（ステップＳ４Ａ）、マイクアレイ２３Ａの入力音声を取得する（ステップＳ２Ｃ）。
この入力音声は、周囲ノイズと、スピーカー出力の音声（反射音を含む）とを含む音声であり、音声処理部３５は、取得した音声からスピーカー出力分の音声を間引く演算処理を行うことにより周囲ノイズを抽出し、このノイズレベルの平均音圧を、実際のノイズレベルとして検出する（ステップＳ３Ｃ）。
音声処理部３５は、検出したノイズの情報（本実施形態ではノイズレベル）を不図示のメモリに記憶し（ステップＳ４Ｃ）、このノイズの情報に基づいてスピーカー出力の音量、及び音響特性を自動調整する（ステップＳ５Ｃ）。
音声処理部３５は、検出したノイズの情報（本実施形態ではノイズレベル）を不図示のメモリに記憶し（ステップＳ４Ｃ）、このノイズの情報に基づいてスピーカー出力の音量、及び音響特性を自動調整する（ステップＳ５Ｃ）。
自動調整の内容としては、例えば、ノイズレベルに予め定めた閾値以上の変化があった場合、一定のスロープで緩やかにボリュームレベルを調整する。また、ノイズレベルが大きいほど音量を増大し、ノイズレベルが下がったら音量を下げるシンプルな制御でも良いし、音響特性の制御として、ノイズレベルが大きいほど低域及び高域を増強して聞きやすくするイコライジング制御などを行うようにしても良い。
このステップＳ２Ｃ〜Ｓ５Ｃの処理を適宜に繰り返すことにより、音声再生モードの間、周囲ノイズのレベルを精度良く検出できるとともに、この周囲ノイズに応じた音声再生を行って乗員Ｍなどに聞きやすくすることができる。
なお、ノイズの情報として、ノイズレベルだけを記憶する場合に限らず、ノイズの周波数などの情報を記憶するようにしても良い。その場合、ノイズの周波数を音量制御や音響特性の制御に活用し、そのノイズの影響を抑制することが好ましい。
なお、ノイズの情報として、ノイズレベルだけを記憶する場合に限らず、ノイズの周波数などの情報を記憶するようにしても良い。その場合、ノイズの周波数を音量制御や音響特性の制御に活用し、そのノイズの影響を抑制することが好ましい。
図９は発話モード時の制御を示すフローチャートである。
前提として、音声処理部３５は、音声認識（又は音声操作）の開始を指示する発話スイッチが乗員Ｍなどにより操作されたことを検出すると、発話モードに移行する。
図９に示すように、音声処理部３５は、発話スイッチの操作を検出すると（ステップＳ１Ｄ）、頭部位置測定モードにて取得された離間距離Ｌ１に基づいて、マイクアレイ２３Ａの指向性を乗員Ｍ（後頭部から首までのいずれかの範囲）に向ける（ステップＳ２Ａ）。次いで、音声処理部３５は、マイクアレイ２３Ａの入力音声を取得し、ビームフォーミング制御により乗員Ｍからの音声を取得する（ステップＳ３Ｄ）。
前提として、音声処理部３５は、音声認識（又は音声操作）の開始を指示する発話スイッチが乗員Ｍなどにより操作されたことを検出すると、発話モードに移行する。
図９に示すように、音声処理部３５は、発話スイッチの操作を検出すると（ステップＳ１Ｄ）、頭部位置測定モードにて取得された離間距離Ｌ１に基づいて、マイクアレイ２３Ａの指向性を乗員Ｍ（後頭部から首までのいずれかの範囲）に向ける（ステップＳ２Ａ）。次いで、音声処理部３５は、マイクアレイ２３Ａの入力音声を取得し、ビームフォーミング制御により乗員Ｍからの音声を取得する（ステップＳ３Ｄ）。
このようにして取得した音声は、マイクアレイ２３Ａの指向性を乗員Ｍに向けているため、乗員Ｍの音声を確実に含む音声データではあるが、エンジン音などの周囲ノイズを含む可能性が高い。周囲ノイズの影響が大きい場合には高精度に音声認識できなくなる。
そこで、音声処理部３５は、音声再生モード時に取得した周囲ノイズの情報に基づいて、取得した音声（音声データ）から周囲ノイズを除去するノイズリダクション処理を行い（ステップＳ４Ｄ）、その後に音声認識処理を行う（ステップＳ５Ｄ）。
そこで、音声処理部３５は、音声再生モード時に取得した周囲ノイズの情報に基づいて、取得した音声（音声データ）から周囲ノイズを除去するノイズリダクション処理を行い（ステップＳ４Ｄ）、その後に音声認識処理を行う（ステップＳ５Ｄ）。
このように、マイクアレイ２３Ａの指向性を乗員Ｍに向け、且つ、周囲ノイズを除去して音声認識するので、乗員Ｍの声を高精度に取得でき、高精度に音声認識することができる。この音声認識処理の後、音声処理部３５は、音声認識結果を、通信部３４を介して他の機器に送信する（ステップＳ６Ｄ）。これにより、乗員Ｍの音声に基づいて他の機器を音声操作などすることができる。
その後、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向ける（ステップＳ７Ｄ）。
その後、音声処理部３５は、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向ける（ステップＳ７Ｄ）。
ここで、発話モード時であっても、ステップＳ７Ｄの後、音声処理部３５は、上述したステップＳ３Ｃ、Ｓ３Ｄに記載するような周囲ノイズの検出、及び記憶を行う。これにより、乗員Ｍの音声を取得しないタイミングを利用して効率良く周囲ノイズの情報を取得できる。これにより、メモリに記憶されるノイズの情報を最新の情報に更新できる。以上が発話モード時のスピーカー２２及びマイクアレイ２３Ａに関する制御である。
図１０は通話モード時の制御を示すフローチャートである。
前提として、音声処理部３５は、Ｂｌｕｅｔｏｏｔｈなどで通信接続された携帯電話が通話状態（発信又は着信状態）になったことを検出すると、通話モードに移行する。
図１０に示すように、音声処理部３５は、携帯電話が通話状態になったことを検出すると（ステップＳ１Ｅ）、記憶された離間距離Ｌ１に基づいて、マイクアレイ２３Ａの指向性を乗員Ｍ（後頭部から首までのいずれかの範囲）に向ける（ステップＳ２Ｅ）。このステップＳ２Ｅの処理は、上述したステップＳ２Ａの処理と同じである。
前提として、音声処理部３５は、Ｂｌｕｅｔｏｏｔｈなどで通信接続された携帯電話が通話状態（発信又は着信状態）になったことを検出すると、通話モードに移行する。
図１０に示すように、音声処理部３５は、携帯電話が通話状態になったことを検出すると（ステップＳ１Ｅ）、記憶された離間距離Ｌ１に基づいて、マイクアレイ２３Ａの指向性を乗員Ｍ（後頭部から首までのいずれかの範囲）に向ける（ステップＳ２Ｅ）。このステップＳ２Ｅの処理は、上述したステップＳ２Ａの処理と同じである。
次いで、音声処理部３５は、マイクアレイ２３Ａの入力音声を取得し、ビームフォーミング制御により乗員Ｍからの音声を効率良く取得する（ステップＳ３Ｅ）。このステップＳ３Ｅについても、上述したステップＳ３Ｄの処理と同じである。
なお、通話モードの場合、音声処理部３５の制御の下、電話の相手からの音声を通信部３４を介して取得し、スピーカー２２から出力する処理も並行して実行される。
なお、通話モードの場合、音声処理部３５の制御の下、電話の相手からの音声を通信部３４を介して取得し、スピーカー２２から出力する処理も並行して実行される。
ステップＳ３Ｅの処理の後、音声処理部３５は、エコーキャンセル処理、及びノイズリダクション処理を行う（ステップＳ４Ｅ）。エコーキャンセル処理は、マイクアレイ２３Ａがスピーカー２２から再生される音を集音することによって起こるエコーを消去する処理であり、公知の処理を広く適用可能である。
ノイズリダクション処理は、記憶された周囲ノイズの情報に基づいて、取得した音声（音声データ）から周囲ノイズを除去する処理であり、上述したステップ４Ｄの処理と同じである。これによって、周囲ノイズを除去した乗員Ｍの音声を取得できる。
ノイズリダクション処理は、記憶された周囲ノイズの情報に基づいて、取得した音声（音声データ）から周囲ノイズを除去する処理であり、上述したステップ４Ｄの処理と同じである。これによって、周囲ノイズを除去した乗員Ｍの音声を取得できる。
そして、音声処理部３５は、エコーキャンセル処理、及びノイズリダクション処理を行った後の音声のデータを、通信部３４を介して携帯電話に送信する（ステップＳ５Ｅ）。これによって、エコーが無くノイズが除去された乗員Ｍの音声を電話の相手先に送ることができる。
その後、音声処理部３５は、Ｂｌｕｅｔｏｏｔｈなどで通信接続された携帯電話の通話状態の解除を検出すると（ステップＳ６Ｅ）、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向ける（ステップＳ７Ｅ）。
その後、音声処理部３５は、Ｂｌｕｅｔｏｏｔｈなどで通信接続された携帯電話の通話状態の解除を検出すると（ステップＳ６Ｅ）、マイクアレイ２３Ａの指向性制御を解除し、或いは、マイクアレイ２３Ａの指向性を乗員Ｍの外側である左右に向ける（ステップＳ７Ｅ）。
ここで、通話モードであっても、発話モードの場合と同様に、マイクアレイ２３Ａの指向性を乗員Ｍの外側に向けたステップＳ７Ｅの後、音声処理部３５は、上述したステップＳ３Ｃ、Ｓ３Ｄに記載するような周囲ノイズの検出、及び記憶を行う。これにより、乗員Ｍの音声を取得しないタイミングを利用して効率良く周囲ノイズの情報を取得できる。これにより、メモリに記憶されるノイズの情報を最新の情報に更新できる。以上が通話モード時のスピーカー２２及びマイクアレイ２３Ａに関する制御である。
以上説明したように、本実施形態に係るヘッドレスト装置１１は、音声処理部３５が、発話者である乗員Ｍの音声を取得する状態（「第１状態」という）として、乗員Ｍの音声を取得する動作モード（発話モード、通話モード）か否かを判定する判定部として機能するとともに（図６のステップＳ１Ａ参照）と、第１状態ではない第２状態として、他の動作モード（音声再生モード、頭部位置測定モード）であった場合に、マイクアレイ２３Ａの指向性を乗員Ｍの外側、又は無指向に設定してマイクアレイ２３Ａの入力音声を取得し、第１状態の動作モードの場合に、マイクアレイ２３Ａの指向性を乗員Ｍに向ける制御部として機能する。
これにより、マイクアレイ２３Ａの指向性を乗員Ｍの外側、又は無指向に設定したときの入力音声に基づいて、発話時の音声処理に役立つ情報である周囲ノイズや乗員Ｍの位置情報を得ることが可能になる。この得た情報を用いて、発話時に周囲ノイズの除去や指向性制御などの音声処理を行うことが可能となり、専用の位置検出器などが不要である。従って、部品点数の低減や構造の複雑化を抑えつつ、乗員Ｍの音声を高精度に取得し易くなる。
しかも、マイクアレイ２３Ａは発話者である乗員Ｍの後方に配置され、音声処理部３５は、上記第１状態の動作モード（発話モード、通話モード）の場合に、マイクアレイ２３Ａの指向性を乗員Ｍの後頭部から首までの範囲に設定するので、乗員Ｍの後方にて乗員Ｍの音声を効率良く取得できる。
また、音声処理部３５は、第２状態の動作モード（音声再生モード）で取得した入力音声に基づいて周囲ノイズを取得し（図８参照）、第１状態の動作モード（発話モード、通話モード）の場合に、マイクアレイ２３Ａの入力音声から周囲ノイズを除去するノイズリダクション処理（ノイズ除去処理）を行うので、周囲ノイズを高精度且つ容易に取得し易く、十分なノイズ除去をし易くなる。
また、音声処理部３５は、第２状態の動作モード（音声再生モード）で取得した入力音声に基づいて周囲ノイズを取得し（図８参照）、第１状態の動作モード（発話モード、通話モード）の場合に、マイクアレイ２３Ａの入力音声から周囲ノイズを除去するノイズリダクション処理（ノイズ除去処理）を行うので、周囲ノイズを高精度且つ容易に取得し易く、十分なノイズ除去をし易くなる。
また、音声処理部３５及びアンプ３６は、スピーカー２２を介して音声を出力する音声出力部として機能し、乗員Ｍの音声を取得する発話モードと、スピーカー２２を介して音声を出力するとともに乗員Ｍの音声を取得する通話モードの場合であっても、乗員Ｍの音声を取得しない状態（第２状態に相当）のときに、マイクアレイ２３Ａの指向性を乗員Ｍの外側、又は無指向に設定してマイクアレイ２３Ａの入力音声を取得し（図９のステップＳ７Ｄ、図１０のステップＳ７Ｅなど）、周囲ノイズの検出、及び記憶を行う。これにより、乗員Ｍの音声を取得する動作モードのときでも周囲ノイズを取得でき、最新の周囲ノイズを得やすくなる。
また、スピーカー２２及びマイクアレイ２３Ａを用いて乗員Ｍの位置を特定する頭部位置特定モードの場合（第２状態に相当）にも、マイクアレイ２３Ａを無指向に設定してマイクアレイ２３Ａの入力音声を取得するので、乗員Ｍで反射した反射音を取得して乗員Ｍの位置情報を精度良く取得できる。この位置情報を用いることにより、乗員Ｍの音声を高精度に取得可能にマイクアレイ２３Ａの指向性を制御できる。
また、マイクアレイ２３Ａとスピーカー２２は、乗員Ｍの後方に配置される筐体１３に配置されているので、専用の位置検出器などが不要で、優れた集音性能と音声出力機能を備えるコンパクトな装置を提供できる。
しかも、筐体１３は、ヘッドレストであるため、既存のヘッドレストのスペースを利用してマイクアレイ２３Ａとスピーカー２２を配置できる。
しかも、筐体１３は、ヘッドレストであるため、既存のヘッドレストのスペースを利用してマイクアレイ２３Ａとスピーカー２２を配置できる。
（第２実施形態）
第２実施形態のヘッドレスト装置１１は、スピーカー２２を介して音声を出力する動作モード（音声出力モード）のときに、音声処理部３５の制御の下、超音波の信号をテスト信号としてスピーカー２２から出力し、このテスト信号の反射音をマイクアレイ２３Ａを介して取得し、この反射音に基づいて乗員Ｍの位置を特定する位置特定処理を行う。この位置特定処理を行うこと以外は、第１実施形態と同様である。
上記音声出力モードは、例えば、他の機器から送られた音声（楽曲やナビゲーション音声など）を再生する音声再生モード、及び通話モード、或いは、いずれか一方のモードでも良い。
第２実施形態のヘッドレスト装置１１は、スピーカー２２を介して音声を出力する動作モード（音声出力モード）のときに、音声処理部３５の制御の下、超音波の信号をテスト信号としてスピーカー２２から出力し、このテスト信号の反射音をマイクアレイ２３Ａを介して取得し、この反射音に基づいて乗員Ｍの位置を特定する位置特定処理を行う。この位置特定処理を行うこと以外は、第１実施形態と同様である。
上記音声出力モードは、例えば、他の機器から送られた音声（楽曲やナビゲーション音声など）を再生する音声再生モード、及び通話モード、或いは、いずれか一方のモードでも良い。
超音波の信号は可聴域外であるため、乗員Ｍには認識されず、また、指向性が鋭く反射音も正確に測定し易い。これにより、曲再生やハンズフリー通話などを行いながら乗員Ｍの位置を精度良く特定でき、且つ、乗員Ｍに不快感も与えることもない。これにより、第１実施形態の各種効果に加え、乗員Ｍに聞かせる音声を出力しながら乗員Ｍの位置を高精度に取得可能になる。
さらに、乗員Ｍの位置を任意のタイミングで特定できるようになり、最新の情報を得やすくなる。従って、乗員Ｍの位置に基づくスピーカー２２の指向性制御を精度良く行うことが可能である。
さらに、乗員Ｍの位置を任意のタイミングで特定できるようになり、最新の情報を得やすくなる。従って、乗員Ｍの位置に基づくスピーカー２２の指向性制御を精度良く行うことが可能である。
なお、超音波の信号には、スピーカー２２が出力可能な超音波帯域を用いれば良いが、近年の楽曲には可聴帯域外の音が含まれることがあるため、楽曲に使用される周波数帯域外の周波数を用いることが好ましい。また、この位置特定処理は、第１実施形態の頭部位置測定モードの代わりに行えばよいので、頭部位置測定モードを省略することが可能である。
上述した実施形態は、あくまでも本発明の一実施の態様を例示するものであって、本発明の趣旨を逸脱しない範囲で任意に変形、及び応用が可能である。
例えば、マイクアレイ２３Ａのマイク２３の数は２個に限らず、また、スピーカー２２についても、低音用或いは高音用のスピーカーを追加しても良い。
また、ヘッドレストとして機能するヘッドレスト装置１１、及びその制御方法に本発明を適用する場合を説明したが、ヘッドレストとして機能する装置に限らず、複数のマイク２３を並べたマイクアレイ２３Ａの指向性を制御可能な集音装置、及びその制御方法に本発明を広く適用可能である。
例えば、マイクアレイ２３Ａのマイク２３の数は２個に限らず、また、スピーカー２２についても、低音用或いは高音用のスピーカーを追加しても良い。
また、ヘッドレストとして機能するヘッドレスト装置１１、及びその制御方法に本発明を適用する場合を説明したが、ヘッドレストとして機能する装置に限らず、複数のマイク２３を並べたマイクアレイ２３Ａの指向性を制御可能な集音装置、及びその制御方法に本発明を広く適用可能である。
また、上述した各実施形態では、上記制御を行うための制御プログラムをヘッドレスト装置１１に予め記憶しておく場合を説明したが、これに限らず、この制御プログラムを、磁気記録媒体、光記録媒体、半導体記録媒体などのコンピューターが読み取り可能な記録媒体に格納し、コンピューターが記録媒体からこの制御プログラムを読み取って実行するようにしても良い。また、この制御プログラムを、通信ネットワーク（電気通信回線）を介して配信サーバーなどからダウンロードできるようにしてもよい。
１１ ヘッドレスト装置（集音装置）
１３ 筐体
２１ 音声入出力ユニット
２２ スピーカー
２３ マイク
２３Ａ マイクアレイ
３４ 通信部
３５ 音声処理部（判定部、制御部）
３６ アンプ
１３ 筐体
２１ 音声入出力ユニット
２２ スピーカー
２３ マイク
２３Ａ マイクアレイ
３４ 通信部
３５ 音声処理部（判定部、制御部）
３６ アンプ
Claims (9)
- 複数のマイクを並べたマイクアレイの指向性を制御可能な集音装置において、
発話者の音声を取得する第１状態か否かを判定する判定部と、
前記第１状態ではない第２状態の場合に、前記マイクアレイの指向性を前記発話者の外側、又は無指向に設定して前記マイクアレイの入力音声を取得し、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者に向ける制御部と
を備えることを特徴とする集音装置。 - 前記マイクアレイは前記発話者の後方に配置され、
前記制御部は、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者の後頭部から首までの範囲に設定することを特徴とする請求項１に記載の集音装置。 - 前記制御部は、前記第２状態で取得した前記入力音声に基づいて周囲ノイズを取得し、前記第１状態の場合に、前記マイクアレイの入力音声から前記周囲ノイズを除去するノイズ除去処理を行うことを特徴とする請求項１又は２に記載の集音装置。
- 前記集音装置は、所定のスピーカーを介して音声を出力する音声出力部を有するとともに、動作モードとして、前記発話者の音声を取得する発話モードと、前記スピーカーを介して音声を出力するとともに前記発話者の音声を取得する通話モードとを備え、
前記第２状態は、前記発話モード、及び前記通話モードにおける前記発話者の音声を取得しない状態を含むことを特徴とする請求項１乃至３のいずれか一項に記載の集音装置。 - 前記動作モードとして、前記スピーカーから出力されて前記発話者で反射した反射音を取得し、前記反射音に基づいて前記発話者の位置を特定する位置特定モードを備え、
前記第２状態は、前記位置特定モードの状態を含み、
前記第１状態では、前記位置特定モードで特定した前記発話者の位置に応じて前記マイクアレイの指向性を制御することを特徴とする請求項４に記載の集音装置。 - 前記音声出力部は、前記スピーカーを介して音声を出力する音声出力モードのときに、超音波の信号を前記スピーカーから出力してその反射音を取得し、前記反射音に基づいて前記発話者の位置を特定する位置特定処理を行うことを特徴とする請求項４に記載の集音装置。
- 前記マイクアレイと前記スピーカーは、前記発話者の後方に配置される筐体に配置されていることを特徴とする請求項４乃至６のいずれか一項に記載の集音装置。
- 前記筐体は、ヘッドレストであることを特徴とすることを特徴とする請求項７に記載の集音装置。
- 複数のマイクを並べたマイクアレイの指向性を制御可能な集音装置の制御方法において、
発話者の音声を取得する第１状態か否かを判定するステップと、
前記第１状態ではない第２状態の場合に、前記マイクアレイの指向性を前記発話者の外側、又は無指向に設定して前記マイクアレイの入力音声を取得し、前記第１状態の場合に、前記マイクアレイの指向性を前記発話者に向けるステップとを実行することを特徴とする集音装置の制御方法。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015111657A JP6611474B2 (ja) | 2015-06-01 | 2015-06-01 | 集音装置、及び集音装置の制御方法 |
| US15/574,008 US10237648B2 (en) | 2015-06-01 | 2016-06-01 | Sound collecting device, and method of controlling sound collecting device |
| EP16803379.3A EP3306950B1 (en) | 2015-06-01 | 2016-06-01 | Sound collecting device, and method of controlling sound collecting device |
| PCT/JP2016/066181 WO2016194945A1 (ja) | 2015-06-01 | 2016-06-01 | 集音装置、及び集音装置の制御方法 |
| CN201680031579.5A CN108141663B (zh) | 2015-06-01 | 2016-06-01 | 集音装置以及集音装置的控制方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015111657A JP6611474B2 (ja) | 2015-06-01 | 2015-06-01 | 集音装置、及び集音装置の制御方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016225884A true JP2016225884A (ja) | 2016-12-28 |
| JP6611474B2 JP6611474B2 (ja) | 2019-11-27 |
Family
ID=57440639
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015111657A Active JP6611474B2 (ja) | 2015-06-01 | 2015-06-01 | 集音装置、及び集音装置の制御方法 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US10237648B2 (ja) |
| EP (1) | EP3306950B1 (ja) |
| JP (1) | JP6611474B2 (ja) |
| CN (1) | CN108141663B (ja) |
| WO (1) | WO2016194945A1 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019075598A (ja) * | 2017-10-12 | 2019-05-16 | クラリオン株式会社 | 感度調整装置、車載システム、車用ヘッドレスト及び信号処理装置 |
| JP2021190986A (ja) * | 2020-05-29 | 2021-12-13 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 超音波レーダアレイ、障害物検出方法及びシステム |
| WO2023228961A1 (ja) * | 2022-05-24 | 2023-11-30 | テイ・エス テック株式会社 | 乗り物用シート |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20190039960A (ko) * | 2016-08-18 | 2019-04-16 | 사운드6디 에스.알.엘. | 다차원 음향 효과를 재생하기 위한 라우드 스피커를 포함하는 머리 받침대 및 시스템 |
| JP6760394B2 (ja) * | 2016-12-02 | 2020-09-23 | ヤマハ株式会社 | コンテンツ再生機器、収音機器、及びコンテンツ再生システム |
| US11489691B2 (en) | 2017-07-12 | 2022-11-01 | Universal Electronics Inc. | Apparatus, system and method for directing voice input in a controlling device |
| US10930276B2 (en) * | 2017-07-12 | 2021-02-23 | Universal Electronics Inc. | Apparatus, system and method for directing voice input in a controlling device |
| US10111000B1 (en) * | 2017-10-16 | 2018-10-23 | Tp Lab, Inc. | In-vehicle passenger phone stand |
| WO2019130282A1 (en) * | 2017-12-29 | 2019-07-04 | Harman International Industries, Incorporated | Acoustical in-cabin noise cancellation system for far-end telecommunications |
| CN110556103B (zh) * | 2018-05-31 | 2023-05-30 | 阿里巴巴集团控股有限公司 | 音频信号处理方法、装置、系统、设备和存储介质 |
| CN110843628B (zh) * | 2018-08-21 | 2023-06-20 | 安道拓(重庆)汽车部件有限公司 | 用于汽车座椅的可调式扬声装置 |
| JP7115216B2 (ja) * | 2018-10-24 | 2022-08-09 | トヨタ自動車株式会社 | 情報処理装置および情報処理方法 |
| CN110223711B (zh) * | 2019-06-03 | 2021-06-01 | 清华大学 | 基于麦克风信号的语音交互唤醒电子设备、方法和介质 |
| KR102282104B1 (ko) * | 2019-08-07 | 2021-07-27 | 엘지전자 주식회사 | 로봇 |
| FR3116934B1 (fr) | 2020-11-27 | 2023-05-19 | Faurecia Clarion Electronics Europe | Procédé et système de traitement audio pour un système audio d’appui-tête de siège |
| JP2023020431A (ja) * | 2021-07-30 | 2023-02-09 | パナソニックＩｐマネジメント株式会社 | スピーカシステム、移動体用のシート、及び、移動体 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005352732A (ja) * | 2004-06-10 | 2005-12-22 | Denso Corp | 車両用制御装置およびその装置を備える車両用制御システム |
| WO2009019748A1 (ja) * | 2007-08-03 | 2009-02-12 | Fujitsu Limited | 受音装置、指向特性導出方法、指向特性導出装置及びコンピュータプログラム |
| JP2010045574A (ja) * | 2008-08-12 | 2010-02-25 | Sony Corp | ハンズフリー通話装置、ハンズフリー通話機能付き音響再生装置、ハンズフリー通話方法 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4692803B2 (ja) | 2001-09-28 | 2011-06-01 | ソニー株式会社 | 音響処理装置 |
| JP2010010749A (ja) | 2008-06-24 | 2010-01-14 | Panasonic Corp | マイクロホン装置 |
| US8325938B2 (en) * | 2008-08-12 | 2012-12-04 | Sony Corporation | Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method |
| CN201659937U (zh) * | 2010-03-12 | 2010-12-01 | 东风汽车有限公司 | 一种带有误差麦克风的汽车座椅 |
| KR101103794B1 (ko) * | 2010-10-29 | 2012-01-06 | 주식회사 마이티웍스 | 멀티 빔 음향시스템 |
| US8737634B2 (en) * | 2011-03-18 | 2014-05-27 | The United States Of America As Represented By The Secretary Of The Navy | Wide area noise cancellation system and method |
| CN105745119B (zh) | 2013-11-19 | 2020-05-12 | 歌乐株式会社 | 头枕装置以及声音采集装置 |
-
2015
- 2015-06-01 JP JP2015111657A patent/JP6611474B2/ja active Active
-
2016
- 2016-06-01 WO PCT/JP2016/066181 patent/WO2016194945A1/ja active Application Filing
- 2016-06-01 CN CN201680031579.5A patent/CN108141663B/zh active Active
- 2016-06-01 EP EP16803379.3A patent/EP3306950B1/en active Active
- 2016-06-01 US US15/574,008 patent/US10237648B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005352732A (ja) * | 2004-06-10 | 2005-12-22 | Denso Corp | 車両用制御装置およびその装置を備える車両用制御システム |
| WO2009019748A1 (ja) * | 2007-08-03 | 2009-02-12 | Fujitsu Limited | 受音装置、指向特性導出方法、指向特性導出装置及びコンピュータプログラム |
| JP2010045574A (ja) * | 2008-08-12 | 2010-02-25 | Sony Corp | ハンズフリー通話装置、ハンズフリー通話機能付き音響再生装置、ハンズフリー通話方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019075598A (ja) * | 2017-10-12 | 2019-05-16 | クラリオン株式会社 | 感度調整装置、車載システム、車用ヘッドレスト及び信号処理装置 |
| JP2021190986A (ja) * | 2020-05-29 | 2021-12-13 | ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド | 超音波レーダアレイ、障害物検出方法及びシステム |
| JP7174030B2 (ja) | 2020-05-29 | 2022-11-17 | 阿波▲羅▼智▲聯▼（北京）科技有限公司 | 超音波レーダアレイ、障害物検出方法及びシステム |
| US11631420B2 (en) | 2020-05-29 | 2023-04-18 | Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. | Voice pickup method for intelligent rearview mirror, electronic device and storage medium |
| WO2023228961A1 (ja) * | 2022-05-24 | 2023-11-30 | テイ・エス テック株式会社 | 乗り物用シート |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3306950A4 (en) | 2019-01-02 |
| CN108141663A (zh) | 2018-06-08 |
| JP6611474B2 (ja) | 2019-11-27 |
| CN108141663B (zh) | 2020-05-12 |
| EP3306950A1 (en) | 2018-04-11 |
| WO2016194945A1 (ja) | 2016-12-08 |
| EP3306950B1 (en) | 2020-07-08 |
| US10237648B2 (en) | 2019-03-19 |
| US20180295443A1 (en) | 2018-10-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6611474B2 (ja) | 集音装置、及び集音装置の制御方法 | |
| US8325938B2 (en) | Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method | |
| CN101651732B (zh) | 免持通话装置和方法及具有免持通话功能的声学再现装置 | |
| JP2017083600A (ja) | 車載収音装置及び収音方法 | |
| US11729549B2 (en) | Voice ducking with spatial speech separation for vehicle audio system | |
| JP7312180B2 (ja) | 遠端電気通信のための車室内音響雑音消去システム | |
| KR20200101363A (ko) | 파-엔드 텔레통신을 위한 음향 캐빈내 노이즈 제거 시스템 | |
| EP2482566B1 (en) | Method for generating an audio signal | |
| JP2017069806A (ja) | スピーカアレイ装置 | |
| JP2006211365A (ja) | ハンズフリー装置、ナビゲーション装置及び割り込み着信通知方法 | |
| JP2017069805A (ja) | 車載音響装置 | |
| CN114598962A (zh) | 飞机上确定位置并操控换能器波束至该位置的麦克风阵列 | |
| US20100226506A1 (en) | Headrest sound system | |
| JP5405130B2 (ja) | 音再生装置および音再生方法 | |
| JP3207666B2 (ja) | 車載用音響装置 | |
| US20220189450A1 (en) | Audio processing system and audio processing device | |
| JP2005328116A (ja) | 車載システム | |
| JP2010062641A (ja) | 通知装置 | |
| US11765506B2 (en) | Automobile audio system | |
| JP2020053751A (ja) | 聴覚支援システム、出力制御装置、及び電子機器 | |
| WO2010109614A1 (ja) | 音声信号処理装置及び音声信号処理方法 | |
| JP2001095646A (ja) | ヘッドレスト | |
| JP2022065704A (ja) | 音声システム | |
| JP3190554U (ja) | 車内会話装置 | |
| CN116132564A (zh) | 驾驶座舱蓝牙电话的输出方法、驾驶座舱系统和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180406 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190326 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190516 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191008 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191029 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6611474 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |