WO2015151131A1 - Directivity control device, directivity control method, storage medium, and directivity control system - Google Patents

Directivity control device, directivity control method, storage medium, and directivity control system Download PDF

Info

Publication number
WO2015151131A1
WO2015151131A1 PCT/JP2014/001899 JP2014001899W WO2015151131A1 WO 2015151131 A1 WO2015151131 A1 WO 2015151131A1 JP 2014001899 W JP2014001899 W JP 2014001899W WO 2015151131 A1 WO2015151131 A1 WO 2015151131A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
sound
sound collection
directivity control
directivity
Prior art date
Application number
PCT/JP2014/001899
Other languages
French (fr)
Japanese (ja)
Inventor
信一 重永
渡辺　周一
牧　直史
昭年 泉
林　和典
徳田　肇道
正治郎 松尾
裕隆 澤
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Priority to CN201480045463.8A priority Critical patent/CN105706462B/en
Priority to JP2015526802A priority patent/JP6145736B2/en
Priority to PCT/JP2014/001899 priority patent/WO2015151131A1/en
Publication of WO2015151131A1 publication Critical patent/WO2015151131A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones

Definitions

  • An object of the present invention is to provide a directivity control device, a directivity control method, and a directivity control system that suppress the deterioration in efficiency of a person's monitoring work.
  • 2A to 2E are external views of the housing of the omnidirectional microphone array apparatus 2.
  • FIG. The omnidirectional microphone array devices 2C, 2A, 2B, 2 and 2D shown in FIGS. 2A to 2E differ in appearance and arrangement positions of a plurality of microphone units, but the functions of the omnidirectional microphone array devices are the same. is there.
  • the operation unit 32 receives the coordinate data of the designated position designated by the supervisor's finger 95 from the image data displayed on the display device 35 (that is, image data taken by the camera device 1). Output to. In addition, when the operation unit 32 instructs execution of zoom-in processing or zoom-out processing by input operation with the finger 95 in the image data displayed on the display device 35, the operation unit 32 instructs zoom-in processing or zoom-out processing. The contents are output to the signal processing unit 34.
  • the recorder device 4 stores the image data picked up by the camera device 1 and the sound data of the sound collected by the omnidirectional microphone array device 2 in association with each other.
  • the zoom interlocking control unit 34 c indicates whether or not to adjust the directivity (beam width in the directing direction) and the volume level of the audio data in conjunction with the zoom-in process or zoom-out process of the camera device 1. It is determined whether or not the flag is on (S1). The zoom interlocking control unit 34c stores the contents of the zoom interlocking flag in the zoom interlocking control unit 34c itself or the memory 37, thereby determining whether the zoom interlocking flag is on or off. If it is determined that the zoom interlocking flag is off (S1, NO), the operation of the directivity control device 3 shown in FIG. 6 ends.
  • the omnidirectional A directivity control system in which an additional microphone unit is coupled around the microphone array device 2 will be described.
  • the configuration other than the additional microphone unit described later is the same as that of the directivity control system 10 of the first embodiment, and thus the description regarding the same contents is simplified. Different contents will be described.
  • FIG. 12 (A) as a third example of the additional microphone section, there is an opening that surrounds the omnidirectional microphone array device 2 and a rectangular housing (for example, a square or rectangular housing).
  • An extension microphone unit 2z3 having the function of is shown. Specifically, the extension microphone unit 2z3 and the omnidirectional microphone array device 2 are not coupled on the same plane, and are installed apart in the height direction (vertical direction) as shown in FIG. .
  • the omnidirectional microphone array device 2 and the camera device 1 are removed from the ceiling surface 8, and the additional microphone part 2z3 is attached to the ceiling surface 8 and fixed by screws 41 via screw holes 7ed1, 7ed2, Thereafter, the omnidirectional microphone array device 2 is attached so as to be separated from the extension microphone portion 2z3 in the height direction, and the omnidirectional microphone array device 2 and the extension microphone portion 2z3 are fixed by screws 41 via screw holes 7ea1 and 7ea2.
  • the omnidirectional microphone array device 2 and the additional microphone part 2z3 may be attached to be fixed to the ceiling surface 8, and may be fixed by screws 41 via screw holes 7ea1 and 7ea2, respectively.
  • FIG. 13B as a fifth example of the additional microphone section, an additional microphone section 2z4a having a casing having the same honeycomb shape as that shown in FIG. 13A is shown, and the omnidirectional microphone array apparatus is shown.
  • the shape of the housing of 2s is also different from the shape of the housing of the omnidirectional microphone array apparatus 2, and is a rectangular shape.
  • the extension microphone part 2z4a does not have the opening part of the extension microphone part 2z4 shown in FIG.
  • a fisheye camera (camera device) 1s using a fisheye lens is attached to the center of the omnidirectional microphone array device 2s.
  • FIG. 15A is a plan view showing a state where the omnidirectional microphone array apparatus 2 and the ceiling mounting sheet metal 7z shown in FIG. 14B are attached.
  • 15B shows a cross section taken along the line EE of FIG. 15A, and a side view showing a state in which the additional microphone parts 2z5a and 2z5c are attached around the omnidirectional microphone array apparatus 2 shown in FIG. 14B.
  • FIG. 15A is a plan view showing a state where the omnidirectional microphone array apparatus 2 and the ceiling mounting sheet metal 7z shown in FIG. 14B are attached.
  • 15B shows a cross section taken along the line EE of FIG. 15A, and a side view showing a state in which the additional microphone parts 2z5a and 2z5c are attached around the omnidirectional microphone array apparatus 2 shown in FIG. 14B.
  • FIG. 15A is a plan view showing a state where the omnidirectional microphone array apparatus 2 and the ceiling mounting sheet metal 7z shown in FIG. 14B are attached.
  • 15B shows a
  • 17D is a side view showing an eleventh example (skeleton type coupling) in which the additional microphone units m1, m2, m3, m4, m5, m6, m7, and m8 are coupled around the omnidirectional microphone array apparatus 2. is there.
  • a second sound collecting unit having a rectangular housing that is the same as the first sound collecting unit is further provided, and the first sound collecting unit and the second sound collecting unit are provided.
  • the casing is provided with an intermediate side connecting part in which a semicircular concave surface is formed at the intermediate side part, and an end connecting part in which a quarter circular concave surface is formed at both ends. Sex control system.
  • the directivity control system is further provided with the second sound collection unit having an elliptical housing.
  • the elliptical longitudinal direction of the second sound collection unit is other than the elliptical longitudinal direction.
  • More sound collecting elements microphone elements
  • the sound collecting characteristics of the sound are made uniform compared to the sound collecting characteristics of the sound when the first sound collecting unit is used alone.
  • an embodiment of the present invention is the directivity control system in which the second sound collection unit has at least one rod-shaped casing around the first sound collection unit.

Landscapes

  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

　A directivity control device controls the directivity of a sound picked up by a sound pickup unit including a plurality of microphones. A beam formation unit forms a beam in a direction from the sound pickup unit to a sound source corresponding to a position designated on an image on a display unit. A magnification setting unit sets magnification for enlarging or shrinking the image on the display unit in response to input. The beam formation unit also changes the size of the formed beam in accordance with the magnification set by the magnification setting unit.

Description

指向性制御装置、指向性制御方法、記憶媒体及び指向性制御システムDirectivity control device, directivity control method, storage medium, and directivity control system
　本発明は、音声の指向性を制御する指向性制御装置、指向性制御方法、記憶媒体及び指向性制御システムに関する。 The present invention relates to a directivity control device, a directivity control method, a storage medium, and a directivity control system that control the directivity of speech.
　従来、工場、店舗（例えば小売店、銀行）或いは公共の場（例えば図書館）の既定位置（例えば天井面）に設置される監視システムでは、ネットワークを介して１つ以上のカメラ装置（例えばＰＴＺカメラ装置、全方位カメラ装置）を接続し、監視対象範囲の映像の画像データ（静止画像及び動画像を含む。以下同様。）の広画角化が図られている。 Conventionally, in a surveillance system installed at a predetermined position (for example, a ceiling surface) of a factory, a store (for example, a retail store, a bank) or a public place (for example, a library), one or more camera devices (for example, PTZ cameras) are connected via a network. Device, an omnidirectional camera device) are connected, and a wide angle of view of image data (including still images and moving images; the same applies hereinafter) of video in the monitoring target range is achieved.
　また、映像を用いた監視では得られる情報量が限られるので、１つ以上のカメラ装置以外にマイクアレイ装置を用いることにより、カメラ装置の画角内に存在する特定の監視対象（例えば人物）の発する音声データが得られる監視システムの要請が高い。このような監視システムにおいて、監視者が特定の監視対象の発する音声データを聴きたい場合には、カメラ装置により撮像された映像の画像データとマイクアレイ装置により撮像された音声の音声データとの同期が確立している必要がある。 In addition, since the amount of information obtained by monitoring using video is limited, by using a microphone array device in addition to one or more camera devices, a specific monitoring target (for example, a person) existing within the angle of view of the camera device There is a high demand for a monitoring system that can obtain voice data from In such a monitoring system, when the supervisor wants to listen to audio data emitted by a specific monitoring target, synchronization between the image data of the video imaged by the camera device and the audio data of the audio imaged by the microphone array device Need to be established.
　ここで、カメラ装置により撮像された映像の画像データとマイクアレイ装置により撮像された音声の音声データとの同期を確立する先行技術として、特許文献１に示す信号処理装置が知られている。 Here, as a prior art for establishing synchronization between video image data captured by a camera device and audio data captured by a microphone array device, a signal processing device disclosed in Patent Document 1 is known.
　特許文献１に示す信号処理装置は、撮影者による被写体のズーム操作の結果に応じて、撮像部により撮像された被写体までの距離を算出し、算出された距離に応じて、マイクロホンユニットにより収音された音声を強調する。更に、信号処理装置は、撮影者による被写体までの距離に応じて、撮像部により撮像された映像信号、又はマイクロホンユニットにより収音された音声信号のいずれかを遅延させる。これにより、信号処理装置は、撮影者によって被写体がズーム操作されても、被写体までの距離に応じて映像信号又は音声信号のいずれかを遅延させるので、映像信号と音声信号との同期を確立できる。 The signal processing apparatus disclosed in Patent Literature 1 calculates a distance to a subject imaged by the imaging unit according to a result of a zoom operation of the subject by a photographer, and collects sound by a microphone unit according to the calculated distance. Emphasize the voice that was played. Further, the signal processing device delays either the video signal picked up by the image pickup unit or the sound signal picked up by the microphone unit according to the distance to the subject by the photographer. As a result, even if the subject is zoomed by the photographer, the signal processing apparatus delays either the video signal or the audio signal according to the distance to the subject, so that the synchronization between the video signal and the audio signal can be established. .
日本国特開２００９－１３０７６７号公報Japanese Unexamined Patent Publication No. 2009-130767
　特許文献１では、撮影者によるズーム操作によって、マイクロホンユニットにより収音された音声信号の強調処理は行われる。しかし、特許文献１の構成を上述した監視システムに適用しようとすると、ズーム操作によって監視者が選択する監視範囲が切り替わると、マイクアレイ装置から、ズーム操作により切り替わった監視範囲における特定の被写体（例えば人物）に対する音声の指向性が適正に形成されない可能性がある。 In Patent Document 1, an enhancement process of an audio signal collected by a microphone unit is performed by a zoom operation by a photographer. However, when the configuration of Patent Literature 1 is applied to the above-described monitoring system, when the monitoring range selected by the monitor is switched by the zoom operation, a specific subject (for example, in the monitoring range switched by the zoom operation is switched from the microphone array device). There is a possibility that the directivity of sound with respect to (person) may not be formed properly.
　監視システムにおいて音声データの指向性が適正に形成されないと、たとえ映像と音声とが同期していても、監視対象としての特定の被写体の発する音声が監視者に伝わらず、監視者の監視業務の効率が劣化する。 If the directivity of audio data is not properly formed in the monitoring system, even if the video and audio are synchronized, the audio generated by the specific subject as the monitoring target is not transmitted to the monitoring person, and the monitoring work of the monitoring person Efficiency is degraded.
　本発明は、上述した従来の課題を解決するために、監視対象に対するズーム処理により、監視対象の被写体が切り替わった場合でも、切り替わった監視対象の被写体に対する音声の指向性を適正に形成し、監視者の監視業務の効率劣化を抑制する指向性制御装置、指向性制御方法及び指向性制御システムを提供することを目的とする。 In order to solve the above-described conventional problems, the present invention appropriately forms the sound directivity with respect to the switched subject to be monitored even when the subject to be monitored is switched by the zoom processing on the subject to be monitored. An object of the present invention is to provide a directivity control device, a directivity control method, and a directivity control system that suppress the deterioration in efficiency of a person's monitoring work.
　本発明は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置であって、前記収音部から、表示部の画像上で指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、前記ビーム形成部は、前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、指向性制御装置である。 The present invention is a directivity control device that controls the directivity of sound collected by a sound collection unit including a plurality of microphones, and corresponds to a position designated on an image of a display unit from the sound collection unit. A beam forming unit that forms a beam in a direction to the sound source to be performed, and a magnification setting unit that sets a magnification for enlarging or reducing the image of the display unit according to an input, the beam forming unit A directivity control device that changes the size of the formed beam in accordance with the magnification set by the magnification setting unit.
　また、本発明は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における指向性制御方法であって、複数のマイクを含む収音部で収音された音声の指向性を制御するステップと、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、を有する、指向性制御方法である。 The present invention also relates to a directivity control method in a directivity control device that controls the directivity of sound collected by a sound collection unit including a plurality of microphones, and the sound collection unit includes a plurality of microphones. Controlling the directivity of the generated sound, setting a magnification for enlarging or reducing the image of the display unit according to the input, and forming the beam according to the set magnification Changing the size of the directivity control method.
　また、本発明は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における処理を実行するプログラムが格納された記憶媒体であって、複数のマイクを含む収音部で収音された音声の指向性を制御するステップと、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、を実行するプログラムが格納された、記憶媒体である。 The present invention also provides a storage medium storing a program for executing processing in a directivity control device that controls the directivity of sound collected by a sound collecting unit including a plurality of microphones. A step of controlling the directivity of the sound collected by the sound collection unit including the step of setting a magnification for enlarging or reducing the image of the display unit according to the input, and a step according to the set magnification And a step of changing the size of the formed beam.
　更に、本発明は、収音領域を撮像する撮像部と、複数のマイクを含み前記収音領域の音声を収音する収音部と、前記収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、前記指向性制御装置は、前記撮像部により撮像された前記収音領域の画像を表示する表示部と、前記表示部に表示された前記画像に対する位置の指定に応じて、前記収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、前記ビーム形成部は、前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、指向性制御システムである。 Furthermore, the present invention provides an imaging unit that images a sound collection region, a sound collection unit that includes a plurality of microphones and collects sound in the sound collection region, and directivity of sound collected by the sound collection unit. A directivity control device that controls the display, the directivity control device includes a display unit that displays an image of the sound collection area imaged by the imaging unit, and a position of the image displayed on the display unit. A beam forming unit that forms a beam in a direction from the sound collection unit to a sound source corresponding to the designated position according to the designation, and an image of the display unit that is enlarged or reduced according to the input. A magnification setting unit that sets the magnification of the beam, and the beam forming unit changes the size of the formed beam in accordance with the magnification set by the magnification setting unit.
　更に、本発明は、収音領域を撮像する撮像部と、複数のマイクを含み前記収音領域の音声を収音する第１収音部と、前記第１収音部の周囲に増設される第２収音部と、前記第１収音部と第２収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、前記指向性制御装置は、前記撮像部により撮像された前記収音領域の画像を表示する表示部と、前記表示部に表示された前記画像に対する位置の指定に応じて、前記第１収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、を備える、指向性制御システムである。 Furthermore, the present invention is provided around an image pickup unit that picks up a sound pickup region, a first sound pickup unit that includes a plurality of microphones and picks up sound in the sound pickup region, and the first sound pickup unit. A second sound collecting unit; and a directivity control device that controls the directivity of the sound collected by the first sound collecting unit and the second sound collecting unit, wherein the directivity control device includes the imaging unit. A display unit that displays an image of the sound collection area captured by the control unit, and a position corresponding to the designated position from the first sound collection unit in accordance with the designation of the position with respect to the image displayed on the display unit. A directivity control system including a beam forming unit that forms a beam in a direction toward a sound source.
　本発明によれば、監視対象に対するズーム処理により、監視対象の被写体が切り替わった場合でも、切り替わった監視対象の被写体に対する音声の指向性を適正に形成し、監視者の監視業務の効率劣化を抑制できる。 According to the present invention, even when the subject to be monitored is switched by the zoom process on the subject to be monitored, the directivity of the sound with respect to the changed subject to be monitored is appropriately formed, and the deterioration of the efficiency of the monitoring work of the supervisor is suppressed. it can.
第１の実施形態の指向性制御システムのシステム構成を示すブロック図The block diagram which shows the system configuration | structure of the directivity control system of 1st Embodiment. （Ａ）～（Ｅ）全方位マイクアレイ装置の筐体の外観図(A) to (E) External view of the omnidirectional microphone array device housing 全方位マイクアレイ装置が方向θに音声データの指向性を形成する遅延和方式の簡単な説明図Simple explanatory diagram of the delay sum method in which the omnidirectional microphone array device forms the directivity of audio data in the direction θ. （Ａ）ズームアウト処理時の、指向性パターン、表示画面、音声ズーム範囲及び表示画面の表示範囲を示す図、（Ｂ）ズームアウト処理前及びズームイン処理前の、指向性パターン、表示画面、音声ズーム範囲及び表示画面の表示範囲を示す図、（Ｃ）ズームイン処理時の、指向性パターン、表示画面、音声ズーム範囲及び表示画面の表示範囲を示す図(A) Directional pattern, display screen, audio zoom range, and display screen display range during zoom-out processing, (B) Directivity pattern, display screen, audio before zoom-out processing and zoom-in processing The figure which shows the display range of a zoom range and a display screen, (C) The figure which shows the directivity pattern at the time of zoom-in processing, a display screen, the audio | voice zoom range, and the display range of a display screen （Ａ）屋内のホールの天井面に、一体的に組み込まれた全方位マイクアレイ装置２及びカメラ装置１が取り付けられた監視範囲を示す図、（Ｂ）全方位画像データにおいて２人の人物９１，９２を含む範囲ｇの選択操作を示す図、（Ｃ）歪み補正処理後の２人の人物９１，９２の画像データがディスプレイ装置に表示され、人物９１，９２の会話の音声データがスピーカ装置において出力されている様子を示す図、（Ｄ）全方位画像データにおいて２人の人物９３，９４を含む範囲ｈの選択操作を示す図、（Ｅ）歪み補正処理後の２人の人物９３，９４の画像データがディスプレイ装置に表示され、人物９３，９４の会話の音声データがスピーカ装置において出力されている様子を示す図(A) The figure which shows the monitoring range where the omnidirectional microphone array apparatus 2 and the camera apparatus 1 which were integrated integrally were attached to the ceiling surface of the indoor hall, (B) Two persons 91 in omnidirectional image data , 92 is a diagram showing a selection operation of a range g including (C) image data of two persons 91 and 92 after distortion correction processing is displayed on a display device, and voice data of conversations of the persons 91 and 92 is a speaker device. (D) The figure which shows the selection operation of the range h including the two persons 93 and 94 in the omnidirectional image data, (E) The two persons 93 and after the distortion correction processing The figure which shows a mode that 94 image data is displayed on a display apparatus, and the audio | voice data of the conversation of the persons 93 and 94 are output in the speaker apparatus. 第１の実施形態の指向性制御装置の動作手順を詳細に説明するフローチャートThe flowchart explaining the operation | movement procedure of the directivity control apparatus of 1st Embodiment in detail. （Ａ）図６に示すプライバシー保護処理の第１例としての音声プライバシー保護処理の動作手順を説明するフローチャート、（Ｂ）図６に示すプライバシー保護処理の第２例としての画像プライバシー保護処理の動作手順を説明するフローチャート(A) Flowchart for explaining the operation procedure of the voice privacy protection process as the first example of the privacy protection process shown in FIG. 6, (B) The operation of the image privacy protection process as the second example of the privacy protection process shown in FIG. Flow chart explaining the procedure （Ａ）ボイスチェンジ処理前のピッチに対応する音声信号の波形の一例を示す図、（Ｂ）ボイスチェンジ処理後のピッチに対応する音声信号の波形の一例を示す図、（Ｃ）検出された人物の顔の輪郭内にぼかしを入れる処理の説明図(A) A diagram showing an example of a waveform of an audio signal corresponding to a pitch before voice change processing, (B) a diagram showing an example of a waveform of an audio signal corresponding to a pitch after voice change processing, (C) detected Explanatory diagram of processing to blur the outline of a person's face 第２の実施形態の指向性制御装置の動作手順のうち、第１の実施形態の指向性制御装置の動作手順と異なる動作手順を説明するフローチャートThe flowchart explaining the operation procedure different from the operation procedure of the directivity control apparatus of 1st Embodiment among the operation procedures of the directivity control apparatus of 2nd Embodiment. （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１例（ドーナツ型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１例を示す側面図(A) The front view which shows the 1st example (donut type | mold coupling | bonding) which couple | bonds an additional microphone part to the circumference | surroundings of an omnidirectional microphone array apparatus, (B) The 1st example which couple | bonds an additional microphone part to the circumference | surroundings of an omnidirectional microphone array apparatus. Side view showing 全方位マイクアレイ装置の周囲に増設マイク部を結合する第２例（ドーナツ楕円型結合）を示す正面図Front view showing a second example (doughnut-shaped elliptic coupling) in which an additional microphone unit is coupled around the omnidirectional microphone array device （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第３例（正方形型結合又は長方形型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第３例（正方形型結合又は長方形型結合）を示す側面図(A) Front view showing a third example (square coupling or rectangular coupling) for coupling an additional microphone section around the omnidirectional microphone array apparatus, (B) coupling an additional microphone section around the omnidirectional microphone array apparatus Side view showing a third example (square type or rectangular type) （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第４例（ハニカム型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第５例（ハニカム型結合）を示す正面図(A) Front view showing a fourth example (honeycomb type coupling) in which an additional microphone unit is coupled around the omnidirectional microphone array device, (B) Fifth example in which an additional microphone unit is coupled around the omnidirectional microphone array device. Front view showing (honeycomb type bonding) （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第６例（バー型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第６例（バー型結合）を示す側面図(A) Front view showing a sixth example (bar type coupling) for coupling an additional microphone section around the omnidirectional microphone array apparatus, (B) Sixth example for coupling an additional microphone section around the omnidirectional microphone array apparatus Side view showing (bar-shaped coupling) （Ａ）図１４（Ｂ）に示す全方位マイクアレイ装置と天井取付板金とが取り付けられた状態を示す平面図、（Ｂ）図１５（Ａ）のＥ－Ｅ断面を示し、図１４（Ｂ）に示す全方位マイクアレイ装置の周囲に増設マイク部が取り付けられた状態を示す側面図14A is a plan view showing a state where the omnidirectional microphone array device and the ceiling mounting sheet metal shown in FIG. 14B are attached, FIG. 14B is a sectional view taken along line EE of FIG. ) Is a side view showing a state in which an additional microphone unit is attached around the omnidirectional microphone array device shown in FIG. （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第７例（バー型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第８例（バー型結合）を示す正面図、（Ｃ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第９例（バー型結合）を示す正面図(A) Front view showing a seventh example (bar type coupling) for coupling an additional microphone section around the omnidirectional microphone array apparatus, (B) Eighth example for coupling an additional microphone section around the omnidirectional microphone array apparatus Front view showing (bar-type coupling), (C) Front view showing a ninth example (bar-type coupling) in which an additional microphone unit is coupled around the omnidirectional microphone array device. （Ａ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１０例（スケルトン型結合）を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１０例（スケルトン型結合）を示す側面図、（Ｃ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１１例（スケルトン型結合）を示す正面図、（Ｄ）全方位マイクアレイ装置の周囲に増設マイク部を結合する第１１例（スケルトン型結合）を示す側面図(A) Front view showing a tenth example (skeleton type coupling) for coupling an additional microphone unit around the omnidirectional microphone array device, (B) Tenth example coupling an additional microphone unit around the omnidirectional microphone array device Side view showing (skeleton type coupling), (C) Front view showing an eleventh example (skeleton type coupling) in which an additional microphone unit is coupled around the omnidirectional microphone array apparatus, and (D) Around the omnidirectional microphone array apparatus Side view which shows the 11th example (skeleton type coupling) which couples an extension microphone part to （Ａ）全方位マイクアレイ装置の周囲への増設マイク部の結合方法の第１例を示す正面図、（Ｂ）全方位マイクアレイ装置の周囲への増設マイク部の結合方法の第２例を示す正面図(A) The front view which shows the 1st example of the coupling | bonding method of the extension microphone part to the circumference | surroundings of an omnidirectional microphone array apparatus, (B) The 2nd example of the coupling | bonding method of the extension microphone part to the circumference | surroundings of an omnidirectional microphone array apparatus. Front view （Ａ）全方位マイクアレイ装置の周囲への増設マイク部の結合方法の第３例を示す正面図、（Ｂ）図１９（Ａ）のＥ－Ｅ断面を示し、全方位マイクアレイ装置の周囲への増設マイク部の結合方法の第３例を示す側面図、（Ｃ）全方位マイクアレイ装置の周囲への増設マイク部の結合方法の第４例を示す補足説明図(A) Front view showing a third example of a method of coupling an additional microphone unit to the periphery of the omnidirectional microphone array device, (B) A cross-sectional view taken along line EE of FIG. Side view showing a third example of a method of coupling an additional microphone unit to the side, (C) Supplementary explanatory diagram showing a fourth example of a method of coupling an additional microphone unit around the omnidirectional microphone array device 全方位マイクアレイ装置の周囲に増設マイク部を結合する第１２例（ピース型結合）を示す斜視図The perspective view which shows the 12th example (piece type coupling | bonding) which couple | bonds an additional microphone part around the omnidirectional microphone array apparatus. 増設マイク部が結合した全方位マイクアレイ装置のハードウェア構成の一例を示すブロック図The block diagram which shows an example of the hardware constitutions of the omnidirectional microphone array apparatus which the extension microphone part couple | bonded
　以下、本発明に係る指向性制御装置、指向性制御方法及び指向性制御システムの各実施形態について、図面を参照して説明する。各実施形態の指向性制御システムは、例えば工場、公共施設（例えば図書館、イベント会場）、又は店舗（例えば小売店、銀行）に設置される監視システム（有人監視システム及び無人監視システムを含む）として用いられる。 Hereinafter, embodiments of a directivity control device, a directivity control method, and a directivity control system according to the present invention will be described with reference to the drawings. The directivity control system of each embodiment is, for example, as a monitoring system (including a manned monitoring system and an unmanned monitoring system) installed in a factory, a public facility (for example, a library, an event venue), or a store (for example, a retail store or a bank). Used.
　なお、本発明は、コンピュータである指向性制御装置に、指向性制御方法により規定される動作を実行させるためのプログラム、又は指向性制御方法により規定される動作をコンピュータに実行させるプログラムが記録されたコンピュータ読み取り可能な記録媒体として表現することも可能である。 The present invention records a program for causing a directivity control device, which is a computer, to execute an operation defined by a directivity control method, or a program for causing a computer to execute an operation defined by a directivity control method. It can also be expressed as a computer-readable recording medium.
（第１の実施形態）
　図１は、本実施形態の指向性制御システム１０のシステム構成を示すブロック図である。図１に示す指向性制御システム１０は、カメラ装置１と、全方位マイクアレイ装置２と、指向性制御装置３と、レコーダ装置４とを含む構成である。カメラ装置１と、全方位マイクアレイ装置２と、指向性制御装置３と、レコーダ装置４とは、ネットワークＮＷを介して相互に接続されている。ネットワークＮＷは、有線ネットワーク（例えばイントラネット、インターネット）でも良いし、無線ネットワーク（例えば無線ＬＡＮ（Local Area Network）、ＷｉＭＡＸ（登録商標）、無線ＷＡＮ（Wide Area Network））でも良い。図１に示す指向性制御システム１０では、説明を簡単にするために、カメラ装置１及び全方位マイクアレイ装置２は１つだけ図示されているが、複数のカメラ装置及び全方位マイクアレイ装置が含まれても良い。 (First embodiment)
FIG. 1 is a block diagram showing a system configuration of a directivity control system 10 of the present embodiment. A directivity control system 10 shown in FIG. 1 includes a camera device 1, an omnidirectional microphone array device 2, a directivity control device 3, and a recorder device 4. The camera device 1, the omnidirectional microphone array device 2, the directivity control device 3, and the recorder device 4 are connected to each other via a network NW. The network NW may be a wired network (for example, an intranet or the Internet), or a wireless network (for example, a wireless local area network (LAN), WiMAX (registered trademark), or a wireless WAN (Wide Area Network)). In the directivity control system 10 shown in FIG. 1, only one camera device 1 and omnidirectional microphone array device 2 are shown for simplicity of explanation, but a plurality of camera devices and omnidirectional microphone array devices are included. May be included.
　以下、指向性制御システム１０を構成する各装置について説明する。なお、以下の説明を簡単にするために、カメラ装置１の筐体と全方位マイクアレイ装置２の筐体とは同一の位置に一体的に取り付けられるものとして説明するが（図５（Ａ）参照）、カメラ装置１の筐体と全方位マイクアレイ装置２の筐体とは異なる位置に別体として取り付けられても良い。 Hereinafter, each device constituting the directivity control system 10 will be described. In order to simplify the following description, the case of the camera device 1 and the case of the omnidirectional microphone array device 2 will be described as being integrally attached to the same position (FIG. 5A). The housing of the camera device 1 and the housing of the omnidirectional microphone array device 2 may be attached separately at different positions.
　撮像部の一例としてのカメラ装置１は、例えば後述する天井取付板金７ｚを介して、イベント会場の天井面８に固定して設置される（図５（Ａ）参照）。カメラ装置１は、例えば監視システムにおける監視カメラとしての機能を有し、ネットワークＮＷに接続された監視制御室（不図示）からの遠隔操作によって、ズーム機能（例えばズームイン処理、ズームアウト処理）を用いて、所定の収音領域（例えばイベント会場内の既定領域）の全方位の映像を撮像する。カメラ装置１は、収音領域の全方位の映像を示す画像データ（即ち、全方位画像データ）、又は全方位画像データに所定の歪み補正処理を施してパノラマ変換して生成した平面画像データを、ネットワークＮＷを介して指向性制御装置３又はレコーダ装置４に送信する。 The camera device 1 as an example of the imaging unit is fixedly installed on the ceiling surface 8 of the event venue via, for example, a ceiling mounting sheet metal 7z described later (see FIG. 5A). The camera device 1 has a function as a monitoring camera in a monitoring system, for example, and uses a zoom function (for example, zoom-in processing and zoom-out processing) by remote operation from a monitoring control room (not shown) connected to the network NW. Thus, images of all directions in a predetermined sound collection area (for example, a predetermined area in the event venue) are captured. The camera device 1 generates image data (that is, omnidirectional image data) indicating omnidirectional video in the sound collection area, or planar image data generated by performing panoramic conversion by performing predetermined distortion correction processing on the omnidirectional image data. And transmitted to the directivity control device 3 or the recorder device 4 via the network NW.
　カメラ装置１は、ディスプレイ装置３５に表示された画像データの中で、任意の位置が監視者の指９５により指定されると、画像データ中の指定位置の座標データを指向性制御装置３から受信し、カメラ装置１から、指定位置に対応する実空間上の音声位置（以下、単に「音声位置」と略記する）までの距離、方向（水平角及び垂直角を含む。以下同様。）のデータを算出して指向性制御装置３に送信する。なお、カメラ装置１における距離、方向のデータ算出処理は公知技術であるため、説明は割愛する。 The camera device 1 receives the coordinate data of the designated position in the image data from the directivity control device 3 when an arbitrary position is designated by the supervisor's finger 95 in the image data displayed on the display device 35. Then, data of the distance and direction (including horizontal and vertical angles; the same applies hereinafter) from the camera apparatus 1 to the audio position in the real space corresponding to the designated position (hereinafter simply referred to as “audio position”). Is calculated and transmitted to the directivity control device 3. Note that the distance and direction data calculation processing in the camera device 1 is a known technique, and thus the description thereof is omitted.
　また、カメラ装置１は、例えばカメラ装置１における定期的なタイミング、又はディスプレイ装置３５に表示された画像データに対する監視者の指９５の入力操作に応じて、画像データのズームイン処理又はズームアウト処理を行う。定期的なタイミングは、例えば１時間又は１０分に１回程度である。ズームイン処理又はズームアウト処理の倍率に関する情報は、予め指定されても良いし、適宜変更されても良い。カメラ装置１は、ズームイン処理又はズームアウト処理を行った場合には、ズームイン処理又はズームアウト処理の倍率に関する情報を指向性制御装置３に送信する。 In addition, the camera device 1 performs zoom-in processing or zoom-out processing of image data according to, for example, periodic timing in the camera device 1 or an input operation of the supervisor's finger 95 with respect to the image data displayed on the display device 35. Do. The regular timing is, for example, about once every hour or 10 minutes. Information regarding the magnification of the zoom-in process or zoom-out process may be specified in advance or may be changed as appropriate. When the zoom-in process or the zoom-out process is performed, the camera apparatus 1 transmits information on the magnification of the zoom-in process or the zoom-out process to the directivity control apparatus 3.
　収音部の一例としての全方位マイクアレイ装置２は、例えば後述する天井取付板金７ｚを介して、イベント会場の天井面８に固定して設置される（図５（Ａ）参照）。全方位マイクアレイ装置２は、複数のマイクロホンユニット２２，２３（図２（Ａ）～（Ｅ）参照）が均等な間隔で設けられたマイクロホン部と、マイクロホン部の各マイクロホンユニット２２，２３の動作を制御するＣＰＵ２ｐ（図２１参照）とを少なくとも含む構成である。 The omnidirectional microphone array device 2 as an example of the sound collection unit is fixedly installed on the ceiling surface 8 of the event venue via, for example, a ceiling mounting sheet metal 7z described later (see FIG. 5A). The omnidirectional microphone array apparatus 2 includes a microphone unit in which a plurality of microphone units 22 and 23 (see FIGS. 2A to 2E) are provided at equal intervals, and operations of the microphone units 22 and 23 in the microphone unit. CPU 2p (see FIG. 21) for controlling the above.
　全方位マイクアレイ装置２は、電源がＯＮされると、マイクロホンユニット内のマイク素子により収音された音声の音声データに所定の音声信号処理（例えば増幅処理、フィルタ処理、加算処理）を施し、所定の音声信号処理により得られた音声データを、ネットワークＮＷを介して、指向性制御装置３又はレコーダ装置４に送信する。 When the power is turned on, the omnidirectional microphone array apparatus 2 performs predetermined audio signal processing (for example, amplification processing, filter processing, addition processing) on the audio data of the audio collected by the microphone element in the microphone unit, The voice data obtained by the predetermined voice signal processing is transmitted to the directivity control device 3 or the recorder device 4 via the network NW.
　ここで、全方位マイクアレイ装置２の筐体の外観について、図２（Ａ）～（Ｅ）を参照して説明する。図２（Ａ）～（Ｅ）は、全方位マイクアレイ装置２の筐体の外観図である。図２（Ａ）～（Ｅ）に示す全方位マイクアレイ装置２Ｃ，２Ａ，２Ｂ，２，２Ｄは、外観及び複数のマイクロホンユニットの配置位置が異なるが、全方位マイクアレイ装置の機能は同等である。 Here, the appearance of the casing of the omnidirectional microphone array apparatus 2 will be described with reference to FIGS. 2 (A) to (E). 2A to 2E are external views of the housing of the omnidirectional microphone array apparatus 2. FIG. The omnidirectional microphone array devices 2C, 2A, 2B, 2 and 2D shown in FIGS. 2A to 2E differ in appearance and arrangement positions of a plurality of microphone units, but the functions of the omnidirectional microphone array devices are the same. is there.
　図２（Ａ）に示す全方位マイクアレイ装置２Ｃは、円盤状の筐体２１を有する。筐体２１には、複数のマイクロホンユニット２２，２３が同心円状に配置されている。具体的には、複数のマイクロホンユニット２２が、筐体２１と同一の中心を有する同心円状に且つ筐体２１の円周に沿って配置され、複数のマイクロホンユニット２３が、筐体２１と同一の中心を有する同心円状に且つ筐体２１の内側に配置されている。各々のマイクロホンユニット２２は、互いの間隔が広く、直径が大きく、低い音域に適した特性を有する。一方、各々のマイクロホンユニット２３は、互いの間隔が狭く、直径が小さく、高い音域に適した特性を有する。 The omnidirectional microphone array apparatus 2C shown in FIG. 2 (A) has a disk-shaped casing 21. A plurality of microphone units 22 and 23 are concentrically arranged in the housing 21. Specifically, the plurality of microphone units 22 are arranged concentrically with the same center as the casing 21 and along the circumference of the casing 21, and the plurality of microphone units 23 are the same as the casing 21. A concentric circle having a center is disposed inside the housing 21. Each microphone unit 22 has a wide interval, a large diameter, and characteristics suitable for a low sound range. On the other hand, each microphone unit 23 is narrow in distance from each other, has a small diameter, and has characteristics suitable for a high sound range.
　図２（Ｂ）に示す全方位マイクアレイ装置２Ａは、円盤状の筐体２１を有する。筐体２１には、複数のマイクロホンユニット２２が、均等な間隔で縦方向と横方向の２方向に沿って十字状に配置され、縦方向の配列と横方向の配列とが筐体２１の中心において交わっている。全方位マイクアレイ装置２Ａは、複数のマイクロホンユニット２２が縦方向と横方向の２方向に直線的に配置されているので、音声データの指向性を形成する場合の演算量を低減できる。なお、図２（Ｂ）に示す全方位マイクアレイ装置２Ａにおいて、縦方向又は横方向の１列だけに、複数のマイクロホンユニット２２が配置されても良い。 The omnidirectional microphone array apparatus 2A shown in FIG. 2 (B) has a disk-shaped casing 21. A plurality of microphone units 22 are arranged in a cross shape along the vertical direction and the horizontal direction at equal intervals in the casing 21, and the vertical array and the horizontal array are the center of the casing 21. At In the omnidirectional microphone array apparatus 2A, since the plurality of microphone units 22 are linearly arranged in two directions, ie, the vertical direction and the horizontal direction, it is possible to reduce the amount of calculation when forming the directivity of the audio data. In the omnidirectional microphone array apparatus 2A shown in FIG. 2B, a plurality of microphone units 22 may be arranged in only one column in the vertical direction or the horizontal direction.
　図２（Ｃ）に示す全方位マイクアレイ装置２Ｂは、図２（Ａ）に示す全方位マイクアレイ装置２に比べ、直径の小さい円盤状の筐体２１Ｂを有する。筐体２１Ｂには、複数のマイクロホンユニット２２が、筐体２１Ｂの円周に沿って均等な間隔で配置されている。図２（Ｃ）に示す全方位マイクアレイ装置２Ｂは、各々のマイクロホンユニット２２の間隔が短いので、高い音域に適した特性を有する。 The omnidirectional microphone array apparatus 2B shown in FIG. 2C has a disk-shaped casing 21B having a smaller diameter than the omnidirectional microphone array apparatus 2 shown in FIG. In the casing 21B, a plurality of microphone units 22 are arranged at equal intervals along the circumference of the casing 21B. The omnidirectional microphone array apparatus 2B shown in FIG. 2C has characteristics suitable for a high sound range because the distance between the microphone units 22 is short.
　図２（Ｄ）に示す全方位マイクアレイ装置２は、筐体２１Ｃの中心に所定の直径を有する開口部２１ａが形成されたドーナツ型形状又はリング型形状の筐体２１Ｃを有する。本実施形態の指向性制御システム１０では、例えば図２（Ｄ）に示す全方位マイクアレイ装置２が用いられる。筐体２１Ｃでは、複数のマイクロホンユニット２２が、筐体２１Ｃの円周方向に沿って、均等な間隔で同心円状に配置されている。 The omnidirectional microphone array apparatus 2 shown in FIG. 2 (D) has a donut-shaped or ring-shaped housing 21C in which an opening 21a having a predetermined diameter is formed at the center of the housing 21C. In the directivity control system 10 of the present embodiment, for example, the omnidirectional microphone array apparatus 2 shown in FIG. In the housing 21C, a plurality of microphone units 22 are concentrically arranged at equal intervals along the circumferential direction of the housing 21C.
　図２（Ｅ）に示す全方位マイクアレイ装置２Ｄは、矩形状の筐体２１Ｄを有する。筐体２１Ｄには、複数のマイクロホンユニット２２が、筐体２１Ｄの外周に沿って均等な間隔で配置されている。図２（Ｅ）に示す全方位マイクアレイ装置２Ｄでは、筐体２１Ｄが矩形形状であるため、例えばコーナー又は壁面においても全方位マイクアレイ装置２Ｄの設置を簡易化できる。 The omnidirectional microphone array apparatus 2D shown in FIG. 2 (E) has a rectangular casing 21D. In the casing 21D, a plurality of microphone units 22 are arranged at equal intervals along the outer periphery of the casing 21D. In the omnidirectional microphone array apparatus 2D shown in FIG. 2E, since the casing 21D has a rectangular shape, the installation of the omnidirectional microphone array apparatus 2D can be simplified even at, for example, a corner or a wall surface.
　全方位マイクアレイ装置２の各マイクロホンユニット２２，２３は、無指向性マイクロホンでも良いし、双指向性マイクロホン、単一指向性マイクロホン、鋭指向性マイクロホン、超指向性マイクロホン（例えばガンマイク）又はこれらの組み合わせでも良い。 The microphone units 22 and 23 of the omnidirectional microphone array apparatus 2 may be omnidirectional microphones, bi-directional microphones, unidirectional microphones, sharp directional microphones, super-directional microphones (for example, gun microphones) or the like. A combination may be used.
　指向性制御装置３は、例えば監視制御室（不図示）に設置される据置型のＰＣ（Personal Computer）でも良いし、監視者が携帯可能な携帯電話機、ＰＤＡ（Personal Digital Assistant）、タブレット端末、スマートフォン等のデータ通信端末でも良い。 The directivity control device 3 may be, for example, a stationary PC (Personal Computer) installed in a monitoring control room (not shown), a mobile phone that can be carried by a supervisor, a PDA (Personal Digital Assistant), a tablet terminal, A data communication terminal such as a smartphone may be used.
　指向性制御装置３は、通信部３１と、操作部３２と、画像処理部３３と、信号処理部３４と、ディスプレイ装置３５と、スピーカ装置３６と、メモリ３７とを少なくとも含む構成である。信号処理部３４は、指向方向算出部３４ａと、出力制御部３４ｂと、ズーム連動制御部３４ｃとを少なくとも含む。 The directivity control device 3 includes at least a communication unit 31, an operation unit 32, an image processing unit 33, a signal processing unit 34, a display device 35, a speaker device 36, and a memory 37. The signal processing unit 34 includes at least a directivity direction calculation unit 34a, an output control unit 34b, and a zoom interlocking control unit 34c.
　通信部３１は、カメラ装置１から送信された画像データ若しくはズームイン処理又はズームアウト処理の倍率に関する情報、又は全方位マイクアレイ装置２から送信された音声データを受信して信号処理部３４に出力する。 The communication unit 31 receives the image data transmitted from the camera device 1, the information regarding the magnification of the zoom-in process or the zoom-out process, or the audio data transmitted from the omnidirectional microphone array device 2 and outputs it to the signal processing unit 34. .
　操作部３２は、監視者の入力操作を信号処理部３４に通知するためのユーザインターフェース（ＵＩ：User Interface）であり、例えばマウス、キーボード等のポインティングデバイスである。また、操作部３２は、例えばディスプレイ装置３５の表示画面に対応して配置され、監視者の指９５又はスタイラスペンによる入力操作を検出可能なタッチパネルを用いて構成されても良い。 The operation unit 32 is a user interface (UI) for notifying the signal processing unit 34 of the input operation of the supervisor, and is, for example, a pointing device such as a mouse or a keyboard. Moreover, the operation part 32 may be comprised using the touch panel which is arrange | positioned corresponding to the display screen of the display apparatus 35, for example, and can detect input operation with a supervisor's finger | toe 95 or a stylus pen.
　操作部３２は、ディスプレイ装置３５に表示された画像データ（即ち、カメラ装置１により撮像された画像データ）の中で、監視者の指９５により指定された指定位置の座標データを信号処理部３４に出力する。また、操作部３２は、ディスプレイ装置３５に表示された画像データの中で、指９５による入力操作により、ズームイン処理又はズームアウト処理の実行を指示した場合には、ズームイン処理又はズームアウト処理の指示内容を信号処理部３４に出力する。 The operation unit 32 receives the coordinate data of the designated position designated by the supervisor's finger 95 from the image data displayed on the display device 35 (that is, image data taken by the camera device 1). Output to. In addition, when the operation unit 32 instructs execution of zoom-in processing or zoom-out processing by input operation with the finger 95 in the image data displayed on the display device 35, the operation unit 32 instructs zoom-in processing or zoom-out processing. The contents are output to the signal processing unit 34.
　画像処理部３３は、信号処理部３４の指示に応じて、ディスプレイ装置３５に表示された画像データに対して所定の画像処理（例えば人物の顔検出、人物の動き検出）を行い、画像処理結果を信号処理部３４に出力する。 In response to an instruction from the signal processing unit 34, the image processing unit 33 performs predetermined image processing (for example, human face detection, human motion detection) on the image data displayed on the display device 35, and the image processing result Is output to the signal processing unit 34.
　画像処理部３３は、ズームイン処理がカメラ装置１により行われた場合には、信号処理部３４の指示に応じて、ズームイン処理後のディスプレイ装置３５の表示領域に表示される監視対象物（例えば人物）の顔の輪郭を検出し、顔にマスキング処理を施す。具体的には、画像処理部３３は、検出された顔の輪郭を包含する矩形領域を算出し、矩形領域内に所定のぼかしを入れる処理を行う。画像処理部３３は、ぼかしを入れる処理により生成された画像データを信号処理部３４に出力する。 When the zoom-in process is performed by the camera device 1, the image processing unit 33 responds to an instruction from the signal processing unit 34 and displays a monitoring target (for example, a person) displayed in the display area of the display device 35 after the zoom-in process. ) Is detected and masking processing is performed on the face. Specifically, the image processing unit 33 calculates a rectangular area that includes the detected face outline, and performs a process of adding a predetermined blur to the rectangular area. The image processing unit 33 outputs the image data generated by the blurring process to the signal processing unit 34.
　信号処理部３４は、例えばＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）又はＤＳＰ（Digital Signal Processor）を用いて構成され、指向性制御装置３の各部の動作を全体的に統括するための制御処理、他の各部との間のデータの入出力処理、データの演算（計算）処理及びデータの記憶処理を行う。 The signal processing unit 34 is configured using, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit), or a DSP (Digital Signal Processor), and controls the operation of each unit of the directivity control device 3 as a whole. Control processing, data input / output processing between other units, data calculation (calculation) processing, and data storage processing are performed.
　指向方向算出部３４ａは、指向方向座標（θＭＡｈ，θＭＡｖ）の算出時では、監視者の指９５により指定された画像データの指定位置の座標データを操作部３２から取得すると、通信部３１からカメラ装置１に座標データを送信させる。指向方向算出部３４ａは、カメラ装置１の設置位置から、画像データの指定位置に対応する実空間上の音声（音源）位置までの距離、方向のデータを、通信部３１から取得する。 When calculating the directivity direction coordinates (θ MAh , θ MAv ), the directivity direction calculation unit 34 a acquires the coordinate data of the specified position of the image data specified by the supervisor's finger 95 from the operation unit 32. The coordinate data is transmitted from the camera device 1 to the camera device 1. The directivity direction calculation unit 34 a acquires distance and direction data from the installation position of the camera device 1 to the sound (sound source) position in the real space corresponding to the specified position of the image data from the communication unit 31.
　指向方向算出部３４ａは、カメラ装置１の設置位置から、音声位置までの距離、方向のデータを用いて、全方位マイクアレイ装置２の設置位置から音声位置に向かう指向方向座標（θＭＡｈ，θＭＡｖ）を算出する。本実施形態のように、カメラ装置１の筐体を囲むように全方位マイクアレイ装置２の筐体が一体的に取り付けられている場合には、カメラ装置１から音声位置までの方向（水平角，垂直角）を、全方位マイクアレイ装置２から音声位置までの指向方向座標（θＭＡｈ，θＭＡｖ）として用いることができる。なお、カメラ装置１の筐体と全方位マイクアレイ装置２の筐体とが離れて取り付けられている場合には、指向方向算出部３４ａは、事前に算出されたキャリブレーションパラメータのデータと、カメラ装置１から音声位置までの方向（水平角，垂直角）のデータとを用いて、全方位マイクアレイ装置２から音声位置までの指向方向座標（θＭＡｈ，θＭＡｖ）を算出する。なお、キャリブレーションとは、指向性制御装置３の指向方向算出部３４ａが指向方向座標（θＭＡｈ，θＭＡｖ）を算出するために必要となる所定のキャリブレーションパラメータを算出又は取得する動作である。 The directivity direction calculation unit 34a uses the data on the distance and direction from the installation position of the camera device 1 to the audio position to specify the directivity direction coordinates (θ MAh , θ) from the installation position of the omnidirectional microphone array device 2 to the audio position. MAv ) is calculated. When the casing of the omnidirectional microphone array apparatus 2 is integrally attached so as to surround the casing of the camera apparatus 1 as in the present embodiment, the direction (horizontal angle) from the camera apparatus 1 to the audio position. , Vertical angle) can be used as pointing direction coordinates (θ MAh , θ MAv ) from the omnidirectional microphone array device 2 to the voice position. When the housing of the camera device 1 and the housing of the omnidirectional microphone array device 2 are mounted apart from each other, the directivity direction calculation unit 34a includes calibration parameter data calculated in advance, and the camera Using the data of the direction from the device 1 to the voice position (horizontal angle, vertical angle), the directivity direction coordinates (θ MAh , θ MAv ) from the omnidirectional microphone array device 2 to the voice position are calculated. The calibration is an operation of calculating or acquiring a predetermined calibration parameter necessary for the directivity direction calculation unit 34a of the directivity control device 3 to calculate the directivity direction coordinates (θ MAh , θ MAv ). .
　指向方向座標（θＭＡｈ，θＭＡｖ）のうち、θＭＡｈは全方位マイクアレイ装置２の設置位置から音声位置に向かう指向方向の水平角を示し、θＭＡｖは全方位マイクアレイ装置２の設置位置から音声位置に向かう指向方向の垂直角を示す。以下の説明では、説明を簡単にするために、カメラ装置１及び全方位マイクアレイ装置の各水平角の基準方向（０度方向）が一致するとする。 Of the directivity direction coordinates (θ MAh , θ MAv ), θ MAh indicates the horizontal angle in the directivity direction from the installation position of the omnidirectional microphone array device 2 to the voice position, and θ MAv is the installation position of the omnidirectional microphone array device 2. Indicates the vertical angle of the directing direction from to the voice position. In the following description, to simplify the description, it is assumed that the reference directions (0-degree directions) of the horizontal angles of the camera device 1 and the omnidirectional microphone array device coincide.
　出力制御部３４ｂ（ビーム形成部）は、ディスプレイ装置３５及びスピーカ装置３６の動作を制御し、カメラ装置１から送信された画像データをディスプレイ装置３５に表示させ、全方位マイクアレイ装置２から送信された音声データをスピーカ装置３６に出力させる。また、出力制御部３４ｂは、全方位マイクアレイ装置２から送信された音声データを用いて、指向方向算出部３４ａにより算出された指向方向座標（θＭＡｈ，θＭＡｖ）が示す指向方向に、全方位マイクアレイ装置２により収音された音声の指向性（ビーム）を形成する。 The output control unit 34b (beam forming unit) controls the operations of the display device 35 and the speaker device 36, displays the image data transmitted from the camera device 1 on the display device 35, and is transmitted from the omnidirectional microphone array device 2. The audio data is output to the speaker device 36. Further, the output control unit 34b uses the audio data transmitted from the omnidirectional microphone array device 2 in the pointing direction indicated by the pointing direction coordinates (θ MAh , θ MAv ) calculated by the pointing direction calculating unit 34a. The directivity (beam) of the sound collected by the azimuth microphone array apparatus 2 is formed.
　また、出力制御部３４ｂは、カメラ装置１により画像データのズームイン処理又はズームアウト処理が行われた場合には、ズームイン処理後又はズームアウト処理後の画像データをディスプレイ装置３５に表示させ、更に、後述するズーム連動制御部３４ｃにより調整された指向方向のビーム幅（サイズ）を用いて、音声データの指向性を再形成する。なお、ここでいうサイズとは、指向性を示すビームのビーム幅に限定されず、図４（Ａ），図４（Ｂ），図４（Ｃ）に示す指向性パターンＰＴ１，ＰＴ２，ＰＴ３の縦方向の長さでも良い。以下同様に、ビーム幅をビームサイズと読み替えて良い。 The output control unit 34b displays the image data after the zoom-in process or the zoom-out process on the display device 35 when the camera device 1 performs the zoom-in process or the zoom-out process on the image data. Using the beam width (size) in the directivity direction adjusted by the zoom interlocking control unit 34c described later, the directivity of the audio data is recreated. Note that the size here is not limited to the beam width of the beam showing directivity, and the size of the directivity patterns PT1, PT2, PT3 shown in FIGS. 4 (A), 4 (B), and 4 (C). The length in the vertical direction may be used. Similarly, the beam width may be read as the beam size.
　これにより、指向性制御装置３は、指向性が形成された指向方向に存在する監視対象物の発する音声の音量レベルを相対的に増大でき、指向性が形成されない方向の音声を抑圧して音量レベルを相対的に低減できる。 Thereby, the directivity control device 3 can relatively increase the volume level of the sound emitted by the monitoring object existing in the directivity direction in which the directivity is formed, and suppresses the sound in the direction in which the directivity is not formed and suppresses the sound volume. The level can be relatively reduced.
　ズーム連動制御部３４ｃ（倍率設定部）は、カメラ装置１により画像データのズームイン処理又はズームアウト処理が行われた場合には、ズームイン処理又はズームアウト処理の倍率に関する情報を用いて、出力制御部３４ｂにより形成された指向性（即ち、指向方向のビーム幅）と、スピーカ装置３６から出力される音声データの音量レベルとのうち少なくとも一方又はその両方を調整する。なお、ビーム幅及び音量レベルの調整量は、それぞれ既定値でも良いし、ズームイン処理又はズームアウト処理の倍率に関する情報に応じた値でも良い。 When the camera apparatus 1 performs zoom-in processing or zoom-out processing of image data, the zoom interlocking control unit 34c (magnification setting unit) uses the information regarding the magnification of the zoom-in processing or zoom-out processing to output the control unit At least one or both of the directivity (that is, the beam width in the directivity direction) formed by 34b and the volume level of the audio data output from the speaker device 36 is adjusted. Note that the adjustment amounts of the beam width and the sound volume level may be predetermined values, or may be values corresponding to information regarding the magnification of the zoom-in process or the zoom-out process.
　具体的には、ズーム連動制御部３４ｃは、カメラ装置１により画像データのズームイン処理が行われた場合には、既定値又はズームイン処理の倍率に関する情報を用いて、指向方向のビーム幅を狭く調整し、更に、音声データの音量レベルを上げる（図４（Ｂ）及び（Ｃ）参照）。図４（Ｂ）は、ズームアウト操作前及びズームイン操作前の、指向性パターンＰＴ１、表示画面、音声ズーム範囲ＳＡＲ及び表示画面の表示範囲ＤＡＲを示す図である。図４（Ｃ）は、ズームイン処理時の、指向性パターンＰＴ３、表示画面、音声ズーム範囲ＳＡＲ及び表示画面の表示範囲ＤＡＲを示す図である。 Specifically, when zoom-in processing of image data is performed by the camera device 1, the zoom interlocking control unit 34 c narrows the beam width in the directing direction using information on a default value or zoom-in processing magnification. Further, the volume level of the audio data is increased (see FIGS. 4B and 4C). FIG. 4B is a diagram showing the directivity pattern PT1, the display screen, the audio zoom range SAR, and the display range DAR before the zoom-out operation and before the zoom-in operation. FIG. 4C is a diagram showing the directivity pattern PT3, the display screen, the audio zoom range SAR, and the display range DAR during the zoom-in process.
　一方、ズーム連動制御部３４ｃは、カメラ装置１により画像データのズームアウト処理が行われた場合には、既定値又はズームアウト処理の倍率に関する情報を用いて、指向方向のビーム幅を広く調整し、更に、音声データの音量レベルを維持する（図４（Ａ）及び（Ｂ）参照）。図４（Ａ）は、ズームアウト処理時の、指向性パターンＰＴ２、表示画面、音声ズーム範囲ＳＡＲ及び表示画面の表示範囲ＤＡＲを示す図である。 On the other hand, when zoom out processing of image data is performed by the camera device 1, the zoom interlocking control unit 34 c widely adjusts the beam width in the directing direction using information on the default value or magnification of the zoom out processing. Further, the volume level of the audio data is maintained (see FIGS. 4A and 4B). FIG. 4A is a diagram illustrating the directivity pattern PT2, the display screen, the audio zoom range SAR, and the display range DAR during the zoom-out process.
　なお、ここではカメラ装置１のズームイン処理・ズームアウト処理が行われた場合について説明するが、ズームイン処理・ズームアウト処理に限らず画像の拡大・縮小処理が行われた場合に同様の手順が適用できる。例えば、録画された画像を再生しながら画像の拡大・縮小処理が行われた場合に、音声の指向性を変更してもよい。 Here, the case where the zoom-in process / zoom-out process of the camera apparatus 1 is performed will be described, but the same procedure is applied not only when the zoom-in process / zoom-out process is performed but also when an image enlargement / reduction process is performed. it can. For example, the sound directivity may be changed when image enlargement / reduction processing is performed while playing back a recorded image.
　図４（Ａ）～（Ｃ）において、表示画面の表示範囲ＤＡＲは、カメラ装置１の画角（即ち撮像可能なエリアＩＡＲ）内において、ディスプレイ装置３５に表示されている画像データの表示範囲を示す。図４（Ｂ）では、音声ズーム範囲ＳＡＲは、音声データの指向性が形成される範囲を示す。 4A to 4C, the display range DAR of the display screen is the display range of the image data displayed on the display device 35 within the angle of view of the camera device 1 (that is, the imageable area IAR). Show. In FIG. 4B, the audio zoom range SAR indicates a range where the directivity of the audio data is formed.
　図４（Ｂ）に示す指向性パターンＰＴ１は、カメラ装置１がズームイン処理又はズームアウト処理を行う前に、出力制御部３４ｂが形成した指向性（指向方向のビーム幅）のデフォルト状態を示す。 The directivity pattern PT1 shown in FIG. 4B shows a default state of directivity (beam width in the directivity direction) formed by the output control unit 34b before the camera apparatus 1 performs zoom-in processing or zoom-out processing.
　図４（Ｃ）に示す指向性パターンＰＴ３は、カメラ装置１がズームイン処理した後に、出力制御部３４ｂが形成した指向性（指向方向のビーム幅）を示す。図４（Ａ）に示す指向性パターンＰＴ２は、カメラ装置１がズームアウト処理した後に、出力制御部３４ｂが形成した指向性（指向方向のビーム幅）を示す。 The directivity pattern PT3 shown in FIG. 4C indicates the directivity (beam width in the directivity direction) formed by the output control unit 34b after the camera device 1 performs the zoom-in process. A directivity pattern PT2 shown in FIG. 4A indicates the directivity (beam width in the directivity direction) formed by the output control unit 34b after the camera apparatus 1 performs zoom-out processing.
　図４（Ｂ）に示すディスプレイ装置３５の画像データに対してズームイン処理が行われると、指向方向のビーム幅が狭く調整されるので、指向性が形成される音声ズーム範囲ＳＡＲが狭くなり、指向性の強度が上がる。この場合には、ディスプレイ装置３５には、ズームイン処理後の画像データ、即ち、音声ズーム範囲ＳＡＲに対応した表示範囲ＤＡＲに映る１人の人物が拡大して表示され、この人物の発する音声の音量レベルも増大して出力される。 When zoom-in processing is performed on the image data of the display device 35 shown in FIG. 4B, the beam width in the directivity direction is adjusted to be narrow, so that the audio zoom range SAR in which directivity is formed becomes narrow and directivity is reduced. Increases the strength of sex. In this case, on the display device 35, the image data after zoom-in processing, that is, one person appearing in the display range DAR corresponding to the audio zoom range SAR is enlarged and displayed, and the volume of the sound emitted by this person is displayed. The level is also increased and output.
　一方、図４（Ｂ）に示すディスプレイ装置３５の画像データに対してズームアウト処理が行われると、指向方向のビーム幅が広く調整されるので、指向性が形成される音声ズーム範囲ＳＡＲが広くなり、指向性の強度が下がる。この場合には、ディスプレイ装置３５には、ズームアウト処理後の画像データ、即ち、音声ズーム範囲ＳＡＲに対応した表示範囲ＤＡＲに映る３人の人物が縮小して表示され、これら３人の人物の発する音声の音量レベルは維持された状態で出力される。 On the other hand, when the zoom-out process is performed on the image data of the display device 35 shown in FIG. 4B, the beam width in the directivity direction is adjusted wide, so that the audio zoom range SAR in which directivity is formed is wide. The intensity of directivity is reduced. In this case, the image data after the zoom-out process, that is, three persons appearing in the display range DAR corresponding to the audio zoom range SAR are displayed on the display device 35 in a reduced size. The volume level of the sound to be output is output while being maintained.
　また、ズーム連動制御部３４ｃは、ズームイン処理がカメラ装置１により行われた場合には、全方位マイクアレイ装置２により収音された音声データにボイスチェンジ処理を施して出力制御部３４ｂに出力する。 In addition, when the zoom-in process is performed by the camera device 1, the zoom interlocking control unit 34c performs a voice change process on the voice data collected by the omnidirectional microphone array device 2 and outputs the voice data to the output control unit 34b. .
　表示部の一例としてのディスプレイ装置３５は、例えばＬＣＤ（Liquid Crystal Display）又は有機ＥＬ（Electroluminescence）を用いて構成され、出力制御部３４ｂの制御の下で、カメラ装置１により撮像された画像データを表示する。 The display device 35 as an example of the display unit is configured using, for example, an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence), and receives image data captured by the camera device 1 under the control of the output control unit 34b. indicate.
　音声出力部の一例としてのスピーカ装置３６は、全方位マイクアレイ装置２により収音された音声の音声データ、又は、指向方向座標（θＭＡｈ，θＭＡｖ）が示す指向方向に指向性が形成された音声データを出力する。なお、ディスプレイ装置３５及びスピーカ装置３６は、指向性制御装置３とは別の構成としても良い。 The speaker device 36 as an example of the sound output unit has directivity formed in the sound data collected by the omnidirectional microphone array device 2 or in the directivity direction indicated by the directivity direction coordinates (θ MAh , θ MAv ). Audio data is output. Note that the display device 35 and the speaker device 36 may have different configurations from the directivity control device 3.
　記憶部の一例としてのメモリ３８は、例えばＲＡＭ（Random Access Memory）を用いて構成され、指向性制御装置３の各部の動作時のワークメモリとして機能する。なお、メモリ３８は、ハードディスク又はフラッシュメモリを用いて構成されても良く、この場合には、レコーダ装置４において記憶されている画像データ及び音声データを記憶している。 The memory 38 as an example of a storage unit is configured by using, for example, a RAM (Random Access Memory), and functions as a work memory during operation of each unit of the directivity control device 3. The memory 38 may be configured using a hard disk or a flash memory. In this case, the image data and audio data stored in the recorder device 4 are stored.
　レコーダ装置４は、カメラ装置１により撮像された画像データと、全方位マイクアレイ装置２により収音された音声の音声データとを対応付けて記憶している。 The recorder device 4 stores the image data picked up by the camera device 1 and the sound data of the sound collected by the omnidirectional microphone array device 2 in association with each other.
　図３は、全方位マイクアレイ装置２が方向θに音声データの指向性を形成する遅延和方式の簡単な説明図である。説明を分かり易くするため、マイク素子２２１～２２ｎは直線上に配列しているとする。この場合、指向性は面内の二次元領域となるが、三次元空間において指向性を形成するためには、マイクロホンを二次元配列にして、同じ処理方法を行えば良い。 FIG. 3 is a simple explanatory diagram of the delay sum method in which the omnidirectional microphone array apparatus 2 forms the directivity of the audio data in the direction θ. For easy understanding, it is assumed that the microphone elements 221 to 22n are arranged on a straight line. In this case, the directivity is a two-dimensional region in the plane. However, in order to form directivity in a three-dimensional space, the same processing method may be performed by arranging microphones in a two-dimensional array.
　音源８０から発した音波は、全方位マイクアレイ装置２のマイクロホンユニット２２，２３に内蔵される各マイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎに対し、ある一定の角度（入射角＝（９０－θ）［度］）で入射する。 The sound wave emitted from the sound source 80 is at a certain angle with respect to the microphone elements 221, 222, 223, ..., 22 (n-1), 22n built in the microphone units 22, 23 of the omnidirectional microphone array apparatus 2. Incident at (incident angle = (90−θ) [degrees]).
　音源８０は、例えば全方位マイクアレイ装置２の指向方向に存在する監視対象物（例えば図５（Ａ）に示す２人の人物９１，９２）であり、全方位マイクアレイ装置２の筐体２１の面上に対し、所定角度θの方向に存在する。また、各マイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎ間の間隔ｄは一定とする。 The sound source 80 is, for example, a monitoring target (for example, two persons 91 and 92 shown in FIG. 5A) existing in the direction of the omnidirectional microphone array apparatus 2, and the casing 21 of the omnidirectional microphone array apparatus 2. Exists in the direction of a predetermined angle θ with respect to the surface of Further, the distance d between the microphone elements 221, 222, 223,..., 22 (n−1), 22n is constant.
　音源８０から発した音波は、最初にマイク素子２２１に到達して収音され、次にマイク素子２２２に到達して収音され、同様に次々に収音され、最後にマイク素子２２ｎに到達して収音される。 The sound wave emitted from the sound source 80 first reaches the microphone element 221 and is collected, then reaches the microphone element 222 and is collected, and is successively collected, and finally reaches the microphone element 22n. Sound is collected.
　なお、全方位マイクアレイ装置２の各マイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎの位置から音源８０に向かう方向は、例えば音源８０が監視対象物（例えば２人の人物９１，９２）の会話時の音声である場合に、全方位マイクアレイ装置２の各マイクロホン（マイク素子）から、監視者がディスプレイ装置３５上において指定した指定位置に対応する音声位置に向かう方向と同じである。 Note that the direction from the position of each microphone element 221, 222, 223,..., 22 (n−1), 22n of the omnidirectional microphone array device 2 toward the sound source 80 is, for example, that the sound source 80 is monitored (for example, two people) In the case of the voice during the conversation of the persons 91 and 92), the direction from each microphone (microphone element) of the omnidirectional microphone array apparatus 2 to the voice position corresponding to the designated position designated on the display device 35 by the supervisor Is the same.
　ここで、音波がマイク素子２２１，２２２，２２３，…，２２（ｎ－１）の順に到達した時刻から最後のマイク素子２２ｎに到達した時刻までには、到達時間差τ１，τ２，τ３，…，τ（ｎ－１）が生じる。このため、各々のマイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎが収音した音声の音声データがそのまま加算された場合には、位相がずれた状態で加算されるため、音波の音量レベルが全体的に弱め合う。 Here, there is an arrival time difference τ1, τ2, τ3,... From the time when the sound wave reaches the microphone elements 221, 222, 223,. τ (n−1) is generated. For this reason, when the voice data collected by the microphone elements 221, 222, 223,..., 22 (n−1), 22n are added as they are, they are added in a state of being out of phase. , The sound wave volume level weakens as a whole.
　なお、τ１は音波がマイク素子２２１に到達した時刻と音波がマイク素子２２ｎに到達した時刻との差分の時間であり、τ２は音波がマイク素子２２２に到達した時刻と音波がマイク素子２２ｎに到達した時刻との差分の時間であり、同様に、τ（ｎ－１）は音波がマイク素子２２（ｎ－１）に到達した時刻と音波がマイク素子２２ｎに到達した時刻との差分の時間である。 Note that τ1 is a difference time between the time when the sound wave reaches the microphone element 221 and the time when the sound wave reaches the microphone element 22n, and τ2 is the time when the sound wave reaches the microphone element 222 and the sound wave reaches the microphone element 22n. Similarly, τ (n−1) is the difference time between the time when the sound wave reaches the microphone element 22 (n−1) and the time when the sound wave reaches the microphone element 22n. is there.
　本実施形態では、全方位マイクアレイ装置２は、マイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎ毎に対応して設けられたＡ／Ｄ変換器２４１，２４２，２４３，…，２４（ｎ－１），２４ｎと、遅延器２５１，２５２，２５３，…，２５（ｎ－１），２５ｎと、加算器２６と、を有する構成である（図３参照）。 In the present embodiment, the omnidirectional microphone array apparatus 2 includes A / D converters 241, 242, 243, provided corresponding to the microphone elements 221, 222, 223,..., 22 (n−1), 22n. ..., 24 (n-1), 24n, delay units 251, 252, 253, ..., 25 (n-1), 25n, and an adder 26 (see FIG. 3).
　即ち、全方位マイクアレイ装置２は、各マイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎが収音したアナログの音声データを、Ａ／Ｄ変換器２４１，２４２，２４３，…，２４（ｎ－１），２４ｎにおいてデジタルの音声データにＡＤ変換する。 That is, the omnidirectional microphone array apparatus 2 converts the analog audio data collected by the microphone elements 221, 222, 223,..., 22 (n−1), 22n into A / D converters 241, 242, 243, .., 24 (n-1), and 24n are AD-converted into digital audio data.
　更に、全方位マイクアレイ装置２は、遅延器２５１，２５２，２５３，…，２５（ｎ－１），２５ｎにおいて、各々のマイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎにおける到達時間差に対応する遅延時間を与えて全ての音波の位相を揃えた後、加算器２６において遅延処理後の音声データを加算する。これにより、全方位マイクアレイ装置２は、各マイク素子２２１，２２２，２２３,…，２２（ｎ－１）,２２ｎに、所定角度θの方向に音声データの指向性を形成できる。 Further, the omnidirectional microphone array apparatus 2 includes the respective microphone elements 221, 222, 223,..., 22 (n−1), 22n in the delay units 251, 252, 253,. After the delay time corresponding to the arrival time difference is given and the phases of all the sound waves are made uniform, the adder 26 adds the audio data after the delay processing. Thereby, the omnidirectional microphone array apparatus 2 can form the directivity of the audio data in the direction of the predetermined angle θ in each of the microphone elements 221, 222, 223,..., 22 (n−1), 22n.
　例えば図３では、遅延器２５１，２５２，２５３，…，２５（ｎ－１），２５ｎに設定された各遅延時間Ｄ１，Ｄ２，Ｄ３，…，Ｄ（ｎ－１），Ｄｎは、それぞれ到達時間差τ１，τ２，τ３，…，τ（ｎ－１）に相当し、数式（１）により示される。 For example, in FIG. 3, the delay times D1, D2, D3,..., D (n-1), Dn set in the delay units 251, 252, 253,. This corresponds to the time differences τ1, τ2, τ3,..., Τ (n−1), and is expressed by Equation (1).
Figure JPOXMLDOC01-appb-M000001
Figure JPOXMLDOC01-appb-M000001
　Ｌ１は、マイク素子２２１とマイク素子２２ｎとにおける音波到達距離の差である。Ｌ２は、マイク素子２２２とマイク素子２２ｎとにおける音波到達距離の差である。Ｌ３は、マイク素子２２３とマイク素子２２ｎとにおける音波到達距離の差であり、同様に、Ｌ（ｎ－１）は、マイク素子２２（ｎ－１）とマイク素子２２ｎとにおける音波到達距離の差である。Ｖｓは音波の速度（音速）である。Ｌ１,Ｌ２，Ｌ３，…，Ｌ（ｎ－１），Ｖｓは既知の値である。図３では、遅延器２５ｎに設定される遅延時間Ｄｎは０（ゼロ）である。 L1 is a difference in sound wave arrival distance between the microphone element 221 and the microphone element 22n. L2 is a difference in sound wave arrival distance between the microphone element 222 and the microphone element 22n. L3 is a difference in sound wave arrival distance between the microphone element 223 and the microphone element 22n. Similarly, L (n−1) is a difference in sound wave arrival distance between the microphone element 22 (n−1) and the microphone element 22n. It is. Vs is the speed of sound waves (sound speed). L1, L2, L3,..., L (n−1), and Vs are known values. In FIG. 3, the delay time Dn set in the delay device 25n is 0 (zero).
　このように、全方位マイクアレイ装置２は、遅延器２５１，２５２，２５３，…，２５（ｎ－１），２５ｎに設定される遅延時間Ｄ１，Ｄ２，Ｄ３，…，Ｄｎ－１，Ｄｎを変更することで、マイクロホンユニット２２，２３に内蔵された各々のマイク素子２２１，２２２，２２３，…，２２（ｎ－１），２２ｎが収音した音声の音声データの指向性を簡易に形成できる。 As described above, the omnidirectional microphone array apparatus 2 uses the delay times D1, D2, D3,..., Dn-1, Dn set in the delay units 251, 252, 253,. By changing the directivity of the voice data collected by the microphone elements 221, 222, 223,..., 22 (n-1), 22n built in the microphone units 22, 23 can be easily formed. .
　なお、図３に示す指向性の形成処理の説明は、説明を簡単にするために全方位マイクアレイ装置２が行うことを前提として記載した。但し、指向性制御装置３の信号処理部３４の出力制御部３４ｂが全方位マイクアレイ装置２のマイクロホンの数と同数のＡＤ変換器２４１～２４ｎ及び遅延器２５１～２５ｎと１つの加算器２６とを有する構成である場合には、指向性制御装置３の信号処理部３４の出力制御部３４ｂが、全方位マイクアレイ装置２の各マイク素子により収音された音声の音声データを用いて、図３に示す指向性の形成処理を行っても良い。 Note that the description of the directivity forming process shown in FIG. 3 is based on the assumption that the omnidirectional microphone array apparatus 2 performs the description for the sake of simplicity. However, the output control unit 34b of the signal processing unit 34 of the directivity control device 3 has the same number of AD converters 241 to 24n and delay units 251 to 25n and one adder 26 as the number of microphones of the omnidirectional microphone array device 2. When the output control unit 34b of the signal processing unit 34 of the directivity control device 3 uses the voice data collected by each microphone element of the omnidirectional microphone array device 2, the configuration shown in FIG. The directivity forming process shown in FIG.
　図５（Ａ）は、屋内のホールの天井面８に、一体的に組み込まれた全方位マイクアレイ装置２及びカメラ装置１が取り付けられた監視範囲を示す図である。図５（Ｂ）は、全方位画像データにおいて２人の人物９１，９２を含む範囲ｇの選択操作を示す図である。図５（Ｃ）は、歪み補正処理後の２人の人物９１，９２の画像データがディスプレイ装置３５に表示され、人物９１，９２の会話の音声データがスピーカ装置３６において出力されている様子を示す図である。図５（Ｄ）は、全方位画像データにおいて２人の人物９３，９４を含む範囲ｈの選択操作を示す図である。図５（Ｅ）は、歪み補正処理後の２人の人物９３，９４の画像データがディスプレイ装置３５に表示され、人物９３，９４の会話の音声データがスピーカ装置３６において出力されている様子を示す図である。 FIG. 5 (A) is a diagram showing a monitoring range in which the omnidirectional microphone array device 2 and the camera device 1 are integrally mounted on the ceiling surface 8 of the indoor hall. FIG. 5B is a diagram illustrating a selection operation of a range g including two persons 91 and 92 in the omnidirectional image data. FIG. 5C shows a state in which the image data of the two persons 91 and 92 after the distortion correction processing is displayed on the display device 35 and the voice data of the conversation of the persons 91 and 92 is output from the speaker device 36. FIG. FIG. 5D is a diagram illustrating a selection operation of a range h including two persons 93 and 94 in the omnidirectional image data. FIG. 5E shows a state in which the image data of the two persons 93 and 94 after the distortion correction processing is displayed on the display device 35 and the voice data of the conversation of the persons 93 and 94 is output from the speaker device 36. FIG.
　図５（Ａ）では、イベント会場の天井面８に、ドーナツ型形状の全方位マイクアレイ装置２と、全方位マイクアレイ装置２と一体として形成されたカメラ装置１と、スピーカ装置８３とが設置された様子が示されている。また、図５（Ａ）では、２人の人物９１，９２が会話しており、２人の人物９３，９４が会話しており、スピーカ装置８２は所定の音楽（例えばＢＧＭ）の音声データを出力している。 In FIG. 5A, the donut-shaped omnidirectional microphone array device 2, the camera device 1 formed integrally with the omnidirectional microphone array device 2, and the speaker device 83 are installed on the ceiling surface 8 of the event venue. The state of being done is shown. In FIG. 5A, two people 91 and 92 are talking, two people 93 and 94 are talking, and the speaker device 82 receives voice data of predetermined music (for example, BGM). Output.
　図５（Ｂ）では、ディスプレイ装置３５の表示画面には、カメラ装置１により撮像された収音領域の全方位に関する画像データ（全方位画像データ）が表示されている。監視者は、例えばディスプレイ装置３５の表示画面に表示された４人の人物９１，９２，９３，９４の画像データのうち、左上付近（具体的には符号ｇの範囲）を指９５でタッチ＆ドラッグしたとする。カメラ装置１は、指９５がタッチ＆ドラッグによって指定された範囲を示す座標データを指向性制御装置３から取得し、符号ｇの範囲が中心となるように全方位画像データを歪み補正処理及びパノラマ変換することにより、平面画像データを生成して指向性制御装置３に送信する。なお、範囲ｇは、指９５のタッチ点から自動的に生成されるとする。 In FIG. 5B, the display screen of the display device 35 displays image data (omnidirectional image data) related to the omnidirectional image of the sound collection area captured by the camera device 1. For example, the monitor touches with the finger 95 near the upper left (specifically, the range of the symbol g) of the image data of the four persons 91, 92, 93, 94 displayed on the display screen of the display device 35. Suppose you drag. The camera device 1 acquires coordinate data indicating the range designated by the touch and drag of the finger 95 from the directivity control device 3, and performs distortion correction processing and panorama processing on the omnidirectional image data so that the range of the symbol g is the center. By converting, plane image data is generated and transmitted to the directivity control device 3. Note that the range g is automatically generated from the touch point of the finger 95.
　図５（Ｃ）では、カメラ装置１により生成された平面画像データがディスプレイ装置３５において表示されている。また、出力制御部３４ｂは、指９５のタッチ＆ドラッグにより符号ｇの範囲が指定された場合に、全方位マイクアレイ装置２から、符号ｇの範囲の中心位置に対応する音声位置に向かう方向に音声データの指向性を形成するので、２人の人物９１，９２の会話音声（Ｈｅｌｌｏ）の音量レベルを周囲の音声の音量レベルに比べて増大して出力する（図５（Ｂ）及び（Ｃ）参照）。一方、２人の人物９１，９２に比べ、全方位マイクアレイ装置２により近い距離に設置されているが監視者によって指定された符号ｇの範囲に含まれないスピーカ装置８２が出力している音楽（図５（Ａ）に示す「♪～」（音符）参照）は、スピーカ装置３６から強調して出力されず、２人の人物９１，９２の会話音声の音量レベルに比べて、小さな音量レベルで出力される。 In FIG. 5C, the plane image data generated by the camera device 1 is displayed on the display device 35. Further, when the range of the code g is designated by the touch and drag of the finger 95, the output control unit 34b moves from the omnidirectional microphone array device 2 in a direction toward the sound position corresponding to the center position of the range of the code g. Since the directivity of the voice data is formed, the volume level of the conversation voice (Hello) of the two persons 91 and 92 is increased as compared with the volume level of the surrounding voice (FIGS. 5B and 5C). )reference). On the other hand, compared to the two persons 91 and 92, the music output from the speaker device 82 that is installed at a closer distance to the omnidirectional microphone array device 2 but is not included in the range of the symbol g designated by the supervisor. (Refer to “♪ ˜” (note) shown in FIG. 5A) is not output with emphasis from the speaker device 36, and the volume level is smaller than the volume level of the conversational voices of the two persons 91 and 92. Is output.
　図５（Ｄ）では、図５（Ｂ）と同様に、ディスプレイ装置３５の表示画面には、カメラ装置１により撮像された収音領域の全方位に関する画像データ（全方位画像データ）が表示されている。監視者は、例えばディスプレイ装置３５の表示画面に表示された４人の人物９１，９２，９３，９４の画像データのうち、右下付近（具体的には符号ｈの範囲）を指９５でタッチ＆ドラッグしたとする。カメラ装置１は、指９５がタッチ＆ドラッグによって指定された範囲を示す座標データを指向性制御装置３から取得し、符号ｈの範囲が中心となるように全方位画像データを歪み補正処理及びパノラマ変換することにより、平面画像データを生成して指向性制御装置３に送信する。 In FIG. 5D, as in FIG. 5B, the display screen of the display device 35 displays image data (omnidirectional image data) relating to the omnidirectional image of the sound collection area captured by the camera device 1. ing. For example, the monitor touches the lower right portion (specifically, the range of symbol h) with the finger 95 in the image data of four persons 91, 92, 93, 94 displayed on the display screen of the display device 35, for example. Suppose you drag & drag. The camera device 1 acquires coordinate data indicating the range designated by the finger 95 by touch and drag from the directivity control device 3, and performs distortion correction processing and panorama processing on the omnidirectional image data so that the range of the symbol h is the center. By converting, plane image data is generated and transmitted to the directivity control device 3.
　図５（Ｅ）では、カメラ装置１により生成された平面画像データがディスプレイ装置３５において表示されている。また、出力制御部３４ｂは、指９５のタッチ＆ドラッグにより符号ｈの範囲が指定された場合に、全方位マイクアレイ装置２から、符号ｈの範囲の中心位置に対応する音声位置に向かう方向に音声データの指向性を形成するので、２人の人物９３，９４の会話音声（Ｈｉ！！）の音量レベルを周囲の音声の音量レベルに比べて増大して出力する（図５（Ｄ）及び（Ｅ）参照）。一方、２人の人物９３，９４に比べ、全方位マイクアレイ装置２により近い距離に設置されているが監視者によって指定された符号ｈの範囲に含まれないスピーカ装置８２が出力している音楽（図５（Ａ）に示す「♪～」（音符）参照）は、スピーカ装置３６から強調して出力されず、２人の人物９３，９４の会話音声の音量レベルに比べて、小さな音量レベルで出力される。なお、範囲ｈは、指９５のタッチ点から自動的に生成されるとする。 5E, planar image data generated by the camera device 1 is displayed on the display device 35. FIG. Further, when the range of the code h is designated by the touch and drag of the finger 95, the output control unit 34b moves from the omnidirectional microphone array device 2 in a direction toward the audio position corresponding to the center position of the range of the code h. Since the directivity of the voice data is formed, the volume level of the conversation voice (Hi!) Of the two persons 93 and 94 is increased as compared with the volume level of the surrounding voice (FIG. 5D and FIG. 5). (See (E)). On the other hand, compared with the two persons 93 and 94, music that is output by the speaker device 82 that is installed at a closer distance to the omnidirectional microphone array device 2 but is not included in the range of the symbol h designated by the supervisor. (Refer to “♪ ˜” (note) shown in FIG. 5A) is not output with emphasis from the speaker device 36, and the volume level is small compared to the volume level of the conversation voice of the two persons 93 and 94. Is output. The range h is automatically generated from the touch point of the finger 95.
　次に、本実施形態の指向性制御システム１０の詳細な動作手順について、図６を参照して説明する。図６は、第１の実施形態の指向性制御装置３の動作手順を詳細に説明するフローチャートである。図６の説明の前提として、指向性制御装置３は、監視者の指９５により、ディスプレイ装置３５に表示された画像データ中の任意の位置が指定され、全方位マイクアレイ装置２から、指９５の指定位置に対応する実空間上の音声位置に向かう指向方向を算出しているとする。 Next, a detailed operation procedure of the directivity control system 10 of the present embodiment will be described with reference to FIG. FIG. 6 is a flowchart for explaining in detail the operation procedure of the directivity control device 3 of the first embodiment. As a premise of the description of FIG. 6, the directivity control device 3 designates an arbitrary position in the image data displayed on the display device 35 by the supervisor's finger 95, and the finger 95 from the omnidirectional microphone array device 2. It is assumed that the directivity direction toward the voice position in the real space corresponding to the designated position is calculated.
　図６において、ズーム連動制御部３４ｃは、カメラ装置１のズームイン処理又はズームアウト処理に連動して音声データの指向性（指向方向のビーム幅）及び音量レベルを調整するか否かを示すズーム連動フラグがオンであるか否かを判定する（Ｓ１）。ズーム連動制御部３４ｃは、ズーム連動フラグの内容をズーム連動制御部３４ｃ自身又はメモリ３７において記憶することで、ズーム連動フラグがオンであるかオフであるかを判定する。ズーム連動フラグがオフであると判定された場合には（Ｓ１、ＮＯ）、図６に示す指向性制御装置３の動作は終了する。 In FIG. 6, the zoom interlocking control unit 34 c indicates whether or not to adjust the directivity (beam width in the directing direction) and the volume level of the audio data in conjunction with the zoom-in process or zoom-out process of the camera device 1. It is determined whether or not the flag is on (S1). The zoom interlocking control unit 34c stores the contents of the zoom interlocking flag in the zoom interlocking control unit 34c itself or the memory 37, thereby determining whether the zoom interlocking flag is on or off. If it is determined that the zoom interlocking flag is off (S1, NO), the operation of the directivity control device 3 shown in FIG. 6 ends.
　一方、ズーム連動フラグがオンであると判定された場合には（Ｓ１、ＹＥＳ）、出力制御部３４ｂは、全方位マイクアレイ装置２から、ディスプレイ装置３５に表示されている画像データ中の指定位置に対応する実空間上の音声位置に向かう指向方向に音声データの指向性を形成する（Ｓ２）。 On the other hand, when it is determined that the zoom interlocking flag is on (S1, YES), the output control unit 34b transmits the designated position in the image data displayed on the display device 35 from the omnidirectional microphone array device 2. The directivity of the voice data is formed in the directivity direction toward the voice position in the real space corresponding to (S2).
　ステップＳ２の後、カメラ装置１の定期的なタイミング又は監視者の入力操作により、ディスプレイ装置３５に表示された画像データのズームイン処理又はズームアウト処理の実行が指示されたとする。カメラ装置１は、ズームイン処理又はズームアウト処理の実行の指示に応じて、ディスプレイ装置３５に表示された画像データのズームイン処理又はズームアウト処理を行う。カメラ装置１は、ズームイン処理又はズームアウト処理の後、ズームイン処理又はズームアウト処理の倍率に関する情報とズームイン処理又はズームアウト処理後の画像データとを、ネットワークＮＷを介して指向性制御装置３に送信する。ズーム連動制御部３４ｃは、ズームイン処理又はズームアウト処理の倍率に関する情報（ズーム情報）とズームイン処理又はズームアウト処理後の画像データとを通信部３１から取得する（Ｓ３）。 Suppose that after step S2, execution of zoom-in processing or zoom-out processing of the image data displayed on the display device 35 is instructed by the periodic timing of the camera device 1 or the input operation of the supervisor. The camera device 1 performs zoom-in processing or zoom-out processing on the image data displayed on the display device 35 in response to an instruction to execute zoom-in processing or zoom-out processing. After the zoom-in process or zoom-out process, the camera apparatus 1 transmits information on the magnification of the zoom-in process or zoom-out process and image data after the zoom-in process or zoom-out process to the directivity control apparatus 3 via the network NW. To do. The zoom interlocking control unit 34c acquires information (zoom information) regarding the magnification of the zoom-in process or zoom-out process and the image data after the zoom-in process or zoom-out process from the communication unit 31 (S3).
　ズーム連動制御部３４ｃは、ズームイン処理又はズームアウト処理後の画像データを用いて、画像処理部３３に所定の画像処理を実行させる。画像処理部３３は、ズーム連動制御部３４ｃからの指示に応じて、ディスプレイ装置３５に表示されたズームイン処理又はズームアウト処理後の画像データに対して所定の画像処理（例えば人物の顔検出、人物の動き検出）を行い、画像処理結果をズーム連動制御部３４ｃに出力する（Ｓ４）。 The zoom interlocking control unit 34c causes the image processing unit 33 to execute predetermined image processing using the image data after the zoom-in process or the zoom-out process. The image processing unit 33 performs predetermined image processing (for example, human face detection, person detection) on the image data after zoom-in processing or zoom-out processing displayed on the display device 35 in accordance with an instruction from the zoom interlocking control unit 34c. Motion detection) and the image processing result is output to the zoom interlocking control unit 34c (S4).
　ステップＳ４における画像処理結果により、ディスプレイ装置３５に表示されたズームイン処理又はズームアウト処理後の画像データに人物が検出されない場合には（Ｓ５、ＮＯ）、ズーム連動制御部３４ｃは、ズームイン処理又はズームアウト処理に拘わらず、音声データの指向性を調整せずに維持し、更に、音声データの音量レベルも調整せずに維持すると判定する。出力制御部３４ｂは、ズームイン処理又はズームアウト処理の前における音声データの指向性を維持した状態で、全方位マイクアレイ装置２により収音された音声データを出力する（Ｓ６）。ステップＳ６の後、図６に示す指向性制御装置３の動作は終了する。 If no person is detected in the image data after the zoom-in process or the zoom-out process displayed on the display device 35 based on the image processing result in step S4 (S5, NO), the zoom interlocking control unit 34c performs the zoom-in process or zoom. Regardless of the out process, it is determined that the directivity of the audio data is maintained without adjustment, and further, the volume level of the audio data is also maintained without adjustment. The output control unit 34b outputs the audio data collected by the omnidirectional microphone array apparatus 2 while maintaining the directivity of the audio data before the zoom-in process or the zoom-out process (S6). After step S6, the operation of the directivity control device 3 shown in FIG. 6 ends.
　一方、ステップＳ４における画像処理結果により、ディスプレイ装置３５に表示されたズームイン処理又はズームアウト処理後の画像データに人物が検出された場合には（Ｓ５、ＹＥＳ）、ズーム連動制御部３４ｃは、ステップＳ３において取得されたズームイン処理又はズームアウト処理の倍率に関する情報を基に、カメラ装置１によりズームイン処理が行われたか否かを判定する（Ｓ７）。 On the other hand, if a person is detected in the image data after the zoom-in process or the zoom-out process displayed on the display device 35 based on the image processing result in step S4 (S5, YES), the zoom interlocking control unit 34c Based on the information regarding the magnification of the zoom-in process or zoom-out process acquired in S3, it is determined whether the camera apparatus 1 has performed the zoom-in process (S7).
　ズーム連動制御部３４ｃは、カメラ装置１によりズームイン処理が行われたと判定した場合には（Ｓ７、ＹＥＳ）、画像及び音声に関する所定のプライバシー保護処理を行う（Ｓ８）。ここで、所定のプライバシー保護処理の動作について、図７（Ａ）、図７（Ｂ）、図８（Ａ）～（Ｃ）を参照して説明する。 When it is determined that the zoom-in process has been performed by the camera device 1 (S7, YES), the zoom interlocking control unit 34c performs a predetermined privacy protection process regarding images and sound (S8). Here, the operation of the predetermined privacy protection process will be described with reference to FIGS. 7A, 7B, and 8A to 8C.
　図７（Ａ）は、図６に示すプライバシー保護処理の第１例としての音声プライバシー保護処理の動作手順を説明するフローチャートである。図７（Ｂ）は、図６に示すプライバシー保護処理の第２例としての画像プライバシー保護処理の動作手順を説明するフローチャートである。図８（Ａ）は、ボイスチェンジ処理前のピッチに対応する音声信号の波形の一例を示す図である。図８（Ｂ）は、ボイスチェンジ処理後のピッチに対応する音声信号の波形の一例を示す図である。図８（Ｃ）は、検出された人物の顔の輪郭内にぼかしを入れる処理の説明図である。なお、画像及び音声に関する所定のプライバシー保護処理の説明では、説明を分かり易くするために、図７（Ａ）に示す画像プライバシー保護処理と、図７（Ｂ）に示す音声プライバシー保護処理とに、図面を分けて説明しているが、指向性制御装置３は、図７（Ａ）に示す動作と図７（Ｂ）に示す動作とを続けて行っても良い。 FIG. 7A is a flowchart for explaining the operation procedure of the voice privacy protection process as the first example of the privacy protection process shown in FIG. FIG. 7B is a flowchart for explaining the operation procedure of the image privacy protection process as the second example of the privacy protection process shown in FIG. FIG. 8A is a diagram illustrating an example of a waveform of an audio signal corresponding to the pitch before the voice change process. FIG. 8B is a diagram illustrating an example of a waveform of an audio signal corresponding to the pitch after the voice change process. FIG. 8C is an explanatory diagram of processing for blurring the detected outline of a person's face. In the description of the predetermined privacy protection processing related to images and sounds, for the sake of easy understanding, the image privacy protection processing shown in FIG. 7A and the voice privacy protection processing shown in FIG. Although the drawings are described separately, the directivity control device 3 may continuously perform the operation shown in FIG. 7A and the operation shown in FIG. 7B.
　図７（Ａ）において、ズーム連動制御部３４ｃは、音声プライバシー保護設定がオンであるか否かを判定する（Ｓ８－１）。ズーム連動制御部３４ｃは、音声プライバシー保護設定の内容をズーム連動制御部３４ｃ自身又はメモリ３７に記憶することで、音声プライバシー保護設定がオンであるかオフであるかを判定する。音声プライバシー保護設定がオフであると判定された場合には（Ｓ８－１、ＮＯ）、図７（Ａ）に示す音声プライバシー保護処理は終了する。 In FIG. 7A, the zoom interlocking control unit 34c determines whether or not the voice privacy protection setting is ON (S8-1). The zoom interlocking control unit 34c stores the content of the voice privacy protection setting in the zoom interlocking control unit 34c itself or the memory 37, thereby determining whether the voice privacy protection setting is on or off. If it is determined that the voice privacy protection setting is OFF (S8-1, NO), the voice privacy protection process shown in FIG. 7A ends.
　一方、音声プライバシー保護設定がオンであると判定された場合には（Ｓ８－１、ＹＥＳ）、ズーム連動制御部３４ｃは、ディスプレイ装置３５に表示された画像データがズームイン処理されて以降、スピーカ装置３６において出力される音声データに対してボイスチェンジ処理を施す（Ｓ８－２）。ステップＳ８－２の後、図７（Ａ）に示す音声プライバシー保護処理は終了する。 On the other hand, if it is determined that the voice privacy protection setting is ON (S8-1, YES), the zoom interlocking control unit 34c performs a zoom-in process on the image data displayed on the display device 35, and then the speaker device. Voice change processing is performed on the audio data output at 36 (S8-2). After step S8-2, the voice privacy protection process shown in FIG. 7A ends.
　ボイスチェンジ処理の一例として、ズーム連動制御部３４ｃは、例えば全方位マイクアレイ装置２により収音された音声の音声データ若しくは出力制御部３４ｂにより指向性が形成された音声データの波形のピッチを増大又は減少する（例えば図８（Ａ）及び図８（Ｂ）参照）。これにより、ズーム連動制御部３４ｃは、全方位マイクアレイ装置２により収音された音声若しくは指向性が形成された音声データが誰の発した声であるかの特定を困難化でき、ズームイン処理によって切り替わった監視対象物（例えば人物）のプライバシーを効果的に保護できる。 As an example of the voice change process, the zoom interlocking control unit 34c increases the pitch of the waveform of the voice data collected by the omnidirectional microphone array device 2 or the voice data whose directivity is formed by the output control unit 34b, for example. Or decrease (see, for example, FIGS. 8A and 8B). Thereby, the zoom interlocking control unit 34c can make it difficult to specify who the voice collected by the omnidirectional microphone array device 2 or the voice data formed with directivity is generated, and by zoom-in processing. The privacy of the switched monitoring object (for example, a person) can be effectively protected.
　また、図７（Ｂ）において、ズーム連動制御部３４ｃは、画像プライバシー保護設定がオンであるか否かを判定する（Ｓ８－３）。ズーム連動制御部３４ｃは、画像プライバシー保護設定の内容をズーム連動制御部３４ｃ自身又はメモリ３７に記憶することで、画像プライバシー保護設定がオンであるかオフであるかを判定する。画像プライバシー保護設定がオフであると判定された場合には（Ｓ８－３、ＮＯ）、出力制御部３４ｂは、ズームイン処理後の画像データを、そのままディスプレイ装置３５に表示させる（Ｓ８－６）。 In FIG. 7B, the zoom interlocking control unit 34c determines whether the image privacy protection setting is on (S8-3). The zoom interlocking control unit 34c determines whether the image privacy protection setting is on or off by storing the contents of the image privacy protection setting in the zoom interlocking control unit 34c itself or the memory 37. If it is determined that the image privacy protection setting is off (S8-3, NO), the output control unit 34b displays the image data after the zoom-in process on the display device 35 as it is (S8-6).
　一方、画像プライバシー保護設定がオンであると判定された場合には（Ｓ８－３、ＹＥＳ）、画像処理部３３は、ズーム連動制御部３４ｃの指示に応じて、ズームイン処理後のディスプレイ装置３５の表示領域に表示される監視対象物（例えば人物ＴＲＧ）の顔の輪郭ＤＴＬを検出（抽出）し（Ｓ８－４）、顔の輪郭ＤＴＬにマスキング処理を施す（Ｓ８－５）。具体的には、画像処理部３３は、検出された顔の輪郭ＤＴＬを包含する矩形領域を算出し、矩形領域内に所定のぼかしを入れる処理を行う（図８（Ｃ）参照）。画像処理部３３は、ぼかしを入れる処理により生成された画像データを出力制御部３４ｂに出力する。 On the other hand, when it is determined that the image privacy protection setting is ON (S8-3, YES), the image processing unit 33 responds to an instruction from the zoom interlocking control unit 34c to display the display device 35 after the zoom-in process. A face outline DTL of a monitoring target (for example, a person TRG) displayed in the display area is detected (extracted) (S8-4), and masking processing is applied to the face outline DTL (S8-5). Specifically, the image processing unit 33 calculates a rectangular area including the detected face outline DTL, and performs a process of adding a predetermined blur to the rectangular area (see FIG. 8C). The image processing unit 33 outputs the image data generated by the blurring process to the output control unit 34b.
　これにより、画像処理部３３は、ズームイン処理後の監視対象の被写体（例えば特定の人物）が誰であるかを分かり難くすることで、被写体の画像上のプライバシーを効果的に保護できる。出力制御部３４ｂは、ズームイン処理後の画像データをディスプレイ装置３５に表示させる（Ｓ８－６）。ステップＳ８－６の後、図７（Ｂ）に示す画像プライバシー保護処理は終了する。 Thereby, the image processing unit 33 can effectively protect the privacy on the image of the subject by making it difficult to know who is the subject to be monitored (for example, a specific person) after the zoom-in process. The output control unit 34b displays the image data after the zoom-in process on the display device 35 (S8-6). After step S8-6, the image privacy protection process shown in FIG. 7B ends.
　図６において、ズーム連動制御部３４ｃは、ステップＳ８のプライバシー保護処理を行った後、既定値又はズームイン処理の倍率に関する情報を用いて、指向方向のビーム幅を狭く調整し、更に、音声データの音量レベルを上げる（Ｓ９）。更に、出力制御部３４ｂは、ズーム連動制御部３４ｃによる調整後の指向方向のビーム幅に応じて、音声データの指向性を再形成する（Ｓ９）。ステップＳ９の後、指向性制御装置３の動作はステップＳ６に進む。 In FIG. 6, after performing the privacy protection process in step S8, the zoom interlocking control unit 34c adjusts the beam width in the pointing direction to be narrow using the information related to the default value or the magnification of the zoom-in process. The volume level is increased (S9). Further, the output control unit 34b reshapes the directivity of the audio data according to the beam width in the directivity direction after adjustment by the zoom interlocking control unit 34c (S9). After step S9, the operation of the directivity control device 3 proceeds to step S6.
　一方、ズーム連動制御部３４ｃは、カメラ装置１によりズームアウト処理が行われたと判定した場合には（Ｓ１０、ＹＥＳ）、既定値又はズームアウト処理の倍率に関する情報を用いて、指向方向のビーム幅を広く調整し、更に、音声データの音量レベルを維持する、あるいは現在の音量レベルが十分に大きい場合には音量レベルを下げる（Ｓ１１）。更に、出力制御部３４ｂは、ズーム連動制御部３４ｃによる調整後の指向方向のビーム幅に応じて、音声データの指向性を再形成する（Ｓ１１）。ステップＳ１１の後、指向性制御装置３の動作はステップＳ６に進む。 On the other hand, if the zoom interlocking control unit 34c determines that the zoom-out process has been performed by the camera device 1 (S10, YES), the beam width in the pointing direction is determined using information regarding the default value or the magnification of the zoom-out process. Is further adjusted, and the volume level of the audio data is maintained, or if the current volume level is sufficiently high, the volume level is lowered (S11). Further, the output control unit 34b reshapes the directivity of the audio data according to the beam width in the directivity direction after adjustment by the zoom interlocking control unit 34c (S11). After step S11, the operation of the directivity control device 3 proceeds to step S6.
　以上により、本実施形態の指向性制御システム１０では、指向性制御装置３は、ディスプレイ装置３５に表示された監視対象（例えば人物）に対するカメラ装置１のズーム処理により、監視対象の被写体が切り替わった場合には、音声データの指向性の強度（即ち、指向方向のビーム幅）をズーム処理に応じて調整し、更に、調整後のビーム幅に合わせて指向性を再形成するので、切り替わった監視対象の被写体に対する音声データの指向性を適正に形成でき、監視者の監視業務の効率劣化を抑制できる。 As described above, in the directivity control system 10 of the present embodiment, the directivity control device 3 switches the subject to be monitored by the zoom processing of the camera device 1 with respect to the monitor target (for example, a person) displayed on the display device 35. In this case, the intensity of directivity of the audio data (that is, the beam width in the directivity direction) is adjusted according to the zoom process, and the directivity is reformed according to the adjusted beam width. The directivity of the audio data with respect to the target subject can be formed appropriately, and the efficiency deterioration of the monitoring work of the supervisor can be suppressed.
　例えば、指向性制御装置３は、画像データのズーム処理がズームイン処理である場合に、指向方向のビーム幅を狭く調整でき、切り替わった監視対象の被写体（例えば特定の人物）の発する音声を被写体の周囲の音声に比べて目立つように出力できるので、監視者の監視業務効率を向上できる。 For example, when the zoom processing of the image data is zoom-in processing, the directivity control device 3 can narrowly adjust the beam width in the directivity direction, and the sound generated by the switched subject to be monitored (for example, a specific person) Since the output can be made more conspicuous than the surrounding voice, the monitoring work efficiency of the supervisor can be improved.
　また例えば、指向性制御装置３は、画像データのズーム処理がズームアウト処理である場合に、指向方向のビーム幅を広く調整でき、切り替わった監視対象の被写体（例えば複数の人物）の発する音声を網羅的に出力できるので、監視者の監視業務効率を向上できる。 Further, for example, when the zoom process of the image data is the zoom-out process, the directivity control device 3 can adjust the beam width in the directivity direction widely, and can output the sound generated by the switched monitoring subject (for example, a plurality of persons). Since it is possible to output exhaustively, the monitoring work efficiency of the supervisor can be improved.
　また、指向性制御装置３は、監視対象に対するズーム処理により、監視対象の被写体が切り替わった場合には、音声データの音量レベルの調整要否を判定するので、ズーム処理の内容に応じて、切り替わった監視対象の表示部の表示領域に対する大きさに合わせて音声を違和感なく出力できる。 In addition, the directivity control device 3 determines whether or not the volume level of the audio data needs to be adjusted when the subject to be monitored is switched by the zoom processing on the monitoring target, so that the switching is performed according to the content of the zoom processing. The sound can be output without a sense of incongruity according to the size of the display area of the display unit to be monitored.
　例えば、指向性制御装置３は、画像データのズーム処理がズームイン処理である場合に、音声データの音量レベルを上げることができ、切り替わった監視対象の被写体（例えば特定の人物）の発する音声を被写体の周囲の音声に比べて大きな音量で出力できるので、監視者の監視業務効率を向上できる。 For example, the directivity control device 3 can increase the volume level of the audio data when the zoom process of the image data is a zoom-in process, and can output the sound generated by the switched subject to be monitored (for example, a specific person). Because it is possible to output at a louder volume than the surrounding sound, it is possible to improve the monitoring work efficiency of the supervisor.
　また例えば、指向性制御装置３は、画像データのズーム処理がズームアウト処理でも、音声データの音量レベルを維持できるので、切り替わった監視対象の被写体（例えば複数の人物）の発する音声を被写体の周囲の音声と同等に出力でき、ズームアウト処理によっても監視業務を監視者に違和感なく実行させることができる。 In addition, for example, the directivity control device 3 can maintain the volume level of the audio data even when the zoom processing of the image data is the zoom-out processing, so that the sound emitted from the switched monitoring target subject (for example, a plurality of persons) can be transmitted around the subject. Can be output in the same manner as the above voice, and the monitoring task can be executed without any discomfort by the zoom-out process.
　また、指向性制御装置３は、画像データに人物が検出されないと画像処理部により判断された場合には、指向方向のビーム幅を維持するので、画像データに人物が検出されていない場合には、音声データの指向性の強弱を調整せず、人物が映り込まない状況において収音領域の周囲の環境音が変動するという違和感を解消できる。 The directivity control device 3 maintains the beam width in the directional direction when the image processing unit determines that no person is detected in the image data. Therefore, when no person is detected in the image data, the directivity control device 3 In addition, it is possible to eliminate the uncomfortable feeling that the environmental sound around the sound collection area fluctuates in a situation where the directivity of the sound data is not adjusted and a person is not reflected.
（第２の実施形態）
　第１の実施形態の指向性制御システム１０では、指向性制御装置３は、カメラ装置１のズームイン処理又はズームアウト処理に応じて、指向方向のビーム幅を狭く又は広く調整し、更に、ズームイン処理である場合には音声データの音量レベルを上げた。 (Second Embodiment)
In the directivity control system 10 according to the first embodiment, the directivity control device 3 adjusts the beam width in the directivity direction to be narrow or wide according to the zoom-in processing or zoom-out processing of the camera device 1, and further zooms in. If it is, the volume level of the voice data is increased.
　ところが、第１の実施形態の指向性制御システム１０では、全方位マイクアレイ装置２内に内蔵されるマイクロホンの配置数が既定であるために、ズームイン処理又はズームアウト処理に応じて、指向方向のビーム幅又は音量レベルが調整された場合でも、例えば収音領域の環境によっては、指向方向の音声データの強調が十分ではない場合が考えられる。 However, in the directivity control system 10 of the first embodiment, since the number of microphones built in the omnidirectional microphone array apparatus 2 is a predetermined number, the directivity control system 10 can change the directivity direction according to the zoom-in process or the zoom-out process. Even when the beam width or the sound volume level is adjusted, for example, depending on the environment of the sound collection region, it may be considered that the enhancement of the sound data in the directivity direction is not sufficient.
　そこで、第２の実施形態では、ズームイン処理又はズームアウト処理に応じて、指向方向のビーム幅又は音量レベルが調整された場合でも、指向方向の音声データの強調が十分ではない場合に、全方位マイクアレイ装置２の周囲に増設マイク部を結合した指向性制御システムについて説明する。第２の実施形態の指向性制御システムのシステム構成のうち、後述する増設マイク部以外の構成は、第１の実施形態の指向性制御システム１０と同一であるため、同一の内容に関する説明は簡略化又は省略し、異なる内容について説明する。 Therefore, in the second embodiment, even when the beam width or volume level in the directional direction is adjusted according to the zoom-in process or the zoom-out process, if the enhancement of the sound data in the directional direction is not sufficient, the omnidirectional A directivity control system in which an additional microphone unit is coupled around the microphone array device 2 will be described. Of the system configuration of the directivity control system of the second embodiment, the configuration other than the additional microphone unit described later is the same as that of the directivity control system 10 of the first embodiment, and thus the description regarding the same contents is simplified. Different contents will be described.
　次に、本実施形態の指向性制御装置３の動作手順について、図９を参照して説明する。図９は、第２の実施形態の指向性制御装置３の動作手順のうち、第１の実施形態の指向性制御装置３の動作手順と異なる動作手順を説明するフローチャートである。本実施形態の指向性制御装置３の動作手順の説明では、第１の実施形態の指向性制御装置３の動作手順と異なる動作手順について説明する。図９の説明の前提として、増設マイク部が全方位マイクアレイ装置２の周囲に結合される前の状態として説明する。 Next, the operation procedure of the directivity control device 3 of this embodiment will be described with reference to FIG. FIG. 9 is a flowchart for explaining an operation procedure different from the operation procedure of the directivity control device 3 of the first embodiment among the operation procedures of the directivity control device 3 of the second embodiment. In the description of the operation procedure of the directivity control device 3 of the present embodiment, an operation procedure different from the operation procedure of the directivity control device 3 of the first embodiment will be described. As a premise of the description of FIG. 9, a state before the additional microphone unit is coupled around the omnidirectional microphone array apparatus 2 will be described.
　図９において、ズーム連動制御部３４ｃは、ステップＳ８のプライバシー保護処理を行った後、既定値又はズームイン処理の倍率に関する情報を用いて、指向方向のビーム幅を狭く調整し、更に、音声データの音量レベルを上げる（Ｓ９）。更に、出力制御部３４ｂは、ズーム連動制御部３４ｃによる調整後の指向方向のビーム幅に応じて、音声データの指向性を再形成する（Ｓ９）。 In FIG. 9, after performing the privacy protection process in step S8, the zoom interlocking control unit 34c adjusts the beam width in the directing direction to be narrow using the information related to the default value or the magnification of the zoom-in process. The volume level is increased (S9). Further, the output control unit 34b reshapes the directivity of the audio data according to the beam width in the directivity direction after adjustment by the zoom interlocking control unit 34c (S9).
　ステップＳ９の後、ズーム連動制御部３４ｃは、ステップＳ９における指向性の再形成及び調整後の音声データの音量レベルによって出力された音声データの音声強調が十分であるか否かを監視者に問い合わせる（Ｓ２１）。例えば、ズーム連動制御部３４ｃは、音声強調が十分であるか否かを問い合わせるためのポップアップ画面をディスプレイ装置３５に表示させ、監視者の問い合わせに関する回答の入力操作を受け付ける。音声強調が十分であるとの回答が入力された場合には（Ｓ２１、ＹＥＳ）、指向性制御装置３の動作はステップＳ６に進む。 After step S9, the zoom interlocking control unit 34c inquires of the supervisor whether or not the voice data output by the sound volume level of the voice data after the directivity reconstruction and adjustment in step S9 is sufficient. (S21). For example, the zoom interlocking control unit 34c displays a pop-up screen for inquiring whether or not the voice enhancement is sufficient on the display device 35, and accepts an input operation for an answer regarding the inquiry of the supervisor. When the reply that the speech enhancement is sufficient is input (S21, YES), the operation of the directivity control device 3 proceeds to step S6.
　一方、音声強調が十分ではないとの回答が入力された場合には（Ｓ２１、ＮＯ）、現在の全方位マイクアレイ装置２が設けられた指向性制御システム１０の構成では、指向方向の音声強調が十分ではないため、全方位マイクアレイ装置２、又は全方位マイクアレイ装置２及び増設マイク部の電源がオフされた後（Ｓ２２）、後述する取付方法に従って、全方位マイクアレイ装置２の周囲に増設マイク部が新規に結合される（Ｓ２３）。全方位マイクアレイ装置２の周囲に対する増設マイク部の結合が終了した場合に（Ｓ２４、ＹＥＳ）、全方位マイクアレイ装置２、又は全方位マイクアレイ装置２及び増設マイク部の電源がオンされる（Ｓ２５）。この後、ズーム連動制御部３４ｃは、再びステップＳ９における指向性の再形成及び調整後の音声データの音量レベルによって出力された音声データの音声強調が十分であるか否かを監視者に問い合わせる（Ｓ２１）。 On the other hand, when an answer indicating that the voice enhancement is not sufficient is input (S21, NO), in the configuration of the directivity control system 10 provided with the current omnidirectional microphone array device 2, the voice enhancement in the directional direction is performed. Is not sufficient, after the omnidirectional microphone array apparatus 2 or the omnidirectional microphone array apparatus 2 and the additional microphone unit are powered off (S22), the omnidirectional microphone array apparatus 2 is placed around the omnidirectional microphone array apparatus 2 according to the mounting method described later. The additional microphone unit is newly coupled (S23). When the connection of the additional microphone unit to the periphery of the omnidirectional microphone array device 2 is completed (S24, YES), the omnidirectional microphone array device 2, or the omnidirectional microphone array device 2 and the additional microphone unit are powered on ( S25). Thereafter, the zoom interlocking control unit 34c again inquires of the supervisor whether or not the voice enhancement of the voice data output according to the sound volume level of the voice data after the reshaping and adjustment of the directivity in step S9 is sufficient ( S21).
　次に、本実施形態において第１収音部としての全方位マイクアレイ装置２の周囲に結合される各種の増設マイク部について、図面を参照して説明する。 Next, various extension microphone units coupled to the periphery of the omnidirectional microphone array device 2 as the first sound collection unit in the present embodiment will be described with reference to the drawings.
　図１０（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ１ａを結合する第１例（ドーナツ型結合）を示す正面図である。図１０（Ｂ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ１ａを結合する第１例を示す側面図である。 FIG. 10A is a front view showing a first example (doughnut-type connection) in which the additional microphone part 2z1a is connected around the omnidirectional microphone array device 2. FIG. FIG. 10B is a side view showing a first example in which the additional microphone section 2z1a is coupled around the omnidirectional microphone array apparatus 2. FIG.
　図１０（Ａ）では、第２収音部の一例としての増設マイク部の第１例として、全方位マイクアレイ装置２の周囲を囲める程の開口部を有し、全方位マイクアレイ装置２と同心円状の筐体（ドーナツ状筐体）を有する増設マイク部２ｚ１ａが示されている。具体的には、増設マイク部２ｚ１ａと全方位マイクアレイ装置２とは、同一平面上に結合されず、図１０（Ｂ）に示すように、高さ方向（鉛直方向）に離れて設置される。 In FIG. 10A, as a first example of the additional microphone unit as an example of the second sound collection unit, an opening that surrounds the omnidirectional microphone array device 2 is provided. An extension microphone unit 2z1a having a concentric casing (doughnut-shaped casing) is shown. Specifically, the extension microphone unit 2z1a and the omnidirectional microphone array device 2 are not coupled on the same plane, and are installed apart in the height direction (vertical direction) as shown in FIG. 10B. .
　結合方法としては、先ず天井面８から全方位マイクアレイ装置２及びカメラ装置１が取り外され、増設マイク部２ｚ１ａが天井面８に取り付けられてビス孔７ｅｂ１，７ｅｂ２を介してビス４１によって固定され、その後、全方位マイクアレイ装置２が増設マイク部２ｚ１ａと高さ方向に離れるように取り付けられ、全方位マイクアレイ装置２と増設マイク部２ｚ１ａとがビス孔７ｅａ１，７ｅａ２を介してビス４１によって固定される。なお、全方位マイクアレイ装置２及びカメラ装置１と増設マイク部２ｚ１ａとがそれぞれ天井面８に固定されるように取り付けられ、それぞれビス孔７ｅａ１，７ｅａ２を介してビス４１によって固定されても良い。また、増設マイク部２ｚ１ａは、増設マイク部２ｚ１ａの筐体が天井取付金具７ｒによって、天井面８に固定されることが好ましい。また、全方位マイクアレイ装置２の筐体に設けられるビス孔７ｅｂ１，７ｅｂ２は、補強強度の観点から、図１０（Ａ）に示すマージン線ＳＰＬより外側の位置に設けられることが好ましい。また、ここでは結合方法としてビス４１を用いたビス留めにより固定する例を説明しているが、公知の係止構造を用いて固定しても良く、以下同様である。 As a coupling method, the omnidirectional microphone array device 2 and the camera device 1 are first removed from the ceiling surface 8, and the additional microphone portion 2z1a is attached to the ceiling surface 8 and fixed by screws 41 via screw holes 7eb1 and 7eb2. Thereafter, the omnidirectional microphone array device 2 is attached so as to be separated from the extension microphone portion 2z1a in the height direction, and the omnidirectional microphone array device 2 and the extension microphone portion 2z1a are fixed by screws 41 through screw holes 7ea1 and 7ea2. The The omnidirectional microphone array device 2 and camera device 1 and the additional microphone portion 2z1a may be attached to the ceiling surface 8 and fixed by screws 41 through screw holes 7ea1 and 7ea2, respectively. Further, it is preferable that the extension microphone part 2z1a has the casing of the extension microphone part 2z1a fixed to the ceiling surface 8 by the ceiling mounting bracket 7r. Moreover, it is preferable that the screw holes 7eb1 and 7eb2 provided in the housing of the omnidirectional microphone array device 2 are provided at positions outside the margin line SPL shown in FIG. Further, here, an example of fixing by screwing using screws 41 is described as a coupling method, but fixing may be performed using a known locking structure, and so on.
　従って、図１０（Ａ）に示す増設マイク部２ｚ１ａの結合により、本実施形態の指向性制御システム１０は、増設マイク部２ｚ１ａの円周上に複数のマイク素子を均等に配置させることにより、全方位マイクアレイ装置２を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上できる。また、指向性制御システム１０は、全方位マイクアレイ装置２と増設マイク部２ｚ１ａとが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 Therefore, the directivity control system 10 according to the present embodiment is configured such that a plurality of microphone elements are evenly arranged on the circumference of the additional microphone unit 2z1a by coupling the additional microphone unit 2z1a illustrated in FIG. Compared with the sound collection characteristic of the voice when the azimuth microphone array device 2 is used alone, the sound collection characteristic of the voice with respect to all directions can be further improved evenly. Further, since the omnidirectional microphone array device 2 and the additional microphone unit 2z1a are installed apart from each other in the height direction, the directivity control system 10 can improve the sound collecting performance in the vertical direction (vertical direction).
　図１１は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ２を結合する第２例（ドーナツ楕円型結合）を示す正面図である。 FIG. 11 is a front view showing a second example (doughnut elliptical coupling) in which the additional microphone section 2z2 is coupled around the omnidirectional microphone array apparatus 2. FIG.
　図１１では、増設マイク部の第２例として、全方位マイクアレイ装置２の周囲を囲める程の開口部を有し、楕円形状の筐体を有する増設マイク部２ｚ２が示されている。増設マイク部２ｚ２の取り付け方法は、図１０（Ｂ）に示す増設マイク部２ｚ１ａの取り付け方法と同様に、ビス孔７ｅｃ１，７ｅｃ２を介してビス４１によって固定され、その他の説明（例えば全方位マイクアレイ装置２及びカメラ装置１の固定方法、マージン線ＳＰＬより外側に設けられるビス孔７ｅａ１，７ｅａ２。以下同様。）は同一であるため、説明を割愛する。 In FIG. 11, as a second example of the extension microphone unit, an extension microphone unit 2z2 having an opening that surrounds the periphery of the omnidirectional microphone array apparatus 2 and having an elliptical housing is shown. The extension microphone unit 2z2 is attached by screws 41 through screw holes 7ec1 and 7ec2 in the same manner as the extension microphone unit 2z1a shown in FIG. The fixing method of the device 2 and the camera device 1 and the screw holes 7ea1 and 7ea2 provided outside the margin line SPL (the same applies hereinafter) are the same, and will not be described.
　従って、図１１に示す増設マイク部２ｚ２の結合により、本実施形態の指向性制御システム１０は、例えば増設マイク部２ｚ２の楕円形状の長手方向には楕円形状の長手方向以外の方向に比べてより多くのマイク素子を配置させることができ、全方位マイクアレイ装置２を単独で用いる場合の音声の収音特性に比べて、音声の収音特性を均一に向上でき、更に、楕円形状の長手方向に対する音声の収音特性をより一層向上できる。また、指向性制御システム１０は、全方位マイクアレイ装置２と増設マイク部２ｚ２とが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 Therefore, due to the coupling of the additional microphone part 2z2 shown in FIG. 11, the directivity control system 10 of the present embodiment is more in the elliptical longitudinal direction of the additional microphone part 2z2, for example, than in the direction other than the elliptical longitudinal direction. Many microphone elements can be arranged, and compared with the sound collecting characteristic of the sound when the omnidirectional microphone array device 2 is used alone, the sound collecting characteristic of the sound can be improved uniformly, and the elliptical longitudinal direction It is possible to further improve the sound collection characteristics of the sound. In addition, since the omnidirectional microphone array device 2 and the extension microphone unit 2z2 are installed apart from each other in the height direction, the directivity control system 10 can improve the sound collecting performance in the vertical direction (vertical direction).
　図１２（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ３を結合する第３例（正方形型結合又は長方形型結合）を示す正面図である。図１２（Ｂ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ３を結合する第３例（正方形型結合又は長方形型結合）を示す側面図である。 FIG. 12 (A) is a front view showing a third example (square type connection or rectangular type connection) in which the additional microphone part 2z3 is connected around the omnidirectional microphone array device 2. FIG. FIG. 12B is a side view showing a third example (square type coupling or rectangular type coupling) in which the additional microphone unit 2z3 is coupled around the omnidirectional microphone array apparatus 2. FIG.
　図１２（Ａ）では、増設マイク部の第３例として、全方位マイクアレイ装置２の周囲を囲める程の開口部を有し、矩形形状の筐体（例えば正方形状又は長方形状の筐体）を有する増設マイク部２ｚ３が示されている。具体的には、増設マイク部２ｚ３と全方位マイクアレイ装置２とは、同一平面上に結合されず、図１２（Ｂ）に示すように、高さ方向（鉛直方向）に離れて設置される。 In FIG. 12 (A), as a third example of the additional microphone section, there is an opening that surrounds the omnidirectional microphone array device 2 and a rectangular housing (for example, a square or rectangular housing). An extension microphone unit 2z3 having the function of is shown. Specifically, the extension microphone unit 2z3 and the omnidirectional microphone array device 2 are not coupled on the same plane, and are installed apart in the height direction (vertical direction) as shown in FIG. .
　結合方法としては、先ず天井面８から全方位マイクアレイ装置２及びカメラ装置１が取り外され、増設マイク部２ｚ３が天井面８に取り付けられてビス孔７ｅｄ１，７ｅｄ２を介してビス４１によって固定され、その後、全方位マイクアレイ装置２が増設マイク部２ｚ３と高さ方向に離れるように取り付けられ、全方位マイクアレイ装置２と増設マイク部２ｚ３とがビス孔７ｅａ１，７ｅａ２を介してビス４１によって固定される。なお、全方位マイクアレイ装置２と増設マイク部２ｚ３とがそれぞれ天井面８に固定されるように取り付けられ、それぞれビス孔７ｅａ１，７ｅａ２を介してビス４１によって固定されても良い。 As a coupling method, first, the omnidirectional microphone array device 2 and the camera device 1 are removed from the ceiling surface 8, and the additional microphone part 2z3 is attached to the ceiling surface 8 and fixed by screws 41 via screw holes 7ed1, 7ed2, Thereafter, the omnidirectional microphone array device 2 is attached so as to be separated from the extension microphone portion 2z3 in the height direction, and the omnidirectional microphone array device 2 and the extension microphone portion 2z3 are fixed by screws 41 via screw holes 7ea1 and 7ea2. The Note that the omnidirectional microphone array device 2 and the additional microphone part 2z3 may be attached to be fixed to the ceiling surface 8, and may be fixed by screws 41 via screw holes 7ea1 and 7ea2, respectively.
　従って、図１２（Ａ）に示す増設マイク部２ｚ３の結合により、本実施形態の指向性制御システム１０は、増設マイク部２ｚ３の開口部の周囲に複数のマイク素子を均等に配置させることにより、全方位マイクアレイ装置２を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、増設マイク部２ｚ３を柔軟に設置できる。また、指向性制御システム１０は、全方位マイクアレイ装置２と増設マイク部２ｚ３とが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 Therefore, the directivity control system 10 of the present embodiment is configured by evenly arranging a plurality of microphone elements around the opening of the additional microphone unit 2z3 by coupling the additional microphone unit 2z3 shown in FIG. Compared to the sound collecting characteristic of the sound when the omnidirectional microphone array device 2 is used alone, the sound collecting characteristic of the sound with respect to all directions can be further improved even more, and the additional microphone part 2z3 can be flexibly installed. In addition, since the omnidirectional microphone array device 2 and the extension microphone unit 2z3 are installed apart from each other in the height direction, the directivity control system 10 can improve the sound collecting performance in the vertical direction (vertical direction).
　図１３（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ４を結合する第４例（ハニカム型結合）を示す正面図である。図１３（Ｂ）は、全方位マイクアレイ装置２ｓの周囲に増設マイク部２ｚ４を結合する第５例（ハニカム型結合）を示す正面図である。 FIG. 13A is a front view showing a fourth example (honeycomb type connection) in which the additional microphone part 2z4 is connected around the omnidirectional microphone array apparatus 2. FIG. FIG. 13B is a front view showing a fifth example (honeycomb-type connection) in which the additional microphone part 2z4 is connected around the omnidirectional microphone array device 2s.
　図１３（Ａ）では、増設マイク部の第４例として、全方位マイクアレイ装置２の周囲を囲める程の開口部を有し、ハニカム形状の筐体を有する増設マイク部２ｚ４が示されている。増設マイク部２ｚ４の取り付け方法は、図１０（Ｂ）に示す増設マイク部２ｚ１ａの取り付け方法と同様に、ビス孔７ｅｅ１，７ｅｅ２を介してビス４１によって固定され、その他の説明は同一であるため、説明を割愛する。なお、ハニカム形状の増設マイク部２ｚ４の取り付け数は、１つに限らず、必要応じて２つ以上でも良い。 In FIG. 13A, as a fourth example of the additional microphone section, an additional microphone section 2z4 having an opening that surrounds the omnidirectional microphone array apparatus 2 and having a honeycomb-shaped casing is shown. . The extension microphone part 2z4 is fixed by the screw 41 through the screw holes 7ee1 and 7ee2 in the same manner as the extension microphone part 2z1a shown in FIG. I will omit the explanation. Note that the number of honeycomb-shaped extension microphones 2z4 attached is not limited to one, and may be two or more as necessary.
　また、図１３（Ｂ）では、増設マイク部の第５例として、図１３（Ａ）に示すハニカム形状と同一のハニカム形状の筐体を有する増設マイク部２ｚ４ａが示され、全方位マイクアレイ装置２ｓの筐体の形状も全方位マイクアレイ装置２の筐体の形状と異なっており、矩形形状である。増設マイク部２ｚ４ａは図１３（Ａ）に示す増設マイク部２ｚ４の開口部が形成されていない。また、全方位マイクアレイ装置２ｓの中心に、魚眼レンズを用いた魚眼カメラ（カメラ装置）１ｓが取り付けられている。増設マイク部２ｚ４ａの取り付け方法は、図１０（Ｂ）に示す増設マイク部２ｚ１ａの取り付け方法と同様に、ビス孔７ｅｆ１，７ｅｆ２を介してビス４１によって固定され、また、全方位マイクアレイ装置２ｓも同様に、ビス孔７ｅａ３，７ｅａ４を介してビス４１によって固定され、その他の説明は同一であるため、説明を割愛する。 In FIG. 13B, as a fifth example of the additional microphone section, an additional microphone section 2z4a having a casing having the same honeycomb shape as that shown in FIG. 13A is shown, and the omnidirectional microphone array apparatus is shown. The shape of the housing of 2s is also different from the shape of the housing of the omnidirectional microphone array apparatus 2, and is a rectangular shape. The extension microphone part 2z4a does not have the opening part of the extension microphone part 2z4 shown in FIG. A fisheye camera (camera device) 1s using a fisheye lens is attached to the center of the omnidirectional microphone array device 2s. The attachment method of the extension microphone part 2z4a is fixed by the screw 41 through the screw holes 7ef1 and 7ef2, similarly to the attachment method of the extension microphone part 2z1a shown in FIG. 10 (B), and the omnidirectional microphone array device 2s is also provided. Similarly, since it is fixed by the screw 41 through the screw holes 7ea3 and 7ea4 and the other explanation is the same, the explanation is omitted.
　従って、図１３（Ａ）又は図１３（Ｂ）に示す増設マイク部２ｚ４，２ｚ４ａの結合により、本実施形態の指向性制御システム１０は、増設マイク部２ｚ４の開口部又は増設マイク部２ｚ４ａの外郭に沿って複数のマイク素子を均等に配置させることにより、全方位マイクアレイ装置２を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、増設マイク部２ｚ４，２ｚ４ａを柔軟に設置でき、増設マイク部２ｚ４，２ｚ４ａの増設方向に応じて、収音性能に差をつけることができる。また、指向性制御システム１０は、全方位マイクアレイ装置２と増設マイク部２ｚ４，２ｚ４ａとが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 Therefore, the directivity control system 10 according to the present embodiment is coupled to the additional microphone part 2z4 or the outer part of the additional microphone part 2z4a by coupling the additional microphone parts 2z4 and 2z4a shown in FIG. 13 (A) or FIG. 13 (B). By uniformly arranging a plurality of microphone elements along the line, it is possible to improve the sound collecting characteristics of the sound in all directions evenly compared with the sound collecting characteristics of the sound when the omnidirectional microphone array device 2 is used alone. Furthermore, the additional microphone units 2z4 and 2z4a can be flexibly installed, and the sound collecting performance can be made different depending on the direction of expansion of the additional microphone units 2z4 and 2z4a. Moreover, since the omnidirectional microphone array device 2 and the additional microphone units 2z4 and 2z4a are installed apart in the height direction, the directivity control system 10 can improve the sound collecting performance in the vertical direction (vertical direction).
　図１４（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄを結合する第６例（バー型結合）を示す正面図である。図１４（Ｂ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄを結合する第６例（バー型結合）を示す側面図である。 FIG. 14A is a front view showing a sixth example (bar type connection) in which the additional microphone units 2z5a, 2z5b, 2z5c, and 2z5d are coupled around the omnidirectional microphone array apparatus 2. FIG. FIG. 14B is a side view showing a sixth example (bar-type coupling) in which the additional microphone units 2z5a, 2z5b, 2z5c, and 2z5d are coupled around the omnidirectional microphone array apparatus 2.
　図１４（Ａ）では、増設マイク部の第６例として、全方位マイクアレイ装置２の周囲に、一方向に長い棒形状の筐体を有する増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄが示されている。具体的には、増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄと全方位マイクアレイ装置２とは、同一平面上に結合されても良いし、高さ方向（鉛直方向）に離れて設置されても良い。 In FIG. 14A, as a sixth example of the extension microphone unit, extension microphone units 2z5a, 2z5b, 2z5c, and 2z5d having bar-shaped casings that are long in one direction are shown around the omnidirectional microphone array apparatus 2. ing. Specifically, the extension microphone units 2z5a, 2z5b, 2z5c, 2z5d and the omnidirectional microphone array device 2 may be coupled on the same plane, or may be installed apart in the height direction (vertical direction). good.
　結合方法としては、先ず天井面８から全方位マイクアレイ装置２が取り外され、既設の天井取付板金７ｚの端部と、増設マイク部（例えば増設マイク部２ｚ５ａ，２ｚ５ｃ）を取り付けるための増設用取付板金７ｚ１，７ｚ２の端部とがそれぞれ嵌め込んで係止され、ビス４１によって固定される。更に、全方位マイクアレイ装置２及びカメラ装置１が天井取付板金７ｚに取り付けられてビス４１によって固定され、その後、増設マイク部（例えば増設マイク部２ｚ５ａ，２ｚ５ｃ）が増設用取付板金７ｚ１，７ｚ２に取り付けられてビス４１によって固定される。 As a coupling method, first, the omnidirectional microphone array apparatus 2 is removed from the ceiling surface 8, and an extension installation for attaching an end of the existing ceiling mounting sheet metal 7z and an extension microphone part (for example, the extension microphone parts 2z5a, 2z5c). The end portions of the metal plates 7z1 and 7z2 are fitted and locked, and are fixed by screws 41. Further, the omnidirectional microphone array device 2 and the camera device 1 are attached to the ceiling mounting metal plate 7z and fixed by screws 41, and thereafter, the additional microphone portions (for example, the additional microphone portions 2z5a and 2z5c) are attached to the additional mounting metal plates 7z1 and 7z2. It is attached and fixed with screws 41.
　従って、図１４（Ａ）に示す増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄの結合により、本実施形態の指向性制御システム１０は、増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄの長手方向に沿って複数のマイク素子を均等に配置させることにより、全方位マイクアレイ装置２を単独で用いる場合の音声の収音特性に比べて、棒形状の長手方向に対する音声の収音特性を一層向上できる。 Therefore, the directivity control system 10 of the present embodiment is coupled along the longitudinal direction of the additional microphone units 2z5a, 2z5b, 2z5c, and 2z5d by coupling the additional microphone units 2z5a, 2z5b, 2z5c, and 2z5d shown in FIG. By uniformly arranging the plurality of microphone elements, it is possible to further improve the sound collection characteristics of the sound in the longitudinal direction of the bar shape, compared to the sound collection characteristics of the sound when the omnidirectional microphone array device 2 is used alone.
　ここで、図１４（Ｂ）に示す天井取付板金７ｚに対する全方位マイクアレイ装置２及びカメラ装置１の取付構造と、増設用取付板金７ｚ１，７ｚ２に対する増設マイク部２ｚ５ａ，２ｚ５ｃの取付構造と、天井取付板金７ｚと増設用取付板金７ｚ１，７ｚ２との係止構造について、図１５（Ａ）及び図１５（Ｂ）を参照して説明する。図１５（Ａ）は、図１４（Ｂ）に示す全方位マイクアレイ装置２と天井取付板金７ｚとが取り付けられた状態を示す平面図である。図１５（Ｂ）は、図１５（Ａ）のＥ－Ｅ断面を示し、図１４（Ｂ）に示す全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ａ，２ｚ５ｃが取り付けられた状態を示す側面図である。 Here, the mounting structure of the omnidirectional microphone array device 2 and the camera device 1 with respect to the ceiling mounting sheet metal 7z shown in FIG. 14B, the mounting structure of the additional microphone portions 2z5a and 2z5c with respect to the additional mounting sheet metals 7z1 and 7z2, and the ceiling A locking structure between the mounting sheet metal 7z and the additional mounting sheet metals 7z1 and 7z2 will be described with reference to FIGS. 15A and 15B. FIG. 15A is a plan view showing a state where the omnidirectional microphone array apparatus 2 and the ceiling mounting sheet metal 7z shown in FIG. 14B are attached. 15B shows a cross section taken along the line EE of FIG. 15A, and a side view showing a state in which the additional microphone parts 2z5a and 2z5c are attached around the omnidirectional microphone array apparatus 2 shown in FIG. 14B. FIG.
　図１５（Ａ）には、天井取付板金７ｚの表面から見た場合、即ち、天井面８から図１５（Ｂ）に示す下方向を見た場合の全方位マイクアレイ装置２及びカメラ装置１の取付構造が示されている。天井取付板金７ｚは、表面に凹凸を有する略円盤状に形成された金属製の部材であるが、セラミックス製又は合成樹脂（例えばプラスチック又はエラストマ）製の部材が代用されても良い。 FIG. 15A shows the omnidirectional microphone array device 2 and the camera device 1 when viewed from the surface of the ceiling mounting sheet metal 7z, that is, when viewed from the ceiling surface 8 in the downward direction shown in FIG. The mounting structure is shown. The ceiling mounting sheet metal 7z is a metal member formed in a substantially disk shape having irregularities on the surface, but a member made of ceramics or synthetic resin (for example, plastic or elastomer) may be substituted.
　天井面８に対向する天井取付板金７ｚの表面には、同軸ｉ方向に突出し、カメラ装置１を取り付けて固定するための係止片７ａが同心円上の３箇所に形成されている。更に、天井取付板金７ｚの表面には、同軸ｉ方向に突出し、全方位マイクアレイ装置２を取り付けて固定するための係止片７ｂが、係止片７ａが形成された同心円よりも大きな直径の同心円上の３箇所に形成されている。 On the surface of the ceiling mounting sheet metal 7z facing the ceiling surface 8, locking pieces 7a for projecting in the coaxial i direction and for mounting and fixing the camera device 1 are formed at three positions on a concentric circle. Further, the surface of the ceiling mounting sheet metal 7z protrudes in the coaxial i direction, and a locking piece 7b for mounting and fixing the omnidirectional microphone array device 2 has a larger diameter than the concentric circle on which the locking piece 7a is formed. It is formed at three locations on concentric circles.
　係止片７ａには、カメラ装置１の底面に設けられた固定ピン４３と係合する係合孔７１が、一端部の径が他端部の径に比べて大きい略ひょうたん状に形成されている。同様に、係止片７ｂには、全方位マイクアレイ装置２の底面に設けられた固定ピン４５と係合する係合孔７３が、一端部の径が他端部の径に比べて大きい略ひょうたん状に形成されている。 An engaging hole 71 that engages with the fixing pin 43 provided on the bottom surface of the camera device 1 is formed in the locking piece 7a in a substantially gourd shape in which the diameter of one end is larger than the diameter of the other end. Yes. Similarly, the engagement piece 73 has an engagement hole 73 that engages with the fixing pin 45 provided on the bottom surface of the omnidirectional microphone array device 2. The engagement hole 73 has a larger diameter at one end than the diameter at the other end. It is formed in a gourd shape.
　固定ピン４３，４５は、それぞれ係合孔７１，７３の一端部と他端部との間の太さ（直径）を有する頭部と頭部より細い胴部とからなる。 The fixing pins 43 and 45 are each composed of a head having a thickness (diameter) between one end and the other end of the engagement holes 71 and 73 and a body that is thinner than the head.
　天井取付板金７ｚの表面には、係止片７ａ及び係止片７ｂの外側に広がるように、扇形の孔部７ｃ，７ｄがそれぞれ３箇所に形成されている。これらの扇形の孔部７ｃ，７ｄの形状及び位置は、天井取付板金７ｚに全方位マイクアレイ装置２及びカメラ装置１が取り付けられた場合に、全方位マイクアレイ装置２及びカメラ装置１の各水平角の基準方向が一致するように設計されている。 On the surface of the ceiling mounting sheet metal 7z, fan-shaped holes 7c and 7d are respectively formed at three locations so as to spread outside the locking pieces 7a and 7b. The shapes and positions of the fan-shaped holes 7c and 7d are the same as the horizontal positions of the omnidirectional microphone array device 2 and the camera device 1 when the omnidirectional microphone array device 2 and the camera device 1 are attached to the ceiling mounting sheet metal 7z. It is designed so that the reference directions of the corners coincide.
　天井取付板金７ｚの表面の中央部には、ビス４１が挿通されるビス孔７ｅが３箇所に形成されている。天井取付板金７ｚは、ビス孔７ｅを介して、天井面８にビス４１を螺合させることで、天井面８に固定される。 At the center of the surface of the ceiling mounting sheet metal 7z, screw holes 7e through which the screws 41 are inserted are formed at three locations. The ceiling mounting sheet metal 7z is fixed to the ceiling surface 8 by screwing screws 41 into the ceiling surface 8 through the screw holes 7e.
　全方位マイクアレイ装置２及びカメラ装置１が天井取付板金７ｚに取り付けられる場合、先ず、カメラ装置１が天井取付板金７ｚに取り付けられる。この場合、固定ピン４３を係止片７ａに形成された係合孔７１に係合させる。 When the omnidirectional microphone array device 2 and the camera device 1 are attached to the ceiling mounting sheet metal 7z, first, the camera device 1 is attached to the ceiling mounting sheet metal 7z. In this case, the fixing pin 43 is engaged with the engagement hole 71 formed in the locking piece 7a.
　即ち、カメラ装置１の底面に突出する固定ピン４３を、係合孔７１の径の大きい一端部側に挿し込む。そして、固定ピン４３の頭部が係合孔７１から突出した状態で、カメラ装置１を右方向又は左方向に回転させることで固定ピン４３を係合孔７１において移動させる（回転ロック方式）。そして、固定ピン４３の頭部が係合孔７１の他端部側に移動した状態で、固定ピン４３と係合孔７１とは係合したことになり、カメラ装置１は同軸ｉ方向に固定される。 That is, the fixing pin 43 that protrudes from the bottom surface of the camera device 1 is inserted into one end of the engagement hole 71 having a large diameter. Then, with the head of the fixing pin 43 protruding from the engagement hole 71, the fixing pin 43 is moved in the engagement hole 71 by rotating the camera device 1 in the right direction or the left direction (rotation lock method). Then, with the head of the fixing pin 43 moved to the other end side of the engaging hole 71, the fixing pin 43 and the engaging hole 71 are engaged, and the camera device 1 is fixed in the coaxial i direction. Is done.
　カメラ装置１を天井取付板金７ｚに取り付けた後、全方位マイクアレイ装置２を、全方位マイクアレイ装置２の開口部２１ａの内側からカメラ装置１が露出するように、天井取付板金７ｚに取り付ける。この場合、固定ピン４５を係止片７ｂに形成された係合孔７３に係合させる。なお、固定ピン４５を係合孔７３に固定する手順は、固定ピン４３を係合孔７１に固定する手順と同様である。 After attaching the camera apparatus 1 to the ceiling mounting sheet metal 7z, the omnidirectional microphone array apparatus 2 is attached to the ceiling mounting sheet metal 7z so that the camera apparatus 1 is exposed from the inside of the opening 21a of the omnidirectional microphone array apparatus 2. In this case, the fixing pin 45 is engaged with the engagement hole 73 formed in the locking piece 7b. The procedure for fixing the fixing pin 45 to the engaging hole 73 is the same as the procedure for fixing the fixing pin 43 to the engaging hole 71.
　図１６（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄ，２ｚ５ｅ，２ｚ５ｆ，２ｚ５ｇ，２ｚ５ｈを結合する第７例（バー型結合）を示す正面図である。図１６（Ｂ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ｃ，２ｚ５ｆ，２ｚ５ｈを結合する第８例（バー型結合）を示す正面図である。図１６（Ｃ）は、全方位マイクアレイ装置２の周囲に増設マイク部２ｚ５ａ、２ｚ５ｅを結合する第９例（バー型結合）を示す正面図である。 FIG. 16A is a front view showing a seventh example (bar type coupling) in which the additional microphone units 2z5a, 2z5b, 2z5c, 2z5d, 2z5e, 2z5f, 2z5g, and 2z5h are coupled around the omnidirectional microphone array apparatus 2. is there. FIG. 16B is a front view showing an eighth example (bar type connection) in which the additional microphone units 2z5c, 2z5f, and 2z5h are combined around the omnidirectional microphone array apparatus 2. FIG. FIG. 16C is a front view showing a ninth example (bar type connection) in which the additional microphone units 2z5a and 2z5e are combined around the omnidirectional microphone array apparatus 2. FIG.
　図１６（Ａ）～図１６（Ｃ）においても、各々の増設マイク部の取り付け方及び増設マイク部を取り付けたことによる効果は、増設マイク部の個数を除けば、図１４（Ａ）に示す増設マイク部２ｚ５ａ，２ｚ５ｂ，２ｚ５ｃ，２ｚ５ｄの取り付け方及び増設マイク部を取り付けたことによる効果と同様であるため、説明を割愛する。 Also in FIGS. 16A to 16C, the effect of attaching each additional microphone unit and the effect of attaching the additional microphone unit is shown in FIG. 14A except for the number of additional microphone units. Since it is the same as the effect of attaching the extension microphone part 2z5a, 2z5b, 2z5c, 2z5d and the extension microphone part, the description is omitted.
　図１７（Ａ）は、全方位マイクアレイ装置２の周囲に増設マイク部ｍ１，ｍ２，ｍ３，ｍ４を結合する第１０例（スケルトン型結合）を示す正面図である。図１７（Ｂ）は、全方位マイクアレイ装置２の周囲に増設マイク部ｍ１，ｍ２，ｍ３，ｍ４を結合する第１０例（スケルトン型結合）を示す側面図である。図１７（Ｃ）は、全方位マイクアレイ装置２の周囲に増設マイク部ｍ１，ｍ２，ｍ３，ｍ４，ｍ５，ｍ６，ｍ７，ｍ８を結合する第１１例（スケルトン型結合）を示す正面図である。図１７（Ｄ）は、全方位マイクアレイ装置２の周囲に増設マイク部ｍ１，ｍ２，ｍ３，ｍ４，ｍ５，ｍ６，ｍ７，ｍ８を結合する第１１例（スケルトン型結合）を示す側面図である。 FIG. 17A is a front view showing a tenth example (skeleton type coupling) in which the additional microphone units m1, m2, m3, and m4 are coupled around the omnidirectional microphone array device 2. FIG. FIG. 17B is a side view showing a tenth example (skeleton type coupling) in which additional microphone units m1, m2, m3, and m4 are coupled around the omnidirectional microphone array apparatus 2. FIG. FIG. 17C is a front view showing an eleventh example (skeleton type coupling) in which the additional microphone units m1, m2, m3, m4, m5, m6, m7, and m8 are coupled around the omnidirectional microphone array apparatus 2. is there. FIG. 17D is a side view showing an eleventh example (skeleton type coupling) in which the additional microphone units m1, m2, m3, m4, m5, m6, m7, and m8 are coupled around the omnidirectional microphone array apparatus 2. is there.
　図１７（Ａ）では、増設マイク部の第１０例として、全方位マイクアレイ装置２の筐体の対向する４箇所に設けられたコネクタ部ｃ１，ｃ２，ｃ３，ｃ４に、マイク線収容管ｎ１，ｎ２，ｎ３，ｎ４を介して、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４が結合されている。 In FIG. 17A, as a tenth example of the additional microphone section, the microphone line accommodation tube n1 is connected to the connector sections c1, c2, c3, and c4 provided at the four opposing positions of the casing of the omnidirectional microphone array apparatus 2. , N2, n3, and n4, the additional microphone units m1, m2, m3, and m4 are coupled to each other.
　結合方法としては、先ず、全方位マイクアレイ装置２の筐体の対向する４箇所に設けられたコネクタ部ｃ１，ｃ２，ｃ３，ｃ４にマイク線収容管ｎ１，ｎ２，ｎ３，ｎ４を接続する。マイク線収容管ｎ１，ｎ２，ｎ３，ｎ４は、例えば樹脂成型により製造されたものであり、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４により収音された音声の音声データを伝送するための信号線が内部に収容されている。マイク線収容管ｎ１，ｎ２，ｎ３，ｎ４が接続された後、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４がマイク線収容管ｎ１，ｎ２，ｎ３，ｎ４に接続され、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４の結合が終了する。 As a coupling method, first, microphone line accommodation tubes n1, n2, n3, and n4 are connected to connector portions c1, c2, c3, and c4 provided at four opposing positions of the casing of the omnidirectional microphone array apparatus 2. The microphone line accommodating tubes n1, n2, n3, and n4 are manufactured by resin molding, for example, and are signal lines for transmitting voice data collected by the additional microphone units m1, m2, m3, and m4. Is housed inside. After the microphone line accommodation tubes n1, n2, n3, and n4 are connected, the additional microphone units m1, m2, m3, and m4 are connected to the microphone line accommodation tubes n1, n2, n3, and n4, and the additional microphone units m1, m2, and m4 are connected. The combination of m3 and m4 ends.
　従って、図１７（Ａ）に示す増設マイク部ｍ１，ｍ２，ｍ３，ｍ４の結合により、本実施形態の指向性制御システム１０は、上述した増設マイク部内のマイク素子を収容するための筐体を不要とし、筐体による音声（音波）の回り込みを排除して音声を収音できるので、全方位マイクアレイ装置２と増設マイク部ｍ１，ｍ２，ｍ３，ｍ４とを高さ方向に離れて設置する必要が無い。また、指向性制御システム１０は、マイク線収容管ｎ１，ｎ２，ｎ３，ｎ４を介して、全方位マイクアレイ装置２の周囲に設けられたコネクタ部ｃ１，ｃ２，ｃ３，ｃ４と増設マイク部ｍ１，ｍ２，ｍ３，ｍ４とを簡易に接続でき、更に、全方位マイクアレイ装置２に所定形状の筐体を有する増設マイク部を増設する場合に比べて、増設マイク部を軽量化できるので、増設マイク部内のマイク素子における収音特性を一層向上できる。 Therefore, the directivity control system 10 of the present embodiment has a housing for accommodating the microphone elements in the above-described additional microphone unit by coupling the additional microphone units m1, m2, m3, and m4 shown in FIG. Since the sound can be collected by eliminating the wraparound of the sound (sound wave) by the housing, the omnidirectional microphone array device 2 and the additional microphone units m1, m2, m3, and m4 are installed apart in the height direction. There is no need. Further, the directivity control system 10 includes connector portions c1, c2, c3, and c4 and an additional microphone portion m1 provided around the omnidirectional microphone array device 2 via the microphone wire accommodating tubes n1, n2, n3, and n4. , M2, m3, and m4 can be easily connected, and the extension microphone part can be reduced in weight compared to the case of adding an extension microphone part having a casing of a predetermined shape to the omnidirectional microphone array device 2, so the extension The sound collection characteristics of the microphone element in the microphone section can be further improved.
　また、図１７（Ｃ）においても、各々の増設マイク部の取り付け方は、増設マイク部の個数を除けば、図１７（Ａ）に示す増設マイク部ｍ１，ｍ２，ｍ３，ｍ４の取り付け方と同様であるため、説明を割愛する。効果については、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４と高さが違う増設マイク部ｍ５，ｍ６，ｍ７，ｍ８が追加されることで、増設マイク部ｍ１，ｍ２，ｍ３，ｍ４のみを結合する第１０例に比べて、垂直方向（鉛直方向）の収音性能を向上できる。 Also in FIG. 17C, each extension microphone unit is attached in the same way as the extension microphone units m1, m2, m3, and m4 shown in FIG. 17A except for the number of extension microphone units. Since it is the same, description is omitted. As for the effect, only the additional microphone parts m1, m2, m3, and m4 are combined by adding the additional microphone parts m5, m6, m7, and m8 that are different in height from the additional microphone parts m1, m2, m3, and m4. Compared to the tenth example, the sound collecting performance in the vertical direction (vertical direction) can be improved.
　図１８（Ａ）は、全方位マイクアレイ装置２の周囲を囲める開口部を有し、全方位マイクアレイ装置２と同心円状の筐体（ドーナツ筐体）を有する増設マイク部２ｚ１の結合方法の第１例を示す正面図である。図１８（Ｂ）は、全方位マイクアレイ装置２の周囲への増設マイク部２ｚ１の結合方法の第２例を示す正面図である。 FIG. 18A shows a method of coupling an additional microphone unit 2z1 having an opening surrounding the periphery of the omnidirectional microphone array apparatus 2 and having a casing (doughnut casing) concentric with the omnidirectional microphone array apparatus 2. It is a front view which shows a 1st example. FIG. 18B is a front view showing a second example of a method of coupling the additional microphone unit 2z1 around the omnidirectional microphone array device 2. FIG.
　図１８（Ａ）に示す結合方法では、全方位マイクアレイ装置２及びカメラ装置１が拡大天井取付板金７ｙに予め接続されており、増設マイク部２ｚ１が結合される場合には、全方位マイクアレイ装置２の周囲を囲むように、拡大天井取付板金７ｙに接続される。 In the coupling method shown in FIG. 18A, when the omnidirectional microphone array device 2 and the camera device 1 are connected in advance to the enlarged ceiling mounting sheet metal 7y and the additional microphone portion 2z1 is coupled, the omnidirectional microphone array. It is connected to the enlarged ceiling mounting sheet metal 7y so as to surround the periphery of the device 2.
　図１８（Ｂ）に示す結合方法では、既設の天井取付板金７ｚから全方位マイクアレイ装置２及びカメラ装置１が取り外され、天井取付板金７ｚに、例えば４つの固定部ｆ１，ｆ２，ｆ３，ｆ４を固定し、更に、増設マイク部２ｚ１を天井取付板金７ｚに取り付ける場合には、４つの固定部ｆ１，ｆ２，ｆ３，ｆ４にそれぞれビス４１を留めて固定する。その後、増設マイク部２ｚ１の開口部に収まるように、全方位マイクアレイ装置２及びカメラ装置１が取り付けられる。 In the coupling method shown in FIG. 18B, the omnidirectional microphone array device 2 and the camera device 1 are detached from the existing ceiling mounting sheet metal 7z, and, for example, four fixing portions f1, f2, f3, f4 are attached to the ceiling mounting sheet metal 7z. When the extension microphone part 2z1 is attached to the ceiling mounting sheet metal 7z, the screws 41 are fastened to the four fixing parts f1, f2, f3, and f4, respectively. Thereafter, the omnidirectional microphone array device 2 and the camera device 1 are attached so as to fit in the opening of the extension microphone portion 2z1.
　図１９（Ａ）は、全方位マイクアレイ装置２ｆの周囲への増設マイク部２ｚ１の結合方法の第３例を示す正面図である。図１９（Ｂ）は、図１９（Ａ）のＥ－Ｅ断面を示し、全方位マイクアレイ装置２ｆの周囲への増設マイク部２ｚ１の結合方法の第３例を示す側面図である。図１９（Ｃ）は、全方位マイクアレイ装置２の周囲への増設マイク部２ｚ１の結合方法の第４例を示す補足説明図である。図１９（Ａ）及び図１９（Ｂ）に示す例では、全方位マイクアレイ装置２ｆの筐体の円周に、例えば２つのフック部ｆ５，ｆ７が係止可能な凹部ｕ１，ｕ２が設けられている。 FIG. 19A is a front view showing a third example of a method of coupling the additional microphone unit 2z1 around the omnidirectional microphone array device 2f. FIG. 19B is a side view showing the EE cross section of FIG. 19A and showing a third example of a method of coupling the additional microphone part 2z1 around the omnidirectional microphone array apparatus 2f. FIG. 19C is a supplementary explanatory diagram illustrating a fourth example of a method of coupling the additional microphone unit 2z1 around the omnidirectional microphone array device 2. FIG. In the example shown in FIGS. 19 (A) and 19 (B), recesses u1 and u2 to which, for example, two hook portions f5 and f7 can be locked are provided on the circumference of the casing of the omnidirectional microphone array device 2f. ing.
　図１９（Ａ）及び図１９（Ｂ）に示す結合方法では、既設の天井取付板金７ｚから全方位マイクアレイ装置２ｆ及びカメラ装置１が取り外され、天井取付板金７ｚに、増設マイク部２ｚ１の開口部の対向する４箇所に設けられたフック部ｆ５，ｆ６，ｆ７，ｆ８を凹部ｕ１，ｕ２に係止させて固定し、更に、全方位マイクアレイ装置２ｆ及びカメラ装置１が取り付けられる。 In the coupling method shown in FIGS. 19A and 19B, the omnidirectional microphone array device 2f and the camera device 1 are detached from the existing ceiling mounting sheet metal 7z, and the opening of the additional microphone part 2z1 is opened in the ceiling mounting sheet metal 7z. The hook portions f5, f6, f7, and f8 provided at four locations facing each other are locked and fixed to the concave portions u1 and u2, and the omnidirectional microphone array device 2f and the camera device 1 are attached.
　図１９（Ｃ）に示す結合方法では、既設の天井取付板金７ｚは、例えば３つのフック部ｆ９，ｆ１０，ｆ１１が設けられた拡大天井取付板金７ｙに交換される。拡大天井取付板金７ｙに、順次、増設マイク部２ｚ１、全方位マイクアレイ装置２及びカメラ装置１が回転ロック方式（図１５（Ａ）参照）によって接続されることで、増設マイク部２ｚ１が全方位マイクアレイ装置２に対して結合される。 In the coupling method shown in FIG. 19C, the existing ceiling mounting sheet metal 7z is replaced with, for example, an enlarged ceiling mounting sheet metal 7y provided with three hook portions f9, f10, and f11. The extension microphone part 2z1, the omnidirectional microphone array apparatus 2 and the camera apparatus 1 are sequentially connected to the enlarged ceiling mounting sheet metal 7y by the rotation lock method (see FIG. 15A), so that the extension microphone part 2z1 is omnidirectional. It is coupled to the microphone array device 2.
　図２０は、全方位マイクアレイ装置２ｓ１の周囲に増設マイク部２ｚｓ１を結合する第１２例（ピース型結合）を示す斜視図である。全方位マイクアレイ装置２ｓ１の筐体は、矩形形状であり、魚眼レンズを含む魚眼カメラ１ｓ又は魚眼カメラ１ｓと同じ大きさの蓋が収容可能な円状連結部ｊｇ３が中央に設けられ、半円状の凹面が形成された中間辺連結部ｊｇ２が中間辺部に設けられ、更に、１／４円状の凹面が形成された両端連結部ｊｇ１が両端部に設けられた構成である。 FIG. 20 is a perspective view showing a twelfth example (piece type coupling) in which the additional microphone section 2zs1 is coupled around the omnidirectional microphone array apparatus 2s1. The casing of the omnidirectional microphone array device 2s1 has a rectangular shape, and a fisheye camera 1s including a fisheye lens or a circular coupling part jg3 that can accommodate a lid of the same size as the fisheye camera 1s is provided in the center. An intermediate side connecting portion jg2 formed with a circular concave surface is provided at the intermediate side portion, and further, both end connecting portions jg1 formed with a 1/4 circular concave surface are provided at both end portions.
　図２０に示す結合方法では、増設マイク部２ｚｓ１は、全方位マイクアレイ装置２ｓ１の筐体の周囲に隣接し、更に同一平面上となるように接着等により結合されて固定される。なお、図２０に示す結合方法では、１つ又は複数の増設マイク部２ｚｓ１が全方位マイクアレイ装置２ｓ１に結合可能であり、魚眼カメラ１ｓは、全方位マイクアレイ装置２ｓ１及び増設マイク部の結合後の筐体の中央に移設される。 In the coupling method shown in FIG. 20, the additional microphone unit 2zs1 is adjacent to the periphery of the casing of the omnidirectional microphone array apparatus 2s1, and is further coupled and fixed by bonding or the like so as to be on the same plane. In the coupling method shown in FIG. 20, one or a plurality of additional microphone units 2zs1 can be coupled to the omnidirectional microphone array device 2s1, and the fisheye camera 1s is coupled to the omnidirectional microphone array device 2s1 and the additional microphone unit. It will be moved to the center of the rear case.
　従って、図２０に示す増設マイク部２ｚｓ１の結合により、本実施形態の指向性制御システム１０は、全方位マイクアレイ装置２ｓ１の周囲に増設マイク部２ｚｓ１を容易に連結でき、増設マイク部２ｚｓ１の連結数に応じて、全方位マイクアレイ装置２ｓ１の筐体の中心に設置された魚眼カメラ１ｓを、連結後（結合後）の全方位マイクアレイ装置２ｓ１及び増設マイク部２ｚｓ１の筐体形状に合わせて、連結後（結合後）の全方位マイクアレイ装置２ｓ１及び増設マイク部２ｚｓ１の筐体形状の中心位置に簡易に移設できる。 Therefore, the directivity control system 10 according to the present embodiment can easily connect the extension microphone unit 2zs1 around the omnidirectional microphone array device 2s1 by connecting the extension microphone unit 2zs1 shown in FIG. Depending on the number, the fisheye camera 1s installed at the center of the casing of the omnidirectional microphone array apparatus 2s1 is matched to the casing shapes of the omnidirectional microphone array apparatus 2s1 and the additional microphone section 2zs1 after connection (after coupling). Thus, the omnidirectional microphone array device 2s1 and the additional microphone portion 2zs1 after connection (after connection) can be easily moved to the center position of the housing shape.
　最後に、上述した本実施形態の増設マイク部が全方位マイクアレイ装置２に対して結合された場合の全方位マイクアレイ装置２及び増設マイク部のハードウェア構成について、図２１を参照して簡単に説明する。図２１は、増設マイク部２ｚ１が結合した全方位マイクアレイ装置２のハードウェア構成の一例を示すブロック図である。なお、図２１では、図１に示すネットワークＮＷへの接続線の図示を省略している。 Finally, the hardware configuration of the omnidirectional microphone array apparatus 2 and the additional microphone section when the additional microphone section of the present embodiment described above is coupled to the omnidirectional microphone array apparatus 2 will be described with reference to FIG. Explained. FIG. 21 is a block diagram illustrating an example of a hardware configuration of the omnidirectional microphone array apparatus 2 to which the additional microphone unit 2z1 is coupled. In FIG. 21, illustration of connection lines to the network NW shown in FIG. 1 is omitted.
　増設マイク部２ｚ１は、少なくとも複数（例えばｍ個）のマイク素子２２（ｎ＋１）～２２（ｎ＋ｍ）と、マイク素子と同数のＡＤＣ２４（ｎ＋１）～２４（ｎ＋ｍ）とを含む構成である。増設マイク部２ｚ１は、結合部ＣＮ２を介して、全方位マイクアレイ装置２と結合可能である。増設マイク部２ｚ１のマイク素子２２（ｎ＋１）～２２（ｎ＋ｍ）により収音されたアナログの音声信号は、ＡＤＣ２４（ｎ＋１）～２４（ｎ＋ｍ）においてデジタルの音声信号に変換されて、全方位マイクアレイ装置２のＩ／Ｆ部２ｉｆに入力される。ＣＰＵ２ｐは、全方位マイクアレイ装置２内のマイク素子２２１～２２ｎと、増設マイク部２２（ｎ＋１）～２２（ｎ＋ｍ）とにより収音された音声信号を、不図示の通信Ｉ／Ｆ部から指向性制御装置３に送信する。 The extension microphone unit 2z1 includes at least a plurality (for example, m) of microphone elements 22 (n + 1) to 22 (n + m) and the same number of ADCs 24 (n + 1) to 24 (n + m) as the microphone elements. The extension microphone unit 2z1 can be coupled to the omnidirectional microphone array device 2 via the coupling unit CN2. Analog audio signals picked up by the microphone elements 22 (n + 1) to 22 (n + m) of the extension microphone unit 2z1 are converted into digital audio signals by the ADCs 24 (n + 1) to 24 (n + m), and are omnidirectional microphone arrays. The data is input to the I / F unit 2 if of the device 2. The CPU 2p directs the sound signals collected by the microphone elements 221 to 22n and the additional microphone units 22 (n + 1) to 22 (n + m) in the omnidirectional microphone array apparatus 2 from the communication I / F unit (not shown). To the sex control device 3.
　以下、上述した本発明に係る指向性制御装置、指向性制御方法及び指向性制御システムの構成、作用及び効果を説明する。 Hereinafter, the configuration, operation, and effect of the above-described directivity control device, directivity control method, and directivity control system according to the present invention will be described.
　本発明の一実施形態は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置であって、前記収音部から、表示部の画像上で指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、前記ビーム形成部は、前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、指向性制御装置である。 One embodiment of the present invention is a directivity control device that controls the directivity of sound collected by a sound collection unit including a plurality of microphones, and is designated on the image of a display unit from the sound collection unit. A beam forming unit that forms a beam in a direction toward the sound source corresponding to the position, and a magnification setting unit that sets a magnification for enlarging or reducing the image of the display unit according to an input, The beam forming unit is a directivity control device that changes the size of the formed beam in accordance with the magnification set by the magnification setting unit.
　この構成では、指向性制御装置は、複数のマイクを含む収音部で収音された音声の指向性を制御し、収音部から、表示部の画像上で指定された位置に対応する音源への方向にビームを形成し、入力に応じて、表示部の画像を拡大又は縮小するための倍率を設定し、更に、設定された倍率に応じて、ビームのサイズを変更する。 In this configuration, the directivity control device controls the directivity of the sound collected by the sound collecting unit including a plurality of microphones, and the sound source corresponding to the position designated on the image of the display unit from the sound collecting unit. A beam is formed in the direction of, and a magnification for enlarging or reducing the image on the display unit is set according to the input, and the size of the beam is changed according to the set magnification.
　これにより、指向性制御装置は、監視対象に対して表示部の画像上に対する入力操作（例えばズーム処理）により、監視対象の被写体が切り替わった場合には、音声データの指向性の強度（即ち、指向方向のサイズ（例えばビーム幅））をズーム処理に応じて調整し、更に、調整後のビーム幅に合わせて指向性を形成する。従って、指向性制御装置は、切り替わった監視対象の被写体に対する音声データの指向性を適正に形成でき、監視者の監視業務の効率劣化を抑制できる。 As a result, the directivity control device, when the subject to be monitored is switched by the input operation (for example, zoom processing) on the image of the display unit with respect to the monitor target, the directivity intensity of the audio data (that is, The size in the pointing direction (for example, the beam width) is adjusted according to the zoom process, and the directivity is formed in accordance with the adjusted beam width. Therefore, the directivity control device can appropriately form the directivity of the audio data with respect to the switched subject to be monitored, and can suppress deterioration in efficiency of the monitoring work of the monitor.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記ビームのサイズを小さくする、指向性制御装置である。 Moreover, one embodiment of the present invention is a directivity control device in which the beam forming unit reduces the size of the beam when the magnification is set so as to enlarge the image by the magnification setting unit. .
　この構成によれば、指向性制御装置は、画像データのズーム処理がズームイン処理である場合に、表示部の画像を拡大するように倍率（例えばズーム倍率）が設定されるので、設定された倍率に合わせて指向方向のビーム幅を狭く調整でき、切り替わった監視対象の被写体（例えば特定の人物）の発する音声を被写体の周囲の音声に比べて目立つように出力できるので、監視者の監視業務効率を向上できる。 According to this configuration, when the zoom processing of the image data is the zoom-in processing, the directivity control device sets the magnification (for example, zoom magnification) so as to enlarge the image on the display unit. The beam width in the directional direction can be adjusted narrowly according to the sound, and the sound emitted by the switched subject to be monitored (for example, a specific person) can be output more conspicuously than the sound around the subject. Can be improved.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって前記画像を縮小するように倍率が設定された場合に、前記ビームのサイズを大きくする、指向性制御装置である。 In one embodiment of the present invention, the beam forming unit increases the beam size when the magnification is set so as to reduce the image by the magnification setting unit. .
　この構成によれば、指向性制御装置は、画像データのズーム処理がズームアウト処理である場合に、表示部の画像を縮小するように倍率（例えばズーム倍率）が設定されるので、設定された倍率に合わせて指向方向のビーム幅を広く調整でき、切り替わった監視対象の被写体（例えば複数の人物）の発する音声を網羅的に出力できるので、監視者の監視業務効率を向上できる。 According to this configuration, when the zoom processing of the image data is the zoom-out processing, the directivity control device sets the magnification (for example, zoom magnification) so as to reduce the image on the display unit. The beam width in the directing direction can be widely adjusted in accordance with the magnification, and the sound emitted from the switched subject to be monitored (for example, a plurality of persons) can be output comprehensively, so that the monitoring work efficiency of the monitor can be improved.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって設定された倍率に応じて、前記音声の音量レベルの調整要否を判定する、指向性制御装置である。 Also, an embodiment of the present invention is the directivity control device in which the beam forming unit determines whether or not the sound volume level needs to be adjusted according to the magnification set by the magnification setting unit.
　この構成では、指向性制御装置は、設定された倍率に応じて、収音部により収音された音声の音量レベルの調整要否を判定する。 In this configuration, the directivity control device determines whether or not the volume level of the sound collected by the sound collection unit needs to be adjusted according to the set magnification.
　これにより、指向性制御装置は、監視対象に対するズーム処理によって設定された倍率に応じて、監視対象の被写体が切り替わった場合には、音声データの音量レベルの調整要否を判定するので、ズーム処理の内容に応じて、切り替わった監視対象の表示部の表示領域に対する大きさに合わせて音声を違和感なく出力できる。 Accordingly, the directivity control device determines whether or not the volume level of the audio data needs to be adjusted when the subject to be monitored is switched according to the magnification set by the zoom processing on the monitoring target. Depending on the content of the sound, the sound can be output without a sense of incongruity according to the size of the display area of the display unit to be switched.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記音声の音量レベルを上げる、指向性制御装置である。 In one embodiment of the present invention, the beam forming unit increases a sound volume level when the magnification is set so that the image is enlarged by the magnification setting unit. .
　この構成によれば、指向性制御装置は、画像データのズーム処理がズームイン処理である場合に、表示部の画像を拡大するように倍率が設定されるので、設定された倍率に合わせて音声データの音量レベルを上げることができ、切り替わった監視対象の被写体（例えば特定の人物）の発する音声を被写体の周囲の音声に比べて大きな音量で出力できるので、監視者の監視業務効率を向上できる。 According to this configuration, when the zoom processing of the image data is the zoom-in processing, the directivity control device sets the magnification so as to enlarge the image on the display unit, so the audio data is matched to the set magnification. The sound level of the subject to be switched (for example, a specific person) can be output at a louder volume than the sound around the subject, so that the monitoring work efficiency of the supervisor can be improved.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって前記画像を縮小するように倍率が設定された場合に、前記音声の音量レベルを維持する、あるいは下げる、指向性制御装置である。 In one embodiment of the present invention, the beam forming unit may maintain or decrease the volume level of the sound when the magnification is set so that the image is reduced by the magnification setting unit. It is a control device.
　この構成によれば、指向性制御装置は、画像データのズーム処理がズームアウト処理でも、音声データの音量レベルを維持できるので、切り替わった監視対象の被写体（例えば複数の人物）の発する音声を被写体の周囲の音声と同等に出力でき、又は十分に音量レベルが大きい場合には音量レベルを下げるので、ズームアウト処理によっても監視業務を監視者に違和感なく実行させることができる。 According to this configuration, the directivity control device can maintain the volume level of the audio data even when the zoom processing of the image data is zoomed out. Therefore, the sound generated by the switched monitoring subject (for example, a plurality of persons) Since the volume level is lowered when the volume level is sufficiently high, the monitoring task can be executed without any discomfort by the zoom-out process.
　また、本発明の一実施形態は、前記表示部に表示された前記画像を処理する画像処理部、を更に備え、前記ビーム形成部は、前記画像処理部により前記画像に人物が検出されない場合に、前記ビームのサイズを維持する、指向性制御装置である。 In addition, an embodiment of the present invention further includes an image processing unit that processes the image displayed on the display unit, and the beam forming unit is configured to detect when no person is detected in the image by the image processing unit. A directivity control device that maintains the beam size.
　この構成では、ビーム形成部は、画像データに人物が検出されないと画像処理部により判断された場合には、指向方向のビームのサイズ（例えばビーム幅）を維持する。 In this configuration, when the image processing unit determines that no person is detected in the image data, the beam forming unit maintains the beam size (for example, beam width) in the pointing direction.
　これにより、指向性制御装置は、画像データに人物が検出されていない場合には、音声データの指向性の強弱を調整しないので、人物が映り込まない状況において収音領域の周囲の環境音が変動するという違和感を解消できる。 As a result, the directivity control device does not adjust the directionality of the sound data when no person is detected in the image data. The uncomfortable feeling of fluctuating can be eliminated.
　また、本発明の一実施形態は、前記ビーム形成部は、前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記音声をボイスチェンジ処理する、指向性制御装置である。 Moreover, one embodiment of the present invention is a directivity control device in which the beam forming unit performs voice change processing on the sound when the magnification is set so that the image is enlarged by the magnification setting unit. .
　この構成によれば、指向性制御装置は、画像を拡大するように倍率が設定された場合に、収音部により収音された音声データをボイスチェンジ処理するので、切り替わった監視対象の被写体（例えば特定の人物）の発する音声を誰の音声か分かり難くすることで、被写体の音声上のプライバシーを効果的に保護できる。 According to this configuration, when the magnification is set so as to enlarge the image, the directivity control apparatus performs voice change processing on the audio data collected by the sound collection unit. For example, it is possible to effectively protect the privacy of a subject's voice by making it difficult to understand the voice of a specific person).
　また、本発明の一実施形態は、前記画像処理部は、前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記画像における人物の一部をマスキング処理する、指向性制御装置である。 In one embodiment of the present invention, the image processing unit masks a part of a person in the image when the magnification is set so as to enlarge the image by the magnification setting unit. It is a control device.
　この構成によれば、指向性制御装置は、画像を拡大するように倍率が設定された場合に、ズームイン処理後の画像データにおける人物の一部（例えば顔）をマスキング処理するので、切り替わった監視対象の被写体（例えば特定の人物）が誰であるかを分かり難くすることで、被写体の画像上のプライバシーを効果的に保護できる。 According to this configuration, when the magnification is set so as to enlarge the image, the directivity control apparatus masks a part of the person (for example, a face) in the image data after the zoom-in process. By making it difficult to determine who the subject (for example, a specific person) is, the privacy on the subject image can be effectively protected.
　また、本発明の一実施形態は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における指向性制御方法であって、複数のマイクを含む収音部で収音された音声の指向性を制御するステップと、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、を有する、指向性制御方法である。 Moreover, one embodiment of the present invention is a directivity control method in a directivity control apparatus that controls the directivity of sound collected by a sound collection unit including a plurality of microphones. Controlling the directivity of the sound collected by the unit, setting a magnification for enlarging or reducing the image of the display unit according to the input, and according to the set magnification, And changing the size of the formed beam.
　この方法では、指向性制御装置は、複数のマイクを含む収音部で収音された音声の指向性を制御し、収音部から、表示部の画像上で指定された位置に対応する音源への方向にビームを形成し、入力に応じて、表示部の画像を拡大又は縮小するための倍率を設定し、更に、設定された倍率に応じて、ビームのサイズを変更する。 In this method, the directivity control device controls the directivity of the sound collected by the sound collecting unit including a plurality of microphones, and the sound source corresponding to the position designated on the image of the display unit from the sound collecting unit. A beam is formed in the direction of, and a magnification for enlarging or reducing the image on the display unit is set according to the input, and the size of the beam is changed according to the set magnification.
　これにより、指向性制御装置は、監視対象に対して表示部の画像上に対する入力操作（例えばズーム処理）により、監視対象の被写体が切り替わった場合には、音声データの指向性の強度（即ち、指向方向のサイズ（例えばビーム幅））をズーム処理に応じて調整し、更に、調整後のビーム幅に合わせて指向性を形成する。従って、指向性制御装置は、切り替わった監視対象の被写体に対する音声データの指向性を適正に形成でき、監視者の監視業務の効率劣化を抑制できる。 As a result, the directivity control device, when the subject to be monitored is switched by the input operation (for example, zoom processing) on the image of the display unit with respect to the monitor target, the directivity intensity of the audio data (that is, The size in the pointing direction (for example, the beam width) is adjusted according to the zoom process, and the directivity is formed in accordance with the adjusted beam width. Therefore, the directivity control device can appropriately form the directivity of the audio data with respect to the switched subject to be monitored, and can suppress deterioration in efficiency of the monitoring work of the monitor.
　また、本発明の一実施形態は、複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における処理を実行するプログラムが格納された記憶媒体であって、複数のマイクを含む収音部で収音された音声の指向性を制御するステップと、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、を実行するプログラムが格納された、記憶媒体である。 One embodiment of the present invention is a storage medium storing a program for executing processing in a directivity control device that controls directivity of sound collected by a sound collection unit including a plurality of microphones, The step of controlling the directivity of the sound collected by the sound collection unit including a plurality of microphones, the step of setting a magnification for enlarging or reducing the image of the display unit according to the input, and the setting And a step of changing the size of the formed beam according to the magnification, a storage medium storing a program for executing.
　この構成では、記録媒体には、複数のマイクを含む収音部で収音された音声の指向性を制御するステップと、収音部から、表示部の画像上で指定された位置に対応する音源への方向にビームを形成するステップと、入力に応じて、表示部の画像を拡大又は縮小するための倍率を設定するステップと、設定された倍率に応じて、ビームのサイズを変更するステップとをコンピュータ（例えば指向性制御装置）に実行させるプログラムが格納されている。 In this configuration, the recording medium corresponds to the step of controlling the directivity of the sound collected by the sound collecting unit including a plurality of microphones, and the position designated on the image of the display unit from the sound collecting unit. A step of forming a beam in a direction toward the sound source, a step of setting a magnification for enlarging or reducing an image on the display unit according to an input, and a step of changing the size of the beam according to the set magnification Are stored in a computer (for example, a directivity control device).
　これにより、記録媒体からプログラムが実行可能にインストールされたコンピュータ（例えば指向性制御装置）は、監視対象に対して表示部の画像上に対する入力操作（例えばズーム処理）により、監視対象の被写体が切り替わった場合には、音声データの指向性の強度（即ち、指向方向のサイズ（例えばビーム幅））をズーム処理に応じて調整し、更に、調整後のビーム幅に合わせて指向性を形成する。従って、指向性制御装置は、切り替わった監視対象の被写体に対する音声データの指向性を適正に形成でき、監視者の監視業務の効率劣化を抑制できる。 As a result, a computer (for example, a directivity control device) in which a program is installed to be executable from a recording medium switches the subject to be monitored by an input operation (for example, zoom processing) on the image on the display unit. In this case, the directivity intensity of the audio data (that is, the size in the directivity direction (for example, the beam width)) is adjusted according to the zoom process, and the directivity is formed in accordance with the adjusted beam width. Therefore, the directivity control device can appropriately form the directivity of the audio data with respect to the switched subject to be monitored, and can suppress deterioration in efficiency of the monitoring work of the monitor.
　また、本発明の一実施形態は、収音領域を撮像する撮像部と、複数のマイクを含み前記収音領域の音声を収音する第１収音部と、前記第１収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、前記指向性制御装置は、前記撮像部により撮像された前記収音領域の画像を表示する表示部と、前記表示部に表示された前記画像に対する位置の指定に応じて、前記第１収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、前記ビーム形成部は、前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、指向性制御システムである。 In one embodiment of the present invention, an image pickup unit that picks up a sound pickup region, a first sound pickup unit that includes a plurality of microphones and picks up sound in the sound pickup region, and the first sound pickup unit collects sound. A directivity control device that controls the directivity of the sound that has been sounded, and the directivity control device includes: a display unit that displays an image of the sound collection area captured by the imaging unit; and A beam forming unit that forms a beam in a direction from the first sound collection unit to a sound source corresponding to the designated position according to the designation of the position with respect to the displayed image, and the input according to the input A magnification setting unit that sets a magnification for enlarging or reducing the image on the display unit, and the beam forming unit sets the size of the formed beam according to the magnification set by the magnification setting unit. It is a directivity control system to change.
　この構成では、指向性制御装置は、複数のマイクを含む第１収音部で収音された音声の指向性を制御し、第１収音部から、撮像部により撮像された画像が表示部に表示されている場合に、画像上で指定された位置に対応する音源への方向にビームを形成し、入力に応じて、表示部の画像を拡大又は縮小するための倍率を設定し、更に、設定された倍率に応じて、ビームのサイズを変更する。 In this configuration, the directivity control device controls the directivity of the sound collected by the first sound collection unit including a plurality of microphones, and an image captured by the imaging unit from the first sound collection unit is displayed on the display unit. Is formed in the direction toward the sound source corresponding to the position specified on the image, and according to the input, a magnification for enlarging or reducing the image on the display unit is set, and The beam size is changed according to the set magnification.
　これにより、指向性制御システムでは、指向性制御装置は、監視対象に対して表示部の画像上に対する入力操作（例えばズーム処理）により、監視対象の被写体が切り替わった場合には、音声データの指向性の強度（即ち、指向方向のサイズ（例えばビーム幅））をズーム処理に応じて調整し、更に、調整後のビーム幅に合わせて指向性を形成する。従って、指向性制御システムでは、指向性制御装置は、切り替わった監視対象の被写体に対する音声データの指向性を適正に形成でき、監視者の監視業務の効率劣化を抑制できる。 Accordingly, in the directivity control system, the directivity control device directs the sound data when the subject to be monitored is switched by the input operation (for example, zoom processing) on the image of the display unit with respect to the monitor target. The intensity of the characteristic (that is, the size in the directivity direction (for example, beam width)) is adjusted according to the zoom process, and the directivity is formed in accordance with the adjusted beam width. Therefore, in the directivity control system, the directivity control device can appropriately form the directivity of the audio data with respect to the switched subject to be monitored, and can suppress deterioration in efficiency of the monitoring work of the monitor.
　また、本発明の一実施形態は、前記第１収音部の周囲を囲む開口部を有し、前記第１収音部と同心円状の筐体を有する第２収音部、が更に設けられた、指向性制御システムである。 In addition, an embodiment of the present invention further includes a second sound collection unit having an opening surrounding the first sound collection unit and having a casing concentric with the first sound collection unit. It is a directivity control system.
　この構成によれば、指向性制御システムは、第１収音部と同心円状の筐体を有する第２収音部が更に設けられるので、第２収音部の円周上に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上できる。 According to this configuration, since the directivity control system is further provided with the second sound collecting unit having a casing concentric with the first sound collecting unit, a plurality of sound collecting units are arranged on the circumference of the second sound collecting unit. By arranging the elements (microphone elements) evenly, the sound collection characteristics of the sound in all directions can be further improved evenly compared to the sound collection characteristics of the sound when the first sound collection unit is used alone.
　また、本発明の一実施形態は、前記第１収音部の周囲を囲む開口部を有し、楕円形状の筐体を有する第２収音部、が更に設けられた、指向性制御システムである。 Moreover, one embodiment of the present invention is a directivity control system further comprising a second sound collection unit having an opening surrounding the first sound collection unit and having an elliptical housing. is there.
　この構成によれば、指向性制御システムは、楕円形状の筐体を有する第２収音部が更に設けられるので、例えば第２収音部の楕円形状の長手方向には楕円形状の長手方向以外の方向に比べてより多くの収音素子（マイク素子）を配置させることができ、第１収音部を単独で用いる場合の音声の収音特性に比べて、音声の収音特性を均一に向上でき、更に、楕円形状の長手方向に対する音声の収音特性をより一層向上できる。 According to this configuration, the directivity control system is further provided with the second sound collection unit having an elliptical housing. For example, the elliptical longitudinal direction of the second sound collection unit is other than the elliptical longitudinal direction. More sound collecting elements (microphone elements) can be arranged compared to the direction of the sound, and the sound collecting characteristics of the sound are made uniform compared to the sound collecting characteristics of the sound when the first sound collecting unit is used alone. In addition, it is possible to further improve the sound collection characteristic of the sound in the longitudinal direction of the elliptical shape.
　また、本発明の一実施形態は、前記第１収音部の周囲を囲む開口部を有し、矩形形状の筐体を有する第２収音部、が更に設けられた、指向性制御システムである。 In addition, an embodiment of the present invention is a directivity control system further including a second sound collection unit having an opening surrounding the first sound collection unit and having a rectangular housing. is there.
　この構成によれば、指向性制御システムは、矩形形状の筐体を有する第２収音部が更に設けられるので、第２収音部の開口部の周囲に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、第２収音部を柔軟に設置できる。 According to this configuration, since the directivity control system is further provided with the second sound collecting unit having a rectangular housing, a plurality of sound collecting elements (microphone elements) are provided around the opening of the second sound collecting unit. Can be evenly improved compared to the sound collection characteristics of the voice when the first sound collection section is used alone, and the second sound collection section can be further improved. Can be installed flexibly.
　また、本発明の一実施形態は、前記第１収音部の周囲を囲む開口部を有し、ハニカム形状の筐体を有する第２収音部、が更に設けられた、指向性制御システムである。 In addition, an embodiment of the present invention is a directivity control system further including a second sound collection unit having an opening surrounding the first sound collection unit and having a honeycomb-shaped housing. is there.
　この構成によれば、指向性制御システムは、ハニカム形状の筐体を有する第２収音部が更に設けられるので、第２収音部の開口部の周囲に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、第２収音部を柔軟に設置でき、第２収音部の増設方向に応じて、収音性能に差をつけることができる。 According to this configuration, since the directivity control system is further provided with the second sound collection unit having the honeycomb-shaped housing, a plurality of sound collection elements (microphone elements) are provided around the opening of the second sound collection unit. Can be evenly improved compared to the sound collection characteristics of the voice when the first sound collection section is used alone, and the second sound collection section can be further improved. Can be flexibly installed, and the sound collection performance can be differentiated according to the direction of expansion of the second sound collection unit.
　また、本発明の一実施形態は、前記第１収音部と前記第２収音部とは、前記第１収音部及び前記第２収音部の高さ方向に離れて設置される、指向性制御システムである。 Further, in one embodiment of the present invention, the first sound collection unit and the second sound collection unit are installed apart in the height direction of the first sound collection unit and the second sound collection unit. Directivity control system.
　この構成によれば、指向性制御システムは、第１収音部と第２収音部とが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 According to this configuration, the directivity control system can improve the sound collection performance in the vertical direction (vertical direction) because the first sound collection unit and the second sound collection unit are installed apart in the height direction.
　また、本発明の一実施形態は、前記第１収音部の周囲に、少なくとも１つの棒形状の筐体を有する第２収音部、が更に設けられる、指向性制御システムである。 Moreover, one embodiment of the present invention is a directivity control system in which a second sound collection unit having at least one rod-shaped housing is further provided around the first sound collection unit.
　この構成によれば、指向性制御システムは、少なくとも１つの棒形状の筐体を有する第２収音部が更に設けられるので、第２収音部の長手方向に沿って複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、棒形状の長手方向に対する音声の収音特性を一層向上できる。 According to this configuration, since the directivity control system is further provided with the second sound collection unit having at least one rod-shaped housing, a plurality of sound collection elements (in the longitudinal direction of the second sound collection unit ( By uniformly arranging the microphone elements, it is possible to further improve the sound collection characteristic of the sound in the longitudinal direction of the bar shape, compared to the sound collection characteristic of the sound when the first sound collection unit is used alone.
　また、本発明の一実施形態は、前記第１収音部の周囲に、少なくとも１つの第２収音部、が更に設けられ、前記第２収音部は、所定の信号線収容管を介して、前記第１収音部の周囲に設けられたコネクタ部と接続される、指向性制御システムである。 In one embodiment of the present invention, at least one second sound collection unit is further provided around the first sound collection unit, and the second sound collection unit is interposed via a predetermined signal line accommodating tube. The directivity control system is connected to a connector portion provided around the first sound collection portion.
　この構成によれば、指向性制御システムは、増設マイク部内の収音素子（マイク素子）を収容するための筐体を不要とし、筐体による音声（音波）の回り込みを排除して音声を収音できるので、第１収音部と第２収音部とを高さ方向に離れて設置する必要が無い。また、指向性制御システムは、信号線収容管を介して、第１収音部の周囲に設けられたコネクタ部と第２収音部とを簡易に接続でき、更に、第１収音部に所定形状の筐体を有する第２収音部を増設する場合に比べて、増設マイク部を軽量化できるので、増設マイク部内の収音素子（マイク素子）における収音特性を一層向上できる。 According to this configuration, the directivity control system eliminates the need for housing the sound collection element (microphone element) in the extension microphone unit, and collects sound by eliminating the wraparound of sound (sound wave) by the housing. Since the sound can be produced, there is no need to install the first sound collecting unit and the second sound collecting unit apart from each other in the height direction. In addition, the directivity control system can easily connect the connector section provided around the first sound collection section and the second sound collection section via the signal line housing pipe, and further, the first sound collection section. Since the additional microphone unit can be reduced in weight as compared with the case where the second sound collecting unit having a predetermined-shaped casing is added, the sound collecting characteristics of the sound collecting element (microphone element) in the additional microphone unit can be further improved.
　また、本発明の一実施形態は、前記第１収音部と同一の矩形形状の筐体を有する第２収音部、が更に設けられ、前記第１収音部及び前記第２収音部の筐体は、中間辺部に、半円状の凹面が形成された中間辺連結部が設けられ、両端部に、１／４円状の凹面が形成された両端連結部が設けられる、指向性制御システムである。 In addition, according to an embodiment of the present invention, a second sound collecting unit having a rectangular housing that is the same as the first sound collecting unit is further provided, and the first sound collecting unit and the second sound collecting unit are provided. The casing is provided with an intermediate side connecting part in which a semicircular concave surface is formed at the intermediate side part, and an end connecting part in which a quarter circular concave surface is formed at both ends. Sex control system.
　この構成によれば、指向性制御システムは、第１収音部の周囲に第２収音部を容易に連結でき、第２収音部の連結数に応じて、第１収音部の筐体の中心に設置された撮像部を、連結後の第１収音部及び第２収音部の筐体形状に合わせて、連結後の第１収音部及び第２収音部の筐体形状の中心位置に簡易に移設できる。 According to this configuration, the directivity control system can easily connect the second sound collecting unit around the first sound collecting unit, and the housing of the first sound collecting unit can be selected according to the number of connected second sound collecting units. The first sound collecting unit and the second sound collecting unit after connection according to the shapes of the first sound collecting unit and the second sound collecting unit after connection of the imaging unit installed at the center of the body It can be easily moved to the center of the shape.
　また、本発明の一実施形態は、収音領域を撮像する撮像部と、複数のマイクを含み前記収音領域の音声を収音する第１収音部と、前記第１収音部の周囲に増設される第２収音部と、前記第１収音部と第２収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、前記指向性制御装置は、前記撮像部により撮像された前記収音領域の画像を表示する表示部と、前記表示部に表示された前記画像に対する位置の指定に応じて、前記第１収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、を備える、指向性制御システムである。 In addition, an embodiment of the present invention includes an imaging unit that images a sound collection region, a first sound collection unit that includes a plurality of microphones and collects sound in the sound collection region, and a periphery of the first sound collection unit And a directivity control device that controls the directivity of the sound collected by the first sound collection unit and the second sound collection unit, and the directivity control device includes: A display unit that displays an image of the sound collection area imaged by the imaging unit; and the designation from the first sound collection unit according to designation of a position with respect to the image displayed on the display unit. A directivity control system including a beam forming unit that forms a beam in a direction toward a sound source corresponding to a position.
　この構成では、指向性制御装置が、表示部に表示された収音領域の画像に対する位置の指定に応じて、第１収音部から、画像の指定位置に対応する音源に向かう指向方向に、第１収音部により収音された音声データの指向性を形成した音声の強調レベルが不十分だった場合に、前記第１収音部の周囲に第２収音部が増設される。 In this configuration, the directivity control device is directed from the first sound collection unit to the sound source corresponding to the designated position of the image in the directivity direction according to the designation of the position of the sound collection region displayed on the display unit. When the enhancement level of the sound that forms the directivity of the sound data collected by the first sound collection unit is insufficient, a second sound collection unit is added around the first sound collection unit.
　これにより、指向性制御システムでは、指向性制御装置は、音声データの指向性の強度（即ち、指向方向のビーム幅）が不十分なときでも、増設される第２収音部により、音声データの指向性の強度をより高めることができ、監視者の監視業務の効率劣化を抑制できる。 As a result, in the directivity control system, the directivity control device causes the second sound collection unit to be added to the audio data even when the directivity intensity of the audio data (that is, the beam width in the directivity direction) is insufficient. It is possible to increase the intensity of the directivity of the monitor, and to suppress the deterioration in efficiency of the monitoring work of the monitor.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部の周囲を囲む開口部を有し、前記第１収音部と同心円状の筐体を有する、指向性制御システムである。 In one embodiment of the present invention, the second sound collection unit has an opening that surrounds the first sound collection unit, and has a casing concentric with the first sound collection unit. Sex control system.
　この構成によれば、指向性制御システムは、第１収音部と同心円状の筐体を有する第２収音部が更に設けられるので、第２収音部の円周上に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上できる。 According to this configuration, since the directivity control system is further provided with the second sound collecting unit having a casing concentric with the first sound collecting unit, a plurality of sound collecting units are arranged on the circumference of the second sound collecting unit. By arranging the elements (microphone elements) evenly, the sound collection characteristics of the sound in all directions can be further improved evenly compared to the sound collection characteristics of the sound when the first sound collection unit is used alone.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部の周囲を囲む開口部を有し、楕円形状の筐体を有する、指向性制御システムである。 Moreover, one embodiment of the present invention is a directivity control system in which the second sound collection unit has an opening surrounding the first sound collection unit and has an elliptical housing.
　この構成によれば、指向性制御システムは、楕円形状の筐体を有する第２収音部が更に設けられるので、例えば第２収音部の楕円形状の長手方向には楕円形状の長手方向以外の方向に比べてより多くの収音素子（マイク素子）を配置させることができ、第１収音部を単独で用いる場合の音声の収音特性に比べて、音声の収音特性を均一に向上でき、更に、楕円形状の長手方向に対する音声の収音特性をより一層向上できる。 According to this configuration, the directivity control system is further provided with the second sound collection unit having an elliptical housing. For example, the elliptical longitudinal direction of the second sound collection unit is other than the elliptical longitudinal direction. More sound collecting elements (microphone elements) can be arranged compared to the direction of the sound, and the sound collecting characteristics of the sound are made uniform compared to the sound collecting characteristics of the sound when the first sound collecting unit is used alone. In addition, it is possible to further improve the sound collection characteristic of the sound in the longitudinal direction of the elliptical shape.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部の周囲を囲む開口部を有し、矩形形状の筐体を有する、指向性制御システムである。 Moreover, one embodiment of the present invention is a directivity control system in which the second sound collection unit has an opening surrounding the first sound collection unit and has a rectangular casing.
　この構成によれば、指向性制御システムは、矩形形状の筐体を有する第２収音部が更に設けられるので、第２収音部の開口部の周囲に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、第２収音部を柔軟に設置できる。 According to this configuration, since the directivity control system is further provided with the second sound collecting unit having a rectangular housing, a plurality of sound collecting elements (microphone elements) are provided around the opening of the second sound collecting unit. Can be evenly improved compared to the sound collection characteristics of the voice when the first sound collection section is used alone, and the second sound collection section can be further improved. Can be installed flexibly.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部の周囲を囲む開口部を有し、ハニカム形状の筐体を有する、指向性制御システムである。 Moreover, one embodiment of the present invention is the directivity control system in which the second sound collection unit has an opening surrounding the first sound collection unit and has a honeycomb-shaped housing.
　この構成によれば、指向性制御システムは、ハニカム形状の筐体を有する第２収音部が更に設けられるので、第２収音部の開口部の周囲に複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、全方位に対する音声の収音特性を均等に一層向上でき、更に、第２収音部を柔軟に設置でき、第２収音部の増設方向に応じて、収音性能に差をつけることができる。 According to this configuration, since the directivity control system is further provided with the second sound collection unit having the honeycomb-shaped housing, a plurality of sound collection elements (microphone elements) are provided around the opening of the second sound collection unit. Can be evenly improved compared to the sound collection characteristics of the voice when the first sound collection section is used alone, and the second sound collection section can be further improved. Can be flexibly installed, and the sound collection performance can be differentiated according to the direction of expansion of the second sound collection unit.
　また、本発明の一実施形態は、前記第１収音部と前記第２収音部とは、前記収音部及び前記第２収音部の高さ方向に離れて設置される、指向性制御システムである。 In one embodiment of the present invention, the first sound collection unit and the second sound collection unit are disposed away from each other in the height direction of the sound collection unit and the second sound collection unit. Control system.
　この構成によれば、指向性制御システムは、第１収音部と第２収音部とが高さ方向に離れて設置されるので、垂直方向（鉛直方向）の収音性能を向上できる。 According to this configuration, the directivity control system can improve the sound collection performance in the vertical direction (vertical direction) because the first sound collection unit and the second sound collection unit are installed apart in the height direction.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部の周囲に、少なくとも１つの棒形状の筐体を有する、指向性制御システムである。 Also, an embodiment of the present invention is the directivity control system in which the second sound collection unit has at least one rod-shaped casing around the first sound collection unit.
　この構成によれば、指向性制御システムは、少なくとも１つの棒形状の筐体を有する第２収音部が更に設けられるので、第２収音部の長手方向に沿って複数の収音素子（マイク素子）を均等に配置させることにより、第１収音部を単独で用いる場合の音声の収音特性に比べて、棒形状の長手方向に対する音声の収音特性を一層向上できる。 According to this configuration, since the directivity control system is further provided with the second sound collection unit having at least one rod-shaped housing, a plurality of sound collection elements (in the longitudinal direction of the second sound collection unit ( By uniformly arranging the microphone elements, it is possible to further improve the sound collection characteristic of the sound in the longitudinal direction of the bar shape, compared to the sound collection characteristic of the sound when the first sound collection unit is used alone.
　また、本発明の一実施形態は、少なくとも一つの前記第２収音部が増設され、前記第２収音部は、所定の信号線収容管を介して、前記第１収音部の周囲に設けられたコネクタ部と接続される、指向性制御システムである。 In one embodiment of the present invention, at least one second sound collection unit is added, and the second sound collection unit is disposed around the first sound collection unit via a predetermined signal line accommodating tube. It is a directivity control system connected with the provided connector part.
　この構成によれば、指向性制御システムは、増設マイク部内の収音素子（マイク素子）を収容するための筐体を不要とし、筐体による音声（音波）の回り込みを排除して音声を収音できるので、第１収音部と第２収音部とを高さ方向に離れて設置する必要が無い。また、指向性制御システムは、信号線収容管を介して、第１収音部の周囲に設けられたコネクタ部と第２収音部とを簡易に接続でき、更に、第１収音部に所定形状の筐体を有する第２収音部を増設する場合に比べて、増設マイク部を軽量化できるので、増設マイク部内の収音素子（マイク素子）における収音特性を一層向上できる。 According to this configuration, the directivity control system eliminates the need for housing the sound collection element (microphone element) in the extension microphone unit, and collects sound by eliminating the wraparound of sound (sound wave) by the housing. Since the sound can be produced, there is no need to install the first sound collecting unit and the second sound collecting unit apart from each other in the height direction. In addition, the directivity control system can easily connect the connector section provided around the first sound collection section and the second sound collection section via the signal line housing pipe, and further, the first sound collection section. Since the additional microphone unit can be reduced in weight as compared with the case where the second sound collecting unit having a predetermined-shaped casing is added, the sound collecting characteristics of the sound collecting element (microphone element) in the additional microphone unit can be further improved.
　また、本発明の一実施形態は、前記第２収音部は、前記第１収音部と同一の矩形形状の筐体を有し、前記第１収音部及び前記第２収音部の筐体は、中間辺部に、半円状の凹面が形成された中間辺連結部が設けられ、両端部に、１／４円状の凹面が形成された両端連結部が設けられる、指向性制御システムである。 In one embodiment of the present invention, the second sound collection unit has a rectangular housing that is the same as the first sound collection unit, and the first sound collection unit and the second sound collection unit have a rectangular shape. The casing is provided with an intermediate side connecting part in which a semicircular concave surface is formed at the intermediate side part, and an end connecting part in which a quarter circular concave surface is formed at both ends. Control system.
　この構成によれば、指向性制御システムは、第１収音部の周囲に第２収音部を容易に連結でき、第２収音部の連結数に応じて、第１収音部の筐体の中心に設置された撮像部を、連結後の第１収音部及び第２収音部の筐体形状に合わせて、連結後の第１収音部及び第２収音部の筐体形状の中心位置に簡易に移設できる。 According to this configuration, the directivity control system can easily connect the second sound collecting unit around the first sound collecting unit, and the housing of the first sound collecting unit can be selected according to the number of connected second sound collecting units. The first sound collecting unit and the second sound collecting unit after connection according to the shapes of the first sound collecting unit and the second sound collecting unit after connection of the imaging unit installed at the center of the body It can be easily moved to the center of the shape.
　以上、図面を参照しながら各種の実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。 Although various embodiments have been described above with reference to the drawings, it goes without saying that the present invention is not limited to such examples. It will be apparent to those skilled in the art that various changes and modifications can be made within the scope of the claims, and these are naturally within the technical scope of the present invention. Understood.
　なお、上述した実施形態では、ズームイン処理又はズームアウト処理の倍率に関する情報を用いて、指向方向のビーム幅を調整する例を説明したが、ビーム幅に限定されず、ビームのサイズ（又はビームの大きさ）を調整するものであればどのようなものでもよい。例えば、ビーム幅ではなく、ビームの高さ（指向方向に直交した方向のビーム幅）を調整してもよい。 In the above-described embodiment, the example in which the beam width in the directing direction is adjusted using the information regarding the magnification of the zoom-in process or the zoom-out process is described. However, the embodiment is not limited to the beam width, and the beam size (or the beam size) Any device may be used as long as the size is adjusted. For example, not the beam width but the beam height (the beam width in the direction orthogonal to the directing direction) may be adjusted.
　本発明は、監視対象に対するズーム処理により、監視対象の被写体が切り替わった場合でも、切り替わった監視対象の被写体に対する音声の指向性を適正に形成し、監視者の監視業務の効率劣化を抑制する指向性制御装置、指向性制御方法及び指向性制御システムとして有用である。 In the present invention, even when the subject to be monitored is switched by the zoom process for the subject to be monitored, the directivity of the sound is appropriately formed for the subject to be monitored to be switched, and the direction to suppress the deterioration of the efficiency of the monitoring work of the supervisor is suppressed. This is useful as a directivity control device, directivity control method, and directivity control system.
１、１ｓ　カメラ装置
２、２Ａ、２Ｂ、２Ｃ、２Ｄ、２ｆ、２ｓ、２ｓ１　全方位マイクアレイ装置
２ｚ１、２ｚ１ａ、２ｚ２、２ｚ３、２ｚ４、２ｚ４ａ、２ｚ５ａ、２ｚ５ｂ、２ｚ５ｃ、２ｚ５ｄ、２ｚ５ｅ、２ｚ５ｆ、２ｚ５ｇ、２ｚ５ｈ、２ｚｓ１、ｍ１、ｍ２、ｍ３、ｍ４　増設マイク部
３　指向性制御装置
４　レコーダ装置
７ｚ　天井取付板金
７ｙ　拡大天井取付板金
７ｚ１、７ｚ２　増設用取付板金
８　天井面
１０　指向性制御システム
３１　通信部
３２　操作部
３３　画像処理部
３４　信号処理部
３４ａ　指向方向算出部
３４ｂ　出力制御部
３４ｃ　ズーム連動制御部
３５　ディスプレイ装置
３６　スピーカ装置
３７　メモリ
ｃ１、ｃ２、ｃ３、ｃ４、ｃ５、ｃ６、ｃ７、ｃ８　コネクタ部
ｎ１、ｎ２、ｎ３、ｎ４　マイク線収容管 1, 1s Camera device 2, 2A, 2B, 2C, 2D, 2f, 2s, 2s1 Omnidirectional microphone array device 2z1, 2z1a, 2z2, 2z3, 2z4, 2z4a, 2z5a, 2z5b, 2z5c, 2z5d, 2z5e, 2z5f, 2z5g 2z5h, 2zs1, m1, m2, m3, m4 Extension microphone unit 3 Directivity control device 4 Recorder device 7z Ceiling mounting sheet metal 7y Expanded ceiling mounting sheet metal 7z1, 7z2 Extension mounting sheet metal 8 Ceiling surface 10 Directional control system 31 Communication unit 32 Operation unit 33 Image processing unit 34 Signal processing unit 34a Directional direction calculation unit 34b Output control unit 34c Zoom interlocking control unit 35 Display device 36 Speaker device 37 Memory c1, c2, c3, c4, c5, c6, c7, c8 Connector unit n1, n2, n3, n4 Microphone wire receiving tube

Claims (29)

  1. 　複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置であって、
    　前記収音部から、表示部の画像上で指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、
    　入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、
    　前記ビーム形成部は、
    　前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、
    　指向性制御装置。     A directivity control device that controls the directivity of sound collected by a sound collection unit including a plurality of microphones,
    A beam forming unit that forms a beam in a direction from the sound collection unit to a sound source corresponding to a position designated on the image of the display unit;
    A magnification setting unit for setting a magnification for enlarging or reducing the image on the display unit according to an input,
    The beam forming unit includes:
    According to the magnification set by the magnification setting unit, the size of the formed beam is changed.
    Directivity control device.
  2. 　請求項１に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記ビームのサイズを小さくする、
    　指向性制御装置。     The directivity control device according to claim 1,
    The beam forming unit includes:
    When the magnification is set so as to enlarge the image by the magnification setting unit, the size of the beam is reduced.
    Directivity control device.
  3. 　請求項１に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって前記画像を縮小するように倍率が設定された場合に、前記ビームのサイズを大きくする、
    　指向性制御装置。     The directivity control device according to claim 1,
    The beam forming unit includes:
    When the magnification is set so as to reduce the image by the magnification setting unit, the size of the beam is increased.
    Directivity control device.
  4. 　請求項１に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって設定された倍率に応じて、前記音声の音量レベルの調整要否を判定する、
    　指向性制御装置。     The directivity control device according to claim 1,
    The beam forming unit includes:
    Determining whether the volume level of the sound needs to be adjusted according to the magnification set by the magnification setting unit;
    Directivity control device.
  5. 　請求項４に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記音声の音量レベルを上げる、
    　指向性制御装置。     The directivity control device according to claim 4,
    The beam forming unit includes:
    When the magnification is set so that the image is enlarged by the magnification setting unit, the volume level of the sound is increased.
    Directivity control device.
  6. 　請求項４に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって前記画像を縮小するように倍率が設定された場合に、前記音声の音量レベルを維持する、あるいは下げる、
    　指向性制御装置。     The directivity control device according to claim 4,
    The beam forming unit includes:
    Maintaining or lowering the volume level of the audio when the magnification is set to reduce the image by the magnification setting unit;
    Directivity control device.
  7. 　請求項１に記載の指向性制御装置であって、
    　前記表示部に表示された前記画像を処理する画像処理部、を更に備え、
    　前記ビーム形成部は、
    　前記画像処理部により前記画像に人物が検出されない場合に、前記ビームのサイズを維持する、
    　指向性制御装置。     The directivity control device according to claim 1,
    An image processing unit that processes the image displayed on the display unit;
    The beam forming unit includes:
    When the person is not detected in the image by the image processing unit, the size of the beam is maintained.
    Directivity control device.
  8. 　請求項１に記載の指向性制御装置であって、
    　前記ビーム形成部は、
    　前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記音声をボイスチェンジ処理する、
    　指向性制御装置。     The directivity control device according to claim 1,
    The beam forming unit includes:
    When the magnification is set by the magnification setting unit so as to enlarge the image, the voice is subjected to voice change processing.
    Directivity control device.
  9. 　請求項７に記載の指向性制御装置であって、
    　前記画像処理部は、
    　前記倍率設定部によって前記画像を拡大するように倍率が設定された場合に、前記画像における人物の一部をマスキング処理する、
    　指向性制御装置。     The directivity control device according to claim 7,
    The image processing unit
    Masking a part of the person in the image when the magnification is set by the magnification setting unit to enlarge the image,
    Directivity control device.
  10. 　複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における指向性制御方法であって、
    　前記収音部から、表示部の画像上で指定された位置に対応する音源への方向に、ビームを形成するステップと、
    　入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、
    　前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、を有する、
    　指向性制御方法。     A directivity control method in a directivity control device that controls the directivity of sound collected by a sound collection unit including a plurality of microphones,
    Forming a beam in a direction from the sound collection unit to a sound source corresponding to a position designated on the image of the display unit;
    Setting a magnification for enlarging or reducing the image on the display unit in response to an input;
    Changing the size of the formed beam in accordance with the set magnification.
    Directivity control method.
  11. 　複数のマイクを含む収音部で収音された音声の指向性を制御する指向性制御装置における処理を実行するプログラムが格納された記憶媒体であって、
    　前記収音部から、表示部の画像上で指定された位置に対応する音源への方向に、ビームを形成するステップと、
    　入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定するステップと、
    　前記設定された倍率に応じて、前記形成されたビームのサイズを変更するステップと、
    　を実行するプログラムが格納された、
    　記憶媒体。     A storage medium storing a program for executing processing in a directivity control device that controls directivity of sound collected by a sound collection unit including a plurality of microphones,
    Forming a beam in a direction from the sound collection unit to a sound source corresponding to a position designated on the image of the display unit;
    Setting a magnification for enlarging or reducing the image on the display unit in response to an input;
    Changing the size of the formed beam according to the set magnification;
    Stores the program that executes
    Storage medium.
  12. 　収音領域を撮像する撮像部と、
    　複数のマイクを含み前記収音領域の音声を収音する第１収音部と、
    　前記第１収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、
    　前記指向性制御装置は、
    　前記撮像部により撮像された前記収音領域の画像を表示する表示部と、
    　前記表示部に表示された前記画像に対する位置の指定に応じて、前記第１収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、
    　入力に応じて、前記表示部の画像を拡大または縮小するための倍率を設定する倍率設定部と、を備え、
    　前記ビーム形成部は、
    　前記倍率設定部により設定された倍率に応じて、前記形成されたビームのサイズを変更する、
    　指向性制御システム。     An imaging unit for imaging the sound collection area;
    A first sound collection unit that includes a plurality of microphones and collects sound in the sound collection region;
    A directivity control device that controls the directivity of the sound collected by the first sound collection unit,
    The directivity control device includes:
    A display unit for displaying an image of the sound collection area captured by the imaging unit;
    A beam forming unit that forms a beam in a direction from the first sound collection unit to a sound source corresponding to the designated position in response to designation of a position with respect to the image displayed on the display unit;
    A magnification setting unit for setting a magnification for enlarging or reducing the image on the display unit according to an input,
    The beam forming unit includes:
    According to the magnification set by the magnification setting unit, the size of the formed beam is changed.
    Directional control system.
  13. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲を囲む開口部を有し、前記第１収音部と同心円状の筐体を有する第２収音部、が更に設けられた、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collecting portion having an opening surrounding the first sound collecting portion and having a casing concentric with the first sound collecting portion;
    Directional control system.
  14. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲を囲む開口部を有し、楕円形状の筐体を有する第２収音部、が更に設けられた、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collecting section having an opening surrounding the first sound collecting section and having an elliptical housing;
    Directional control system.
  15. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲を囲む開口部を有し、矩形形状の筐体を有する第２収音部、が更に設けられた、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collecting unit having an opening surrounding the first sound collecting unit and having a rectangular housing;
    Directional control system.
  16. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲を囲む開口部を有し、ハニカム形状の筐体を有する第２収音部、が更に設けられた、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collecting portion having an opening surrounding the first sound collecting portion and having a honeycomb-shaped housing;
    Directional control system.
  17. 　請求項１３、１４、１５及び１６のうちいずれか一項に記載の指向性制御システムであって、
    　前記第１収音部と前記第２収音部とは、
    　前記第１収音部及び前記第２収音部の高さ方向に離れて設置される、
    　指向性制御システム。     The directivity control system according to any one of claims 13, 14, 15 and 16,
    The first sound collection unit and the second sound collection unit are:
    The first sound collecting unit and the second sound collecting unit are installed apart in the height direction.
    Directional control system.
  18. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲に、少なくとも１つの棒形状の筐体を有する第２収音部、が更に設けられる、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collection unit having at least one rod-shaped housing is further provided around the first sound collection unit.
    Directional control system.
  19. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部の周囲に、少なくとも１つの第２収音部、が更に設けられ、
    　前記第２収音部は、
    　所定の信号線収容管を介して、前記第１収音部の周囲に設けられたコネクタ部と接続される、
    　指向性制御システム。     A directivity control system according to claim 12,
    At least one second sound collection unit is further provided around the first sound collection unit,
    The second sound collection unit includes:
    It is connected to a connector part provided around the first sound collecting part via a predetermined signal line housing tube.
    Directional control system.
  20. 　請求項１２に記載の指向性制御システムであって、
    　前記第１収音部と同一の矩形形状の筐体を有する第２収音部、が更に設けられ、
    　前記第１収音部及び前記第２収音部の筐体は、
    　中間辺部に、半円状の凹面が形成された中間辺連結部が設けられ、
    　両端部に、１／４円状の凹面が形成された両端連結部が設けられる、
    　指向性制御システム。     A directivity control system according to claim 12,
    A second sound collection unit having a rectangular housing that is the same as the first sound collection unit;
    The housings of the first sound collection unit and the second sound collection unit are:
    An intermediate side connection part in which a semicircular concave surface is formed is provided on the intermediate side part,
    Both end portions are provided with both end connecting portions formed with a quarter-circular concave surface,
    Directional control system.
  21. 　収音領域を撮像する撮像部と、
    　複数のマイクを含み前記収音領域の音声を収音する第１収音部と、
    　前記第１収音部の周囲に増設される第２収音部と、
    　前記第１収音部と第２収音部で収音された音声の指向性を制御する指向性制御装置と、を備え、
    　前記指向性制御装置は、
    　前記撮像部により撮像された前記収音領域の画像を表示する表示部と、
    　前記表示部に表示された前記画像に対する位置の指定に応じて、前記第１収音部から、前記指定された位置に対応する音源への方向に、ビームを形成するビーム形成部と、を備える、
    　指向性制御システム。     An imaging unit for imaging the sound collection area;
    A first sound collection unit that includes a plurality of microphones and collects sound in the sound collection region;
    A second sound collection unit that is added around the first sound collection unit;
    A directivity control device that controls the directivity of the sound collected by the first sound collection unit and the second sound collection unit;
    The directivity control device includes:
    A display unit for displaying an image of the sound collection area captured by the imaging unit;
    A beam forming unit that forms a beam in a direction from the first sound collection unit to a sound source corresponding to the designated position in response to designation of a position with respect to the image displayed on the display unit. ,
    Directional control system.
  22. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、
    　前記第１収音部の周囲を囲む開口部を有し、前記第１収音部と同心円状の筐体を有する、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit includes:
    Having an opening surrounding the periphery of the first sound collection unit, and having a casing concentric with the first sound collection unit;
    Directional control system.
  23. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、
    　前記第１収音部の周囲を囲む開口部を有し、楕円形状の筐体を有する、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit includes:
    Having an opening surrounding the periphery of the first sound collection unit, and having an elliptical housing;
    Directional control system.
  24. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、
    　前記第１収音部の周囲を囲む開口部を有し、矩形形状の筐体を有する、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit includes:
    Having an opening surrounding the periphery of the first sound collection unit and having a rectangular housing;
    Directional control system.
  25. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、
    　前記第１収音部の周囲を囲む開口部を有し、ハニカム形状の筐体を有する、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit includes:
    Having an opening surrounding the periphery of the first sound collection unit, and having a honeycomb-shaped housing;
    Directional control system.
  26. 　請求項２２、２３、２４及び２５のうちいずれか一項に記載の指向性制御システムであって、
    　前記第１収音部と前記第２収音部とは、
    　前記第１収音部及び前記第２収音部の高さ方向に離れて設置される、
    　指向性制御システム。     A directivity control system according to any one of claims 22, 23, 24 and 25,
    The first sound collection unit and the second sound collection unit are:
    The first sound collecting unit and the second sound collecting unit are installed apart in the height direction.
    Directional control system.
  27. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、
    　前記第１収音部の周囲に、少なくとも１つの棒形状の筐体を有する、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit includes:
    Around the first sound collection unit, at least one rod-shaped housing is provided.
    Directional control system.
  28. 　請求項２１に記載の指向性制御システムであって、
    　少なくとも一つの前記第２収音部が増設され、前記第２収音部は、所定の信号線収容管を介して、
    　前記第１収音部の周囲に設けられたコネクタ部と接続される、
    　指向性制御システム。     The directivity control system according to claim 21,
    At least one second sound collection unit is added, and the second sound collection unit is connected via a predetermined signal line accommodating tube.
    It is connected to a connector part provided around the first sound collecting part,
    Directional control system.
  29. 　請求項２１に記載の指向性制御システムであって、
    　前記第２収音部は、前記第１収音部と同一の矩形形状の筐体を有し、
    　前記第１収音部及び前記第２収音部の筐体は、
    　中間辺部に、半円状の凹面が形成された中間辺連結部が設けられ、
    　両端部に、１／４円状の凹面が形成された両端連結部が設けられる、
    　指向性制御システム。     The directivity control system according to claim 21,
    The second sound collection unit has the same rectangular housing as the first sound collection unit,
    The housings of the first sound collection unit and the second sound collection unit are:
    An intermediate side connection part in which a semicircular concave surface is formed is provided on the intermediate side part,
    Both end portions are provided with both end connecting portions formed with a quarter-circular concave surface,
    Directional control system.
PCT/JP2014/001899 2014-03-31 2014-03-31 Directivity control device, directivity control method, storage medium, and directivity control system WO2015151131A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201480045463.8A CN105706462B (en) 2014-03-31 2014-03-31 Directive property control device, directivity control method, storage medium and directive property control system
JP2015526802A JP6145736B2 (en) 2014-03-31 2014-03-31 Directivity control method, storage medium, and directivity control system
PCT/JP2014/001899 WO2015151131A1 (en) 2014-03-31 2014-03-31 Directivity control device, directivity control method, storage medium, and directivity control system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/001899 WO2015151131A1 (en) 2014-03-31 2014-03-31 Directivity control device, directivity control method, storage medium, and directivity control system

Publications (1)

Publication Number Publication Date
WO2015151131A1 true WO2015151131A1 (en) 2015-10-08

Family

ID=54239509

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/001899 WO2015151131A1 (en) 2014-03-31 2014-03-31 Directivity control device, directivity control method, storage medium, and directivity control system

Country Status (3)

Country Link
JP (1) JP6145736B2 (en)
CN (1) CN105706462B (en)
WO (1) WO2015151131A1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021515281A (en) * 2018-06-28 2021-06-17 ▲騰▼▲訊▼科技（深▲セン▼）有限公司 Speech recognition methods, devices, computer devices, electronic devices and computer programs
CN113253849A (en) * 2021-07-01 2021-08-13 湖北亿咖通科技有限公司 Display control method, device and equipment of control bar
CN113873398A (en) * 2020-06-30 2021-12-31 陈筱涵 Pickup system and pickup device
WO2024166569A1 (en) * 2023-02-09 2024-08-15 ソニーグループ株式会社 Sound collecting device
US12114118B2 (en) 2021-01-13 2024-10-08 Shure Acquisition Holdings, Inc. Audio device housing

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019061531A1 (en) * 2017-09-30 2019-04-04 深圳传音通讯有限公司 Method and device for adjusting dynamic wallpaper of mobile terminal, and storage medium
CN111586283B (en) * 2019-02-19 2022-09-27 北京小米移动软件有限公司 Zooming method and device
CN110211600B (en) * 2019-05-17 2021-08-03 北京华控创为南京信息技术有限公司 Intelligent microphone array module for directional monitoring communication
CN110769358B (en) * 2019-09-25 2021-04-13 云知声智能科技股份有限公司 Microphone monitoring method and device
CN113747047B (en) * 2020-05-30 2023-10-13 华为技术有限公司 Video playing method and device

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05260589A (en) * 1992-03-10 1993-10-08 Nippon Hoso Kyokai <Nhk> Focal point sound collection method
JPH05308553A (en) * 1992-04-28 1993-11-19 Sanyo Electric Co Ltd Sound recorder for video camera
JPH09219858A (en) * 1996-02-13 1997-08-19 Matsushita Electric Ind Co Ltd Video/voiced encoder and video/voice decoder
JPH1051889A (en) * 1996-08-05 1998-02-20 Toshiba Corp Device and method for gathering sound
JP2000004493A (en) * 1998-06-17 2000-01-07 Matsushita Electric Ind Co Ltd Video camera
JP2002223493A (en) * 2001-01-26 2002-08-09 Matsushita Electric Ind Co Ltd Multi-channel sound collection device
JP2005124090A (en) * 2003-10-20 2005-05-12 Sony Corp Microphone device, reproducing device, and imaging device
JP2005311604A (en) * 2004-04-20 2005-11-04 Sony Corp Information processing apparatus and program used for information processing apparatus
JP2009130854A (en) * 2007-11-27 2009-06-11 Sony Corp Sound signal processor, sound signal processing method, and image pickup device
JP2011024112A (en) * 2009-07-17 2011-02-03 Kumagai Gumi Co Ltd Fixing device
JP2013157946A (en) * 2012-01-31 2013-08-15 Jvc Kenwood Corp Image processing device, image processing method, and image processing program

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000209689A (en) * 1999-01-12 2000-07-28 Canon Inc Sound processor, its control method and recording medium
KR100922910B1 (en) * 2001-03-27 2009-10-22 캠브리지 메카트로닉스 리미티드 Method and apparatus to create a sound field
JP2005124080A (en) * 2003-10-20 2005-05-12 Sharp Corp Mobile communication terminal
JP2006238110A (en) * 2005-02-25 2006-09-07 Matsushita Electric Ind Co Ltd Monitoring system
JP2008271157A (en) * 2007-04-19 2008-11-06 Fuji Xerox Co Ltd Sound enhancement device and control program
JP5347902B2 (en) * 2009-10-22 2013-11-20 ヤマハ株式会社 Sound processor
EP2680616A1 (en) * 2012-06-25 2014-01-01 LG Electronics Inc. Mobile terminal and audio zooming method thereof
US9258644B2 (en) * 2012-07-27 2016-02-09 Nokia Technologies Oy Method and apparatus for microphone beamforming

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05260589A (en) * 1992-03-10 1993-10-08 Nippon Hoso Kyokai <Nhk> Focal point sound collection method
JPH05308553A (en) * 1992-04-28 1993-11-19 Sanyo Electric Co Ltd Sound recorder for video camera
JPH09219858A (en) * 1996-02-13 1997-08-19 Matsushita Electric Ind Co Ltd Video/voiced encoder and video/voice decoder
JPH1051889A (en) * 1996-08-05 1998-02-20 Toshiba Corp Device and method for gathering sound
JP2000004493A (en) * 1998-06-17 2000-01-07 Matsushita Electric Ind Co Ltd Video camera
JP2002223493A (en) * 2001-01-26 2002-08-09 Matsushita Electric Ind Co Ltd Multi-channel sound collection device
JP2005124090A (en) * 2003-10-20 2005-05-12 Sony Corp Microphone device, reproducing device, and imaging device
JP2005311604A (en) * 2004-04-20 2005-11-04 Sony Corp Information processing apparatus and program used for information processing apparatus
JP2009130854A (en) * 2007-11-27 2009-06-11 Sony Corp Sound signal processor, sound signal processing method, and image pickup device
JP2011024112A (en) * 2009-07-17 2011-02-03 Kumagai Gumi Co Ltd Fixing device
JP2013157946A (en) * 2012-01-31 2013-08-15 Jvc Kenwood Corp Image processing device, image processing method, and image processing program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021515281A (en) * 2018-06-28 2021-06-17 ▲騰▼▲訊▼科技（深▲セン▼）有限公司 Speech recognition methods, devices, computer devices, electronic devices and computer programs
JP7109852B2 (en) 2018-06-28 2022-08-01 ▲騰▼▲訊▼科技（深▲セン▼）有限公司 Speech recognition method, apparatus, computer device, electronic equipment and computer program
CN113873398A (en) * 2020-06-30 2021-12-31 陈筱涵 Pickup system and pickup device
US12114118B2 (en) 2021-01-13 2024-10-08 Shure Acquisition Holdings, Inc. Audio device housing
CN113253849A (en) * 2021-07-01 2021-08-13 湖北亿咖通科技有限公司 Display control method, device and equipment of control bar
WO2024166569A1 (en) * 2023-02-09 2024-08-15 ソニーグループ株式会社 Sound collecting device

Also Published As

Publication number Publication date
CN105706462B (en) 2018-11-30
JP6145736B2 (en) 2017-06-14
CN105706462A (en) 2016-06-22
JPWO2015151131A1 (en) 2017-04-13

Similar Documents

Publication Publication Date Title
JP6145736B2 (en) Directivity control method, storage medium, and directivity control system
US9516412B2 (en) Directivity control apparatus, directivity control method, storage medium and directivity control system
JP6202277B2 (en) Voice processing system and voice processing method
JP5958833B2 (en) Directional control system
EP2941013B1 (en) Sound processing system and sound processing method
US20180338106A1 (en) Flexible Spatial Audio Capture Apparatus
JP2016146547A (en) Sound collection system and sound collection method
JP6217930B2 (en) Sound speed correction system
WO2015170368A1 (en) Directivity control apparatus, directivity control method, storage medium, and directivity control system
US11462235B2 (en) Surveillance camera system for extracting sound of specific area from visualized object and operating method thereof
EP2478715B1 (en) Method for acquiring audio signals, and audio acquisition system thereof
WO2014122723A1 (en) Amplification system
JP6832507B2 (en) Manufacturing method of microphone array device, microphone array system and microphone array device
JP5853181B2 (en) Sound collector
EP2928206B1 (en) Directivity control apparatus, directivity control method, storage medium and directivity control system
JP2024534497A (en) CONFERENCING SYSTEM AND METHOD FOR ROOM INTELLIGENCE - Patent application
JP2016219965A (en) Directivity control system and speech output control method
JP6256774B2 (en) Directivity control system, audio output control method, and recording medium
JP2018023137A (en) Directivity controller, directivity control method, storage medium, and directivity control system

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2015526802

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14888407

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase
122 Ep: pct application non-entry in european phase

Ref document number: 14888407

Country of ref document: EP

Kind code of ref document: A1