JP2011040991A - Imaging device and imaging system - Google Patents

Imaging device and imaging system Download PDF

Info

Publication number
JP2011040991A
JP2011040991A JP2009186482A JP2009186482A JP2011040991A JP 2011040991 A JP2011040991 A JP 2011040991A JP 2009186482 A JP2009186482 A JP 2009186482A JP 2009186482 A JP2009186482 A JP 2009186482A JP 2011040991 A JP2011040991 A JP 2011040991A
Authority
JP
Japan
Prior art keywords
sound information
distance
microphone
external
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009186482A
Other languages
Japanese (ja)
Other versions
JP5446568B2 (en
Inventor
Kotaro Murakami
浩太郎 村上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009186482A priority Critical patent/JP5446568B2/en
Publication of JP2011040991A publication Critical patent/JP2011040991A/en
Application granted granted Critical
Publication of JP5446568B2 publication Critical patent/JP5446568B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an imaging device for eliminating mechanical noise sound from sound information by detecting the noise sound of the imaging device from the sound information inputted to a microphone provided in the imaging device. <P>SOLUTION: The imaging device includes: an imaging part for imaging a subject image and outputting an image signal; a microphone attached to the imaging device; an external sound information receiving part for receiving external sound information from an external microphone of a flash device that is not attached to the imaging device; a sound information processing part for performing correction processing of sound information acquired by the microphone with the external sound information to obtain corrected sound information data; and a sound information recording part for recording the corrected sound information data in a storing part while associating it with the image signal. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、音情報を画像に対応させて記録する撮像装置に関し、特に機械的なノイズを除去する機能を有する撮像装置及び撮像システムに関する。   The present invention relates to an imaging apparatus that records sound information corresponding to an image, and more particularly to an imaging apparatus and an imaging system having a function of removing mechanical noise.

本体にマイクが取り付けられているビデオカメラ、デジタルカメラなどの撮像装置の小型化が進んでいる。
このため、上記マイクが撮像装置の筐体におけるレンズ近傍に配置される場合が多く、撮像する際における周囲の音情報以外に、撮像装置の機械的なノイズ、例えば、レンズを移動させるズーミング操作、合焦動作などの焦点距離変更時のモータ音やシャッター動作などの各機能スイッチの操作音が、直接にあるいは筐体を伝搬して、マイクに拾われ、音情報のS/N比を悪化させて、音情報の録音品質を低下させている。
Miniaturization of imaging devices such as video cameras and digital cameras having a microphone attached to the main body is progressing.
For this reason, the microphone is often arranged near the lens in the housing of the imaging device, and in addition to surrounding sound information when imaging, mechanical noise of the imaging device, for example, a zooming operation for moving the lens, The operation sound of each function switch such as motor sound and shutter operation during focal length change such as in-focus operation is picked up by the microphone directly or propagating through the housing, and deteriorates the S / N ratio of sound information As a result, the recording quality of the sound information is degraded.

このS/N比を改善させるため、マイクの位置を撮像装置の筐体からできるだけ離すことを考慮し、撮像装置一体型の閃光装置にマイクを取り付ける提案がなされている(例えば、特許文献1参照)。   In order to improve this S / N ratio, a proposal has been made to attach a microphone to a flash device integrated with an imaging device in consideration of the position of the microphone as far as possible from the housing of the imaging device (see, for example, Patent Document 1). ).

特開2003−101834号公報Japanese Patent Laid-Open No. 2003-101834

しかしながら、撮像装置一体型の閃光装置にマイクを取り付ける場合、すでに述べたように撮像装置の小型化が進んでおり、撮像装置内部の機械的な振動音源とマイクとの距離には制約があり、マイクが拾うノイズ音を人間が気にしない程度までに、大幅に低下させることができない。   However, when the microphone is attached to the flash device integrated with the imaging device, as described above, the size of the imaging device has been reduced, and there is a restriction on the distance between the mechanical vibration sound source inside the imaging device and the microphone, The noise noise picked up by the microphone cannot be greatly reduced to the extent that humans do not care.

本発明は、このような事情に鑑みてなされたもので、撮像装置に設けられているマイクに入力される音情報から、撮像装置の機械的なノイズ音を除去することで、ノイズ音を含まない音情報を得ることができる撮像装置及び撮像システムを提供することを目的とする。   The present invention has been made in view of such circumstances, and includes noise noise by removing mechanical noise noise of the imaging apparatus from sound information input to a microphone provided in the imaging apparatus. An object of the present invention is to provide an imaging apparatus and an imaging system that can obtain sound information.

本発明の撮像装置は、被写体像を撮像して画像信号を出力する撮像部と、自身に取り付けられているマイクと、自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有することを特徴とする。   The imaging apparatus of the present invention receives external sound information from an imaging unit that captures a subject image and outputs an image signal, a microphone attached to the imaging unit, and an external microphone of a flash device not attached to the imaging unit. An external sound information input unit, a sound information processing unit that corrects the sound information acquired by the microphone with the external sound information to obtain corrected sound information data, and the corrected sound information data corresponds to the image signal. And a sound information recording unit for recording in the storage unit.

本発明の撮像装置は、前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成することを特徴とする。   In the imaging apparatus of the present invention, the sound information processing unit compares the sound information with the external sound information, detects a sound information signal measured only in the sound information as difference data, and detects the difference data. Is generated from the sound information to generate the corrected sound information data.

本発明の撮像装置は、前記音情報処理部が、前記被写体と前記マイクとの間の第1の距離と、前記閃光装置及び前記マイク間の第2の距離との距離差により、前記音情報と前記外部音情報との音圧比及び位相差を求め、当該音圧比及び位相差により前記外部音情報の音圧及び位相を前記音情報に対応させ、前記音情報の補正処理を行うことを特徴とする。   In the imaging device according to the aspect of the invention, the sound information processing unit may calculate the sound information based on a distance difference between a first distance between the subject and the microphone and a second distance between the flash device and the microphone. Sound pressure ratio and phase difference between the external sound information and the sound pressure ratio and phase difference, the sound pressure and phase of the external sound information are made to correspond to the sound information, and the sound information is corrected. And

本発明の撮像装置は、前記音情報処理部が、前記被写体の仮想位置から前記マイクまでの仮想距離が入力されると、前記第1の距離における前記音情報を、当該仮想距離における音圧及び位相となる仮想音情報に変換し、前記仮想位置から前記閃光装置までの距離を前記第2の距離とし、前記仮想音情報の補正処置を行うことを特徴とする。   In the imaging apparatus of the present invention, when the sound information processing unit receives a virtual distance from the virtual position of the subject to the microphone, the sound information at the first distance is converted to the sound pressure at the virtual distance and It is converted into virtual sound information to be a phase, the distance from the virtual position to the flash device is the second distance, and the virtual sound information is corrected.

本発明の撮像装置は、前記音情報処理部が、前記差分データのレベルが設定値以上である場合、前記設定値以上の差分データが存在する期間の前記音情報を、前記音圧比及び位相差により当該音情報に対応させた前記外部音情報と置き換えることを特徴とする。   In the imaging apparatus according to the aspect of the invention, when the level of the difference data is greater than or equal to a set value, the sound information processing unit may obtain the sound information during a period in which difference data greater than or equal to the set value exists, the sound pressure ratio and the phase difference. Is replaced with the external sound information corresponding to the sound information.

本発明の撮像装置は、前記マイクが複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記閃光装置及び前記複数のマイク各々の間の第2の距離との距離差を求め、それぞれの距離差に対応した音圧比及び位相差により、当該マイク各々の音情報の補正処理を行うことを特徴とする。   In the imaging device of the present invention, when a plurality of microphones are provided, a first distance between the subject and each of the plurality of microphones, and a second distance between the flash device and each of the plurality of microphones, And the sound information of each microphone is corrected based on the sound pressure ratio and the phase difference corresponding to each distance difference.

本発明の撮像装置は、前記マイク及び前記閃光装置が複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記複数の閃光装置及び前記複数のマイク各々の間の距離である第2の距離と、複数の外部マイクからの前記外部音情報とを用いて、当該マイク各々の音情報の補正処理を行うことを特徴とする。   In the imaging device of the present invention, when a plurality of the microphones and the flash devices are provided, a first distance between the subject and each of the plurality of microphones, and between each of the plurality of flash devices and the plurality of microphones. The sound information of each of the microphones is corrected using the second distance that is the distance of the microphone and the external sound information from a plurality of external microphones.

本発明の撮像装置は、前記第1の距離及び前記第2の距離を測定する測距手段をさらに有することを特徴とする。   The imaging apparatus according to the present invention further includes distance measuring means for measuring the first distance and the second distance.

本発明の撮像システムは、撮像装置と、当該撮像装置と異なる場所に配置され、当該撮像装置の撮像時に前記被写体に対して光を照射する閃光装置とからなるシステムであり、前記閃光装置が前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、外部マイクと当該外部マイク取得した外部音情報を前記撮像装置に送信する外部音情報出力部とを有し、前記撮像装置が、前記被写体の被写体像を撮像して画像信号を出力する撮像部と、撮像装置に搭載されたマイクと、前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有することを特徴とする。   The imaging system of the present invention is a system that includes an imaging device and a flash device that is disposed at a different location from the imaging device and that irradiates light on the subject when the imaging device captures the image. An irradiating unit that irradiates light to the subject with an imaging signal indicating imaging timing from the imaging device, an external microphone, and an external sound information output unit that transmits external sound information acquired by the external microphone to the imaging device. Then, the imaging device inputs from the flash device, an imaging unit that captures a subject image of the subject and outputs an image signal, a microphone mounted on the imaging device, and external sound information acquired by the external microphone. An external sound information input section, a sound information processing section that corrects the sound information acquired by the microphone with the external sound information to obtain corrected sound information data, and the corrected sound information data. Serial to correspond to the image signal and having a sound information recording unit that records in the storage unit.

以上説明したように、本発明によれば、撮像装置に設けられているマイクに入力される音情報と、撮像装置と直接に接触していない閃光装置から入力される外部音情報とを比較し、音情報に存在して外部音情報に存在しない音を、撮像装置の機械的な動作によるノイズ音として検出し、このノイズ音を上記音情報から除去することにより、従来に比較して、音の品質が向上した音情報を提供することが可能となる。   As described above, according to the present invention, the sound information input to the microphone provided in the imaging device is compared with the external sound information input from the flash device that is not in direct contact with the imaging device. The sound that is present in the sound information but not in the external sound information is detected as a noise sound due to the mechanical operation of the imaging device, and the noise sound is removed from the sound information, so that the sound Sound information with improved quality can be provided.

本発明の第1の実施形態による撮像システムの構成例を示す図である。It is a figure which shows the structural example of the imaging system by the 1st Embodiment of this invention. 図1における撮像装置1の構成例を示すブロック図である。It is a block diagram which shows the structural example of the imaging device 1 in FIG. 図1における閃光装置2の構成例を示すブロック図である。It is a block diagram which shows the structural example of the flash device 2 in FIG. 第1の実施形態による撮像システムにおける撮像装置の動作例を説明するフローチャートである。It is a flowchart explaining the operation example of the imaging device in the imaging system by 1st Embodiment. 本発明の第2の実施形態による撮像システムの構成例を示す図である。It is a figure which shows the structural example of the imaging system by the 2nd Embodiment of this invention. 本発明の第3の実施形態による撮像システムの構成例を示す図である。It is a figure which shows the structural example of the imaging system by the 3rd Embodiment of this invention. 本発明の第4の実施形態による撮像システムの構成例を示す図である。It is a figure which shows the structural example of the imaging system by the 4th Embodiment of this invention. 図7における閃光装置2の構成例を示すブロック図である。It is a block diagram which shows the structural example of the flash device 2 in FIG. 本発明の第5の実施形態による撮像システムの構成例を示す図である。It is a figure which shows the structural example of the imaging system by the 5th Embodiment of this invention.

<第1の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図1は同実施形態による撮像システムの構成例を示すブロック図である。
この図において、本実施形態の撮像装置1は、被写体を撮像するものであり、撮像装置本体10に対し、被写体周辺の撮影環境における音が音情報として入力されるマイクMIC1が搭載されている。
閃光装置2は、上記撮像装置1から入力される画像の撮像タイミングを示す指示信号により、閃光(フラッシュ光)を出射するものであり、上記撮影環境における音が外部音情報として入力されるマイクMIC2が搭載されている。
<First Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram illustrating a configuration example of an imaging system according to the embodiment.
In this figure, the imaging device 1 of the present embodiment images a subject, and a microphone MIC1 to which sound in a shooting environment around the subject is input as sound information is mounted on the imaging device body 10.
The flash device 2 emits flash light (flash light) in response to an instruction signal indicating the imaging timing of an image input from the imaging device 1, and a microphone MIC2 to which sound in the shooting environment is input as external sound information. Is installed.

次に、図1における上記撮像装置1の構成を図面を参照して説明する。図2は、図1における撮像装置1の構成例を示すブロック図である。
図2において、撮像装置1は、マイクMIC1、撮像部11、外部音情報入力部12、距離計測部13、角度計測部14、距離算出部15、音情報処理部16、送信部17、制御部18、記憶部19を有している。
Next, the configuration of the imaging apparatus 1 in FIG. 1 will be described with reference to the drawings. FIG. 2 is a block diagram illustrating a configuration example of the imaging apparatus 1 in FIG.
2, the imaging apparatus 1 includes a microphone MIC1, an imaging unit 11, an external sound information input unit 12, a distance measurement unit 13, an angle measurement unit 14, a distance calculation unit 15, a sound information processing unit 16, a transmission unit 17, and a control unit. 18 and a storage unit 19.

撮像部11は、ズームレンズ及びフォーカスレンズを有する撮影レンズと、CCD(Charge Coupled Device)などにより構成される撮像素子とを有している。また、撮像部11は、ズーム機構制御部を有し、上記ズームレンズを光軸方向に進退駆動し、撮影レンズのズームの制御を行う。ここで、撮影レンズ、ズーム機構制御部及びフォーカス機構制御部が撮影光学系を構成する。また、撮像部11は、オートフォーカスを行うフォーカス機構制御部を有し、上記フォーカスレンズを光軸に進退駆動して、撮像素子の撮像面に対して結像される撮影被写体の像のピント調整を行う。上記撮像素子は、撮影レンズを介してその撮像面上に結像される被写体の像を撮像して画像データとして、記憶部19に時刻情報に対応して書き込み、記憶させる。   The imaging unit 11 includes a photographing lens having a zoom lens and a focus lens, and an imaging element configured by a CCD (Charge Coupled Device) or the like. The imaging unit 11 has a zoom mechanism control unit, and drives the zoom lens to move back and forth in the optical axis direction to control zoom of the photographing lens. Here, the photographing lens, the zoom mechanism control unit, and the focus mechanism control unit constitute a photographing optical system. The imaging unit 11 includes a focus mechanism control unit that performs autofocus, and drives the focus lens to move back and forth along the optical axis, thereby adjusting the focus of the image of the photographic subject that is imaged on the imaging surface of the image sensor. I do. The image pickup device picks up an image of a subject formed on the image pickup surface via a photographing lens, writes it as image data in the storage unit 19 corresponding to time information, and stores it.

外部音情報入力部12は、マイクMIC2から送信されるFM変調された音情報などの信号が受信されると、その信号をFM復調して音情報処理部16へ出力する。   When a signal such as FM-modulated sound information transmitted from the microphone MIC <b> 2 is received, the external sound information input unit 12 performs FM demodulation on the signal and outputs the signal to the sound information processing unit 16.

距離計測部13は、撮像装置1と被写体100との距離L11、撮像装置1と閃光装置2との距離L21を測定する。ここで、距離計測部13は、例えば、被写体100(あるいは閃光装置2)に対して例えば赤外線を照射するとともにその反射光を受光して、被写体までの距離を測定する構成としても良い。すなわち、距離計測部13は、被写体100に対して赤外線等の光を照射受光し、その時間差に基づいて被写体までの距離を計算する。
また、距離計測部13は、 撮像部11における被写体100の撮像画像のコントラストに基づき、撮像装置1から被写体100までの距離である被写体距離を、所定の演算を行うことによって特定する。
The distance measuring unit 13 measures a distance L11 between the imaging device 1 and the subject 100 and a distance L21 between the imaging device 1 and the flash device 2. Here, for example, the distance measuring unit 13 may be configured to measure the distance to the subject by irradiating the subject 100 (or the flash device 2) with, for example, infrared rays and receiving the reflected light. That is, the distance measuring unit 13 receives and receives light such as infrared rays with respect to the subject 100 and calculates the distance to the subject based on the time difference.
The distance measurement unit 13 specifies a subject distance, which is a distance from the imaging device 1 to the subject 100, by performing a predetermined calculation based on the contrast of the captured image of the subject 100 in the imaging unit 11.

すなわち、距離計測部13は、撮像部11において焦点を合わせるための撮影レンズを移動させた合焦位置を検知し、撮像部1から被写体100までの距離情報を得るための距離情報テーブルを有し、合焦位置に対応した距離を上記被写体距離として出力する。この距離情報テーブルは、合焦位置と、被写体100と撮像部11との間の距離である被写体距離とが対応して記憶されており、例えば至近位置から無限位置までの被写体距離を数ビット程度のコードパターンとして有し、検知された合焦位置に対応する被写体距離を求めることができるようになっている。この距離計測部13において計測される被写体距離として、撮像装置1と被写体100との距離は第1距離L11であり、撮像装置1と閃光装置2との距離は第2距離L21である。   That is, the distance measuring unit 13 has a distance information table for detecting the in-focus position where the imaging lens for focusing is moved in the imaging unit 11 and obtaining distance information from the imaging unit 1 to the subject 100. The distance corresponding to the in-focus position is output as the subject distance. In this distance information table, the in-focus position and the subject distance that is the distance between the subject 100 and the imaging unit 11 are stored in association with each other. For example, the subject distance from the closest position to the infinite position is about several bits. The subject distance corresponding to the detected in-focus position can be obtained. As the subject distance measured by the distance measuring unit 13, the distance between the imaging device 1 and the subject 100 is the first distance L11, and the distance between the imaging device 1 and the flash device 2 is the second distance L21.

角度計測部14は、方位角センサ等により構成されており、例えば、ジャイロにより撮像部11の方位角(北を基準として、時計廻りに角度を測り、度・分・秒の単位)を測定するものである。すなわち、角度計測部14は、ユーザの角度測定を指示する入力により、撮像装置1から被写体100への方位角α(不図示)を測定し、次に撮像装置1から閃光装置2への方位角β(不図示)を測定し、測定された方位角αと方位角βの角度差を算出し、これら方位角の角度差を角度θ1として出力する。ここで、角度測定部14は、撮像部11のレンズを向けた方向の方位角を測定するように、撮像装置1に搭載されている。   The angle measurement unit 14 includes an azimuth sensor or the like, and measures, for example, an azimuth angle of the image pickup unit 11 (measures the angle clockwise with respect to the north, in units of degrees, minutes, and seconds) using a gyro. Is. That is, the angle measurement unit 14 measures an azimuth angle α (not shown) from the imaging device 1 to the subject 100 by an input instructing angle measurement by the user, and then the azimuth angle from the imaging device 1 to the flash device 2. β (not shown) is measured, an angle difference between the measured azimuth angle α and azimuth angle β is calculated, and the angle difference between these azimuth angles is output as an angle θ1. Here, the angle measuring unit 14 is mounted on the imaging apparatus 1 so as to measure the azimuth angle in the direction in which the lens of the imaging unit 11 is directed.

距離算出部15は、第1距離L11、第2距離21及び角度θ1を用い、閃光装置2と被写体100との第3距離L31を、以下のように算出する。
まず、距離算出部15は、撮像装置1及び被写体100を結ぶ線LN11と、この線LN11に垂直であり、かつマイクMIC2を通過する線LN22との交点Aから、撮像装置1までの距離L12を、第2距離L21及び角度θ1を用い、以下の式により算出する。
L12=L21×cos(θ1)
そして、距離算出部15は、下記式のように、第1距離L11から距離L12を減算することにより、交点Aから被写体100までの距離L13を算出する。
L13=L11−L12
距離算出部15は、下記式のように、第2距離L21及び角度θ1を用い、下記式により、交点AからマイクMIC2(閃光装置2)までの距離L22を算出する。
L22=L21×sin(θ1)
距離L13及び距離L22を算出すると、距離算出部15は、下記の式により、閃光装置2から被写体100までの第3距離L31を算出する。
L31=(L13+L221/2
The distance calculation unit 15 calculates the third distance L31 between the flash device 2 and the subject 100 using the first distance L11, the second distance 21, and the angle θ1 as follows.
First, the distance calculation unit 15 calculates the distance L12 from the intersection A between the line LN11 connecting the imaging device 1 and the subject 100 and the line LN22 perpendicular to the line LN11 and passing through the microphone MIC2 to the imaging device 1. Using the second distance L21 and the angle θ1, the following formula is used.
L12 = L21 × cos (θ1)
Then, the distance calculation unit 15 calculates the distance L13 from the intersection A to the subject 100 by subtracting the distance L12 from the first distance L11 as in the following equation.
L13 = L11−L12
The distance calculation unit 15 calculates the distance L22 from the intersection A to the microphone MIC2 (flash device 2) by using the second distance L21 and the angle θ1 as in the following expression.
L22 = L21 × sin (θ1)
When the distance L13 and the distance L22 are calculated, the distance calculation unit 15 calculates the third distance L31 from the flash device 2 to the subject 100 by the following equation.
L31 = (L13 2 + L22 2 ) 1/2

音情報処理部16は、第1距離L11から第3距離L31を減算し、第1距離L11と第3距離L31との距離差SBを算出し、距離差SBによる位相差である伝搬遅延時間Tdを求める。この伝搬遅延時間Tdは、第1距離L11を音が伝搬する時間と第3距離L31を音が伝搬する時間差を示している。音情報処理部16は、以下の式により、距離差SBを音速cにより除算することで伝搬遅延時間Tdを算出する。
Td=SB/c
=SB/(331.5+0.6×tm) ここで、tmは周囲温度(摂氏)
The sound information processing unit 16 subtracts the third distance L31 from the first distance L11 to calculate a distance difference SB between the first distance L11 and the third distance L31, and a propagation delay time Td that is a phase difference due to the distance difference SB. Ask for. The propagation delay time Td indicates a time difference between the sound propagating through the first distance L11 and the sound propagating through the third distance L31. The sound information processing unit 16 calculates the propagation delay time Td by dividing the distance difference SB by the sound speed c using the following equation.
Td = SB / c
= SB / (331.5 + 0.6 × tm) where tm is the ambient temperature (Celsius)

また、音情報処理部16は、マイクMIC1から入力される音情報(マイクMIC1に入力される音圧の振幅強度を示す電気信号)と、外部音情報入力部12から入力される外部音情報(マイクMIC2に入力される音圧の振幅強度を示す電気信号)とを比較するため、外部音情報を上記伝搬遅延時間Td分遅らせて、比較する音情報に対して位相(時刻のタイミング)を合わせる。すなわち、音情報処理部16は、外部音情報と音情報との比較に際し、音情報と外部音情報との位相差を0とし、マイクMIC1及びMIC2の各々が被写体100から同一の距離にて音を取得した状態とする。ここで、音情報処理部16は、マイクMIC1から入力される音情報を予め設定された増幅度により増幅する増幅回路を有している。上記外部情報音は、閃光装置2において、後述するように、マイクMIC2から入力されてから増幅回路により増幅されてから撮像装置1へ送信される。
また、音情報処理部16は、音情報と外部音情報との音圧を合わせるため、音の強さが距離の2乗で減衰するため、外部音情報と音情報との音圧比に対応させて、外部音情報の音の強さを音情報に合わせるため、以下に示す式により算出した増幅度γにより外部音情報の信号レベルを減衰させる。
γ=(L31/L11)
The sound information processing unit 16 also receives sound information input from the microphone MIC1 (electric signal indicating the amplitude intensity of the sound pressure input to the microphone MIC1) and external sound information input from the external sound information input unit 12 ( The external sound information is delayed by the propagation delay time Td and the phase (time timing) is matched with the sound information to be compared in order to compare with the electric signal indicating the amplitude intensity of the sound pressure input to the microphone MIC2. . That is, the sound information processing unit 16 sets the phase difference between the sound information and the external sound information to 0 when comparing the external sound information and the sound information, and each of the microphones MIC1 and MIC2 has the sound at the same distance from the subject 100. Is acquired. Here, the sound information processing unit 16 has an amplifier circuit that amplifies the sound information input from the microphone MIC1 with a preset amplification degree. As described later, the external information sound is input from the microphone MIC2 and then amplified by the amplifier circuit in the flash device 2, and then transmitted to the imaging device 1.
In addition, the sound information processing unit 16 matches the sound pressure between the sound information and the external sound information, so that the sound intensity is attenuated by the square of the distance, so that it corresponds to the sound pressure ratio between the external sound information and the sound information. In order to match the sound intensity of the external sound information with the sound information, the signal level of the external sound information is attenuated by the amplification degree γ calculated by the following equation.
γ = (L31 / L11) 2

また、音情報処理部16は、距離差SBに対応して、外部音情報に対して音圧(信号レベル)及び位相(時間のタイミング)の補正を行った後、音情報と外部音情報との音圧の比較を行う。
すなわち、音情報処理部16は、音情報と外部音情報との音圧の差分である差分データを求め、この差分データを時刻に合わせて音情報から削除することにより、ノイズ音が除去された音情報を求める。
すなわち、音情報処理部16は、閃光装置2のマイクMIC2にて入力されず、一方、撮像装置1におけるマイクMIC1においてのみ入力される音をノイズ音として、音情報から除去して、ノイズ音の存在しない音情報を生成し、時刻情報に対応して記憶部19に書き込んで記憶させる。
また、音情報処理部16は、差分データのレベルが予め設定された閾値を超えた場合、補正不能として、この閾値を超える差分データの存在する期間(時刻範囲)の音情報を、音圧及び位相を補正した外部音情報と置換するように構成しても良い。
Further, the sound information processing unit 16 corrects the sound pressure (signal level) and the phase (time timing) for the external sound information corresponding to the distance difference SB, and then performs the sound information and the external sound information. Compare the sound pressures.
That is, the sound information processing unit 16 obtains difference data that is a difference in sound pressure between the sound information and the external sound information, and the noise data is removed by deleting the difference data from the sound information according to the time. Ask for sound information.
That is, the sound information processing unit 16 removes, from the sound information, a sound that is not input by the microphone MIC2 of the flash device 2 but is input only by the microphone MIC1 of the imaging device 1 from the sound information. Sound information that does not exist is generated, and written and stored in the storage unit 19 corresponding to the time information.
In addition, when the level of the difference data exceeds a preset threshold value, the sound information processing unit 16 determines that the correction cannot be performed, and the sound information in the period (time range) in which the difference data exceeding the threshold value exists is set to the sound pressure and You may comprise so that it may substitute with the external sound information which correct | amended the phase.

制御部18は、図示しない電源スイッチ、ズームスイッチ、設定スイッチ、半押しスイッチ、レリーズスイッチ(全押しスイッチ)からの指示信号が入力された際、それぞれの指示信号に対応し、撮像装置1の各部の制御を行う。制御部18は、撮像する際に、利用者が撮像を指示するレリーズスイッチが押されたことを検出すると、撮像部11に撮像処理を制御する制御信号を出力するとともに、送信部17に対して閃光装置2を制御する制御信号を出力する。
送信部17は、制御部18から上記制御信号が入力されると、フラッシュを被写体100に照射する撮像タイミングを示す指示信号を閃光装置2に対して送信する。
また、制御部19は、音情報及び外部音情報とを同一のサンプリング周期にてサンプリングし、A/D(アナログ/デジタル)変換し、各周期の時刻毎に時系列に音情報処理部16へ、A/D変換した音情報及び外部音情報を出力する。
また、制御部18は、撮像部11が出力する画像データを、液晶表示パネルから形成された表示部に表示する。
記憶部19には、補正された音信号と、撮像部11の撮像した画像データとが時刻情報に対応して記憶されている。
When an instruction signal is input from a power switch, a zoom switch, a setting switch, a half-press switch, or a release switch (full-press switch) (not shown), the control unit 18 corresponds to each instruction signal and corresponds to each part of the imaging device 1. Control. When the control unit 18 detects that the user has pressed the release switch for instructing the imaging, the control unit 18 outputs a control signal for controlling the imaging process to the imaging unit 11 and also transmits to the transmission unit 17. A control signal for controlling the flash device 2 is output.
When the control signal is input from the control unit 18, the transmission unit 17 transmits an instruction signal indicating an imaging timing for irradiating the subject 100 with the flash to the flash device 2.
The control unit 19 samples the sound information and the external sound information at the same sampling period, performs A / D (analog / digital) conversion, and sends the sound information to the sound information processing unit 16 in time series for each time of each period. , A / D converted sound information and external sound information are output.
The control unit 18 displays the image data output from the imaging unit 11 on a display unit formed from a liquid crystal display panel.
The storage unit 19 stores the corrected sound signal and the image data captured by the imaging unit 11 in correspondence with the time information.

次に、図1における上記閃光装置2の構成を図面を参照して説明する。図3は、図1における閃光装置2の構成例を示すブロック図である。
図3において、閃光装置2は、マイクMIC2、閃光出射部21、制御部22、外部音出力部23、受信部24、記憶部25を有している。
制御部22は、撮像装置1から送信された指示信号を受信部24を介して入力すると、閃光出射部21に対し、閃光(フラッシュ)を出射する制御情報を出力する。
Next, the configuration of the flash device 2 in FIG. 1 will be described with reference to the drawings. FIG. 3 is a block diagram showing a configuration example of the flash device 2 in FIG.
In FIG. 3, the flash device 2 includes a microphone MIC2, a flash emission unit 21, a control unit 22, an external sound output unit 23, a reception unit 24, and a storage unit 25.
When the instruction signal transmitted from the imaging device 1 is input via the reception unit 24, the control unit 22 outputs control information for emitting a flash (flash) to the flash emission unit 21.

閃光出射部21は、制御部22から上記閃光を出射する制御情報が入力されると、出射方向の対して閃光を出射する。
外部音出力部23は、マイクMIC2から入力される外部音情報をレベル調整する増幅回路を有し、レベル調整した外部音情報をFM変調するFM変調回路を有し、図示しないアンテナから変調された外部音情報を、撮像装置1に対して送信する。ここで、マイクMIC2から入力される外部音情報には、撮像装置1内部におけるノイズ音は当然のことながら含まれていない。また、上記外部音出力部23における増幅回路の外部音情報に対する増幅度と、撮像装置1における音情報処理部16における増幅回路の音情報に対する増幅度とは、マイクMIC1及びMIC2とが同じ距離にて同一の音を入力した場合、増幅結果が同一の音圧のレベルになるように調整されている。
また、制御部22は、記憶部23に記憶されている情報により、閃光装置2における各部の動作を制御する。
When the control information for emitting the flash light is input from the control unit 22, the flash light emitting unit 21 emits the flash light in the emission direction.
The external sound output unit 23 includes an amplification circuit that adjusts the level of external sound information input from the microphone MIC2, and includes an FM modulation circuit that performs FM modulation on the external sound information subjected to level adjustment, and is modulated from an antenna (not shown). External sound information is transmitted to the imaging apparatus 1. Here, as a matter of course, the external sound information input from the microphone MIC2 does not include a noise sound inside the imaging apparatus 1. Further, the amplification degree for the external sound information of the amplification circuit in the external sound output unit 23 and the amplification degree for the sound information of the amplification circuit in the sound information processing unit 16 in the imaging device 1 are the same distance between the microphones MIC1 and MIC2. When the same sound is input, the amplification result is adjusted so as to have the same sound pressure level.
The control unit 22 controls the operation of each unit in the flash device 2 based on information stored in the storage unit 23.

次に、図1、図2及び図4を用いて、本実施形態による撮像装置1におけるノイズ音除去の処理を説明する、図4は、本実施形態による撮像装置1におけるノイズ音除去の処理の動作例を説明するフローチャートである。
制御部18は、第1距離L11を取得する操作がユーザにより行われると、距離計測部13に対して第1距離L11を取得する制御信号を出力する。このとき、ユーザは被写体100に対して撮像部11を向けた状態である。
上記制御信号が入力されると、距離計測部13は、被写体100と撮像装置1との距離である第1距離L11を測定し(ステップS1)、距離算出部15へ測定結果の第1距離L11を出力する。
Next, noise noise removal processing in the imaging apparatus 1 according to the present embodiment will be described with reference to FIGS. 1, 2, and 4. FIG. 4 illustrates noise noise removal processing in the imaging apparatus 1 according to the present embodiment. It is a flowchart explaining an operation example.
When an operation for acquiring the first distance L11 is performed by the user, the control unit 18 outputs a control signal for acquiring the first distance L11 to the distance measurement unit 13. At this time, the user is in a state where the imaging unit 11 is directed toward the subject 100.
When the control signal is input, the distance measuring unit 13 measures the first distance L11 that is the distance between the subject 100 and the imaging device 1 (step S1), and the distance calculation unit 15 sends the first distance L11 as the measurement result. Is output.

次に、ユーザは撮像装置1の撮像部11を閃光装置2に対して向ける。
そして、制御部18は、第2距離L21を取得する操作がユーザにより行われると、距離計測部13に対して第2距離L21を取得する制御信号を出力する。
上記制御信号が入力されると、距離計測部13は、閃光装置2と撮像装置1との距離である第2距離L21を測定し(ステップS2)、距離算出部15へ測定結果の第2距離L21を出力する。
Next, the user points the imaging unit 11 of the imaging device 1 toward the flash device 2.
Then, when an operation for acquiring the second distance L21 is performed by the user, the control unit 18 outputs a control signal for acquiring the second distance L21 to the distance measurement unit 13.
When the control signal is input, the distance measuring unit 13 measures the second distance L21, which is the distance between the flash device 2 and the imaging device 1 (step S2), and sends the second distance of the measurement result to the distance calculating unit 15. L21 is output.

ユーザが撮像装置1の撮像部11を被写体100に対して向け、方位角の測定を行う操作を行うことにより、角度計測部14は、撮像装置1から被写体100を結ぶ線LN11の方向の方位角α(不図示)を計測する。
また、ユーザが撮像装置1の撮像部11を閃光装置2に対して向け、方位角の測定を行う操作を行うことにより、角度計測部14は、撮像装置1から閃光装置2を結ぶ線LN21の方向の方位角β(不図示)を計測する。
そして、角度計測部14は、方位角αと方位角βとの差を求め、線LN11と線LN21とがなす角度θ1として出力する(ステップS3)。
When the user directs the imaging unit 11 of the imaging device 1 toward the subject 100 and performs an operation for measuring the azimuth angle, the angle measurement unit 14 causes the azimuth angle in the direction of the line LN11 connecting the imaging device 1 to the subject 100. Measure α (not shown).
Further, when the user directs the imaging unit 11 of the imaging device 1 toward the flash device 2 and performs an operation of measuring the azimuth angle, the angle measurement unit 14 causes the line LN 21 connecting the imaging device 1 to the flash device 2. A direction azimuth β (not shown) is measured.
And the angle measurement part 14 calculates | requires the difference of azimuth angle (alpha) and azimuth angle (beta), and outputs it as angle (theta) 1 which line LN11 and line LN21 make (step S3).

次に、距離算出部15は、閃光装置2と被写体100との第1距離L31を算出する(ステップS4)。
第1距離L31を算出すると、距離算出部15は、第1距離L11と第3距離L31との距離差BSを求め、この距離差BSを音が伝搬する伝搬遅延時間Tdを算出する(ステップS5)。また、音情報処理部16は、上記距離差BSにより、マイクMIC2から入力される音情報の音圧を、マイクMIC1から入力される音情報の音圧に合わせる増幅度γを算出する。
Next, the distance calculation unit 15 calculates a first distance L31 between the flash device 2 and the subject 100 (step S4).
When calculating the first distance L31, the distance calculation unit 15 obtains a distance difference BS between the first distance L11 and the third distance L31, and calculates a propagation delay time Td in which sound propagates through the distance difference BS (step S5). ). Further, the sound information processing unit 16 calculates an amplification degree γ that matches the sound pressure of the sound information input from the microphone MIC2 with the sound pressure of the sound information input from the microphone MIC1, based on the distance difference BS.

制御部18は、録音を開始する録音スイッチがオン状態にあるか否かの判定を行い(ステップS6)、録音スイッチがオン状態である場合、録音を開始するために処理をステップS7へ進め、一方、録音スイッチがオフ状態である場合、ステップS6の処理を所定の時間繰り返す。   The control unit 18 determines whether or not the recording switch for starting recording is in the on state (step S6). If the recording switch is in the on state, the process proceeds to step S7 to start recording. On the other hand, when the recording switch is in the OFF state, the process of step S6 is repeated for a predetermined time.

スイッチがオン状態である場合、制御部18は音情報処理部16に対して録音処理の開始を指示する制御信号を出力する。
これにより、音情報処理部16は、上記増幅度γと伝搬遅延時間Tdを用いて、外部音情報の音圧及び位相を、A/D変換した周期毎に音情報の音圧及び位相に合わせる補正処理を行う(ステップS7)。
音情報処理部16は、音情報と外部音情報との音圧及び位相を合わせた後、A/D変換したサンプリング周期毎に、音情報と外部音情報とを同一位相にて比較し、音情報と外部音情報との音圧(信号の振幅レベル)の差分として差分データを求める(ステップS8)。
When the switch is on, the control unit 18 outputs a control signal that instructs the sound information processing unit 16 to start the recording process.
Thereby, the sound information processing unit 16 uses the amplification degree γ and the propagation delay time Td to match the sound pressure and phase of the external sound information to the sound pressure and phase of the sound information for each A / D converted period. Correction processing is performed (step S7).
After matching the sound pressure and phase of the sound information and the external sound information, the sound information processing unit 16 compares the sound information and the external sound information at the same phase for each A / D converted sampling period. Difference data is obtained as a difference in sound pressure (amplitude level of the signal) between the information and the external sound information (step S8).

次に、音情報処理部16は、上記周期毎に音情報から差分データを減算し、差分データ(すなわちノイズ音の情報)を除去する補正処理を行う(ステップS9)。
そして、音情報処理部16は、補正処理を行った音情報を、画像データの時刻と対応させて記憶部19へ書き込んで記憶させる(ステップS10)。
制御部18は、予め設定された検出周期毎に録音スイッチがオン(録音処理を行う状態)またはオフ(録音処理を行わない状態)かの検出を行い(ステップS11)、オフ状態の場合に処理をステップS6へ進め、オン状態の場合に処理をステップS7へ進め、ステップS7からステップS11の処理を繰り返して行う。
Next, the sound information processing unit 16 performs a correction process of subtracting the difference data from the sound information for each cycle to remove the difference data (that is, noise sound information) (step S9).
Then, the sound information processing unit 16 writes and stores the corrected sound information in the storage unit 19 in association with the time of the image data (step S10).
The control unit 18 detects whether the recording switch is on (in a state where the recording process is performed) or off (a state in which the recording process is not performed) at every preset detection cycle (step S11). The process proceeds to step S6, and if it is on, the process proceeds to step S7, and the processes from step S7 to step S11 are repeated.

上述した処理により、本実施形態によれば、撮像装置1に設けられているマイクMIC1に入力される音情報における、撮像装置1内部の機械的な動作によるノイズ音を、音情報と外部音情報との差分データとして検出し、この差分データを音情報から減算する補正を行い、ノイズ音が除去された音情報を生成するため、その時点にてノイズ音が除去された音情報を、画像データとともに記憶部19に記憶させることが可能となり、従来に比較して、音の品質が向上した音情報を、画像データとともに提供することができる。
また、距離L11、距離L21及び角度θ1が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21及び角度θ1を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。
Through the above-described processing, according to the present embodiment, the noise information generated by the mechanical operation inside the imaging apparatus 1 in the sound information input to the microphone MIC1 provided in the imaging apparatus 1 is converted into the sound information and the external sound information. Is detected as difference data, and the difference data is corrected to be subtracted from the sound information to generate sound information from which the noise sound has been removed. At the same time, it can be stored in the storage unit 19, and sound information with improved sound quality can be provided together with image data as compared with the conventional case.
In addition, the distance L11, the distance L21, and the angle θ1 are measured in advance by another measuring device, and the user inputs to the imaging apparatus 1, and the control unit 18 calculates the distance from the input distance L11, the distance L21, and the angle θ1. It may be configured to output to the unit 15 and the sound information processing unit 16.

<第2の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図5は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。
撮像装置1から被写体100までの距離が離れている場合、音速の関係により画像データの動きと音情報とが対応しないことがある。すなわち、被写体100の発生する音情報が、撮像装置1から被写体100までの距離が離れていると、距離を音速により除算した結果の伝搬遅延が生じる。
このため、第2の実施形態によるおいては、図5に示すように、撮像装置1から被写体100までの距離を、距離Lxに短くして、撮像装置1からL11−Lxの距離に仮想被写体101を仮想的に設け、この仮想被写体101から音情報が発生されたとして、音情報処理部16が音情報を外部音情報により補正する。
<Second Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 5 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described.
When the distance from the imaging device 1 to the subject 100 is far, the movement of the image data may not correspond to the sound information due to the relationship of the sound speed. That is, when the sound information generated by the subject 100 is far from the imaging device 1 to the subject 100, a propagation delay occurs as a result of dividing the distance by the speed of sound.
Therefore, according to the second embodiment, as shown in FIG. 5, the distance from the imaging device 1 to the subject 100 is shortened to a distance Lx, and the virtual subject is set to a distance of L11-Lx from the imaging device 1. 101 is virtually provided, and sound information is generated from the virtual subject 101, and the sound information processing unit 16 corrects the sound information with the external sound information.

利用者が距離Lxを入力すると、制御部18は、入力された距離Lxを音情報処理部16へ出力する。
そして、音情報処理部16は、第1の実施形態と同様に、増幅度γと伝搬遅延時間Tdを用いて、外部音情報の音圧及び位相を、音情報の音圧及び位相に合わせる補正処理を行い、音情報と外部音情報とを比較して得られる差分データにより音情報の補正処理を行う。
次に、音情報処理部16は、距離Lxを音速により除算し、補正時間Tcを算出し、記憶部19に対して画像データの時刻と対応して記憶する際、画像データに対する補正された音情報の時刻を上記補正時間Tc早めて記憶部19に記憶させる。
When the user inputs the distance Lx, the control unit 18 outputs the input distance Lx to the sound information processing unit 16.
Then, the sound information processing unit 16 uses the amplification degree γ and the propagation delay time Td to correct the sound pressure and phase of the external sound information to the sound pressure and phase of the sound information as in the first embodiment. The sound information is corrected by the difference data obtained by comparing the sound information and the external sound information.
Next, when the sound information processing unit 16 divides the distance Lx by the sound speed, calculates the correction time Tc, and stores it in the storage unit 19 corresponding to the time of the image data, the corrected sound for the image data is stored. The information time is stored in the storage unit 19 earlier than the correction time Tc.

これにより、第2の実施形態によれば、実際の被写体100の位置に対して、撮像装置1から距離Lxだけ近い仮想被写体101からの音情報を、画像データに対応して得ることができるため、すなわち音情報を任意な位置で発生されたように、画像データとの位相をずらす変換を行うことができるため、第1の実施形態と同様に音の品質を向上させることができるとともに、画像データによる動画とタイミングに違和感の少ない音情報を生成することができる。   Thereby, according to the second embodiment, sound information from the virtual subject 101 that is close to the actual position of the subject 100 by the distance Lx from the imaging device 1 can be obtained corresponding to the image data. That is, since the sound information can be converted so as to shift the phase with the image data so that the sound information is generated at an arbitrary position, the sound quality can be improved as in the first embodiment, and the image can be improved. Sound information with less sense of incongruity in the video and timing by data can be generated.

<第3の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図6は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。閃光装置4は、図1の閃光装置2と同様な構成となっている。
第1の実施形態において、撮像システムは、閃光装置が閃光装置2の1台のみであったが、一方、第3の実施形態において、マイクを搭載した閃光装置を2台、すなわちマイクMIC2を搭載した閃光装置2と、マイクMIC4を搭載した閃光装置4とを有している。また、撮像装置1にもマイクMIC11及びMIC12の2つのマイク(ステレオ録音のため)が搭載されている。ここで、マイクMIC11の音情報の補正をマイクMIC2が行い、マイクMIC12の音情報の補正をマイクMIC4が行う構成となっている。
つまり、撮像装置1に複数のマイクMIC11、MIC12が設けられており、各マイクMIC11、MIC12に対応する閃光装置2、4が用いられている。
<Third Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 6 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described. The flash device 4 has the same configuration as the flash device 2 of FIG.
In the first embodiment, the imaging system has only one flash device 2 as the flash device. On the other hand, in the third embodiment, two flash devices equipped with microphones, that is, the microphone MIC2 is mounted. And the flash device 4 on which the microphone MIC4 is mounted. The imaging apparatus 1 is also equipped with two microphones (for stereo recording), which are microphones MIC11 and MIC12. Here, the microphone MIC2 corrects the sound information of the microphone MIC11, and the microphone MIC4 corrects the sound information of the microphone MIC12.
That is, the imaging device 1 is provided with a plurality of microphones MIC11 and MIC12, and flash devices 2 and 4 corresponding to the microphones MIC11 and MIC12 are used.

距離計測部13は、第1の実施形態と同様に、撮像装置1の点Cと被写体100との第1距離LN11と、撮像装置1の点Cと閃光装置2との第2距離L21と、撮像装置1の点Cと閃光装置41との第4距離とを測定する。
また、角度計測部14は、第1の実施形態と同様に、撮像装置1の点Cから被写体100への方向の方位角α(不図示)と、撮像装置1の点Cから閃光装置2への方向の方位角β1(不図示)と、撮像装置1から閃光装置4への方向の方位角β2(不図示)とを測定する。ここで、撮像装置1の点Cとは、線LN11と線LN21との2次元平面において、マイクMIC12とマイクMIC11とのマイク面(振動板の面)の中心を通る線上における、マイクMIC12のマイク面の中心と、マイクMIC11のマイク面の中心との間の(挟まれた)線分の中点である。例えば、点Cは撮像部11の光学系の光軸上の交点である。
そして、角度計測部14は、方位角αと方位角β1との角度差である角度θ1と、方位角αと方位角β2との角度差である角度θ2とを求める。
Similar to the first embodiment, the distance measuring unit 13 includes a first distance LN11 between the point C of the imaging device 1 and the subject 100, a second distance L21 between the point C of the imaging device 1 and the flash device 2, and The fourth distance between the point C of the imaging device 1 and the flash device 41 is measured.
Similarly to the first embodiment, the angle measurement unit 14 also determines the azimuth angle α (not shown) in the direction from the point C of the imaging device 1 to the subject 100 and the point C of the imaging device 1 to the flash device 2. An azimuth angle β1 (not shown) in the direction of, and an azimuth angle β2 (not shown) in the direction from the imaging device 1 to the flash device 4 are measured. Here, the point C of the imaging device 1 is the microphone of the microphone MIC12 on a line passing through the center of the microphone surface (surface of the diaphragm) of the microphone MIC12 and the microphone MIC11 in the two-dimensional plane of the line LN11 and the line LN21. This is the midpoint of the line segment between the center of the surface and the center of the microphone surface of the microphone MIC11. For example, the point C is an intersection point on the optical axis of the optical system of the imaging unit 11.
Then, the angle measurement unit 14 obtains an angle θ1 that is an angle difference between the azimuth angle α and the azimuth angle β1 and an angle θ2 that is an angle difference between the azimuth angle α and the azimuth angle β2.

距離算出部15は、第1距離L11、第2距離L21及び角度θ1を用い、閃光装置2と被写体100との第3距離L31を、第1の実施形態と同様に算出する。
また、距離算出部15は、第1距離L11、第4距離L41及び角度θ2を用い、閃光装置4と被写体100との第5距離L51を、以下のように算出する。
まず、距離算出部15は、撮像装置1及び被写体100を結ぶ線LN11と、この線LN11に垂直であり、かつマイクMIC4を通過する線LN44との交点Bから、撮像装置1までの距離L14を、第4距離L41及び角度θ2を用い、以下の式により算出する。
L14=L41×cos(θ2)
The distance calculation unit 15 calculates the third distance L31 between the flash device 2 and the subject 100 using the first distance L11, the second distance L21, and the angle θ1, as in the first embodiment.
Further, the distance calculation unit 15 calculates the fifth distance L51 between the flash device 4 and the subject 100 using the first distance L11, the fourth distance L41, and the angle θ2, as follows.
First, the distance calculation unit 15 calculates a distance L14 from the intersection B between the line LN11 connecting the imaging device 1 and the subject 100 and the line LN44 perpendicular to the line LN11 and passing through the microphone MIC4 to the imaging device 1. Using the fourth distance L41 and the angle θ2, the following formula is used.
L14 = L41 × cos (θ2)

そして、距離算出部15は、下記式のように、第1距離L11から距離L14を減算することにより、交点Bから被写体100までの距離L43を算出する。
L43=L11−L14
距離算出部15は、下記式のように、第4距離L41及び角度θ2を用い、下記式により、交点BからマイクMIC4(閃光装置4)までの距離L44を算出する。
L44=L41×sin(θ2)
距離L43及び距離L44を算出すると、距離算出部15は、下記の式により、閃光装置4から被写体100までの第5距離L51を算出する。
L51=(L43+L441/2
Then, the distance calculation unit 15 calculates the distance L43 from the intersection B to the subject 100 by subtracting the distance L14 from the first distance L11 as in the following equation.
L43 = L11-L14
The distance calculation unit 15 calculates the distance L44 from the intersection point B to the microphone MIC4 (flash device 4) using the fourth distance L41 and the angle θ2 as in the following expression.
L44 = L41 × sin (θ2)
When the distance L43 and the distance L44 are calculated, the distance calculation unit 15 calculates the fifth distance L51 from the flash device 4 to the subject 100 by the following equation.
L51 = (L43 2 + L44 2 ) 1/2

また、距離算出部15は、マイクMIC11と被写体100との距離L111を以下の式により求める。以下の式において、距離L10RはマイクMIC11のマイク面の中心と点Cとの距離であり、予め距離算出部15に設定されている。
L111=(L10R+L111/2
同様に、距離算出部15は、マイクMIC12と被写体100との距離L112を以下の式により求める。以下の式において、距離L10LはマイクMIC12のマイク面の中心と点Cとの距離であり、予め距離算出部15に設定されている。
L112=(L10L+L111/2
In addition, the distance calculation unit 15 obtains a distance L111 between the microphone MIC11 and the subject 100 by the following equation. In the following expression, the distance L10R is the distance between the center of the microphone surface of the microphone MIC11 and the point C, and is set in the distance calculation unit 15 in advance.
L111 = (L10R 2 + L11 2 ) 1/2
Similarly, the distance calculation unit 15 obtains a distance L112 between the microphone MIC12 and the subject 100 using the following equation. In the following expression, the distance L10L is the distance between the center of the microphone surface of the microphone MIC12 and the point C, and is set in the distance calculation unit 15 in advance.
L112 = (L10L 2 + L11 2 ) 1/2

音情報処理部16は、距離L111から距離L31を減算して、距離L111と距離L31との距離差SB1を求め、また距離L112から距離L51を減算して、距離L112と距離L51との距離差SB2を求める。
また、音情報処理部16は、上記距離差SB1を音速により除算し、マイクMIC11の音情報と閃光装置2からの外部音情報との伝搬遅延時間Td1を求め、同様に、上記距離差SB2を音速により除算し、マイクMIC12の音情報と閃光装置4からの外部音情報との伝搬遅延時間Td2を求める。
The sound information processing unit 16 subtracts the distance L31 from the distance L111 to obtain a distance difference SB1 between the distance L111 and the distance L31, and subtracts the distance L51 from the distance L112 to obtain a distance difference between the distance L112 and the distance L51. SB2 is obtained.
The sound information processing unit 16 divides the distance difference SB1 by the speed of sound to obtain a propagation delay time Td1 between the sound information of the microphone MIC11 and the external sound information from the flash device 2, and similarly, the distance difference SB2 is calculated. Dividing by the speed of sound, the propagation delay time Td2 between the sound information of the microphone MIC12 and the external sound information from the flash device 4 is obtained.

また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2の外部音情報の音圧を合わせる増幅率γ1を以下の式により求める。
γ1=(L31/L111)
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC4の外部音情報の音圧を合わせる増幅率γ2を以下の式により求める。
γ2=(L51/L112)
音情報処理部16は、上記増幅率γ1により、マイクMIC2の音情報の音圧をマイクMIC11に合わせるとともに、伝搬遅延時間Td1によりマイクMIC2の音情報を遅延させ、マイクMIC11の音情報の位相に合わせる補正を行う。
同様に、音情報処理部16は、上記増幅率γ2により、マイクMIC4の音情報の音圧をマイクMIC12に合わせるとともに、伝搬遅延時間Td2によりマイクMIC4の音情報を遅延させ、マイクMIC12の音情報の位相に合わせる補正を行う。
In addition, the sound information processing unit 16 obtains an amplification factor γ1 by which the sound pressure of the external sound information of the microphone MIC2 is combined with the sound pressure of the sound information of the microphone MIC11 by the following formula.
γ1 = (L31 / L111) 2
Similarly, the sound information processing unit 16 obtains an amplification factor γ2 by which the sound pressure of the sound information of the microphone MIC4 and the sound pressure of the external sound information of the microphone MIC4 are combined with the following formula.
γ2 = (L51 / L112) 2
The sound information processing unit 16 adjusts the sound pressure of the sound information of the microphone MIC2 to the microphone MIC11 by using the amplification factor γ1, and delays the sound information of the microphone MIC2 by the propagation delay time Td1, so that the phase of the sound information of the microphone MIC11 is set. Correct the alignment.
Similarly, the sound information processing unit 16 adjusts the sound pressure of the sound information of the microphone MIC4 to the microphone MIC12 by the amplification factor γ2, and delays the sound information of the microphone MIC4 by the propagation delay time Td2, so that the sound information of the microphone MIC12 is delayed. Perform correction to match the phase.

音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部16は、マイクMIC11の音情報とマイクMIC2の外部音情報とを同一位相にて比較し、マイクMIC11の音情報とマイクMIC2の外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算し、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
After matching the sound pressure and phase of the sound information and the external sound information, the sound information processing unit 16 compares the sound information of the microphone MIC11 and the external sound information of the microphone MIC2 in the same phase, and the sound information of the microphone MIC11. And difference data D1 is obtained as a difference in sound pressure (amplitude level of the signal) between the external sound information of the microphone MIC2.
Then, the sound information processing unit 16 subtracts the difference data D1 from the sound information of the microphone MIC11, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC11, and corresponds to the time information of the image data. Then, the data is written and stored in the storage unit 19.

同様に、音情報処理部16は、マイクMIC12の音情報とマイクMIC4の外部音情報とを同一位相にて比較し、マイクMIC12の音情報とマイクMIC4の外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算し、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
Similarly, the sound information processing unit 16 compares the sound information of the microphone MIC12 and the external sound information of the microphone MIC4 in the same phase, and calculates the difference in sound pressure between the sound information of the microphone MIC12 and the external sound information of the microphone MIC4. The difference data D2 is obtained.
Then, the sound information processing unit 16 subtracts the difference data D2 from the sound information of the microphone MIC12, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC12, and corresponds to the time information of the image data. Then, the data is written and stored in the storage unit 19.
Further, when the sound information processing unit 16 stores the sound information of the microphone MIC11 and the microphone MIC12 in the storage unit 19, the right sound information and the left sound information are stored in the storage unit 19 so that the right sound information or the left sound information can be identified. A storage area is set as sound information.

また、距離L11、距離L21、距離L41、角度θ1及び角度θ2が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、距離L41、角度θ1及び角度θ2を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。   In addition, the distance L11, the distance L21, the distance L41, the angle θ1 and the angle θ2 are measured in advance by another measuring device, and the user inputs to the imaging apparatus 1, and the input distance L11, distance L21, distance L41, angle The control unit 18 may output the θ1 and the angle θ2 to the distance calculation unit 15 and the sound information processing unit 16.

<第4の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図7は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。図7における点Cは、第3の実施形態の図6で説明した点Cと同様である。
本実施形態においては、撮像装置1に複数のマイク、例えばマイクMIC11、MIC12の2つが設けられており、閃光装置2に各マイクMIC11、MIC12に対応するマイクMIC2L、MIC2Rが設けられている。
<Fourth Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 7 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described. A point C in FIG. 7 is the same as the point C described in FIG. 6 of the third embodiment.
In the present embodiment, the imaging device 1 is provided with a plurality of microphones, for example, microphones MIC11 and MIC12, and the flash device 2 is provided with microphones MIC2L and MIC2R corresponding to the microphones MIC11 and MIC12.

撮像装置1には、撮像部11のレンズの光軸から距離L10R離れた位置にマイクMIC11が設けられ、距離L10L離れた位置にマイクMIC12が設けられている。
また、閃光装置2には、距離L20離れてマイクMIC2LとマイクMIC2Rとが設けられている。なお、マイクの直径は上記距離L20に比較して小さいとする。この距離L20は距離算出部15に予め設定されている。また、マイクMIC2LまたはマイクMIC2Rのいずれかにおいて、撮像部11にて撮像されるマイク近傍に距離測定用のマーク(例えば、発光LED)が付加されている。本実施形態においては、一例としてマイクMIC2Lにマークが付加されているとする。
ここで、マイクMIC2LはMIC12の音情報からノイズ音を除去する補正に用いる外部音情報を取得し、マイクMIC2RはMIC11の音情報からノイズ音を除去する補正に用いる外部音情報を取得する。
In the imaging apparatus 1, a microphone MIC11 is provided at a position separated from the optical axis of the lens of the imaging unit 11 by a distance L10R, and a microphone MIC12 is provided at a position separated from the distance L10L.
Further, the flash device 2 is provided with a microphone MIC2L and a microphone MIC2R which are separated by a distance L20. It is assumed that the diameter of the microphone is smaller than the distance L20. This distance L20 is preset in the distance calculation unit 15. In either the microphone MIC2L or the microphone MIC2R, a distance measurement mark (for example, a light emitting LED) is added in the vicinity of the microphone imaged by the imaging unit 11. In the present embodiment, it is assumed that a mark is added to the microphone MIC2L as an example.
Here, the microphone MIC2L acquires external sound information used for correction for removing noise sound from the sound information of the MIC12, and the microphone MIC2R acquires external sound information used for correction for removing noise sound from the sound information of the MIC11.

距離計測部13は、第1の実施形態と同様に、撮像装置1と閃光装置2におけるマイクMIC2Lとの第2距離L21とを測定する。
また、角度計測部14は、第1の実施形態と同様に、撮像装置1から被写体100への方向の方位角α(不図示)と、撮像装置1から閃光装置2への方向の方位角β(不図示)とを測定する。
そして、角度計測部14は、方位角αと方位角βとの角度差である角度θ1とを求める。
また、閃光装置2には、図8に示すように、撮像装置1における角度計測部14と同様に方位角センサからなる角度計測部26と、マイクMIC2L、MIC2Rとが設けられている。図8は第4の実施形態における閃光装置2の構成例を示す。
The distance measurement unit 13 measures the second distance L21 between the imaging device 1 and the microphone MIC2L in the flash device 2 as in the first embodiment.
Further, as in the first embodiment, the angle measuring unit 14 has an azimuth angle α (not shown) in the direction from the imaging device 1 to the subject 100 and an azimuth angle β in the direction from the imaging device 1 to the flash device 2. (Not shown).
Then, the angle measurement unit 14 obtains an angle θ1 that is an angle difference between the azimuth angle α and the azimuth angle β.
As shown in FIG. 8, the flash device 2 is provided with an angle measurement unit 26 composed of an azimuth angle sensor and microphones MIC2L and MIC2R, similar to the angle measurement unit 14 in the imaging device 1. FIG. 8 shows a configuration example of the flash device 2 in the fourth embodiment.

角度計測部26が方位角δ(不図示)を測定し、外部音出力部23が測定された方位角δをFM変調して撮像装置1へ送信する。そして、外部音入力部12は、入力される方位角δの情報をFM復調して制御部18へ出力する。制御部18はFM復調された方位角δを角度計測部14へ出力する。角度計測部14は、方位角δと方位角αとの角度差である角度θ3を算出し、算出された角度θ3を音情報処理部16へ出力する。
ここで、方位角δは、線LN11と線L21との存在する2次元平面に平行であり、かつ、閃光装置2におけるマイクMIC2LとマイクMIC2Rとのマイク表面(振動板の面)の中心を通る線LN225に対して垂直方向(図7における閃光装置2を通る一点鎖線)の方位角である。
The angle measurement unit 26 measures an azimuth angle δ (not shown), and the external sound output unit 23 performs FM modulation on the measured azimuth angle δ and transmits it to the imaging apparatus 1. Then, the external sound input unit 12 performs FM demodulation on the input information on the azimuth angle δ and outputs the information to the control unit 18. The control unit 18 outputs the FM demodulated azimuth angle δ to the angle measurement unit 14. The angle measurement unit 14 calculates an angle θ3 that is an angle difference between the azimuth angle δ and the azimuth angle α, and outputs the calculated angle θ3 to the sound information processing unit 16.
Here, the azimuth angle δ is parallel to the two-dimensional plane in which the lines LN11 and L21 exist, and passes through the centers of the microphone surfaces (surfaces of the diaphragm) of the microphones MIC2L and MIC2R in the flash device 2. This is the azimuth angle in the direction perpendicular to the line LN225 (a chain line passing through the flash device 2 in FIG. 7).

距離算出部15は、第1距離L11、第2距離L21、角度θ1及び角度θ3を用い、閃光装置2におけるマイクMIC2Rと被写体100との第6距離L311と、閃光装置2におけるマイクMIC2Lと被写体100との第7の距離L312とを算出する。ここで、マイクMIC2Lのマイク表面の中心から線LN11に対して垂直に引いた線LN128と、線LN11との交点をA点とする。
すなわち、距離算出部15は、A点とC点との距離L118を以下の式により算出する。
L118=L21cos(θ1)
また、距離算出部15は、A点から被写体100までの距離L119を以下の式により算出する。
L119=L11−L118
また、距離算出部15は、マイクMIC2Lのマイク表面の中心から点Aまでの距離L128を以下の式により算出する。
L128=L21sin(θ1)
The distance calculation unit 15 uses the first distance L11, the second distance L21, the angle θ1, and the angle θ3, the sixth distance L311 between the microphone MIC2R and the subject 100 in the flash device 2, and the microphone MIC2L and the subject 100 in the flash device 2. And a seventh distance L312 is calculated. Here, an intersection of a line LN128 drawn perpendicularly to the line LN11 from the center of the microphone surface of the microphone MIC2L and the line LN11 is defined as a point A.
That is, the distance calculation unit 15 calculates the distance L118 between the points A and C by the following formula.
L118 = L21 cos (θ1)
Further, the distance calculation unit 15 calculates a distance L119 from the point A to the subject 100 by the following equation.
L119 = L11-L118
Further, the distance calculation unit 15 calculates a distance L128 from the center of the microphone surface of the microphone MIC2L to the point A by the following equation.
L128 = L21sin (θ1)

また、距離算出部15は、点Aから点Dまでの距離L211を以下の式により算出する。ここで、点Dは、線LN225(マイクMIC2Lを基点とし線LN128と角度θ3をなす線)と線LN11との交点である。
L211=L128tan(θ3)
また、距離算出部15は、点Dと点Cとの距離L213を以下の式により算出する。
L213=L118−L211
また、距離算出部15は、マイクMIC2Lのマイク表面の中心から点Dまでの距離L225を以下の式により算出する。
L225=(L213+L21−2×L213×L21×cos(θ1))1/2
Further, the distance calculation unit 15 calculates a distance L211 from the point A to the point D by the following formula. Here, the point D is an intersection of the line LN225 (a line that forms an angle θ3 with the line LN128 from the microphone MIC2L) and the line LN11.
L211 = L128tan (θ3)
Further, the distance calculation unit 15 calculates a distance L213 between the point D and the point C by the following formula.
L213 = L118−L211
In addition, the distance calculation unit 15 calculates a distance L225 from the center of the microphone surface of the microphone MIC2L to the point D by the following equation.
L225 = (L213 2 + L21 2 −2 × L213 × L21 × cos (θ1)) 1/2

また、距離算出部15は、マイクMIC2Lのマイク表面の中心から被写体100までの距離L312を以下の式により算出する。
L312=(L225+(L119+L211)−2×L225×(L119+L211)×cos(θ4))1/2
ここで、θ4は、線LN225と線LN11とのなす角度である。
また、距離算出部15は、マイクMIC2Rのマイク中心から被写体100までの距離L311を以下の式により算出する。
L311=((L225+L20)+(L119+L211)−2×(L225+L20)×(L119+L211)×cos(θ4))1/2
ここで、L20は、マイクMIC2Lのマイク面の中心と、マイクMIC2Rのメイク面の中心との距離であり、予め距離算出部15に設定されている。
また、距離算出部15は、第3の実施形態と同様に、マイクMIC11と被写体100との距離L111、及びマイクMIC12と被写体100との距離L112を算出する。
In addition, the distance calculation unit 15 calculates a distance L312 from the center of the microphone surface of the microphone MIC2L to the subject 100 using the following formula.
L312 = (L225 2 + (L119 + L211) 2 −2 × L225 × (L119 + L211) × cos (θ4)) 1/2
Here, θ4 is an angle formed by the line LN225 and the line LN11.
Further, the distance calculation unit 15 calculates a distance L311 from the microphone center of the microphone MIC2R to the subject 100 by the following formula.
L311 = ((L225 + L20) 2 + (L119 + L211) 2 −2 × (L225 + L20) × (L119 + L211) × cos (θ4)) 1/2
Here, L20 is the distance between the center of the microphone surface of the microphone MIC2L and the center of the makeup surface of the microphone MIC2R, and is set in the distance calculation unit 15 in advance.
The distance calculation unit 15 also calculates the distance L111 between the microphone MIC11 and the subject 100 and the distance L112 between the microphone MIC12 and the subject 100, as in the third embodiment.

上述した距離算出部15の計算処理により、マイクMIC12と被写体100との距離L112、マイクMIC11と被写体100との距離L111、マイクMIC2Lと被写体100との距離L312、マイクMIC2Rと被写体100との距離L311が求められる。
音情報処理部16は、距離L111から距離L311を減算して、距離L111と距離L311との距離差SB1を求め、また距離L112から距離L312を減算して、距離L112と距離L312との距離差SB2を求める。
また、音情報処理部16は、上記距離差SB1を音速cにより除算し、マイクMIC11の音情報とMIC2LはマイクMIC2Rの外部音情報とにおける伝搬遅延時間Td1を求め、同様に、上記距離差SB2を音速cにより除算し、マイクMIC12の音情報とマイクMIC2Lの外部音情報とにおける伝搬遅延時間Td2を求める。
By the calculation processing of the distance calculation unit 15 described above, the distance L112 between the microphone MIC12 and the subject 100, the distance L111 between the microphone MIC11 and the subject 100, the distance L312 between the microphone MIC2L and the subject 100, and the distance L311 between the microphone MIC2R and the subject 100. Is required.
The sound information processing unit 16 subtracts the distance L311 from the distance L111 to obtain a distance difference SB1 between the distance L111 and the distance L311, and subtracts the distance L312 from the distance L112 to obtain a distance difference between the distance L112 and the distance L312. SB2 is obtained.
The sound information processing unit 16 divides the distance difference SB1 by the sound velocity c, and the sound information of the microphone MIC11 and the MIC2L obtain the propagation delay time Td1 in the external sound information of the microphone MIC2R. Similarly, the distance difference SB2 Is divided by the sound speed c to determine the propagation delay time Td2 between the sound information of the microphone MIC12 and the external sound information of the microphone MIC2L.

また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2Rの外部音情報の音圧を合わせる増幅率γ1を以下の式により求める。
γ1=(L311/L111)
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC2Lの外部音情報の音圧を合わせる増幅率γ2を以下の式により求める。
γ2=(L312/L112)
音情報処理部16は、上記増幅率γ1により、マイクMIC2Rの音情報の音圧をマイクMIC11に合わせるとともに、伝搬遅延時間Td1によりマイクMIC2Rの音情報を遅延させ、マイクMIC11の音情報の位相に合わせる補正を行う。
同様に、音情報処理部16は、上記増幅率γ2により、マイクMIC2Lの音情報の音圧をマイクMIC12に合わせるとともに、伝搬遅延時間Td2によりマイクMIC2Lの音情報を遅延させ、マイクMIC12の音情報の位相に合わせる補正を行う。
Further, the sound information processing unit 16 obtains an amplification factor γ1 by which the sound pressure of the external sound information of the microphone MIC2R is combined with the sound pressure of the sound information of the microphone MIC11 by the following expression.
γ1 = (L311 / L111) 2
Similarly, the sound information processing unit 16 obtains an amplification factor γ2 by which the sound pressure of the external sound information of the microphone MIC2L is combined with the sound pressure of the sound information of the microphone MIC12 by the following formula.
γ2 = (L312 / L112) 2
The sound information processing unit 16 adjusts the sound pressure of the sound information of the microphone MIC2R to the microphone MIC11 with the amplification factor γ1, and delays the sound information of the microphone MIC2R with the propagation delay time Td1 to obtain the phase of the sound information of the microphone MIC11. Correct the alignment.
Similarly, the sound information processing unit 16 adjusts the sound pressure of the sound information of the microphone MIC2L to the microphone MIC12 by the amplification factor γ2, and delays the sound information of the microphone MIC2L by the propagation delay time Td2, thereby Perform correction to match the phase.

音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部16は、マイクMIC11の音情報とマイクMIC2Rの外部音情報とを同一位相にて比較し、マイクMIC11の音情報とマイクMIC2Rの外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
After matching the sound pressure and phase of the sound information and the external sound information, the sound information processing unit 16 compares the sound information of the microphone MIC11 and the external sound information of the microphone MIC2R with the same phase, and the sound information of the microphone MIC11. Difference data D1 is obtained as a difference in sound pressure (signal amplitude level) between the external sound information of the microphone MIC2R and the signal.
Then, the sound information processing unit 16 performs correction to subtract the difference data D1 from the sound information of the microphone MIC11, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC11, and calculates the time of the image data The information is written and stored in the storage unit 19 corresponding to the information.

同様に、音情報処理部16は、マイクMIC12の音情報とマイクMIC2Lの外部音情報とを同一位相にて比較し、マイクMIC12の音情報とマイクMIC2Lの外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
Similarly, the sound information processing unit 16 compares the sound information of the microphone MIC12 and the external sound information of the microphone MIC2L in the same phase, and calculates the difference in sound pressure between the sound information of the microphone MIC12 and the external sound information of the microphone MIC2L. The difference data D2 is obtained.
Then, the sound information processing unit 16 performs correction to subtract the difference data D2 from the sound information of the microphone MIC12, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC12, and obtains the time of the image data The information is written and stored in the storage unit 19 corresponding to the information.
Further, when the sound information processing unit 16 stores the sound information of the microphone MIC11 and the microphone MIC12 in the storage unit 19, the right sound information and the left sound information are stored in the storage unit 19 so that the right sound information or the left sound information can be identified. A storage area is set as sound information.

また、距離L11、距離L21、角度θ1及び角度θ3が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、角度θ1及び角度θ3を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。   Further, the distance L11, the distance L21, the angle θ1 and the angle θ3 are measured in advance by another measuring device, and the user inputs to the imaging device 1, and the inputted distance L11, distance L21, angle θ1 and angle θ3 are The control unit 18 may be configured to output to the distance calculation unit 15 and the sound information processing unit 16.

<第5の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図9は同実施形態による撮像システムの構成例を示すブロック図である。第4の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第4の実施形態と異なる点について説明する。第5の実施形態においては、第4の実施形態の構成に加え、新たに閃光装置4が設けられている。この閃光装置4は、図8の閃光装置2と同様な構成をしている。閃光装置4に設けられているマイクは、マイクMIC4LとマイクMIC4Rとである。
本実施形態においては、マイクMIC12の音情報をマイクMIC4L及びマイクMIC4Rの外部音情報により補正し、マイクMIC11の音情報をマイクMIC2L及びマイクMIC2Rの外部音情報により補正する。
<Fifth Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 9 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the fourth embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the fourth embodiment will be described. In the fifth embodiment, a flash device 4 is newly provided in addition to the configuration of the fourth embodiment. The flash device 4 has the same configuration as the flash device 2 of FIG. The microphones provided in the flash device 4 are the microphone MIC4L and the microphone MIC4R.
In the present embodiment, the sound information of the microphone MIC12 is corrected by the external sound information of the microphone MIC4L and the microphone MIC4R, and the sound information of the microphone MIC11 is corrected by the external sound information of the microphone MIC2L and the microphone MIC2R.

第4の実施形態と同様に、撮像装置1は、閃光装置2から方位角δ(不図示)、閃光装置4から方位角σ(不図示)を入力する。ここで、方位角σは、線LN11と線LN41との存在する2次元平面に平行であり、閃光装置2におけるマイクMIC4LとマイクMIC4Rとのマイク表面(振動板の面)の中心を通る線LN445に対して垂直方向の方位角である。
角度計測部14は、上記方位角σと方位角αとの角度差である角度θ6を算出する。
距離算出部15は、角度θ1、角度θ3、距離L11及び距離L21とを用いて距離L311と距離312とを算出したのと同様に、角度θ2、角度θ6、距離L11及び距離L41とを用いて距離L511及び距離L512を算出する。ここで、距離L41はマイクMIC4Rと点Cとの距離であり、距離L511は被写体100とマイクMIC4Rとの距離であり、距離L512は被写体100とマイクMIC4Lとの距離である。
Similar to the fourth embodiment, the imaging device 1 inputs an azimuth angle δ (not shown) from the flash device 2 and an azimuth angle σ (not shown) from the flash device 4. Here, the azimuth angle σ is parallel to a two-dimensional plane where the lines LN11 and LN41 exist, and a line LN445 passing through the center of the microphone surface (surface of the diaphragm) of the microphone MIC4L and the microphone MIC4R in the flash device 2. Is the azimuth angle in the vertical direction.
The angle measurement unit 14 calculates an angle θ6 that is an angle difference between the azimuth angle σ and the azimuth angle α.
The distance calculation unit 15 uses the angle θ2, the angle θ6, the distance L11, and the distance L41 in the same manner as the distance L311 and the distance 312 are calculated using the angle θ1, the angle θ3, the distance L11, and the distance L21. A distance L511 and a distance L512 are calculated. Here, the distance L41 is the distance between the microphone MIC4R and the point C, the distance L511 is the distance between the subject 100 and the microphone MIC4R, and the distance L512 is the distance between the subject 100 and the microphone MIC4L.

距離算出部15は、第4の実施形態と同様に、距離L111と距離L311との距離差SB11、距離L111と距離L312との距離差SB12、距離L112と距離L511との距離差SB41、距離L112と距離L512との距離差SB42を算出する。
音情報処理部16は、距離差SB11、SB12、SB41、SB42の各々を、音速cにより除算し、マイクMIC11の音情報とマイクMIC2Rの外部音情報との伝搬遅延時間Td11、マイクMIC11の音情報とマイクMIC2Lの外部音情報との伝搬遅延時間Td12、マイクMIC12の音情報とマイクMIC4Rの外部音情報との伝搬遅延時間Td41、マイクMIC12の音情報とマイクMIC4Lの外部音情報との伝搬遅延時間Td42の各々を算出する。
また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2R、MIC2Lの各々の音圧を合わせる増幅率γ11及びγ12を以下の式により求める。
γ11=(L311/L111)
γ12=(L312/L111)
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC4R、MIC4Lの外部音情報の音圧を合わせる増幅率γ41及びγ42を以下の式により求める。
γ41=(L511/L111)
γ42=(L512/L111)
As in the fourth embodiment, the distance calculation unit 15 includes a distance difference SB11 between the distance L111 and the distance L311, a distance difference SB12 between the distance L111 and the distance L312, a distance difference SB41 between the distance L112 and the distance L511, and a distance L112. And a distance difference SB42 between the distance L512 and the distance L512.
The sound information processing unit 16 divides each of the distance differences SB11, SB12, SB41, and SB42 by the sound speed c, the propagation delay time Td11 between the sound information of the microphone MIC11 and the external sound information of the microphone MIC2R, and the sound information of the microphone MIC11. Delay time Td12 between the microphone MIC2L and the external sound information of the microphone MIC12, propagation delay time Td41 between the sound information of the microphone MIC12 and the external sound information of the microphone MIC4R, and propagation delay time of the sound information of the microphone MIC12 and the external sound information of the microphone MIC4L Each of Td42 is calculated.
In addition, the sound information processing unit 16 obtains amplification factors γ11 and γ12 that match the sound pressures of the microphones MIC2R and MIC2L with the sound pressure of the sound information of the microphone MIC11 by the following formula.
γ11 = (L311 / L111) 2
γ12 = (L312 / L111) 2
Similarly, the sound information processing unit 16 obtains amplification factors γ41 and γ42 by which the sound pressure of the external sound information of the microphones MIC4R and MIC4L is combined with the sound pressure of the sound information of the microphone MIC12 by the following formula.
γ41 = (L511 / L111) 2
γ42 = (L512 / L111) 2

ここで、音情報処理部16は、マイクMIC2Rの外部音情報の位相を、伝搬遅延時間Td11によりずらして、マイクMIC11の音情報の位相に合わせ、同様に、マイクMIC2Lの外部音情報の位相を、伝搬遅延時間Td12によりずらして、マイクMIC11の音情報の位相に合わせる。
また、音情報処理部16は、マイクMIC2Rの外部音情報の音圧に対し、増幅率γ11を乗じて、マイクMIC11の音情報の音圧に合わせ、同様に、マイクMIC2Lの外部音情報の音圧に対し、増幅率γ12を乗じて、マイクMIC11の音情報の音圧に合わせる。
また、音情報処理部16は、マイクMIC4Rの外部音情報の位相を、伝搬遅延時間Td41によりずらして、マイクMIC12の音情報の位相に合わせ、同様に、マイクMIC4Lの外部音情報の位相を、伝搬遅延時間Td42によりずらして、マイクMIC12の音情報の位相に合わせる。
また、音情報処理部16は、マイクMIC4Rの外部音情報の音圧に対し、増幅率γ41を乗じて、マイクMIC12の音情報の音圧に合わせ、同様に、マイクMIC4Lの外部音情報の音圧に対し、増幅率γ42を乗じて、マイクMIC12の音情報の音圧に合わせる。
Here, the sound information processing unit 16 shifts the phase of the external sound information of the microphone MIC2R by the propagation delay time Td11 to match the phase of the sound information of the microphone MIC11. Similarly, the sound information processing unit 16 changes the phase of the external sound information of the microphone MIC2L. The phase is shifted by the propagation delay time Td12 to match the phase of the sound information of the microphone MIC11.
In addition, the sound information processing unit 16 multiplies the sound pressure of the external sound information of the microphone MIC2R by the amplification factor γ11 to match the sound pressure of the sound information of the microphone MIC11. Similarly, the sound of the external sound information of the microphone MIC2L The pressure is multiplied by an amplification factor γ12 to match the sound pressure of the sound information of the microphone MIC11.
Further, the sound information processing unit 16 shifts the phase of the external sound information of the microphone MIC4R by the propagation delay time Td41 to match the phase of the sound information of the microphone MIC12. Similarly, the phase of the external sound information of the microphone MIC4L is The phase is shifted by the propagation delay time Td42 to match the sound information phase of the microphone MIC12.
Further, the sound information processing unit 16 multiplies the sound pressure of the external sound information of the microphone MIC4R by the amplification factor γ41 to match the sound pressure of the sound information of the microphone MIC12, and similarly, the sound of the external sound information of the microphone MIC4L. The pressure is multiplied by an amplification factor γ42 to match the sound pressure of the sound information of the microphone MIC12.

また、音情報処理部16は、マイクMIC2Lの外部音情報及びマイクMIC2Rの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ1が設定されている。すなわち、音情報処理部16は、マイクMIC2Lの音圧が補正された外部音情報に係数μ1を乗算し、一方マイクMIC2Lの音圧が補正された外部音情報に係数(1−μ1)を乗算し、乗算結果を加算して、マイクMIC11の音情報と比較する第1外部音情報を生成する。
同様に、音情報処理部16は、マイクMIC4Lの外部音情報及びマイクMIC4Rの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ2が設定されている。すなわち、音情報処理部16は、マイクMIC4Lの音圧が補正された外部音情報に係数μ2を乗算し、一方マイクMIC4Rの音圧が補正された外部音情報に係数(1−μ2)を乗算し、乗算結果を加算して、マイクMIC12の音情報と比較する第2外部音情報を生成する。
Further, since the sound information processing unit 16 synthesizes the external sound information of the microphone MIC2L and the external sound information of the microphone MIC2R, a coefficient μ1 for multiplying both the external sound information at the time of synthesis is set. That is, the sound information processing unit 16 multiplies the external sound information in which the sound pressure of the microphone MIC2L is corrected by the coefficient μ1, and multiplies the external sound information in which the sound pressure of the microphone MIC2L is corrected by a coefficient (1-μ1). Then, the multiplication results are added to generate the first external sound information to be compared with the sound information of the microphone MIC11.
Similarly, since the sound information processing unit 16 synthesizes the external sound information of the microphone MIC4L and the external sound information of the microphone MIC4R, a coefficient μ2 for multiplying both the external sound information at the time of synthesis is set. That is, the sound information processing unit 16 multiplies the external sound information in which the sound pressure of the microphone MIC4L is corrected by the coefficient μ2, and multiplies the external sound information in which the sound pressure of the microphone MIC4R is corrected by a coefficient (1-μ2). Then, the multiplication results are added to generate second external sound information to be compared with the sound information of the microphone MIC12.

音情報処理部16は、マイクMIC11の音情報と第1外部音情報とを同一位相にて比較し、マイクMIC11の音情報と第1外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
同様に、音情報処理部16は、マイクMIC12の音情報と第2外部音情報とを同一位相にて比較し、マイクMIC12の音情報と第2外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
The sound information processing unit 16 compares the sound information of the microphone MIC11 and the first external sound information in the same phase, and the difference in sound pressure (signal amplitude level) between the sound information of the microphone MIC11 and the first external sound information. As a result, difference data D1 is obtained.
Then, the sound information processing unit 16 performs correction to subtract the difference data D1 from the sound information of the microphone MIC11, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC11, and calculates the time of the image data The information is written and stored in the storage unit 19 corresponding to the information.
Similarly, the sound information processing unit 16 compares the sound information of the microphone MIC12 and the second external sound information in the same phase, and calculates difference data as a difference in sound pressure between the sound information of the microphone MIC12 and the second external sound information. Find D2.
Then, the sound information processing unit 16 performs correction to subtract the difference data D2 from the sound information of the microphone MIC12, performs correction to remove the noise sound, obtains the corrected sound information of the microphone MIC12, and obtains the time of the image data The information is written and stored in the storage unit 19 corresponding to the information.
Further, when the sound information processing unit 16 stores the sound information of the microphone MIC11 and the microphone MIC12 in the storage unit 19, the right sound information and the left sound information are stored in the storage unit 19 so that the right sound information or the left sound information can be identified. A storage area is set as sound information.

また、距離L11、距離L21、距離L41、角度θ1、角度θ2、角度θ3及び角度θ6が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、角度θ1及び角度θ3を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。   In addition, the distance L11, the distance L21, the distance L41, the angle θ1, the angle θ2, the angle θ3, and the angle θ6 are measured in advance by another measuring device, and the user inputs to the imaging apparatus 1, and the input distance L11, distance The control unit 18 may output the L21, the angle θ1, and the angle θ3 to the distance calculation unit 15 and the sound information processing unit 16.

なお、図2における距離算出部15、音情報処理部16の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより撮像装置1に設けられたマイクの音情報の補正処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。   Note that a program for realizing the functions of the distance calculation unit 15 and the sound information processing unit 16 in FIG. 2 is recorded on a computer-readable recording medium, and the program recorded on the recording medium is read into a computer system. By executing this processing, the sound information of the microphone provided in the imaging apparatus 1 may be corrected. Here, the “computer system” includes an OS and hardware such as peripheral devices. The “computer system” includes a WWW system having a homepage providing environment (or display environment). The “computer-readable recording medium” refers to a portable medium such as a flexible disk, a magneto-optical disk, a ROM, and a CD-ROM, and a storage device such as a hard disk built in the computer system. Further, the “computer-readable recording medium” refers to a volatile memory (RAM) in a computer system that becomes a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. In addition, those holding programs for a certain period of time are also included.

また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。   The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.

1…撮像装置
2,4…閃光装置
11…撮像部
12…外部音情報入力部
13…距離計測部
14,26…角度計測部
15…距離算出部
16…音情報処理部
17…送信部
18,22…制御部
19,25…記憶部
21…閃光出射部
23…外部音出力部
24…受信部
MIC11,MIC12,MIC2L,MIC2R,MIC4L,MIC4R…マイク
DESCRIPTION OF SYMBOLS 1 ... Imaging device 2, 4 ... Flash apparatus 11 ... Imaging part 12 ... External sound information input part 13 ... Distance measuring part 14, 26 ... Angle measuring part 15 ... Distance calculating part 16 ... Sound information processing part 17 ... Transmitting part 18, DESCRIPTION OF SYMBOLS 22 ... Control part 19, 25 ... Memory | storage part 21 ... Flash emission part 23 ... External sound output part 24 ... Reception part MIC11, MIC12, MIC2L, MIC2R, MIC4L, MIC4R ... Microphone

Claims (9)

被写体像を撮像して画像信号を出力する撮像部と、
自身に取り付けられているマイクと、
自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有することを特徴とする撮像装置。
An imaging unit that captures a subject image and outputs an image signal;
A microphone attached to itself,
An external sound information input unit for inputting external sound information from an external microphone of a flash device that is not attached to the flash device;
A sound information processing unit that corrects the sound information acquired by the microphone with the external sound information and sets the corrected sound information data;
A sound information recording unit that records the corrected sound information data in a storage unit in association with the image signal.
前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成することを特徴とする請求項1に記載の撮像装置。   The sound information processing unit compares the sound information with the external sound information, detects a sound information signal measured only in the sound information as difference data, and removes the difference data from the sound information. The imaging apparatus according to claim 1, wherein the correction sound information data is generated. 前記音情報処理部が、前記被写体と前記マイクとの間の第1の距離と、前記閃光装置及び前記マイク間の第2の距離との距離差により、前記音情報と前記外部音情報との音圧比及び位相差を求め、当該音圧比及び位相差により前記外部音情報の音圧及び位相を前記音情報に対応させ、前記音情報の補正処理を行うことを特徴とする請求項2記載の撮像装置。   The sound information processing unit determines whether the sound information and the external sound information are based on a difference in distance between a first distance between the subject and the microphone and a second distance between the flash device and the microphone. The sound pressure ratio and phase difference are obtained, and the sound pressure and phase of the external sound information are made to correspond to the sound information by the sound pressure ratio and phase difference, and the sound information is corrected. Imaging device. 前記音情報処理部が、前記被写体の仮想位置から前記マイクまでの仮想距離が入力されると、前記第1の距離における前記音情報を、当該仮想距離における音圧及び位相となる仮想音情報に変換し、前記仮想位置から前記閃光装置までの距離を前記第2の距離とし、前記仮想音情報の補正処置を行うことを特徴とする請求項3に記載の撮像装置。   When the sound information processing unit receives a virtual distance from the virtual position of the subject to the microphone, the sound information at the first distance is converted into virtual sound information that is sound pressure and phase at the virtual distance. The imaging apparatus according to claim 3, wherein the virtual sound information is corrected by converting the virtual position from the virtual position to the flash device as the second distance. 前記音情報処理部が、前記差分データのレベルが設定値以上である場合、前記設定値以上の差分データが存在する期間の前記音情報を、前記音圧比及び位相差により当該音情報に対応させた前記外部音情報と置き換えることを特徴とする請求項3または請求項4に記載の撮像装置。   When the level of the difference data is greater than or equal to a set value, the sound information processing unit associates the sound information during a period in which difference data greater than or equal to the set value exists with the sound information by the sound pressure ratio and phase difference. 5. The imaging apparatus according to claim 3, wherein the imaging apparatus is replaced with the external sound information. 前記マイクが複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記閃光装置及び前記複数のマイク各々の間の第2の距離との距離差を求め、それぞれの距離差に対応した音圧比及び位相差により、当該マイク各々の音情報の補正処理を行うことを特徴とする請求項2から請求項5のいずれかに記載の撮像装置。   When a plurality of microphones are provided, a distance difference between a first distance between the subject and each of the plurality of microphones and a second distance between the flash device and each of the plurality of microphones is obtained, The imaging apparatus according to claim 2, wherein the sound information of each microphone is corrected based on a sound pressure ratio and a phase difference corresponding to the distance difference. 前記マイク及び前記閃光装置が複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記複数の閃光装置及び前記複数のマイク各々の間の距離である第2の距離と、複数の外部マイクからの前記外部音情報とを用いて、当該マイク各々の音情報の補正処理を行うことを特徴とする請求項2から請求項5のいずれかに記載の撮像装置。   When a plurality of microphones and flash devices are provided, a first distance between each of the subject and the plurality of microphones and a second distance between each of the plurality of flash devices and the plurality of microphones. 6. The imaging apparatus according to claim 2, wherein a correction process for sound information of each microphone is performed using the distance and the external sound information from a plurality of external microphones. 前記第1の距離及び前記第2の距離を測定する測距手段をさらに有することを特徴とする請求項3から請求項7のいずれかに記載の撮像装置。   The imaging apparatus according to claim 3, further comprising a distance measuring unit that measures the first distance and the second distance. 撮像装置と、当該撮像装置と異なる場所に配置され、当該撮像装置の撮像時に前記被写体に対して光を照射する閃光装置とからなる撮像システムであり、
前記閃光装置が
前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、
外部マイクと
当該外部マイク取得した外部音情報を前記撮像装置に送信する外部音情報出力部と
を有し、
前記撮像装置が、
前記被写体の被写体像を撮像して画像信号を出力する撮像部と、
撮像装置に搭載されたマイクと、
前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有することを特徴とする撮像システム。
An imaging system that includes an imaging device and a flash device that is disposed at a different location from the imaging device and that irradiates the subject with light when imaging by the imaging device,
An irradiating unit that irradiates light to a subject by an imaging signal indicating an imaging timing from the imaging device;
An external microphone and an external sound information output unit that transmits external sound information acquired by the external microphone to the imaging device,
The imaging device is
An imaging unit that captures a subject image of the subject and outputs an image signal;
A microphone mounted on the imaging device;
External sound information acquired by the external microphone, an external sound information input unit that inputs from the flash device,
A sound information processing unit that corrects the sound information acquired by the microphone with the external sound information and sets the corrected sound information data;
A sound information recording unit that records the correction sound information data in a storage unit in association with the image signal.
JP2009186482A 2009-08-11 2009-08-11 Imaging apparatus and imaging system Expired - Fee Related JP5446568B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009186482A JP5446568B2 (en) 2009-08-11 2009-08-11 Imaging apparatus and imaging system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009186482A JP5446568B2 (en) 2009-08-11 2009-08-11 Imaging apparatus and imaging system

Publications (2)

Publication Number Publication Date
JP2011040991A true JP2011040991A (en) 2011-02-24
JP5446568B2 JP5446568B2 (en) 2014-03-19

Family

ID=43768309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009186482A Expired - Fee Related JP5446568B2 (en) 2009-08-11 2009-08-11 Imaging apparatus and imaging system

Country Status (1)

Country Link
JP (1) JP5446568B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015161890A (en) * 2014-02-28 2015-09-07 株式会社スタジオアリス Light emission system for photography

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02185196A (en) * 1989-01-12 1990-07-19 Matsushita Electric Ind Co Ltd Camera incorporating type video tape recorder
JPH04175073A (en) * 1990-07-26 1992-06-23 Mitsubishi Electric Corp Integrated type video camera
JP2003018459A (en) * 2001-06-29 2003-01-17 Fuji Photo Film Co Ltd Camera and its system
JP2006064945A (en) * 2004-08-26 2006-03-09 Nikon Corp Flash apparatus and camera system
JP2006314078A (en) * 2005-04-06 2006-11-16 Sony Corp Imaging apparatus, voice recording apparatus, and the voice recording method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02185196A (en) * 1989-01-12 1990-07-19 Matsushita Electric Ind Co Ltd Camera incorporating type video tape recorder
JPH04175073A (en) * 1990-07-26 1992-06-23 Mitsubishi Electric Corp Integrated type video camera
JP2003018459A (en) * 2001-06-29 2003-01-17 Fuji Photo Film Co Ltd Camera and its system
JP2006064945A (en) * 2004-08-26 2006-03-09 Nikon Corp Flash apparatus and camera system
JP2006314078A (en) * 2005-04-06 2006-11-16 Sony Corp Imaging apparatus, voice recording apparatus, and the voice recording method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015161890A (en) * 2014-02-28 2015-09-07 株式会社スタジオアリス Light emission system for photography

Also Published As

Publication number Publication date
JP5446568B2 (en) 2014-03-19

Similar Documents

Publication Publication Date Title
JP5391008B2 (en) Imaging apparatus and control method thereof
JP6362556B2 (en) Control device, imaging device, control method, program, and storage medium
US8665346B2 (en) Image pickup apparatus with noise elimination
JP5748422B2 (en) Electronics
JP2007316497A5 (en)
JP2011055409A (en) Audio data combination device
JP2011039433A (en) Imaging apparatus, and method for controlling the same
JP2004147188A (en) Digital camera
JP2013081159A (en) Imaging device
JP5361398B2 (en) Imaging device
EP3812837A1 (en) Imaging apparatus
JP2011114465A (en) Voice processing apparatus and electronic camera
US10418049B2 (en) Audio processing apparatus and control method thereof
JP5446568B2 (en) Imaging apparatus and imaging system
JP2009130767A (en) Signal processing apparatus
JP2011095567A (en) Imaging device
US20100118155A1 (en) Digital image processing apparatus
JP2009239460A (en) Focus control method, distance measuring equipment, imaging device
JP2007199668A (en) Image pickup device, method and program of controlling image pickup device
JPWO2006043315A1 (en) IMAGING DEVICE AND PORTABLE DEVICE HAVING IMAGING DEVICE
JP2011095378A (en) Sound recording device, imaging device and program
JP2007281981A (en) Imaging apparatus
WO2016198014A1 (en) Focusing imaging device, method, and terminal
WO2019031004A1 (en) Imaging system, imaging device, and imaging method
JP2014041300A (en) Signal processing device, imaging device, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120706

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130514

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130903

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131216

R150 Certificate of patent or registration of utility model

Ref document number: 5446568

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees