JP2011040991A - Imaging device and imaging system - Google Patents
Imaging device and imaging system Download PDFInfo
- Publication number
- JP2011040991A JP2011040991A JP2009186482A JP2009186482A JP2011040991A JP 2011040991 A JP2011040991 A JP 2011040991A JP 2009186482 A JP2009186482 A JP 2009186482A JP 2009186482 A JP2009186482 A JP 2009186482A JP 2011040991 A JP2011040991 A JP 2011040991A
- Authority
- JP
- Japan
- Prior art keywords
- sound information
- distance
- microphone
- external
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
Description
本発明は、音情報を画像に対応させて記録する撮像装置に関し、特に機械的なノイズを除去する機能を有する撮像装置及び撮像システムに関する。 The present invention relates to an imaging apparatus that records sound information corresponding to an image, and more particularly to an imaging apparatus and an imaging system having a function of removing mechanical noise.
本体にマイクが取り付けられているビデオカメラ、デジタルカメラなどの撮像装置の小型化が進んでいる。
このため、上記マイクが撮像装置の筐体におけるレンズ近傍に配置される場合が多く、撮像する際における周囲の音情報以外に、撮像装置の機械的なノイズ、例えば、レンズを移動させるズーミング操作、合焦動作などの焦点距離変更時のモータ音やシャッター動作などの各機能スイッチの操作音が、直接にあるいは筐体を伝搬して、マイクに拾われ、音情報のS/N比を悪化させて、音情報の録音品質を低下させている。
Miniaturization of imaging devices such as video cameras and digital cameras having a microphone attached to the main body is progressing.
For this reason, the microphone is often arranged near the lens in the housing of the imaging device, and in addition to surrounding sound information when imaging, mechanical noise of the imaging device, for example, a zooming operation for moving the lens, The operation sound of each function switch such as motor sound and shutter operation during focal length change such as in-focus operation is picked up by the microphone directly or propagating through the housing, and deteriorates the S / N ratio of sound information As a result, the recording quality of the sound information is degraded.
このS/N比を改善させるため、マイクの位置を撮像装置の筐体からできるだけ離すことを考慮し、撮像装置一体型の閃光装置にマイクを取り付ける提案がなされている(例えば、特許文献1参照)。 In order to improve this S / N ratio, a proposal has been made to attach a microphone to a flash device integrated with an imaging device in consideration of the position of the microphone as far as possible from the housing of the imaging device (see, for example, Patent Document 1). ).
しかしながら、撮像装置一体型の閃光装置にマイクを取り付ける場合、すでに述べたように撮像装置の小型化が進んでおり、撮像装置内部の機械的な振動音源とマイクとの距離には制約があり、マイクが拾うノイズ音を人間が気にしない程度までに、大幅に低下させることができない。 However, when the microphone is attached to the flash device integrated with the imaging device, as described above, the size of the imaging device has been reduced, and there is a restriction on the distance between the mechanical vibration sound source inside the imaging device and the microphone, The noise noise picked up by the microphone cannot be greatly reduced to the extent that humans do not care.
本発明は、このような事情に鑑みてなされたもので、撮像装置に設けられているマイクに入力される音情報から、撮像装置の機械的なノイズ音を除去することで、ノイズ音を含まない音情報を得ることができる撮像装置及び撮像システムを提供することを目的とする。 The present invention has been made in view of such circumstances, and includes noise noise by removing mechanical noise noise of the imaging apparatus from sound information input to a microphone provided in the imaging apparatus. An object of the present invention is to provide an imaging apparatus and an imaging system that can obtain sound information.
本発明の撮像装置は、被写体像を撮像して画像信号を出力する撮像部と、自身に取り付けられているマイクと、自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有することを特徴とする。 The imaging apparatus of the present invention receives external sound information from an imaging unit that captures a subject image and outputs an image signal, a microphone attached to the imaging unit, and an external microphone of a flash device not attached to the imaging unit. An external sound information input unit, a sound information processing unit that corrects the sound information acquired by the microphone with the external sound information to obtain corrected sound information data, and the corrected sound information data corresponds to the image signal. And a sound information recording unit for recording in the storage unit.
本発明の撮像装置は、前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成することを特徴とする。 In the imaging apparatus of the present invention, the sound information processing unit compares the sound information with the external sound information, detects a sound information signal measured only in the sound information as difference data, and detects the difference data. Is generated from the sound information to generate the corrected sound information data.
本発明の撮像装置は、前記音情報処理部が、前記被写体と前記マイクとの間の第1の距離と、前記閃光装置及び前記マイク間の第2の距離との距離差により、前記音情報と前記外部音情報との音圧比及び位相差を求め、当該音圧比及び位相差により前記外部音情報の音圧及び位相を前記音情報に対応させ、前記音情報の補正処理を行うことを特徴とする。 In the imaging device according to the aspect of the invention, the sound information processing unit may calculate the sound information based on a distance difference between a first distance between the subject and the microphone and a second distance between the flash device and the microphone. Sound pressure ratio and phase difference between the external sound information and the sound pressure ratio and phase difference, the sound pressure and phase of the external sound information are made to correspond to the sound information, and the sound information is corrected. And
本発明の撮像装置は、前記音情報処理部が、前記被写体の仮想位置から前記マイクまでの仮想距離が入力されると、前記第1の距離における前記音情報を、当該仮想距離における音圧及び位相となる仮想音情報に変換し、前記仮想位置から前記閃光装置までの距離を前記第2の距離とし、前記仮想音情報の補正処置を行うことを特徴とする。 In the imaging apparatus of the present invention, when the sound information processing unit receives a virtual distance from the virtual position of the subject to the microphone, the sound information at the first distance is converted to the sound pressure at the virtual distance and It is converted into virtual sound information to be a phase, the distance from the virtual position to the flash device is the second distance, and the virtual sound information is corrected.
本発明の撮像装置は、前記音情報処理部が、前記差分データのレベルが設定値以上である場合、前記設定値以上の差分データが存在する期間の前記音情報を、前記音圧比及び位相差により当該音情報に対応させた前記外部音情報と置き換えることを特徴とする。 In the imaging apparatus according to the aspect of the invention, when the level of the difference data is greater than or equal to a set value, the sound information processing unit may obtain the sound information during a period in which difference data greater than or equal to the set value exists, the sound pressure ratio and the phase difference. Is replaced with the external sound information corresponding to the sound information.
本発明の撮像装置は、前記マイクが複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記閃光装置及び前記複数のマイク各々の間の第2の距離との距離差を求め、それぞれの距離差に対応した音圧比及び位相差により、当該マイク各々の音情報の補正処理を行うことを特徴とする。 In the imaging device of the present invention, when a plurality of microphones are provided, a first distance between the subject and each of the plurality of microphones, and a second distance between the flash device and each of the plurality of microphones, And the sound information of each microphone is corrected based on the sound pressure ratio and the phase difference corresponding to each distance difference.
本発明の撮像装置は、前記マイク及び前記閃光装置が複数設けられている場合、前記被写体及び複数のマイク各々の間の第1の距離と、前記複数の閃光装置及び前記複数のマイク各々の間の距離である第2の距離と、複数の外部マイクからの前記外部音情報とを用いて、当該マイク各々の音情報の補正処理を行うことを特徴とする。 In the imaging device of the present invention, when a plurality of the microphones and the flash devices are provided, a first distance between the subject and each of the plurality of microphones, and between each of the plurality of flash devices and the plurality of microphones. The sound information of each of the microphones is corrected using the second distance that is the distance of the microphone and the external sound information from a plurality of external microphones.
本発明の撮像装置は、前記第1の距離及び前記第2の距離を測定する測距手段をさらに有することを特徴とする。 The imaging apparatus according to the present invention further includes distance measuring means for measuring the first distance and the second distance.
本発明の撮像システムは、撮像装置と、当該撮像装置と異なる場所に配置され、当該撮像装置の撮像時に前記被写体に対して光を照射する閃光装置とからなるシステムであり、前記閃光装置が前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、外部マイクと当該外部マイク取得した外部音情報を前記撮像装置に送信する外部音情報出力部とを有し、前記撮像装置が、前記被写体の被写体像を撮像して画像信号を出力する撮像部と、撮像装置に搭載されたマイクと、前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有することを特徴とする。 The imaging system of the present invention is a system that includes an imaging device and a flash device that is disposed at a different location from the imaging device and that irradiates light on the subject when the imaging device captures the image. An irradiating unit that irradiates light to the subject with an imaging signal indicating imaging timing from the imaging device, an external microphone, and an external sound information output unit that transmits external sound information acquired by the external microphone to the imaging device. Then, the imaging device inputs from the flash device, an imaging unit that captures a subject image of the subject and outputs an image signal, a microphone mounted on the imaging device, and external sound information acquired by the external microphone. An external sound information input section, a sound information processing section that corrects the sound information acquired by the microphone with the external sound information to obtain corrected sound information data, and the corrected sound information data. Serial to correspond to the image signal and having a sound information recording unit that records in the storage unit.
以上説明したように、本発明によれば、撮像装置に設けられているマイクに入力される音情報と、撮像装置と直接に接触していない閃光装置から入力される外部音情報とを比較し、音情報に存在して外部音情報に存在しない音を、撮像装置の機械的な動作によるノイズ音として検出し、このノイズ音を上記音情報から除去することにより、従来に比較して、音の品質が向上した音情報を提供することが可能となる。 As described above, according to the present invention, the sound information input to the microphone provided in the imaging device is compared with the external sound information input from the flash device that is not in direct contact with the imaging device. The sound that is present in the sound information but not in the external sound information is detected as a noise sound due to the mechanical operation of the imaging device, and the noise sound is removed from the sound information, so that the sound Sound information with improved quality can be provided.
<第1の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図1は同実施形態による撮像システムの構成例を示すブロック図である。
この図において、本実施形態の撮像装置1は、被写体を撮像するものであり、撮像装置本体10に対し、被写体周辺の撮影環境における音が音情報として入力されるマイクMIC1が搭載されている。
閃光装置2は、上記撮像装置1から入力される画像の撮像タイミングを示す指示信号により、閃光(フラッシュ光)を出射するものであり、上記撮影環境における音が外部音情報として入力されるマイクMIC2が搭載されている。
<First Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram illustrating a configuration example of an imaging system according to the embodiment.
In this figure, the
The
次に、図1における上記撮像装置1の構成を図面を参照して説明する。図2は、図1における撮像装置1の構成例を示すブロック図である。
図2において、撮像装置1は、マイクMIC1、撮像部11、外部音情報入力部12、距離計測部13、角度計測部14、距離算出部15、音情報処理部16、送信部17、制御部18、記憶部19を有している。
Next, the configuration of the
2, the
撮像部11は、ズームレンズ及びフォーカスレンズを有する撮影レンズと、CCD(Charge Coupled Device)などにより構成される撮像素子とを有している。また、撮像部11は、ズーム機構制御部を有し、上記ズームレンズを光軸方向に進退駆動し、撮影レンズのズームの制御を行う。ここで、撮影レンズ、ズーム機構制御部及びフォーカス機構制御部が撮影光学系を構成する。また、撮像部11は、オートフォーカスを行うフォーカス機構制御部を有し、上記フォーカスレンズを光軸に進退駆動して、撮像素子の撮像面に対して結像される撮影被写体の像のピント調整を行う。上記撮像素子は、撮影レンズを介してその撮像面上に結像される被写体の像を撮像して画像データとして、記憶部19に時刻情報に対応して書き込み、記憶させる。
The
外部音情報入力部12は、マイクMIC2から送信されるFM変調された音情報などの信号が受信されると、その信号をFM復調して音情報処理部16へ出力する。
When a signal such as FM-modulated sound information transmitted from the microphone MIC <b> 2 is received, the external sound
距離計測部13は、撮像装置1と被写体100との距離L11、撮像装置1と閃光装置2との距離L21を測定する。ここで、距離計測部13は、例えば、被写体100(あるいは閃光装置2)に対して例えば赤外線を照射するとともにその反射光を受光して、被写体までの距離を測定する構成としても良い。すなわち、距離計測部13は、被写体100に対して赤外線等の光を照射受光し、その時間差に基づいて被写体までの距離を計算する。
また、距離計測部13は、 撮像部11における被写体100の撮像画像のコントラストに基づき、撮像装置1から被写体100までの距離である被写体距離を、所定の演算を行うことによって特定する。
The
The
すなわち、距離計測部13は、撮像部11において焦点を合わせるための撮影レンズを移動させた合焦位置を検知し、撮像部1から被写体100までの距離情報を得るための距離情報テーブルを有し、合焦位置に対応した距離を上記被写体距離として出力する。この距離情報テーブルは、合焦位置と、被写体100と撮像部11との間の距離である被写体距離とが対応して記憶されており、例えば至近位置から無限位置までの被写体距離を数ビット程度のコードパターンとして有し、検知された合焦位置に対応する被写体距離を求めることができるようになっている。この距離計測部13において計測される被写体距離として、撮像装置1と被写体100との距離は第1距離L11であり、撮像装置1と閃光装置2との距離は第2距離L21である。
That is, the
角度計測部14は、方位角センサ等により構成されており、例えば、ジャイロにより撮像部11の方位角(北を基準として、時計廻りに角度を測り、度・分・秒の単位)を測定するものである。すなわち、角度計測部14は、ユーザの角度測定を指示する入力により、撮像装置1から被写体100への方位角α(不図示)を測定し、次に撮像装置1から閃光装置2への方位角β(不図示)を測定し、測定された方位角αと方位角βの角度差を算出し、これら方位角の角度差を角度θ1として出力する。ここで、角度測定部14は、撮像部11のレンズを向けた方向の方位角を測定するように、撮像装置1に搭載されている。
The
距離算出部15は、第1距離L11、第2距離21及び角度θ1を用い、閃光装置2と被写体100との第3距離L31を、以下のように算出する。
まず、距離算出部15は、撮像装置1及び被写体100を結ぶ線LN11と、この線LN11に垂直であり、かつマイクMIC2を通過する線LN22との交点Aから、撮像装置1までの距離L12を、第2距離L21及び角度θ1を用い、以下の式により算出する。
L12=L21×cos(θ1)
そして、距離算出部15は、下記式のように、第1距離L11から距離L12を減算することにより、交点Aから被写体100までの距離L13を算出する。
L13=L11−L12
距離算出部15は、下記式のように、第2距離L21及び角度θ1を用い、下記式により、交点AからマイクMIC2(閃光装置2)までの距離L22を算出する。
L22=L21×sin(θ1)
距離L13及び距離L22を算出すると、距離算出部15は、下記の式により、閃光装置2から被写体100までの第3距離L31を算出する。
L31=(L132+L222)1/2
The
First, the
L12 = L21 × cos (θ1)
Then, the
L13 = L11−L12
The
L22 = L21 × sin (θ1)
When the distance L13 and the distance L22 are calculated, the
L31 = (L13 2 + L22 2 ) 1/2
音情報処理部16は、第1距離L11から第3距離L31を減算し、第1距離L11と第3距離L31との距離差SBを算出し、距離差SBによる位相差である伝搬遅延時間Tdを求める。この伝搬遅延時間Tdは、第1距離L11を音が伝搬する時間と第3距離L31を音が伝搬する時間差を示している。音情報処理部16は、以下の式により、距離差SBを音速cにより除算することで伝搬遅延時間Tdを算出する。
Td=SB/c
=SB/(331.5+0.6×tm) ここで、tmは周囲温度(摂氏)
The sound
Td = SB / c
= SB / (331.5 + 0.6 × tm) where tm is the ambient temperature (Celsius)
また、音情報処理部16は、マイクMIC1から入力される音情報(マイクMIC1に入力される音圧の振幅強度を示す電気信号)と、外部音情報入力部12から入力される外部音情報(マイクMIC2に入力される音圧の振幅強度を示す電気信号)とを比較するため、外部音情報を上記伝搬遅延時間Td分遅らせて、比較する音情報に対して位相(時刻のタイミング)を合わせる。すなわち、音情報処理部16は、外部音情報と音情報との比較に際し、音情報と外部音情報との位相差を0とし、マイクMIC1及びMIC2の各々が被写体100から同一の距離にて音を取得した状態とする。ここで、音情報処理部16は、マイクMIC1から入力される音情報を予め設定された増幅度により増幅する増幅回路を有している。上記外部情報音は、閃光装置2において、後述するように、マイクMIC2から入力されてから増幅回路により増幅されてから撮像装置1へ送信される。
また、音情報処理部16は、音情報と外部音情報との音圧を合わせるため、音の強さが距離の2乗で減衰するため、外部音情報と音情報との音圧比に対応させて、外部音情報の音の強さを音情報に合わせるため、以下に示す式により算出した増幅度γにより外部音情報の信号レベルを減衰させる。
γ=(L31/L11)2
The sound
In addition, the sound
γ = (L31 / L11) 2
また、音情報処理部16は、距離差SBに対応して、外部音情報に対して音圧(信号レベル)及び位相(時間のタイミング)の補正を行った後、音情報と外部音情報との音圧の比較を行う。
すなわち、音情報処理部16は、音情報と外部音情報との音圧の差分である差分データを求め、この差分データを時刻に合わせて音情報から削除することにより、ノイズ音が除去された音情報を求める。
すなわち、音情報処理部16は、閃光装置2のマイクMIC2にて入力されず、一方、撮像装置1におけるマイクMIC1においてのみ入力される音をノイズ音として、音情報から除去して、ノイズ音の存在しない音情報を生成し、時刻情報に対応して記憶部19に書き込んで記憶させる。
また、音情報処理部16は、差分データのレベルが予め設定された閾値を超えた場合、補正不能として、この閾値を超える差分データの存在する期間(時刻範囲)の音情報を、音圧及び位相を補正した外部音情報と置換するように構成しても良い。
Further, the sound
That is, the sound
That is, the sound
In addition, when the level of the difference data exceeds a preset threshold value, the sound
制御部18は、図示しない電源スイッチ、ズームスイッチ、設定スイッチ、半押しスイッチ、レリーズスイッチ(全押しスイッチ)からの指示信号が入力された際、それぞれの指示信号に対応し、撮像装置1の各部の制御を行う。制御部18は、撮像する際に、利用者が撮像を指示するレリーズスイッチが押されたことを検出すると、撮像部11に撮像処理を制御する制御信号を出力するとともに、送信部17に対して閃光装置2を制御する制御信号を出力する。
送信部17は、制御部18から上記制御信号が入力されると、フラッシュを被写体100に照射する撮像タイミングを示す指示信号を閃光装置2に対して送信する。
また、制御部19は、音情報及び外部音情報とを同一のサンプリング周期にてサンプリングし、A/D(アナログ/デジタル)変換し、各周期の時刻毎に時系列に音情報処理部16へ、A/D変換した音情報及び外部音情報を出力する。
また、制御部18は、撮像部11が出力する画像データを、液晶表示パネルから形成された表示部に表示する。
記憶部19には、補正された音信号と、撮像部11の撮像した画像データとが時刻情報に対応して記憶されている。
When an instruction signal is input from a power switch, a zoom switch, a setting switch, a half-press switch, or a release switch (full-press switch) (not shown), the
When the control signal is input from the
The
The
The
次に、図1における上記閃光装置2の構成を図面を参照して説明する。図3は、図1における閃光装置2の構成例を示すブロック図である。
図3において、閃光装置2は、マイクMIC2、閃光出射部21、制御部22、外部音出力部23、受信部24、記憶部25を有している。
制御部22は、撮像装置1から送信された指示信号を受信部24を介して入力すると、閃光出射部21に対し、閃光(フラッシュ)を出射する制御情報を出力する。
Next, the configuration of the
In FIG. 3, the
When the instruction signal transmitted from the
閃光出射部21は、制御部22から上記閃光を出射する制御情報が入力されると、出射方向の対して閃光を出射する。
外部音出力部23は、マイクMIC2から入力される外部音情報をレベル調整する増幅回路を有し、レベル調整した外部音情報をFM変調するFM変調回路を有し、図示しないアンテナから変調された外部音情報を、撮像装置1に対して送信する。ここで、マイクMIC2から入力される外部音情報には、撮像装置1内部におけるノイズ音は当然のことながら含まれていない。また、上記外部音出力部23における増幅回路の外部音情報に対する増幅度と、撮像装置1における音情報処理部16における増幅回路の音情報に対する増幅度とは、マイクMIC1及びMIC2とが同じ距離にて同一の音を入力した場合、増幅結果が同一の音圧のレベルになるように調整されている。
また、制御部22は、記憶部23に記憶されている情報により、閃光装置2における各部の動作を制御する。
When the control information for emitting the flash light is input from the
The external
The
次に、図1、図2及び図4を用いて、本実施形態による撮像装置1におけるノイズ音除去の処理を説明する、図4は、本実施形態による撮像装置1におけるノイズ音除去の処理の動作例を説明するフローチャートである。
制御部18は、第1距離L11を取得する操作がユーザにより行われると、距離計測部13に対して第1距離L11を取得する制御信号を出力する。このとき、ユーザは被写体100に対して撮像部11を向けた状態である。
上記制御信号が入力されると、距離計測部13は、被写体100と撮像装置1との距離である第1距離L11を測定し(ステップS1)、距離算出部15へ測定結果の第1距離L11を出力する。
Next, noise noise removal processing in the
When an operation for acquiring the first distance L11 is performed by the user, the
When the control signal is input, the
次に、ユーザは撮像装置1の撮像部11を閃光装置2に対して向ける。
そして、制御部18は、第2距離L21を取得する操作がユーザにより行われると、距離計測部13に対して第2距離L21を取得する制御信号を出力する。
上記制御信号が入力されると、距離計測部13は、閃光装置2と撮像装置1との距離である第2距離L21を測定し(ステップS2)、距離算出部15へ測定結果の第2距離L21を出力する。
Next, the user points the
Then, when an operation for acquiring the second distance L21 is performed by the user, the
When the control signal is input, the
ユーザが撮像装置1の撮像部11を被写体100に対して向け、方位角の測定を行う操作を行うことにより、角度計測部14は、撮像装置1から被写体100を結ぶ線LN11の方向の方位角α(不図示)を計測する。
また、ユーザが撮像装置1の撮像部11を閃光装置2に対して向け、方位角の測定を行う操作を行うことにより、角度計測部14は、撮像装置1から閃光装置2を結ぶ線LN21の方向の方位角β(不図示)を計測する。
そして、角度計測部14は、方位角αと方位角βとの差を求め、線LN11と線LN21とがなす角度θ1として出力する(ステップS3)。
When the user directs the
Further, when the user directs the
And the
次に、距離算出部15は、閃光装置2と被写体100との第1距離L31を算出する(ステップS4)。
第1距離L31を算出すると、距離算出部15は、第1距離L11と第3距離L31との距離差BSを求め、この距離差BSを音が伝搬する伝搬遅延時間Tdを算出する(ステップS5)。また、音情報処理部16は、上記距離差BSにより、マイクMIC2から入力される音情報の音圧を、マイクMIC1から入力される音情報の音圧に合わせる増幅度γを算出する。
Next, the
When calculating the first distance L31, the
制御部18は、録音を開始する録音スイッチがオン状態にあるか否かの判定を行い(ステップS6)、録音スイッチがオン状態である場合、録音を開始するために処理をステップS7へ進め、一方、録音スイッチがオフ状態である場合、ステップS6の処理を所定の時間繰り返す。
The
スイッチがオン状態である場合、制御部18は音情報処理部16に対して録音処理の開始を指示する制御信号を出力する。
これにより、音情報処理部16は、上記増幅度γと伝搬遅延時間Tdを用いて、外部音情報の音圧及び位相を、A/D変換した周期毎に音情報の音圧及び位相に合わせる補正処理を行う(ステップS7)。
音情報処理部16は、音情報と外部音情報との音圧及び位相を合わせた後、A/D変換したサンプリング周期毎に、音情報と外部音情報とを同一位相にて比較し、音情報と外部音情報との音圧(信号の振幅レベル)の差分として差分データを求める(ステップS8)。
When the switch is on, the
Thereby, the sound
After matching the sound pressure and phase of the sound information and the external sound information, the sound
次に、音情報処理部16は、上記周期毎に音情報から差分データを減算し、差分データ(すなわちノイズ音の情報)を除去する補正処理を行う(ステップS9)。
そして、音情報処理部16は、補正処理を行った音情報を、画像データの時刻と対応させて記憶部19へ書き込んで記憶させる(ステップS10)。
制御部18は、予め設定された検出周期毎に録音スイッチがオン(録音処理を行う状態)またはオフ(録音処理を行わない状態)かの検出を行い(ステップS11)、オフ状態の場合に処理をステップS6へ進め、オン状態の場合に処理をステップS7へ進め、ステップS7からステップS11の処理を繰り返して行う。
Next, the sound
Then, the sound
The
上述した処理により、本実施形態によれば、撮像装置1に設けられているマイクMIC1に入力される音情報における、撮像装置1内部の機械的な動作によるノイズ音を、音情報と外部音情報との差分データとして検出し、この差分データを音情報から減算する補正を行い、ノイズ音が除去された音情報を生成するため、その時点にてノイズ音が除去された音情報を、画像データとともに記憶部19に記憶させることが可能となり、従来に比較して、音の品質が向上した音情報を、画像データとともに提供することができる。
また、距離L11、距離L21及び角度θ1が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21及び角度θ1を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。
Through the above-described processing, according to the present embodiment, the noise information generated by the mechanical operation inside the
In addition, the distance L11, the distance L21, and the angle θ1 are measured in advance by another measuring device, and the user inputs to the
<第2の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図5は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。
撮像装置1から被写体100までの距離が離れている場合、音速の関係により画像データの動きと音情報とが対応しないことがある。すなわち、被写体100の発生する音情報が、撮像装置1から被写体100までの距離が離れていると、距離を音速により除算した結果の伝搬遅延が生じる。
このため、第2の実施形態によるおいては、図5に示すように、撮像装置1から被写体100までの距離を、距離Lxに短くして、撮像装置1からL11−Lxの距離に仮想被写体101を仮想的に設け、この仮想被写体101から音情報が発生されたとして、音情報処理部16が音情報を外部音情報により補正する。
<Second Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 5 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described.
When the distance from the
Therefore, according to the second embodiment, as shown in FIG. 5, the distance from the
利用者が距離Lxを入力すると、制御部18は、入力された距離Lxを音情報処理部16へ出力する。
そして、音情報処理部16は、第1の実施形態と同様に、増幅度γと伝搬遅延時間Tdを用いて、外部音情報の音圧及び位相を、音情報の音圧及び位相に合わせる補正処理を行い、音情報と外部音情報とを比較して得られる差分データにより音情報の補正処理を行う。
次に、音情報処理部16は、距離Lxを音速により除算し、補正時間Tcを算出し、記憶部19に対して画像データの時刻と対応して記憶する際、画像データに対する補正された音情報の時刻を上記補正時間Tc早めて記憶部19に記憶させる。
When the user inputs the distance Lx, the
Then, the sound
Next, when the sound
これにより、第2の実施形態によれば、実際の被写体100の位置に対して、撮像装置1から距離Lxだけ近い仮想被写体101からの音情報を、画像データに対応して得ることができるため、すなわち音情報を任意な位置で発生されたように、画像データとの位相をずらす変換を行うことができるため、第1の実施形態と同様に音の品質を向上させることができるとともに、画像データによる動画とタイミングに違和感の少ない音情報を生成することができる。
Thereby, according to the second embodiment, sound information from the
<第3の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図6は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。閃光装置4は、図1の閃光装置2と同様な構成となっている。
第1の実施形態において、撮像システムは、閃光装置が閃光装置2の1台のみであったが、一方、第3の実施形態において、マイクを搭載した閃光装置を2台、すなわちマイクMIC2を搭載した閃光装置2と、マイクMIC4を搭載した閃光装置4とを有している。また、撮像装置1にもマイクMIC11及びMIC12の2つのマイク(ステレオ録音のため)が搭載されている。ここで、マイクMIC11の音情報の補正をマイクMIC2が行い、マイクMIC12の音情報の補正をマイクMIC4が行う構成となっている。
つまり、撮像装置1に複数のマイクMIC11、MIC12が設けられており、各マイクMIC11、MIC12に対応する閃光装置2、4が用いられている。
<Third Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 6 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described. The
In the first embodiment, the imaging system has only one
That is, the
距離計測部13は、第1の実施形態と同様に、撮像装置1の点Cと被写体100との第1距離LN11と、撮像装置1の点Cと閃光装置2との第2距離L21と、撮像装置1の点Cと閃光装置41との第4距離とを測定する。
また、角度計測部14は、第1の実施形態と同様に、撮像装置1の点Cから被写体100への方向の方位角α(不図示)と、撮像装置1の点Cから閃光装置2への方向の方位角β1(不図示)と、撮像装置1から閃光装置4への方向の方位角β2(不図示)とを測定する。ここで、撮像装置1の点Cとは、線LN11と線LN21との2次元平面において、マイクMIC12とマイクMIC11とのマイク面(振動板の面)の中心を通る線上における、マイクMIC12のマイク面の中心と、マイクMIC11のマイク面の中心との間の(挟まれた)線分の中点である。例えば、点Cは撮像部11の光学系の光軸上の交点である。
そして、角度計測部14は、方位角αと方位角β1との角度差である角度θ1と、方位角αと方位角β2との角度差である角度θ2とを求める。
Similar to the first embodiment, the
Similarly to the first embodiment, the
Then, the
距離算出部15は、第1距離L11、第2距離L21及び角度θ1を用い、閃光装置2と被写体100との第3距離L31を、第1の実施形態と同様に算出する。
また、距離算出部15は、第1距離L11、第4距離L41及び角度θ2を用い、閃光装置4と被写体100との第5距離L51を、以下のように算出する。
まず、距離算出部15は、撮像装置1及び被写体100を結ぶ線LN11と、この線LN11に垂直であり、かつマイクMIC4を通過する線LN44との交点Bから、撮像装置1までの距離L14を、第4距離L41及び角度θ2を用い、以下の式により算出する。
L14=L41×cos(θ2)
The
Further, the
First, the
L14 = L41 × cos (θ2)
そして、距離算出部15は、下記式のように、第1距離L11から距離L14を減算することにより、交点Bから被写体100までの距離L43を算出する。
L43=L11−L14
距離算出部15は、下記式のように、第4距離L41及び角度θ2を用い、下記式により、交点BからマイクMIC4(閃光装置4)までの距離L44を算出する。
L44=L41×sin(θ2)
距離L43及び距離L44を算出すると、距離算出部15は、下記の式により、閃光装置4から被写体100までの第5距離L51を算出する。
L51=(L432+L442)1/2
Then, the
L43 = L11-L14
The
L44 = L41 × sin (θ2)
When the distance L43 and the distance L44 are calculated, the
L51 = (L43 2 + L44 2 ) 1/2
また、距離算出部15は、マイクMIC11と被写体100との距離L111を以下の式により求める。以下の式において、距離L10RはマイクMIC11のマイク面の中心と点Cとの距離であり、予め距離算出部15に設定されている。
L111=(L10R2+L112)1/2
同様に、距離算出部15は、マイクMIC12と被写体100との距離L112を以下の式により求める。以下の式において、距離L10LはマイクMIC12のマイク面の中心と点Cとの距離であり、予め距離算出部15に設定されている。
L112=(L10L2+L112)1/2
In addition, the
L111 = (L10R 2 + L11 2 ) 1/2
Similarly, the
L112 = (L10L 2 + L11 2 ) 1/2
音情報処理部16は、距離L111から距離L31を減算して、距離L111と距離L31との距離差SB1を求め、また距離L112から距離L51を減算して、距離L112と距離L51との距離差SB2を求める。
また、音情報処理部16は、上記距離差SB1を音速により除算し、マイクMIC11の音情報と閃光装置2からの外部音情報との伝搬遅延時間Td1を求め、同様に、上記距離差SB2を音速により除算し、マイクMIC12の音情報と閃光装置4からの外部音情報との伝搬遅延時間Td2を求める。
The sound
The sound
また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2の外部音情報の音圧を合わせる増幅率γ1を以下の式により求める。
γ1=(L31/L111)2
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC4の外部音情報の音圧を合わせる増幅率γ2を以下の式により求める。
γ2=(L51/L112)2
音情報処理部16は、上記増幅率γ1により、マイクMIC2の音情報の音圧をマイクMIC11に合わせるとともに、伝搬遅延時間Td1によりマイクMIC2の音情報を遅延させ、マイクMIC11の音情報の位相に合わせる補正を行う。
同様に、音情報処理部16は、上記増幅率γ2により、マイクMIC4の音情報の音圧をマイクMIC12に合わせるとともに、伝搬遅延時間Td2によりマイクMIC4の音情報を遅延させ、マイクMIC12の音情報の位相に合わせる補正を行う。
In addition, the sound
γ1 = (L31 / L111) 2
Similarly, the sound
γ2 = (L51 / L112) 2
The sound
Similarly, the sound
音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部16は、マイクMIC11の音情報とマイクMIC2の外部音情報とを同一位相にて比較し、マイクMIC11の音情報とマイクMIC2の外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算し、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
After matching the sound pressure and phase of the sound information and the external sound information, the sound
Then, the sound
同様に、音情報処理部16は、マイクMIC12の音情報とマイクMIC4の外部音情報とを同一位相にて比較し、マイクMIC12の音情報とマイクMIC4の外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算し、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
Similarly, the sound
Then, the sound
Further, when the sound
また、距離L11、距離L21、距離L41、角度θ1及び角度θ2が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、距離L41、角度θ1及び角度θ2を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。
In addition, the distance L11, the distance L21, the distance L41, the angle θ1 and the angle θ2 are measured in advance by another measuring device, and the user inputs to the
<第4の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図7は同実施形態による撮像システムの構成例を示すブロック図である。第1の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第1の実施形態と異なる点について説明する。図7における点Cは、第3の実施形態の図6で説明した点Cと同様である。
本実施形態においては、撮像装置1に複数のマイク、例えばマイクMIC11、MIC12の2つが設けられており、閃光装置2に各マイクMIC11、MIC12に対応するマイクMIC2L、MIC2Rが設けられている。
<Fourth Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 7 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the first embodiment will be described. A point C in FIG. 7 is the same as the point C described in FIG. 6 of the third embodiment.
In the present embodiment, the
撮像装置1には、撮像部11のレンズの光軸から距離L10R離れた位置にマイクMIC11が設けられ、距離L10L離れた位置にマイクMIC12が設けられている。
また、閃光装置2には、距離L20離れてマイクMIC2LとマイクMIC2Rとが設けられている。なお、マイクの直径は上記距離L20に比較して小さいとする。この距離L20は距離算出部15に予め設定されている。また、マイクMIC2LまたはマイクMIC2Rのいずれかにおいて、撮像部11にて撮像されるマイク近傍に距離測定用のマーク(例えば、発光LED)が付加されている。本実施形態においては、一例としてマイクMIC2Lにマークが付加されているとする。
ここで、マイクMIC2LはMIC12の音情報からノイズ音を除去する補正に用いる外部音情報を取得し、マイクMIC2RはMIC11の音情報からノイズ音を除去する補正に用いる外部音情報を取得する。
In the
Further, the
Here, the microphone MIC2L acquires external sound information used for correction for removing noise sound from the sound information of the MIC12, and the microphone MIC2R acquires external sound information used for correction for removing noise sound from the sound information of the MIC11.
距離計測部13は、第1の実施形態と同様に、撮像装置1と閃光装置2におけるマイクMIC2Lとの第2距離L21とを測定する。
また、角度計測部14は、第1の実施形態と同様に、撮像装置1から被写体100への方向の方位角α(不図示)と、撮像装置1から閃光装置2への方向の方位角β(不図示)とを測定する。
そして、角度計測部14は、方位角αと方位角βとの角度差である角度θ1とを求める。
また、閃光装置2には、図8に示すように、撮像装置1における角度計測部14と同様に方位角センサからなる角度計測部26と、マイクMIC2L、MIC2Rとが設けられている。図8は第4の実施形態における閃光装置2の構成例を示す。
The
Further, as in the first embodiment, the
Then, the
As shown in FIG. 8, the
角度計測部26が方位角δ(不図示)を測定し、外部音出力部23が測定された方位角δをFM変調して撮像装置1へ送信する。そして、外部音入力部12は、入力される方位角δの情報をFM復調して制御部18へ出力する。制御部18はFM復調された方位角δを角度計測部14へ出力する。角度計測部14は、方位角δと方位角αとの角度差である角度θ3を算出し、算出された角度θ3を音情報処理部16へ出力する。
ここで、方位角δは、線LN11と線L21との存在する2次元平面に平行であり、かつ、閃光装置2におけるマイクMIC2LとマイクMIC2Rとのマイク表面(振動板の面)の中心を通る線LN225に対して垂直方向(図7における閃光装置2を通る一点鎖線)の方位角である。
The
Here, the azimuth angle δ is parallel to the two-dimensional plane in which the lines LN11 and L21 exist, and passes through the centers of the microphone surfaces (surfaces of the diaphragm) of the microphones MIC2L and MIC2R in the
距離算出部15は、第1距離L11、第2距離L21、角度θ1及び角度θ3を用い、閃光装置2におけるマイクMIC2Rと被写体100との第6距離L311と、閃光装置2におけるマイクMIC2Lと被写体100との第7の距離L312とを算出する。ここで、マイクMIC2Lのマイク表面の中心から線LN11に対して垂直に引いた線LN128と、線LN11との交点をA点とする。
すなわち、距離算出部15は、A点とC点との距離L118を以下の式により算出する。
L118=L21cos(θ1)
また、距離算出部15は、A点から被写体100までの距離L119を以下の式により算出する。
L119=L11−L118
また、距離算出部15は、マイクMIC2Lのマイク表面の中心から点Aまでの距離L128を以下の式により算出する。
L128=L21sin(θ1)
The
That is, the
L118 = L21 cos (θ1)
Further, the
L119 = L11-L118
Further, the
L128 = L21sin (θ1)
また、距離算出部15は、点Aから点Dまでの距離L211を以下の式により算出する。ここで、点Dは、線LN225(マイクMIC2Lを基点とし線LN128と角度θ3をなす線)と線LN11との交点である。
L211=L128tan(θ3)
また、距離算出部15は、点Dと点Cとの距離L213を以下の式により算出する。
L213=L118−L211
また、距離算出部15は、マイクMIC2Lのマイク表面の中心から点Dまでの距離L225を以下の式により算出する。
L225=(L2132+L212−2×L213×L21×cos(θ1))1/2
Further, the
L211 = L128tan (θ3)
Further, the
L213 = L118−L211
In addition, the
L225 = (L213 2 + L21 2 −2 × L213 × L21 × cos (θ1)) 1/2
また、距離算出部15は、マイクMIC2Lのマイク表面の中心から被写体100までの距離L312を以下の式により算出する。
L312=(L2252+(L119+L211)2−2×L225×(L119+L211)×cos(θ4))1/2
ここで、θ4は、線LN225と線LN11とのなす角度である。
また、距離算出部15は、マイクMIC2Rのマイク中心から被写体100までの距離L311を以下の式により算出する。
L311=((L225+L20)2+(L119+L211)2−2×(L225+L20)×(L119+L211)×cos(θ4))1/2
ここで、L20は、マイクMIC2Lのマイク面の中心と、マイクMIC2Rのメイク面の中心との距離であり、予め距離算出部15に設定されている。
また、距離算出部15は、第3の実施形態と同様に、マイクMIC11と被写体100との距離L111、及びマイクMIC12と被写体100との距離L112を算出する。
In addition, the
L312 = (L225 2 + (L119 + L211) 2 −2 × L225 × (L119 + L211) × cos (θ4)) 1/2
Here, θ4 is an angle formed by the line LN225 and the line LN11.
Further, the
L311 = ((L225 + L20) 2 + (L119 + L211) 2 −2 × (L225 + L20) × (L119 + L211) × cos (θ4)) 1/2
Here, L20 is the distance between the center of the microphone surface of the microphone MIC2L and the center of the makeup surface of the microphone MIC2R, and is set in the
The
上述した距離算出部15の計算処理により、マイクMIC12と被写体100との距離L112、マイクMIC11と被写体100との距離L111、マイクMIC2Lと被写体100との距離L312、マイクMIC2Rと被写体100との距離L311が求められる。
音情報処理部16は、距離L111から距離L311を減算して、距離L111と距離L311との距離差SB1を求め、また距離L112から距離L312を減算して、距離L112と距離L312との距離差SB2を求める。
また、音情報処理部16は、上記距離差SB1を音速cにより除算し、マイクMIC11の音情報とMIC2LはマイクMIC2Rの外部音情報とにおける伝搬遅延時間Td1を求め、同様に、上記距離差SB2を音速cにより除算し、マイクMIC12の音情報とマイクMIC2Lの外部音情報とにおける伝搬遅延時間Td2を求める。
By the calculation processing of the
The sound
The sound
また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2Rの外部音情報の音圧を合わせる増幅率γ1を以下の式により求める。
γ1=(L311/L111)2
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC2Lの外部音情報の音圧を合わせる増幅率γ2を以下の式により求める。
γ2=(L312/L112)2
音情報処理部16は、上記増幅率γ1により、マイクMIC2Rの音情報の音圧をマイクMIC11に合わせるとともに、伝搬遅延時間Td1によりマイクMIC2Rの音情報を遅延させ、マイクMIC11の音情報の位相に合わせる補正を行う。
同様に、音情報処理部16は、上記増幅率γ2により、マイクMIC2Lの音情報の音圧をマイクMIC12に合わせるとともに、伝搬遅延時間Td2によりマイクMIC2Lの音情報を遅延させ、マイクMIC12の音情報の位相に合わせる補正を行う。
Further, the sound
γ1 = (L311 / L111) 2
Similarly, the sound
γ2 = (L312 / L112) 2
The sound
Similarly, the sound
音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部16は、マイクMIC11の音情報とマイクMIC2Rの外部音情報とを同一位相にて比較し、マイクMIC11の音情報とマイクMIC2Rの外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
After matching the sound pressure and phase of the sound information and the external sound information, the sound
Then, the sound
同様に、音情報処理部16は、マイクMIC12の音情報とマイクMIC2Lの外部音情報とを同一位相にて比較し、マイクMIC12の音情報とマイクMIC2Lの外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
Similarly, the sound
Then, the sound
Further, when the sound
また、距離L11、距離L21、角度θ1及び角度θ3が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、角度θ1及び角度θ3を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。
Further, the distance L11, the distance L21, the angle θ1 and the angle θ3 are measured in advance by another measuring device, and the user inputs to the
<第5の実施形態>
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図9は同実施形態による撮像システムの構成例を示すブロック図である。第4の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第4の実施形態と異なる点について説明する。第5の実施形態においては、第4の実施形態の構成に加え、新たに閃光装置4が設けられている。この閃光装置4は、図8の閃光装置2と同様な構成をしている。閃光装置4に設けられているマイクは、マイクMIC4LとマイクMIC4Rとである。
本実施形態においては、マイクMIC12の音情報をマイクMIC4L及びマイクMIC4Rの外部音情報により補正し、マイクMIC11の音情報をマイクMIC2L及びマイクMIC2Rの外部音情報により補正する。
<Fifth Embodiment>
Hereinafter, an imaging system having an imaging device and a flash device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 9 is a block diagram illustrating a configuration example of the imaging system according to the embodiment. The same components as those in the fourth embodiment are denoted by the same reference numerals, and the description thereof is omitted. Hereinafter, differences from the fourth embodiment will be described. In the fifth embodiment, a
In the present embodiment, the sound information of the microphone MIC12 is corrected by the external sound information of the microphone MIC4L and the microphone MIC4R, and the sound information of the microphone MIC11 is corrected by the external sound information of the microphone MIC2L and the microphone MIC2R.
第4の実施形態と同様に、撮像装置1は、閃光装置2から方位角δ(不図示)、閃光装置4から方位角σ(不図示)を入力する。ここで、方位角σは、線LN11と線LN41との存在する2次元平面に平行であり、閃光装置2におけるマイクMIC4LとマイクMIC4Rとのマイク表面(振動板の面)の中心を通る線LN445に対して垂直方向の方位角である。
角度計測部14は、上記方位角σと方位角αとの角度差である角度θ6を算出する。
距離算出部15は、角度θ1、角度θ3、距離L11及び距離L21とを用いて距離L311と距離312とを算出したのと同様に、角度θ2、角度θ6、距離L11及び距離L41とを用いて距離L511及び距離L512を算出する。ここで、距離L41はマイクMIC4Rと点Cとの距離であり、距離L511は被写体100とマイクMIC4Rとの距離であり、距離L512は被写体100とマイクMIC4Lとの距離である。
Similar to the fourth embodiment, the
The
The
距離算出部15は、第4の実施形態と同様に、距離L111と距離L311との距離差SB11、距離L111と距離L312との距離差SB12、距離L112と距離L511との距離差SB41、距離L112と距離L512との距離差SB42を算出する。
音情報処理部16は、距離差SB11、SB12、SB41、SB42の各々を、音速cにより除算し、マイクMIC11の音情報とマイクMIC2Rの外部音情報との伝搬遅延時間Td11、マイクMIC11の音情報とマイクMIC2Lの外部音情報との伝搬遅延時間Td12、マイクMIC12の音情報とマイクMIC4Rの外部音情報との伝搬遅延時間Td41、マイクMIC12の音情報とマイクMIC4Lの外部音情報との伝搬遅延時間Td42の各々を算出する。
また、音情報処理部16は、マイクMIC11の音情報の音圧に、マイクMIC2R、MIC2Lの各々の音圧を合わせる増幅率γ11及びγ12を以下の式により求める。
γ11=(L311/L111)2
γ12=(L312/L111)2
同様に、音情報処理部16は、マイクMIC12の音情報の音圧に、マイクMIC4R、MIC4Lの外部音情報の音圧を合わせる増幅率γ41及びγ42を以下の式により求める。
γ41=(L511/L111)2
γ42=(L512/L111)2
As in the fourth embodiment, the
The sound
In addition, the sound
γ11 = (L311 / L111) 2
γ12 = (L312 / L111) 2
Similarly, the sound
γ41 = (L511 / L111) 2
γ42 = (L512 / L111) 2
ここで、音情報処理部16は、マイクMIC2Rの外部音情報の位相を、伝搬遅延時間Td11によりずらして、マイクMIC11の音情報の位相に合わせ、同様に、マイクMIC2Lの外部音情報の位相を、伝搬遅延時間Td12によりずらして、マイクMIC11の音情報の位相に合わせる。
また、音情報処理部16は、マイクMIC2Rの外部音情報の音圧に対し、増幅率γ11を乗じて、マイクMIC11の音情報の音圧に合わせ、同様に、マイクMIC2Lの外部音情報の音圧に対し、増幅率γ12を乗じて、マイクMIC11の音情報の音圧に合わせる。
また、音情報処理部16は、マイクMIC4Rの外部音情報の位相を、伝搬遅延時間Td41によりずらして、マイクMIC12の音情報の位相に合わせ、同様に、マイクMIC4Lの外部音情報の位相を、伝搬遅延時間Td42によりずらして、マイクMIC12の音情報の位相に合わせる。
また、音情報処理部16は、マイクMIC4Rの外部音情報の音圧に対し、増幅率γ41を乗じて、マイクMIC12の音情報の音圧に合わせ、同様に、マイクMIC4Lの外部音情報の音圧に対し、増幅率γ42を乗じて、マイクMIC12の音情報の音圧に合わせる。
Here, the sound
In addition, the sound
Further, the sound
Further, the sound
また、音情報処理部16は、マイクMIC2Lの外部音情報及びマイクMIC2Rの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ1が設定されている。すなわち、音情報処理部16は、マイクMIC2Lの音圧が補正された外部音情報に係数μ1を乗算し、一方マイクMIC2Lの音圧が補正された外部音情報に係数(1−μ1)を乗算し、乗算結果を加算して、マイクMIC11の音情報と比較する第1外部音情報を生成する。
同様に、音情報処理部16は、マイクMIC4Lの外部音情報及びマイクMIC4Rの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ2が設定されている。すなわち、音情報処理部16は、マイクMIC4Lの音圧が補正された外部音情報に係数μ2を乗算し、一方マイクMIC4Rの音圧が補正された外部音情報に係数(1−μ2)を乗算し、乗算結果を加算して、マイクMIC12の音情報と比較する第2外部音情報を生成する。
Further, since the sound
Similarly, since the sound
音情報処理部16は、マイクMIC11の音情報と第1外部音情報とを同一位相にて比較し、マイクMIC11の音情報と第1外部音情報との音圧(信号の振幅レベル)の差分として差分データD1を求める。
そして、音情報処理部16は、マイクMIC11の音情報から上記差分データD1を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC11の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
同様に、音情報処理部16は、マイクMIC12の音情報と第2外部音情報とを同一位相にて比較し、マイクMIC12の音情報と第2外部音情報との音圧の差分として差分データD2を求める。
そして、音情報処理部16は、マイクMIC12の音情報から上記差分データD2を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクMIC12の音情報を求め、画像データの時刻情報に対応して記憶部19へ書き込み、記憶させる。
また、音情報処理部16は、マイクMIC11及びマイクMIC12の音情報を記憶部19に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部19において右音情報、左音情報として記憶領域を設定する。
The sound
Then, the sound
Similarly, the sound
Then, the sound
Further, when the sound
また、距離L11、距離L21、距離L41、角度θ1、角度θ2、角度θ3及び角度θ6が予め他の測定機器により測定され、利用者が撮像装置1に入力して、入力された距離L11、距離L21、角度θ1及び角度θ3を、制御部18が距離算出部15及び音情報処理部16へ出力するように構成しても良い。
In addition, the distance L11, the distance L21, the distance L41, the angle θ1, the angle θ2, the angle θ3, and the angle θ6 are measured in advance by another measuring device, and the user inputs to the
なお、図2における距離算出部15、音情報処理部16の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより撮像装置1に設けられたマイクの音情報の補正処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。
Note that a program for realizing the functions of the
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。 The program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, and what is called a difference file (difference program) may be sufficient.
1…撮像装置
2,4…閃光装置
11…撮像部
12…外部音情報入力部
13…距離計測部
14,26…角度計測部
15…距離算出部
16…音情報処理部
17…送信部
18,22…制御部
19,25…記憶部
21…閃光出射部
23…外部音出力部
24…受信部
MIC11,MIC12,MIC2L,MIC2R,MIC4L,MIC4R…マイク
DESCRIPTION OF
Claims (9)
自身に取り付けられているマイクと、
自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有することを特徴とする撮像装置。 An imaging unit that captures a subject image and outputs an image signal;
A microphone attached to itself,
An external sound information input unit for inputting external sound information from an external microphone of a flash device that is not attached to the flash device;
A sound information processing unit that corrects the sound information acquired by the microphone with the external sound information and sets the corrected sound information data;
A sound information recording unit that records the corrected sound information data in a storage unit in association with the image signal.
前記閃光装置が
前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、
外部マイクと
当該外部マイク取得した外部音情報を前記撮像装置に送信する外部音情報出力部と
を有し、
前記撮像装置が、
前記被写体の被写体像を撮像して画像信号を出力する撮像部と、
撮像装置に搭載されたマイクと、
前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有することを特徴とする撮像システム。 An imaging system that includes an imaging device and a flash device that is disposed at a different location from the imaging device and that irradiates the subject with light when imaging by the imaging device,
An irradiating unit that irradiates light to a subject by an imaging signal indicating an imaging timing from the imaging device;
An external microphone and an external sound information output unit that transmits external sound information acquired by the external microphone to the imaging device,
The imaging device is
An imaging unit that captures a subject image of the subject and outputs an image signal;
A microphone mounted on the imaging device;
External sound information acquired by the external microphone, an external sound information input unit that inputs from the flash device,
A sound information processing unit that corrects the sound information acquired by the microphone with the external sound information and sets the corrected sound information data;
A sound information recording unit that records the correction sound information data in a storage unit in association with the image signal.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009186482A JP5446568B2 (en) | 2009-08-11 | 2009-08-11 | Imaging apparatus and imaging system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009186482A JP5446568B2 (en) | 2009-08-11 | 2009-08-11 | Imaging apparatus and imaging system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011040991A true JP2011040991A (en) | 2011-02-24 |
JP5446568B2 JP5446568B2 (en) | 2014-03-19 |
Family
ID=43768309
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009186482A Expired - Fee Related JP5446568B2 (en) | 2009-08-11 | 2009-08-11 | Imaging apparatus and imaging system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5446568B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015161890A (en) * | 2014-02-28 | 2015-09-07 | 株式会社スタジオアリス | Light emission system for photography |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02185196A (en) * | 1989-01-12 | 1990-07-19 | Matsushita Electric Ind Co Ltd | Camera incorporating type video tape recorder |
JPH04175073A (en) * | 1990-07-26 | 1992-06-23 | Mitsubishi Electric Corp | Integrated type video camera |
JP2003018459A (en) * | 2001-06-29 | 2003-01-17 | Fuji Photo Film Co Ltd | Camera and its system |
JP2006064945A (en) * | 2004-08-26 | 2006-03-09 | Nikon Corp | Flash apparatus and camera system |
JP2006314078A (en) * | 2005-04-06 | 2006-11-16 | Sony Corp | Imaging apparatus, voice recording apparatus, and the voice recording method |
-
2009
- 2009-08-11 JP JP2009186482A patent/JP5446568B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02185196A (en) * | 1989-01-12 | 1990-07-19 | Matsushita Electric Ind Co Ltd | Camera incorporating type video tape recorder |
JPH04175073A (en) * | 1990-07-26 | 1992-06-23 | Mitsubishi Electric Corp | Integrated type video camera |
JP2003018459A (en) * | 2001-06-29 | 2003-01-17 | Fuji Photo Film Co Ltd | Camera and its system |
JP2006064945A (en) * | 2004-08-26 | 2006-03-09 | Nikon Corp | Flash apparatus and camera system |
JP2006314078A (en) * | 2005-04-06 | 2006-11-16 | Sony Corp | Imaging apparatus, voice recording apparatus, and the voice recording method |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015161890A (en) * | 2014-02-28 | 2015-09-07 | 株式会社スタジオアリス | Light emission system for photography |
Also Published As
Publication number | Publication date |
---|---|
JP5446568B2 (en) | 2014-03-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5391008B2 (en) | Imaging apparatus and control method thereof | |
JP6362556B2 (en) | Control device, imaging device, control method, program, and storage medium | |
US8665346B2 (en) | Image pickup apparatus with noise elimination | |
JP5748422B2 (en) | Electronics | |
JP2007316497A5 (en) | ||
JP2011055409A (en) | Audio data combination device | |
JP2011039433A (en) | Imaging apparatus, and method for controlling the same | |
JP2004147188A (en) | Digital camera | |
JP2013081159A (en) | Imaging device | |
JP5361398B2 (en) | Imaging device | |
EP3812837A1 (en) | Imaging apparatus | |
JP2011114465A (en) | Voice processing apparatus and electronic camera | |
US10418049B2 (en) | Audio processing apparatus and control method thereof | |
JP5446568B2 (en) | Imaging apparatus and imaging system | |
JP2009130767A (en) | Signal processing apparatus | |
JP2011095567A (en) | Imaging device | |
US20100118155A1 (en) | Digital image processing apparatus | |
JP2009239460A (en) | Focus control method, distance measuring equipment, imaging device | |
JP2007199668A (en) | Image pickup device, method and program of controlling image pickup device | |
JPWO2006043315A1 (en) | IMAGING DEVICE AND PORTABLE DEVICE HAVING IMAGING DEVICE | |
JP2011095378A (en) | Sound recording device, imaging device and program | |
JP2007281981A (en) | Imaging apparatus | |
WO2016198014A1 (en) | Focusing imaging device, method, and terminal | |
WO2019031004A1 (en) | Imaging system, imaging device, and imaging method | |
JP2014041300A (en) | Signal processing device, imaging device, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120706 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130514 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130903 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130925 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131216 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5446568 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |