JP2012185268A - Imaging apparatus and noise reduction method for imaging apparatus - Google Patents

Imaging apparatus and noise reduction method for imaging apparatus Download PDF

Info

Publication number
JP2012185268A
JP2012185268A JP2011047383A JP2011047383A JP2012185268A JP 2012185268 A JP2012185268 A JP 2012185268A JP 2011047383 A JP2011047383 A JP 2011047383A JP 2011047383 A JP2011047383 A JP 2011047383A JP 2012185268 A JP2012185268 A JP 2012185268A
Authority
JP
Japan
Prior art keywords
noise
sound
timing
information
sound pressure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011047383A
Other languages
Japanese (ja)
Inventor
Mitsuhiro Okazaki
光宏 岡崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2011047383A priority Critical patent/JP2012185268A/en
Publication of JP2012185268A publication Critical patent/JP2012185268A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an imaging apparatus able to appropriately reduce only operation noise, and a noise reduction method for the imaging apparatus.SOLUTION: The imaging apparatus according to the present invention comprises: a sound collecting device; a noise timing detection part configured such that from the combination of information about sound collected by the sound collecting device and the operation information of a drive part or operation part in the imaging apparatus, the generation timing of operation noise, generated by the drive part or operation part, is detected; and a noise reduction processing part configured to perform a reduction process for operation noise on the basis of the detection result of the noise timing detection part.

Description

本発明は、撮影時に入力される音情報から動作ノイズを低減処理する撮像装置及び撮像装置のノイズ低減方法に関するものである。   The present invention relates to an imaging apparatus and a noise reduction method for the imaging apparatus that reduce operation noise from sound information input during shooting.

撮像装置において、オートフォーカスレンズの駆動部の動作開始時及び動作終了時に衝撃音が発生する。この衝撃音は動画撮影時に、動作ノイズとしてマイク等の集音装置により集音される。これらのノイズは、被写体の発する音声等の目的音に混入し、目的音の品質を損なうことがある。
このため、発生時間が所定の時間以下、且つ、パワーが所定の範囲内となる音を検出し、その音についてノイズ低減処理を行なう方法が提案されている(例えば、特許文献1参照)。
In the imaging apparatus, an impact sound is generated at the start and end of the operation of the driving unit of the autofocus lens. The impact sound is collected by a sound collecting device such as a microphone as operation noise during moving image shooting. These noises may be mixed in the target sound such as sound emitted from the subject, and the quality of the target sound may be impaired.
For this reason, a method has been proposed in which a sound whose generation time is equal to or shorter than a predetermined time and whose power is within a predetermined range is detected and noise reduction processing is performed on the sound (see, for example, Patent Document 1).

特開2008−77707号公報JP 2008-77707 A

しかし、特許文献1によるノイズ低減処理の場合、集音装置により集音された音情報からのみ動作ノイズであると判定している。このため、例えば、撮影場所の周辺に衝撃音に近似した音が発生し、この音を集音したような場合も動作ノイズであると誤検出してノイズ低減処理が行われる。その結果、目的音の音質低下という問題がある。   However, in the case of the noise reduction processing according to Patent Document 1, it is determined that the operation noise is only from the sound information collected by the sound collection device. For this reason, for example, a sound similar to an impact sound is generated around the shooting location, and even when this sound is collected, it is erroneously detected as operation noise and noise reduction processing is performed. As a result, there is a problem that the sound quality of the target sound is degraded.

本発明の課題は、動作ノイズのみを適確に低減することができる撮像装置及び撮像装置のノイズ低減方法を提供することである。   An object of the present invention is to provide an image pickup apparatus and an image pickup apparatus noise reduction method capable of appropriately reducing only operation noise.

本発明は、以下のような解決手段により前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。   The present invention solves the above problems by the following means. In addition, in order to make an understanding easy, although the code | symbol corresponding to embodiment of this invention is attached | subjected and demonstrated, it is not limited to this.

請求項1に記載の発明は、集音装置(131)と、前記集音装置(131)により集音した音情報と、撮像装置(100)内の駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより前記駆動部(113)又は操作部(120)から発生する動作ノイズの発生タイミングを検出するノイズタイミング検出(135)と、前記ノイズタイミング検出(135)の検出結果に基づいて、前記動作ノイズの低減処理を行うノイズ低減処理部(133)と、を備えること、を特徴とする撮像装置(100)である。
請求項2に記載の発明は、請求項1に記載の撮像装置(100)であって、前記ノイズタイミング検出(135)は、前記集音装置(131)により集音された連続音圧サンプルの音圧差の情報と、前記駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、を特徴とする撮像装置(100)である。
請求項3に記載の発明は、3請求項1または2に記載の撮像装置(100)であって、前記ノイズタイミング検出(135)は、前記集音装置(131)により集音された連続音情報の音圧レベルと、連続音圧サンプルの音圧差の情報と、前記駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、を特徴とする撮像装置(100)である。
請求項4に記載の発明は、請求項1から3のいずれか1項に記載の撮像装置(100)であって、前記駆動部(113)又は操作部(120)の動作情報は、オートフォーカス駆動情報若しくはズーム駆動情報又は操作ボタンの操作情報であること、を特徴とする撮像装置(100)である。
請求項5に記載の発明は、請求項1から4のいずれか1項に記載の撮像装置(100)であって、前記ノイズ低減処理部(133)は、前記ノイズタイミング検出(135)が、ノイズタイミングであると検出された時より前又は後の第1の周波数スペクトルとノイズタイミングであると検出された時の第2の周波数スペクトルとを比較して求めた第3の周波数スペクトルを、前記第2の周波数スペクトルと置き換えること、を特徴とする撮像装置(100)である。
請求項6に記載の発明は、請求項3に記載の撮像装置(100)であって、前記ノイズタイミング検出(135)でノイズタイミングであると検出された時、前記音圧レベル及び音圧差を、非ノイズタイミング時の音圧レベル及び音圧差と比較し、その結果に基づいて、ノイズ低減処理を行なうか否かを判定すること、を特徴とする撮像装置(100)である。
請求項7に記載の発明は、集音装置(131)と、前記集音装置(131)により集音した音情報と、撮像装置(100)内の駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより前記駆動部(113)又は操作部(120)から発生する動作ノイズの発生タイミングを検出するノイズタイミング検出(135)と、ノイズ低減処理部(133)と、を備え、前記ノイズタイミング検出(135)の検出結果に基づいて、前記動作ノイズの低減処理を行うこと、を特徴とする撮像装置(100)のノイズ低減方法である。
請求項8に記載の発明は、請求項7に記載の撮像装置(100)のノイズ低減方法であって、前記ノイズタイミング検出(135)は、前記集音装置(131)により集音された連続音圧サンプルの音圧差の情報と、前記駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、を特徴とする撮像装置(100)のノイズ低減方法である。
請求項9に記載の発明は、請求項7または8に記載の撮像装置(100)のノイズ低減方法であって、前記ノイズタイミング検出(135)は、前記集音装置(131)により集音された連続音情報の音圧レベルと、連続音圧サンプルの音圧差の情報と、前記駆動部(113)又は操作部(120)の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、を特徴とする撮像装置(100)のノイズ低減方法である。
請求項10に記載の発明は、請求項7から9のいずれか1項に記載の撮像装置(100)のノイズ低減方法であって、前記駆動部(113)又は操作部(120)の動作情報は、オートフォーカス駆動情報若しくはズーム駆動情報又は操作ボタンの操作情報であること、を特徴とする撮像装置(100)のノイズ低減方法である。
請求項11に記載の発明は、請求項7から10のいずれか1項に記載の撮像装置(100)のノイズ低減方法であって、前記ノイズ低減処理部(133)は、前記ノイズタイミング検出(135)が、ノイズタイミングであると検出された時より前又は後の第1の周波数スペクトルとノイズタイミングであると検出された時の第2の周波数スペクトルとを比較して求めた第3の周波数スペクトルを、前記第2の周波数スペクトルと置き換えること、を特徴とする撮像装置(100)のノイズ低減方法である。
請求項12に記載の発明は、請求項9に記載の撮像装置(100)のノイズ低減方法であって、前記ノイズタイミング検出(135)でノイズタイミングであると検出された時、前記音圧レベル及び音圧差を、非ノイズタイミング時の音圧レベル及び音圧差と比較し、その結果に基づいて、ノイズ低減処理を行なうか否かを判定すること、を特徴とする撮像装置(100)のノイズ低減方法である。
なお、符号を付して説明した構成は、適宜改良してもよく、また、少なくとも一部を他の構成物に代替してもよい。
According to the first aspect of the present invention, there is provided a sound collecting device (131), sound information collected by the sound collecting device (131), and a drive unit (113) or an operation unit (120) in the imaging device (100). And a detection result of the noise timing detection (135). The noise timing detection (135) detects the generation timing of the operation noise generated from the drive unit (113) or the operation unit (120). An imaging device (100) comprising: a noise reduction processing unit (133) that performs the operation noise reduction processing based on the noise reduction processing unit.
Invention of Claim 2 is an imaging device (100) of Claim 1, Comprising: The said noise timing detection (135) is a continuous sound pressure sample collected by the said sound collector (131). An imaging apparatus (100) characterized in that the generation timing of operation noise is detected by a combination of information on a sound pressure difference and operation information of the drive unit (113) or the operation unit (120).
The invention described in claim 3 is the imaging device (100) according to claim 1 or 2, wherein the noise timing detection (135) is a continuous sound collected by the sound collector (131). Detecting occurrence timing of operation noise by a combination of the sound pressure level of information, the information of the sound pressure difference of the continuous sound pressure samples, and the operation information of the drive unit (113) or the operation unit (120). Imaging device (100).
According to a fourth aspect of the present invention, in the imaging device (100) according to any one of the first to third aspects, the operation information of the driving unit (113) or the operation unit (120) is autofocus. The imaging apparatus (100) is characterized by being drive information, zoom drive information, or operation button operation information.
Invention of Claim 5 is an imaging device (100) of any one of Claim 1 to 4, Comprising: The said noise reduction process part (133) is the said noise timing detection (135), A third frequency spectrum obtained by comparing the first frequency spectrum before or after being detected as noise timing and the second frequency spectrum when detected as noise timing; The imaging device (100) is characterized in that it is replaced with a second frequency spectrum.
According to a sixth aspect of the present invention, in the imaging device (100) according to the third aspect, when the noise timing is detected by the noise timing detection (135), the sound pressure level and the sound pressure difference are calculated. The imaging apparatus (100) is characterized by comparing with the sound pressure level and the sound pressure difference at the time of non-noise timing and determining whether or not to perform noise reduction processing based on the result.
The invention according to claim 7 is a sound collecting device (131), sound information collected by the sound collecting device (131), and a drive unit (113) or an operation unit (120) in the imaging device (100). A noise timing detection (135) for detecting the generation timing of the operation noise generated from the drive unit (113) or the operation unit (120) by a combination thereof, and a noise reduction processing unit (133). The noise reduction method of the imaging device (100), characterized in that the operation noise reduction processing is performed based on a detection result of the noise timing detection (135).
The invention described in claim 8 is the noise reduction method of the imaging device (100) according to claim 7, wherein the noise timing detection (135) is a continuous sound collected by the sound collector (131). An imaging apparatus (100) characterized by detecting the generation timing of operation noise by combining information on a sound pressure difference of a sound pressure sample and operation information of the drive unit (113) or the operation unit (120). This is a noise reduction method.
The invention described in claim 9 is the noise reduction method of the imaging device (100) according to claim 7 or 8, wherein the noise timing detection (135) is collected by the sound collector (131). Detecting the generation timing of the operation noise by combining the sound pressure level of the continuous sound information, the information of the sound pressure difference of the continuous sound pressure sample, and the operation information of the drive unit (113) or the operation unit (120). The noise reduction method of the imaging device (100) characterized by the above.
A tenth aspect of the present invention is the noise reduction method of the imaging device (100) according to any one of the seventh to ninth aspects, wherein the operation information of the drive unit (113) or the operation unit (120) is provided. Is a noise reduction method of the imaging apparatus (100), characterized in that it is autofocus drive information, zoom drive information, or operation button operation information.
The invention described in claim 11 is the noise reduction method of the imaging device (100) according to any one of claims 7 to 10, wherein the noise reduction processing unit (133) is configured to detect the noise timing ( 135) is obtained by comparing the first frequency spectrum before or after the time when it is detected as the noise timing and the second frequency spectrum when it is detected as the noise timing. A noise reduction method for an imaging apparatus (100), characterized in that a spectrum is replaced with the second frequency spectrum.
The invention according to claim 12 is the noise reduction method of the imaging device (100) according to claim 9, wherein when the noise timing is detected by the noise timing detection (135), the sound pressure level is detected. The noise of the image pickup apparatus (100) is characterized by comparing the sound pressure level and the sound pressure difference with the sound pressure level and the sound pressure difference at the non-noise timing and determining whether or not to perform the noise reduction processing based on the result. This is a reduction method.
Note that the configuration described with reference numerals may be modified as appropriate, and at least a part of the configuration may be replaced with another component.

本発明によれば、動作ノイズのみを適確に低減することができる撮像装置及び撮像装置のノイズ低減方法を提供することができる。   According to the present invention, it is possible to provide an imaging apparatus and an imaging apparatus noise reduction method capable of appropriately reducing only the operation noise.

本発明の第1実施形態の撮像装置の構成を示すブロック図である。1 is a block diagram illustrating a configuration of an imaging apparatus according to a first embodiment of the present invention. AF駆動用モータから発生する動作ノイズの発生状況を説明する図である。It is a figure explaining the generation | occurrence | production condition of the operation noise which generate | occur | produces from the motor for AF drive. AF駆動時間範囲の設定に関するケース1の場合の説明図である。It is explanatory drawing in the case of the case 1 regarding the setting of AF drive time range. AF駆動時間範囲の設定に関するケース2の場合の説明図である。It is explanatory drawing in the case of case 2 regarding the setting of AF drive time range. AF動作中に集音される衝撃ノイズの音圧波形を示す図である。It is a figure which shows the sound pressure waveform of the impact noise collected during AF operation | movement. AF動作中に集音される音声等の目的音の音圧波形を示す図である。It is a figure which shows the sound pressure waveform of the target sounds, such as the sound collected during AF operation | movement. 衝撃ノイズと音声等の目的音とが加算(重畳)された連続音の音圧レベルの変化を示す波形図である。It is a wave form diagram which shows the change of the sound pressure level of the continuous sound with which impact noise and target sounds, such as a sound, were added (superimposed). 衝撃ノイズと音声等の目的音が重畳された連続音の音圧差分の絶対値の変化を示す波形図である。It is a wave form diagram which shows the change of the absolute value of the sound pressure difference of the continuous sound with which the target sound, such as an impact noise and an audio | voice, was superimposed. 図2に示す各区間から取得した周波数スペクトル図である。第1の処理対象音の区間Cのスペクトルを示す図である。It is the frequency spectrum figure acquired from each area shown in FIG. It is a figure which shows the spectrum of the area C of the 1st process target sound. 衝撃ノイズ発生区間における衝撃ノイズの低減処理方法を説明するための周波数スペクトル図である。It is a frequency spectrum figure for demonstrating the reduction process method of the impact noise in an impact noise generation area. 衝撃ノイズの発生している区間におけるノイズの低減処理の様子を示す概略図である。It is the schematic which shows the mode of the noise reduction process in the area where the impact noise has generate | occur | produced. 第2実施形態による衝撃ノイズ低減処理の実行の要否を判断するための動作フローを示すフローチャートである。It is a flowchart which shows the operation | movement flow for judging the necessity of execution of the impact noise reduction process by 2nd Embodiment.

以下、図面等を参照して、本発明の実施形態について説明する。図1は、本発明の第1実施形態の撮像装置としてのカメラの構成を示すブロック図である。   Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing a configuration of a camera as an imaging apparatus according to the first embodiment of the present invention.

図1に示すように、カメラ100は、レンズ鏡筒110と、カメラ本体160と、を有する。
カメラ本体160の内部には、レンズ鏡筒110を通過した被写体光を撮像してA/D変換すると共に、画像処理して画像データを生成する画像処理部(図示省略)と、集音された音情報をA/D変換すると共に、ノイズ低減処理する音情報処理部130と、画像処理部で得られた画像データ及び音情報処理部130で得られた音声信号を記録する記録部140と、操作部としてのマルチセレクター120と、CPU150と、を備える。
As shown in FIG. 1, the camera 100 includes a lens barrel 110 and a camera body 160.
Inside the camera main body 160, the subject light that has passed through the lens barrel 110 is imaged and A / D converted, and an image processing unit (not shown) that performs image processing to generate image data is collected. A sound information processing unit 130 that performs A / D conversion of sound information and performs noise reduction processing, a recording unit 140 that records image data obtained by the image processing unit and a sound signal obtained by the sound information processing unit 130, A multi-selector 120 as an operation unit and a CPU 150 are provided.

レンズ鏡筒110は、焦点調整レンズ(以下、AF(Auto Focus)レンズ、手振れ補正レンズ(以下、VR(Vibration Reduction)レンズ、ズームレンズ等を備える光学系(図示省略)と、ズームエンコーダ111と、AFエンコーダ112と、AF駆動用モータ113と、を備える。   The lens barrel 110 includes a focus adjustment lens (hereinafter referred to as an AF (Auto Focus) lens, a camera shake correction lens (hereinafter referred to as a VR (Vibration Reduction) lens), a zoom lens, and the like, a zoom encoder 111, An AF encoder 112 and an AF driving motor 113 are provided.

AFエンコーダ112は、光学系のAFレンズの位置を検出してCPU150に出力する。AF駆動用モータ113には、AFレンズの位置を制御するための駆動制御信号がCPU150から入力され、その駆動制御信号に応じて、AFレンズの位置が制御される。   The AF encoder 112 detects the position of the AF lens of the optical system and outputs it to the CPU 150. A driving control signal for controlling the position of the AF lens is input from the CPU 150 to the AF driving motor 113, and the position of the AF lens is controlled in accordance with the driving control signal.

CPU150は、設定された撮像条件(例えば、絞り値、露出値等)に応じてレンズ鏡筒110を制御する。CPU150は、ズームレンズ駆動部(図示省略)及びAF駆動用モータ113を駆動する駆動制御信号を生成し、ズームレンズ駆動部及びAF駆動用モータ113に出力する。   The CPU 150 controls the lens barrel 110 according to the set imaging conditions (for example, aperture value, exposure value, etc.). The CPU 150 generates a drive control signal for driving the zoom lens drive unit (not shown) and the AF drive motor 113 and outputs the drive control signal to the zoom lens drive unit and the AF drive motor 113.

音情報処理部130は、集音装置であるマイク131と、集音されA/D変換された音情報を処理する音信号処理部132と、ノイズ低減処理部133と、を備える。   The sound information processing unit 130 includes a microphone 131 that is a sound collection device, a sound signal processing unit 132 that processes sound information that has been collected and A / D converted, and a noise reduction processing unit 133.

音信号処理部132は、マイク131により集音した音情報と、AF駆動用モータ113の動作情報と、の組み合わせにより、AF駆動用モータ113から発生する動作ノイズの発生タイミングを検出するノイズタイミング検出部135を備える。   The sound signal processing unit 132 detects noise timing detection that detects the generation timing of the operation noise generated from the AF driving motor 113 based on the combination of the sound information collected by the microphone 131 and the operation information of the AF driving motor 113. Part 135 is provided.

図2は、AF駆動用モータ113から発生する動作ノイズの発生状況を説明する図である。図2に示すように、AF駆動用モータ113の動作時には、動作開始時から動作終了時まで連続して動作ノイズが発生する。AF駆動用モータ113の動作開始時及び動作終了時には、AF駆動系の質量や慣性力の影響を受ける関係から、大きな衝撃音(以下、衝撃ノイズという)N1、N3を発生する。また、動作開始後から動作終了直前までの間は、略一定した駆動音(以下、駆動ノイズという)N2を発生する。さらに、AF動作中にAF駆動用モータ113が増速、減速される際も、衝撃ノイズ(不図示)を発生する。
なお、実際のAF動作時においては、被写体の音声等の目的音に動作ノイズ(衝撃ノイズN1+駆動ノイズN2+衝撃ノイズN3)が重畳した音信号がマイク131から出力されるが、説明を簡略にするため、図2では、音声等の目的音は省略し、AF動作時に発生する動作ノイズのみを示している。
FIG. 2 is a diagram for explaining the generation state of the operation noise generated from the AF driving motor 113. As shown in FIG. 2, during the operation of the AF drive motor 113, operation noise is continuously generated from the start of the operation to the end of the operation. At the start and end of the operation of the AF drive motor 113, loud impact sounds (hereinafter referred to as impact noise) N1 and N3 are generated due to the influence of the mass and inertial force of the AF drive system. In addition, a substantially constant drive sound (hereinafter referred to as drive noise) N2 is generated from the start of the operation to immediately before the end of the operation. Further, impact noise (not shown) is also generated when the AF drive motor 113 is accelerated and decelerated during the AF operation.
During actual AF operation, a sound signal in which operation noise (impact noise N1 + drive noise N2 + impact noise N3) is superimposed on the target sound such as the sound of the subject is output from the microphone 131, but the description is simplified. Therefore, in FIG. 2, the target sound such as voice is omitted, and only the operation noise generated during the AF operation is shown.

ノイズ低減処理部133は、AF動作時に発生する衝撃ノイズN1、駆動ノイズN2及び衝撃ノイズを低減処理する。
ノイズタイミング検出部135は、AF駆動用モータ113の動作情報と、マイク131により集音される音情報と、の組み合わせによって、動作ノイズの発生するタイミングを検出する。
ノイズタイミング検出部135による動作ノイズN(衝撃ノイズN1+駆動ノイズN2+衝撃ノイズN3)の発生タイミングの検出に採用されるAF駆動用モータ113の動作情報としては、AF駆動時間範囲が用いられる。AF駆動時間範囲は、CPU150にAF駆動用モータ113に対する駆動制御信号を出力するように指示するAF駆動コマンド及びAFエンコーダ112からの出力を用いて検出(推定)する。
The noise reduction processing unit 133 performs a reduction process on the impact noise N1, the drive noise N2, and the impact noise that are generated during the AF operation.
The noise timing detection unit 135 detects the timing at which operation noise is generated by a combination of the operation information of the AF drive motor 113 and the sound information collected by the microphone 131.
The AF drive time range is used as the operation information of the AF drive motor 113 that is used to detect the generation timing of the operation noise N (impact noise N1 + drive noise N2 + impact noise N3) by the noise timing detection unit 135. The AF drive time range is detected (estimated) using an AF drive command that instructs the CPU 150 to output a drive control signal for the AF drive motor 113 and an output from the AF encoder 112.

AF駆動時間範囲は、カメラ100における光学系の種類の異なりに対応して、ケース1又はケース2のように設定される。
図3は、ケース1の場合のAF駆動時間範囲の設定に関する説明図である。図4は、ケース2の場合のAF駆動時間範囲の設定に関する説明図である。
The AF driving time range is set as in case 1 or case 2 corresponding to the difference in the type of optical system in the camera 100.
FIG. 3 is an explanatory diagram regarding the setting of the AF driving time range in case 1. FIG. 4 is an explanatory diagram regarding the setting of the AF drive time range in case 2.

ケース1の場合(図3)
カメラ本体160からレンズ鏡筒110にAF駆動コマンドが送られてAF駆動用モータ113が動作開始する。この動作開始時刻t1と同時にAFエンコーダ112からパルスの出力が開始する。マイク131には、動作開始時刻t1と同時に、被写体の音声等の目的音に動作ノイズが重畳された音情報が集音され、動作ノイズNを含む音情報がマイク131から出力されて、動作開始時刻t1に衝撃ノイズN1が現れる。また、AF動作が終了すると、その動作終了時刻t3と同時にAFエンコーダ112からのパルスの出力が停止し、動作終了時刻t3と略同時にマイク131からの出力に衝撃ノイズN3が現れる。
ここで、AFエンコーダ112からのパルスの出力開始及びパルスの出力停止のタイミングと衝撃ノイズN1、N3の出現タイミングとがずれる可能性があるため、ケース1の場合のAF駆動時間範囲は、t1からt3までの時間幅より少し広めのt1´からt3´に設定する。
Case 1 (Figure 3)
An AF driving command is sent from the camera body 160 to the lens barrel 110, and the AF driving motor 113 starts operating. At the same time as the operation start time t1, pulse output from the AF encoder 112 starts. At the same time as the operation start time t1, the microphone 131 collects sound information in which operation noise is superimposed on the target sound such as the sound of the subject, and the sound information including the operation noise N is output from the microphone 131 to start the operation. Impact noise N1 appears at time t1. When the AF operation ends, the pulse output from the AF encoder 112 stops simultaneously with the operation end time t3, and the impact noise N3 appears in the output from the microphone 131 almost simultaneously with the operation end time t3.
Here, there is a possibility that the pulse output start timing and the pulse output stop timing from the AF encoder 112 may deviate from the appearance timing of the impact noises N1 and N3. Therefore, the AF drive time range in case 1 is from t1. It is set from t1 ′ to t3 ′ that is slightly wider than the time width up to t3.

ケース2の場合(図4)
カメラ本体160からレンズ鏡筒110にAF駆動コマンドが送られてAF駆動用モータ113が動作開始する。この動作開始時刻t1から僅かに遅れた時刻から、マイク131に被写体の音声等の目的音に動作ノイズNが重畳された音情報が集音され、動作ノイズNを含む音情報がマイク131から出力されて、動作開始時刻t1に衝撃ノイズN1が現れる。一方、AFエンコーダ112からは、駆動方向の反転時においてAF駆動系のギア列で起きるバックラッシュ等の影響を受けて、AF駆動用モータ113の動作開始時刻t1よりも遅れた時刻t2からパルスの出力が開始し、また、パルスの出力停止から僅かに遅れた時刻において、マイク131からの出力に衝撃ノイズN1が現れる。
このケース2の場合は、駆動コマンドが出力されるタイミングを動作開始時刻t1とし、AFエンコーダ112からのパルスの出力停止のタイミングを動作終了時刻t3とした方が衝撃ノイズN1、N3の出現を正確に検出することが可能である。そこで、ケース2の場合のAF駆動時間範囲は、t1からt3までの時間幅より終了時刻を少し広めにとってt1からt3´に設定する。
Case 2 (Fig. 4)
An AF driving command is sent from the camera body 160 to the lens barrel 110, and the AF driving motor 113 starts operating. From the time slightly delayed from the operation start time t1, sound information in which the operation noise N is superimposed on the target sound such as the sound of the subject is collected from the microphone 131, and the sound information including the operation noise N is output from the microphone 131. Thus, the impact noise N1 appears at the operation start time t1. On the other hand, the AF encoder 112 receives a pulse from time t2 that is delayed from the operation start time t1 of the AF driving motor 113 due to the influence of backlash or the like that occurs in the gear train of the AF driving system when the driving direction is reversed. The impact noise N1 appears in the output from the microphone 131 at the time when the output is started and slightly delayed from the stop of the pulse output.
In the case 2, the appearance of the impact noises N1 and N3 is more accurate when the drive command output timing is the operation start time t1 and the pulse output stop timing from the AF encoder 112 is the operation end time t3. Can be detected. Therefore, the AF driving time range in case 2 is set from t1 to t3 ′ so that the end time is slightly wider than the time width from t1 to t3.

なお、AF動作時においてマイク131から実際に出力される音信号は、目的音に動作ノイズNが重畳した信号であるが、説明を簡略にするため、図3及び図4では、図2と同様に、音声等の目的音は省略し、動作ノイズNのみを示している。   Note that the sound signal actually output from the microphone 131 during the AF operation is a signal in which the operation noise N is superimposed on the target sound. However, in order to simplify the description, FIGS. 3 and 4 are similar to FIG. In addition, the target sound such as voice is omitted, and only the operation noise N is shown.

ノイズタイミング検出部135による動作ノイズNの発生タイミングの検出に採用されるAF駆動用モータ113の動作情報としてのAF駆動時間範囲の検出は、上述したとおり、カメラ100における光学系の種類や使用する信号出力の種類によって異なり、ケース1とケース2の2通りである。どちらのケースでも、AF駆動時間範囲の最初と最後に衝撃音が発生することが推測できる。しかし、例えばケース2の場合では、AF駆動コマンドが出力されてからカメラ内の通信および信号処理に要する時間、およびモータが駆動してから衝撃音が発生するまでの時間によってずれが生じる。さらに、AF駆動時間範囲を用いるだけでは、AF動作中にAF駆動用モータ113を増速あるいは減速する場合に発生する衝撃ノイズN3の発生タイミングは検出することができない。   As described above, the detection of the AF drive time range as the operation information of the AF drive motor 113 employed in the detection of the generation timing of the operation noise N by the noise timing detection unit 135 is the type of optical system in the camera 100 and the use thereof. Depending on the type of signal output, there are two cases, Case 1 and Case 2. In either case, it can be estimated that the impact sound is generated at the beginning and the end of the AF driving time range. However, in case 2, for example, there is a deviation depending on the time required for communication and signal processing in the camera after the AF drive command is output and the time from when the motor is driven until the impact sound is generated. Furthermore, by using only the AF driving time range, it is not possible to detect the generation timing of the impact noise N3 that occurs when the AF driving motor 113 is accelerated or decelerated during the AF operation.

そのため、ノイズタイミング検出部135による動作ノイズNの発生タイミングの検出には、AF駆動時間範囲に対して、さらにマイク131により集音される音情報を利用する。この音情報の利用形態について、図5から図8を参照しながら説明する。   Therefore, sound information collected by the microphone 131 is further used in the AF driving time range for detection of the generation timing of the operation noise N by the noise timing detection unit 135. The use form of the sound information will be described with reference to FIGS.

図5は、AF動作中に集音される衝撃ノイズN1の音圧波形を示す図である。図6は、AF動作中に集音される音声等の目的音の音圧波形を示す図である。図7は、衝撃ノイズN1と音声等の目的音とが加算(重畳)された連続音の音圧レベルの変化を示す波形図である。図8は、衝撃ノイズN1と音声等の目的音が重畳された連続音の音圧差分の絶対値の変化を示す波形図である。   FIG. 5 is a diagram showing a sound pressure waveform of the impact noise N1 collected during the AF operation. FIG. 6 is a diagram showing a sound pressure waveform of a target sound such as a sound collected during the AF operation. FIG. 7 is a waveform diagram showing a change in sound pressure level of a continuous sound in which the impact noise N1 and a target sound such as voice are added (superimposed). FIG. 8 is a waveform diagram showing a change in the absolute value of the sound pressure difference of the continuous sound in which the impact noise N1 and the target sound such as voice are superimposed.

図5に示すように、衝撃ノイズN1は、図6に示す音声等の目的音と比べて、音圧差分が大きいが、これらを単に加算しただけでは、図7に示すように、衝撃ノイズN1の波形が音声等の目的音の波形の中に埋もれてしまう。
そこで、図8に示すような音圧差分の絶対値を求め、求めた音圧差分の絶対値が、所定の閾値以上であるか否かを判定して、音圧差分の絶対値が、所定の閾値以上の場合を衝撃ノイズN1と判断することにより、衝撃ノイズN1の発生タイミングを検知することが可能となる。
衝撃ノイズN3の発生タイミングもN1と同様に検知することができる。
As shown in FIG. 5, the impact noise N1 has a larger sound pressure difference than the target sound such as the voice shown in FIG. 6, but simply adding these results in the impact noise N1 as shown in FIG. Will be buried in the waveform of the target sound such as voice.
Therefore, the absolute value of the sound pressure difference as shown in FIG. 8 is obtained, and it is determined whether or not the obtained absolute value of the sound pressure difference is equal to or greater than a predetermined threshold value. It is possible to detect the occurrence timing of the impact noise N1 by determining that the impact noise is N1 or more.
The generation timing of the impact noise N3 can be detected similarly to N1.

図8に示す例においては、閾値を0.1パスカル(Ps)とし、閾値0.1Ps以上の音圧差分の絶対値を検知することにより、衝撃ノイズの発生するタイミングを検出する。   In the example shown in FIG. 8, the threshold value is set to 0.1 Pascal (Ps), and the timing at which the impact noise occurs is detected by detecting the absolute value of the sound pressure difference equal to or greater than the threshold value 0.1 Ps.

次に、図9から図11に基づいて、ノイズタイミング検出部135により動作ノイズNの発生タイミングが検出された場合におけるノイズ低減処理部133による動作ノイズの低減処理方法の詳細について説明する。   Next, the operation noise reduction processing method performed by the noise reduction processing unit 133 when the noise timing detection unit 135 detects the generation timing of the operation noise N will be described with reference to FIGS.

図9は、図2に示す各区間AからFそれぞれから取得した周波数スペクトル図である。なお、本実施形態においてこれらの区間はオーバラップしていないが、互いに半分ずつオーバラップするように区間を設けてもよい。図10は、区間Bにおける衝撃ノイズN1の低減処理方法を説明するための周波数スペクトル図である。図11は、動作ノイズNの発生している区間BからEにおけるノイズの低減処理の様子を示す概略図である。   FIG. 9 is a frequency spectrum diagram acquired from each of sections A to F shown in FIG. In the present embodiment, these sections do not overlap, but the sections may be provided so as to overlap each other by half. FIG. 10 is a frequency spectrum diagram for explaining a method of reducing the impact noise N1 in the section B. FIG. 11 is a schematic diagram illustrating a noise reduction process in the sections B to E where the operation noise N occurs.

なお、図2及び図11における区間Bは、前述したAF駆動時間範囲で、AF動作開始時刻t1に衝撃ノイズN1を発生する区間、区間Aは区間Bの直前の区間、区間D、EはAF動作終了時刻t3に衝撃ノイズN1を発生する区間、区間Fは区間Eの直後の区間、区間BからEは、駆動ノイズN2を発生する区間である。   2 and 11, the section B is the above-described AF driving time range, the section in which the impact noise N1 is generated at the AF operation start time t1, the section A is the section immediately before the section B, and the sections D and E are AF. The section in which the impact noise N1 is generated at the operation end time t3, the section F is a section immediately after the section E, and the sections B to E are sections in which the drive noise N2 is generated.

まず、ノイズ低減処理部133による衝撃ノイズN1の低減処理について説明する。この衝撃ノイズN1の低減処理は、スペクトルの置き換えを基本としている。
図2に示すように、区間Aの音声等の目的音と区間Bの音声等の目的音とは連続としており、AF動作時の動作ノイズ(N1+N2+N3)以外の音声等の目的音の成分は近似している。しかし、目的音は時間的に連続して変化しているため、区間Bのスペクトルを区間Aのスペクトルに全面的に置き換えると、区間Bと区間Cの音声等の目的音の連続性が失われて、再生時に不自然な音になってしまう。
First, the process of reducing the impact noise N1 by the noise reduction processing unit 133 will be described. This reduction processing of the impact noise N1 is based on spectrum replacement.
As shown in FIG. 2, the target sound such as the voice in the section A and the target sound such as the voice in the section B are continuous, and the components of the target sound such as the voice other than the operation noise (N1 + N2 + N3) during the AF operation are approximate. is doing. However, since the target sound changes continuously in time, if the spectrum of the section B is completely replaced with the spectrum of the section A, the continuity of the target sound such as the speech of the sections B and C is lost. And unnatural sound during playback.

そこで、区間Aのスペクトル及び区間Bのスペクトルを、図10に示すように、それぞれ高周波成分f3からf9と低周波成分f1、f2に分ける。そして、低周波成分f1、f2は置き換えることなく、高周波成分f3からf9については、区間Aのスペクトルと区間Bのスペクトルとを比較する。比較の結果、区間Aの高周波成分スペクトルよりも区間Bの高周波成分スペクトルが大きい場合、区間Bの高周波成分スペクトルを区間Aの高周波成分スペクトルに置き換える。これによって、図11に示すように、区間Bのスペクトルは、区間Aのスペクトルに近似する新しい第3の周波数スペクトルに置き換える。
また、上述と同様に、区間Eのスペクトルは、区間Fのスペクトルに近似する新しい第3の周波数スペクトルに置き換え、区間Dのスペクトルは、区間Cのスペクトルに近似する新しい第3の周波数スペクトルに置き換える。
区間Bの処理には区間Bの近傍で、かつAF駆動音が含まれない区間Aのスペクトルを使用し、同様の理由で区間Eの処理には区間Fのスペクトルを使用する。区間Dの近傍のスペクトルは区間Cと区間Eがあるが、区間Eには衝撃音が含まれるため、区間Cのスペクトルを使用する。
Therefore, the spectrum of section A and the spectrum of section B are divided into high frequency components f3 to f9 and low frequency components f1 and f2, respectively, as shown in FIG. Then, the low frequency components f1 and f2 are not replaced, and the spectrum of the section A and the spectrum of the section B are compared for the high frequency components f3 to f9. As a result of the comparison, if the high-frequency component spectrum in section B is larger than the high-frequency component spectrum in section A, the high-frequency component spectrum in section B is replaced with the high-frequency component spectrum in section A. As a result, as shown in FIG. 11, the spectrum of the section B is replaced with a new third frequency spectrum that approximates the spectrum of the section A.
Similarly to the above, the spectrum of the section E is replaced with a new third frequency spectrum that approximates the spectrum of the section F, and the spectrum of the section D is replaced with a new third frequency spectrum that approximates the spectrum of the section C. .
For the processing of the section B, the spectrum of the section A in the vicinity of the section B and not including the AF driving sound is used, and for the same reason, the spectrum of the section F is used for the processing of the section E. The spectrum in the vicinity of the section D includes the section C and the section E. Since the section E includes an impact sound, the spectrum of the section C is used.

上記のように、区間Aと区間B、区間Cと区間D及び区間Fと区間Eの高周波成分f3ないしf9のスペクトルを比較して、区間B、区間D及び区間Eの高周波成分スペクトルが区間A、区間C及び区間Fの高周波成分スペクトルより大きい場合、区間B、区間D及び区間Eの高周波成分スペクトルを区間A、区間C及び区間Fの高周波成分スペクトル又はそれに近似する第3のスペクトルに置き換えることによって、区間Bと区間C及び区間Dと区間Eとに繋がる音声等の目的音の連続性を保ちつつ、衝撃ノイズN1、N3を低減することができる。   As described above, the spectrums of the high frequency components f3 to f9 in the sections A and B, the sections C and D, and the sections F and E are compared. If it is larger than the high-frequency component spectra of the sections C and F, the high-frequency component spectra of the sections B, D, and E are replaced with the high-frequency component spectra of the sections A, C, and F or a third spectrum that approximates them. Thus, it is possible to reduce the impact noises N1 and N3 while maintaining the continuity of the target sound such as voice connected to the sections B and C and the sections D and E.

次に、ノイズ低減処理部133による区間Bから区間Eにおける駆動ノイズN2の低減処理について説明する。この駆動ノイズN2の低減処理は、周波数領域でのスペクトル減算法を基本としている。
例えば、予め記憶している動作ノイズ情報又は過去に集音した音情報から推定した動作ノイズ情報を利用して、動作ノイズが含まれるフレーム毎にスペクトル減算処理を行い、その後、IFFT処理により時間領域の音情報に変換する。これにより、区間Bから区間Eに含まれる駆動ノイズN2を低減処理することができる。
Next, the process of reducing the drive noise N2 from the section B to the section E by the noise reduction processing unit 133 will be described. This drive noise N2 reduction processing is based on a spectral subtraction method in the frequency domain.
For example, spectral subtraction processing is performed for each frame including operation noise using operation noise information stored in advance or operation noise information estimated from sound information collected in the past, and then time domain is processed by IFFT processing. To sound information. Thereby, the drive noise N2 included in the section B to the section E can be reduced.

以上、本第1実施形態によると、以下の効果を有する。
(1)AF駆動用モータ113の動作情報と、マイク131により集音される音情報と、の組み合わせによって、AF動作の開始時及び終了時に発生する衝撃ノイズN1、N3のタイミングを検出する。そのため、例えば、撮影場所の周辺に衝撃ノイズに類似あるいは近似した音が発生しているような場合でも、それをノイズ発生タイミングであると誤検出するおそれがない。従って、衝撃ノイズ発生タイミングを正しく検出することが可能となり、目的音の劣化や消失等の音声品質を損なうことなく、衝撃ノイズN1、N3のみを適確に低減することができる。
(2)衝撃ノイズ発生時のスペクトルを、衝撃ノイズ発生前又は発生後の衝撃ノイズを含まないスペクトルに置き換えて衝撃ノイズを低減処理するに際して、音声等の目的音が持つ所定の周波数以下のスペクトルは置き換えず、所定の周波数以上のスペクトルのみを衝撃ノイズ発生前又は発生後のスペクトルと比較し、比較の結果、大きい場合のスペクトルを置き換える。そのため、音声等の目的音の連続性を保ちつつ、衝撃ノイズN1、N3を低減することができる。
As described above, the first embodiment has the following effects.
(1) The timing of impact noises N1 and N3 generated at the start and end of the AF operation is detected by a combination of the operation information of the AF drive motor 113 and the sound information collected by the microphone 131. Therefore, for example, even when a sound similar or approximate to impact noise is generated around the shooting location, there is no possibility of erroneously detecting it as noise generation timing. Accordingly, it is possible to correctly detect the impact noise generation timing, and it is possible to appropriately reduce only the impact noises N1 and N3 without impairing the sound quality such as deterioration or disappearance of the target sound.
(2) When the impact noise is reduced by replacing the spectrum at the time of occurrence of the impact noise with a spectrum that does not include the impact noise before or after the occurrence of the impact noise, the spectrum below the predetermined frequency of the target sound such as voice is Without replacement, only the spectrum of a predetermined frequency or higher is compared with the spectrum before or after the occurrence of the impact noise, and the spectrum when larger as a result of comparison is replaced. Therefore, the impact noises N1 and N3 can be reduced while maintaining the continuity of the target sound such as voice.

次に、本発明の第2実施形態について説明する。
第1実施形態は、マイク131により集音される音情報等を利用して衝撃ノイズN1、N3を低減処理することを前提(必須)としている。しかし、衝撃ノイズN1、N3の低減処理は、音声等の目的音の品質の劣化を伴う。そのため、目的音に対して衝撃ノイズN1、N3が小さい時や、撮影場所の周辺が騒々しい時などは、衝撃ノイズN1、N3の低減を行う必要がない場合や、行わない方が好ましい場合がある。
Next, a second embodiment of the present invention will be described.
The first embodiment is based on the premise (essential) that the impact noise N1 and N3 are reduced using sound information collected by the microphone 131 and the like. However, the process of reducing the impact noises N1 and N3 is accompanied by deterioration of the quality of the target sound such as voice. Therefore, when the impact noises N1 and N3 are small relative to the target sound, or when the surroundings of the shooting location are noisy, it is not necessary to reduce the impact noises N1 and N3, or it is preferable not to do so. There is.

第2実施形態は、上述のような環境条件等に応じて衝撃ノイズ低減処理の実行の要否を判断して、実際に低減処理が必要な場合や低減処理が好ましい場合に限り、衝撃ノイズの低減処理を行なう。この衝撃ノイズ低減処理の実行の要否の判断にも音情報を活用する。
図12は、第2実施形態による衝撃ノイズ低減処理の実行の要否を判断するための動作フローを示すフローチャートである。
In the second embodiment, whether or not the impact noise reduction process is necessary is determined according to the environmental conditions as described above, and the impact noise is reduced only when the reduction process is actually necessary or preferable. Perform reduction processing. The sound information is also used to determine whether or not to execute the impact noise reduction process.
FIG. 12 is a flowchart showing an operation flow for determining whether or not to execute the impact noise reduction process according to the second embodiment.

まず、ステップST1において、ノイズタイミング検出部135による動作ノイズの発生タイミングの検出により得た図7の波形を用いて、衝撃ノイズN1の発生区間の音圧の絶対値の最大値P1を求める(検出する)。
続いて、ステップST2において、動作ノイズの発生タイミングの検出により得た図8の波形を用いて、衝撃ノイズN1の発生区間の音圧差分の絶対値の最大値D1を求める(検出する)。
First, in step ST1, the absolute value P1 of the absolute value of the sound pressure in the section where the impact noise N1 is generated is obtained (detected) using the waveform of FIG. To do).
Subsequently, in step ST2, the maximum value D1 of the absolute value of the sound pressure difference in the section where the impact noise N1 is generated is obtained (detected) using the waveform of FIG. 8 obtained by detecting the generation timing of the operating noise.

次に、ステップST3において、ノイズタイミング検出部135による動作ノイズの発生タイミングの検出により得た図7の波形を用いて、衝撃ノイズN1の発生直前の音圧の絶対値の最大値P0を求める(検出する)。
続いて、ステップST4において、動作ノイズの発生タイミングの検出により得た図8の波形を用いて、衝撃ノイズN1の発生直前の音圧差分の絶対値の最大値D0を求める(検出する)。
Next, in step ST3, the maximum value P0 of the absolute value of the sound pressure immediately before the generation of the impact noise N1 is obtained using the waveform of FIG. 7 obtained by detecting the generation timing of the operation noise by the noise timing detection unit 135 ( To detect).
Subsequently, in step ST4, the maximum value D0 of the absolute value of the sound pressure difference immediately before the occurrence of the impact noise N1 is obtained (detected) using the waveform of FIG. 8 obtained by detecting the generation timing of the operating noise.

次に、ステップST5において、衝撃ノイズN1の発生区間の音圧の絶対値の最大値P1と衝撃ノイズN1の発生直前の音圧の絶対値の最大値P0とを比較する。比較の結果、P1>P0の場合(YES)は、低減処理が必要と判断して、ステップST7に進み、P1<P0の場合(NO)は、撮影場所の周辺が騒々しくて、衝撃ノイズN1が余り目立たない環境であると判断して、ステップST6に進む。   Next, in step ST5, the maximum value P1 of the absolute value of the sound pressure in the generation section of the impact noise N1 is compared with the maximum value P0 of the absolute value of the sound pressure immediately before the generation of the impact noise N1. As a result of the comparison, if P1> P0 (YES), it is determined that reduction processing is necessary, and the process proceeds to step ST7. If P1 <P0 (NO), the vicinity of the shooting location is noisy and impact noise It is determined that N1 is an inconspicuous environment and the process proceeds to step ST6.

ステップST6においては、衝撃ノイズN1の発生区間の音圧差分の絶対値の最大値D1と衝撃ノイズN1の発生直前の音圧差分の絶対値の最大値D0×nとを比較する。ここで、nは、2以上のD0の倍数であって、ノイズ低減処理の強弱を撮影者によって調整できるように可変としている。   In step ST6, the maximum value D1 of the absolute value of the sound pressure difference during the generation period of the impact noise N1 is compared with the maximum value D0 × n of the absolute value of the sound pressure difference immediately before the generation of the impact noise N1. Here, n is a multiple of D0 of 2 or more, and is variable so that the noise reduction processing can be adjusted by the photographer.

ステップST6での比較の結果、D1>D0×nの場合(YES)は、衝撃ノイズN1の音圧差分の絶対値が異常に大きく、低減処理が必要と判断して、ステップST7に進み、D1<D0×nの場合(NO)、衝撃ノイズN1が余り目立たない環境であり、且つ、衝撃ノイズN1の音圧差分の絶対値も小さいと判断して、ノイズ低減処理を行わずに終了する。   As a result of the comparison in step ST6, if D1> D0 × n (YES), it is determined that the absolute value of the sound pressure difference of the impact noise N1 is abnormally large and reduction processing is necessary, and the process proceeds to step ST7, where D1 If <D0 × n (NO), it is determined that the impact noise N1 is inconspicuous and the absolute value of the sound pressure difference of the impact noise N1 is small, and the process ends without performing noise reduction processing.

そして、ステップST7においては、衝撃ノイズN1の低減処理を実行する。この衝撃ノイズN1の低減処理は、第1実施形態において説明したと同様に、所定の周波数以下のスペクトルは置き換えず、所定の周波数以上のスペクトルを置き換えることにより行なわれる。
衝撃ノイズN3も同様に低減処理することができる。
In step ST7, a process for reducing the impact noise N1 is executed. The impact noise N1 reduction processing is performed by replacing the spectrum above the predetermined frequency without replacing the spectrum below the predetermined frequency, as described in the first embodiment.
The impact noise N3 can be similarly reduced.

以上の第2実施形態によると、第1実施形態による効果に加えて、以下の効果を有する。
(1)マイク131により集音された音情報から衝撃ノイズN1、N3の発生タイミングの音圧の絶対値及び音圧差分の絶対値と、衝撃ノイズN1、N3の発生タイミングの直前又は直後の音圧の絶対値及び音圧差分の絶対値と、を検出し、それら両種の絶対値を比較して低減処理の要否を判断している。そのため、音声等の目的音に対して衝撃ノイズN1、N3が小さい時や、撮影場所の周辺が騒々しい時などは、あえて低減処理を行わず、低減処理に伴う音声等の目的音の品質の劣化を抑制することができる。
The second embodiment described above has the following effects in addition to the effects of the first embodiment.
(1) From the sound information collected by the microphone 131, the absolute value of the sound pressure and the absolute value of the sound pressure difference at the generation timing of the impact noise N1, N3, and the sound immediately before or after the generation timing of the impact noise N1, N3 The absolute value of the pressure and the absolute value of the sound pressure difference are detected, and the absolute values of both types are compared to determine whether reduction processing is necessary. For this reason, when the impact noises N1 and N3 are small relative to the target sound such as voice or when the surroundings of the shooting location are noisy, the reduction process is not performed. Can be prevented.

以上、説明した実施形態に限定されることなく、以下に示すような種々の変形や変更が可能であり、それらも本発明の範囲内である。
(1)前述の実施形態では、AF駆動用モータ113の動作時に発生する衝撃ノイズN1、N3及び駆動ノイズN2の低減処理について説明したが、これに限らず、カメラ100が備えるマルチセレクター(操作部)120を操作した時に発生するクリック音(ノイズ)を低減処理することも可能である。
この場合は、マルチセレクター120を操作すると、電気的な信号(操作情報)がCPU150に入力されるので、その信号の捕捉と、マイク131により集音した音情報と、により操作タイミングの検出が可能であり、検出したタイミングでクリック音(ノイズ)を適切に低減処理することができる。
(2)また、ズームエンコーダ111の駆動情報と、マイク131により集音した音情報と、によりズーム駆動用モータ(図示せず)の動作開始時及び動作終了時に発生する衝撃ノイズの発生タイミングを検出して、上述の第1実施形態と同様なノイズ低減処理を行なうこともできる。
(3)更に、前述の第2実施形態においては、衝撃ノイズの低減処理の要否の判断に、音圧の絶対値及び音圧差分の絶対値の最大値を用いたが、音圧の分散及び音圧差の分散を用いてもよい。この場合、比較するときの倍数は、適宜可変できるようにすることが好ましい。
なお、実施形態及び変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。また、本発明は以上説明した実施形態によって限定されることはない。
The present invention is not limited to the above-described embodiment, and various modifications and changes as described below are possible, and these are also within the scope of the present invention.
(1) In the above-described embodiment, the reduction processing of the impact noises N1 and N3 and the driving noise N2 that occur during the operation of the AF driving motor 113 has been described. However, the present invention is not limited to this. It is also possible to reduce the click sound (noise) that occurs when 120 is operated.
In this case, when the multi-selector 120 is operated, an electrical signal (operation information) is input to the CPU 150, so that the operation timing can be detected by capturing the signal and sound information collected by the microphone 131. Thus, the click sound (noise) can be appropriately reduced at the detected timing.
(2) The generation timing of impact noise generated at the start and end of the operation of the zoom drive motor (not shown) is detected from the drive information of the zoom encoder 111 and the sound information collected by the microphone 131. Then, the same noise reduction processing as that in the first embodiment can be performed.
(3) Further, in the above-described second embodiment, the absolute value of the sound pressure and the maximum value of the absolute value of the sound pressure difference are used to determine whether or not the impact noise reduction process is necessary. And variance of the sound pressure difference may be used. In this case, it is preferable that the multiple for comparison can be varied as appropriate.
In addition, although embodiment and a deformation | transformation form can also be used in combination as appropriate, detailed description is abbreviate | omitted. Further, the present invention is not limited to the embodiment described above.

100:撮像装置、131:マイク(集音装置)、133:ノイズ低減処理部、135:ノイズタイミング検出部、N:動作ノイズ(N1:衝撃ノイズ、N2:駆動ノイズ、N3:衝撃ノイズ)   100: imaging device, 131: microphone (sound collecting device), 133: noise reduction processing unit, 135: noise timing detection unit, N: operation noise (N1: impact noise, N2: driving noise, N3: impact noise)

Claims (12)

集音装置と、
前記集音装置により集音した音情報と、撮像装置内の駆動部又は操作部の動作情報と、の組み合わせにより前記駆動部又は操作部から発生する動作ノイズの発生タイミングを検出するノイズタイミング検出部と、
前記ノイズタイミング検出部の検出結果に基づいて、前記動作ノイズの低減処理を行うノイズ低減処理部と、を備えること、
を特徴とする撮像装置。
A sound collector;
A noise timing detection unit that detects a generation timing of operation noise generated from the drive unit or the operation unit by a combination of sound information collected by the sound collection device and operation information of the drive unit or the operation unit in the imaging device When,
A noise reduction processing unit that performs the operation noise reduction processing based on the detection result of the noise timing detection unit,
An imaging apparatus characterized by the above.
請求項1に記載の撮像装置であって、
前記ノイズタイミング検出部は、
前記集音装置により集音された連続音圧サンプルの音圧差の情報と、前記駆動部又は操作部の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、
を特徴とする撮像装置。
The imaging apparatus according to claim 1,
The noise timing detector is
Detecting the occurrence timing of operation noise by a combination of the information on the sound pressure difference of the continuous sound pressure sample collected by the sound collector and the operation information of the drive unit or operation unit;
An imaging apparatus characterized by the above.
請求項1または2に記載の撮像装置であって、
前記ノイズタイミング検出部は、
前記集音装置により集音された連続音情報の音圧レベルと、連続音圧サンプルの音圧差の情報と、前記駆動部又は操作部の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、
を特徴とする撮像装置。
The imaging apparatus according to claim 1, wherein:
The noise timing detector is
Detection timing of operation noise is detected by a combination of sound pressure level of continuous sound information collected by the sound collector, sound pressure difference information of continuous sound pressure samples, and operation information of the drive unit or operation unit. To do,
An imaging apparatus characterized by the above.
請求項1から3のいずれか1項に記載の撮像装置であって、
前記駆動部又は操作部の動作情報は、
オートフォーカス駆動情報若しくはズーム駆動情報又は操作ボタンの操作情報であること、
を特徴とする撮像装置。
The imaging apparatus according to any one of claims 1 to 3,
The operation information of the drive unit or operation unit is
Autofocus drive information or zoom drive information or operation button operation information,
An imaging apparatus characterized by the above.
請求項1から4のいずれか1項に記載の撮像装置であって、
前記ノイズ低減処理部は、
前記ノイズタイミング検出部が、ノイズタイミングであると検出された時より前又は後の第1の周波数スペクトルとノイズタイミングであると検出された時の第2の周波数スペクトルとを比較して求めた第3の周波数スペクトルを、前記第2の周波数スペクトルと置き換えること、
を特徴とする撮像装置。
The imaging apparatus according to any one of claims 1 to 4, wherein:
The noise reduction processing unit
The noise timing detection unit obtains the first frequency spectrum before or after the time when it is detected as the noise timing and the second frequency spectrum when the noise frequency is detected as the noise timing. Replacing the frequency spectrum of 3 with the second frequency spectrum;
An imaging apparatus characterized by the above.
請求項3に記載の撮像装置であって、
前記ノイズタイミング検出部でノイズタイミングであると検出された時、前記音圧レベル及び音圧差を、非ノイズタイミング時の音圧レベル及び音圧差と比較し、その結果に基づいて、ノイズ低減処理を行なうか否かを判定すること、
を特徴とする撮像装置。
The imaging apparatus according to claim 3,
When the noise timing detection unit detects the noise timing, the sound pressure level and the sound pressure difference are compared with the sound pressure level and the sound pressure difference at the non-noise timing, and noise reduction processing is performed based on the result. Determining whether to do,
An imaging apparatus characterized by the above.
集音装置と、
前記集音装置により集音した音情報と、撮像装置内の駆動部又は操作部の動作情報と、の組み合わせにより前記駆動部又は操作部から発生する動作ノイズの発生タイミングを検出するノイズタイミング検出部と、
ノイズ低減処理部と、を備え、
前記ノイズタイミング検出部の検出結果に基づいて、前記動作ノイズの低減処理を行うこと、
を特徴とする撮像装置のノイズ低減方法。
A sound collector;
A noise timing detection unit that detects a generation timing of operation noise generated from the drive unit or the operation unit by a combination of sound information collected by the sound collection device and operation information of the drive unit or the operation unit in the imaging device When,
A noise reduction processing unit,
Performing the operation noise reduction process based on the detection result of the noise timing detection unit;
A noise reduction method for an image pickup apparatus.
請求項7に記載の撮像装置のノイズ低減方法であって、
前記ノイズタイミング検出部は、
前記集音装置により集音された連続音圧サンプルの音圧差の情報と、前記駆動部又は操作部の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、
を特徴とする撮像装置のノイズ低減方法。
It is the noise reduction method of the imaging device according to claim 7,
The noise timing detector is
Detecting the occurrence timing of operation noise by a combination of the information on the sound pressure difference of the continuous sound pressure sample collected by the sound collector and the operation information of the drive unit or operation unit;
A noise reduction method for an image pickup apparatus.
請求項7または8に記載の撮像装置のノイズ低減方法であって、
前記ノイズタイミング検出部は、
前記集音装置により集音された連続音情報の音圧レベルと、連続音圧サンプルの音圧差の情報と、前記駆動部又は操作部の動作情報と、の組み合わせにより動作ノイズの発生タイミングを検出すること、
を特徴とする撮像装置のノイズ低減方法。
It is the noise reduction method of the imaging device of Claim 7 or 8, Comprising:
The noise timing detector is
Detection timing of operation noise is detected by a combination of sound pressure level of continuous sound information collected by the sound collector, sound pressure difference information of continuous sound pressure samples, and operation information of the drive unit or operation unit. To do,
A noise reduction method for an image pickup apparatus.
請求項7から9のいずれか1項に記載の撮像装置のノイズ低減方法であって、
前記駆動部又は操作部の動作情報は、
オートフォーカス駆動情報若しくはズーム駆動情報又は操作ボタンの操作情報であること、
を特徴とする撮像装置のノイズ低減方法。
It is the noise reduction method of the imaging device according to any one of claims 7 to 9,
The operation information of the drive unit or operation unit is
Autofocus drive information or zoom drive information or operation button operation information,
A noise reduction method for an image pickup apparatus.
請求項7から10のいずれか1項に記載の撮像装置のノイズ低減方法であって、
前記ノイズ低減処理部は、
前記ノイズタイミング検出部が、ノイズタイミングであると検出された時より前又は後の第1の周波数スペクトルとノイズタイミングであると検出された時の第2の周波数スペクトルとを比較して求めた第3の周波数スペクトルを、前記第2の周波数スペクトルと置き換えること、
を特徴とする撮像装置のノイズ低減方法。
It is the noise reduction method of the imaging device according to any one of claims 7 to 10,
The noise reduction processing unit
The noise timing detection unit obtains the first frequency spectrum before or after the time when it is detected as the noise timing and the second frequency spectrum when the noise frequency is detected as the noise timing. Replacing the frequency spectrum of 3 with the second frequency spectrum;
A noise reduction method for an image pickup apparatus.
請求項9に記載の撮像装置のノイズ低減方法であって、
前記ノイズタイミング検出部でノイズタイミングであると検出された時、前記音圧レベル及び音圧差を、非ノイズタイミング時の音圧レベル及び音圧差と比較し、その結果に基づいて、ノイズ低減処理を行なうか否かを判定すること、
を特徴とする撮像装置のノイズ低減方法。
It is the noise reduction method of the imaging device according to claim 9,
When the noise timing detection unit detects the noise timing, the sound pressure level and the sound pressure difference are compared with the sound pressure level and the sound pressure difference at the non-noise timing, and noise reduction processing is performed based on the result. Determining whether to do,
A noise reduction method for an image pickup apparatus.
JP2011047383A 2011-03-04 2011-03-04 Imaging apparatus and noise reduction method for imaging apparatus Withdrawn JP2012185268A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011047383A JP2012185268A (en) 2011-03-04 2011-03-04 Imaging apparatus and noise reduction method for imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011047383A JP2012185268A (en) 2011-03-04 2011-03-04 Imaging apparatus and noise reduction method for imaging apparatus

Publications (1)

Publication Number Publication Date
JP2012185268A true JP2012185268A (en) 2012-09-27

Family

ID=47015425

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011047383A Withdrawn JP2012185268A (en) 2011-03-04 2011-03-04 Imaging apparatus and noise reduction method for imaging apparatus

Country Status (1)

Country Link
JP (1) JP2012185268A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013011873A (en) * 2011-05-27 2013-01-17 Nikon Corp Noise reduction processing apparatus, camera, and noise reduction processing program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013011873A (en) * 2011-05-27 2013-01-17 Nikon Corp Noise reduction processing apparatus, camera, and noise reduction processing program

Similar Documents

Publication Publication Date Title
WO2012102130A1 (en) Imaging device, program, recording media, and noise reduction method
JP2006270591A (en) Electronic camera, data reproducing device and program
JP6610725B2 (en) Sound processing apparatus and sound processing program
US20150271439A1 (en) Signal processing device, imaging device, and program
US8860822B2 (en) Imaging device
US9282229B2 (en) Audio processing apparatus, audio processing method and imaging apparatus
JP2011114465A (en) Voice processing apparatus and electronic camera
JP5435082B2 (en) Noise reduction processing device, camera, and noise reduction processing program
JP2012185268A (en) Imaging apparatus and noise reduction method for imaging apparatus
JP2013250449A (en) Noise reduction device, and imaging device and program
JP5932399B2 (en) Imaging apparatus and sound processing apparatus
JP2013250448A (en) Noise reduction device, and imaging device and program
JP6061476B2 (en) Audio processing device
JP2012185445A (en) Signal processor, imaging apparatus and program
JP2012203040A (en) Sound signal processing apparatus and its control method
JP2011095378A (en) Sound recording device, imaging device and program
JP2014022953A (en) Signal processing device, image pickup device, and noise reduction processing method and program
JP2020187244A5 (en)
JP5750932B2 (en) Imaging apparatus and noise reduction method for imaging apparatus
JP2011199387A (en) Data processing apparatus and data processing method
JP2013183355A (en) Imaging device
JP2006211437A (en) Electronic camera and device and method for reducing noise
JP2007033735A (en) Automatic focus adjusting device and imaging apparatus
JP2013255077A (en) Noise reduction processing apparatus
JP6048803B2 (en) Imaging apparatus, camera shake correction method, and program

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20140513