JP2021057764A - 撮像装置、音声処理方法、プログラム - Google Patents

Abstract

【課題】共通のマイクロフォンを用いる場合に撮像画像記録時の音声処理と音声メモ記録時の音声処理が適切に行われるようにする。【解決手段】撮像装置は、マイクロフォンにより入力された音声信号について処理を行う音声処理部と、音声処理部で処理された音声データが撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する制御部とを備えるようにする。【選択図】図２０

Description

本技術は撮像装置、音声処理方法、プログラムに関し、特に撮像装置における音声データに関する処理技術に関する。

プロカメラマンや記者など、業務で撮像装置（「カメラ」ともいう）を使用するユーザの場合、撮像装置で撮像した画像を、撮像現場で、その撮像装置の通信機能を用いて新聞社等のサーバ（例えばＦＴＰ（File Transfer Protocol）サーバ）にアップロードするということが行われている。
特許文献１には画像等をアップロードすることに関する技術が開示されている。
また特許文献２には、画像に音声メモを付加されることが開示されている。

特開２０１８−０９３３２５号公報 特開２００５−２９３３３９号公報

ところで上述のようなプロカメラマン等が撮像した画像を新聞社等のサーバにアップロードをする状況を想定すると、画像に対して説明等を付加したいという要望がある。このための１つの手法としては、例えばユーザが画像の説明のための音声を入力し、音声メモとして画像データに関連づけるようにすることが考えられる。

ところで、動画記録を行う場合には音声収録も行われることが多いため、撮像装置にはマイクロフォンが内蔵又は接続されるとともに、音声信号処理回路系も備えられている。そこで、音声メモを記録可能とする場合には、当該マイクロフォンや音声信号処理回路系を利用することが考えられる。しかしながら、動画記録時の音声と音声メモでは目的が異なり、音声データとして求められる品質等も異なる。そのためマイクロフォン等を共用すると、実用上十分な品質が維持できないことも想定される。

そこで本開示では、撮像装置において撮像画像記録時と音声メモ記録時とで、マイクロフォン等を共用しても適切な音声データが得られるようにする技術を提案する。

本技術に係る情報処理装置は、マイクロフォンにより入力された音声信号について処理を行う音声処理部と、前記音声処理部で処理された音声データが撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する制御部と、を備える。
例えば動画撮像の際に周囲音を収録するためのマイクロフォンを、音声メモの収録にも共用して用いるようにする。この場合に、撮像画像記録時と音声メモ記録時と音声処理パラメータが変更されるようにする。
この場合、例えば、前記制御部は、前記撮像画像記録時と、前記音声メモ記録時とで、音声信号の処理に関するパラメータが異なるようにする制御を行うことが考えられる。

上記した撮像装置においては、前記制御部は、音声データの記録を開始する際に、開始する音声データの記録が、撮像画像記録時の音声記録であるか、音声メモ記録時の音声記録であるかに応じて、前記パラメータの切り替え制御を行うことが考えられる。
マイクロフォンによる収音音声を記録する機会が発生したときに、その撮像画像記録時か音声メモ記録時かに応じてパラメータ切り替えを行う。

上記した撮像装置においては、前記制御部は、動作モードの切り替えに応じて前記パラメータの切り替え制御を行うことが考えられる。
動作モードとは、例えば動画記録モード、静止画記録モード、再生モードなどである。これらのモード切り替えに応じてパラメータ切り替えを行う。

上記した撮像装置においては、前記パラメータは、前記音声処理部でのゲイン処理に関する設定を行うパラメータを含むことが考えられる。
例えば音声処理部のＡＧＣ（Automatic Gain Control）特性を設定するパラメータや、固定の入力ゲインを指定するパラメータ等である。そして例えば音声処理部でＡＧＣ処理が行われる場合、そのＡＧＣ特性を設定するパラメータが撮像画像記録時か音声メモ記録時かにより切り替えられるようにする。

上記した撮像装置においては、前記パラメータは、前記音声処理部が音声データに与える周波数特性を設定するパラメータを含むことが考えられる。
音声処理部でフィルタ処理やイコライジング処理が行われる場合、その周波数特性を設定するパラメータが撮像画像記録時か音声メモ記録時かにより切り替えられるようにする。

上記した撮像装置においては、前記パラメータは、前記マイクロフォンの指向性を設定するパラメータを含むことが考えられる。
即ちマイクロフォンの指向性が撮像画像記録時か音声メモ記録時かにより切り替えられるようにする。

上記した撮像装置においては、前記パラメータは、音声データのデータ量の変化を生じさせる処理に関するパラメータを含むことが考えられる。
即ち撮像画像記録時と音声メモ記録時とで、音声データのデータ量が異なるようにする。

上記した撮像装置においては、前記音声メモは、１つの静止画データに関連づけられる音声データであることが考えられる。
音声メモは、例えば静止画データについての説明や注釈等をユーザが声で入力した音声データであり、１つの静止画データに関連づけられる。

上記した撮像装置においては、１つの静止画データが指定された状態で、前記マイクロフォンにより入力され、前記音声処理部で処理された音声データが、指定された静止画データに関連づけられた前記音声メモとされることが考えられる。
例えば静止画データの１つが指定された状態で入力された音声データが音声メモとされることで、１つの静止画データと音声メモが関連づけられる。

上記した撮像装置においては、前記音声メモは、１つの静止画データに関連づけられる音声データであり、前記静止画データを含む画像ファイルとは別の音声ファイルとして記録されるようにすることが考えられる。
例えば静止画データが画像ファイルとして記録され、音声メモの音声データが音声ファイルとして記録された状態で、その音声メモが、静止画データと関連づけられる状態で管理される。

上記した撮像装置においては、前記撮像画像記録時とは動画記録時であり、前記音声処理部で処理された音声データは、動画データに同期した動画音声として記録されるものであることが考えられる。
即ち動画記録時と、音声メモ記録時とで、音声処理に関するパラメータが異なるようにされる。

上記した撮像装置においては、前記マイクロフォンを有することが考えられる。
撮像装置に内蔵されるマイクロフォンが撮像画像記録時の音声収音と、音声メモ記録時の音声収音に共用される。

上記した撮像装置においては、前記マイクロフォンにより複数チャネルの音声収音が行われるとともに、マイクロフォン入力レベルの表示がチャネル毎に行われることが考えられる。
撮像装置に複数のマイクロフォンが内蔵又は接続されたり、Ｌ、Ｒチャネルの収音を行うステレオマイクロフォンが内蔵又は接続されたりする。この場合にマイクロフォン入力レベルの表示がチャネル毎とされる。
また前記マイクロフォンは、前記撮像画像記録時と前記音声メモ記録時の両方で音声データを得るための収音に使用されるマイクロフォンであることが考えられる。
即ち撮像画像記録時に音声を収音するマイクロフォンと音声メモ記録時に音声を収音するマイクロフォンを共通のマイクロフォンとする。

本技術の音声処理方法は、マイクロフォンにより入力された音声信号について処理を行う音声処理部で処理された音声データが、撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する音声処理方法である。
これによりマイクロフォン入力音声につき、撮像画像記録時と音声メモ記録時とでそれぞれ適した音声処理が実行できる。
本技術に係るプログラムは、このような音声処理方法を演算処理装置に実行させるプログラムである。例えば撮像装置に内蔵される制御部としての演算処理装置に実行させる。これにより本技術の処理を各種の撮像装置で実行可能とする。

本技術の実施の形態の画像ファイル及び音声ファイルのアップロードの説明図である。 実施の形態の撮像装置の外観の説明図である。 実施の形態の撮像装置の背面側の説明図である。 実施の形態の撮像装置のブロック図である。 実施の形態の画像一覧画面の説明図である。 実施の形態の画像グループ展開前表示画面の説明図である。 実施の形態の画像グループ展開後表示画面の説明図である。 実施の形態の画像グループ展開後表示画面の説明図である。 実施の形態の音声メモ記録画面の説明図である。 実施の形態の画像グループ展開後表示画面の説明図である。 実施の形態の画像グループ展開前表示画面の説明図である。 実施の形態の画像グループ展開前表示画面の説明図である。 実施の形態の音声メモ再生画面の説明図である。 実施の形態の削除対象選択画面の説明図である。 実施の形態の削除中画面の説明図である。 実施の形態の削除完了画面の説明図である。 実施の形態の削除選択画面の説明図である。 実施の形態の削除選択画面の説明図である。 実施の形態のアサイナブルボタン操作検出処理のフローチャートである。 実施の形態のマイクロフォン準備処理のフローチャートである。 実施の形態のＡＧＣ特性の切り替えの説明図である。 実施の形態の周波数特性の切り替えの説明図である。 実施の形態の指向特性切り替えの説明図である。 実施の形態のマイクロフォン準備処理の他の例のフローチャートである。

以下、実施の形態を次の順序で説明する。
＜１．撮像装置による画像アップロード＞
＜２．撮像装置の構成＞
＜３．連写画像についての音声メモ＞
＜４．マイクロフォン音声についての処理＞
＜５．まとめ及び変形例＞

＜１．撮像装置による画像アップロード＞
実施の形態の撮像装置１は、撮像した画像を外部サーバにアップロードすることができる。まずこの画像アップロードについて説明する。
図１に撮像装置１、ＦＴＰサーバ４、ネットワーク６を示している。

撮像装置１としては、ビデオカメラやスチルカメラとしての各種の形態の撮像装置がある。図示する撮像装置１は、カメラマンや記者がスポーツやイベントの会場や取材現場などで用いるカメラを想定している。例えば一人のカメラマンが１台の撮像装置１を用いる場合もあるが、複数台の撮像装置１を用いる場合もある。
なお説明中、撮像装置１を「カメラ」と呼ぶ場合がある。

ネットワーク６は、例えばインターネット、ホームネットワーク、ＬＡＮ（Local Area Network）、衛星通信網、その他の各種のネットワークが想定される。
ＦＴＰサーバ４は、例えば新聞社、放送局、通信社などが運営するサーバが考えられる。もちろんそのようなサーバに限定されない。
ＦＴＰサーバ４の形態としてはクラウドサーバ、ホームサーバ、或いはパーソナルコンピュータなどが想定される。

撮像装置１は、ネットワーク６を介してＦＴＰサーバ４に撮像した画像データ等をアップロードすることができる。
例えば撮像装置１を使用するユーザが新聞社の仕事を行うプロカメラマンである場合、イベント会場で撮像した画像を、即時に撮像装置１からＦＴＰサーバ４にアップロードする、というようなシステム利用態様が想定される。
なおこのために、撮像装置１においてＦＴＰサーバ４にアップロードを行うためのＦＴＰ設定情報が登録される。ＦＴＰ設定情報の内容としては、ＦＴＰサーバ４のホスト名、保存先パス、ユーザ名、パスワード、接続種別などがある。
ユーザはこのようなＦＴＰ設定情報の内容を、撮像装置１の操作により入力し、もしくは外部機器からの転送入力などを行うことで、ＦＴＰ設定情報を撮像装置１内に登録させることができる。

本実施の形態の場合、撮像装置１からＦＴＰサーバ４へは、画像ファイルＰＦや音声ファイルＡＦがアップロード送信される状況を想定する。

撮像装置１では撮像動作により静止画や動画としての画像データを生成するとともに、付加情報としてのメタデータを生成する。
図１に示す画像ファイルＰＦとは、この画像データとメタデータを含むデータファイルであるとしている。

また本実施の形態の場合、撮像装置１は音声メモ機能を備える。これは、撮像画像に対する注釈、説明等を音声で付与することができる機能である。例えばユーザが特定の画像を指定した状態で所定操作をしながら発声を行ったり、１枚の静止画を撮像した際にカメラマンが所定の操作を行いながら画像内容を説明する発声を行ったりすることで、その音声が記録され、画像データと関連付けられた音声メモとされる。
図１に示す音声ファイルＡＦとは、この音声メモとしての音声データを含むデータファイルであるとする。
なお、動画撮像時には、周囲音声も音声トラックデータとして記録されるが、その音声トラックデータは画像ファイルＰＦに含まれる音声データであり、音声ファイルＡＦとは別である。説明上の音声ファイルＡＦは、あくまでも音声メモとしての音声データを含むファイルを指すものとする。
以下では、静止画撮像を想定し、画像ファイルＰＦには静止画像データとメタデータ、音声ファイルＡＦには静止画撮像に伴って生成された音声メモデータが含まれる例で説明していく。

なお、必ずしも全ての画像ファイルＰＦに音声ファイルＡＦが関連付けられているわけではなく、あくまでカメラマン等が音声メモ機能を用いて音声入力を行った場合にのみ、撮像装置１で音声ファイルＡＦが生成され、画像ファイルＰＦに関連付けられる。
従って撮像装置１からＦＴＰサーバ４へのアップロードの際には、画像ファイルＰＦと音声ファイルＡＦが対になって送信される場合と、画像ファイルＰＦのみの場合がある。

＜２．撮像装置の構成＞
図２は実施の形態の撮像装置１の前方からの斜視図、図３は背面図を示している。ここでは撮像装置１は、いわゆるデジタルスチルカメラとされ、撮像モードを切り換えることで、静止画撮像と動画撮像の両方を実行できるものとする。また、静止画撮影においては、レリーズ操作のたびに１枚の静止画を撮像する「単写モード」と、レリーズ操作によって連続的に複数枚の静止画を撮像する「連写モード」が設けられている。
なお、本実施の形態では撮像装置１は、デジタルスチルカメラに限定されず、主に動画撮像に用いられ静止画撮像も行えるビデオカメラであっても良い。

撮像装置１は、カメラ本体を構成する本体筐体１００の前方側にレンズ鏡筒２が配置され、又は着脱可能とされる。
撮像装置１の背面側（撮影者側）には、例えば液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（Electro-Luminescence）ディスプレイ等のディスプレイデバイスによる表示パネル１０１が設けられる。
またビューファインダー１０２として、ＬＣＤや有機ＥＬディスプレイ等を用いて形成された表示部も設けられる。またビューファインダー１０２は電子式ファインダー（ＥＶＦ：Electronic View Finder）に限らず、光学式ファインダー（ＯＶＦ：Optical View Finder）でもよい。

ユーザは表示パネル１０１やビューファインダー１０２により、画像や各種情報を視認することができる。
この例では撮像装置１には表示パネル１０１とビューファインダー１０２の両方が設けられているが、これに限定されず、表示パネル１０１とビューファインダー１０２のいずれか一方のみが設けられている構成や、表示パネル１０１とビューファインダー１０２の両方またはいずれか一方が着脱可能な構成であってもよい。

撮像装置１の本体筐体１００上には、各種の操作子１１０が設けられている。
例えば操作子１１０としては、キー、ダイヤル、押圧／回転の複合操作子などの各種の形態のものが配備され、各種の操作機能を実現している。例えばメニュー操作、再生操作、モード選択操作、フォーカス操作、ズーム操作、シャッタースピードやＦ値（F-number）等のパラメータの選択操作などが可能とされる。それぞれの操作子１１０に関しての詳述は避けるが、本実施の形態の場合、操作子１１０のうちでシャッターボタン１１０Ｓとアサイナブルボタン１１０Ｃを特に示している。
シャッターボタン１１０Ｓはシャッター操作（レリーズ操作）や、また半押しによるＡＦ操作に用いられる。

アサイナブルボタン１１０Ｃは、カスタムボタンとも呼ばれる操作子で、ユーザが任意の操作機能を割り当てることのできるボタンである。本実施の形態では、アサイナブルボタン１１０Ｃは、音声メモの記録や再生等の操作機能が割り当てられているとする。即ち、特定の状況下でアサイナブルボタン１１０Ｃを操作することにより、音声メモの記録や再生等を行うことができる。例えば、特定の状況でアサイナブルボタン１１０Ｃを長押しすることにより押下中の音声メモ記録が可能とされる。アサイナブルボタン１１０Ｃの長押しを解除することにより音声メモ記録が停止される。また、アサイナブルボタン１１０Ｃを短押しすることにより、記録された音声メモの再生がなされる。

シャッターボタン１１０Ｓは本体筐体１００の右側上面に配置され、例えばユーザが右手で握持部１０３を持った状態で、右手の人差し指で押圧操作可能とされている。
またアサイナブルボタン１１０Ｃは、例えば図２のように本体筐体１００の背面側上部に配置され、ユーザが右手の親指で押圧操作可能とされている。

なお、アサイナブルボタン１１０Ｃの代わりに、音声メモに関する機能を実行するための専用の操作ボタンが設けられてもよい。

また、表示パネル１０１などの表示部がタッチパネル機能を有している場合には、表示パネル１０１が操作子１１０のうちの一つとされていてもよい。

ビューファインダー１０２の両側方には、それぞれマイク孔１０４が形成されている。撮影者から見て左側のマイク孔１０４がマイク孔１０４Ｌとされ、右側のマイク孔１０４がマイク孔１０４Ｒとされている。
マイク孔１０４Ｌ及びマイク孔１０４Ｒが形成されていることにより、環境音や撮影者による発声をステレオ音声として取得することができる。それぞれのマイク孔１０４の内側には図示しないマイクロフォンがそれぞれ配設されている。

図４はレンズ鏡筒２を含めた撮像装置１の内部構成を示している。
撮像装置１は、例えばレンズ系１１、撮像部１２、カメラ信号処理部１３、記録制御部１４、表示部１５、通信部１６、操作部１７、カメラ制御部１８、メモリ部１９、ドライバ部２２、センサ部２３、音声入力部２５、音声処理部２６を有する。

レンズ系１１は、ズームレンズ、フォーカスレンズ等のレンズや絞り機構などを備える。このレンズ系１１により、被写体からの光（入射光）が導かれ撮像部１２に集光される。

撮像部１２は、例えば、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）型やＣＣＤ（Charge Coupled Device）型などのイメージセンサ１２ａ（撮像素子）を有して構成される。
この撮像部１２では、イメージセンサ１２ａで受光した光を光電変換して得た電気信号について、例えばＣＤＳ(Correlated Double Sampling)処理、ＡＧＣ(Automatic Gain Control)処理などを実行し、さらにＡ／Ｄ(Analog/Digital)変換処理を行う。そしてデジタルデータとしての撮像信号を、後段のカメラ信号処理部１３やカメラ制御部１８に出力する。

カメラ信号処理部１３は、例えばＤＳＰ（Digital Signal Processor）等により画像処理プロセッサとして構成される。このカメラ信号処理部１３は、撮像部１２からのデジタル信号（撮像画像信号）に対して、各種の信号処理を施す。例えばカメラプロセスとしてカメラ信号処理部１３は、前処理、同時化処理、ＹＣ生成処理、解像度変換処理、ファイル形成処理等を行う。

前処理では、撮像部１２からの撮像画像信号に対して、Ｒ，Ｇ，Ｂの黒レベルを所定のレベルにクランプするクランプ処理や、Ｒ，Ｇ，Ｂの色チャンネル間の補正処理等を行う。
同時化処理では、各画素についての画像データが、Ｒ，Ｇ，Ｂ全ての色成分を有するようにする色分離処理を施す。例えば、ベイヤー配列のカラーフィルタを用いた撮像素子の場合は、色分離処理としてデモザイク処理が行われる。
ＹＣ生成処理では、Ｒ，Ｇ，Ｂの画像データから、輝度（Ｙ）信号および色（Ｃ）信号を生成（分離）する。
解像度変換処理では、各種の信号処理が施された画像データに対して、解像度変換処理を実行する。

ファイル形成処理では、例えば以上の各種処理が施された画像データについて、例えば記録用や通信用の圧縮符号化、フォーマティング、メタデータの生成や付加などを行って記録用や通信用のファイル生成を行う。
例えば静止画ファイルとしてＪＰＥＧ（Joint Photographic Experts Group）、ＴＩＦＦ（Tagged Image File Format）、ＧＩＦ（Graphics Interchange Format）等の形式の画像ファイルＰＦの生成を行う。またＭＰＥＧ−４準拠の動画・音声の記録に用いられているＭＰ４フォーマットなどとしての画像ファイルＰＦの生成を行うことも考えられる。
なおロー（RAW）画像データとして画像ファイルＰＦを生成することも考えられる。

カメラ信号処理部１３は、メタデータについては、カメラ信号処理部１３内の処理パラメータの情報や、カメラ制御部１８から取得する各種制御パラメータ、レンズ系１１や撮像部１２の動作状態を示す情報、モード設定情報、撮像環境情報（日時や場所など）を含むものとして生成する。

記録制御部１４は、例えば不揮発性メモリによる記録媒体に対して記録再生を行う。記録制御部１４は例えば記録媒体に対し動画データや静止画データ等の画像ファイルやサムネイル画像等を記録する処理を行う。
記録制御部１４の実際の形態は多様に考えられる。例えば記録制御部１４は、撮像装置１に内蔵されるフラッシュメモリとその書込／読出回路として構成されてもよい。また記録制御部１４は、撮像装置１に着脱できる記録媒体、例えばメモリカード（可搬型のフラッシュメモリ等）に対して記録再生アクセスを行うカード記録再生部による形態でもよい。また記録制御部１４は、撮像装置１に内蔵されている形態としてＨＤＤ（Hard Disk Drive）などとして実現されることもある。

表示部１５は撮像者に対して各種表示を行う表示部であり、例えば撮像装置１の筐体に配置される液晶パネル（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（Electro-Luminescence）ディスプレイ等のディスプレイデバイスによる表示パネル１０１やビューファインダー１０２とされる。
表示部１５は、カメラ制御部１８の指示に基づいて表示画面上に各種表示を実行させる。
例えば表示部１５は、記録制御部１４において記録媒体から読み出された画像データの再生画像を表示させる。
また表示部１５にはカメラ信号処理部１３で表示用に解像度変換された撮像画像の画像データが供給され、表示部１５はカメラ制御部１８の指示に応じて、当該撮像画像の画像データに基づいて表示を行う場合がある。これにより構図確認中や動画記録中などの撮像画像である、いわゆるスルー画（被写体のモニタリング画像）が表示される。
また表示部１５はカメラ制御部１８の指示に基づいて、各種操作メニュー、アイコン、メッセージ等、即ちＧＵＩ（Graphical User Interface）としての表示を画面上に実行させる。

通信部１６は、外部機器との間のデータ通信やネットワーク通信を有線又は無線で行う。
例えば外部の表示装置、記録装置、再生装置等に対して撮像画像データ（静止画ファイルや動画ファイル）の送信出力を行う。
また通信部１６はネットワーク通信部として、例えばインターネット、ホームネットワーク、ＬＡＮ（Local Area Network）等の各種のネットワーク６による通信を行い、ネットワーク上のサーバ、端末等との間で各種データ送受信を行うことができる。例えば本実施の形態の場合、通信部１６は、撮像した画像データ（上述の画像ファイル等）をＦＴＰサーバ４にアップロードする通信処理を行う。
また本実施の形態の場合、通信部１６は、情報処理装置２との間で通信を行い、画像ファイルＰＦや音声ファイルＡＦの転送を実行する。

操作部１７は、ユーザが各種操作入力を行うための入力デバイスを総括して示している。具体的には操作部１７は撮像装置１の筐体に設けられた各種の操作子（キー、ダイヤル、タッチパネル、タッチパッド等）を示している。
操作部１７によりユーザの操作が検知され、入力された操作に応じた信号はカメラ制御部１８へ送られる。
操作部１７としては、先に述べたシャッターボタン１１０Ｓやアサイナブルボタン１１０Ｃが設けられている。

カメラ制御部１８はＣＰＵ（Central Processing Unit）を備えたマイクロコンピュータ（演算処理装置）により構成される。
メモリ部１９は、カメラ制御部１８が処理に用いる情報等を記憶する。図示するメモリ部１９としては、例えばＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、フラッシュメモリなどを包括的に示している。
メモリ部１９はカメラ制御部１８としてのマイクロコンピュータチップに内蔵されるメモリ領域であってもよいし、別体のメモリチップにより構成されてもよい。
カメラ制御部１８はメモリ部１９のＲＯＭやフラッシュメモリ等に記憶されたプログラムを実行することで、この撮像装置１の全体を制御する。
例えばカメラ制御部１８は、撮像部１２のシャッタースピードの制御、カメラ信号処理部１３における各種信号処理の指示、ユーザの操作に応じた撮像動作や記録動作、記録した画像ファイルの再生動作、レンズ鏡筒におけるズーム、フォーカス、絞り調整等のレンズ系１１の動作、ユーザインタフェース動作、音声処理部２６の処理等について、必要各部の動作を制御する。

メモリ部１９におけるＲＡＭは、カメラ制御部１８のＣＰＵの各種データ処理の際の作業領域として、データやプログラム等の一時的な格納に用いられる。
メモリ部１９におけるＲＯＭやフラッシュメモリ（不揮発性メモリ）は、ＣＰＵが各部を制御するためのＯＳ（Operating System）や、画像ファイル等のコンテンツファイルの他、各種動作のためのアプリケーションプログラムや、ファームウェア、各種の設定情報等の記憶に用いられる。
各種の設定情報としては、上述のＦＴＰ設定情報や、撮像動作に関する設定情報としての露出設定、シャッタースピード設定、モード設定や、画像処理に係る設定情報としてのホワイトバランス設定、色設定、画像エフェクトに関する設定や、音声処理部の処理に関する設定（例えば音量、音質、その他の処理に関するパラメータの設定）、操作性に係る設定情報としてのカスタムキー設定や表示設定などがある。

ドライバ部２２には、例えばズームレンズ駆動モータに対するモータドライバ、フォーカスレンズ駆動モータに対するモータドライバ、絞り機構のモータに対するモータドライバ等が設けられている。
これらのモータドライバはカメラ制御部１８からの指示に応じて駆動電流を対応するドライバに印加し、フォーカスレンズやズームレンズの移動、絞り機構の絞り羽根の開閉等を実行させることになる。

センサ部２３は、撮像装置に搭載される各種のセンサを包括的に示している。
センサ部２３としては例えばＩＭＵ（inertial measurement unit：慣性計測装置）が搭載されており、例えばピッチ、ヨー、ロールの３軸の角速度（ジャイロ）センサで角速度を検出し、加速度センサで加速度を検出することができる。
またセンサ部２３としては、例えば位置情報センサ、照度センサ等が搭載される場合もある。

音声入力部２５は例えばマイクロフォン及びマイクアンプ等を有し、周囲音声を収音した音声信号を出力する。本実施の形態において、マイクロフォンとしては、マイク孔１０４Ｌに対応したマイクロフォン２５Ｌと、マイク孔１０４Ｒに対応したマイクロフォン２５Ｒが設けられている。

音声処理部２６は、音声入力部２５で得られた音声信号についてデジタル音声信号に変換する処理や、ＡＧＣ処理、音質処理、ノイズリダクション処理などを行う。これらの処理を経た音声データはカメラ信号処理部１３やカメラ制御部１８に出力される。
例えば音声データは、動画撮像時にはカメラ制御部１８において動画に付随する音声データとして処理される。

また、再生時や撮像時などに撮影者によって入力される音声メモとしての音声データは、カメラ信号処理部１３或いはカメラ制御部１８において音声ファイルＡＦとしてファイル化される。
音声ファイルＡＦは、記録制御部１４において画像ファイルＰＦに対応づけられて記録媒体に記録されたり、通信部１６から画像ファイルＰＦとともに送信出力されたりすることができる。

音声再生部２７は音声信号処理回路、パワーアンプ、スピーカー等を備え、記録制御部１４によって記録媒体に記録された音声ファイルＡＦの再生を行う。例えば音声ファイルＡＦの再生時には、カメラ制御部１８の制御に基づき記録制御部１４により音声ファイルＡＦの音声データの読み出しが行われ、音声再生部２７に転送される。音声再生部２７は音声データについて必要な信号処理やアナログ信号への変換を行い、パワーアンプを介してスピーカーから音声出力を行う。これによりユーザは音声メモとして記録した音声を聞くことができる。
なお、動画の再生時には、動画に付随する音声の再生が音声再生部２７で行われることになる。

＜３．連写画像についての音声メモ＞
撮像装置１の表示パネル１０１におけるＵＩ画面について説明する。特には、連写画像及び音声メモに関する表示例を主に説明する。なお、以下で説明する各画面は、撮像装置１のカメラ制御部１８がＵＩ制御を行うことにより表示部１５の表示パネル１０１に表示される画面の一例である。

図５は、撮像装置１で撮像された画像（静止画像や動画像）が一覧で視認可能な画像一覧画面５０を示している。
画像一覧画面５０は、例えば、再生モードにおいて表示パネル１０１に表示される画面である。

画像一覧画面５０には、時刻情報やバッテリの充電状態を示すインジケータ等が表示されるステータスバー１２１と、複数の撮像画像ごとのサムネイル画像１２２が表示されている。

サムネイル画像１２２としては、単写モードで撮像された１枚の画像についてのサムネイル画像１２２Ａと、連写モードで撮像された複数枚の画像がまとめられた状態が表される画像グループについてのサムネイル画像１２２Ｂのいずれかが表示される。

画像グループについてのサムネイル画像１２２Ｂは、画像グループに含まれる複数の画像のうちの一枚の画像が代表画像として選択される。サムネイル画像１２２Ｂに用いられる撮像画像は、ユーザによって選択されてもよいし、自動で選択されてもよい。
例えば、連写モードで撮像された複数枚の画像のうち、最初に撮像された画像が自動的に代表画像として選択されサムネイル画像１２２Ｂに用いられる。

画像グループについてのサムネイル画像１２２Ｂには、画像グループであることを示す画像グループアイコン１２３が重畳表示される。

連写モードで撮影された複数枚の画像が自動的にまとめられて画像グループとして生成されるだけでなく、ユーザによって選択された複数枚の画像が画像グループとして生成されてもよい。

画像一覧画面５０においていずれかのサムネイル画像１２２が選択操作されると、表示パネル１０１の表示は次の画面に切り換えられる。
例えば、単写モードで撮像された画像についてのサムネイル画像１２２Ａが選択されると、選択された画像が大きく表示される画面へと切り替わる。
また、画像グループについてのサムネイル画像１２２Ｂが選択されると、選択された画像グループを表示する画面へと切り替わる（図６参照）。

図６に示す画面は、複数枚の画像が展開されずに表示される画像グループ専用の画面であり、画像グループ展開前表示画面５１とされる。
画像グループ展開前表示画面５１では、代表画像１２４が表示されると共に、画像グループに複数枚の画像が含まれていることを示す枠画像１２５が表示されている。

画像グループ展開前表示画面５１の代表画像１２４などに対する操作を行うと、図７に示す画像グループ展開後表示画面５２が表示パネル１０１に表示される。
画像グループ展開後表示画面５２には、画像グループに属する複数の画像のうちの一枚が選択されて表示される。図７では、連写モードによって撮像された一連の画像群のうち、最初に撮像された画像が表示画像１２６として表示されている。
また、展開後表示画面５２には、画像グループに属する画像の総枚数と表示位置を示す枚数表示１２７が表示される。図７の枚数表示１２７は、１４枚から成る画像グループにおける１枚目の画像が表示されていることを示している。

画像グループ展開後表示画面５２においては、スワイプ操作やボタン操作により画像送り操作が可能である。画像送り操作は、表示画像１２６を別の画像に変更する操作であり、画像送り操作を複数回行った後に表示される画像グループ展開後表示画面５２を示した図が図８である。
図８は、画像グループに属する１４枚の画像のうち、５枚目が表示された状態を示している。

図８に示す状態からアサイナブルボタン１１０Ｃの長押しを行うと、音声メモの記録が開始される。音声メモの記録は、アサイナブルボタン１１０Ｃの長押し状態が解除されるか、或いは、音声メモの記録時間が所定時間に達した場合に終了する。
また、音声メモは、アサイナブルボタン１１０Ｃの長押しを行った際に表示パネル１０１に表示されている表示画像１２６に紐付けられて記憶される。本例では、図８に示す状態からアサイナブルボタン１１０Ｃの長押しを行ったため、画像グループの５枚目の画像に音声メモが紐付けられる。

音声メモの記録中は、図９に示す音声メモ記録画面５３が表示パネル１０１に表示される。
音声メモ記録画面５３では、記録中を示す記録アイコン１２８と、マイクロフォン２５Ｌ，マイクロフォン２５Ｒのそれぞれの入力レベルを示す記録レベルゲージ１２９と、記録時間と記録残り時間を示す記録時間バー１３０が表示される。
図９に示す例では、最大記録時間は６０秒とされ、そのうち記録済みの時間は３５秒であることが示されている。

６０秒の記録を終えた後、或いは、最大記録時間に達する前にアサイナブルボタン１１０Ｃの長押し状態が解除された後、表示パネル１０１には図１０に示す画像グループ展開後表示画面５２が表示される。図１０は、図８と同様に、画像グループに属する１４枚の画像のうち、５枚目が表示された状態を示している。また、この画像に音声メモが関連付けられていることを示す音声メモアイコン１３１が画像に重畳表示される。

図１０に示す状態から、戻るボタンの押下など、画像グループの展開表示を解除する操作が行われると、表示パネル１０１には図６に示す画像グループ展開前表示画面５１が表示される。図６に示す画像グループは、５枚目の画像に対応する音声メモが記録された状態であるが、表示パネル１０１に表示される代表画像１２４は、画像グループに属する１枚目の画像であり、当該１枚目の画像には対応する音声メモが存在しないため、音声メモアイコン１３１は表示されていない。
なお代表画像１２４に対応する音声メモが記録されている場合には、図１１に示すように、画像グループ展開前表示画面５１に音声メモアイコン１３１が表示される。

５枚目の画像に音声メモを関連付けた後に展開表示を解除することで表示される画像グループ展開前表示画面５１の変形例を図１１及び図１２で説明する。
上記では、代表画像１２４に対応する音声メモが記録されている場合に、図１１に示すように、画像グループ展開前表示画面５１に音声メモアイコン１３１が表示されるとしたが、変形例としては、代表画像１２４として選択されている１枚目の画像には対応する音声メモが存在しないものの、画像グループに属する画像の少なくとも１枚（例えば５枚目の画像）に音声メモが関連付けられていることから、画像グループに属する画像に音声メモが含まれた画像があることを示すために、図１１のように音声メモアイコン１３１が表示されるようにしてもよい。
これにより、ユーザは、画像グループの展開表示を行わなくても対応する音声メモが存在する画像の有無を音声メモアイコン１３１により認識することができる。

また、図１２に示す変形例では、画像グループに属する画像において対応する音声メモが存在する画像のうちの一枚（例えば５枚目の画像）が代表画像１２４として新たに選択された例である。
即ち、ユーザは、図１２に示す画像グループ展開前表示画面５１を視認するだけで、画像グループのいずれかの画像に対応する音声メモが存在すること、音声メモが存在する画像のうちの少なくとも１枚は代表画像１２４として選択された画像であることを認識することができる。

ところで、例えば図１０に示す画像グループ展開後表示画面５２において、即ち、音声メモが存在する画像が表示画像１２６として表示された画像グループ展開後表示画面５２において、アサイナブルボタン１１０Ｃの短押し操作など、音声メモの再生操作が行われた場合には、図１３に示す音声メモ再生画面５４が表示パネル１０１に表示される。

音声メモ再生画面５４においては、再生対象の音声メモが紐付けられた画像の上に、音声メモアイコン１３１と、音声メモを再生中であることを示す再生アイコン１３２と、音声メモの記録時間と再生済みの秒数を示す再生時間バー１３３が表示される。
再生アイコン１３２は、例えば、図９に示す記録アイコン１２８と同形状且つ異なる色のアイコン画像とされている。
図ｌ３に示す例では、音声メモの記録時間長が４８秒とされ、再生開始から２７秒後の部分が再生中であることが示されている。
また音声メモ再生画面５４では、左チャネルと右チャネルの再生レベルを示す再生レベルゲージ１３４が表示されている。

図１０に示す画像グループ展開後表示画面５２において、即ち、対応する音声メモが存在する画像が表示画像１２６として表示されている画像グループ展開後表示画面５２において、音声メモの削除等を行うための操作を行った場合には、表示パネル１０１に図１４に示す削除対象選択画面５５が表示される。

削除対象選択画面５５は、三つの操作可能な選択肢がユーザに提示される。具体的には、画像ファイルＰＦと音声メモとしての音声ファイルＡＦの双方を削除する第１選択肢１３５と、音声メモとしての音声ファイルＡＦの削除のみを行い画像ファイルＰＦは記録したままにする第２選択肢１３６と、削除操作をキャンセルする第３選択肢１３７が表示される。

第１選択肢１３５及び第２選択肢１３６の何れかを操作した場合に削除される画像ファイルＰＦや音声ファイルＡＦは、削除操作を行う際に表示パネル１０１に表示されている表示画像１２６についてのファイルである。

第１選択肢１３５及び第２選択肢１３６の何れかを操作した場合には、表示パネル１０１に図１５に示す削除中画面５６が表示される。

削除中画面５６では、削除中であることを示すメッセージ１３８と削除処理の進行度合いを示す削除バー１３９と削除処理をキャンセルするためのキャンセルボタン１４０とが表示される。
削除中画面５６が表示されている状態でユーザがキャンセルボタン１４０を操作すると、削除対象のファイルの削除がキャンセルされる。

キャンセルボタン１４０が操作されずにファイルの削除に要する時間が経過すると、表示パネル１０１には図１６に示す削除完了画面５７が表示される。

削除完了画面５７には、削除が完了したことを示すメッセージ１４１と削除が完了したことを確認した際に操作される確認ボタン１４２が表示される。

図６に示す画像グループ展開前表示画面５１において削除等を行うための操作を行った場合には、表示パネル１０１に図１７に示す削除選択画面５８が表示される。
削除選択画面５８では、画像グループに属する全ての画像を一括で削除するための全削除選択肢１４３と削除操作をキャンセルするためのキャンセル選択肢１４４が表示される。

なお、画像グループに属する画像の何れかに紐付けられた音声メモとしての音声ファイルＡＦが存在している場合に全削除選択肢１４３を操作すると、画像ファイルＰＦだけでなく関連付けられた音声ファイルＡＦも削除されるようにすることが考えられる。
なお、画像グループの何れかに紐付けられた音声メモとしての音声ファイルＡＦだけを削除するための選択肢が設けられていてもよい。

音声メモが紐付けられていない画像が表示画像１２６として表示された状態（例えば図７に示す状態）で削除操作を行った場合には、表示パネル１０１に図１８に示す削除選択画面５９が表示される。
削除選択画面５９には、画像ファイルＰＦを削除するための削除選択肢１４５と削除操作をキャンセルするためのキャンセル選択肢１４６が表示される。
削除選択肢１４５を操作すると、画像の削除が開始され、例えば、図１５に示す削除中画面５６などが表示される。
また、キャンセル選択肢１４６を操作すると、削除操作がキャンセルされ、キャンセル操作を行う前の画面（例えば図７に示す画面）に戻る。

続いてアサイナブルボタン操作に対するカメラ制御部１８の処理例を図１９で説明する。上述のようにアサイナブルボタン１１０Ｃは、音声メモの操作に割り当てられているとする。

カメラ制御部１８はステップＳ２０１で、アサイナブルボタン１１０Ｃの押下を始めてから所定時間経過したか否かを判定する。所定時間経過していない場合、カメラ制御部１８はステップＳ２０２でアサイナブルボタン１１０Ｃがまだ押下中であるか否かを判定する。
アサイナブルボタン１１０Ｃが押下中である場合は、カメラ制御部１８はステップＳ２０１へと戻り、所定時間が経過したかを判定する。

即ちアサイナブルボタン１１０Ｃが長押しされた場合、カメラ制御部１８は所定時間が経過するまではステップＳ２０１及びステップＳ２０２を繰り返し実行し、所定時間が経過した時点でステップＳ２０１からステップＳ２０３へと進む。

一方、所定時間が経過する前にアサイナブルボタン１１０Ｃの押下状態が解消された場合、例えば、アサイナブルボタン１１０Ｃを短時間押下した場合などは、カメラ制御部１８はステップＳ２０２からステップＳ２０８の処理へと進む。

即ち、アサイナブルボタン１１０Ｃが長押しされた場合に実行される処理がステップＳ２０３以降の処理であり、アサイナブルボタン１１０Ｃが短押しされた場合に実行される処理がステップＳ２０８以降の処理である。

アサイナブルボタン１１０Ｃが長押しされた場合、カメラ制御部１８はステップＳ２０３において、音声メモ記録の開始制御を実行する。例えばカメラ制御部１８は、音声入力部２５から入力される音声信号について、音声処理部２６、カメラ信号処理部１３、記録制御部１４の処理により、音声ファイルＡＦとして記録媒体に記録させる一連の動作を開始させる。例えばこの時点では、最大６０秒の間、マイクロフォン２５Ｌ、２５Ｒによる入力音声に基づく音声データをカメラ信号処理部１３でバッファリングしていく処理を開始させる。

カメラ制御部１８はステップＳ２０４でアサイナブルボタン１１０Ｃが押下中であるか否かを判定し、押下中である場合は、ステップＳ２０５で最大記録時間（例えば６０秒）が経過したか否かを判定する。

最大記録時間が経過したと判定した場合、即ち、アサイナブルボタン１１０Ｃが押下され続けているが最大記録時間が経過していない場合、カメラ制御部１８はステップＳ２０４に戻る。
一方、ステップＳ２０４でアサイナブルボタン１１０Ｃを押下中でないと判定した場合や、ステップＳ２０５で最大記録時間が経過したと判定した場合、カメラ制御部１８はステップＳ２０６で記録停止制御を行う。例えばカメラ制御部１８は、音声入力部２５から入力される音声信号について、音声処理部２６の処理を介して、カメラ信号処理部１３内でバッファリングしていく処理を停止させる。

そしてカメラ制御部１８はステップＳ２０７で音声メモとしての音声ファイルＡＦを生成して記憶媒体に記憶させる処理を実行させる。即ちカメラ信号処理部１３にバッファリングされた音声データについて圧縮処理やファイルフォーマット生成処理などを実行させ、所定のファイルデータ形式（例えばＷＡＶファイル）としたデータを記録制御部１４によって記録媒体に記録させる。
以上によりカメラ制御部１８は図１９に示す一連の音声メモ記録時の処理を終了する。

これにより、ユーザがアサイナブルボタン１１０Ｃの押下を続けると、所定時間経過後に長押しと判定されて音声メモ記録処理が開始され、押下状態が解消されるか或いは記録時間が最大記録時間に達するまで音声メモの記録処理が行われる。
記録時間が最大記録時間に達した場合や記録時間が最大記録時間に達する前にアサイナブルボタン１１０Ｃの長押し状態が解除されると、音声メモの記録が停止されることになる。

ステップＳ２０２でアサイナブルボタン１１０Ｃを短時間押下する操作がなされたと判定した場合、カメラ制御部１８はステップＳ２０８で表示パネル１０１に表示されている画像に関連付けられた音声メモが存在するか否かを判定する。関連付けられた音声メモが存在しない場合、カメラ制御部１８は図１９に示す一連の処理を終了する。

ステップＳ２０８で画像に関連付けられた音声メモが存在すると判定した場合、カメラ制御部１８はステップＳ２０９で音声メモの再生開始制御を実行する。例えばカメラ制御部１８は、記録制御部１４に特定の音声ファイルＡＦの再生開始を指示するとともに音声再生部２７に再生動作を指示する。

カメラ制御部１８は、音声メモ再生中は、ステップＳ２１０で再生終了したか否かを判定し、ステップＳ２１１で再生終了操作を検出したか否かを判定し、ステップＳ２１２で音量変更操作を検出したか否かを判定する。

ステップＳ２１０で再生終了と判定した場合、即ち、再生出力が音声データの最後まで到達した場合、カメラ制御部１８はステップＳ２１４で記録制御部１４と音声再生部２７の再生動作についての再生停止制御を行って図１９に示す一連の処理を終了する。
また、ステップＳ２１０で再生終了していないと判定した場合、カメラ制御部１８ステップＳ２１１で再生終了操作を検出したか否かを判定し、再生終了操作を検出した場合はステップＳ２１４で記録制御部１４と音声再生部２７の再生動作についての再生停止制御を行ったうえで図１９に示す一連の処理を終了する。

更に、再生終了操作を検出しなかった場合は、カメラ制御部１８はステップＳ２１２で音量変更操作を検出したか否かを判定し、音量変更操作を検出した場合は、ステップＳ２１３で音声再生部２７に対し再生音量の変更制御を行い、ステップＳ２１０へ戻る。音量変更操作を検出していない場合は、ステップＳ２１２からステップＳ２１０へ戻る。

なお、各図では省略したが、電源ＯＦＦ操作を検出した場合は、表示パネル１０１の表示を停止する処理が適宜行われる。

ところで上述した例では、アサイナブルボタン１１０Ｃに音声メモ関連の機能が集約されている例を説明したが、それ以外の操作子１１０を操作することで音声メモ関連の機能が実行されるように構成してもよい。その場合には、アサイナブルボタン１１０Ｃの操作を検出する処理については、該当する操作子１１０の操作を検出する処理として読み替えることで同等の作用効果を得ることができる。
また、一つの操作子１１０に音声メモ関連の機能が集約されている場合だけでなく、複数のボタンを所定の手順で操作することにより音声メモについての機能を実行するように構成してもよい。例えば、１枚の画像が表示パネル１０１に表示されている状態でメニュー画面を表示させる操作を行い、表示されたメニューから音声メモについての項目を選択する操作を行い、更にその中から実行させたい機能として音声メモの記録機能や再生機能を選択することにより各種の機能が実行されるように構成してもよい。
その場合には、アサイナブルボタン１１０Ｃの操作を検出する代わりに該当のメニュー項目が選択されたことを検出する処理を実行すればよい。

音声メモが既に関連付けられている状態において音声メモの記録操作（図１９のステップＳ２０１において検出される操作）が検出された場合に、いくつかの処理例が考えられる。
例えば、音声メモを削除しない限り新たな音声メモを当該画像に関連付けることができないようにしてもよい。その場合には、ステップＳ２０１の処理の後に、対象の画像に既に関連付けられた音声メモが存在するか否かを判定する処理を実行し、音声メモが関連付けられていない場合にステップＳ２０３以降の処理を実行する。

また、既に紐付けられた音声メモが最大記録時間に達していない場合には音声メモの追加記録を許可し、音声メモが最大記録時間に達している場合には音声メモの記録操作を無効としてもよい。その場合には、ステップＳ２０１で記録操作を検出した後に、既に関連付けられた音声メモが存在しているかを判定し、存在している場合には記録時間が残存しているかを判定し、残存している場合には追加記録を行うように処理を行う。

更に、既に紐付けられた録音メモがあったとしても、音声メモの記録操作が行われた場合には既に関連付けられた音声メモを破棄し新たに音声メモを記録するように構成してもよい。

更にまた、一つの画像に複数の音声メモが関連付けられるように構成してもよい。その場合には、音声メモとしての音声ファイルＡＦのファイル名は、紐付けられた画像ファイルＰＦを特定できるだけでなく、複数の音声メモが異なるファイル名となるように命名される。

上述した各例においては、１枚の画像ファイルＰＦに対して音声メモとしての音声ファイルＡＦが紐付けられる例を説明したが、画像グループ全体に関連付けられた音声ファイルＡＦの記録が許可されていてもよい。その場合には、例えば、複数の画像を一つの画像グループとしてまとめるための管理ファイルに画像グループ全体に関連付けられた音声ファイルＡＦを特定する情報を記録することで実現可能である。

＜４．マイクロフォン音声についての処理＞
本実施の形態では、音声メモのための収音はマイクロフォン２５Ｌ、２５Ｒを用いる。
マイクロフォン２５Ｌ、２５Ｒは、動画撮像時の周囲音の収音に用いるために搭載されている。つまり、マイクロフォン２５Ｌ、２５Ｒは、動画音声と音声メモの収音に共用される。
なお本開示では、動画と共に記録する動画と同期した音声を、説明上、音声メモと区別するために「動画音声」と表記する。

マイクロフォン２５Ｌ、２５Ｒにより収音された音声信号は、上述のように音声処理部２６でデジタル音声信号（音声データ）に変換され、ＡＧＣ処理、音質処理、ノイズリダクション処理などが行われるが、本実施の形態では、動画記録時（つまり動画音声の記録時）と、音声メモ記録時とで、これらの音声信号処理に関するパラメータが異なるようにする制御を行う。

図２０に音声処理部２６のパラメータに関するカメラ制御部１８の制御処理の例を示す。
この図２０の処理は、音声データの記録が開始されることになった時点で呼び出されるマイクロフォン準備処理である。例えばユーザによって動画記録の操作が行われて動画記録が開始されるときや、記録スタンバイの操作が行われ、その後の操作で動画記録が開始される可能性があるとき、或いは音声メモの記録操作が行われたときなどに、カメラ制御部１８がこのマイクロフォン準備処理を行う。

ステップＳ３０１でカメラ制御部１８は、今回のマイクロフォン準備処理が、動画音声の記録機会の処理か、音声メモの記録機会の処理かを判定する。
そして音声メモ記録機会であれば、カメラ制御部１８はステップＳ３０２に進み、音声処理部２６に対して音声メモ用のパラメータ設定を行う。
また動画音声の記録機会であれば、カメラ制御部１８はステップＳ３０３に進み、音声処理部２６に対して動画音声用のパラメータ設定を行う。
そしていずれ場合もカメラ制御部１８はステップＳ３０４でマイクロフォン２５Ｌ、２５Ｒのオン制御（マイクアンプの通電等）を行い、マイクロフォン２５Ｌ、２５Ｒによる収音した音声信号の音声処理部２６への供給を開始させる。

このような処理により、音声メモ記録時と、動画音声記録時では、音声処理部２６での処理特性等が異なるように制御される。ステップＳ３０２，Ｓ３０３のパラメータ設定による処理の変化の具体的な例を以下挙げていく。

・ＡＧＣ特性
音声処理部では、マイクロフォン２５Ｌ、２５Ｒにより得られるアナログ信号段階の音声信号、もしくはデジタルデータ化後の音声データについてＡＧＣ処理を行っている。このＡＧＣ処理のパラメータを変更してＡＧＣ特性を変化させる。
図２１は動画記録時のＡＧＣ特性Ｓｍと、音声メモ記録時のＡＧＣ特性Ｓｖの例を示している。縦軸は出力（ｄＢＦＳ）、横軸は入力音圧（ｄＢＳＰＬ）である。

動画音声に関しては、できるだけ広いダイナミックレンジを確保しつつ、音の歪みが生じないようにレベルコントロールが行われるようにすることで、動画に合わせて高品質な音声が得られるようにする。このため例えばＡＧＣ特性Ｓｍのような特性とする。
一方で音声メモは、あくまで後の再生時に、声による音声メモが明瞭に聞き取れることが重要である。このため小さい声であっても音圧レベルを上げて聞き取りやすくする一方、過大音圧による歪みを極力避けるためにコンプレッションがかかりやすくしたい。またダイナミックレンジの確保は重要ではない。そこで例えばＡＧＣ特性Ｓｖのような特性とする。
このような制御により、動画音声と音声メモは、それぞれ目的に合致した適切な音圧レベルの音声データとして記録されることになる。

なおＡＧＣ処理ではなく、或いはＡＧＣ処理の前段などで、音声信号（音声データ）に固定の入力ゲインを与える場合に、その入力ゲインを可変設定する場合もある。
その場合、動画音声の場合とで音声メモの場合とでパラメータ制御により入力ゲインを切り替えてもよい。例えば音声メモは撮像装置１に極めて近い位置で発声されることに応じて、入力ゲインを低めに設定することが考えられる。
また動画音声の入力ゲインをユーザが可変設定できる場合もある。そこで、動画音声のときは入力ゲインをユーザ設定のゲイン、音声メモのときは入力ゲインを固定設定したゲインとすることも考えられる。

・周波数特性
音声処理部２６において音声データについてフィルタ処理やイコライジング処理により、周波数特性の調整や帯域制限等を行う。この場合に周波数特性を設定するパラメータを切り替えることで、音声メモと動画音声にそれぞれ適した処理が行われるようにする。
図２２に動画記録時の周波数特性Ｆｍと、音声メモ記録時の周波数特性Ｆｖの例を示している。縦軸は出力（ｄＢＦＳ）、横軸は周波数（Ｈｚ）である。

動画音声に関しては、人の声だけに限らず多様な環境音を収録することが求められる。このため例えば周波数特性Ｆｍのように比較的広い帯域でフラットとなる周波数特性が適している。
一方、音声メモは、収録目的が人の声であり、他はノイズとなる。そこで、例えば１ｋＨｚ近辺を中心に比較的狭い帯域をターゲットとする周波数特性Ｆｖを設定する。これにより人の声を収音し易くする一方、他の環境音、風切音等が減衰されるようにする。

・サンプリング周波数
音声処理部２６ではＡ／Ｄ変換処理によりマイクロフォン２５Ｌ、２５Ｒにより得られるアナログ音声信号をデジタルデータに変換するが、動画音声に関しては、サンプリング周波数を４８ｋＨｚ、１６ビット量子化の音声データに変換している。これにより比較的高音質な音声データが得られる。
一方で音声メモの場合は、さほどの高音質化は求められない。そこでＡ／Ｄ変換処理のサンプリング周波数を指定するパラメータの切り替えを行い、例えば音声メモ記録の場合は、Ａ／Ｄ変換処理のサンプリング周波数を、例えば３２ｋＨｚであるとか１６ｋＨｚにするなどのように低下させることが考えられる。サンプリング周波数を低下させることにより、音声メモとしての音声データのデータ量も低減される。

音声メモは、音声ファイルＡＦとして画像ファイルＰＦとは別体のファイルで保存される。またＦＴＰサーバ４へのアップロードの際も、音声ファイルＡＦと画像ファイルＰＦとがそれぞれ送信される。音声ファイルＡＦが画像ファイルＰＦに対する付加的な情報であることを考えると、データサイズが小さくなることは、必要な記録容量の負担を少なくすることや、送信データ量／送信時間の低減に繋がることとなり、望ましい。
なお構成上可能であれば、音声メモの場合は量子化ビット数を低下させてもよい。

・チャネル数
本実施の形態ではマイクロフォン２５Ｌ、２５Ｒを用意し、２チャネルステレオの音声データを生成している。動画音声としてはステレオ音声であることで、臨場感がある音声収録が実現される。
一方で音声メモに関しては、ステレオ音声データであってもよいが、その必要性は動画音声の場合ほどではない。そこでチャネル数を指定するパラメータの切り替えを行うことが考えられる。

即ちカメラ制御部１８は、動画音声の場合は、チャネル設定パラメータによりステレオ音声データの処理を音声処理部２６に指示し、音声メモの場合はモノラル音声データ処理を音声処理部２６に指示する。
モノラル音声データ処理は、例えばマイクロフォン２５Ｌ、２５ＲによるＬチャネル音声信号とＲチャネル音声信号をミキシングしてモノラル音声信号とし、これに対して必要な信号処理を行うものとする。或いは、マイクロフォン２５Ｌ、２５Ｒのいずれか一方からの音声信号のみを用いるようにしてもよい。
動画音声の場合は２チャネルステレオ、音声メモの場合はモノラルとすることで、音声メモ（音声ファイルＡＦ）のデータ量を低減できる。従って必要な記録容量の負担を少なくすることができ、また送信データ量／送信時間の低減の点でも望ましい。

・圧縮率
音声データについて圧縮処理を行う場合に、圧縮率を変更することが考えられる。即ち動画音声と音声メモの場合で、圧縮処理における圧縮率を指定するパラメータを切り替える。
音質を重視する動画音声の場合は、比較的低い圧縮率とする。一方、データサイズを小さくすることが望ましい音声メモの場合は、比較的高い圧縮率とする。

・指向特性
指向特性を音声処理部２６の信号処理において例えばビームフォーミング等の手法を用いてコントロールすることができる。
なお、本実施の形態ではマイクロフォン２５Ｌ、２５Ｒとして２つのマイクロフォンを備えているが、３以上のマイクロフォンを搭載すれば、より指向特性の制御がし易くなる。
図２３は動画記録時の指向特性Ｄｍと、音声メモ記録時の指向特性Ｄｖの例を示している。

動画音声の場合は、撮像している被写体方向の音声を主に収音したい。そこで指向特性Ｄｍのように、それぞれＬチャネル側のマイクロフォン２５Ｌは左前方、Ｒチャネル側のマイクロフォン２５Ｒに右前方に指向性を持つようにする。
音声メモの場合は、撮像装置１を使用するユーザが、例えば表示部１５で画像を確認しながら声を発することになる。つまり撮像装置１にとっては後方からの音声となる。そこで指向特性Ｄｖのように後方側に指向性をもつようにする。
このように制御することで、それぞれに適した収音が行われる。

以上のように、図２０のステップＳ３０２，Ｓ３０３のパラメータ設定による処理の変化の例は各種考えられる。これら以外にも、例えばノイズリダクション処理、リバーブ処理、音響効果処理などについて、動画音声の場合と音声メモの場合とで、処理パラメータを変更し、処理内容を変化させることが想定される。
そしてステップＳ３０２，Ｓ３０３では、以上のいずれか１つのパラメータに関してのパラメータ設定制御を行ってもよいし、複数のパラメータに関してのパラメータ設定制御を行うようにしてもよい。

図２４はカメラ制御部１８のマイクロフォン準備処理としての他の例を示している。これはカメラ制御部１８が動作モードの切り替えを監視してパラメータ切り替えを行う例である。動作モードとしては例えば、静止画撮像や動画撮像を行う撮像モード、画像再生を行う再生モード、各種の設定を行う設定モードなどがある。撮像モードでは静止画撮像モードと動画撮像モードが分けられる場合もある。
ここでは音声メモの記録は、再生モードにおいて、ユーザが静止画を再生表示させた状態で音声メモ記録の操作を行った場合に行われるものとする。

ステップＳ３１１でカメラ制御部１８は、例えばユーザの操作に基づく動作モードの変更として、再生モードへの遷移があったか否かを確認し、またステップＳ３１２では再生モードが終了して他のモード（例えば撮像モード）への遷移があったか否かを確認する。

再生モードへの遷移があったときは、カメラ制御部１８はステップＳ３１１からステップＳ３１３に進み、音声処理部２６に対して音声メモ用のパラメータ設定を行う。
また再生モードの終了の際には、カメラ制御部１８はステップＳ３１２からステップＳ３１４に進み、音声処理部２６に対して動画音声用のパラメータ設定を行う。

再生モードの際には、音声データの記録が行われる機会は、音声メモ記録の場合のみである。そこで再生モードの期間は、音声処理部２６に対して音声メモ用のパラメータ設定を行っておくものとする。
また再生モードではないときには、音声データの記録が行われる機会は、動画記録の場合のみであるとすると、音声処理部２６に対して動画音声用のパラメータ設定を行っておけばよい。
このようにすることで、音声データの記録開始に先だって適切なパラメータ設定で準備しておくことができる。
実際に音声データの記録が開始されるときには、カメラ制御部１８はマイクロフォン２５Ｌ、２５Ｒのオン制御（マイクアンプの通電等）を行い、マイクロフォン２５Ｌ、２５Ｒによる収音した音声信号の音声処理部２６への供給を開始させる。このときにパラメータ設定に基づいた音声処理が実行される。

なお、音声メモの記録が静止画撮像モードにおいて、静止画を記録した直後の操作に応じて行われるようにする例も考えられる。
その場合は、静止画撮像モード時は音声処理部２６に対して音声メモ用のパラメータ設定を行い、動画撮像モード時は音声処理部２６に対して動画音声用のパラメータ設定を行っておくようにすることが考えられる。

＜５．まとめ及び変形例＞
以上の実施の形態によれば次のような効果が得られる。
実施の形態の撮像装置１は、マイクロフォン２５Ｌ、２５Ｒにより入力された音声信号について処理を行う音声処理部２６と、音声処理部２６で処理された音声データが撮像部１２による撮像で得られた画像データとともに記録される撮像画像記録時と、音声処理部２６で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御するカメラ制御部１８を備えている。これにより撮像画像記録時と音声メモ記録時とで音声信号の処理に関するパラメータが異なるようにされる。
動画記録時は、撮像する動画に同期して周囲音声をマイクロフォン２５Ｌ、２５Ｒで収音して音声データとして記録する。このため動画に付随する音声として周囲の多様な音が適した音質や音量で得られるようにしたい。一方で音声メモ記録時には、ユーザが発する声が明瞭に収録できればよい。つまり音声データとして求められる特性が異なる。
そこで動画記録時と音声メモ記録時とで、音声処理パラメータが異なるようにすることで、それぞれに適した音声データが得られるように音声処理を制御することができる。
またこれにより、マイクロフォン２５Ｌ、２５Ｒを、動画音声の収録と音声メモの収録に適切に共用でき、例えば音声メモのために別途専用のマイクロフォンを設ける必要はない。従って撮像装置１においては、筐体内の部品配置の容易化や製造コスト低下という利点が得られる。
なお、撮像画像記録時と音声メモ記録時とで音声信号の処理に関するパラメータを別個に制御することで、結果として上述の例のようにパラメータが異なるようになることが想定されるが、別個の制御の結果として同じパラメータとなる場合もあり得る。
もちろん、カメラ制御部１８は動画記録時と、音声メモ記録時とで、音声信号の処理に関するパラメータが異なるようにする制御を行うようにし、それぞれに応じた異なるパラメータ設定がされるようにすることも考えられる。
また実施の形態では動画記録時と音声メモ記録時について説明したが、静止画記録時に所定時間（例えば数秒）の周囲音声を収音し静止画に対応する音声として記録させる場合もある。そのような場合は、音声処理のパラメータは動画記録時と同様とすればよい。

実施の形態では、カメラ制御部１８は、音声データの記録を開始する際に、開始する音声データの記録が、撮像画像記録時（例えば動画記録時）の音声記録であるか、音声メモ記録時の音声記録かに応じて、パラメータの切り替え制御を行う例を述べた（図２０参照）。
これにより必要なタイミングで音声処理部２６のパラメータを、音声データの記録目的に対して適したパラメータに設定できる。

実施の形態では、カメラ制御部１８は、動作モードの切り替えに応じて前記パラメータの切り替え制御を行う例も述べた（図２４参照）。
これにより必要なタイミングで音声処理部２６のパラメータを、音声データの記録目的に適したパラメータに設定できる。例えば音声メモ記録が再生モードにおいて実行されるものである場合、再生モードとされたときに、パラメータ設定を音声メモ用に変更すればよい。また動画記録モードとされたらパラメータ設定を動画音声用に変更すればよい。モード遷移に応じてパラメータ切り替えを行うことで、実際の音声データ記録の開始時の処理負荷の軽減や、パラメータ設定変更に伴い音声処理の開始の遅れを生じさせないといった利点が得られる。

実施の形態では、音声処理部２６でのゲイン処理に関する設定を行うパラメータが音声メモ記録時と動画記録時とで切り替えられる例を挙げた。例えば音声処理部のＡＧＣ特性を設定するパラメータや、固定の入力ゲインを指定するパラメータ等である。
これにより動画音声、音声メモのそれぞれに適したＡＧＣ処理や入力ゲイン処理が行われるようになる。例えば音声メモの音声にはダイナミックレンジはあまり必要なく、ある程度コンプレッションがかけられていた方がよい。一方で動画音声はダイナミックレンジが広い方が臨場感もあり、望ましい音となる。これらに応じて適切なＡＧＣ処理が行われるようになる。

実施の形態では、音声処理部２６が音声データに与える周波数特性を設定するパラメータが音声メモ記録時と動画記録時とで切り替えられる例を挙げた。
例えば音声処理部２６でフィルタ処理やイコライジング処理が行われる場合に、その周波数特性を設定するパラメータである。
これにより動画音声、音声メモのそれぞれに適した周波数特性の音声データが得られるようになる。例えば動画音声には、人の声や周辺の環境音などで多様な音が含まれ、広い周波数特性が求められる。一方、音声メモは人の声のみを目的とした収音となるので、人の声が明瞭に聞こえる帯域であればよい。このような事情に応じて周波数特性を設定するパラメータを切り替えれば、それぞれに適した周波数特性の音声データが得られる。

実施の形態では、マイクロフォン２５Ｌ、２５Ｒの指向性を設定するパラメータが音声メモ記録時と動画記録時とで切り替えられる例を挙げた。
これにより動画音声、音声メモのそれぞれに適した指向性を与えたマイクロフォンにより音声収音ができる。例えば動画音声には、周辺の環境音を広く収音し、またステレオ収音するために、各マイクロフォン２５Ｌ、２５Ｒが、それぞれ左右に比較的広い指向性を有することが望ましい。一方、音声メモは、撮像装置１を所持するユーザの音声を拾うため、撮像装置１の背面側の音声を拾える指向性が望ましい。このため動画記録時か音声メモ記録時かにより指向性を切り替えることで、それぞれ望ましい収音が可能となる。

実施の形態では、音声処理部２６で音声データのデータ量の変化を生じさせる処理に関するパラメータが音声メモ記録時と動画記録時とで切り替えられる例を挙げた。
音声データのデータ量の変化を生じさせる処理に関するパラメータとしては、サンプリング周波数を設定するパラメータ、圧縮レートを指定するパラメータ、チャネル数を指定するパラメータ、量子化ビット数を指定するパラメータなどが想定される。
例えば動画音声の音声データとしては、音声メモと比較すると、データ量を少なくするよりも高音質であることが望まれるため、サンプリング周波数を高くしたり、圧縮率を下げたり、２チャネルのステレオ音声データとして処理させる。一方で音声メモは、その内容がわかればよいのでさほど高音質である必要はなく、それよりも保存やアップロードのためにデータ量が少ない方が望ましい。そこで、サンプリング周波数を低くしたり、圧縮率を上げたり、モノラルデータとすることなどを行う。これにより、動画音声と音声メモのそれぞれの事情に応じた音声データを得ることができる。

なお、撮像画像記録時と音声メモ記録時とで変更するパラメータとしては、以上のＡＧＣ特性、周波数特性、指向性、データ量を変化させるパラメータの他にも各種想定される。例えばノイズキャンセル処理の手法やキャンセルレベルを変化させるようなことが考えられる。

実施の形態では、音声メモは、１つの静止画データに関連づけられる音声データであるとした。
このような音声メモにより、１つの静止画データについての内容、被写体、場面などの説明や注釈を付与することが容易に可能となる。

実施の形態では、１つの静止画データが指定された状態で、マイクロフォン２５Ｌ、２５Ｒにより入力され、音声処理部２６で処理された音声データが、指定された静止画データに関連づけられた音声メモとされることを説明した。
ユーザは、例えば再生モードで１つの静止画を表示させながら、所定操作を行うことで音声を入力する。これにより得られた音声データが音声メモとして記録される。ユーザは静止画を表示させて視認しながら音声を発すればよく、簡単且つ正確に音声メモ記録を行うことができる。

実施の形態の音声メモは、１つの静止画データに関連づけられる音声データであり、静止画データを含む画像ファイルとは別の音声ファイルとして記録されるものとした。
例えば静止画データが画像ファイルＰＦとして記録され、音声メモの音声データが音声ファイルＡＦとして記録された状態で、その音声メモが、静止画データと関連づけられる状態で管理される。
音声メモは、例えば静止画データに付加されるメタデータではなく、独立した音声ファイルとされることで、静止画データを含む画像ファイルとは独立して扱うことができる。一方で例えば拡張子以外が同じファイル名とされるなどにより関連付け管理がされることで、対応関係が維持され、音声メモの機能を発揮できる。

実施の形態の撮像装置１では、撮像画像記録時として、特に動画記録時に音声処理部２６で処理された音声データが、動画データに同期した動画音声として記録される。
即ちマイクロフォン２５Ｌ、２５Ｒが動画音声の収音と音声メモの収音に共用されつつ、パラメータ設定制御により、それぞれに適した音声データが得られるようになる。

実施の形態の撮像装置１はマイクロフォン２５Ｌ、２５Ｒを有する。即ち撮像装置１の内蔵のマイクロフォン２５Ｌ、２５Ｒを音声メモと動画音声の収音に共用する場合に本開示の技術を適用できる。
なお別体のマイクロフォンを撮像装置１に接続して用いる場合でも本技術は適用できる。また内蔵又は接続するマイクロフォンは１つでもよく、モノラル音声データとして動画音声や音声メモが得られるようにしてもよい。

実施の形態の撮像装置１では。マイクロフォン２５Ｌ、２５Ｒにより複数チャネル（２チャネル）の音声収音が行われるとともに、マイクロフォン入力レベルの表示がチャネル毎に行われる（図９参照）。
ステレオ入力等の複数チャネル入力に対応して、各チャネルのマイクロフォン入力レベル（音圧レベル）が表示されることで、ユーザは記録中にリアルタイムに表示されるインジケータを見ながら、適正な音量となるように、マイクロフォンとの間の距離などを調整できる。この場合に、左右それぞれの音圧が確認できることで、ユーザは、調整をより適切に行うことができる。例えば発声する際の顔の位置を右よりにするか、左よりにするかなどを調整しやすい。

実施の形態のプログラムは、図２０や図２４のような処理を、例えば撮像装置１内のＣＰＵ、ＤＳＰ等の演算処理装置に実行させるプログラムである。
即ち実施の形態のプログラムは、マイクロフォン２５Ｌ、２５Ｒにより入力された音声信号について処理を行う音声処理部２６で処理された音声データが、撮像部１２による撮像で得られた画像データとともに記録される撮像画像記録時と、音声処理部２６で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する処理を演算処理装置に実行させる。
このようなプログラムを例えばファームウェアとして撮像装置１（カメラ制御部１８）に組み込むことで、本技術の撮像装置１を容易に実現できる。

このようなプログラムはコンピュータ装置等の機器に内蔵されている記録媒体としてのＨＤＤや、ＣＰＵを有するマイクロコンピュータ内のＲＯＭ等に予め記録しておくことができる。
あるいはまた、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＭＯ（Magneto Optical）ディスク、ＤＶＤ（Digital Versatile Disc）、ブルーレイディスク（Blu-ray Disc（登録商標））、磁気ディスク、半導体メモリ、メモリカードなどのリムーバブル記録媒体に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
また、このようなプログラムは、リムーバブル記録媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、ＬＡＮ（Local Area Network）、インターネットなどのネットワークを介してダウンロードすることもできる。

なお、本明細書に記載された効果はあくまでも例示であって限定されるものではなく、また他の効果があってもよい。

なお本技術は以下のような構成も採ることができる。
（１）
マイクロフォンにより入力された音声信号について処理を行う音声処理部と、
前記音声処理部で処理された音声データが撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する制御部と、を備えた
撮像装置。
（２）
前記制御部は、前記撮像画像記録時と、前記音声メモ記録時とで、音声信号の処理に関するパラメータが異なるようにする制御を行う
上記（１）に記載の撮像装置。
（３）
前記制御部は、音声データの記録を開始する際に、開始する音声データの記録が、撮像画像記録時の音声記録であるか、音声メモ記録時の音声記録であるかに応じて、前記パラメータの切り替え制御を行う
上記（１）又は（２）に記載の撮像装置。
（４）
前記制御部は、動作モードの切り替えに応じて前記パラメータの切り替え制御を行う
上記（１）から（３）のいずれかに記載の撮像装置。
（５）
前記パラメータは、前記音声処理部でのゲイン処理に関する設定を行うパラメータを含む
上記（１）から（４）のいずれかに記載の撮像装置。
（６）
前記パラメータは、前記音声処理部が音声データに与える周波数特性を設定するパラメータを含む
上記（１）から（５）のいずれかに記載の撮像装置。
（７）
前記パラメータは、前記マイクロフォンの指向性を設定するパラメータを含む
上記（１）から（６）のいずれかに記載の撮像装置。
（８）
前記パラメータは、音声データのデータ量の変化を生じさせる処理に関するパラメータを含む
上記（１）から（７）のいずれかに記載の撮像装置。
（９）
前記音声メモは、１つの静止画データに関連づけられる音声データである
上記（１）から（８）のいずれかに記載の撮像装置。
（１０）
１つの静止画データが指定された状態で、前記マイクロフォンにより入力され、前記音声処理部で処理された音声データが、指定された静止画データに関連づけられた前記音声メモとされる
上記（１）から（９）のいずれかに記載の撮像装置。
（１１）
前記音声メモは、１つの静止画データに関連づけられる音声データであり、前記静止画データを含む画像ファイルとは別の音声ファイルとして記録される
上記（１）から（１０）のいずれかに記載の撮像装置。
（１２）
前記撮像画像記録時とは動画記録時であり、前記音声処理部で処理された音声データは、動画データに同期した動画音声として記録される
上記（１）から（１１）のいずれかに記載の撮像装置。
（１３）
前記マイクロフォンを有する
上記（１）から（１２）のいずれかに記載の撮像装置。
（１４）
前記マイクロフォンにより複数チャネルの音声収音が行われるとともに、
マイクロフォン入力レベルの表示がチャネル毎に行われる
上記（１）から（１３）のいずれかに記載の撮像装置。
（１５）
前記マイクロフォンは、
前記撮像画像記録時と前記音声メモ記録時の両方で音声データを得るための収音に使用されるマイクロフォンである
上記（１）から（１４）のいずれかに記載の撮像装置。
（１６）
マイクロフォンにより入力された音声信号について処理を行う音声処理部で処理された音声データが、撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する
音声処理方法。
（１７）
マイクロフォンにより入力された音声信号について処理を行う音声処理部で処理された音声データが、撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する処理を
演算処理装置に実行させるプログラム。

１ 撮像装置
１１ レンズ系
１２ 撮像部
１３ カメラ信号処理部
１４ 記録制御部
１５ 表示部
１６ 通信部
１７ 操作部
１８ カメラ制御部
１９ メモリ部
２２ ドライバ部
２３ センサ部
２５ 音声入力部
２５Ｌ，２５Ｒ マイクロフォン
２６ 音声処理部

Claims (17)

1. マイクロフォンにより入力された音声信号について処理を行う音声処理部と、
   前記音声処理部で処理された音声データが撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する制御部と、を備えた
   撮像装置。
2. 前記制御部は、前記撮像画像記録時と、前記音声メモ記録時とで、音声信号の処理に関するパラメータが異なるようにする制御を行う
   請求項１に記載の撮像装置。
3. 前記制御部は、音声データの記録を開始する際に、開始する音声データの記録が、撮像画像記録時の音声記録であるか、音声メモ記録時の音声記録であるかに応じて、前記パラメータの切り替え制御を行う
   請求項１に記載の撮像装置。
4. 前記制御部は、動作モードの切り替えに応じて前記パラメータの切り替え制御を行う
   請求項１に記載の撮像装置。
5. 前記パラメータは、前記音声処理部でのゲイン処理に関する設定を行うパラメータを含む
   請求項１に記載の撮像装置。
6. 前記パラメータは、前記音声処理部が音声データに与える周波数特性を設定するパラメータを含む
   請求項１に記載の撮像装置。
7. 前記パラメータは、前記マイクロフォンの指向性を設定するパラメータを含む
   請求項１に記載の撮像装置。
8. 前記パラメータは、音声データのデータ量の変化を生じさせる処理に関するパラメータを含む
   請求項１に記載の撮像装置。
9. 前記音声メモは、１つの静止画データに関連づけられる音声データである
   請求項１に記載の撮像装置。
10. １つの静止画データが指定された状態で、前記マイクロフォンにより入力され、前記音声処理部で処理された音声データが、指定された静止画データに関連づけられた前記音声メモとされる
    請求項１に記載の撮像装置。
11. 前記音声メモは、１つの静止画データに関連づけられる音声データであり、前記静止画データを含む画像ファイルとは別の音声ファイルとして記録される
    請求項１に記載の撮像装置。
12. 前記撮像画像記録時とは動画記録時であり、前記音声処理部で処理された音声データは、動画データに同期した動画音声として記録される
    請求項１に記載の撮像装置。
13. 前記マイクロフォンを有する
    請求項１に記載の撮像装置。
14. 前記マイクロフォンにより複数チャネルの音声収音が行われるとともに、
    マイクロフォン入力レベルの表示がチャネル毎に行われる
    請求項１に記載の撮像装置。
15. 前記マイクロフォンは、
    前記撮像画像記録時と前記音声メモ記録時の両方で音声データを得るための収音に使用されるマイクロフォンである
    請求項１に記載の撮像装置。
16. マイクロフォンにより入力された音声信号について処理を行う音声処理部で処理された音声データが、撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する
    音声処理方法。
17. マイクロフォンにより入力された音声信号について処理を行う音声処理部で処理された音声データが、撮像部による撮像で得られた画像データとともに記録される撮像画像記録時と、前記音声処理部で処理された音声データが音声メモとして記録される音声メモ記録時とで、音声信号の処理に関するパラメータを別個に制御する処理を
    演算処理装置に実行させるプログラム。

Images