JP2007259249A - 撮像装置、表示方法、およびプログラム - Google Patents

Abstract

【課題】撮像する画像の構図を確認するためのスルー画像を途切れなくディスプレイに表示する。
【解決手段】静止画像撮像時、スルー画像のフレームレートよりも高速で静止画像データが生成され、静止画像データを基にしてスルー画像データが生成される。動画像撮像時、原画像データを基に動画像データが生成され、動画像データを基にしてスルー画像データが生成される。動画像と静止画像の撮像時、スルー画像のフレームレートよりも高速で静止画像データが生成されて、静止画像データを基に動画像データが生成され、動画像データを基にしてスルー画像データが生成される。なお、スルー画像データは、スルー画像のフレームレートに同期して生成、表示されるので、スルー画像の表示に中断や遅延は発生しない。本発明は、例えばデジタルスチルカメラやデジタルビデオカメラに適用できる。
【選択図】図４

Description

本発明は、撮像装置、表示方法、およびプログラムに関し、特に、撮像する画像の構図を確認するためのスルー画像を途切れなくディスプレイに表示できるようにした撮像装置、表示方法、およびプログラムに関する。

既存のデジタルスチルカメラには、静止画像の撮像機能に加えて短時間ながらも動画像の撮像機能を有するものが存在する。また、既存のデジタルビデオカメラには、動画像の撮像と同時に静止画像を撮像する機能を有するものが存在する（例えば、特許文献１参照）。

このようなデジタルスチルカメラやデジタルビデオカメラの大多数には、撮像する画像の構図を確認するためのスルー画像を表示するディスプレイが設けられている。

スルー画像は、CCD(Charge Coupled Device)などの撮像素子から得られる原画像データを基に、画素を間引くなどの処理によって生成される。また、静止画像や動画像も原画像データに基づいて生成される。

特開２００４−２０１２８２号公報

ところで、上述したデジタルスチルカメラやデジタルビデオカメラでは、静止画像を生成する処理に比較的長い時間を要するので、静止画像を撮像した直後にスルー画像を生成することができなかった。よって、静止画像を撮像した直後にはディスプレイにスルー画像が表示されないので、次に撮像する画像の構図を直ちに決めることができなかった。

また、静止画像を生成する処理に比較的長い時間を要するので、静止画像を撮像した直後に動画像の撮像を開始することができなかったり、動画像の撮像中に静止画像も撮像すると、その直後に動画像の撮像を終了することができなかったりするという制約があった。

本発明はこのような状況に鑑みてなされたものであり、撮像する画像の構図を確認するためのスルー画像を途切れなくディスプレイに表示できるようにするものである。

本発明の一側面である撮像装置は、撮像する画像の構図を確認するためのスルー画像をディスプレイに表示させる撮像装置において、被写体の光学像を光電変換によって電気信号である原画像データに変換する変換手段と、撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成する第１のスルー画像生成手段と、ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成する静止画像生成手段と、前記静止画像データに基づいて第２のスルー画像データを生成する第２のスルー画像生成手段と、前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御手段とを含み、前記静止画像生成手段により前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である。

前記表示制御手段は、ユーザからのシャッタ操作がないとき、前記第１のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、ユーザからのシャッタ操作があったとき、前記第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させるようにすることができる。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応し、前記原画像データまたは前記静止画像データに基づいて動画像データを生成する動画像生成手段と、前記動画像データに基づいて第３のスルー画像データを生成する第３のスルー画像生成手段とをさらに含むことができる。

前記表示制御手段は、ユーザからの録画開始操作およびシャッタ操作がないとき、前記第１のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、ユーザからの録画開始操作がなくシャッタ操作があったとき、前記第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、ユーザからの録画開始操作があったとき、前記第３のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させるようにすることができる。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応し、前記第１または第２のスルー画像データに基づいて動画像データを生成する動画像生成手段をさらに含むことができる。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応して音声データを取得する音声取得手段と、取得された前記音声データに、予め保持している静止画像撮像時の音声データの逆位相データを加算することによって静止画像撮像時のノイズを除去するノイズ除去手段とをさらに含むことができる。

本発明の一側面である表示方法は、撮像する画像の構図を確認するためのスルー画像を表示するディスプレイを備えた撮像装置の表示方法において、被写体の光学像を光電変換によって電気信号である原画像データに変換し、撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成し、ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成し、前記静止画像データに基づいて第２のスルー画像を生成し、前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御ステップを含み、前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である。

本発明の一側面であるプログラムは、撮像する画像の構図を確認するためのスルー画像を表示するディスプレイを備えた撮像装置の制御用のプログラムであって、被写体の光学像を光電変換によって電気信号である原画像データに変換させ、撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成し、ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成し、前記静止画像データに基づいて第２のスルー画像を生成し、前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御ステップを含む処理をコンピュータに実行させ、前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である。

本発明の一側面においては、被写体の光学像が光電変換によって電気信号である原画像データに変換され、撮像待機時において画像データに基づいて第１のスルー画像データが生成される。また、ユーザからのシャッタ操作に対応し、画像データに基づいて静止画像データが生成されて、静止画像データに基づいて第２のスルー画像が生成される。そして、第１または第２のスルー画像データに対応するスルー画像がディスプレイに表示される。なお、静止画像データが生成されるフレームレートは、スルー画像がディスプレイに表示されるフレームレートの正の整数倍である。

本発明の一側面によれば、撮像する画像の構図を確認するためのスルー画像を途切れなくディスプレイに表示することが可能となる。

以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書または図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書または図面に記載されていることを確認するためのものである。従って、明細書または図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。

本発明の一側面である撮像装置（例えば、図１のデジタルカメラ１）は、被写体の光学像を光電変換によって電気信号である原画像データに変換する変換手段（例えば、図１のCMOS１３）と、撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成する第１のスルー画像生成手段（例えば、図２のスルー画像生成部４１）と、ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成する静止画像生成手段（例えば、図２の静止画像生成部４２）と、前記静止画像データに基づいて第２のスルー画像データを生成する第２のスルー画像生成手段と（例えば、図２のスルー画像生成部４４）、前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御手段（例えば、図２のスルー画像選択部４６）とを含み、前記静止画像生成手段により前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応し、前記原画像データまたは前記静止画像データに基づいて動画像データを生成する動画像生成手段（例えば、図２の動画像生成部４３）と、前記動画像データに基づいて第３のスルー画像データを生成する第３のスルー画像生成手段（例えば、図２のスルー画像生成部４５）とをさらに含むことができる。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応し、前記第１または第２のスルー画像データに基づいて動画像データを生成する動画像生成手段（例えば、図２の動画像生成部４３）をさらに含むことができる。

本発明の一側面である撮像装置は、ユーザからの録画開始操作に対応して音声データを取得する音声取得手段（例えば、図１のマイクロフォン１７）と、取得された前記音声データに、予め保持している静止画像撮像時の音声データの逆位相データを加算することによって静止画像撮像時のノイズを除去するノイズ除去手段（例えば、図２のノイズ除去部４９）とをさらに含むことができる。

本発明の一側面である表示方法およびプログラムは、被写体の光学像を光電変換によって電気信号である原画像データに変換し、撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成し（例えば、図３のステップＳ１）、ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成し（例えば、図３のステップＳ４）、前記静止画像データに基づいて第２のスルー画像を生成し（例えば、図３のステップＳ５）、前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御ステップを含み（例えば、図３のステップＳ１またはＳ５）、前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である。

以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。

図１は、本発明の一実施の形態であるデジタルカメラの構成例を示している。このデジタルカメラ１は、スルー画像を途切れることなく表示することによりユーザによる構図の決定を容易にするものであり、静止画像を撮像する機能と、動画像を撮像する機能と、動画像の撮像中に静止画像も撮像する機能を有している。

このデジタルカメラ１は、被写体の光学像に対応する入射光を集束させる撮影レンズ１１、絞り量を調整するアイリス機構部１２、光電変換により入射光から画像データを生成するCMOS(Complementary Metal-Oxide Semiconductor)センサ１３、画像データに対してサンプリング処理やAGC(Auto Gain Control)処理を行うアナログ信号処理部１４、アナログ信号の画像データをデジタル信号の画像データに変換するアナログデジタル変換部(A/D)１５、AF(Auto Focus)処理、AE(Auto Exposure)処理、スルー画像生成処理、静止画像生成処理、動画像生成処理、音声データ生成処理などを行うデジタル信号処理部１６、動画像撮像時に音声を取得するマイクロフォン１７、ROM１９に記録されているプログラムを実行することによってデジタルカメラ１の各部を制御するメイン制御部１８から構成される。

メイン制御部１８には、制御用プログラムや各種の設定初期値などが記録されているROM(Read Only Memory)１９、メイン制御部１８のワークエリアとして使用されたり画像データを一時的に記憶するRAM(Random Access Memory)２０、ユーザからの各種操作を受け付ける操作入力部２２、スルー画像を表示したり再生した動画像や静止画像を表示したりする表示部２３、静止画像生成処理や動画像生成処理の結果として得られる静止画像符号化データや動画像符号化データや音声符号化データを記録媒体に記録する記録部２４、パーソナルコンピュータやテレビジョン受像機などの電子装置と接続するための外部インタフェース(I/F)２５、明るさが不足するときなど被写体に光を照射する発光部２１、CMOS１３の動作タイミングを制御するタイミングジェネレータ(TG)２６、および、撮影レンズ１１を制御するレンズ制御部２７が接続されている。

次にデジタルカメラ１の動作について説明する。

デジタルカメラ１の電源がオンとされるとスルー画像が表示部２３に表示される撮影待機状態となる。具体的には、撮影レンズ１１、およびアイリス機構部１２を介して被写体の光学像がCMOS１３に入射されてアナログの画像データが生成され、この画像データがアナログ信号処理を経てデジタル信号に変換されてデジタル信号処理部１６に供給される。以下、デジタル信号処理部１６に供給されるデジタル信号の画像データを原画像データと称する。

デジタル信号処理部１６では、原画像データを基にスルー画像データが生成され、このスルー画像データが表示部２３に供給されて表示される。また、AE処理が行われ、その結果得られる、画像データの所定の領域の光量を示すAE信号がメイン制御部１８に供給されて、絞り量、露光時間、AGC処理の増幅利得などを含む露出条件が決定される。

そして、スルー画像によって構図を確認したユーザがシャッタ操作（すなわち、静止画像の撮像を指示する操作）を実行した場合、決定された露出条件に従って撮像が行われ、その結果得られる原画像データがデジタル信号処理部１６に供給される。デジタル信号処理部１６では、原画像データを基に静止画像データが生成され、この静止画像データが符号化され、記録部２４に供給されて記録媒体に記録される。また、生成された静止画像データを基にスルー画像データが生成され、このスルー画像データが表示部２３に供給されて表示される。なお、原画像データを基に静止画像データが生成されるフレームレートは、スルー画像を表示部２３に表示するフレームレートよりも十分に高速であるものとする。

また、スルー画像によって構図を確認したユーザが録画開始操作（すなわち、動画像の撮像開始を指示する操作）を実行した場合、決定された露出条件に従って撮像が開始され、その結果得られる原画像データがデジタル信号処理部１６に供給される。デジタル信号処理部１６では、原画像データを基に動画像データが生成され、この動画像データが符号化され、記録部２４に供給されて記録媒体に記録される。また、マイクロフォン１７により集音された音声データがデジタル信号処理部１６により符号化され、記録部２４に供給されて記録媒体に記録される。さらに、生成された動画像データを基にスルー画像データが生成され、このスルー画像データが表示部２３に供給されて表示される。

なお、動画像撮像中にシャッタ操作が実行された場合、デジタル信号処理部１６では、原画像データを基に静止画像データが生成され、静止画像データを基に動画像データが生成され、この動画像データが符号化されて記録部２４に供給されて記録媒体に記録される。
このとき、マイクロフォン１７により集音された音声データには、静止画撮像時の音声波形の逆位相が加算されることによってノイズが除去された後に符号化され、記録部２４に供給されて記録媒体に記録される。また、生成された静止画像データまたは動画像データを基にスルー画像データが生成され、このスルー画像データが表示部２３に供給されて表示される。なお、原画像データを基に静止画像データが生成されるフレームレートは、動画像データのフレームレートよりも十分に高速であるものとする。

次に図２は、デジタル信号処理部１６の詳細な構成例を示している。

デジタル信号処理部１６は、原画像データに基づいて第１のスルー画像データを生成するスルー画像生成部４１、原画像データに基づいて静止画像データを生成する静止画像生成部４２、原画像データまたは静止画像データに基づいて動画像データを生成する動画像生成部４３、静止画像データに基づいて第２のスルー画像データを生成するスルー画像生成部４４、動画像データに基づいて第３のスルー画像データを生成するスルー画像生成部４５、第１乃至３のスルー画像データを表示部２３に供給する表示制御部４６、静止画像データをJPEG(Joint Photographic Experts Group)フォーマットなどに従って符号化する符号化部４７、動画像データをMPEG(Moving Picture Experts Group)２フォーマットなどに従って符号化する符号化部４８、音声データからノイズ成分を除去するノイズ除去部４９、および、音声データをMPEG２フォーマットなどに従って符号化する符号化部５０から構成される。

なお、スルー画像生成部４１、静止画像生成部４２、動画像生成部４３、スルー画像生成部４４、およびスルー画像生成部４５は、同時に動作せず、これらのうちのいずれか１つが順に動作するようになされている。

ただし、特に静止画像生成部４２の動作速度（フレームレート）については、動画像生成部４３およびスルー画像生成部４１，４４，４５の動作速度（フレームレート）に比較して整数倍の速さで動作するものとする。したがって、静止画像の撮像に起因して、動画像撮像の開始タイミングや終了タイミングが制限されることはない。

スルー画像生成部４１は、原画像データのフレームレートをスルー画像のフレームレートに変換し、画素の間引きなどによって画枠サイズを表示部２３に対応するように縮小し、その結果得られる第１のスルー画像データをスルー画像選択部４６に出力する。

静止画像生成部４２は、原画像データの画枠サイズを予め設定されている静止画像の画枠サイズに変換し、その結果得られる静止画像データを動画像生成部４３、スルー画像生成部４４、および符号化部４７に出力する。

動画像生成部４３は、動画像だけを撮像する時には原画像データを基にして、また動画像と静止画像を撮像する時には静止画像データを基にして、そのフレームレートを動画像のフレームレートに変換し、その画枠サイズを予め設定されている動画像の画枠サイズに変換し、その結果得られる動画像データをスルー画像生成部４５、および符号化部４８に出力する。ただし、動画像データのフレームレートがスルー画像のフレームレートよりも遅い設定の場合には、静止画像データのフレームレートをスルー画像のフレームレートに変換してスルー画像生成部４５に出力するようにし、さらに、これを動画像のフレームレートに変換し、その画枠サイズを予め設定されている動画像の画枠サイズに変換し、その結果得られる動画像データを符号化部４８に出力するようにする。

スルー画像生成部４４は、静止画像データのフレームレートをスルー画像のフレームレートに変換し、画素の間引きなどによって画枠サイズを表示部２３に対応するように縮小し、その結果得られる第２のスルー画像データをスルー画像選択部４６に出力する。

スルー画像生成部４５は、動画像データのフレームレートをスルー画像のフレームレートに変換し、画素の間引きなどによって画枠サイズを表示部２３に対応するように縮小し、その結果得られる第３のスルー画像データをスルー画像選択部４６に出力する。

ただし、動画像データのフレームレートがスルー画像のフレームレートよりも遅い設定の場合には、動画像生成部４３から入力される、原画像データがスルー画像のフレームレートに変換されたものを基に、画素の間引きなどによって画枠サイズを表示部２３に対応するように縮小し、その結果得られる第３のスルー画像データをスルー画像選択部４６に出力する。

スルー画像選択部４６は、静止画像および動画像が撮像されていないとき、スルー画像生成部４１から入力される第１のスルー画像データを、静止画像だけが撮像されているとき、スルー画像生成部４４から入力される第２のスルー画像データを、動画像が撮像されているとき、スルー画像生成部４５から入力される第３のスルー画像データを表示部２３に供給する。

ただし、表示部２３に供給するスルー画像データの切り替えは、スルー画像のフレームレートに同期して実行するようにする。

ノイズ除去部４９は、動画像の撮像中に静止画像も撮像したとき、マイクロフォン１７から入力される音声データに、予め保持している静止画像撮像時にデジタルカメラ１から発生する音（ノイズ）の音声波形の逆位相データを加算して符号化部５０に出力する。

なお、図２に示されたデジタル信号処理部１６の構成は、ハードウェアによって実現してもよいし、ソフトウェアを実行することによって実現してもよい。

次に、デジタル信号処理部１６の動作について、図３のフローチャートを参照して説明する。デジタルカメラ１の電源がオンとされると、まず撮像待機状態に遷移するためステップＳ１の処理が開始される。なお、デジタル信号処理部１６には、前段から原画像データが入力されているものとする。

ステップＳ１において、スルー画像生成部４１は、原画像データを基に第１のスルー画像データを生成してスルー画像選択部４６に出力する。スルー画像選択部４６は、入力された第１のスルー画像データをスルー画像のフレームレートに同期して表示部２３に供給する。これにより、表示部２３には第１のスルー画像データに対応するスルー画像が表示される。

ステップＳ２において、メイン制御部１８は操作入力部２２からの入力を監視することにより、ユーザから動画像の撮像開始が指示されたか否かを判定し、ユーザから動画像の撮像開始が指示されていないと判定した場合、ステップＳ３に進み、ユーザから静止画像の撮像が指示されたか否かを判定する。ここで、ユーザから静止画像の撮像が指示されていないと判定された場合、処理はステップＳ１に戻り、それ以降の処理が繰り返される。したがって、表示部２３には、第１のスルー画像データに対応するスルー画像が継続して表示される。

ステップＳ３において、ユーザから静止画像の撮像が指示されたと判定された場合、処理はステップＳ４に進む。ステップＳ４において、静止画像生成部４２は、スルー画像のフレームレートよりも高速で原画像データを基に静止画像データを生成して符号化部４７およびスルー画像生成部４４に出力する。符号化部４７は、入力された静止画像データを符号化し、その結果得られた静止画像符号化データを記録部２４に出力する。記録部２４は、入力された静止画像符号化データを記録媒体に記録する。

一方、スルー画像生成部４４は、ステップＳ５において、入力された静止画像データを基に第２のスルー画像データを生成してスルー画像選択部４６に出力する。スルー画像選択部４６は、入力された第２のスルー画像データをスルー画像のフレームレートに同期して表示部２３に供給する。これにより、表示部２３には第２のスルー画像データに対応するスルー画像が表示される。したがって、表示部２３には中断や遅延が生じることなくスルー画像の表示が継続される。

なお、ステップＳ４の処理とステップＳ５の処理は便宜上前後して説明したが、実際には平行して行われる。

この後、処理はステップＳ１に戻り、それ以降の処理が繰り返される。したがって、表示部２３には、再び第１のスルー画像データに対応するスルー画像に変更される。

ステップＳ２において、ユーザから動画像の撮像開始が指示されたと判定された場合、処理はステップＳ６に進む。

ステップＳ６において、メイン制御部１８は、ユーザから静止画像の撮像が指示されたか否かを判定する。ユーザから静止画像の撮像が指示されたと判定された場合、処理はステップＳ７に進む。

ステップＳ７において、静止画像生成部４２は、スルー画像のフレームレートよりも高速で原画像データを基に静止画像データを生成して動画像生成部４３および符号化部４７に出力する。符号化部４７は、入力された静止画像データを符号化し、その結果得られた静止画像符号化データを記録部２４に出力する。記録部２４は、入力された静止画像符号化データを記録媒体に記録する。また、静止画像データの生成、記録と平行して、マイクロフォン１７は集音を行い、得られた音声データをノイズ除去部４９に供給する。

ステップＳ８において、動画像生成部４３は、入力された静止画像データを基に動画像データを生成して符号化部４８およびスルー画像生成部４５に出力する。符号化部４８は、動画像データを符号化し、その結果得られる動画像符号化データを記録部２４に出力する。記録部２４は、入力された動画像符号化データを記録媒体に記録する。また、動画像データの生成、記録と平行して、ノイズ除去部４９は、マイクロフォン１７から入力される音声データのノイズ成分を除去して符号化部５０に出力する。符号化部５０は、音声データを符号化し、その結果得られる音声符号化データを記録部２４に出力する。記録部２４は、入力された音声符号化データを動画像符号化データと対応付けて記録媒体に記録する。

なお、ステップＳ７の処理とステップＳ８の処理は便宜上前後して説明したが、実際には平行して行われる。

ステップＳ９において、スルー画像生成部４５は、動画像データを基に第３のスルー画像データを生成してスルー画像選択部４６に出力する。スルー画像選択部４６は、入力された第３のスルー画像データをスルー画像のフレームレートに同期して表示部２３に供給する。これにより、表示部２３には第３のスルー画像データに対応するスルー画像が表示される。したがって、表示部２３には中断や遅延が生じることなくスルー画像の表示が継続される。

ステップＳ１０において、メイン制御部１８は、ユーザから動画像の撮像終了または一時停止が指示されたか否かを判定する。ユーザから動画像の撮像終了または一時停止が指示されたと判定された場合、処理はステップＳ１に戻り、それ以降の処理が繰り返される。したがって、表示部２３には、再び第１のスルー画像データに対応するスルー画像に変更される。

ステップＳ１０において、ユーザから動画像の撮像終了および一時停止が指示されていないと判定された場合、処理はステップＳ６に戻り、それ以降の処理が繰り返される。

ステップＳ６において、ユーザから静止画像の撮像が指示されていないと判定された場合、処理はステップＳ１１に進む。

ステップＳ１１において、動画像生成部４３は、原画像データを基に動画像データを生成して符号化部４８およびスルー画像生成部４５に出力する。符号化部４８は、動画像データを符号化し、その結果得られる動画像符号化データを記録部２４に出力する。記録部２４は、入力された動画像符号化データを記録媒体に記録する。また、動画像データの生成、記録と平行して、ノイズ除去部４９は、マイクロフォン１７から入力される音声データをそのまま符号化部５０に出力する。符号化部５０は、音声データを符号化し、その結果得られる音声符号化データを記録部２４に出力する。記録部２４は、入力された音声符号化データを動画像符号化データと対応付けて記録媒体に記録する。この後、処理はステップＳ９に進められる。したがって、表示部２３には第３のスルー画像データに対応するスルー画像が表示される。よって、表示部２３には中断や遅延が生じることなくスルー画像の表示が継続される。そして、このデジタル信号処理部１６の動作は、例えば記録された画像の再生が指示されたり、電源がオフされたりするまで繰り返される。

以上に説明した動作をまとめると図４に示すとおりとなる。なお、同図における矢印は、画像データが生成されるときの基と結果の関係を示している。例えば、スルー画像Ａは原画像Ａを基に生成されることを示している。

撮影待機時においては、スルー画像生成部４１により原画像データを基にして第１のスルー画像データが生成されて表示部２３に表示される。

静止画像のみ撮像する時においては、静止画像生成部４２によってスルー画像のフレームレートよりも高速で原画像データを基に静止画像データが生成されて符号化部４７およびスルー画像生成部４４に供給される。符号化部４７では、静止画像データが符号化され、その結果得られる静止画像符号化データが記録部２４によって記録媒体に記録される。一方、スルー画像生成部４４では、静止画像データを基にして第２のスルー画像データが生成されて表示部２３に表示される。このとき、第２のスルー画像データは、スルー画像のフレームレートに同期して生成、表示されるので、表示部２４におけるスルー画像の表示に中断や遅延は発生しない。

動画像のみ撮像する時においては、動画像生成部４３によって原画像データを基に動画像データが生成されて符号化部４８およびスルー画像生成部４５に供給される。符号化部４８では、動画像データが符号化され、その結果得られる動画像符号化データが記録部２４によって記録媒体に記録される。一方、スルー画像生成部４５では、動画像データを基にして第３のスルー画像データが生成されて表示部２３に表示される。このとき、第３のスルー画像データは、スルー画像のフレームレートに同期して生成、表示されるので、表示部２４におけるスルー画像の表示に中断や遅延は発生しない。

動画像撮像中に静止画像も撮像する時においては、静止画像生成部４２によってスルー画像のフレームレートよりも高速で原画像データを基に静止画像データが生成されて動画像生成部４３および符号化部４７に供給される。符号化部４７では、静止画像データが符号化され、その結果得られる静止画像符号化データが記録部２４によって記録媒体に記録される。動画像生成部４３では、静止画像データを基に動画像データが生成されて符号化部４８およびスルー画像生成部４５に供給される。符号化部４８では、動画像データが符号化され、その結果得られる動画像符号化データが記録部２４によって記録媒体に記録される。スルー画像生成部４５では、動画像データを基にして第３のスルー画像データが生成されて表示部２３に表示される。このとき、第３のスルー画像データは、スルー画像のフレームレートに同期して生成、表示されるので、表示部２４におけるスルー画像の表示に中断や遅延は発生しない。

したがって、このデジタルカメラ１の表示部２３には、スルー画像が途切れなく表示される。

なお、動画像生成部４３において、第１のスルー画像または第２のスルー画像に基づいて動画像を生成するようにしてもよい。

本明細書において、プログラムに基づいて実行されるステップは、記載された順序に従って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

また、プログラムは、１台のコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。

本発明を適用したデジタルカメラの構成例を示すブロック図である。 図１のデジタル信号処理部の詳細な構成例を示すブロック図である。 デジタル信号処理部の動作を説明するフローチャートである。 デジタル信号処理部の動作の概要を説明するための図である。

符号の説明

１ デジタルカメラ， １３ CMOSセンサ，１６ デジタル信号処理部， １８ メイン制御部， １９ ROM， ４１ スルー画像生成部， ４２ 静止画像生成部， ４３ 動画像生成部， ４４ スルー画像生成部， ４５ スルー画像生成部， ４６ スルー画像選択部， ４９ ノイズ除去部

Claims (8)

1. 撮像する画像の構図を確認するためのスルー画像をディスプレイに表示させる撮像装置において、
   被写体の光学像を光電変換によって電気信号である原画像データに変換する変換手段と、
   撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成する第１のスルー画像生成手段と、
   ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成する静止画像生成手段と、
   前記静止画像データに基づいて第２のスルー画像データを生成する第２のスルー画像生成手段と、
   前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御手段とを含み、
   前記静止画像生成手段により前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である
   撮像装置。
2. 前記表示制御手段は、ユーザからのシャッタ操作がないとき、前記第１のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、ユーザからのシャッタ操作があったとき、前記第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる
   請求項１に記載の撮像装置。
3. ユーザからの録画開始操作に対応し、前記原画像データまたは前記静止画像データに基づいて動画像データを生成する動画像生成手段と、
   前記動画像データに基づいて第３のスルー画像データを生成する第３のスルー画像生成手段と
   さらに含む請求項１に記載の撮像装置。
4. 前記表示制御手段は、ユーザからの録画開始操作およびシャッタ操作がないとき、前記第１のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、
   ユーザからの録画開始操作がなくシャッタ操作があったとき、前記第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させ、
   ユーザからの録画開始操作があったとき、前記第３のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる
   請求項３に記載の撮像装置。
5. ユーザからの録画開始操作に対応し、前記第１または第２のスルー画像データに基づいて動画像データを生成する動画像生成手段を
   さらに含む請求項１に記載の撮像装置。
6. ユーザからの録画開始操作に対応して音声データを取得する音声取得手段と、
   取得された前記音声データに、予め保持している静止画像撮像時の音声データの逆位相データを加算することによって静止画像撮像時のノイズを除去するノイズ除去手段と
   をさらに含む請求項３に記載の撮像装置。
7. 撮像する画像の構図を確認するためのスルー画像を表示するディスプレイを備えた撮像装置の表示方法において、
   被写体の光学像を光電変換によって電気信号である原画像データに変換し、
   撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成し、
   ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成し、
   前記静止画像データに基づいて第２のスルー画像を生成し、
   前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御ステップを含み、
   前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である
   表示方法。
8. 撮像する画像の構図を確認するためのスルー画像を表示するディスプレイを備えた撮像装置の制御用のプログラムであって、
   被写体の光学像を光電変換によって電気信号である原画像データに変換させ、
   撮像待機時において前記原画像データに基づいて第１のスルー画像データを生成し、
   ユーザからのシャッタ操作に対応し、前記原画像データに基づいて静止画像データを生成し、
   前記静止画像データに基づいて第２のスルー画像を生成し、
   前記第１または第２のスルー画像データに対応する前記スルー画像を前記ディスプレイに表示させる表示制御ステップを含む処理をコンピュータに実行させ、
   前記静止画像データが生成されるフレームレートは、前記スルー画像が前記ディスプレイに表示されるフレームレートの正の整数倍である
   プログラム。

Images