JP2006203334A - 画像記録装置及びその制御方法、並びにプログラム - Google Patents

Abstract

【課題】本発明は、主撮像系及び副撮像系の画像のフレームレートの違いに左右されることなく、高動解像度の合成画像を得ることができる画像記録装置を提供する。
【解決手段】画像記録装置１００は、画像比較回路２０７と、画像合成回路２１０とを備え、画像比較回路２０７により、メインカメラ画像及びサブカメラ画像のフレームレートを比較し、速い方のフレームレート情報を画像合成時のフレームレートとして画像合成回路２１０に伝達し、画像合成回路２１０により、画像比較回路２０７より伝達された画像合成時のフレームレートで画像を合成する。
【選択図】 図３

Description

本発明は、画像記録装置及びその制御方法、並びにプログラムに関し、特に、動画及び静止画を記録媒体に記録する画像記録装置、及びその制御方法、並びにプログラムに関する。

従来、デジタルカメラ、又はカメラ一体型ＶＴＲ（ビデオカメラ)等の画像記録装置は、被写体像を撮影する撮像手段と、撮像画像を確認するためのモニター手段と、撮像画像を記録再生するための記録再生手段とを備える。撮像手段では、レンズ系より被写体像をＣＣＤに結像し、ＣＣＤにより被写体像を電気画像信号に変換し、撮像プロセス部により電気画像信号に所定の撮像処理を施す。モニター手段では、電気画像信号に変換された撮像信号をデジタル化し、ＮＴＳＣ／ＰＡＬ等のＤＶフォーマットのビデオ信号に変換してモニターに画像を表示する。記録再生手段では、ＤＶフォーマットのビデオ信号をテープに記録し、記録したビデオ信号を再生する。

上記従来の画像記録装置で動画を撮影するときは、撮影者は、モニター手段にて被写体を確認しながら、撮像手段にて被写体を撮影する。撮影者は、被写体に画角を合わせるためのズーム操作、パンニング動作、及び記録媒体への記録開始／停止等の記録動作の操作を常に行いながら撮影を行う。このような画像記録装置は、私用の撮影の場合、旅行の記録や、子供の成長過程／学校行事等の記録に使用されることが多い。

一方、近年では携帯電話等に用いられている超小型の撮像手段が実用化されており、主撮像系及び副撮像系の２つの超小型の撮像手段を有し、主撮像系により撮像された画像に副撮像系により撮像された画像をピクチャインピクチャ（ＰｉｎＰ）合成し、記録媒体へ主撮像信号と副撮像信号を同時記録することができる画像記録装置が提案されている（例えば、特許文献１参照）。この画像記録装置によれば、例えば、副撮像系により撮像した撮影者の画像と、主撮像系により撮像した被写体とを合成することにより、撮影中に、撮影者と被写体を一緒に写すことができる。
特開平０５−１１０９３９号公報

しかしながら、上記主撮像系及び副撮像系を画像記録装置において、副撮像系は、静止画の撮影を主目的として作られており、ＴＶ等で標準的に再生することができるフレームレート出力の動画を撮影することができる副撮像系は作られていない。

そのため、副撮像系を親画面とし、主撮像系を子画面とするＰｉｎＰを行うと、本来、動解像度が高い主撮像系の画像が、動解像度の低い副撮像系のフレームレートで出力されるので、見苦しい画像になってしまう。

本発明の目的は、主撮像系及び副撮像系の画像のフレームレートの違いに左右されることなく、高動解像度の合成画像を得ることができる画像記録装置及びその制御方法、並びにプログラムを提供することにある。

上述の目的を達成するために、請求項１記載の画像記録装置は、第１のレンズと、第２のレンズと、前記第１のレンズにより結像された画像を第１の画像信号に変換する第１の撮像手段と、前記第２のレンズにより結像された画像を第２の画像信号に変換する第２の撮像手段と、画像合成時のフレームレートを設定する設定手段と、前記設定された画像合成時のフレームレートで前記第１の画像信号及び前記第２の画像信号の画像を合成する合成手段とを備えることを特徴とする。

上述の目的を達成するために、請求項６記載の制御方法は、第１のレンズと、第２のレンズとを備える画像記録装置の制御方法において、前記第１のレンズにより結像された画像を第１の画像信号に変換する第１の撮像ステップと、前記第２のレンズにより結像された画像を第２の画像信号に変換する第２の撮像ステップと、画像合成時のフレームレートを設定する設定ステップと、前記設定された画像合成時のフレームレートで前記第１の画像信号及び前記第２の画像信号の画像を合成する合成ステップとを備えることを特徴とする。

上述の目的を達成するために、請求項１１記載のプログラムは、請求項５乃至１０のいずれか１項に記載の制御方法をコンピュータに実行させることを特徴とする。

請求項１記載の画像記録装置によれば、画像合成時のフレームレートを設定し、設定された画像合成時のフレームレートで第１の画像信号及び第２の画像信号の画像を合成するので、主撮像系及び副撮像系の画像のフレームレートの違いに左右されることなく、高動解像度の合成画像を得ることができる。

請求項２記載の画像記録装置によれば、設定手段は、第１の画像信号のフレームレート及び第２の画像信号のフレームレートを比較し、比較の結果、速い方のフレームレートを画像合成時のフレームレートに設定するので、主撮像系及び副撮像系の画像のフレームレートの違いに左右されることなく、高動解像度の合成画像を得ることができる。

請求項３記載の画像記録装置によれば、テレビジョン画像のフレームレートを画像合成時のフレームレートに設定するので、合成画像信号の記録・表示を考慮した合成画像を得ることができる。

以下、本発明の実施の形態を図面を参照しながら詳述する。

図１は、本発明の実施の形態に係る画像記録装置の内部構成を示すブロック図である。

図１において、画像記録装置１００は、第１の撮像部としてのメインカメラ１０１と、第２の撮像部としてのサブカメラ１０２と、画像信号処理回路１０３と、ビデオ信号処理回路１０４と、メモリカードコントローラ１０５と、文字信号発生回路１０６と、画像記録装置１００の各部の制御を行うシステムコントローラ１０７と、デジタルビデオカセットテープ１０８と、ＳＤメモリカード又はマルチメディアカード（ＭＭＣ）等のメモリカード１０９と、ＬＣＤパネル１１０と、電子ビューファインダ（ＥＶＦ）１１１と、記録開始スイッチ１１２と、サブカメラＯＮ／ＯＦＦスイッチ１１３と、合成開始スイッチ１１４と、記録選択スイッチ１１５とを備える。

メインカメラ１０１及びサブカメラ１０２は、被写体を画像信号に変換し、夫々、メインカメラ画像信号及びサブカメラ画像信号を出力する。画像信号処理回路１０３は、メインカメラ画像信号及びサブカメラ画像信号の入力の切り替えや、メインカメラ画像信号及びサブカメラ画像信号の合成を行う。

ビデオ信号処理回路１０４は、画像信号処理回路１０３から出力された画像信号をビデオ信号に変換してデジタルビデオカセットテープ１０８に記録する。メモリカードコントローラ１０５は、画像信号処理回路１０３から出力された画像信号にＪＰＥＧ／ＭＰＥＧ処理を施してメモリカード１０９に記録する。

ＬＣＤパネル１１０及びＥＶＦ１１１は、ビデオ信号処理回路１０４から出力されたビデオ信号に基づいて、画像を表示する。文字信号発生回路１０６は、表示される画像に文字情報を付加するための文字信号を発生させる。

図２は、図１における画像信号処理回路１０３の内部構成を示すブロック図である。

図２において、画像信号処理回路１０３は、メインカメラ用画像メモリ２０３と、サブカメラ用画像メモリ２０６と、画像比較回路２０７と、リサイズ処理回路２０８，２０９と、画像合成回路２１０と、画像合成用メモリ２１１とを備える。

また、メインカメラ１０１は、メインレンズ系２０１と、メイン撮像処理回路２０２とを備え、サブカメラ１０２は、サブレンズ系２０４と、サブ撮像処理回路２０５とを備える。

メインカメラ１０１において撮像される画像は、メインレンズ系２０１により撮像装置としての不図示のＣＣＤに結像され、電気画像信号に変換され、メイン撮像処理回路２０２において所定の撮像処理が施され、メインカメラ画像信号としてメインカメラ用画像メモリ２０３に記憶される。

また、サブカメラ１０２にて撮像される画像は、サブレンズ系２０４により撮像装置としての不図示のＣＣＤに結像され、電気画像信号に変換され、サブ撮像処理回路２０５において所定の撮像処理が施され、サブカメラ画像信号としてサブカメラ用画像メモリ２０６に記憶される。

メインカメラ用画像メモリ２０３及びサブカメラ用画像メモリ２０６に記憶された画像信号は、ビデオ信号処理回路１０４又はメモリカードコントローラ１０５に出力され、デジタルビデオカセットテープ１０８、又はメモリカード１０９への記録処理が行われる。

操作者が、合成開始スイッチ１１４により合成画像を選択した場合は、メインカメラ画像信号及びサブカメラ画像信号は、リサイズ処理回路２０８，２０９に夫々入力され、リサイズ処理回路２０８，２０９において、ＰｉｎＰ画像としてのリサイズ処理が行われる。画像比較回路２０７は、メイン撮像処理回路２０２及びサブ撮像処理回路２０５からメインカメラ画像信号及びサブカメラ画像のフレームレート情報を取得し、メインカメラ画像信号及びサブカメラ画像のフレームレートを比較して、速い方のフレームレートを画像合成時のフレームレートに設定し、設定した画像合成時のフレームレートの情報を画像合成回路２１０に伝達する。

画像合成回路２１０では、伝達された画像合成時のフレームレート情報に基づいて、画像合成メモリを用いて画像合成処理を行い、合成された画像の画像信号をビデオ信号処理回路１０４又はメモリカードコントローラ１０５に出力する。

図３は、図１におけるシステムコントローラ１０７によって実行される画像合成処理のフローチャートである。

図３において、画像比較回路２０７は、メイン撮像処理回路２０２及びサブ撮像処理回路２０５から取得したメインカメラ画像及びサブカメラ画像のフレームレート情報を比較して、メインカメラ画像のフレームレートがサブカメラ画像のフレームレートより速いか否かを判別する（ステップＳ３０１）。

ステップＳ３０１の判別の結果、メインカメラ画像のフレームレートがサブカメラ画像のフレームレートより速いときは、メインカメラ画像のフレームレート情報を画像合成時のフレームレートとして画像合成回路２１０に伝達する一方（ステップＳ３０２）、サブカメラ画像のフレームレートがメインカメラ画像のフレームレートより速いときは、サブカメラ画像のフームレート情報を画像合成時のフレームレートとして画像合成回路２１０に伝達し（ステップＳ３０３）、ステップＳ３０４に進む。

ステップＳ３０４では、ＰｉｎＰ画像の親画面にメインカメラ画像が選択されたか否かを判別し、親画面にメインカメラ画像が選択されたときは、画像合成回路２１０は、メインカメラ画像信号を画像合成用メモリ２１１に転送し、リサイズ処理回路２０９によりリサイズ処理されたサブカメラ画像信号を画像合成用メモリ２１１内のＰｉｎＰ位置に該当するアドレスに、画像比較回路２０７より伝達された画像合成時のフレームレートで転送することにより、画像を合成し、合成された画像の画像信号をビデオ信号処理回路１０４に出力する（ステップＳ３０５）。

次に、ビデオ信号処理回路１０４は、合成された画像をビデオ信号に変換し、どの状態で画像を表示しているかを示す文字情報「同時記録（メイン）」を付加した後、ＬＣＤパネル１１０及びＥＶＦ１１１に図４（ａ）の表示１のように表示し（ステップＳ３０６）、文字表示情報が付加されてない画像信号をデジタルビデオカセットテープ１０８に記録し（ステップＳ３０７）、本処理を終了する。

ステップＳ３０４の判別の結果、親画面にサブカメラ画像が選択されたときは、画像合成回路２１０は、リサイズ処理回路２０９によりリサイズ処理されたサブカメラ画像信号を画像合成用メモリ２１１に転送し、リサイズ処理回路２０９によりリサイズ処理されたメインカメラ画像信号を画像合成用メモリ２１１内のＰｉｎＰ位置に該当するアドレスに、画像比較回路２０７より伝達された画像合成時のフレームレートで転送することにより、画像を合成し、合成された画像の画像信号をビデオ信号処理回路１０４に出力する（ステップＳ３０８）。

次に、ビデオ信号処理回路１０４は、合成された画像をビデオ信号に変換し、どの状態で画像を表示しているかを示す文字情報「同時記録（サブ）」を付加した後、ＬＣＤパネル１１０及びＥＶＦ１１１に図４（ｂ）の表示２のように表示し（ステップＳ３０９）、文字表示情報が付加されてない画像信号をデジタルビデオカセットテープ１０８に記録し（ステップＳ３０７）、本処理を終了する。

図３の処理によれば、画像比較回路２０７は、メインカメラ画像及びサブカメラ画像のフレームレートを比較し（ステップＳ３０１）、速い方のフレームレート情報を画像合成時のフレームレートとして画像合成回路２１０に伝達し（ステップＳ３０２、Ｓ３０３）、画像合成回路２１０は、画像比較回路２０７より伝達された画像合成時のフレームレートで画像を合成する（ステップＳ３０５、Ｓ３０８）ので、主撮像系及び副撮像系の画像のフレームレートの違いに左右されることなく、高動解像度の合成画像を得ることができる。

なお、ステップＳ３０７において、画像信号をデジタルビデオカセットテープ１０８に記録するとしたが、メモリカード１０９に記録されてもよく、ＤＩＳＣ等の他の記録媒体に記録されてもよい。

また、メインカメラ画像及びサブカメラ画像のフレームレートのどちらが速いか既に分かっている場合、例えば、メインカメラが動画の撮影を目的としたカメラであり、メインカメラ画像のフレームレートがサブカメラ画像のフレームレートより速いことが分かっている場合は、ステップＳ３０１を省略して、速い方のフレームレート情報を画像合成回路２１０に伝達するように構成されてもよい。

更に、画像比較回路２０７において、メインカメラ画像及びサブカメラ画像のフレームレートがテレビジョン画像のフレームレート（ＮＴＳＣであれば３０フレーム、ＰＡＬであれば２５フレーム）と異なっていた場合に、テレビジョン画像のフレームレートに合わせる処理を行うように構成されてもよい。これにより、合成画像信号の記録・表示を考慮した合成画像を得ることができる。

本実施の形態は、ビデオカメラ、デジタルカメラ、携帯電話等に適用されてもよい。

また、本発明の目的は、実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。

この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。

又、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。または、プログラムコードをネットワークを介してダウンロードしてもよい。

また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。

更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。

本発明の実施の形態に係る画像記録装置の内部構成を示すブロック図である。 図１における画像信号処理回路の内部構成を示すブロック図である。 図１におけるシステムコントローラによって実行される画像合成処理のフローチャートである。 図３の画像合成処理で表示される画像の一例を示す図であり、（ａ）はステップＳ３０６で表示される画像の一例を示し、（ｂ）はステップＳ３０９で表示される画像の一例を示す。

符号の説明

１００ 画像記録装置
１０１ メインカメラ
１０２ サブカメラ
１０３ 画像信号処理回路
１０４ ビデオ信号処理回路
１０５ メモリカードコントローラ
１０６ 文字信号発生回路
１０７ システムコントローラ
１０８ デジタルビデオカセットテープ
１０９ メモリカード
１１０ ＬＣＤパネル
１１１ ＥＶＦ

Claims (11)

1. 第１のレンズと、
   第２のレンズと、
   前記第１のレンズにより結像された画像を第１の画像信号に変換する第１の撮像手段と、
   前記第２のレンズにより結像された画像を第２の画像信号に変換する第２の撮像手段と、
   画像合成時のフレームレートを設定する設定手段と、
   前記設定された画像合成時のフレームレートで前記第１の画像信号及び前記第２の画像信号の画像を合成する合成手段とを備えることを特徴とする画像記録装置。
2. 前記設定手段は、前記第１の画像信号のフレームレート及び第２の画像信号のフレームレートを比較する比較手段を備え、前記比較の結果、速い方のフレームレートを画像合成時のフレームレートに設定することを特徴とする請求項１記載の画像記録装置。
3. 前記設定手段は、テレビジョン画像のフレームレートを画像合成時のフレームレートに設定することを特徴とする請求項１又は２記載の画像記録装置。
4. 前記合成手段は、前記第１の画像信号及び前記第２の画像信号のいずれかを親画面として選択させる選択手段を備え、前記選択結果に基づいて前記画像を合成することを特徴とする請求項１乃至３のいずれか１項に記載の画像記録装置。
5. 前記合成された画像の画像信号を記録する記録手段を備えることを特徴とする請求項１乃至４のいずれか１項に記載の画像記録装置。
6. 第１のレンズと、第２のレンズとを備える画像記録装置の制御方法において、
   前記第１のレンズにより結像された画像を第１の画像信号に変換する第１の撮像ステップと、
   前記第２のレンズにより結像された画像を第２の画像信号に変換する第２の撮像ステップと、
   画像合成時のフレームレートを設定する設定ステップと、
   前記設定された画像合成時のフレームレートで前記第１の画像信号及び前記第２の画像信号の画像を合成する合成ステップとを備えることを特徴とする制御方法。
7. 前記設定ステップは、前記第１の画像信号のフレームレート及び第２の画像信号のフレームレートを比較する比較ステップを備え、前記比較の結果、速い方のフレームレートを画像合成時のフレームレートに設定することを特徴とする請求項５記載の制御方法。
8. 前記設定ステップは、テレビジョン画像のフレームレートを画像合成時のフレームレートに設定することを特徴とする請求項５又は６記載の制御方法。
9. 前記合成ステップは、前記第１の画像信号及び前記第２の画像信号のいずれかを親画面として選択させる選択ステップを備え、前記選択結果に基づいて前記画像を合成することを特徴とする請求項５乃至８のいずれか１項に記載の制御方法。
10. 前記合成された画像の画像信号を記録媒体に記録する記録ステップを備えることを特徴とする請求項５乃至９のいずれか１項に記載の制御方法。
11. 請求項５乃至１０のいずれか１項に記載の制御方法をコンピュータに実行させることを特徴とするプログラム。

Images