JP2005341416A - 撮像機能付き電子機器およびその画像表示方法 - Google Patents

Abstract

【課題】過去に撮像された画像データの撮像条件と新たに撮像しようとする画像データの撮像条件との間に高い再現性を簡便な方法で確保することができる撮像機能付き電子機器およびその画像表示方法を提供する。
【解決手段】本発明にかかる撮像機能付き電子機器は、被写体を撮像する撮像部と、撮像部が撮像しようとする被写体のイメージを表示する表示部と、撮像部で撮像された画像データを記憶する記憶部と、記憶部に記憶された画像データと撮像部が撮像しようとする被写体のイメージとを統合する処理部と、処理部で統合されたイメージを表示部に表示させる表示手段とを備えたことを特徴とする。
【選択図】 図３

Description

本発明は、撮像機能付き電子機器およびその画像表示方法にかかり、特に過去に撮像した画像情報を参照して被写体を撮像する撮像機能付き電子機器およびその画像表示方法に関する。

近年、デジタルカメラに代表される撮像機能付き電子機器の技術開発の進展は著しく、広く一般ユーザに対しても普及してきている。

特に、デジタルカメラにおいては、撮像した画像データがデジタルデータとしてメモリに記憶され、さらに記憶された画像データをデジタル処理によって比較的容易に加工できるため、従来のアナログ式カメラでは実現できなかった機能が実現可能となる。

例えば、特許文献１では、過去に撮像した画像データと新たに撮像した画像データとをデジタルカメラ内で合成する技術が開示されている。かかる技術によって例えば、人物Ａを撮像した過去の画像データと、新たに撮像した人物Ｂの画像データとを合成することにより、人物Ａと人物Ｂとのいわゆるツーショット画像を得ることができるとするものである。

また、特許文献２には、過去に撮像した画像データをデジタルカメラで再生させつつ、これと一部オーバラップさせて新たな画像データを撮像し、両者の画像データを合成することによって第３の画像データを得る技術が開示されている。この技術によれば、視野範囲を順次ずらして撮像した複数の画像データを合成することにより、空間的に広い範囲を撮像したと同等の画像を得ることができるとするものである。
特開２００３−１８９１６０号公報 特開２００１−８０８１号公報

特許文献１および２が開示する技術は、いずれも、異なる被写体を撮像した２以上の原画像データを合成することによって、実際に撮像した個々の画像データとは異なる合成画像データを得るものである。

この際、過去に撮像した原画像データをデジタルカメラに再生させることによって、撮像者は過去の原画像データに対して合成されるべき新たな画像の撮像アングルを容易に決定できることになる。

特許文献１および２が提供する技術は、ほぼ同一の時間における異なる空間画像（異なる被写体の合成画像）を得たいという、撮像者のニーズに応えるものである。

一方、これとは逆に、異なる時間におけるほぼ同一の空間画像を得たいという、撮像者のニーズも強い。

例えば、子供の成長や、植物の成長を可能な限り同一の背景条件および撮像条件（カメラのアングル、ズーミング、絞り、被写体との距離等）で所定期間毎に記録したいという撮像者のニーズがある。

また、例えば毎年モデルチェンジされる類似製品を、可能な限り同一の背景条件および同一の撮像条件で記録したいというニーズもある。

このように、同時の時間帯に得ることが原理的に不可能な複数の被写体を、時を異にして、可能なかぎり同一背景および同一撮像条件で記録したいというニーズは非常に高い。

従来方式のカメラによってかかるニーズに応えるためには、例えば３脚等を用いて過去の撮像条件を可能な範囲で再現する以外に方法は無かった。

また、たとえ３脚等を用いたとしても、撮像しようとしている被写体の画像と過去に撮像した画像との撮像条件を一致させるためには、過去の画像を再生して現画像と比較する手順を何度も繰り返す必要があった。

本発明は、上記事情に鑑みてなされたもので、過去に撮像された画像データの撮像条件と新たに撮像しようとする画像データの撮像条件との間に高い再現性を簡便な方法で確保することができる撮像機能付き電子機器およびその画像表示方法を提供することを目的とする。

上記目的を達成するため、本発明にかかる撮像機能付き電子機器は、請求項１に記載したように、被写体を撮像する撮像部と、撮像部が撮像しようとする被写体のイメージを表示する表示部と、撮像部で撮像された画像データを記憶する記憶部と、記憶部に記憶された画像データと撮像部が撮像しようとする被写体のイメージとを統合する処理部と、処理部で統合されたイメージを表示部に表示させる表示手段と、を備えたことを特徴とするものである。

また、上記目的を達成するため、本発明にかかる画像表示方法は、請求項７に記載したように、被写体を撮像する撮像部とこの撮像部が撮像しようとする被写体のイメージを表示する表示部とを備えた撮像機能付き電子機器の画像表示方法において、撮像部で撮像された画像データを記憶部に記憶し、記憶部に記憶された画像データと前記撮像部が撮像しようとする被写体のイメージとを統合する処理を行い、統合されたイメージを前記表示部に表示させることを特徴とするものである。

本発明にかかる撮像機能付き電子機器およびその画像表示方法によれば、過去に撮像された画像データの撮像条件と新たに撮像しようとする画像データの撮像条件との間に高い再現性を簡便な方法で確保することができる。

本発明に係る撮像機能付き電子機器およびその画像表示方法の実施の形態について添付図面を参照して説明する。

図１は、撮像機能付き電子機器の一実施形態をデジタルカメラ１に適用した外観図である。図１（ａ）はデジタルカメラ１の正面方向から見た外観図であり、図１（ｂ）はデジタルカメラ１の背面方向から見た外観図である。

図１（ａ）に示すように、デジタルカメラ１は機器構成品を収容するボックス上の本体ケース１０を有する。本体ケース１０の前面には、被写体を撮像するレンズ部１１が設けられる他、フラッシュ撮像時に用いられるフラッシュランプ１２、セルフタイマ撮影中であることを示すセルフタイマランプ１３等が設けられる。

また、本体ケース１０の上面には、シャッタボタン１４等が配設される。

本体ケース１０の背面上部には、デジタルカメラ１の電源を入切する電源スイッチ１５や、電源の入切を表示するインジケータ１６が配設される。

本体ケース１０の背面の中央部には、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）１７が設けられる。ＬＣＤ１７には、撮像しようとする被写体の画像データ（新画像データ）が表示される他、過去に撮像され、後述するメモリカード３３等の記憶装置に記憶されている画像データ（先画像データ）が表示される。またＬＣＤ１７には、撮像条件に関する情報が表示される。

撮像条件に関する情報とは、撮像時におけるデジタルカメラ１のアングル等の情報をいう。アングル等の情報には、デジタルカメラ１の傾斜角情報或いは姿勢角情報、被写体とデジタルカメラ１との距離情報、絞り値やシャッタスピード等の露光情報、倍率等のズーミング情報等が含まれるものである。

この他、ＬＣＤ１７には、各種メニューやアイコン（処理の内容や対象を小さな絵や記号で表現したもの）等も表示される。

また、デジタルカメラ１の背面には、ユーザが各種の操作を行うためのタッチパネル１８が設けられる。タッチパネル１８はさらに複数のファンクションキーを備える。ファンクションキーには例えば、各種モードを切り換えるためのモードキー１８ａ、ズーミングの制御を行うズーミンクキー１８ｂ、ＬＣＤ１７の表示内容を切り換えるディスプレイキー１８ｃ、各種メニューを表示させるメニューキー１８ｄ等がある。

この他、デジタルカメラ１の底面には、デジタルカメラ１に内蔵されるメモリカード３３やバッテリ１００を取り出すための開閉可能なカバー（図示せず）が設けられる。

図２は、デジタルカメラ１のシステム構成を示す図である。

デジタルカメラ１は、被写体の反射光をレンズで捉えこれをデジタル画像データに変換する撮像部２０と、得られた画像データを不揮発性のメモリに記憶させる記憶部３０と，撮像しようとする被写体の画像データや過去に撮像された画像データをＬＣＤ１７に表示させる表示部４０と、デジタルカメラ１の全体の制御や画像データの統合処理を行う統合処理部５０とを本体ケース１０内に備える。

撮像部２０，記憶部３０，表示部４０および統合処理部５０は、バス７０を介して相互に接続される。

また、デジタルカメラ１は、操作部６０を備える。操作部６０は、シャッタボタン１４、電源スイッチ１５，タッチパネル１８等から構成され、ユーザが適宜操作を行うためのものである。

さらに、デジタルカメラ１はパーソナルコンピュータ等の外部機器と連接させるための外部Ｉ／Ｆ８０を備える。この外部Ｉ／Ｆ８０は、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ケーブルを介して外部のパーソナルコンピュータ等に接続するためのもので、記憶部３０に記憶された画像データをパーソナルコンピュータにダウンロードするような場合に用いられる。

またデジタルカメラ１は、各部へ適宜の直流電源を供給するためのバッテリ１００およびＤＣ／ＤＣコンバータ１０１を備える他、デジタルカメラ１の傾斜角を検出する傾斜角センサ９０を備える。

撮像部２０の内部構成は、レンズ部１１，ＣＣＤ素子等からなる撮像デバイス２２，利得制御等を行うアナログ処理部２３，Ａ／Ｄ変換部２４，デジタル信号処理部２５が順次接続されて構成される。

この他、撮像部２０は、各種制御信号を生成する制御信号生成部２６，レンズ部の位置をモータで駆動しズーミングやフォーカスを調整するモータ駆動制御部２７、フラッシュランプ１２等で構成される。

記憶部３０は、取り外し可能な不揮発性のメモリであるメモリカード３３の他、メモリカード３３に対して画像データの書き込み読みだしを制御するメモリカードドライブ３２、画像データのデータ圧縮／伸長を行う画像圧縮伸長処理部３１を備える。

表示部４０は、デジタルカメラ１の背面に設けられ画像データ等を表示するＬＣＤ１７の他、画像データを一時的に保存する画像メモリ４１およびＬＣＤ１７への表示を制御するＬＣＤ表示制御部４２から構成される。

統合処理部５０は、デジタルカメラ１全体の制御や画像データの統合処理を行うＣＰＵ５１を備える。また、ＣＰＵ５１で実行されるプログラムが記憶されるＲＯＭ５３、ＣＰＵ５１のワークエリアとして機能する他画像データを一時的に記憶するメインメモリ５２を備える。

次に、デジタルカメラ１の基本撮像モードと再生モードの基本動作について図２のシステム構成図を用いて説明する。

基本撮像モードでは、被写体からの反射光はレンズ部１１で集光されて撮像デバイス２２の上に被写体の像が結像される。

この際、レンズ部１１に設けられるレンズの位置を、例えばモータで駆動することによってフォーカス或いはズーミングを調整することができる。モータの駆動は、制御信号生成部２６からの制御信号を受けてモータ駆動制御部２７が発生する駆動信号によって行われる。

撮像デバイス２２は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ）による平面アレイによって構成される。

撮像デバイス２２の出力はアナログ信号である。この信号がアナログ信号処理部２３で自動利得制御等のアナログ信号処理を実施された後、Ａ／Ｄ変換部２４でデジタル信号に変換される。

デジタル信号処理部２５は、入力されたデジタル信号に対して各種補正処理を行った後、画像データとしてバス７０に出力する。

一方、制御信号生成部２６は、ＣＰＵ５１からの制御により、撮像デバイス２２，アナログ信号処理部２３、Ａ／Ｄ変換部２４等に供給するクロック信号や各種制御信号を生成する。

また、制御信号生成部２６は、夜間等におけるフラッシュ撮像のためにフラッシュランプ１２の発光を制御する。

デジタル信号処理部２５からバス７０に出力された画像データは、表示部４０に設けられる画像メモリ４１に一時的に保存される。また併せて画像メモリ４１に保存された画像データは逐次バス７０を介してＬＣＤ表示制御部４２に読み出され、デジタルカメラ１の背面に設けられるＬＣＤ１７に表示される。

ユーザは、ＬＣＤ１７に表示される画像データを視認しながらデジタルカメラ１の傾斜角或いは姿勢角を任意に変えることによって、被写体を所望のアングルに捉えることができる。また、例えばタッチパネル１８に設けられるズーミングキー１８ｂによって被写体を所望の撮像倍率に設定することができる。

ユーザは、被写体のアングルやズーミングが所望の状態に設定されたと判断すると、次にシャッタボタン１４を半押しする。

シャッタボタン１４が半押しされると、デジタルカメラ１は、自動フォーカス機能や自動露光機能によってレンズ位置、絞り、シャッタスピード等を適切な値に設定する。

デジタルカメラ１は、フォーカスや露光が適切に設定された場合はユーザに例えば音やＬＣＤ１７の表示によって撮像の準備が完了した旨を知らせる。

撮像準備完了を認識したユーザはシャッタボタン１４をさらに押し込み被写体を撮像する。

画像メモリ４１に記憶される画像データは、ユーザがシャッタボタン１４を押し込むまでは逐次更新されているが、シャッタボタン１４を押し込んだ時点、即ちシャッタを切った時点以降の画像データは更新が停止され、シャッタを切った時点の画像データが画像メモリ４１に保存される。

画像メモリ４１に保存された画像データは、ユーザの操作によって或いは自動的に、バス７０を介して記憶部３０に設けられるメモリカード３３に記憶させる。

画像メモリ４１に保存された画像データをメモリカード３３に記憶させるにあたっては、まず記憶部３０に設けられる画像圧縮／伸長処理部３１によって、画像データの圧縮を行った後にメモリカード３３に記憶させる。

画像データの圧縮は、例えばＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｆｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式と呼ばれる画像圧縮方式によって行われる。

画像圧縮／伸長処理部３１で圧縮された画像データは、バス７０を介してメモリカードドライブ３２に入力され、メモリカードドライブ３２の制御の下でメモリカード３３に記憶される。

メモリカード３３は、不揮発性のメモリであり、例えばフラッシュメモリ等で構成される。メモリカード３３には画像データの他、基本撮像モードにおいては画像番号等の画像管理情報も併せて記憶される。

以上がデジタルカメラ１の基本撮像モードにおける動作概要である。

なお、基本撮像モード全体にわたるデジタルカメラ１の制御は、統合処理部５０に設けられるＣＰＵ５１によって行われる。

次にデジタルカメラ１の再生モードの基本動作について説明する。

基本撮像モードから再生モードへの切換えは、タッチパネル１８に設けられるモードキー１８ａの操作によって行われる。

再生モードでは、メモリカード３３に記憶された過去の画像データを読み出してＬＣＤ１７に表示させる。

具体的には、メモリカード３３に記憶された画像データは、メモリカードドライブ３２の制御の下で読み出され、バス７０を介して画像圧縮／伸長処理部３１に入力される。画像圧縮／伸長処理部３１では、例えばＪＰＥＧ方式で圧縮された画像データを伸長（復元）した後、バス７０を介して画像メモリ４１に出力する。

画像メモリ４１に出力された画像データはさらにＬＣＤ表示制御部４２を介してＬＣＤ１７に表示される。

メモリカード３３には、複数の画像データが記憶されるが、ユーザは例えばＬＣＤ１７に表示されるメニュー画面等によって、複数の画像データの中から任意の画像データを選択してＬＣＤ１７にすることが可能である。

また、複数の画像データを小さな画面で同時に表示させる方式、いわゆるサムネイル表示方式を選択することも可能である。

この他、メモリカード３３に記憶された複数の画像データをＬＣＤ１７に順次切り換えながら表示させることも可能である。

これらの表示方法の選択や制御は、いずれも統合処理部５０に設けられるＣＰＵ５１の制御によって行われる。

外部Ｉ／Ｆ部８０は、種々の外部機器との連接を可能とするものである。例えばＵＳＢケーブルを介してパーソナルコンピュータと連接し、メモリカード３３に記憶された画像データをパーソナルコンピュータにダウンロードすることが可能である。

この他、外部Ｉ／Ｆ部８０には、例えばＡＶ（Ａｕｄｉｏ Ｖｉｄｅｏ）ケーブルを介してテレビ受像器に接続される。この場合にあっては、ユーザはメモリカード３３に記憶された画像データをＬＣＤ１７に表示させるだけでなく、テレビ受像器の大型画面に表示させることが可能となる。

次に、同一アングル撮像モードについて説明する。

同一アングル撮像モードとは、過去に撮像した画像データ（先画像データ）と、これから撮像しようとする被写体の画像データ（新画像データ）とを同一のアングル等で撮像することができる機能を提供するモードのことをいう。

アングルとは、被写体に対するデジタルカメラ１の相対的な姿勢角のことであるが、同一アングル撮像モードでは、先画像データと新画像データとのアングルのみならず、絞りやシャッタスピード等の露光条件やズーミングも含めた撮像条件を可能な限り一致させることができる機能を提供することも目的とするものである。

なお、基本撮像モードあるいは再生モードから同一アングル撮像モードへの切り換えは、モードキー１８ａの操作によって行う。

図３は、同一アングル撮像モードの動作概念を説明する図である。

まず被写体Ａからの反射光は撮像部２０によって画像データ（新画像データ）Ａ’に変換される。撮像部２０の動作は基本撮像モードと同一である。即ち、レンズ部１１で捉えられた被写体Ａの反射光は撮像デバイス２２に結像された後、アナログ信号処理部２３，Ａ／Ｄ変換部２４およびデジタル信号処理部２５で順次変換・処理された後、画像データＡ’としてバス７０に出力される。

バス７０に出力された画像データＡ’は、統合処理部５０に入力される。統合処理部５０では例えばメインメモリ５２の所定の領域（領域Ａ’）に画像データＡ’が一時的に記憶される。

画像データＡ’は、被写体Ａを捉えたものであるが、デジタルカメラ１と被写体との距離やデジタルカメラ１のアングル（ユーザが保持するデジタルカメラ１の姿勢角）に応じて時々刻々変化している。従って、メインメモリ５２に記憶される画像データＡ’は所定期間毎、例えば１／３０秒毎に更新される。

一方、同一アングル撮像モードでは、記憶部３０に設けられるメモリカード３３に記憶されている画像データ（先画像データ）Ｂもバス７０を介して統合処理部５０に併せて入力される。

より具体的には、メモリカード３３に記憶された先画像データＢはＪＰＥＧ方式等でデータ圧縮されているため、一旦画像圧縮／伸長処理部３１に入力されて、画像伸長（復元）処理が施される。その後、伸長（復元）された先画像データＢは、バス７０を介して、例えばメインメモリ５２の所定の領域（領域Ｂ）に一時的に記憶される。

先画像データＢは、メモリカード３３に記憶されている複数の画像データからユーザが任意に選択可能である。例えばメモリカード３３の画像データをサムネイル表示させてその中からユーザが任意の先画像データＢをひとつ選択すればよい。

統合表示部５０では、新画像データＡ’と先画像データＢとを用いて統合処理を行う。

統合処理の目的は、これから撮像しようとする被写体の新画像データＡ’と過去に撮像した先画像データＢとを、同時に或いは準同時に、ユーザに視認容易な形態で提供できるように統合することである。

統合表示部５０で統合された統合画像データＣは、例えばメインメモリの所定の領域（領域Ｃ）に一時的に記憶される。さらに、統合画像データＣは、表示部４０に設けられる画像メモリ４１に転送され、ＬＣＤ表示制御部４２（表示手段）を介してＬＣＤ１７に表示される。

ユーザは、ＬＣＤ１７に表示された統合画像データＣを視認することにより、先画像データＢと新画像データＡ’とのアングル等がどの程度相違しているかを容易に認識できる。

この結果、例えばユーザはデジタルカメラ１の姿勢角を変更することによって先画像データＢと新画像データＡ’とのアングルを一致させることが可能となる。

また、先画像データＢと新画像データＡ’との間で被写体の大きさが異なっているような場合には、被写体Ａとデジタルカメラ１の距離を変更して被写体の映像が同じ大きさとなるように調整すればよい。デジタルカメラ１がズーミング機能を備えている場合には操作部６０のズーミング操作によって被写体の映像の大きさを調整しても良い。

ＬＣＤ１７の視認によって、先画像データＢと新画像データＡ’のアングル等が一致したとユーザが判断するとユーザはシャッタボタン１４を押下してシャッタを切る。

シャッタが切られた時点以降は、新画像データＡ’の更新は停止され、新画像データＡ’はメインメモリ５２の領域Ａ’からバス７０を介して記憶部３０に出力される。

記憶部３０では、基本撮像モードと同様に、画像圧縮／伸長処理部３１で画像データＡ’の圧縮処理が行われた後、メモリカードドライブ３２を介してメモリカード３３に新画像データＡ’が記憶される。

図４は、本発明の第１の実施形態にかかる統合処理部の系統図を示したものである。また、図５は、本発明の第１の実施形態にかかる統合処理の処理概念を模式的な画像データを用いて説明したものである。

図５（ａ）は、撮像しようとする被写体Ａを模式的に表したものである。

図５（ｂ）は、デジタルカメラ１の撮像部２０が捉えた被写体Ａの画像データ（新画像データ）Ａ’を表したものである。デジタルカメラ１のアングル（姿勢角）によっては撮像部２０が捉えた画像データＡ’と被写体Ａとは一致しない。

図５（ｃ）は、過去に被写体Ａと類似した被写体を撮像した先画像データＢを表している。先画像データＢは、記憶部５０のメモリカード３３に記憶されている画像データの中からユーザが選択したものである。

同一アングル撮像モードにおいては、図５（ｂ）に示した新画像データＡ’は、例えば統合処理部５０に設けられるメインメモリ５２の領域Ａ’に一時的に記憶される。

また、図５（ｃ）に示した先画像データＢは、メインメモリ５２の領域Ｂに一時的に記憶される。

第１の実施形態では、先画像データＢに対して透過処理が施される。透過処理とは、２つの画像を重ね合わせた時に、前面の画像を透過して背後の画像が視認可能となるように前面の画像を加工する処理である。

透過処理の手法には種々のものがあるが、例えば画像データの画素を適宜の比率で間引きする手法によって透過処理が実現できる。

例えば、先画像データＢを１対１の比率で間引きする場合、平面上に隣りあった画素が交互に市松模様状に間引きされる。間引きされた画素の領域はブランクとなる。

図５（ｄ）は、先画像データＢに対して間引きによる透過処理が施された画像データを先画像データＢ’として表している。

透過処理は、統合処理部５０が備えるＣＰＵ５１の処理によって実行される。透過処理が施された先画像データＢ’は、メインメモリ５２の領域Ｂに上書きされる。

次に、透過処理が施された先画像データＢ’を新画像データＡの上から重ね合わせ合成する。重ね合わせ合成の結果、先画像データＢ’と新画像データＡとを同時に視認することが可能となる。図５（ｅ）は、重ね合わせ合成された統合画像データＣを表している。

重ね合わせ合成はＣＰＵ５１の処理によって実行され、統合画像データＣはメインメモリ５２の領域Ｃに記憶される。

統合画像データＣはさらに表示部４０に設けられる画像メモリ４１に転送され、ＬＣＤ表示制御部４２（表示手段）を介してＬＣＤ１７に表示される。

第１の実施形態にかかる統合処理によれば、デジタルカメラ１を同一アングル撮像モードに設定すれば、これから撮像しようとする新画像データＡ’と過去に撮像した先画像データＢとがＬＣＤ１７に同時に視認可能に表示される。

この結果、ユーザは、ＬＣＤ１７に表示される統合画像データＣをモニタすることによって新画像データＡ’と過去に撮像した先画像データＢとの相違点を容易に認識することができる。ユーザはＬＣＤ１７を見ながらアングル等を調整して、先画像データＢと同一のアングル等に設定することが可能となる。

同一アングル撮像モードを有しない従来のデジタルカメラでは、先画像データＢと同一アングル等で被写体Ａを撮像使用とする場合、再生モードで先画像データＢをＬＣＤ１７に表示させ、これをユーザが頭の中に記憶させた後に基本撮像モードに切り換えて新画像データＡ’のアングル等を調整するしかなかった。

このため、先画像データＢと新画像データＡ’との正確なアングル等の一致は困難であった。また、より一層正確にアングル等を一致させるためには、再生モードと基本撮像モードを何度も切り換えてＬＣＤ１７で確認する必要があった。

本発明が提供する第１の実施形態の同一アングル撮像モードによれば、ユーザは容易に新画像データＡ’のアングル等を先画像データＢに一致させることが可能となる。

図６は、本発明の第２の実施形態にかかる統合処理部の系統図を示したものである。また、図７は、本発明の第２の実施形態にかかる統合処理の処理概念を模式的な画像データ
を用いて説明したものである。

第２の実施形態においても、第１の実施形態と同様に新画像データＡ’は、統合処理部５０にも受けられるメインメモリ５２の領域Ａ’に一時的に記憶される。また先画像データＢもメインメモリ５２の領域Ｂに一時的に記憶される。

第２の実施形態における統合処理では、図５（ｃ）に示した先画像データＢに対して、第１の実施形態における透過処理に換えてエッジ抽出処理を施した後、新画像データＡと重ね合わせ合成を施す処理とするものである。

エッジ抽出処理の結果、先画像データＢのエッジ部分のみが抽出され、その他の部分はブランクとなる。図５（ｄ）は、エッジ抽出処理が施された先画像データＢ’を表したものである。

エッジ抽出処理の手法には種々のものがあるが特定の手法に限定するものではない。

例えば、原画像がカラー画像である場合、これを一旦グレースケールの画像に変換した後、さらに所定の輝度の閾値で白と黒の二値化画像に変換する。この二値化画像の白或いは黒の不連続点のみを抽出することによって、原画像のエッジを抽出することが可能である。

この他、例えば、原画像に対してフーリエ変換した後、ハイパスフィルタで高周波成分のみを抽出し、これを逆フーリエ変換することによってもエッジ抽出が可能である。原画像のうち、エッジ以外の領域は輝度や色彩が連続的に緩やかに変化しており、この領域の周波数成分は低いためハイパスフィルタで除去され、その結果、高い周波数成分を持つエッジ部分のみが残存するためである。

エッジ抽出処理は、例えば統合処理部５０に設けられるＣＰＵ５１の処理によって実行される。エッジ抽出処理が施された先画像データＢ’は、第１の実施形態と同様にメインメモリ５２の領域Ｂに上書き保存された後、新画像データＡと重ね合わせ合成される。

この重ね合わせ合成もＣＰＵ５１の処理によって実行された後、統合画像データＣとしてメインメモリ５２の領域Ｃに一時的に記憶される。

統合画像データＣはさらに、表示部４０の画像メモリ４１に転送され、ＬＣＤ表示制御部４２（表示手段）を介してＬＣＤ１７に表示される。

第２の実施形態においても、先画像データＢと新画像データＡとがＬＣＤ１７に同時に視認可能に表示されるため、第１の実施形態と同様の効果を得ることができる。

図８は、本発明の第３の実施形態にかかる統合処理部の系統図を示したものである。また、図９は、本発明の第３の実施形態にかかる統合処理の処理概念を模式的な画像データを用いて説明したものである。

第３の実施形態においても、第１の実施形態と同様に新画像データＡ’は、統合処理部５０に設けられるメインメモリ５２の領域Ａ’に一時的に記憶される。また先画像データＢもメインメモリ５２の領域Ｂに一時的に記憶される。

第３の実施形態における統合処理では、新画像データＡ’と先画像データＢとを交互に時分割で表示部４０に設けられる画像メモリ４１に書き込む。

画像メモリ４１に書き込まれた画像データは、ＬＣＤ表示制御部４２（表示手段）を介してＬＣＤ１７に表示される。従って、第３の実施形態によれば、新画像データＡ’と先画像データＢとを交互に時分割でＬＣＤ１７に表示される。

時分割の周期は特に限定されるものではないが、例えば新画像データＡ’を１秒間表示させた後、先画像データＢを０．５秒間表示させ、これを繰り返す。

新画像データＡ’の表示期間と先画像データＢの表示期間は、操作部６０の操作によってユーザが変更可能なように構成してもよい。

第３の実施形態によれば、第１の実施形態や第２の実施形態に比べると同時視認性の点ではやや劣るものの、新画像データＡ’と先画像データＢとが自動的に順次切り換わってＬＣＤ１７に表示されるため、ほぼ同等の効果が得られる。

また、第３の実施形態によれば、透過処理やエッジ抽出処理が不要であるため、第１の実施形態や第２の実施形態に比べて処理負荷が軽減され、システム構成が簡素化される。

図１０は、本発明の第４の実施形態にかかる統合処理部の系統図を示したものである。また、図１１は、本発明の第４の実施形態にかかる統合処理の処理概念を模式的な画像データを用いて説明したものである。

第４の実施形態は、ＬＣＤ１７に統合画像データＣの他、アングル等の撮像条件に関する情報も併せて表示させるものである。

撮像条件に関する情報の内容としては、例えばデジタルカメラ１の傾斜角情報、被写体との距離に関する情報、絞り値やシャッタスピード等の露光条件に関する情報等が含まれる。

傾斜角情報は、図２のシステム構成に示したように、デジタルカメラ１に内蔵された傾斜角センサ９０から取得可能である。先画像データＢを撮像した時点における傾斜角センサ９０からの傾斜角情報を、バス７０を介してＣＰＵ５１が取り込めばよい。

傾斜角センサ９０の方式はとくに限定されないが、例えば重力加速度を２軸で検出する方式のセンサによってデジタルカメラ１の前後傾斜角、左右傾斜角を検出することができる。また、例えば地磁気を検出する方式の方位角センサを付加すれば、３軸の姿勢角を検出することも可能である。

また、デジタルカメラ１が測距センサからの距離情報を基にオートフォーカスを行う方式であれば、測距センサからの距離情報をＣＰＵ５１が取り込むことが可能である。

さらに、絞り値やシャッタスピード等の露光条件はＣＰＵ５１の制御の下で行うものであるため、ＣＰＵ５１は認識可能である。

この他、デジタルカメラ１がズーミング機能を備えたものであれば、ズーミング制御もＣＰＵ５１の制御の下で行うものであるため、ズーミング情報をＣＰＵ５１は認識可能である。

このように、デジタルカメラ１のアングル等の情報、即ち、傾斜角情報（或いは姿勢角情報）、距離情報、露光情報、ズーミング情報等の撮像条件はいずれもＣＰＵ５１が取り込むことが可能な情報である。

第４の実施形態では、基本撮像モードおよび同一アングル撮像モードのいずれの撮像モードにおいてもこれらの撮像条件に関する情報を、撮像された先画像データＢとともにＣＰＵ５１の制御の下、メモリカード３３に記憶させる。

その後、ユーザが同一アングル撮像モードを選択した場合には、統合画像データＣと共にアングル等の撮像条件に関する情報も併せてＬＣＤ表示制御部４２（表示手段）を介してＬＣＤ１７に表示させる。

ＬＣＤ１７に表示される撮像条件に関する情報は、先画像データＢが撮像された時の情報（先撮像条件）と、現在の撮像条件に関する情報（新撮像条件）とが容易に比較可能なように表示される。

また、表示情報が多すぎて表示が煩雑になることを避けるため、ユーザが所望の情報を選択して表示できるように構成してもよい。

第４の実施形態によれば、ユーザは、画像データの比較のみならず撮像条件も過去に撮像した時のものとこれから撮像しようとするものを容易に比較できる。この結果、先画像データＢと新画像データＡ’とのアングル等をより正確に一致させることが可能となる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。

例えば、図１０および図１１に示した第４の実施形態は、第１の実施形態で得られる統合画像データＣと撮像条件とを表示させる形態としているが、第２、第３の実施形態で得られる統合画像データＣと撮像条件とを表示させる形態としてもよい。

また例えば、上述した実施形態では、統合処理で使用する画像データの一時保存領域は、統合処理部５０のメインメモリ５２上の所定領域としているが、表示部４０の画像メモリ４１上の所定領域を用いる形態としてもよい。

さらに、上述した実施形態では、統合処理部５０に設けられるＣＰＵ５１は、デジタルカメラ１全体にかかる制御を行うとともに画像合成等の統合処理を行う形態としているが、画像合成等の統合処理を専用のプロセッサで処理させる形態としても良い。

本発明にかかる撮像機能付き電子機器の一実施形態であるデジタルカメラの外観の一例を示す図。 本発明にかかる撮像機能付き電子機器の一実施形態であるデジタルカメラのシステム構成の一例を示す図。 本発明にかかる撮像機能付き電子機器の統合処理部の機能説明図。 本発明の第１の実施形態にかかる統合処理部の系統図。 本発明の第１の実施形態にかかる統合処理の処理概念図。 本発明の第２の実施形態にかかる統合処理部の系統図。 本発明の第２の実施形態にかかる統合処理の処理概念図。 本発明の第３の実施形態にかかる統合処理部の系統図。 本発明の第３の実施形態にかかる統合処理の処理概念図。 本発明の第４の実施形態にかかる統合処理部の系統図。 本発明の第４の実施形態にかかる統合処理の処理概念図。

符号の説明

１ デジタルカメラ
１０ 本体ケース
１１ レンズ部
１２ フラッシュランプ
１４ シャッタボタン
１５ 電源スイッチ
１７ ＬＣＤ
１８ タッチパネル
２０ 撮像部
３０ 記憶部
３３ メモリカード
４０ 表示部
４１ 画像メモリ
５０ 統合処理部
５１ ＣＰＵ
６０ 操作部
９０ 傾斜角センサ

Claims (12)

1. 被写体を撮像する撮像部と、
   前記撮像部が撮像しようとする被写体のイメージを表示する表示部と、
   前記撮像部で撮像された画像データを記憶する記憶部と、
   前記記憶部に記憶された画像データと前記撮像部が撮像しようとする被写体のイメージとを統合する処理部と、
   前記処理部で統合されたイメージを前記表示部に表示させる表示手段と
   を備えたことを特徴とする撮像機能付き電子機器。
2. 前記処理部は、前記記憶部に記憶された画像データに対して透過処理を行った後、前記透過処理にて生成された画像データと前記撮像部が撮像しようとする被写体のイメージとを重ね合わせて合成する処理を行うことを特徴とする請求項１に記載の撮像機能付き電子機器。
3. 前記処理部は、前記記憶部に記憶された画像データに対してエッジ抽出処理を行った後、前記エッジ抽出処理にて生成された画像データと前記撮像部が撮像しようとする被写体のイメージとを重ね合わせて合成する処理を行うことを特徴とする請求項１に記載の撮像機能付き電子機器。
4. 前記処理部は、前記記憶部に記憶された画像データと前記撮像部が撮像しようとする被写体のイメージとを交互に時分割に切り換える処理を行うことを特徴とする請求項１に記載の撮像機能付き電子機器。
5. 前記記憶部には前記撮像部で撮像された時の撮像条件に関する情報が記憶され、
   前記撮像条件に関する情報を前記表示部に表示させる手段をさらに備えることを特徴とする請求項１に記載の撮像機能付き電子機器。
6. 前記撮像機能付き電子機器は、自己の傾斜角を検出する傾斜角センサをさらに備え、
   前記記憶部には前記傾斜角センサで検出した傾斜角情報を含む撮像条件に関する情報が記憶され、
   前記傾斜角情報を含む撮像条件に関する情報を前記表示部に表示させる手段をさらに備えることを特徴とする請求項１に記載の撮像機能付き電子機器。
7. 被写体を撮像する撮像部とこの撮像部が撮像しようとする被写体のイメージを表示する表示部とを備えた撮像機能付き電子機器の画像表示方法において、
   前記撮像部で撮像された画像データを記憶部に記憶し、
   前記記憶部に記憶された画像データと前記撮像部が撮像しようとする被写体のイメージとを統合する処理を行い、
   前記統合されたイメージを前記表示部に表示させることを特徴とする画像表示方法。
8. 前記統合する処理は、前記記憶部に記憶された画像データに対して透過処理を行った後、前記透過処理にて生成された画像データと前記撮像部が撮像しようとする被写体のイメージとを重ね合わせて合成する処理を行うことを特徴とする請求項７に記載の画像表示方法。
9. 前記統合する処理は、前記記憶部に記憶された画像データに対してエッジ抽出処理を行った後、前記エッジ抽出処理にて生成された画像データと前記撮像部が撮像しようとする被写体のイメージとを重ね合わせて合成する処理を行うことを特徴とする請求項７に記載の画像表示方法。
10. 前記統合する処理は、前記記憶部に記憶された画像データと前記撮像部が撮像しようとする被写体のイメージとを交互に時分割に切り換える処理を行うことを特徴とする請求項７に記載の画像表示方法。
11. 前記撮像部で撮像された時の撮像条件に関する情報をさらに記憶し、前記撮像条件に関する情報を前記表示部にさらに表示させることを特徴とする請求項７に記載の画像表示方法。
12. 傾斜角センサで検出した傾斜角情報を含む撮像条件に関する情報をさらに記憶し、前記傾斜角情報を含む撮像条件に関する情報を前記表示部にさらに表示させることを特徴とする請求項７に記載の画像表示方法。

Images