JP2003348532A - 撮像装置 - Google Patents

Abstract

(57)【要約】 【目的】 撮影時の注視領域情報を用いて画像を記録再
生することができる撮像装置を提供すること。 【構成】 撮像部と、画像処理部と、記録部とを備えた
撮像装置において、前記撮像部に、撮影時の注視領域情
報を取得する手段と、前記画像処理部に前記注視領域情
報を用いて撮影画像情報を画像処理及び圧縮処理する手
段と、前記記録部に、前記画像処理された撮影画像情報
を記録する手段と、を備える。又、撮像部と、画像処理
部と、記録部とを備えた撮像装置において、前記撮像部
に、撮影時の注視領域情報を取得する手段と、前記画像
処理部に前記注視領域情報を用いて撮影画像情報を画像
処理及び圧縮処理する手段と、前記記録部に、前記画像
処理された撮影画像情報とともに前記注視領域情報を記
録する手段と、を備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、撮像装置における
記録再生システムに関し、特に、撮影時の注視領域情報
を用いて記録再生可能な撮像装置に関するものである。

【０００２】

【従来の技術】デジタルカメラ等の撮像装置において
は、消耗品である銀塩フィルムと異なり、画像を記録す
るだけでなく消去することも可能な記録媒体を用いてい
る。よって、ユーザは大量の画像を撮影し、その中から
不要な画像を消去して必要な画像のみを残すといった使
用法が一般的である。その際、大量の画像の中からユー
ザ所望の画像を選択するには、モニタに表示される情報
が全てとなる。

【０００３】そこで、多くのデジタルカメラでは、サム
ネイル画像とともに撮影条件等から成る付加情報を表示
する機能を持つ。又、細部の画質を確認したいユーザに
とっては、小さいモニタに表示される縮小画像では判断
が困難であるため、最近では、画像を拡大表示可能な機
能を持つデジタルカメラ等も出てきている。

【０００４】又、特開２０００−１２５１７８（キヤノ
ン）においては、撮影系の自動焦点調節手段からの情報
を利用し、測距点付近の画像を画面全体に表示する機能
を有している。これによって、ユーザは小さいモニタで
もピント確認等が可能となっている。

【０００５】

【発明が解決しようとする課題】ところが、前述のよう
な機能は、撮影後の確認時に要するものであり、注視領
域の画質向上そのものについては実現されていない。更
に、画像を拡大表示して確認する機能においては、本画
像を読み込み且つ伸張処理する必要があるため、記録画
素数の飛躍的に増加している近年では、前記処理のため
の使用メモリや処理時間が増大し、これがユーザのスト
レスとなる場合も少なくない。

【０００６】本発明は上記問題に鑑みてなされたもの
で、その目的とする処は、撮影時の注視領域情報を用い
て画像を記録再生することができる撮像装置を提供する
ことにある。

【０００７】

【課題を解決するための手段】上記目的を達成するた
め、請求項１記載の発明は、撮像部と、画像処理部と、
記録部とを備えた撮像装置において、前記撮像部に、撮
影時の注視領域情報を取得する手段と、前記画像処理部
に前記注視領域情報を用いて撮影画像情報を画像処理及
び圧縮処理する手段と、前記記録部に、前記画像処理さ
れた撮影画像情報を記録する手段と、を備えることを特
徴とする。

【０００８】請求項２記載の発明は、撮像部と、画像処
理部と、記録部とを備えた撮像装置において、前記撮像
部に、撮影時の注視領域情報を取得する手段と、前記画
像処理部に前記注視領域情報を用いて撮影画像情報を画
像処理及び圧縮処理する手段と、前記記録部に、前記画
像処理された撮影画像情報とともに前記注視領域情報を
記録する手段と、を備えることを特徴とする。

【０００９】請求項３記載の発明は、請求項１又は２記
載の発明において、前記注視領域情報として、測距点情
報、合焦情報、デフォーカス量情報、視線検出情報の何
れか又は組み合わせて記録する手段を備えることを特徴
とする。

【００１０】請求項４記載の発明は、請求項１又は２記
載の発明において、前記画像処理部に、注視領域情報を
元に算出したリスタートインターバル値を用いて圧縮す
る手段を備えることを特徴とする。

【００１１】請求項５記載の発明は、請求項１又は２記
載の発明において、前記画像処理部に、注視領域情報を
元に注視領域の画質を優先して画像処理及び圧縮する手
段を備えることを特徴とする。

【００１２】請求項６記載の発明は、請求項１又は２記
載の発明において、前記画像処理部及び記録部に、前記
注視領域を部分領域符号化（ＲＯＩ）を用いて画像処理
及び圧縮し記録する手段を備えることを特徴とする。

【００１３】請求項７記載の発明は、再生部と、モニタ
部を備えた撮像装置において、前記再生部に、撮影画像
情報とともに撮影時の注視領域情報を抽出し、注視領域
周辺を優先して再生する手段と、前記モニタ部に、前記
注視領域周辺を拡大して表示する表示手段と、を備える
ことを特徴とする。

【００１４】

【発明の実施の形態】以下に本発明の実施の形態を添付
図面に基づいて説明する。

【００１５】＜実施の形態１＞図１は本実施形態の一例
である電子カメラの構成図である。このような構成の場
合、撮影者によるカメラ操作スイッチ１−１１（カメラ
のメインＳＷ、レリーズＳＷ、操作ボタン等で構成）の
状態変化を全体制御回路１−１２が検出し、その他の各
回路ブロックへの電源供給を開始する。撮影画面範囲内
の被写体像は、主撮影光学系１−１を通して撮像手段１
−２上に結像し、この撮像手段１−２からの電気信号
を、各画素毎に順々にＡ／Ｄ変換手段１−３を通して所
定のデジタル信号に変換した後、プロセス処理回路１−
４へ入力する。このプロセス処理回路１−４では、撮像
手段１−２の各画素データを基にＲＧＢの各色信号を生
成し、通常撮影前の状態では、この結果をメモリ制御手
段１−５を通してビデオメモリ１−９に定期的（各フレ
ーム毎）に転送することによって、モニタ表示手段１−
１０を介してファインダ表示等を行っている。

【００１６】一方、カメラ操作スイッチ１−１１の操作
により、撮影者が撮影動作を行った場合には、全体制御
回路１−１２からの制御信号によって上記プロセス処理
回路１−４からの１フレーム分の各画素データをフレー
ムメモリ１−６内に記憶し、続いてこのフレームメモリ
１−６内のデータをメモリ制御手段１−５及び作業用の
ワークメモリ１−７によって、所定の圧縮フォーマット
に基づきデータ圧縮し、その結果を外部メモリ１−８
（通常フラッシュメモリ等の不揮発性メモリを使用）
。

【００１７】又、撮影済みの画像データを観察する場合
には、上記外部メモリに圧縮記憶されたデータを、メモ
リ制御手段１−５を通して通常の撮影画素毎のデータに
伸張し、その結果をビデオメモリ１−９へ転送すること
によってモニタ表示手段１−１０を通して行うことがで
きる。

【００１８】図２は本実施形態の一例であるファインダ
部の構成図である。

【００１９】本実施の形態では、注視領域情報として測
距点情報及び合焦情報を使用して画像処理及び記録する
手法について説明する。

【００２０】先ず、記憶する枠はカメラに具備されたフ
ァインダの外枠を表し、ファインダ内表示画像とほぼ同
じ範囲が撮影画像として記録される。ファインダ内に複
数配置された枠２−１は全て測距枠を表し、自動又はユ
ーザ指定された測距枠で合焦するようにオートフォーカ
ス制御が行われる。オートフォーカス制御の結果、合焦
した測距枠２−２の位置が取得できる。測距枠及び合焦
枠の位置情報としては、例えばファインダの左上を起点
とした縦横の座標を関連付けることで位置の特定は可能
である。図２において、ｘ座標方向に１〜５、ｙ座標方
向に１〜３の座標を割り当てた場合、合焦した測距枠２
−２の座標は（５，２）のように表すことができる。

【００２１】次に、測距点情報及び合焦情報を使用して
画像処理及び記録する手順を説明する。

【００２２】先ず、初めに撮影動作が行われると、その
時の測距点選択情報及び合焦位置情報を取得する。そし
て、取得した情報は画像上の位置座標に変換する。測距
点選択はユーザがピントを合わせたい対象位置に対して
行うため、ユーザの注視領域と判断できる。又、測距点
を自動選択にした場合でも、合焦位置が最も高画質高解
像であるため、合焦位置がユーザの注視領域であるべき
だと考えることができる。因に、ここでは測距点情報及
び合焦情報を用いる手法について述べたが、各測距枠に
おけるデフォーカス量情報を取得することによっても可
能である。例えば、全測距枠でのデフォーカス量から閾
値によって領域を分割し、これを利用して主被写体検出
を行う手法も有効である。又、視線検出機能を持つカメ
ラであれば、取得された視線情報は正に撮影者の注視領
域であるため、より有効な情報として活用できる。

【００２３】次に、取得した注視領域情報をもとに撮影
画像に対する画像処理及び場合によっては圧縮処理を選
択的に行う。例えば、通常注視領域の画質に対する撮影
者の要求は高いと考えられる。よって、注視領域の画像
情報を考慮したホワイトバランス演算やコントラスト調
整といった画像処理を行う。

【００２４】一例として、注視領域以外の輝度分布が極
端に高輝度側或いは低輝度側に偏っていた場合、全画素
情報を用いる従来の手法では、注視領域にとって最適な
ホワイトバランス演算やコントラスト調整値とはなり得
ない。このような場合、注視領域周辺の情報のみ利用す
る手法や、注視領域の情報とそれ以外の領域の情報に対
して重み付けを変える手法を用いることで、上述のよう
な本来重要でない画素情報による悪影響を回避できる。

【００２５】更に、ＪＰＥＧ圧縮を行う場合では、注視
領域の画質劣化や誤データ伝播の抑制のための処理を行
う。例えば、図３のように、測距点情報に相関した位置
（例えばリスタートマーカによって囲まれる領域内に測
距枠が収まる位置）にリスタートマーカ３−１（図中の
点線）を埋め込む。これによって、注視領域以外で誤デ
ータが発生した場合でもリスタートマーカ毎に誤データ
の伝播が防止できるため、注視領域が保護できる可能性
が非常に高くなる。更に、後述の実施の形態における効
率的な拡大表示に利用することもできる。

【００２６】最後に、画像情報や撮影情報とともに上述
のような注視領域情報を記録する。記録する情報として
は、前述の測距点情報、合焦情報、全測距点でのデフォ
ーカス量情報、視線検出情報等を組み合わせることも可
能である。又、各情報を上述のように画像情報上の座標
に変換して記録することにより、機種依存性を無くすこ
ともできる。

【００２７】以上により記録された注視領域情報は、再
生時の伸張処理や付帯情報表示に利用できる。

【００２８】＜実施の形態２＞次に、本発明の実施の形
態２について説明する。

【００２９】図４及び図５は本実施形態の一例を示す構
成図である。本実施の形態では、JPEG2000における部分
領域符号化（ＲＯＩ）を利用する手法について説明す
る。

【００３０】JPEG2000における部分領域符号化（ＲＯ
Ｉ：Region of Interest）機能は、画像情報中の任意領
域をそれ以外の領域と異なる圧縮率で符号化することが
可能である。即ち、重要な領域は低い圧縮率で符号化
し、重要でない領域は圧縮率を高めることによって、必
要な領域の画質を落とすことなく保存する画像全体のデ
ータ量を抑えることができる。

【００３１】又、実施の形態１で述べたリスタートイン
ターバルを利用する場合、画像を横軸方向にストライブ
状に分割する機能しか実現できないが、ＲＯＩを利用す
る場合は任意の領域（例えば円形、楕円形等）を指定す
ることが可能となる。

【００３２】先ず、初めに撮影動作が行われると、その
時の撮影者の注視領域情報を取得する。簡単のため、注
視領域情報として実施の形態１で述べた測距点情報及び
合焦情報を用いる場合について説明する。

【００３３】図４において、７点ある測距枠のうち斜線
枠は合焦枠４−１を示す。次に、合焦枠４−１の位置情
報を画像上の位置座標に論理変換する。そして、前記合
焦位置を含む領域（図中では簡単のため、合焦点を中心
とする円形４−２）を部分領域符号化（ＲＯＩ）に割り
当てる領域に指定する。

【００３４】次に、ＲＯＩに指定された領域を低圧縮率
（場合によってはロスレス圧縮）で、それ以外を高圧縮
率で圧縮して記録する。図５は複数の合焦点が存在した
場合、それを包含する楕円形５−１をＲＯＩに指定した
場合を示している。勿論、各測距枠のデフォーカス量情
報や視線検出情報を用いて分割された任意の領域を指定
しても同様の効果を得ることができる。

【００３５】上述のように、JPEG2000における部分領域
符号化（ＲＯＩ）と注視領域情報を関連付けることによ
ってユーザの求める領域を高画質で自動的且つ効果的に
圧縮処理が可能となる。

【００３６】＜実施の形態３＞次に、本発明の実施の形
態３について説明する。

【００３７】図６及び図７は本実施形態の一例を示す構
成図である。本実施の形態では、注視領域情報とりスタ
ートマーカを用いて効率的に画像情報を拡大表示する手
法について説明する。

【００３８】先ず、ファイルから画像情報や撮影情報と
ともに注視情報（測距点選択情報と合焦位置情報）を読
み出す。これらの位置情報は論理座標を合わせるため
に、例えば前述の実施の形態１におけるファインダの座
標情報から表示画像の画素座標に変換する。勿論、記録
されている情報が画像情報上の位置座標に変換されてい
る場合には、論理座標変換は全く必要がない。

【００３９】そして、前記座標情報とJPEGヘッダ情報に
含まれるリスタートインターバル値から、注視領域位置
のリスタートマーカまでスキップさせる。例えば図５に
おいて、合焦位置は測距枠６−１であったとすると、リ
スタートマーカ６−２までスキップさせる。

【００４０】次に、前記リスタートマーカ６−２から注
視領域を含む領域分（図５におけるリスタートマーカ６
−３まで）の伸張処理を行う。本実施の形態において
は、図５に示されるようにリスタートマーカによって７
領域に分割されているため、全画像領域を伸張処理する
場合と比較して約７分の１の時間と使用メモリで処理で
きる。そして、最後に、伸張された画像情報から注視領
域部分を切り出して拡大画像を表示する。図７は本実施
形態の一例として拡大表示したモニタ表示部の構成図で
ある。

【００４１】上記手法によって、撮影時の注視領域をユ
ーザの手を煩わせることなく自動的に拡大表示すること
ができる。更には、再生拡大処理に使用されるメモリ量
を少なくし、処理時間を大幅に短縮することができる。
又、JPEG2000における部分領域符号化（ＲＯＩ）を利用
した場合も同様な効果が期待できる。

【００４２】

【発明の効果】請求項１記載の撮像装置では、撮影時の
撮影者の注視領域を取得することにより、注視領域を優
先して画像処理及び圧縮処理することが可能となる。

【００４３】請求項２記載の撮像装置では、撮影時の撮
影者の注視領域を取得することにより、注視領域を優先
して画像処理及び圧縮処理し且つ注視領域情報を関連付
けて記録することが可能となる。

【００４４】請求項３記載の撮像装置では、請求項１又
は２の効果に加え、本来取得の難しい撮影者の注視領域
を測距点情報と合焦情報を利用することにより容易にで
きる。

【００４５】請求項４記載の撮像装置では、請求項１又
は２の効果に加え、業界標準フォーマットであるJPEGの
リスタートインターバルを利用することにより、画像処
理及び圧縮処理への活用が容易にできる。

【００４６】請求項５記載の撮像装置では、請求項１又
は２の効果に加え、注視領域情報を用いた画像処理によ
り前記領域の高画質化が容易にできる。

【００４７】請求項６記載の撮像装置では、請求項１又
は２の効果に加え、将来の業界標準フォーマットである
JPEG2000の部分領域符号化（ＲＯＩ）を利用することに
より、画像処理及び圧縮処理への活用が容易にできる。

【００４８】請求項７記載の撮像装置では、画像情報と
ともに撮影時の撮影者の注視領域を抽出し、前記領域を
伸張処理及び拡大することにより、少ないメモリ量と処
理時間で自動的に撮影時の注視領域を拡大表示すること
が可能となる。

【図面の簡単な説明】

【図１】本発明の実施形態の一例である電子カメラの構
成図である。

【図２】本発明の実施の形態１におけるファインダ部の
表示状態図である。

【図３】本発明の実施の形態１におけるファインダ部の
表示状態図である。

【図４】本発明の実施の形態２におけるファインダ部の
表示状態図である。

【図５】本発明の実施の形態２におけるファインダ部の
表示状態図である。

【図６】本発明の実施の形態３におけるモニタ表示部の
表示状態図である。

【図７】本発明の実施の形態３におけるモニタ表示部の
表示状態図である。

【符号の説明】

１−１ 主撮影光学系 １−２ 撮像手段 １−３ Ａ／Ｄ変換手段 １−４ プロセス処理回路 １−５ メモリ制御手段 １−６ フレームメモリ １−７ ワークメモリ １−８ 外部メモリ １−９ ビデオメモリ １−１０ モニタ表示手段 １−１１ カメラ操作スイッチ

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/225 Ｇ０２Ｂ 7/11 Ｄ // Ｈ０４Ｎ 101:00 Ｇ０３Ｂ 3/00 Ａ

Claims (7)

【特許請求の範囲】
1. 【請求項１】 撮像部と、画像処理部と、記録部とを備
   えた撮像装置において、 前記撮像部に、撮影時の注視領域情報を取得する手段
   と、前記画像処理部に前記注視領域情報を用いて撮影画
   像情報を画像処理及び圧縮処理する手段と、前記記録部
   に、前記画像処理された撮影画像情報を記録する手段
   と、を備えることを特徴とする撮像装置。
2. 【請求項２】 撮像部と、画像処理部と、記録部とを備
   えた撮像装置において、 前記撮像部に、撮影時の注視領域情報を取得する手段
   と、前記画像処理部に前記注視領域情報を用いて撮影画
   像情報を画像処理及び圧縮処理する手段と、前記記録部
   に、前記画像処理された撮影画像情報とともに前記注視
   領域情報を記録する手段と、を備えることを特徴とする
   撮像装置。
3. 【請求項３】 前記注視領域情報として、測距点情報、
   合焦情報、デフォーカス量情報、視線検出情報の何れか
   又は組み合わせて記録する手段を備えることを特徴とす
   る請求項１又は２記載の撮像装置。
4. 【請求項４】 前記画像処理部に、注視領域情報を元に
   算出したリスタートインターバル値を用いて圧縮する手
   段を備えることを特徴とする請求項１又は２記載の撮像
   装置。
5. 【請求項５】 前記画像処理部に、注視領域情報を元に
   注視領域の画質を優先して画像処理及び圧縮する手段を
   備えることを特徴とする請求項１又は２記載の撮像装
   置。
6. 【請求項６】 前記画像処理部及び記録部に、前記注視
   領域を部分領域符号化（ＲＯＩ）を用いて画像処理及び
   圧縮し記録する手段を備えることを特徴とする請求項１
   又は２記載の撮像装置。
7. 【請求項７】 再生部と、モニタ部を備えた撮像装置に
   おいて、 前記再生部に、撮影画像情報とともに撮影時の注視領域
   情報を抽出し、注視領域周辺を優先して再生する手段
   と、前記モニタ部に、前記注視領域周辺を拡大して表示
   する表示手段と、を備えることを特徴とする撮像装置。