JP2004235990A - 画像選択装置 - Google Patents
画像選択装置 Download PDFInfo
- Publication number
- JP2004235990A JP2004235990A JP2003022266A JP2003022266A JP2004235990A JP 2004235990 A JP2004235990 A JP 2004235990A JP 2003022266 A JP2003022266 A JP 2003022266A JP 2003022266 A JP2003022266 A JP 2003022266A JP 2004235990 A JP2004235990 A JP 2004235990A
- Authority
- JP
- Japan
- Prior art keywords
- image
- roi
- unit
- data
- compression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
Abstract
【課題】ＲＯＩ画像を表示する際に全体画像だけでなく、それに付随するＲＯＩ画像を識別性を向上させて全体画像に関連付けて同時に表示することができ、オペレータが画像選択時に所望の画像を確実かつ簡易に選択することができる画像選択装置を提供する。
【解決手段】撮像装置は、画像を取得するカメラ部１０１と、ＲＯＩを指定するＲＯＩ制御部１０６と、指定されたＲＯＩと非指定領域をそれぞれ異なる特性で圧縮する圧縮伸長部１０５と、圧縮された画像を画面上に表示する画像表示部１１０と、画像が表示された画面から画像の選択又は画像中のＲＯＩを選択するキー操作部１１２と、画像を記憶する記録部１０７を備える。そして、画像表示部１１０により、複数のサムネイル画像を前記画面上に一覧表示し、キー操作部１１２により、全体画像又はＲＯＩが指定される。
【選択図】 図１
【解決手段】撮像装置は、画像を取得するカメラ部１０１と、ＲＯＩを指定するＲＯＩ制御部１０６と、指定されたＲＯＩと非指定領域をそれぞれ異なる特性で圧縮する圧縮伸長部１０５と、圧縮された画像を画面上に表示する画像表示部１１０と、画像が表示された画面から画像の選択又は画像中のＲＯＩを選択するキー操作部１１２と、画像を記憶する記録部１０７を備える。そして、画像表示部１１０により、複数のサムネイル画像を前記画面上に一覧表示し、キー操作部１１２により、全体画像又はＲＯＩが指定される。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、画面上に表示された複数の画像から所望の画像を選択する画像選択技術に関する。
【０００２】
【従来の技術】
ビデオカメラ等のデジタル信号を扱う撮像装置においては、記録媒体の容量によるデータ記録量の制限や、データを取り扱う際の通信負荷の低減といった理由から、撮影データを圧縮して所定の記録媒体に記録し、撮影後に改めて圧縮データを伸長して表示や加工を行う方式が一般的である。特に、近年の撮像装置は撮像素子の高画素化が進み、それに伴って撮影データ量も増大する傾向にあるため、より高圧縮かつ可逆的な圧縮記録方式が不可欠となっている。
【０００３】
ところで、画像圧縮方式の一つとして「ＪＰＥＧ２０００」方式が知られている。ＪＰＥＧ２０００に関する詳細な説明はここでは省略するが、その特徴的な機能として、画像中のある注目範囲（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ、以下、「ＲＯＩ」と略す。）を指定し、ＲＯＩ領域とそれ以外の画像中の領域を異なる圧縮係数（圧縮率）で圧縮する機能がある。ＲＯＩとして指定された領域はそれ自体が独立した画像データとして取り扱うことが可能であり、例えばＲＯＩ領域のみをハードコピーする機能や原画像からＲＯＩ領域を取り出して別ファイル化するなど、ＲＯＩを利用した多数の画像処理方法が提案されている。ＲＯＩを含んだ画像データを取り扱う際の画像選択手段としては、原画像とＲＯＩ画像をそれぞれ個別に全画面表示し、表示された画像を順次送りながら画像を決定する方式が最も一般的である。
【０００４】
【発明が解決しようとする課題】
しかしながら、オペレータが全画面表示された画像を視認する方式の場合、表示画像はそれぞれ独立した個別の画像として認識されるため、原画像とＲＯＩ画像の判別がつき難く、オペレータは意図しない画像データを誤って処理する可能性がある。また、オペレータが表示画像をＲＯＩ画像と認識している場合でも、ＲＯＩ画像と当該ＲＯＩに関する原画像との関係が明確でないため、表示されているＲＯＩ画像がどの原画像から切り出されたデータであるかを判別することが難しい。
【０００５】
本発明は、このような事情を考慮してなされたものであり、ＲＯＩ画像を表示する際に全体画像だけでなく、それに付随するＲＯＩ画像を識別性を向上させて全体画像に関連付けて同時に表示することができ、オペレータが画像選択時に所望の画像を確実かつ簡易に選択することができる画像選択装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る画像選択装置は、画像を取得する取得手段と、
取得された前記画像の所定領域を指定する指定手段と、
前記指定手段により指定された前記所定領域と非指定領域をそれぞれ異なる特性で圧縮する圧縮手段と、
前記圧縮手段により圧縮された画像を画面上に表示する表示手段と、
前記画像が表示された画面から該画像の選択又は該画像中の前記所定領域を選択する選択手段と
を備えることを特徴とする。
【０００７】
【発明の実施の形態】
＜第１の実施形態＞
以下、図面を参照して、本発明の第１の実施形態に係る撮像装置について詳細に説明する。本実施形態に係る撮像装置は、以下に示すように、シーンを撮像する撮像機能と、撮像された一又は複数の画像からＲＯＩを指定する機能と、撮像された全体画像又は指定されたＲＯＩを一覧表示する機能と、一覧表示された全体画像又はＲＯＩから所望の画像を選択する選択機能とを備えている。
【０００８】
［撮像装置の構成］
図１は、本発明の第１の実施形態に係る撮像装置の構成及び画像データの流れを示すブロック図である。
【０００９】
まず、第１の実施形態に係る撮像装置を構成する各部の機能について説明する。図１において、１０１は撮像光学系と固体撮像素子を含むカメラ部であり、シーン等を撮像して画像信号に変換する。１０２は画像信号をデジタル信号に変換するＡ／Ｄ変換回路、１０３はデジタル信号を信号処理するカメラ信号処理回路、１０４はデジタル信号を一時的に格納するバッファメモリ、１０５はデジタル信号を圧縮伸長する圧縮伸長部、１０６は画像の注目領域を指定／判定するＲＯＩ制御部、１０７は画像を記録する記録部である。
【００１０】
また、１０８はデジタル信号化された画像信号をアナログ信号に再変換するＤ／Ａ変換回路、１０９はアナログ信号を所定の表示形式に変換する表示信号処理回路、１１０は撮影された画像を表示する画像表示部である。さらに、１１１は上述した撮像装置各部の動作制御を行うＣＰＵ、１１２は撮像装置本体の動作を指示するキー操作部、１１３は撮像装置本体の動作情報等を一時的に保存するＲＡＭ、１１４はＣＰＵ１１１により実行されるプログラムや演算データ等が格納されているＲＯＭである。
【００１１】
次に、第１の実施形態に係る撮像装置の各部間における画像データの流れについて説明する。カメラ部１０１の撮像光学系に捉えられた光信号は、固体撮像素子に結像されて電気信号に変換され、画像データ（画像信号）としてＡ／Ｄ変換回路１０２に出力される。Ａ／Ｄ変換回路１０２に入力された画像データは、デジタル信号に変換され、カメラ信号処理回路１０３で色分散処理、γ処理、ホワイトバランス調整、マトリクス処理等の信号処理が行われ、Ｙ、Ｒ−Ｙ、Ｂ−Ｙ信号に変換された後、バッファメモリ１０４に一旦格納される。
【００１２】
すなわち、本実施形態に係る撮像装置は、画像を取得する取得手段であるカメラ部１０１と、取得された画像の所定領域（ＲＯＩ）を指定する指定手段であるＲＯＩ制御部１０６と、指定されたＲＯＩと非指定領域をそれぞれ異なる特性で圧縮する圧縮手段である圧縮伸長部１０５と、圧縮された画像を画面上に表示する表示手段である画像表示部１１０と、画像が表示された画面から画像の選択又は画像中のＲＯＩを選択する選択手段であるキー操作部１１２とを備えることを特徴とする。
【００１３】
また、上記撮像装置は、画像を記憶する記憶手段である記録部１０７をさらに備え、圧縮伸長部１０５が、記録部１０７に記憶された複数の画像を圧縮し、画像表示部１１０が、圧縮された複数の画像を前記画面上に一覧表示し、キー操作部１１２により、画面上に一覧表示された複数の画像から一の画像又は指定されたＲＯＩを選択することを特徴とする。
【００１４】
バッファメモリ１０４に格納された画像データは、圧縮伸長部１０５において、ＲＡＭ１１３内の設定圧縮率及びＲＯＭ１１４内の演算データに基づいて高能率符号化処理が施され圧縮される。このとき、画像データに対して注目領域（ＲＯＩ）の指定がされている場合は、その指定された領域の画像はＲＯＩ制御部１０６により他の領域とは異なる圧縮係数で圧縮される。圧縮が施された画像データは、再度バッファメモリ１０４を経由して、記録部１０７において光磁気ディスクや半導体メモリ等の固有、着脱可能又は可搬の記録媒体に記録される。
【００１５】
記録された画像データの再生を行う場合、記録媒体１０７内に記録されている圧縮データは、一旦バッファメモリ１０４に読み出された後、圧縮伸長部１０５により伸長処理が施される。ここで、圧縮時において画像データにＲＯＩが設定されている場合は、画像伸長と同時にＲＯＩ制御部１０６により設定領域の読み出しが行われる。伸長処理された画像データはバッファメモリ１０４を経由し、Ｄ／Ａ変換回路１０８によりアナログ変換される。アナログ変換された画像データは、ＲＯＩ制御回路１０６からの情報に基づき、表示信号処理回路１０９において全体画像とＲＯＩ画像に各々異なった表示形式が施された後、画像表示部１１０により表示される。
【００１６】
尚、撮像装置内の各部の動作は、キー操作部１１２からの信号に基づいて、ＣＰＵ１１１によって制御される。画像表示部１１０に表示される画像は、画像選択スイッチＳＷ１の操作により順次送り／戻しが行われる。また、撮影実行はレリーズスイッチＳＷ２の押圧、接触等により行われる。
【００１７】
［画像圧縮伸長処理］
以下、圧縮伸長部１０５による符号化処理と復号化処理の詳細について説明する。
【００１８】
図２は、圧縮伸長部１０５において符号化処理を実行する部分の細部構成を示すブロック図である。まず、圧縮伸長部１０５に入力された画像データに対して、コンポーネント変換部２０１で色空間変換が施される。変換された各色成分のデータは、必要に応じて所定の間引き処理が行われて出力される。尚、画像データがモノクログレースケールの画像である場合は、コンポーネント変換を行う必要はない。また、以下では、上記手順に従って得られた各色成分毎に行われる処理を説明する。
【００１９】
タイル分割部２０２は、入力された画像データを複数個の所定の大きさの矩形タイルに分割し出力する。このタイルの大きさは最大で各色成分のデータ全体の大きさとすることができ、この場合は実質的にタイル分割は行われないことになる。また、以下の説明では、上述の方法によって得られた各色成分のタイル毎に行われる処理を説明するものである。
【００２０】
離散ウェーブレット変換部２０３は、入力された各タイルの画像データに対して２次元の離散ウェーブレット変換を施して周波数成分に分解し、複数の周波数帯域のそれぞれに属する変換係数群（以降、「サブバンド」と称す。）を出力する。図３は、離散ウェーブレット変換部２０３による２次元離散ウェーブレット変換後のサブバンドの構成を示す図である。図３に示すように、第１の実施形態では、離散ウェーブレット変換部２０３によって２次元のウェーブレット変換を低周波帯域に対して再帰的に２レベル行われる。尚、離散ウェーブレット変換部２０３では、非可逆符号化を行う場合にはウェーブレット変換後の係数が実数になる実数型のフィルタを、可逆符号化を行う場合にはウェーブレット変換後の係数が整数になる整数型のフィルタが用いられる。
【００２１】
量子化部２０４は、入力したサブバンド毎に、所定の方法により設定された量子化ステップを用いて量子化を行い、量子化インデックスを生成して出力する。尚、上述した可逆符号化を行う場合には量子化部２０４では量子化を行わず、入力した変換係数そのものが出力される。
【００２２】
図４は、第１の実施形態におけるサブバンドをコードブロック分割した図である。図４に示すように、エントロピ符号化部２０５は、入力したサブバンドをさらに複数の矩形ブロック（以下、「コードブロック」と称す。）に分割し、このコードブロックを単位として独立にエントロピ符号化を行い、符号化データを生成する。この時、量子化インデックスを表すビットは、上位ビットプレーンから順に、算術符号化され符号化データが生成される。但し、エントロピ符号化部２０５では、サブバンドと矩形ブロックとが同サイズの場合は、入力したサブバンドをさらに分割しないものとする。
【００２３】
上述したように、第１の実施形態に係る撮像装置では、領域設定手段として機能するＲＯＩ制御部１０６を設けることにより画像の一部に対してＲＯＩを設定して符号化することができる。図５は、第１の実施形態におけるＲＯＩの変換係数を特定するマスク例を示す図である。第１の実施形態では、ＲＯＩ制御部１０６により設定されるＲＯＩに対して、図３に示す各サブバンドにおいて、図５に示すようなＲＯＩに係る変換係数を特定するためのマスクが生成される。図５においては白い部分がＲＯＩに相当しており、この部分に含まれる係数は、符号化に先立ってＲＯＩ以外の領域に係る係数とビットプレーン上で完全に分離されるように、所定のビット数分だけ上位方向にシフトアップされる。これにより、全てのビットプレーン内のビット１とビット０の存在を確認することにより、どの領域がＲＯＩであるかが容易に分かる。尚、このシフトアップ数は後述する符号列の所定のマーカにパラメータとして追加される。
【００２４】
符号列形成部２０６は、所定の方法により設定されたプログレッシブ形態に基づいて符号列を形成し出力する。この符号列形成において、符号列形成部２０６は、採用するプログレッシブ形態に合わせて、各コードブロックの符号化データの上位ビットプレーンから順に適量の符号化データを選択して１つ以上のレイヤを構成する。
【００２５】
例えば、設定されたプログレッシブ形態がＳＮＲスケーラブルである場合、符号列形成部２０６は図６に示すように、レイヤを単位として上位レイヤから順に下位レイヤに向かい符号化データを配置する。図６は、第１の実施形態におけるＳＮＲスケーラブルで出力した符号列を説明するための概要図である。尚、この時、後半のレイヤを省略して下位ビットプレーンに係る符号化データを含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化でき、このデータ量に応じて符号列を復号し、再生される画像の画質を変化させることができる。
【００２６】
一方、設定されたプログレッシブ形態が空間解像度スケーラブルである場合、符号列形成部２０６は図７に示すように低周波サブバンドから高周波サブバンドに向かい符号化データを配置する。図７は、第１の実施形態における空間解像度スケーラブルで出力した符号列を説明するための概要図である。この時、後半のサブバンドの符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化でき、このデータ量に応じて符号列を復号し、再生された画像の解像度を変化させることができる。
【００２７】
さらに、符号列形成部２０６は上述のように設定された各プログレッシブ形態に応じて形成された符号列に各種マーカから構成されるヘッダを追加した最終的な符号列を出力する。
【００２８】
図８は、第１の実施形態において符号化された最終的な符号列の構成を説明するための概要図である。図８において、メインヘッダＭＨは、圧縮符号化対象となる画像の解像度、色成分数、各成分のビット精度（各成分を表現するビット数）、画像を構成するタイルのサイズ、離散ウェーブレット変換のフィルタのタイプ、量子化ステップ等の圧縮符号化に関するパラメータ及びプログレッシブ形態等の符号列構成に関する情報を指定するマーカ等を含んでいる。
【００２９】
また、タイルヘッダＴＨ＿ｉは、ｉ番目のタイルの開始を表すマーカを含んでいる。さらに、当該タイルにおいて符号化に関するパラメータをその以前に符号化されたタイルから変更した場合には、そのパラメータを指定するマーカも含んでいる。ＢＳ＿ｉは、ｉ番目のタイルの符号化データであり、その配列は先に述べたプログレッシブ形態に基づいて構成されている。
【００３０】
図９は、圧縮伸長部１０５において符号列を復号する復号処理を実行する部分の細部構成を示すブロック図である。符号列入力部２０７は、符号列を入力し、画像やタイルのサイズ、プログレッシブ形態や量子化ステップ等の後続の復号処理に必要なパラメータを抽出する。そして、実際の符号列はエントロピ復号部８に出力される。尚、復号対象となる全体の符号列には、上述した図８の形態を持つ複数タイル分の符号列が、上述したコンポーネント変換部２０１において得られた色成分の数だけ含まれている。また、第１の実施形態では、復号処理は各色成分毎に独立して行うこととし、復号対象となる色成分を構成する各タイルの符号列を順に復号する。
【００３１】
エントロピ復号部２０８は、入力した符号列に対して復号処理を行い、量子化インデックスを出力する。この復号処理ではコードブロック内の量子化インデックスを上位ビットプレーンから順に復号され、量子化インデックスが復元される。例えば、この時、符号列のプログレッシブ形態がＳＮＲスケーラブルとなっており、所定数の上位レイヤのみが入力されている場合には、復号処理は入力されたレイヤで打ち切られ、その時点での復元値が量子化インデックスとして出力される。
【００３２】
ここで、ＲＯＩに指定されたマーカが存在していた場合は、当該マーカに付随したシフトアップ数に対応した上位ビットプレーンに係る量子化インデックス値はシフトアップ数分、シフトダウンされてから出力される。これにより、ＲＯＩ部分の量子化インデックスは適切な値に復元される。
【００３３】
逆量子化部２０９は、入力した量子化インデックスに対して、先に符号列から読み込まれた量子化ステップに基づいて逆量子化を行い、変換係数を復元して出力する。
【００３４】
逆離散ウェーブレット変換部２１０は、入力した変換係数から２次元の逆離散ウェーブレット変換を施すことにより、これに対応する色成分データ（符号化対象画像がモノクロ画像の時は画像濃度データ）を復元して出力する。尚、この時、符号列のプログレッシブ形態が空間解像度スケーラブルであり、前半に符号化されるレベルのサブバンドのみ（例えば、ＬＬのみや、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のみ）が復元されている場合は、復元された色成分データの解像度はその復元されたサブバンドのレベルに応じて変化する。
【００３５】
図１０は、第１の実施形態における空間解像度スケーラブルによる復号化を説明する図である。図１０においてサブバンドＬＬの係数のみが復号された場合は、逆離散ウェーブレット変換は実質的には行われず、ＬＬの係数が元のデータレンジに収まるように調節された後に出力される。この場合、復元された色成分データは、図１０のｒ＝０に示すように、元の解像度に対して水平及び垂直方向に１／４のサイズとなっている。
【００３６】
さらに、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のサブバンドまで復号された場合、逆変換を１レベル行うことで図１０のｒ＝１に示すように、元の解像度に対して水平及び垂直方向に１／２のサイズの色成分データが復元される。
【００３７】
以上の処理は各タイル単位で行われ、画像構成部２１１は、復元された各タイルの各色成分データを再度、元の１枚の符号化対象画像を構成する色成分データとして構成し、コンポーネント逆変換部２１２に出力する。
【００３８】
コンポーネント逆変換部２１２は、入力した各色成分データに所定の変換を施すことにより、元の符号化対象画像の色空間を持つ画像データを復元して出力する。この時、元の色成分データがコンポーネント変換部２０１にて間引き処理されている場合は、逆変換を行う前に必要な解像度に変換（例えば、データ補間）される。
【００３９】
以上述べたように、第１の実施形態に係る撮像装置では、プログレッシブ形態が空間解像度スケーラブルの場合には、復号するレイヤを制限することで、復元される画像の画質を制御することができる。また、ＳＮＲスケーラブルの場合には、逆離散ウェーブレット変換するサブバンドのレベル数を制限することで復元される画像の解像度を制御することができる。
【００４０】
［画像一覧表示時の動作手順］
図１１は、第１の実施形態に係る画像一覧表示時の撮像装置の動作を説明するためのフローチャートである。
【００４１】
まず、記録部１０７に格納されている画像データを読み出し（ステップＳ１０１）、画像一覧表示で用いるサムネイル画像の作成が圧縮伸長部１０５により行われる（ステップＳ１０２）。次に、画像データ内におけるＲＯＩの有無が確認される（ステップＳ１０３）。その結果、ＲＯＩを含む場合（有）、画像中のＲＯＩ部分に枠表示の追加が行われ（ステップＳ１０４）、次いで、サムネイル画像の一覧表示が行われる（ステップＳ１０５）。一方、ＲＯＩ部分を含まない場合（無）、そのままサムネイル画像の一覧表示が行われる（ステップＳ１０５）。
【００４２】
そして、画像選択スイッチＳＷ１の押圧等により画像の送り／戻しが指示されたか否かが判断される（ステップＳ１０６）。その結果、指示された場合（Ｙｅｓ）、画像選択のための指標が移動する（ステップＳ１０７）。尚、当該指標は、画像全体とＲＯＩ部分のどちらへも移動可能であるものとする。
【００４３】
［画像表示の形態］
図１２は、第１の実施形態に係る撮像装置によって撮影された画像の一例を示す図である。また、図１３は、図１２に示される画像を含む画像表示部１１０に一覧表示されるサムネイル画像の例を示す図である。
【００４４】
図１２において、３０１は撮影された全体画像であり、図中の点線で示された矩形領域３０２ａ〜３０２ｃがそれぞれＲＯＩとして設定されているものとする。また、図１３には、図１２に示す画像のサムネイル画像を含む複数の画像データの差旨一画像が一覧表示された表示画面が示されている。ここで、ＲＯＩが設定された画像３０１が表示される場合、サムネイル画像３０１’上にはＲＯＩ表示枠３０２ａ’〜３０２ｃ’が追加表示される。
【００４５】
そして、例えば、画像選択送りにより指標３０４が移動した場合、画像には選択画枠３０５が付帯され、現在選択されている部分が明確に示される。尚、前述したように、指標３０４は、画像選択送りにより、全体画像とＲＯＩの両方を移動可能である。例えば、図１３に示される例の場合は、指標３０４を矢印３０６ａ〜３０６ｅの順に移動させる。また、選択画枠３０５は、全体画像のサムネイル画像とＲＯＩの区別なく、その大きさに応じて付帯されるものとする。
【００４６】
＜第２の実施形態＞
次に、本発明に係る第２の実施形態について、図面を参照して詳細に説明する。尚、第２の実施形態においては、撮像装置の主な構成、画像圧縮伸長処理の詳細及び動作フローチャートについては前述した第１の実施形態と同じであるものとし、説明は省略する。
【００４７】
図１４及び図１５は、それぞれ本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。図１４及び図１５のサムネイル表示においてＲＯＩが設定されたサムネイル画像３０１’が表示される場合、サムネイル画像３０１’上にはＲＯＩ表示枠３０２ａ’〜３０２ｃ’が追加表示される。そして、画像選択送りにより指標３０４が移動した場合、画像には選択画枠３０５が付帯され、現在選択されている部分が明確に示される。また、指標３０４は画像選択送りにより、全体画像とＲＯＩの両方を移動可能であるが、第２の実施形態では指標３０４の移動モードが選択可能になっている。
【００４８】
まず、図１４に示すように、主画像選択モードの場合、指標３０４は矢印３０７ａ、３０７ｂの順に移動する。また、図１５に示すように、ＲＯＩ選択可能モードの場合、指標３０４は矢印３０８ａ→３０８ｅの順のように移動する。尚、移動モードの切り替え方法は、事前に設定しておく方法、画像送りの際に操作キー（シフトキー）の同時押しで切り替える方法、十字キーを用いて左右方向は主画像選択モードとし上下方向はＲＯＩ選択可能モードとする方法等が挙げられる。
【００４９】
すなわち、本実施形態に係る撮像装置は、第１の実施形態で述べた撮像装置におけるキー操作部１１２が、複数の選択モードに従って全体画像又はＲＯＩを選択することを特徴とする。また、上記撮像装置では、画像選択時に、全体画像のみを選択させる第１の選択モードと、全体画像とＲＯＩとを選択させる第２の選択モードとを備えることを特徴とする。そして、上記撮像装置は、第１の選択モードと第２の選択モードとを切り替える切替手段（例えば、画像送りの際に操作キーの同時押しで切り替える手段、十字キーを用いて左右方向は主画像選択モードとし上下方向はＲＯＩ選択可能モードとする手段等）をさらに備えることを特徴とする。
【００５０】
尚、本発明は、複数の機器（例えば、ホストコンピュータ、インタフェース機器、リーダ、プリンタ等）から構成されるシステムに適用しても、一つの機器からなる装置（例えば、複写機、ファクシミリ装置等）に適用してもよい。
【００５１】
また、本発明の目的は、前述した第１及び第２の実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体（または記憶媒体）を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００５２】
さらに、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００５３】
本発明を上記記録媒体に適用する場合、その記録媒体には、先に説明したフローチャート等に対応するプログラムコードが格納されることになる。
【００５４】
【発明の効果】
以上説明したように、本発明に係る撮像装置によれば、ＲＯＩ画像を表示する際に全体画像だけでなく、それに付随するＲＯＩ画像を識別性を向上させて全体画像に関連付けて同時に表示することができ、オペレータは画像選択時に所望の画像を確実かつ簡易に選択することができる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態に係る撮像装置の構成及び画像データの流れを示すブロック図である。
【図２】圧縮伸長部１０５において符号化処理を実行する部分の細部構成を示すブロック図である。
【図３】離散ウェーブレット変換部２０３による２次元離散ウェーブレット変換後のサブバンドの構成を示す図である。
【図４】第１の実施形態におけるサブバンドをコードブロック分割した図である。
【図５】第１の実施形態におけるＲＯＩの変換係数を特定するマスク例を示す図である。
【図６】第１の実施形態におけるＳＮＲスケーラブルで出力した符号列を説明するための概要図である。
【図７】第１の実施形態における空間解像度スケーラブルで出力した符号列を説明するための概要図である。
【図８】第１の実施形態において符号化された最終的な符号列の構成を説明するための概要図である。
【図９】圧縮伸長部１０５において符号列を復号する復号処理を実行する部分の細部構成を示すブロック図である。
【図１０】第１の実施形態における空間解像度スケーラブルによる復号化を説明する図である。
【図１１】第１の実施形態に係る画像一覧表示時の撮像装置の動作を説明するためのフローチャートである。
【図１２】第１の実施形態に係る撮像装置によって撮影された画像の一例を示す図である。
【図１３】図１２に示される画像を含む画像表示部１１０に一覧表示されるサムネイル画像の例を示す図である。
【図１４】本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。
【図１５】本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。
【符号の説明】
１０１ カメラ部
１０２ Ａ／Ｄ変換回路
１０３ カメラ信号処理回路
１０４ バッファメモリ
１０５ 圧縮伸長部
１０６ ＲＯＩ制御部
１０７ 記録部
１０８ Ｄ／Ａ変換回路
１０９ 表示信号処理回路
１１０ 画像表示部
１１１ ＣＰＵ
１１２ キー操作部
１１３ ＲＡＭ
１１４ ＲＯＭ
【発明の属する技術分野】
本発明は、画面上に表示された複数の画像から所望の画像を選択する画像選択技術に関する。
【０００２】
【従来の技術】
ビデオカメラ等のデジタル信号を扱う撮像装置においては、記録媒体の容量によるデータ記録量の制限や、データを取り扱う際の通信負荷の低減といった理由から、撮影データを圧縮して所定の記録媒体に記録し、撮影後に改めて圧縮データを伸長して表示や加工を行う方式が一般的である。特に、近年の撮像装置は撮像素子の高画素化が進み、それに伴って撮影データ量も増大する傾向にあるため、より高圧縮かつ可逆的な圧縮記録方式が不可欠となっている。
【０００３】
ところで、画像圧縮方式の一つとして「ＪＰＥＧ２０００」方式が知られている。ＪＰＥＧ２０００に関する詳細な説明はここでは省略するが、その特徴的な機能として、画像中のある注目範囲（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ、以下、「ＲＯＩ」と略す。）を指定し、ＲＯＩ領域とそれ以外の画像中の領域を異なる圧縮係数（圧縮率）で圧縮する機能がある。ＲＯＩとして指定された領域はそれ自体が独立した画像データとして取り扱うことが可能であり、例えばＲＯＩ領域のみをハードコピーする機能や原画像からＲＯＩ領域を取り出して別ファイル化するなど、ＲＯＩを利用した多数の画像処理方法が提案されている。ＲＯＩを含んだ画像データを取り扱う際の画像選択手段としては、原画像とＲＯＩ画像をそれぞれ個別に全画面表示し、表示された画像を順次送りながら画像を決定する方式が最も一般的である。
【０００４】
【発明が解決しようとする課題】
しかしながら、オペレータが全画面表示された画像を視認する方式の場合、表示画像はそれぞれ独立した個別の画像として認識されるため、原画像とＲＯＩ画像の判別がつき難く、オペレータは意図しない画像データを誤って処理する可能性がある。また、オペレータが表示画像をＲＯＩ画像と認識している場合でも、ＲＯＩ画像と当該ＲＯＩに関する原画像との関係が明確でないため、表示されているＲＯＩ画像がどの原画像から切り出されたデータであるかを判別することが難しい。
【０００５】
本発明は、このような事情を考慮してなされたものであり、ＲＯＩ画像を表示する際に全体画像だけでなく、それに付随するＲＯＩ画像を識別性を向上させて全体画像に関連付けて同時に表示することができ、オペレータが画像選択時に所望の画像を確実かつ簡易に選択することができる画像選択装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る画像選択装置は、画像を取得する取得手段と、
取得された前記画像の所定領域を指定する指定手段と、
前記指定手段により指定された前記所定領域と非指定領域をそれぞれ異なる特性で圧縮する圧縮手段と、
前記圧縮手段により圧縮された画像を画面上に表示する表示手段と、
前記画像が表示された画面から該画像の選択又は該画像中の前記所定領域を選択する選択手段と
を備えることを特徴とする。
【０００７】
【発明の実施の形態】
＜第１の実施形態＞
以下、図面を参照して、本発明の第１の実施形態に係る撮像装置について詳細に説明する。本実施形態に係る撮像装置は、以下に示すように、シーンを撮像する撮像機能と、撮像された一又は複数の画像からＲＯＩを指定する機能と、撮像された全体画像又は指定されたＲＯＩを一覧表示する機能と、一覧表示された全体画像又はＲＯＩから所望の画像を選択する選択機能とを備えている。
【０００８】
［撮像装置の構成］
図１は、本発明の第１の実施形態に係る撮像装置の構成及び画像データの流れを示すブロック図である。
【０００９】
まず、第１の実施形態に係る撮像装置を構成する各部の機能について説明する。図１において、１０１は撮像光学系と固体撮像素子を含むカメラ部であり、シーン等を撮像して画像信号に変換する。１０２は画像信号をデジタル信号に変換するＡ／Ｄ変換回路、１０３はデジタル信号を信号処理するカメラ信号処理回路、１０４はデジタル信号を一時的に格納するバッファメモリ、１０５はデジタル信号を圧縮伸長する圧縮伸長部、１０６は画像の注目領域を指定／判定するＲＯＩ制御部、１０７は画像を記録する記録部である。
【００１０】
また、１０８はデジタル信号化された画像信号をアナログ信号に再変換するＤ／Ａ変換回路、１０９はアナログ信号を所定の表示形式に変換する表示信号処理回路、１１０は撮影された画像を表示する画像表示部である。さらに、１１１は上述した撮像装置各部の動作制御を行うＣＰＵ、１１２は撮像装置本体の動作を指示するキー操作部、１１３は撮像装置本体の動作情報等を一時的に保存するＲＡＭ、１１４はＣＰＵ１１１により実行されるプログラムや演算データ等が格納されているＲＯＭである。
【００１１】
次に、第１の実施形態に係る撮像装置の各部間における画像データの流れについて説明する。カメラ部１０１の撮像光学系に捉えられた光信号は、固体撮像素子に結像されて電気信号に変換され、画像データ（画像信号）としてＡ／Ｄ変換回路１０２に出力される。Ａ／Ｄ変換回路１０２に入力された画像データは、デジタル信号に変換され、カメラ信号処理回路１０３で色分散処理、γ処理、ホワイトバランス調整、マトリクス処理等の信号処理が行われ、Ｙ、Ｒ−Ｙ、Ｂ−Ｙ信号に変換された後、バッファメモリ１０４に一旦格納される。
【００１２】
すなわち、本実施形態に係る撮像装置は、画像を取得する取得手段であるカメラ部１０１と、取得された画像の所定領域（ＲＯＩ）を指定する指定手段であるＲＯＩ制御部１０６と、指定されたＲＯＩと非指定領域をそれぞれ異なる特性で圧縮する圧縮手段である圧縮伸長部１０５と、圧縮された画像を画面上に表示する表示手段である画像表示部１１０と、画像が表示された画面から画像の選択又は画像中のＲＯＩを選択する選択手段であるキー操作部１１２とを備えることを特徴とする。
【００１３】
また、上記撮像装置は、画像を記憶する記憶手段である記録部１０７をさらに備え、圧縮伸長部１０５が、記録部１０７に記憶された複数の画像を圧縮し、画像表示部１１０が、圧縮された複数の画像を前記画面上に一覧表示し、キー操作部１１２により、画面上に一覧表示された複数の画像から一の画像又は指定されたＲＯＩを選択することを特徴とする。
【００１４】
バッファメモリ１０４に格納された画像データは、圧縮伸長部１０５において、ＲＡＭ１１３内の設定圧縮率及びＲＯＭ１１４内の演算データに基づいて高能率符号化処理が施され圧縮される。このとき、画像データに対して注目領域（ＲＯＩ）の指定がされている場合は、その指定された領域の画像はＲＯＩ制御部１０６により他の領域とは異なる圧縮係数で圧縮される。圧縮が施された画像データは、再度バッファメモリ１０４を経由して、記録部１０７において光磁気ディスクや半導体メモリ等の固有、着脱可能又は可搬の記録媒体に記録される。
【００１５】
記録された画像データの再生を行う場合、記録媒体１０７内に記録されている圧縮データは、一旦バッファメモリ１０４に読み出された後、圧縮伸長部１０５により伸長処理が施される。ここで、圧縮時において画像データにＲＯＩが設定されている場合は、画像伸長と同時にＲＯＩ制御部１０６により設定領域の読み出しが行われる。伸長処理された画像データはバッファメモリ１０４を経由し、Ｄ／Ａ変換回路１０８によりアナログ変換される。アナログ変換された画像データは、ＲＯＩ制御回路１０６からの情報に基づき、表示信号処理回路１０９において全体画像とＲＯＩ画像に各々異なった表示形式が施された後、画像表示部１１０により表示される。
【００１６】
尚、撮像装置内の各部の動作は、キー操作部１１２からの信号に基づいて、ＣＰＵ１１１によって制御される。画像表示部１１０に表示される画像は、画像選択スイッチＳＷ１の操作により順次送り／戻しが行われる。また、撮影実行はレリーズスイッチＳＷ２の押圧、接触等により行われる。
【００１７】
［画像圧縮伸長処理］
以下、圧縮伸長部１０５による符号化処理と復号化処理の詳細について説明する。
【００１８】
図２は、圧縮伸長部１０５において符号化処理を実行する部分の細部構成を示すブロック図である。まず、圧縮伸長部１０５に入力された画像データに対して、コンポーネント変換部２０１で色空間変換が施される。変換された各色成分のデータは、必要に応じて所定の間引き処理が行われて出力される。尚、画像データがモノクログレースケールの画像である場合は、コンポーネント変換を行う必要はない。また、以下では、上記手順に従って得られた各色成分毎に行われる処理を説明する。
【００１９】
タイル分割部２０２は、入力された画像データを複数個の所定の大きさの矩形タイルに分割し出力する。このタイルの大きさは最大で各色成分のデータ全体の大きさとすることができ、この場合は実質的にタイル分割は行われないことになる。また、以下の説明では、上述の方法によって得られた各色成分のタイル毎に行われる処理を説明するものである。
【００２０】
離散ウェーブレット変換部２０３は、入力された各タイルの画像データに対して２次元の離散ウェーブレット変換を施して周波数成分に分解し、複数の周波数帯域のそれぞれに属する変換係数群（以降、「サブバンド」と称す。）を出力する。図３は、離散ウェーブレット変換部２０３による２次元離散ウェーブレット変換後のサブバンドの構成を示す図である。図３に示すように、第１の実施形態では、離散ウェーブレット変換部２０３によって２次元のウェーブレット変換を低周波帯域に対して再帰的に２レベル行われる。尚、離散ウェーブレット変換部２０３では、非可逆符号化を行う場合にはウェーブレット変換後の係数が実数になる実数型のフィルタを、可逆符号化を行う場合にはウェーブレット変換後の係数が整数になる整数型のフィルタが用いられる。
【００２１】
量子化部２０４は、入力したサブバンド毎に、所定の方法により設定された量子化ステップを用いて量子化を行い、量子化インデックスを生成して出力する。尚、上述した可逆符号化を行う場合には量子化部２０４では量子化を行わず、入力した変換係数そのものが出力される。
【００２２】
図４は、第１の実施形態におけるサブバンドをコードブロック分割した図である。図４に示すように、エントロピ符号化部２０５は、入力したサブバンドをさらに複数の矩形ブロック（以下、「コードブロック」と称す。）に分割し、このコードブロックを単位として独立にエントロピ符号化を行い、符号化データを生成する。この時、量子化インデックスを表すビットは、上位ビットプレーンから順に、算術符号化され符号化データが生成される。但し、エントロピ符号化部２０５では、サブバンドと矩形ブロックとが同サイズの場合は、入力したサブバンドをさらに分割しないものとする。
【００２３】
上述したように、第１の実施形態に係る撮像装置では、領域設定手段として機能するＲＯＩ制御部１０６を設けることにより画像の一部に対してＲＯＩを設定して符号化することができる。図５は、第１の実施形態におけるＲＯＩの変換係数を特定するマスク例を示す図である。第１の実施形態では、ＲＯＩ制御部１０６により設定されるＲＯＩに対して、図３に示す各サブバンドにおいて、図５に示すようなＲＯＩに係る変換係数を特定するためのマスクが生成される。図５においては白い部分がＲＯＩに相当しており、この部分に含まれる係数は、符号化に先立ってＲＯＩ以外の領域に係る係数とビットプレーン上で完全に分離されるように、所定のビット数分だけ上位方向にシフトアップされる。これにより、全てのビットプレーン内のビット１とビット０の存在を確認することにより、どの領域がＲＯＩであるかが容易に分かる。尚、このシフトアップ数は後述する符号列の所定のマーカにパラメータとして追加される。
【００２４】
符号列形成部２０６は、所定の方法により設定されたプログレッシブ形態に基づいて符号列を形成し出力する。この符号列形成において、符号列形成部２０６は、採用するプログレッシブ形態に合わせて、各コードブロックの符号化データの上位ビットプレーンから順に適量の符号化データを選択して１つ以上のレイヤを構成する。
【００２５】
例えば、設定されたプログレッシブ形態がＳＮＲスケーラブルである場合、符号列形成部２０６は図６に示すように、レイヤを単位として上位レイヤから順に下位レイヤに向かい符号化データを配置する。図６は、第１の実施形態におけるＳＮＲスケーラブルで出力した符号列を説明するための概要図である。尚、この時、後半のレイヤを省略して下位ビットプレーンに係る符号化データを含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化でき、このデータ量に応じて符号列を復号し、再生される画像の画質を変化させることができる。
【００２６】
一方、設定されたプログレッシブ形態が空間解像度スケーラブルである場合、符号列形成部２０６は図７に示すように低周波サブバンドから高周波サブバンドに向かい符号化データを配置する。図７は、第１の実施形態における空間解像度スケーラブルで出力した符号列を説明するための概要図である。この時、後半のサブバンドの符号化データを符号列に含めないように選択することもできる。このようにすることにより、当該符号列のデータ量を最適化でき、このデータ量に応じて符号列を復号し、再生された画像の解像度を変化させることができる。
【００２７】
さらに、符号列形成部２０６は上述のように設定された各プログレッシブ形態に応じて形成された符号列に各種マーカから構成されるヘッダを追加した最終的な符号列を出力する。
【００２８】
図８は、第１の実施形態において符号化された最終的な符号列の構成を説明するための概要図である。図８において、メインヘッダＭＨは、圧縮符号化対象となる画像の解像度、色成分数、各成分のビット精度（各成分を表現するビット数）、画像を構成するタイルのサイズ、離散ウェーブレット変換のフィルタのタイプ、量子化ステップ等の圧縮符号化に関するパラメータ及びプログレッシブ形態等の符号列構成に関する情報を指定するマーカ等を含んでいる。
【００２９】
また、タイルヘッダＴＨ＿ｉは、ｉ番目のタイルの開始を表すマーカを含んでいる。さらに、当該タイルにおいて符号化に関するパラメータをその以前に符号化されたタイルから変更した場合には、そのパラメータを指定するマーカも含んでいる。ＢＳ＿ｉは、ｉ番目のタイルの符号化データであり、その配列は先に述べたプログレッシブ形態に基づいて構成されている。
【００３０】
図９は、圧縮伸長部１０５において符号列を復号する復号処理を実行する部分の細部構成を示すブロック図である。符号列入力部２０７は、符号列を入力し、画像やタイルのサイズ、プログレッシブ形態や量子化ステップ等の後続の復号処理に必要なパラメータを抽出する。そして、実際の符号列はエントロピ復号部８に出力される。尚、復号対象となる全体の符号列には、上述した図８の形態を持つ複数タイル分の符号列が、上述したコンポーネント変換部２０１において得られた色成分の数だけ含まれている。また、第１の実施形態では、復号処理は各色成分毎に独立して行うこととし、復号対象となる色成分を構成する各タイルの符号列を順に復号する。
【００３１】
エントロピ復号部２０８は、入力した符号列に対して復号処理を行い、量子化インデックスを出力する。この復号処理ではコードブロック内の量子化インデックスを上位ビットプレーンから順に復号され、量子化インデックスが復元される。例えば、この時、符号列のプログレッシブ形態がＳＮＲスケーラブルとなっており、所定数の上位レイヤのみが入力されている場合には、復号処理は入力されたレイヤで打ち切られ、その時点での復元値が量子化インデックスとして出力される。
【００３２】
ここで、ＲＯＩに指定されたマーカが存在していた場合は、当該マーカに付随したシフトアップ数に対応した上位ビットプレーンに係る量子化インデックス値はシフトアップ数分、シフトダウンされてから出力される。これにより、ＲＯＩ部分の量子化インデックスは適切な値に復元される。
【００３３】
逆量子化部２０９は、入力した量子化インデックスに対して、先に符号列から読み込まれた量子化ステップに基づいて逆量子化を行い、変換係数を復元して出力する。
【００３４】
逆離散ウェーブレット変換部２１０は、入力した変換係数から２次元の逆離散ウェーブレット変換を施すことにより、これに対応する色成分データ（符号化対象画像がモノクロ画像の時は画像濃度データ）を復元して出力する。尚、この時、符号列のプログレッシブ形態が空間解像度スケーラブルであり、前半に符号化されるレベルのサブバンドのみ（例えば、ＬＬのみや、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のみ）が復元されている場合は、復元された色成分データの解像度はその復元されたサブバンドのレベルに応じて変化する。
【００３５】
図１０は、第１の実施形態における空間解像度スケーラブルによる復号化を説明する図である。図１０においてサブバンドＬＬの係数のみが復号された場合は、逆離散ウェーブレット変換は実質的には行われず、ＬＬの係数が元のデータレンジに収まるように調節された後に出力される。この場合、復元された色成分データは、図１０のｒ＝０に示すように、元の解像度に対して水平及び垂直方向に１／４のサイズとなっている。
【００３６】
さらに、ＬＬ、ＨＬ２、ＬＨ２、ＨＨ２のサブバンドまで復号された場合、逆変換を１レベル行うことで図１０のｒ＝１に示すように、元の解像度に対して水平及び垂直方向に１／２のサイズの色成分データが復元される。
【００３７】
以上の処理は各タイル単位で行われ、画像構成部２１１は、復元された各タイルの各色成分データを再度、元の１枚の符号化対象画像を構成する色成分データとして構成し、コンポーネント逆変換部２１２に出力する。
【００３８】
コンポーネント逆変換部２１２は、入力した各色成分データに所定の変換を施すことにより、元の符号化対象画像の色空間を持つ画像データを復元して出力する。この時、元の色成分データがコンポーネント変換部２０１にて間引き処理されている場合は、逆変換を行う前に必要な解像度に変換（例えば、データ補間）される。
【００３９】
以上述べたように、第１の実施形態に係る撮像装置では、プログレッシブ形態が空間解像度スケーラブルの場合には、復号するレイヤを制限することで、復元される画像の画質を制御することができる。また、ＳＮＲスケーラブルの場合には、逆離散ウェーブレット変換するサブバンドのレベル数を制限することで復元される画像の解像度を制御することができる。
【００４０】
［画像一覧表示時の動作手順］
図１１は、第１の実施形態に係る画像一覧表示時の撮像装置の動作を説明するためのフローチャートである。
【００４１】
まず、記録部１０７に格納されている画像データを読み出し（ステップＳ１０１）、画像一覧表示で用いるサムネイル画像の作成が圧縮伸長部１０５により行われる（ステップＳ１０２）。次に、画像データ内におけるＲＯＩの有無が確認される（ステップＳ１０３）。その結果、ＲＯＩを含む場合（有）、画像中のＲＯＩ部分に枠表示の追加が行われ（ステップＳ１０４）、次いで、サムネイル画像の一覧表示が行われる（ステップＳ１０５）。一方、ＲＯＩ部分を含まない場合（無）、そのままサムネイル画像の一覧表示が行われる（ステップＳ１０５）。
【００４２】
そして、画像選択スイッチＳＷ１の押圧等により画像の送り／戻しが指示されたか否かが判断される（ステップＳ１０６）。その結果、指示された場合（Ｙｅｓ）、画像選択のための指標が移動する（ステップＳ１０７）。尚、当該指標は、画像全体とＲＯＩ部分のどちらへも移動可能であるものとする。
【００４３】
［画像表示の形態］
図１２は、第１の実施形態に係る撮像装置によって撮影された画像の一例を示す図である。また、図１３は、図１２に示される画像を含む画像表示部１１０に一覧表示されるサムネイル画像の例を示す図である。
【００４４】
図１２において、３０１は撮影された全体画像であり、図中の点線で示された矩形領域３０２ａ〜３０２ｃがそれぞれＲＯＩとして設定されているものとする。また、図１３には、図１２に示す画像のサムネイル画像を含む複数の画像データの差旨一画像が一覧表示された表示画面が示されている。ここで、ＲＯＩが設定された画像３０１が表示される場合、サムネイル画像３０１’上にはＲＯＩ表示枠３０２ａ’〜３０２ｃ’が追加表示される。
【００４５】
そして、例えば、画像選択送りにより指標３０４が移動した場合、画像には選択画枠３０５が付帯され、現在選択されている部分が明確に示される。尚、前述したように、指標３０４は、画像選択送りにより、全体画像とＲＯＩの両方を移動可能である。例えば、図１３に示される例の場合は、指標３０４を矢印３０６ａ〜３０６ｅの順に移動させる。また、選択画枠３０５は、全体画像のサムネイル画像とＲＯＩの区別なく、その大きさに応じて付帯されるものとする。
【００４６】
＜第２の実施形態＞
次に、本発明に係る第２の実施形態について、図面を参照して詳細に説明する。尚、第２の実施形態においては、撮像装置の主な構成、画像圧縮伸長処理の詳細及び動作フローチャートについては前述した第１の実施形態と同じであるものとし、説明は省略する。
【００４７】
図１４及び図１５は、それぞれ本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。図１４及び図１５のサムネイル表示においてＲＯＩが設定されたサムネイル画像３０１’が表示される場合、サムネイル画像３０１’上にはＲＯＩ表示枠３０２ａ’〜３０２ｃ’が追加表示される。そして、画像選択送りにより指標３０４が移動した場合、画像には選択画枠３０５が付帯され、現在選択されている部分が明確に示される。また、指標３０４は画像選択送りにより、全体画像とＲＯＩの両方を移動可能であるが、第２の実施形態では指標３０４の移動モードが選択可能になっている。
【００４８】
まず、図１４に示すように、主画像選択モードの場合、指標３０４は矢印３０７ａ、３０７ｂの順に移動する。また、図１５に示すように、ＲＯＩ選択可能モードの場合、指標３０４は矢印３０８ａ→３０８ｅの順のように移動する。尚、移動モードの切り替え方法は、事前に設定しておく方法、画像送りの際に操作キー（シフトキー）の同時押しで切り替える方法、十字キーを用いて左右方向は主画像選択モードとし上下方向はＲＯＩ選択可能モードとする方法等が挙げられる。
【００４９】
すなわち、本実施形態に係る撮像装置は、第１の実施形態で述べた撮像装置におけるキー操作部１１２が、複数の選択モードに従って全体画像又はＲＯＩを選択することを特徴とする。また、上記撮像装置では、画像選択時に、全体画像のみを選択させる第１の選択モードと、全体画像とＲＯＩとを選択させる第２の選択モードとを備えることを特徴とする。そして、上記撮像装置は、第１の選択モードと第２の選択モードとを切り替える切替手段（例えば、画像送りの際に操作キーの同時押しで切り替える手段、十字キーを用いて左右方向は主画像選択モードとし上下方向はＲＯＩ選択可能モードとする手段等）をさらに備えることを特徴とする。
【００５０】
尚、本発明は、複数の機器（例えば、ホストコンピュータ、インタフェース機器、リーダ、プリンタ等）から構成されるシステムに適用しても、一つの機器からなる装置（例えば、複写機、ファクシミリ装置等）に適用してもよい。
【００５１】
また、本発明の目的は、前述した第１及び第２の実施形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体（または記憶媒体）を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００５２】
さらに、記録媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００５３】
本発明を上記記録媒体に適用する場合、その記録媒体には、先に説明したフローチャート等に対応するプログラムコードが格納されることになる。
【００５４】
【発明の効果】
以上説明したように、本発明に係る撮像装置によれば、ＲＯＩ画像を表示する際に全体画像だけでなく、それに付随するＲＯＩ画像を識別性を向上させて全体画像に関連付けて同時に表示することができ、オペレータは画像選択時に所望の画像を確実かつ簡易に選択することができる。
【図面の簡単な説明】
【図１】本発明の第１の実施形態に係る撮像装置の構成及び画像データの流れを示すブロック図である。
【図２】圧縮伸長部１０５において符号化処理を実行する部分の細部構成を示すブロック図である。
【図３】離散ウェーブレット変換部２０３による２次元離散ウェーブレット変換後のサブバンドの構成を示す図である。
【図４】第１の実施形態におけるサブバンドをコードブロック分割した図である。
【図５】第１の実施形態におけるＲＯＩの変換係数を特定するマスク例を示す図である。
【図６】第１の実施形態におけるＳＮＲスケーラブルで出力した符号列を説明するための概要図である。
【図７】第１の実施形態における空間解像度スケーラブルで出力した符号列を説明するための概要図である。
【図８】第１の実施形態において符号化された最終的な符号列の構成を説明するための概要図である。
【図９】圧縮伸長部１０５において符号列を復号する復号処理を実行する部分の細部構成を示すブロック図である。
【図１０】第１の実施形態における空間解像度スケーラブルによる復号化を説明する図である。
【図１１】第１の実施形態に係る画像一覧表示時の撮像装置の動作を説明するためのフローチャートである。
【図１２】第１の実施形態に係る撮像装置によって撮影された画像の一例を示す図である。
【図１３】図１２に示される画像を含む画像表示部１１０に一覧表示されるサムネイル画像の例を示す図である。
【図１４】本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。
【図１５】本発明の第２の実施形態におけるサムネイル画像表示形態の概要を示す図である。
【符号の説明】
１０１ カメラ部
１０２ Ａ／Ｄ変換回路
１０３ カメラ信号処理回路
１０４ バッファメモリ
１０５ 圧縮伸長部
１０６ ＲＯＩ制御部
１０７ 記録部
１０８ Ｄ／Ａ変換回路
１０９ 表示信号処理回路
１１０ 画像表示部
１１１ ＣＰＵ
１１２ キー操作部
１１３ ＲＡＭ
１１４ ＲＯＭ
Claims (1)
- 画像を取得する取得手段と、
取得された前記画像の所定領域を指定する指定手段と、
前記指定手段により指定された前記所定領域と非指定領域をそれぞれ異なる特性で圧縮する圧縮手段と、
前記圧縮手段により圧縮された画像を画面上に表示する表示手段と、
前記画像が表示された画面から該画像の選択又は該画像中の前記所定領域を選択する選択手段と
を備えることを特徴とする画像選択装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003022266A JP2004235990A (ja) | 2003-01-30 | 2003-01-30 | 画像選択装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003022266A JP2004235990A (ja) | 2003-01-30 | 2003-01-30 | 画像選択装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004235990A true JP2004235990A (ja) | 2004-08-19 |
| JP2004235990A5 JP2004235990A5 (ja) | 2006-02-02 |
Family
ID=32951379
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003022266A Pending JP2004235990A (ja) | 2003-01-30 | 2003-01-30 | 画像選択装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004235990A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006279397A (ja) * | 2005-03-29 | 2006-10-12 | Megachips Lsi Solutions Inc | 画像強調装置 |
| JP2007096596A (ja) * | 2005-09-28 | 2007-04-12 | Seiko Epson Corp | 画像合成装置、印刷装置、携帯情報端末、画像合成方法、画像合成プログラム、および記録媒体 |
| CN101631221B (zh) * | 2008-07-18 | 2013-01-02 | 索尼株式会社 | 视频记录设备和视频记录方法 |
| JP2013509786A (ja) * | 2009-10-30 | 2013-03-14 | オラワークス・インコーポレイテッド | イメージコンテンツに対してトリミングを実行するための方法、端末及びコンピュータ読み取り可能な記録媒体 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11215498A (ja) * | 1998-01-27 | 1999-08-06 | Canon Inc | 画像処理装置および画像処理方法およびプログラム記憶媒体 |
| JP2000149038A (ja) * | 1998-11-10 | 2000-05-30 | Canon Inc | 画像処理方法及び装置、その記憶媒体 |
| JP2001128109A (ja) * | 1999-10-22 | 2001-05-11 | Canon Inc | 画像処理方法及びその装置 |
| JP2001169119A (ja) * | 1999-12-14 | 2001-06-22 | Canon Inc | 画像出力装置および方法 |
| JP2002094991A (ja) * | 2000-09-19 | 2002-03-29 | Mega Chips Corp | 関心領域符号化方法 |
| JP2002358522A (ja) * | 2001-05-31 | 2002-12-13 | Olympus Optical Co Ltd | 画像選出支援装置および画像選出支援方法ならびに画像選出支援プログラム |
-
2003
- 2003-01-30 JP JP2003022266A patent/JP2004235990A/ja active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11215498A (ja) * | 1998-01-27 | 1999-08-06 | Canon Inc | 画像処理装置および画像処理方法およびプログラム記憶媒体 |
| JP2000149038A (ja) * | 1998-11-10 | 2000-05-30 | Canon Inc | 画像処理方法及び装置、その記憶媒体 |
| JP2001128109A (ja) * | 1999-10-22 | 2001-05-11 | Canon Inc | 画像処理方法及びその装置 |
| JP2001169119A (ja) * | 1999-12-14 | 2001-06-22 | Canon Inc | 画像出力装置および方法 |
| JP2002094991A (ja) * | 2000-09-19 | 2002-03-29 | Mega Chips Corp | 関心領域符号化方法 |
| JP2002358522A (ja) * | 2001-05-31 | 2002-12-13 | Olympus Optical Co Ltd | 画像選出支援装置および画像選出支援方法ならびに画像選出支援プログラム |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006279397A (ja) * | 2005-03-29 | 2006-10-12 | Megachips Lsi Solutions Inc | 画像強調装置 |
| US8050506B2 (en) | 2005-03-29 | 2011-11-01 | Megachips Corporation | Image enhancement device |
| JP2007096596A (ja) * | 2005-09-28 | 2007-04-12 | Seiko Epson Corp | 画像合成装置、印刷装置、携帯情報端末、画像合成方法、画像合成プログラム、および記録媒体 |
| JP4626466B2 (ja) * | 2005-09-28 | 2011-02-09 | セイコーエプソン株式会社 | 画像合成装置、画像合成方法、および画像合成プログラム |
| CN101631221B (zh) * | 2008-07-18 | 2013-01-02 | 索尼株式会社 | 视频记录设备和视频记录方法 |
| JP2013509786A (ja) * | 2009-10-30 | 2013-03-14 | オラワークス・インコーポレイテッド | イメージコンテンツに対してトリミングを実行するための方法、端末及びコンピュータ読み取り可能な記録媒体 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6560369B1 (en) | Conversion of wavelet coded formats depending on input and output buffer capacities | |
| US7359549B2 (en) | Imaging device, image processing method, and recording medium | |
| JP4148462B2 (ja) | 画像処理装置、電子カメラ装置及び画像処理方法 | |
| US7529417B2 (en) | Apparatus, method and storage medium for image encoding/decoding using shape-based coefficient interpolation | |
| JP2004221999A (ja) | 画像処理方法 | |
| US20020005909A1 (en) | Image processing apparatus, image processing method, digital camera, and program | |
| US20040105585A1 (en) | Image compression apparatus, method and recording medium storing an image compression program | |
| US8340441B2 (en) | Image encoding apparatus, image decoding apparatus, and methods of controlling the same | |
| JP2000358183A (ja) | 画像処理装置及びその方法 | |
| JP4822396B2 (ja) | 画像強調装置 | |
| US7310447B2 (en) | Image processing apparatus, image processing method, and storage medium | |
| JP2005277908A (ja) | 画像処理装置、その画像処理方法およびカメラつき携帯電話 | |
| US20010013902A1 (en) | Image sensing apparatus and its control method, and computer readable memory | |
| CN107079131A (zh) | 图像处理设备和图像处理方法 | |
| JP4143322B2 (ja) | 画像再生装置及び画像再生方法 | |
| JP2004235990A (ja) | 画像選択装置 | |
| JP2001359117A (ja) | 画像処理装置及び該装置における画像処理方法 | |
| JP2001333430A (ja) | 画像処理装置、方法、及びコンピュータ読み取り可能な記憶媒体 | |
| JP4027196B2 (ja) | 画像表示装置及びその制御方法 | |
| JP4412688B2 (ja) | 画像処理装置及びその方法 | |
| JP2004214985A (ja) | 画像処理装置及び画像再生装置 | |
| JP4164268B2 (ja) | 符号化装置、符号化方法、プログラム、記憶媒体 | |
| JP4154178B2 (ja) | ビデオカメラ | |
| JP2006157615A (ja) | 撮像装置 | |
| JP2003037740A (ja) | 電子機器及びデジタルスチルカメラ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051206 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051206 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070810 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071005 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071102 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080303 |