JP2002084540A - 画像処理装置、画像処理方法、電子カメラ、及び、プログラム - Google Patents

Abstract

(57)【要約】 【課題】 画像中の必要な範囲で画質を維持し、ひい
て、全体としてデータ量の低減を可能とすること。 【解決手段】 動画像をモニタに表示し、表示画面中の
一部の領域を指定することにより、表示された画像のう
ち、指定された領域に含まれる画像が、他の領域の画像
よりも高画質で復号可能に、画像を符号化する。領域の
指定の際には動画像を静止する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、撮像した画像もし
くは再生した画像を符号化等する画像処理の分野に関す
る。

【０００２】

【従来の技術】従来の画像処理装置についてビデオカメ
ラを例にとって説明する。

【０００３】図２８は従来のビデオカメラの構成を示す
ブロック図である。

【０００４】ズームレンズ１０１は画像を拡大縮小し、
フォーカスレンズ１０２は画像を合焦させる。アイリス
１０３は入射光量を調整する。ＣＣＤ１０４は画像を光
電変換し画像信号を出力する。ＣＤＳ／ＡＧＣ回路１０
５はＣＣＤ１０４の出力をサンプリングし所定の値に利
得を調整する。Ａ／Ｄ変換回路１０７はアナログ信号を
デジタル信号に変換し、デジタル信号の画像データを出
力する。カメラ信号処理回路１０８は撮像した画像を調
整する。バッファメモリ１０９は画像データを一時的に
記憶する。

【０００５】アイリスモータ１１３はアイリス１０３の
開口量を調整する。アイリスモータドライバ１１４はア
イリスモータ１１３を制御する。アイリスエンコーダ１
１２はアイリス１０３の開口量を検出する。フォーカス
モータ１１５はフォーカスレンズ１０２を移動させる。
フォーカスモータドライバ１１６はフォーカスモータ１
１５を制御する。ズームモータ１１７はズームレンズ１
０１を移動させる。ズームモータドライバ１１８はズー
ムモータ１１７を制御する。ズームエンコーダ１１９は
ズームレンズの位置を検出する。カムテーブル１２７は
ズーム値に応じた合焦曲線を得るためのテーブルであ
る。

【０００６】システムコントローラ１２０は装置全体を
制御する。圧縮回路１１０は画像データを圧縮する。記
録回路１１１は圧縮された画像データを磁気記録媒体や
半導体メモリなどに記録する。Ｄ／Ａ変換回路１２３は
デジタル信号をアナログ信号に変換する。モニタ１２４
は撮像した画像を表示する液晶表示装置（ＬＣＤ）等の
ディスプレイである。トリガーボタン１２８は記録回路
１１１による画像データの記録開始・停止を指示するボ
タンである。モード選択ダイヤル１２９は、静止画と動
画の切換え、画像の再生、電源ＯＦＦを選択するための
ダイヤルである。

【０００７】係る構成からなる従来のビデオカメラで
は、被写体からの光は、ズームレンズ１０１により変倍
され、フォーカスレンズ１０２で合焦され、アイリス１
０３により光量を調整され、ＣＣＤ１０４の撮像面に結
像される。この撮像面上の像はＣＣＤ１０４で光電変換
され、ＣＤＳ／ＡＧＣ回路１０５においてサンプリング
して利得を調整し、Ａ／Ｄ変換回路１０７によりデジタ
ル信号に変換される。そして、画像データは、カメラ信
号処理回路１０８で画質が調整され、画質が調整された
画像データはバッファメモリ１０９に記憶される。

【０００８】ズームレバー１２５により、ズーム指示が
与えられると、テレ（Ｔ）、ワイド（Ｗ）方向に変倍動
作を行う。このため、ズームレバー１２５の押圧状態を
検出し、検出結果に応じてシステムコントローラ１２１
からズームモータドライバ１１８へ信号を送り、ズーム
モータ１１７を介してズームレンズ１０１を移動させ
る。同時に、システムコントローラ１２０はカムテーブ
ル１２７より合焦情報を取得し、得られた合焦情報に基
づいてフォーカスモータドライバ１１６に信号を送る。
フォーカスモータ１１５を介してフォーカスレンズ１０
２を動かすことで合焦状態を維持しながら変倍動作を行
なう。

【０００９】バッファメモリ１０９に記憶された画像デ
ータはＤ／Ａ変換回路１２３で、アナログ信号に変換さ
れ、モニタ１２４に表示される。

【００１０】一方、バッファメモリ１０９に記憶された
画像データは、圧縮回路１１０において高能率符号化処
理により圧縮され、圧縮された画像データは記録回路１
１１に格納される。

【００１１】ここで、モード選択ダイヤル１２９を動画
モードに選択した場合は、トリガーボタン１２８で操作
された範囲の画像が動画として記録回路１１１に記録さ
れる。一方、モード選択ダイヤル１２９を静止画に選択
するとトリガーボタン１２９で押された時の画像が記録
回路１１１に記録される。

【００１２】次に、このような従来のデジタルビデオカ
メラ用いられているＤＣＴ（離散コサイン変換）をベー
スとする高能率符号化処理について図２９のブロック図
を用いて説明する。

【００１３】ブロック化処理回路１３１はＤＣＴブロッ
クを形成する。シャフリング回路１３２はブロック化さ
れた画像を並び替える。ＤＣＴ処理回路１３３は直交変
換を行う。量子化処理回路１３４は画像データを量子化
する。符号化回路１３５はハフマン符号等を実行する回
路である。デシャフリング回路１３６は並び替えた画像
信号を元に戻す。係数設定回路１３７は量子化の係数を
決定する。

【００１４】次に、このような符号化処理を上述した従
来のビデオカメラに適用した場合について説明する。バ
ッファメモリ１０９から出力された画像データは、ブロ
ック化処理回路１３１にて各々８×８画素から成るブロ
ックに分割される。そして、輝度信号が４個、色差信号
が各１個の合計６個のＤＣＴブロックからマクロブロッ
クを１つ構成し、マクロブロック単位でシャフリング回
路１３２においてシャフリングし情報量の平準化を図
る。その後、ＤＣＴ処理回路１３３により直交変換が行
われる。ＤＣＴ処理回路１３３から出力された周波数係
数データは、量子化処理回路１３４に入力される。そし
て、各周波数成分毎のデータ係数の集合を係数設定回路
１３７から生成した適当な数値にて除算する。更に、符
号化処理回路１３５においてハフマン符号処理を施して
可変長化し、デシャフリング回路１３６において元の画
像配列に戻し、記録回路１１１へ出力する。この様にし
てデータ量を５分の１程度圧縮することができる。

【００１５】

【発明が解決しようとする課題】しかしながら、従来の
ビデオカメラ等の画像処理装置においては、画像データ
を全体的に平準化して圧縮していたため、更に高能率で
符号化した場合、全体の画質が一様に低下してしまう。
逆に、画質を優先すれば全体として圧縮率を下がり、デ
ータ量を低減できない。すなわち、画像全体として統一
的な処理しか選択できない。

【００１６】従って、本発明の目的は、画像中の必要な
範囲で画質を維持し、ひいて、全体としてデータ量を低
減することにある。

【００１７】

【課題を解決するための手段】本発明によれば、入力さ
れる画像データに基づく動画像を表示する表示手段と、
前記表示手段の表示画面中の一部の領域を指定する指定
手段と、前記画像データを符号化する符号化手段と、を
備え、前記表示手段は、前記指定手段による前記指定の
際には、前記動画像の静止画像を表示し、前記符号化手
段は、前記表示手段により表示される動画像のうち、前
記指定手段により指定された前記領域に含まれる画像
が、他の領域の画像よりも高画質で復号可能に前記画像
データを符号化することを特徴とする画像処理装置が提
供される。

【００１８】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段により表示された動画像に含まれるオブジェクトを指
定する指定手段と、前記画像データを符号化する符号化
手段と、を備え、前記表示手段は、前記指定手段による
前記指定の際には、前記動画像の静止画像を表示し、前
記符号化手段は、前記表示手段により表示される動画像
のうち、前記指定手段により指定されたオブジェクトを
示す画像が、他の部分の画像よりも高画質で復号可能に
前記画像データを符号化することを特徴とする画像処理
装置が提供される。

【００１９】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段の表示画面中の一部の領域を指定する指定手段と、前
記画像データを符号化する符号化手段と、を備え、前記
表示手段は、前記指定手段による前記指定の際には、前
記動画像の静止画像を表示し、前記符号化手段が、前記
画像データに対して離散ウェーブレット変換を行って変
換係数を生成する手段と、前記変換係数を量子化して量
子化インデックスを生成する手段と、前記量子化インデ
ックスをビットプレーンに分解し、各ビットプレーンに
対して算術符号化を実行して符号化データを生成する手
段と、を備え、更に、前記符号化手段は、前記表示手段
により表示される動画像のうち、前記指定手段により指
定された前記領域に含まれる画像に対応する前記量子化
インデックスを、所定ビット数シフトアップすることを
特徴とする画像処理装置が提供される。

【００２０】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段により表示された動画像に含まれるオブジェクトを指
定する指定手段と、前記画像データを符号化する符号化
手段と、を備え、前記表示手段は、前記指定手段による
前記指定の際には、前記動画像の静止画像を表示し、前
記符号化手段が、前記画像データに対して離散ウェーブ
レット変換を行って変換係数を生成する手段と、前記変
換係数を量子化して量子化インデックスを生成する手段
と、前記量子化インデックスをビットプレーンに分解
し、各ビットプレーンに対して算術符号化を実行して符
号化データを生成する手段と、を備え、更に、前記符号
化手段は、前記表示手段により表示される動画像のう
ち、前記指定手段により指定されたオブジェクトを示す
画像に対応する前記量子化インデックスを、所定ビット
数シフトアップすることを特徴とする画像処理装置が提
供される。

【００２１】また、本発明によれば、画像を撮像して画
像データを生成する撮像手段と、前記画像データに基づ
く動画像を表示する表示手段と、前記表示手段の表示画
面中の一部の領域を指定する指定手段と、前記画像デー
タを符号化して符号化データを生成する符号化手段と、
前記符号化データを保存する手段と、を備え、前記表示
手段は、前記指定手段による前記指定の際には、前記動
画像の静止画像を表示し、前記符号化手段は、前記表示
手段により表示される動画像のうち、前記指定手段によ
り指定された前記領域に含まれる画像が、他の領域の画
像よりも高画質で復号可能に前記画像データを符号化す
ることを特徴とする電子カメラが提供される。

【００２２】また、本発明によれば、画像を撮像して画
像データを生成する撮像手段と、前記画像データに基づ
く動画像を表示する表示手段と、前記表示手段により表
示された動画像に含まれるオブジェクトを指定する指定
手段と、前記画像データを符号化して符号化データを生
成する符号化手段と、前記符号化データを保存する手段
と、を備え、前記表示手段は、前記指定手段による前記
指定の際には、前記動画像の静止画像を表示し、前記符
号化手段は、前記表示手段により表示される動画像のう
ち、前記指定手段により指定されたオブジェクトを示す
画像が、他の部分の画像よりも高画質で復号可能に前記
画像データを符号化することを特徴とする電子カメラが
提供される。

【００２３】また、本発明によれば、画像を撮像して画
像データを生成する撮像手段と、前記画像データに基づ
く動画像を表示する表示手段と、前記表示手段の表示画
面中の一部の領域を指定する指定手段と、前記画像デー
タを符号化して符号化データを生成する符号化手段と、
前記符号化データを保存する手段と、を備え、前記表示
手段は、前記指定手段による前記指定の際には、前記動
画像の静止画像を表示し、前記符号化手段が、前記画像
データに対して離散ウェーブレット変換を行って変換係
数を生成する手段と、前記変換係数を量子化して量子化
インデックスを生成する手段と、前記量子化インデック
スをビットプレーンに分解し、各ビットプレーンに対し
て算術符号化を実行して符号化データを生成する手段
と、を備え、更に、前記符号化手段は、前記表示手段に
より表示される動画像のうち、前記指定手段により指定
された前記領域に含まれる画像に対応する前記量子化イ
ンデックスを、所定ビット数シフトアップすることを特
徴とする電子カメラが提供される。

【００２４】また、本発明によれば、画像を撮像して画
像データを生成する撮像手段と、前記画像データに基づ
く動画像を表示する表示手段と、前記表示手段により表
示された動画像に含まれるオブジェクトを指定する指定
手段と、前記画像データを符号化して符号化データを生
成する符号化手段と、前記符号化データを保存する手段
と、を備え、前記表示手段は、前記指定手段による前記
指定の際には、前記動画像の静止画像を表示し、前記符
号化手段が、前記画像データに対して離散ウェーブレッ
ト変換を行って変換係数を生成する手段と、前記変換係
数を量子化して量子化インデックスを生成する手段と、
前記量子化インデックスをビットプレーンに分解し、各
ビットプレーンに対して算術符号化を実行して符号化デ
ータを生成する手段と、を備え、更に、前記符号化手段
は、前記表示手段により表示される動画像のうち、前記
指定手段により指定されたオブジェクトを示す画像に対
応する前記量子化インデックスを、所定ビット数シフト
アップすることを特徴とする電子カメラが提供される。

【００２５】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程における表示画面中の一部の領域を指定する指定工程
と、前記画像データを符号化する符号化工程と、を含
み、前記表示工程では、前記指定工程における前記指定
の際には、前記動画像の静止画像を表示し、前記符号化
工程では、前記表示工程において表示される動画像のう
ち、前記指定工程において指定された前記領域に含まれ
る画像が、他の領域の画像よりも高画質で復号可能に前
記画像データを符号化することを特徴とする画像処理方
法が提供される。

【００２６】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程において表示された動画像に含まれるオブジェクトを
指定する指定工程と、前記画像データを符号化する符号
化工程と、を含み、前記表示工程では、前記指定工程に
おける前記指定の際には、前記動画像の静止画像を表示
し、前記符号化工程では、前記表示工程において表示さ
れる動画像のうち、前記指定工程において指定されたオ
ブジェクトを示す画像が、他の部分の画像よりも高画質
で復号可能に前記画像データを符号化することを特徴と
する画像処理方法が提供される。

【００２７】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程における表示画面中の一部の領域を指定する指定工程
と、前記画像データを符号化する符号化工程と、を含
み、前記表示工程では、前記指定工程における前記指定
の際には、前記動画像の静止画像を表示し、前記符号化
工程が、前記画像データに対して離散ウェーブレット変
換を行って変換係数を生成する工程と、前記変換係数を
量子化して量子化インデックスを生成する工程と、前記
量子化インデックスをビットプレーンに分解し、各ビッ
トプレーンに対して算術符号化を実行して符号化データ
を生成する工程と、を含み、更に、前記符号化工程で
は、前記表示工程において表示される動画像のうち、前
記指定工程において指定された前記領域に含まれる画像
に対応する前記量子化インデックスを、所定ビット数シ
フトアップすることを特徴とする画像処理方法が提供さ
れる。

【００２８】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程において表示された動画像に含まれるオブジェクトを
指定する指定工程と、前記画像データを符号化する符号
化工程と、を含み、前記表示工程では、前記指定工程に
おける前記指定の際には、前記動画像の静止画像を表示
し、前記符号化工程が、前記画像データに対して離散ウ
ェーブレット変換を行って変換係数を生成する工程と、
前記変換係数を量子化して量子化インデックスを生成す
る工程と、前記量子化インデックスをビットプレーンに
分解し、各ビットプレーンに対して算術符号化を実行し
て符号化データを生成する工程と、を含み、更に、前記
符号化工程では、前記表示工程において表示される動画
像のうち、前記指定工程において指定されたオブジェク
トを示す画像に対応する前記量子化インデックスを、所
定ビット数シフトアップすることを特徴とする画像処理
方法が提供される。

【００２９】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段の表示画面中の一部の領域を指定する
指定手段、前記画像データを符号化する符号化手段、と
して機能させるプログラムであって、前記表示手段は、
前記指定手段による前記指定の際には、前記動画像の静
止画像を表示し、前記符号化手段は、前記表示手段によ
り表示される動画像のうち、前記指定手段により指定さ
れた前記領域に含まれる画像が、他の領域の画像よりも
高画質で復号可能に前記画像データを符号化することを
特徴とするプログラムが提供される。

【００３０】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段により表示された動画像に含まれるオ
ブジェクトを指定する指定手段、前記画像データを符号
化する符号化手段、として機能させるプログラムであっ
て、前記表示手段は、前記指定手段による前記指定の際
には、前記動画像の静止画像を表示し、前記符号化手段
は、前記表示手段により表示される動画像のうち、前記
指定手段により指定されたオブジェクトを示す画像が、
他の部分の画像よりも高画質で復号可能に前記画像デー
タを符号化することを特徴とするプログラムが提供され
る。

【００３１】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段の表示画面中の一部の領域を指定する
指定手段、前記画像データを符号化する符号化手段、と
して記録させるプログラムであって、前記表示手段は、
前記指定手段による前記指定の際には、前記動画像の静
止画像を表示し、前記符号化手段が、前記画像データに
対して離散ウェーブレット変換を行って変換係数を生成
する手段と、前記変換係数を量子化して量子化インデッ
クスを生成する手段と、前記量子化インデックスをビッ
トプレーンに分解し、各ビットプレーンに対して算術符
号化を実行して符号化データを生成する手段と、を備
え、更に、前記符号化手段は、前記表示手段により表示
される動画像のうち、前記指定手段により指定された前
記領域に含まれる画像に対応する前記量子化インデック
スを、所定ビット数シフトアップすることを特徴とする
プログラムが提供される。

【００３２】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段により表示された動画像に含まれるオ
ブジェクトを指定する指定手段、前記画像データを符号
化する符号化手段、として機能させるプログラムであっ
て、前記表示手段は、前記指定手段による前記指定の際
には、前記動画像の静止画像を表示し、前記符号化手段
が、前記画像データに対して離散ウェーブレット変換を
行って変換係数を生成する手段と、前記変換係数を量子
化して量子化インデックスを生成する手段と、前記量子
化インデックスをビットプレーンに分解し、各ビットプ
レーンに対して算術符号化を実行して符号化データを生
成する手段と、を備え、更に、前記符号化手段は、前記
表示手段により表示される動画像のうち、前記指定手段
により指定されたオブジェクトを示す画像に対応する前
記量子化インデックスを、所定ビット数シフトアップす
ることを特徴とするプログラムが提供される。

【００３３】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段の表示画面中の一部の領域を指定する指定手段と、前
記画像データを符号化して符号化データを生成する符号
化手段と、前記符号化データを記憶する記憶手段と、前
記記憶手段に記憶された前記符号化データを復号化する
復号化手段と、を備え、前記表示手段は、前記指定手段
による前記指定の際には、前記動画像の静止画像を表示
し、前記符号化手段は、前記表示手段により表示される
動画像のうち、前記指定手段により指定された前記領域
に含まれる画像が、他の領域の画像よりも高画質で復号
可能に前記画像データを符号化し、前記復号化手段は、
前記記憶手段に記憶された前記符号化データのうち、少
なくとも、前記指定手段による前記領域の指定開始から
指定終了までの符号化データを復号化し、更に、前記符
号化手段は、前記復号化手段により復号化された画像デ
ータに係る画像のうち、前記領域に対応する画像が、他
の領域の画像よりも高画質で復号可能に、前記復号化さ
れた画像データを再符号化することを特徴とする画像処
理装置が提供される。

【００３４】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段により表示された動画像に含まれるオブジェクトを指
定する指定手段と、前記画像データを符号化して符号化
データを生成する符号化手段と、前記符号化データを記
憶する記憶手段と、を備え、前記表示手段は、前記指定
手段による前記指定の際には、前記動画像の静止画像を
表示し、前記符号化手段は、前記表示手段により表示さ
れる動画像のうち、前記指定手段により指定されたオブ
ジェクトを示す画像が、他の部分の画像よりも高画質で
復号可能に前記画像データを符号化し、前記復号化手段
は、前記記憶手段に記憶された前記符号化データのう
ち、少なくとも、前記指定手段による前記オブジェクト
の指定開始から指定終了までの符号化データを復号化
し、更に、前記符号化手段は、前記復号化手段により復
号化された画像データに係る画像のうち、前記オブジェ
クトに対応する画像が、他の部分の画像よりも高画質で
復号可能に、前記復号化された画像データを再符号化す
ることを特徴とする画像処理装置が提供される。

【００３５】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示手
段の表示画面中の一部の領域を指定する指定工程と、前
記画像データを符号化して符号化データを生成する符号
化工程と、前記符号化データを記憶する記憶工程と、前
記記憶工程において記憶した前記符号化データを復号化
する復号化工程と、を含み、前記表示工程では、前記指
定工程における前記指定の際には、前記動画像の静止画
像を表示し、前記符号化工程では、前記表示工程におい
て表示される動画像のうち、前記指定工程において指定
された前記領域に含まれる画像が、他の領域の画像より
も高画質で復号可能に前記画像データを符号化し、前記
復号化工程では、前記記憶工程において記憶された前記
符号化データのうち、少なくとも、前記指定工程におけ
る前記領域の指定開始から指定終了までの符号化データ
を復号化し、更に、前記符号化工程では、前記復号化工
程において復号化された画像データに係る画像のうち、
前記領域に対応する画像が、他の領域の画像よりも高画
質で復号可能に、前記復号化された画像データを再符号
化することを特徴とする画像処理方法が提供される。

【００３６】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程において表示された動画像に含まれるオブジェクトを
指定する指定工程と、前記画像データを符号化して符号
化データを生成する符号化工程と、前記符号化データを
記憶する記憶工程と、を含み、前記表示工程では、前記
指定工程における前記指定の際には、前記動画像の静止
画像を表示し、前記符号化工程では、前記表示工程にお
いて表示される動画像のうち、前記指定工程において指
定されたオブジェクトを示す画像が、他の部分の画像よ
りも高画質で復号可能に前記画像データを符号化し、前
記復号化工程では、前記記憶工程において記憶された前
記符号化データのうち、少なくとも、前記指定工程にお
ける前記オブジェクトの指定開始から指定終了までの符
号化データを復号化し、更に、前記符号化工程では、前
記復号化工程において復号化された画像データに係る画
像のうち、前記オブジェクトに対応する画像が、他の部
分の画像よりも高画質で復号可能に、前記復号化された
画像データを再符号化することを特徴とする画像処理方
法が提供される。

【００３７】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段の表示画面中の一部の領域を指定する
指定手段、前記画像データを符号化して符号化データを
生成する符号化手段、前記符号化データを記憶する記憶
手段、前記記憶手段に記憶された前記符号化データを復
号化する復号化手段、として機能させるプログラムであ
って、前記表示手段は、前記指定手段による前記指定の
際には、前記動画像の静止画像を表示し、前記符号化手
段は、前記表示手段により表示される動画像のうち、前
記指定手段により指定された前記領域に含まれる画像
が、他の領域の画像よりも高画質で復号可能に前記画像
データを符号化し、前記復号化手段は、前記記憶手段に
記憶された前記符号化データのうち、少なくとも、前記
指定手段による前記領域の指定開始から指定終了までの
符号化データを復号化し、更に、前記符号化手段は、前
記復号化手段により復号化された画像データに係る画像
のうち、前記領域に対応する画像が、他の領域の画像よ
りも高画質で復号可能に、前記復号化された画像データ
を再符号化することを特徴とするプログラムが提供され
る。

【００３８】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段により表示された動画像に含まれるオ
ブジェクトを指定する指定手段、前記画像データを符号
化して符号化データを生成する符号化手段、前記符号化
データを記憶する記憶手段、として機能させるプログラ
ムであって、前記表示手段は、前記指定手段による前記
指定の際には、前記動画像の静止画像を表示し、前記符
号化手段は、前記表示手段により表示される動画像のう
ち、前記指定手段により指定されたオブジェクトを示す
画像が、他の部分の画像よりも高画質で復号可能に前記
画像データを符号化し、前記復号化手段は、前記記憶手
段に記憶された前記符号化データのうち、少なくとも、
前記指定手段による前記オブジェクトの指定開始から指
定終了までの符号化データを復号化し、更に、前記符号
化手段は、前記復号化手段により復号化された画像デー
タに係る画像のうち、前記オブジェクトに対応する画像
が、他の部分の画像よりも高画質で復号可能に、前記復
号化された画像データを再符号化することを特徴とする
プログラムが提供される。

【００３９】

【発明の実施の形態】以下、本発明の好適な実施の形態
を添付図面を参照して説明する。

【００４０】＜第一の実施形態＞はじめに本発明におけ
る高能率符号化処理について説明する。

【００４１】図１は、本発明の一実施形態に係る画像処
理装置のブロック図であり、１は画像入力部、２は離散
ウェーブレット変換部、３は量子化部、４はエントロピ
符号化部、５は符号出力部、６は領域指定部である。

【００４２】まず、画像入力部１に対して符号化の対象
となる画像を構成する画素信号が、例えばラスタースキ
ャン順に入力され、その出力は離散ウェーブレット変換
部２に入力される。以降の説明では画像信号はモノクロ
の多値画像を想定している。

【００４３】離散ウェーブレット変換部２は、入力され
た画像信号に対して２次元の離散ウェーブレット変換処
理を行い、変換係数を計算して出力するものである。図
２は離散ウェーブレット変換部２の基本構成を表したブ
ロック図である。入力された画像信号Ｘは処理用バッフ
ァメモリ２ａに記憶され、処理部２ｂにより順次読み出
されて変換処理が行われ、再びメモリ２ａに書きこまれ
る。

【００４４】ここで、処理部２ｂにおける処理の構成に
ついて説明する。処理部２ｂ内のシーケンス制御回路の
読み込み指示があると、画像信号Ｘは処理部２ｂに読み
込まる。そして、遅延素子およびダウンサンプラの組み
合わせにより、偶数アドレスおよび奇数アドレスの信号
に分離され、２つのフィルタｐおよびｕによりフィルタ
処理が施される。同図ｓおよびｄは、各々１次元の画像
信号に対して１レベルの分解を行った際のローパス係数
およびハイパス係数を表している。ｘ(ｎ)は変換対象と
なる画像信号である。シーケンス制御回路によって書き
込みの指示を出すと１レベルの分解を行なったローパス
係数ｓとハイパス係数ｄは再びメモリ２ａに記憶され
る。

【００４５】以上の処理により、画像信号に対する１次
元の離散ウェーブレット変換処理が行われる。

【００４６】図３（ａ）は２次元の離散ウェーブレット
変換の構成を示した図である。図３（ａ）において、２
次元の離散ウェーブレット変換は、１次元の変換を画像
の水平・垂直方向に対して順次行うものである。入力さ
れた画像信号は水平方向にウェーブレット変換処理を施
し、ローパス係数、ハイパス係数に分解する。その後ダ
ウンサイジング（下向き矢印）によりデータを半分に間
引く。

【００４７】この出力されたデータに対して前記水平お
よび垂直にローパスフィルタを施した成分に対しては、
前記処理を繰り返すことにより、結果的に生成される係
数成分としては、水平および垂直方向の周波数分割を低
周波数領域にデータ量を低減させた係数データが蓄積さ
れていくことになる。

【００４８】そして、１回目の分割による水平方向高域
かつ垂直方向低域をＨＬ１、水平方向低域かつ垂直方向
高域をＬＨ１、水平方向高域かつ垂直方向高域をＨＨ１
としている。また水平方向低域かつ垂直方向低域に対し
て２回目も前述と同様に分割しＨＬ２、ＬＨ２、ＨＨ２
を得、水平方向低域かつ垂直方向低域がＬＬとしてい
る。そして画像信号は異なる周波数帯域の係数列ＨＨ
１、ＨＬ１、ＬＨ１、ＨＨ２、ＨＬ２、ＬＨ２、ＬＬに
分解される。

【００４９】なお、以降の説明ではこれらの係数列をサ
ブバンドと呼ぶ。各サブバンドは後続の量子化部３に出
力される。図３（ｂ）は、画像に対して２次元の離散ウ
ェーブレット変換を施した例（概念図）であり、左側が
原画像、右側が変換後の画像を示している。

【００５０】次に、図１に戻り、領域指定部６は、符号
化の対象となる画像内で、他の領域よりも高画質で復号
化されるべき領域（以下、指定領域若しくはＲＯＩ：re
gionof interestingという。）を指定し、処理の対象と
なる画像を離散ウェーブレット変換した際に、どの係数
が当該指定領域に属しているかを示すマスク情報を生成
する。

【００５１】図４（ａ）はマスク情報を生成する際の一
例を示したものである。同図左側に示す画像において、
黒塗りした星型の領域が指定された場合に、領域指定部
６は、この指定領域を含む画像を離散ウェーブレット変
換した際、該指定領域が各サブバンドに占める部分を計
算する。なお、マスク情報の示す領域は、指定領域境界
上の画像信号を復元する際に必要な、周囲の変換係数を
含む範囲となっている。このように計算されたマスク情
報の例を図４（ａ）の右側に示す。この例は、同図左側
の画像に対して、２レベルの離散ウェーブレット変換を
施した際のマスク情報を示している。図中、黒塗り下星
型の部分が指定領域であり、この領域内のマスク情報の
ビットは１、それ以外のマスク情報のビットは０となっ
ている。これらマスク情報全体は２次元離散ウェーブレ
ット変換による変換係数の構成と同じであるため、マス
ク情報内のビットを検査することで対応する位置の係数
が指定領域内に属しているかどうかを識別することがで
きる。このように生成されたマスク情報は量子化部３に
出力される。

【００５２】さらに、領域指定部６は、指定領域に対す
る画質を定めるパラメータを有する。パラメータは指定
領域に割り当てる圧縮率を表現する数値、あるいは画質
を表す数値でもよく、また、予め設定してもよいし、別
途の入力デバイスを設けて入力するようにしてもよい。
領域指定部６はこのパラメータから、指定領域における
係数に対するビットシフト量（以下、Ｂとする。）を計
算し、マスクと共に量子化部３に出力する。

【００５３】量子化部３は、入力した係数を所定の量子
化ステップにより量子化し、その量子化値に対するイン
デックスを出力する。量子化部３は、領域指定部６から
入力したマスクおよびシフト量Ｂに基づき、量子化イン
デックスを変更する。以上の処理により、領域指定部６
において指定された空間領域に属する量子化インデック
スのみがＢビット上方にシフトアップされる。

【００５４】図４（ｂ）および（ｃ）は、このシフトア
ップによる量子化インデックスの変化を示したものであ
る。図４（ｂ）は、あるサブバンドの量子化インデック
ス群であり、網掛けされた量子化インデックスにおける
マスクの値が１でシフトアップ数Ｂが２の場合、シフト
後の量子化インデックスは図４（ｃ）のようになる。な
お、このビットシフトにより生じる各空欄には図の様に
ビット０が補完される。

【００５５】このように変更された後の量子化インデッ
クス群は後続のエントロピ符号化部４に出力される。

【００５６】なお、本実施の形態におけるマスクは、上
記シフトアップ処理だけでなく、エントロピ符号化部４
での符号化後に得られたデータから原画像を正確に復元
する為に用いられべき役割を担うが、本発明はこれに限
らない。例えば、シフトアップの数Ｂをビットシフト処
理の対象となる各量子化インデックスのビット数と同数
（図４では４ビット）にすることを前提とすれば、マス
クの情報は復号化側に送出せずともＲＯＩとそれ以外を
復号化側は容易に判断でき、正確な原画像の復元は可能
である。

【００５７】エントロピ符号化部４は入力した量子化イ
ンデックスをビットプレーンに分解し、ビットプレーン
を単位に２値算術符号化等の算術符号化を行ってコード
ストリームを出力する。

【００５８】最初にエントロピ符号化部４は最上位ビッ
トプレーン（同図ＭＳＢで表す）の各ビットをエントロ
ピ符号化（本実施の形態では２値算術符号化）し、ビッ
トストリームとして出力する。次にビットプレーンを１
レベル下げ、以下同様に対象ビットプレーンが最下位ビ
ットプレーン（同図ＬＳＢで表す）に至るまで、ビット
プレーン内の各ビットを符号化し符号出力部５に出力す
る。なお上記エントロピ符号化における上位から下位へ
のビットプレーン走査において、各量子化インデックス
の符号の最初（最上位）に符号化されるべき非０ビット
が検出された時には、そのすぐ後に当該量子化インデッ
クスの正負符号を示す１ビットを続けて２値算術符号化
することとする。これにより、０以外の量子化インデッ
クスの正負符号は効率良く符号化される。

【００５９】（カラー処理の場合）上述においてはモノ
クロ画像について説明したが、Ｒ，Ｇ，Ｂのコンポーネ
ント信号を用いたカラー画像の場合は各信号を独立して
符号化すれば良い。図６（ａ）乃至（ｃ）はＲ，Ｇ，Ｂ
のコンポーネント信号を処理した際の各信号のサブバン
ド係数である。また、図７（ａ）乃至（ｃ）は輝度と２
つの色差信号のコンポーネント信号を処理した際の各信
号のサブバンド係数である。なお、人間の視覚特性が色
情報に比べ輝度が敏感なことを利用し輝度と各色差の情
報量を４：１：１の割合にしている。図８（ａ）乃至
（ｃ）は輝度と各色差４：１：１の信号を扱った際のサ
ブバンド係数である。

【００６０】（空間スケーラブル）図９（ａ）乃至
（ｅ）は、この様に符号化されたビットストリームを解
像度の小さいサブバンドから順次解像度が高くなる順番
に配置（空間スケーラブル）に階層的に分け出力される
符号列の構成を表した概略図である。

【００６１】図９（ａ）は符号列の全体の構成を示した
ものであり、ＭＨはメインヘッダ、ＴＨはタイルヘッ
ダ、ＢＳはビットストリームである。メインヘッダＭＨ
は図９（ｂ）に示すように、符号化対象となる画像のサ
イズ（水平および垂直方向の画素数）、画像を複数の矩
形領域であるタイルに分割した際のサイズ、各色成分数
を表すコンポーネント数、各成分の大きさ、ビット精度
を表すコンポーネント情報から構成されている。なお、
本実施の形態では画像はタイルに分割されていないの
で、タイルサイズと画像サイズは同じ値を取り、対象画
像がモノクロの多値画像の場合コンポーネント数は１で
Ｒ，Ｇ，Ｂや輝度と２つの色差信号からなるカラー多値
画像の場合は３である。

【００６２】図９（ｃ）は、タイルヘッダＴＨの構成を
示している。タイルヘッダＴＨには当該タイルのビット
ストリーム長とヘッダ長を含めたタイル長および当該タ
イルに対する符号化パラメータ、および指定領域を示す
マスクと当該領域に属する係数に対するビットシフト数
から構成される。符号化パラメータには離散ウェーブレ
ット変換のレベル、フィルタの種別等が含まれている。

【００６３】本実施の形態におけるビットストリームの
構成を図９（ｄ）に示す。同図において、ビットストリ
ームは各サブバンド毎にまとめられ、解像度の小さいサ
ブバンドを先頭として順次解像度が高くなる順番に配置
されている。さらに、各サブバンド内は上位ビットプレ
ーンから下位ビットプレーンに向かい、ビットプレーン
を単位として符号が配列されている。図９（ｅ）は輝度
とＢ−Ｙ，Ｒ−Ｙの色差信号からなるカラー画像の場合
のビットストリームの構成を示したものである。輝度の
解像度の小さいサブバンドを先頭として各成分毎に順次
解像度が高くなる順番に配置されている。

【００６４】（ＳＮＲスケーラブル）図１０は、上位ビ
ットプレーンから下位ビットプレーンに向かう形（ＳＮ
Ｒスケーラブル）で配置した符号列の構成を表した概略
図である。図１０（ａ）は符号列の全体の構成を示した
ものであり、ＭＨはメインヘッダ、ＴＨはタイルヘッ
ダ、ＢＳはビットストリームである。メインヘッダＭＨ
は図１０（ｂ）に示すように、符号化対象となる画像の
サイズ（水平および垂直方向の画素数）、画像を複数の
矩形領域であるタイルに分割した際のサイズ、各色成分
数を表すコンポーネント数、各成分の大きさ、ビット精
度を表すコンポーネント情報から構成されている。な
お、本実施の形態では画像はタイルに分割されていない
ので、タイルサイズと画像サイズは同じ値を取り、対象
画像がモノクロの多値画像の場合コンポーネント数は１
でＲ，Ｇ，Ｂや輝度と２つの色差信号からなるカラー多
値画像の場合は３である。

【００６５】図１０（ｃ）は、タイルヘッダＴＨの構成
を示している。タイルヘッダＴＨには当該タイルのビッ
トストリーム長とヘッダ長を含めたタイル長および当該
タイルに対する符号化パラメータ、および指定領域を示
すマスクと当該領域に属する係数に対するビットシフト
数から構成される。符号化パラメータには離散ウェーブ
レット変換のレベル、フィルタの種別等が含まれてい
る。本実施の形態におけるビットストリームの構成を図
１０（ｄ）に示す。同図において、ビットストリームは
ビットプレーンを単位としてまとめられ、上位ビットプ
レーンから下位ビットプレーンに向かう形で配置されて
いる。各ビットプレーンには、各サブバンドにおける量
子化インデックスの当該ビットプレーンを符号化した結
果が順次サブバンド単位で配置されている。同図におい
てＳは最大の量子化インデックスを表現するために必要
なビット数である。図１０（ｅ）はカラー画像のビット
ストリームの構成を示したものである。輝度の上位ビッ
トプレーンから下位ビットプレーンに向かう形で配置さ
れ、Ｒ−Ｙ、Ｂ−Ｙの色差信号も同様構成している。こ
のようにして生成された符号列は、符号出力部５に出力
される。

【００６６】上述した実施の形態において、符号化対象
となる画像全体の圧縮率は量子化ステップΔを変更する
ことにより制御することが可能である。

【００６７】そして本実施の形態では、エントロピ符号
化部４において符号化するビットプレーンの下位ビット
を必要な圧縮率に応じて制限（廃棄）することにより、
全てのビットプレーンは符号化されず上位ビットプレー
ンから所望の圧縮率に応じた数のビットプレーンまでが
符号化される。

【００６８】上記下位ビットプレーンを制限する機能を
利用すると、図４に示した指定領域に相当するビットの
みが多く符号列に含まれることになる、即ち、上記指定
領域のみ低圧縮率で符号化され高画質な画像として圧縮
することが可能となる。

【００６９】（復号化処理）次に、上述した画像処理装
置により生成されたビットストリームを復号化する方法
について説明する。図１１は、該ビットストリームを復
号化するための画像復号化装置の構成を表すブロック図
であり、７が符号入力部、８はエントロピ復号化部、９
は逆量子化部、１０は逆離散ウェーブレット変換部、１
１は画像出力部である。

【００７０】符号入力部７は、符号列が入力され、その
符号列に含まれるヘッダを解析して後続の処理に必要な
パラメータを抽出し必要な場合は処理の流れを制御し、
あるいは後続の処理ユニットに対して該当するパラメー
タを送出するものである。また、符号列に含まれるビッ
トストリームはエントロピ復号化部８に出力される。

【００７１】エントロピ復号化部８はビットストリーム
をビットプレーン単位で復号化し、出力する。この時の
復号化手順を図１２（ａ）及び（ｂ）に示す。図１２
（ａ）は復号対象となるサブバンドの一領域をビットプ
レーン単位で順次復号化する態様を示し、同図の矢印の
順にビットプレーンが復号化され、図１２（ｂ）に示す
ように最終的に量子化インデックスが復元される。復元
された量子化インデックスは逆量子化器９に出力され
る。

【００７２】図１３は逆離散ウェーブレット変換部１０
の構成および処理のブロック図を示したものである。

【００７３】同図において、入力された変換係数は処理
用バッファメモリ１０ａに記憶される。処理部１０ｂは
１次元の逆離散ウェーブレット変換を行い、メモリ１０
ａから順次変換係数を読み出して処理を行うことで、２
次元の逆離散ウェーブレット変換を実行する。２次元の
逆離散ウェーブレット変換は、順変換と逆の手順により
実行されるが、詳細は公知であるので説明を省略する。
また同図の点線部内は処理部１０ｂの処理ブロックを示
したものであり、入力された変換係数はｕおよびｐの２
つのフィルタ処理を施され、アップサンプリングされた
後に重ね合わされて画像信号ｘ*が出力される。ここで
ビットプレーン復号化において全てのビットプレーンが
復号されていれば、復元された画像信号ｘ*は原画像の
信号ｘと略一致する。

【００７４】（空間スケーラブル）以上述べた手順によ
り、ビットストリームを解像度の小さいサブバンドから
順次解像度が高くなる順番に配置され（空間スケーラブ
ル）、階層的に分けて出力される符号列について、画像
を復元表示した際の画像の表示形態について図１４を用
いて説明する。図１４（ａ）は符号列の例を示したもの
であり、基本的な構成は図９に基づいているが、画像全
体がタイルとして設定されている。従って、符号列中に
は唯１つのタイルヘッダＴＨ０およびビットストリーム
ＢＳ０が含まれている。

【００７５】ビットストリームＢＳ０には図に示すよう
に、最も低い解像度に対応するサブバンドであるＬＬか
ら順次解像度が高くなる順に符号が配置されており、さ
らに各サブバンド内は上位ビットプレーンから下位ビッ
トプレーンに向かって、符号が配置されている。

【００７６】図１１の画像復号化装置はこのビットスト
リームを順次読みこみ、各ビットプレーンに対応する符
号を復号した時点で画像を表示する。図１４（ｂ）は各
サブバンドと表示される画像の大きさの対応と、サブバ
ンド内の符号列を復号するのに伴う画像の変化とを示し
たものである。同図において、ＬＬに相当する符号列が
順次読み出され、各ビットプレーンの復号処理が進むに
従って画質が徐々に改善されている。この時、符号化時
に指定領域となった星型の部分はその他の部分よりもよ
り高画質に復元される。

【００７７】これは、符号化時に量子化部３において、
指定領域に属する量子化インデックスをシフトアップし
ており、そのためビットプレーン復号化の際に当該量子
化インデックスがその他の部分に対し、より早い時点で
復号化されるためである。このように指定領域部分が高
画質に復号化されるのは、その他の解像度についても同
様である。

【００７８】なお、全てのビットプレーンを復号化した
時点では指定領域とその他の部分は画質的に同一である
が、途中段階で復号化を打ち切った場合や、下位のビッ
トプレーンのデータを破棄した場合に、指定領域部分が
その他の領域よりも高画質に復元された画像が得られる
ことはいうまでもない。

【００７９】（ＳＮＲスケーラブル）次に、上位ビット
プレーンから下位ビットプレーンに向かう形（ＳＮＲス
ケーラブル）で配置した符号列の構成の画像信号を復元
表示した際の画像の表示形態について図１５を用いて説
明する。図１５（ａ）は符号列の例を示したものであ
り、基本的な構成は図１０に基づいているが、画像全体
をタイルと設定されており、従って符号列中には唯１つ
のタイルヘッダＴＨ０およびビットストリームＢＳ０が
含まれている。ビットストリームＢＳ０には図に示すよ
うに、最も上位のビットプレーンから、下位のビットプ
レーンに向かって符号が配置されている。

【００８０】図１１に示した画像復号化装置はこのビッ
トストリームを順次読みこみ、各ビットプレーンの符号
を復号した時点で画像を表示する。図１５（ｂ）におい
て各ビットプレーンの復号処理が進むに従って画質が徐
々に改善されているが、符号化時に指定領域となった星
型の部分はその他の部分よりもより高画質に復元され
る。

【００８１】これは、符号化時に量子化部３において、
指定領域に属する量子化インデックスをシフトアップし
ており、そのためビットプレーン復号化の際に当該量子
化インデックスがその他の部分に対し、より早い時点で
復号化されるためである。

【００８２】さらに、全てのビットプレーンを復号化し
た時点では指定領域とその他の部分は画質的に同一であ
るが、途中段階で復号化を打ち切った場合や、下位のビ
ットプレーンのデータを破棄した場合に、指定領域部分
がその他の領域よりも高画質に復元された画像が得られ
ることはいうまでもない。

【００８３】上述した実施の形態において、エントロピ
復号化部８において復号する下位ビットプレーンを制限
（無視）することで受信或いは処理する符号化データ量
を減少させ、結果的に圧縮率を制御することが可能であ
る。この様にすることにより、必要なデータ量の符号化
データのみから所望の画質の復号画像を得ることが可能
である。また、符号化時の量子化ステップΔが１であ
り、復号時に全てのビットプレーンが復号された場合
は、復元された画像が原画像と一致する可逆符号化・復
号化を実現することもできる。

【００８４】以上の処理により画像が復元されて画像出
力部１１に出力される。画像出力部１１はモニタ等の画
像表示装置であってもよいし、あるいは磁気ディスク等
の記憶装置であってもよい。

【００８５】なお、上記実施形態では、画像の符号化に
離散ウェーブレット変換による手法を採用したが、他の
手法を採用できることはいうまでもない。

【００８６】＜ビデオカメラへの適用＞次に、上述した
画像処理装置を適用したビデオカメラについて説明す
る。

【００８７】図１６（ａ）は、本発明の一実施形態に係
るビデオカメラの外観図である。また、図１７（ａ）
は、第１の実施形態に係るビデオカメラのブロック図、
図１７（ｂ）はモニタ４０の表示の一例を表す図であ
る。なお、このビデオカメラは、動画像または／及び静
止画像を撮像できる電子カメラである。

【００８８】バッファメモリ１９は画像データを格納す
る。モード選択ダイヤル３４は動画（ＭＯＶＩＥ）／静
止画（ＳＴＩＬＬ）／再生（ＶＩＤＥＯ）／電源ＯＦＦ
（ＯＦＦ）の各動作モードを選択するためのダイヤルで
ある。トリガーボタン３５は撮影を開始・停止させるボ
タンである。領域指定レバー３６はモニタ４０の表示画
面中の一部の領域を指定するためのレバーであり、領域
指定レバー検出回路３７は領域指定レバー３６の押圧状
態を検出する。領域検出回路３２は領域指定レバー３６
により指定された領域を示す領域情報を生成する。バッ
ファメモリ１９には、領域情報も格納される。表示制御
回路３８は、領域情報に基づいて指定領域を示す画像を
生成し、これを撮像した画像と多重した表示用信号を生
成する。圧縮回路２１は領域情報に基づいて、画像デー
タを、指定領域と非指定領域とで区別して符号化する。
伸長回路４２は圧縮回路２１により符号化・圧縮された
画像データに対して復号化処理を施し、伸長する。

【００８９】被写体からの光は、ズームレンズ１２によ
り変倍され、変倍された光はフォーカスレンズ１３によ
り合焦され、合焦された光はアイリス１４によって光量
を調整して露出が補正され、ＣＣＤ１５によって光電変
換される。ＣＣＤ１５から出力される画像データはＣＤ
Ｓ／ＡＧＣ回路１６においてサンプリングされ、所定の
利得に調整され、Ａ／Ｄ変換回路１７でデジタル信号に
変換される。デジタル信号に変換された画像データはカ
メラ信号処理回路１８に送られ、カメラマイコン２４で
画質調整される。画質調整された画像データはバッファ
メモリ１９に記憶される。

【００９０】表示制御回路３８は、バッファメモリ１９
に記憶された画像データに基づいて、その表示用のデー
タを生成する。生成されたデータは、Ｄ／Ａ変換回路３
９によりアナログ信号に変換され、その画像がＬＣＤ等
のディスプレイからなるモニタ４０に表示される。

【００９１】一方、トリガーボタン３５が押されて、画
像データの記録指示があると、バッファメモリ１９に記
憶された画像データのＲ，Ｇ，Ｂの各色信号或いは輝度
信号、色差信号のデータについて、圧縮回路２１により
符号化処理が施される。圧縮された画像データは、磁気
記録媒体や半導体メモリ等を備える記録回路２２に記録
される。

【００９２】ここで、モニタ４０に表示された画像の一
部を高画質にしたい場合は、モニタ４０に表示された画
像上で、領域指定レバー３６により高画質にしたい領域
を指定する。指定された領域について、領域検出回路３
２が領域情報を生成し、生成された領域情報は、バッフ
ァメモリ１９に記憶される。バッファメモリ１９に記憶
された画像データと領域情報とは表示制御回路３８に送
られ、指定領域を示す枠が撮像画像に多重された表示用
データが生成される。表示用データはＤ／Ａ変換回路３
９においてアナログ信号に変換され、その画像がモニタ
４０に表示される。

【００９３】図１７（ｂ）はモニタ４０の表示態様の一
例を示している。図１７（ｂ）の例は、領域指定レバー
３６により高画質領域を指定した後の表示画像の一例で
あり、指定領域（中央の矩形領域）と非指定領域とが区
別出来るように表示されている。

【００９４】一方、トリガーボタン３５が押され、画像
データの記録の指示がされると、バッファメモリ１９に
記憶された画像データと領域情報とは圧縮回路２１に送
られる。そして、画像データは、領域情報に基づいて高
画質に圧縮する部分と通常に圧縮する部分と分けて符号
化処理が施されて圧縮される。圧縮された画像データ
は、記録回路２２に記録される。なお、圧縮回路２１で
圧縮されたデータを伸長回路４２により復号化処理を施
して伸長し、表示切換回路４３で表示信号を切換えるこ
とにより、圧縮後の画像をモニタ４０で表示することも
できる。

【００９５】次に、圧縮回路２１の具体的な動作につい
て図１９を用いて説明する。

【００９６】ウェーブレット変換回路５１は、入力され
た画像データをサブバンドに分解する。占有率算出回路
５２は、分解された各サブバンドのどの係数が指定領域
に属しているかを示すマスク情報を生成し更にマスク情
報の占める割合を算出する。ビットシフト量計算回路５
３はマスク情報内の画像信号のビットシフト量を計算す
る。量子化処理回路５４は量子化を行ない、係数設定回
路５９は圧縮のパラメータや量子化の係数を設定する。
インデックス変更回路５５はビットシフト量に応じて量
子化インデックスを変更する。ビットプレーン分解回路
５６はインデックスをビットプレーンに分解する。符号
化制限回路５７は符号化するビットプレーンを制限する
ための回路であり、２値算術符号化回路５８は算術符号
化処理を行う。

【００９７】バッファメモリ１９に格納されたＲ，Ｇ，
Ｂの各色信号或いは輝度、色差からなる信号の画像デー
タはウェーブレット変換回路５１によって各成分がサブ
バンドに分割される。分割されたサブバンドデータは占
有率算出回路５２において処理され、マスク情報が生成
され、各サブバンドにおけるマスク情報の占有率が計算
される。

【００９８】ビットシフト量計算回路５３は指定領域に
対する画質を指定するパラメータを係数設定回路５９か
ら取得する。パラメータは指定領域に割り当てる圧縮率
を表現する数値、あるいは画質を表す数値でもよい。こ
のパラメータから、指定領域における係数に対するビッ
トシフト量を計算し、マスク情報と共に量子化処理回路
５４に出力する。

【００９９】量子化処理回路５４は、係数設定画路５９
よりから生成した適当な数値により除算して量子化し、
その量子化値に対するインデックスを出力する。

【０１００】インデックス変更回路５５において、指定
された空間領域に属する量子化インデックスのみ上方に
シフトアップされる。このように変更された量子化イン
デックスは後続のビットプレーン分解回路５６に出力さ
れる。ビットプレーン分解回路５６は、入力した量子化
インデックスをビットプレーンに分解する。符号化制御
回路５７は、圧縮後のフレーム全体のデータサイズを決
定するためのビットプレーンを計算し、符号化するビッ
トプレーンを制限する。２値算出符号化回路５８は、最
上位ビットプレーンから順に２値算術符号化し、ビット
ストリームとして出力する。そして、制限されたビット
プレーンまで出力する。

【０１０１】次に高画質にする領域を指定する手順につ
いて図１６（ｂ）、図１６（ｃ）、図２０を用いて説明
する。図１６（ｂ）は領域指定レバー３６の詳細図、図
１６（ｃ）は領域指定レバー検出回路３７の詳細図、図
２０はモニタ４０の表示画像の一例である。

【０１０２】図１６（ｂ）において、領域指定レバー３
６は、カーソルを上方向に移動させる指示を与える上方
指定レバー３６ａ、カーソルを右方向に移動させる指示
を与える右方指定レバー３６ｂ、カーソルを下方向に移
動させる指示を与える下方指定レバー３６ｃ、カーソル
を左方向に移動させる指示を与える左方指定レバー３６
ｄ、カーソル位置を確定させる指示を出す選択ボタン３
６ｅを備える。

【０１０３】図１６（ｃ）において、上方検出スイッチ
Ｙ＋は上方指定レバー３６ａの指示を受けシステムコン
トローラ３３に上方向にカーソル移動の指示を送り、同
様に右方検出スイッチＸ＋は右方指示レバー３６ｂの指
示を受けシステムコントローラ３３に右方向にカーソル
移動の指示を送る。下方検出スイッチＹ−は下方指示レ
バー３６ｃの指示を受けシステムコントローラ３３に下
方向にカーソル移動の指示を送り、左方検出スイッチＸ
−は左方指定レバー３６ｄの指示を受けシステムコント
ローラ３３に左方向にカーソル移動の指示を送る。選択
スイッチＣは選択ボタン３６ｅの指示を受けシステムコ
ントローラ３３にカーソル確定の指示を送る。領域指定
レバー３６の各レバー（３６ａ、３６ｂ、３６ｃ、３６
ｄ）と選択ボタン３６ｅとを操作することにより領域を
指定することが出来る。

【０１０４】次に、領域指定レバー３６を用いて、動画
撮影を行いながら高画質にする領域を指定する方法につ
いて説明する。まず動画撮影時はモード選択ダイヤル３
４を動画モードにすると、画像データの記録待機状態に
なり、トリガー３５を押すと動画の記録が始まる。ここ
でモニタ４０には、記録待機又は記録中のどちらの状態
でも、撮影された動画が表示される。これはシステムコ
ントローラ３３がバッファメモリの内容を例えば１／３
０秒ずつ更新し、その出力を切換回路４３で切替えて、
表示制御回路３８に送ることにより行える。

【０１０５】次に、撮影した画像の、ある領域を高画質
に指定する場合について図１８のフローチャートを用い
て説明する。モニタ４０を見ながら領域指定を行いたい
場面で、領域指定レバー３６の選択ボタン３６ｅを押
す。するとシステムコントローラ３３がこれを検知し
（ステップＳ１０１）、記録待機状態にする（ステップ
Ｓ１０２）と共にバッファメモリ１９の更新を停止する
（ステップＳ１０３）。

【０１０６】この時、モニタ４０には選択ボタン３５ｅ
を押した瞬間の静止画像が表示され、領域を指定するカ
ーソルＰ０がモニタ４０の中心に多重される（図２０
（ａ））。静止画像とすることにより、指定領域を設定
し易くなるという利点がある。

【０１０７】ステップＳ１０４では、指定領域の設定モ
ードで、モニタ４０に表示されたカーソルＰ０を見なが
ら、カーソルＰ０を移動させたい方向に領域指定レバー
３６を操作する。システムコントローラ３３は領域指定
レバー３６の押圧状態が検出し、検出結果に基づいてカ
ーソルの移動量を算出し、算出された位置にカーソルＰ
０を移動させる。

【０１０８】ここで、領域指定レバー３６の選択ボタン
３６ｅが押されると高画質領域を形成する枠のポイント
が確定される。同様に次のポイントを決めるため、領域
指定レバーを操作しカーソルを移動させ、この作業を繰
り返すことによって４点選択する（図２０（ｂ））。

【０１０９】そして、再度選択ボタン３６ｅを押すと選
択されたポイントＰ１，Ｐ２，Ｐ３，Ｐ４によって結ば
れた領域が高画質の領域として指定され（図２０
（ｃ））、同時にステップ１０５で指定領域の設定モー
ドを抜け、ステップ１０６でバッファメモリ１９の更新
を再開し再びモニタ４０には動画が表示される。

【０１１０】ここで、トリガーボタン３５を押せば高画
質の領域を指定したまま動画記録が始まり、以後の撮影
においては、指定領域に含まれる画像は上述した手順に
より高画質で復号可能に符号化されることとなる。な
お、モード選択ダイヤル３４を静止画モードに切り換え
てからトリガーボタン３５を押せば、静止画として記録
することも出来る。

【０１１１】また、指定された領域の色や輝度を変更す
ることにより他の領域との差が一目で確認できるように
してもよい。また、上記実施形態では、高画質領域を４
点のポイントを選択することによって指定したが、この
他にも丸や多角形など任意の形状でも良い。

【０１１２】ここで、上記実施形態では、表示画面中の
一部を指定領域に設定したが、該指定領域は、表示画面
上の固定領域であるので、指定領域に含まれる対象物
は、撮影範囲が変化すれば（例えば、カメラの向きを変
えれば）、当然に異なるものとなる。しかしながら、表
示画面中の特定のオブジェクト、例えば、人物、物等が
撮影範囲の変化に関わらず常に高画質に記録される方が
望ましい場合もある。

【０１１３】そこで、公知の画像処理、特に画像認識処
理により、例えば、エッジ成分や色成分を用いて特定の
物や人を指定し、これを上述した指定領域とすることも
可能である。図２１（ａ）はモニタの表示状態の状態を
示す。例えば図２１（ａ）中の車の部分を高画質にした
い場合、領域指定レバー３６を操作してカーソルを車に
合わせ、選択スイッチ３６ｅを押すと、領域検出回路３
２において公知の画像認識技術により、例えば、色成分
と輪郭成分を用いてオブジェクト画像を抽出することが
できる。図２１（ｂ）は抽出したオブジェクト画像を示
す。この場合、当該オブジェクト画像が上述した指定領
域として認識されることとなる。なお、この他にも動き
情報を用いて指定することも可能である。また、より詳
細に高画質にしたい領域を指定する方法としては、領域
指定レバー３６に代えて若しくは併用してモニタ４０に
タッチパネルを用いてもよい。

【０１１４】また本実施形態では、モード選択ダイヤル
３４が動画モードの場合を説明したが、静止画モードの
場合も図１８のステップ１０２で記録を停止する必要が
無いだけで、その他は全く同様である。

【０１１５】＜第二の実施形態＞上記第一の実施形態に
係るビデオカメラでは、動画記録中に領域指定を行う時
は一旦記録を止めていたが、第二の実施形態では、記録
を止めること無く領域指定を可能としたものである。図
１７（ａ）のブロック図と異なる点についてのみ図２２
を用いてこれを説明する。

【０１１６】図中のメモリ２０は、バッファメモリから
送られた１フレーム分記憶可能なメモリである。このメ
モリ２０を用いた動作を図２３のフローチャートを用い
て説明する。

【０１１７】まずモニタ４０を見ながら領域指定を行い
たい場面で、領域指定レバー３６の選択ボタン３６ｅを
押す。するとシステムコントローラ３３がこれを検知し
（ステップＳ２０１）、バッファメモリ１９の画像をメ
モリ２０に取り込み（ステップＳ２０２）、表示切換回
路４３を制御してモニタ４０にメモリ２０の画像を送る
（ステップＳ２０３）。この後ステップＳ２０４で、上
記第一の実施形態と同様に指定領域の設定を行うが、領
域検出回路３２はメモリ２０の画像で領域検出を行う。
ステップ２０５で設定モードを抜けると、ステップ２０
６で表示切換回路４３を制御し再びバッファメモリ１９
の画像をモニタ４０に送るようにする。

【０１１８】この領域設定中は、バッファメモリ１９か
らの出力は常に圧縮回路２１に送られ続けるので、画像
データの記録が中断されることが無い。

【０１１９】＜第三の実施形態＞上記第一の実施形態に
係るビデオカメラでは、撮影時に得た画像ついて説明し
たが、過去にビデオテープ等の記録媒体に記録した画像
データを再生して得た画像についても、同様に高画質と
したい領域の指定をして再記録することが可能である。
図１７（ａ）のブロック図と異なる点についてのみ図２
４、図２５でこれを説明する。

【０１２０】図２４において、再生部５０は不図示の記
録媒体からの画像データを読取り再生するものである。
モード選択ダイヤル３４で再生モード（ＶＩＤＥＯ）を
選択すると、バッファメモリ１９にはカメラ信号処理回
路１８からは何も送られず、再生部５０からの再生信号
が送られる。

【０１２１】次に、本実施形態の処理について、図２５
のフローチャートを用いて説明する。モニタ４０を見な
がら領域指定を行いたい場面で、領域指定レバー３６の
選択ボタン３６ｅを押す。するとシステムコントローラ
３３がこれを検知し（ステップＳ３０１）、再生一時停
止状態にする（ステップＳ３０２）と共にバッファメモ
リ１９の更新を停止する（ステップＳ３０３）。この
時、モニタ４０には選択ボタン３５ｅを押した瞬間の静
止画像が表示され、領域を指定するカーソルＰ０がモニ
タ４０の中心に多重される（図２０（ａ））。ステップ
Ｓ３０４では、指定領域の設定モードで、モニタ４０に
表示されたカーソルＰ０を見ながら、カーソルＰ０を移
動させたい方向に領域指定レバー３６を操作する。シス
テムコントローラ３３は領域指定レバー３６の押圧状態
が検出し、検出結果に基づいてカーソルの移動量を算出
し、算出された位置にカーソルＰ０を移動させる。ここ
で領域指定レバー３６の選択ボタン３６ｅが押されると
高画質領域を形成する枠のポイントが確定される。同様
に次のポイントを決めるため、領域指定レバーを操作し
カーソルを移動させ、この作業を繰り返すことによって
４点選択する（図２０（ｂ））。

【０１２２】そして再度選択スイッチを押すと選択され
たポイントＰ１，Ｐ２，Ｐ３，Ｐ４によって結ばれた領
域が高画質領域として指定され（図２０（ｃ））、同時
にステップ３０５で指定領域の設定モードを抜け、ステ
ップ３０６でバッファメモリ１９の更新を再開し再びモ
ニタ４０には再生画が表示される。ここで、トリガーボ
タン３５を押せば高画質領域を指定したまま再生画の画
像データを記録回路２２に記録することができる。

【０１２３】＜第四の実施形態＞上記第一の実施形態に
係るビデオカメラでは、領域指定中はモニタには静止画
が表示されるので、実際に記録される映像をモニタでは
見ることが出来なかった。本実施形態では静止画で領域
指定中でも記録中の動画をモニタで見ることが出来るよ
うにしたものである。図２６は構成を示すブロック図、
図２７はモニタの映像の例である。図１７（ａ）のブロ
ック図と異なる点についてのみこれを説明する。

【０１２４】図２６において、バッファメモリ１９から
の画像データは間引き処理回路６０にも送られる。間引
き処理回路６０はシステムコントローラ３３から指示さ
れる間引き率に応じて、画像データに間引き処理を施
し、切換回路４３に該間引き処理を施した画像データを
出力する。

【０１２５】映像合成処理回路６１は、メモリ２０から
の画像データと間引き処理された画像データとを合成し
てアナログ映像信号に変換し、表示制御回路３８に出力
する。

【０１２６】上記の構成において、領域指定時はバッフ
ァメモリ１９の映像をメモリ２０に取り込む。一方シス
テムコントローラ３３は、間引き処理６０からの画像デ
ータが入力されるように切換回路４３を切り換え、映像
合成処理回路６１に間引き処理された動画を出力する。
映像合成処理回路６１においては、図２７のように、映
像１はメモリ２０からの静止画、映像２は切換回路４３
からの動画が映るように処理が行われ、表示制御回路３
８を通してモニタ４０に出力される。

【０１２７】なお、指定領域が映像２に重なった場合
は、映像２を別の場所に移動するように映像合成処理回
路６１を制御することも可能である。

【０１２８】＜第５の実施形態＞上述した第２実施形態
では、常時画像を記録すると共に、指定領域が設定され
れば、その指定領域内の画像を他の領域の画像よりも高
画質で復号可能に符号化することができた。しかし、指
定領域を瞬時に設定することは困難であり、指定開始
（領域指定レバー３６の操作開始）から指定終了（領域
指定レバー３６の操作終了）までに一定の時間を必要と
する。従って、大事なシーンを高画質で復号可能に符号
化できない場合が生じ得る。そこで、本実施形態では、
撮影して得た画像データを一旦記憶しておき、指定領域
の指定開始から指定終了までの画像データを後で再圧縮
（再符号化）することにより、この問題を解消する。

【０１２９】図３０は、本発明の第５実施形態における
ビデオカメラのブロック図である。図２２のブロック図
と異なる点についてのみ説明する。図３０において、再
生回路５０は、記録回路２２に記録された圧縮済みの画
像データを読み出して、復元等し、バッファメモリに格
納するものである。

【０１３０】次に、図３１のフローチャートを用いて本
実施形態における指定領域を設定する際の処理について
説明する。

【０１３１】動画記録を行っている状態で、領域指定を
行うために、モニタ４０を見ながら領域指定レバー３６
の選択ボタン３６ｅを押す。するとシステムコントロー
ラ３３がこれを検知し（ステップ４０１）、領域指定の
処理が開始される（ステップ４０２）。

【０１３２】同時に、システムコントローラ３３の指示
により、記録回路２２にＩＤデータが記録される（ステ
ップ４０３）。ＩＤデータは、システムコントローラ３
３が記録回路２２に直接書き込むようにしてもよい。こ
のＩＤデータは、記録回路２２に記録される画像データ
が領域指定開始から領域指定終了までの間に記録された
データであることを示すデータである。また、領域指定
開始から領域指定終了までの間、圧縮回路２１は、画像
データを圧縮せずに記録回路２２に記録するか、若しく
は、画像全体を高画質で復元可能に画像データを圧縮し
て記録回路２２に記録する。

【０１３３】指定領域の設定が終了（選択ボタン３６ｅ
の押圧）すると（ステップ４０４）、ＩＤデータの記録
を止める（ステップ４０５）。ステップ４０６では、指
定領域が設定された状態で、前述の圧縮方式で圧縮回路
２１を通して記録回路２２に画像データの記録が行われ
ることとなる。

【０１３４】ここで、第２実施形態の場合は、ステップ
４０１の選択ボタン３６ｅを押した瞬間からステップ４
０４が始まるまでの間は、指定領域が確定していないた
め、画像データは、通常の記録、例えば、指定領域以外
の領域用の圧縮のされた画像データとして記録される。

【０１３５】第５実施形態では、領域指定開始から領域
指定終了までの間、記録回路２２に記録される画像デー
タにＩＤデータを付しているので、後で（例えば、撮影
終了後に）記録回路２２に記録された画像データを再生
回路５０で読み出して、再圧縮して、再記録することが
できる。この処理を図３２のフローチャートを用いて説
明する。

【０１３６】撮影が終了し、画像データの記録が停止状
態で、選択ボタン３６ｅを所定時間以上押す（ステップ
Ｓ５０１）と、再生回路５０は、記録回路２２から先程
記録したＩＤデータを探索し、その開始点を探索する
（ステップＳ５０２）。これは周知のインデックスサー
チ等の技術で行える。次に、再生回路５０は、ＩＤデー
タが付された画像データを記録回路２２から読み出し、
読み出した画像データをバッファメモリ１９に送る（ス
テップＳ５０３）。この場合、読み出した画像データが
圧縮されていれば、これを伸長してからバッファメモリ
１９へ送ることとなる。

【０１３７】圧縮回路２１は、再生回路５０からバッフ
ァメモリ１９へ送られた画像データをバッファメモリ１
９から読み出して、再圧縮し記録回路２２に上書きする
ステップＳ５０４）。この場合、圧縮回路２１は、前回
設定された指定領域に対応する領域の画像については、
高画質で復元されるように再圧縮する。

【０１３８】次に、ステップ５０５で再生回路５０は、
再びＩＤデータを探索し、検出したらステップ５０３へ
戻る。

【０１３９】このようにして、ＩＤデータを検出しなく
なるまで上述した手順を繰り返す。なお、記録回路２２
が磁気ディスクや半導体メモリ等を利用したものであれ
ば、ランダムアクセスが可能なので、画像データの格納
順序を時系列順に並び替えることが出来る。従って、結
果として領域指定を開始した場面から、指定領域を高画
質で復元可能に記録されたことになる。また、再圧縮す
る際の指定領域がわかっていれば、その領域のみシフト
アップして符号化すればよく、再圧縮が容易に行なうこ
とができる。

【０１４０】なお、第５の実施形態では、再記録の際に
最初に記録した時と同じ領域を自動的に指定して上書き
したが、ステップ５０２で静止画像を表示し、改めて指
定領域を設定した後に、再圧縮及び再記録するようにし
てもよい。

【０１４１】以上、本発明の好適な実施の形態について
説明したが、本実施形態は、上述した処理をソフトウエ
アによりコンピュータ上で実現することも可能である。
すなわち、本発明の目的は、前述した実施形態の機能を
実現するソフトウェアのプログラムを、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ（またはCPUやMPU）がプログラムを読み出し実行す
ることによっても、達成されることは言うまでもない。

【０１４２】この場合、そのプログラム自体が前述した
実施形態の機能を実現することになり、そのプログラム
や、そのプログラムを記憶した記憶媒体或いはプログラ
ム製品は、本発明を構成することになる。また、コンピ
ュータが読み出したプログラムコードを実行することに
より、前述した実施形態の機能が実現されるだけでな
く、そのプログラムコードの指示に基づき、コンピュー
タ上で稼働しているオペレーティングシステム(OS)など
が実際の処理の一部または全部を行い、その処理によっ
て前述した実施形態の機能が実現される場合も含まれる
ことは言うまでもない。

【０１４３】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるCPUなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【０１４４】

【発明の効果】以上、説明したとおり、本発明によれ
ば、画像中の必要な範囲で画質を維持し、ひいて、全体
としてデータ量を低減することが可能となる。

【図面の簡単な説明】

【図１】本発明の一実施形態に係る画像処理装置のブロ
ック図である。

【図２】離散ウェーブレット変換部２のブロック図であ
る。

【図３】（ａ）は、２次元の離散ウェーブレット変換の
構成を示した図である。（ｂ）は、画像に対して２次元
の離散ウェーブレット変換を施した例（概念図）であ
る。

【図４】（ａ）は、マスク情報示す図である。（ｂ）及
び（ｃ）は、量子化インデックスの変化の様子を示した
図である。

【図５】エントロピ符号化部の動作を示す図である。

【図６】（ａ）乃至（ｃ）は、カラー画像における２次
元の離散ウェーブレットのサブバンドの構成図である。

【図７】（ａ）乃至（ｃ）は、カラー画像における２次
元の離散ウェーブレットのサブバンドの構成図である。

【図８】（ａ）乃至（ｃ）は、カラー画像における２次
元の離散ウェーブレットのサブバンドの構成図である。

【図９】（ａ）乃至（ｅ）は、符号列の構成を表す概略
図である。

【図１０】（ａ）乃至（ｅ）は、符号列の構成を表す概
略図である。

【図１１】画像復号化装置の構成を表すブロック図であ
る。

【図１２】エントロピ復号化部８の動作を示す図であ
る。

【図１３】逆離散ウェーブレット変換部１０のブロック
図である。

【図１４】（ａ）は、符号列の構成を表す概略図であ
る。（ｂ）は、符号列を復元した際の画像の形態を示す
図である。

【図１５】（ａ）は、符号列の構成を表す概略図であ
る。（ｂ）は、符号列を復元した際の画像の形態を示す
図である。

【図１６】（ａ）は、上記画像処理装置を適用したビデ
オカメラの外観図である。（ｂ）は、領域指定レバー３
６の拡大図である。（ｃ）は、領域指定レバーの検出回
路３７の構成を示す図である。

【図１７】（ａ）は、本発明の第１の実施形態に係るビ
デオカメラの構成を示すブロック図である。（ｂ）は、
モニタ４０の表示例を示す図である。

【図１８】図１７（ａ）のビデオカメラにおける処理の
フローチャートである。

【図１９】圧縮回路２１のブロック図である。

【図２０】（ａ）乃至（ｃ）は、領域指定操作に伴うモ
ニタの表示変化の状態を示す図である。

【図２１】（ａ）は、モニタの状態図である。（ｂ）
は、検出されたオブジェクト画像を示す図である。

【図２２】本発明の第２の実施形態に係るビデオカメラ
の構成を示すブロック図である。

【図２３】図２２のビデオカメラにおける処理のフロー
チャートである。

【図２４】本発明の第３の実施形態に係るビデオカメラ
の構成を示すブロック図である。

【図２５】図２４のビデオカメラにおける処理のフロー
チャートである。

【図２６】本発明の第４の実施形態に係るビデオカメラ
の構成を示すブロック図である。

【図２７】図２６のビデオカメラのモニタ４０の表示例
を示す図である。

【図２８】従来のビデオカメラの構成を示すブロック図
である。

【図２９】従来のビデオカメラにおける圧縮処理装置の
構成を示すブロック図である。

【図３０】本発明の第５の実施形態に係るビデオカメラ
の構成を示すブロック図である。

【図３１】図３０のビデオカメラにおける処理のフロー
チャートである。

【図３２】図３０のビデオカメラにおける処理のフロー
チャートである。

─────────────────────────────────────────────────────

【手続補正書】

【提出日】平成１３年７月２日（２００１．７．２）

【手続補正１】

【補正対象書類名】明細書

【補正対象項目名】特許請求の範囲

【補正方法】変更

【補正内容】

【特許請求の範囲】

【手続補正２】

【補正対象書類名】明細書

【補正対象項目名】００３４

【補正方法】変更

【補正内容】

【００３４】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示手段と、前記表示手
段により表示された動画像に含まれるオブジェクトを指
定する指定手段と、前記画像データを符号化して符号化
データを生成する符号化手段と、前記符号化データを記
憶する記憶手段と、前記記憶手段に記憶された前記符号
化データを復号化する復号化手段と、を備え、前記表示
手段は、前記指定手段による前記指定の際には、前記動
画像の静止画像を表示し、前記符号化手段は、前記表示
手段により表示される動画像のうち、前記指定手段によ
り指定されたオブジェクトを示す画像が、他の部分の画
像よりも高画質で復号可能に前記画像データを符号化
し、前記復号化手段は、前記記憶手段に記憶された前記
符号化データのうち、少なくとも、前記指定手段による
前記オブジェクトの指定開始から指定終了までの符号化
データを復号化し、更に、前記符号化手段は、前記復号
化手段により復号化された画像データに係る画像のう
ち、前記オブジェクトに対応する画像が、他の部分の画
像よりも高画質で復号可能に、前記復号化された画像デ
ータを再符号化することを特徴とする画像処理装置が提
供される。

【手続補正３】

【補正対象書類名】明細書

【補正対象項目名】００３６

【補正方法】変更

【補正内容】

【００３６】また、本発明によれば、入力される画像デ
ータに基づく動画像を表示する表示工程と、前記表示工
程において表示された動画像に含まれるオブジェクトを
指定する指定工程と、前記画像データを符号化して符号
化データを生成する符号化工程と、前記符号化データを
記憶する記憶工程と、前記記憶工程において記憶した前
記符号化データを復号化する復号化工程と、を含み、前
記表示工程では、前記指定工程における前記指定の際に
は、前記動画像の静止画像を表示し、前記符号化工程で
は、前記表示工程において表示される動画像のうち、前
記指定工程において指定されたオブジェクトを示す画像
が、他の部分の画像よりも高画質で復号可能に前記画像
データを符号化し、前記復号化工程では、前記記憶工程
において記憶された前記符号化データのうち、少なくと
も、前記指定工程における前記オブジェクトの指定開始
から指定終了までの符号化データを復号化し、更に、前
記符号化工程では、前記復号化工程において復号化され
た画像データに係る画像のうち、前記オブジェクトに対
応する画像が、他の部分の画像よりも高画質で復号可能
に、前記復号化された画像データを再符号化することを
特徴とする画像処理方法が提供される。

【手続補正４】

【補正対象書類名】明細書

【補正対象項目名】００３８

【補正方法】変更

【補正内容】

【００３８】また、本発明によれば、コンピュータを、
入力される画像データに基づく動画像を表示する表示手
段、前記表示手段により表示された動画像に含まれるオ
ブジェクトを指定する指定手段、前記画像データを符号
化して符号化データを生成する符号化手段、前記符号化
データを記憶する記憶手段、前記記憶手段に記憶された
前記符号化データを復号化する復号化手段、として機能
させるプログラムであって、前記表示手段は、前記指定
手段による前記指定の際には、前記動画像の静止画像を
表示し、前記符号化手段は、前記表示手段により表示さ
れる動画像のうち、前記指定手段により指定されたオブ
ジェクトを示す画像が、他の部分の画像よりも高画質で
復号可能に前記画像データを符号化し、前記復号化手段
は、前記記憶手段に記憶された前記符号化データのう
ち、少なくとも、前記指定手段による前記オブジェクト
の指定開始から指定終了までの符号化データを復号化
し、更に、前記符号化手段は、前記復号化手段により復
号化された画像データに係る画像のうち、前記オブジェ
クトに対応する画像が、他の部分の画像よりも高画質で
復号可能に、前記復号化された画像データを再符号化す
ることを特徴とするプログラムが提供される。

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C022 AC03 AC69 AC79 5C053 FA22 FA27 GB23 GB26 GB28 GB32 JA21 KA03 KA24 KA25 LA01 5C059 KK00 MA24 MA32 MA35 MA37 MC11 MC38 ME11 PP01 PP04 PP14 RB01 RB17 RC12 RC28 SS14 TA45 TB02 TC47 UA02 UA05 UA32 UA39 5J064 AA01 AA02 BA09 BA16 BC01 BC11 BC16 BD03

Claims (26)

【特許請求の範囲】
1. 【請求項１】 入力される画像データに基づく動画像を
   表示する表示手段と、 前記表示手段の表示画面中の一部の領域を指定する指定
   手段と、 前記画像データを符号化する符号化手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
   は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
   像のうち、前記指定手段により指定された前記領域に含
   まれる画像が、他の領域の画像よりも高画質で復号可能
   に前記画像データを符号化することを特徴とする画像処
   理装置。
2. 【請求項２】 入力される画像データに基づく動画像を
   表示する表示手段と、 前記表示手段により表示された動画像に含まれるオブジ
   ェクトを指定する指定手段と、 前記画像データを符号化する符号化手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
   は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
   像のうち、前記指定手段により指定されたオブジェクト
   を示す画像が、他の部分の画像よりも高画質で復号可能
   に前記画像データを符号化することを特徴とする画像処
   理装置。
3. 【請求項３】 入力される画像データに基づく動画像を
   表示する表示手段と、 前記表示手段の表示画面中の一部の領域を指定する指定
   手段と、 前記画像データを符号化する符号化手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
   は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
   て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
   る手段と、 前記量子化インデックスをビットプレーンに分解し、各
   ビットプレーンに対して算術符号化を実行して符号化デ
   ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
   る動画像のうち、前記指定手段により指定された前記領
   域に含まれる画像に対応する前記量子化インデックス
   を、所定ビット数シフトアップすることを特徴とする画
   像処理装置。
4. 【請求項４】 入力される画像データに基づく動画像を
   表示する表示手段と、 前記表示手段により表示された動画像に含まれるオブジ
   ェクトを指定する指定手段と、 前記画像データを符号化する符号化手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
   は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
   て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
   る手段と、 前記量子化インデックスをビットプレーンに分解し、各
   ビットプレーンに対して算術符号化を実行して符号化デ
   ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
   る動画像のうち、前記指定手段により指定されたオブジ
   ェクトを示す画像に対応する前記量子化インデックス
   を、所定ビット数シフトアップすることを特徴とする画
   像処理装置。
5. 【請求項５】 前記表示手段は、前記指定手段による前
   記指定の際には、前記動画像と前記動画像の静止画像と
   をそれぞれ同時に表示することを特徴とする請求項１乃
   至４のいずれかに記載の画像処理装置。
6. 【請求項６】 前記符号化手段により生成された符号化
   データを保存する手段を備えたことを特徴とする請求項
   １乃至４のいずれかに記載の画像処理装置。
7. 【請求項７】 画像を撮像して前記画像データを生成す
   る撮像手段を備えたことを特徴とする請求項１乃至４の
   いずれかに記載の画像処理装置。
8. 【請求項８】 前記画像データが、記録媒体に記録され
   た画像データであることを特徴とする請求項１乃至４の
   いずれかに記載の画像処理装置。
9. 【請求項９】 画像を撮像して画像データを生成する撮
   像手段と、 前記画像データに基づく動画像を表示する表示手段と、 前記表示手段の表示画面中の一部の領域を指定する指定
   手段と、 前記画像データを符号化して符号化データを生成する符
   号化手段と、 前記符号化データを保存する手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
   は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
   像のうち、前記指定手段により指定された前記領域に含
   まれる画像が、他の領域の画像よりも高画質で復号可能
   に前記画像データを符号化することを特徴とする電子カ
   メラ。
10. 【請求項１０】 画像を撮像して画像データを生成する
    撮像手段と、 前記画像データに基づく動画像を表示する表示手段と、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段と、 前記画像データを符号化して符号化データを生成する符
    号化手段と、 前記符号化データを保存する手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
    像のうち、前記指定手段により指定されたオブジェクト
    を示す画像が、他の部分の画像よりも高画質で復号可能
    に前記画像データを符号化することを特徴とする電子カ
    メラ。
11. 【請求項１１】 画像を撮像して画像データを生成する
    撮像手段と、 前記画像データに基づく動画像を表示する表示手段と、 前記表示手段の表示画面中の一部の領域を指定する指定
    手段と、 前記画像データを符号化して符号化データを生成する符
    号化手段と、 前記符号化データを保存する手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
    る手段と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
    る動画像のうち、前記指定手段により指定された前記領
    域に含まれる画像に対応する前記量子化インデックス
    を、所定ビット数シフトアップすることを特徴とする電
    子カメラ。
12. 【請求項１２】 画像を撮像して画像データを生成する
    撮像手段と、 前記画像データに基づく動画像を表示する表示手段と、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段と、 前記画像データを符号化して符号化データを生成する符
    号化手段と、 前記符号化データを保存する手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
    る手段と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
    る動画像のうち、前記指定手段により指定されたオブジ
    ェクトを示す画像に対応する前記量子化インデックス
    を、所定ビット数シフトアップすることを特徴とする電
    子カメラ。
13. 【請求項１３】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示工程における表示画面中の一部の領域を指定す
    る指定工程と、 前記画像データを符号化する符号化工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程では、前記表示工程において表示される
    動画像のうち、前記指定工程において指定された前記領
    域に含まれる画像が、他の領域の画像よりも高画質で復
    号可能に前記画像データを符号化することを特徴とする
    画像処理方法。
14. 【請求項１４】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示工程において表示された動画像に含まれるオブ
    ジェクトを指定する指定工程と、 前記画像データを符号化する符号化工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程では、前記表示工程において表示される
    動画像のうち、前記指定工程において指定されたオブジ
    ェクトを示す画像が、他の部分の画像よりも高画質で復
    号可能に前記画像データを符号化することを特徴とする
    画像処理方法。
15. 【請求項１５】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示工程における表示画面中の一部の領域を指定す
    る指定工程と、 前記画像データを符号化する符号化工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する工程と、 前記変換係数を量子化して量子化インデックスを生成す
    る工程と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する工程と、を含み、 更に、前記符号化工程では、前記表示工程において表示
    される動画像のうち、前記指定工程において指定された
    前記領域に含まれる画像に対応する前記量子化インデッ
    クスを、所定ビット数シフトアップすることを特徴とす
    る画像処理方法。
16. 【請求項１６】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示工程において表示された動画像に含まれるオブ
    ジェクトを指定する指定工程と、 前記画像データを符号化する符号化工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する工程と、 前記変換係数を量子化して量子化インデックスを生成す
    る工程と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する工程と、を含み、 更に、前記符号化工程では、前記表示工程において表示
    される動画像のうち、前記指定工程において指定された
    オブジェクトを示す画像に対応する前記量子化インデッ
    クスを、所定ビット数シフトアップすることを特徴とす
    る画像処理方法。
17. 【請求項１７】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段の表示画面中の一部の領域を指定する指定
    手段、 前記画像データを符号化する符号化手段、として機能さ
    せるプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
    像のうち、前記指定手段により指定された前記領域に含
    まれる画像が、他の領域の画像よりも高画質で復号可能
    に前記画像データを符号化することを特徴とするプログ
    ラム。
18. 【請求項１８】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段、 前記画像データを符号化する符号化手段、として機能さ
    せるプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
    像のうち、前記指定手段により指定されたオブジェクト
    を示す画像が、他の部分の画像よりも高画質で復号可能
    に前記画像データを符号化することを特徴とするプログ
    ラム。
19. 【請求項１９】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段の表示画面中の一部の領域を指定する指定
    手段、 前記画像データを符号化する符号化手段、として記録さ
    せるプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
    る手段と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
    る動画像のうち、前記指定手段により指定された前記領
    域に含まれる画像に対応する前記量子化インデックス
    を、所定ビット数シフトアップすることを特徴とするプ
    ログラム。
20. 【請求項２０】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段、 前記画像データを符号化する符号化手段、として機能さ
    せるプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段が、 前記画像データに対して離散ウェーブレット変換を行っ
    て変換係数を生成する手段と、 前記変換係数を量子化して量子化インデックスを生成す
    る手段と、 前記量子化インデックスをビットプレーンに分解し、各
    ビットプレーンに対して算術符号化を実行して符号化デ
    ータを生成する手段と、を備え、 更に、前記符号化手段は、前記表示手段により表示され
    る動画像のうち、前記指定手段により指定されたオブジ
    ェクトを示す画像に対応する前記量子化インデックス
    を、所定ビット数シフトアップすることを特徴とするプ
    ログラム。
21. 【請求項２１】 入力される画像データに基づく動画像
    を表示する表示手段と、 前記表示手段の表示画面中の一部の領域を指定する指定
    手段と、 前記画像データを符号化して符号化データを生成する符
    号化手段と、 前記符号化データを記憶する記憶手段と、 前記記憶手段に記憶された前記符号化データを復号化す
    る復号化手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、 前記表示手段により表示される動画像のうち、前記指定
    手段により指定された前記領域に含まれる画像が、他の
    領域の画像よりも高画質で復号可能に前記画像データを
    符号化し、 前記復号化手段は、前記記憶手段に記憶された前記符号
    化データのうち、少なくとも、前記指定手段による前記
    領域の指定開始から指定終了までの符号化データを復号
    化し、更に、 前記符号化手段は、前記復号化手段により復号化された
    画像データに係る画像のうち、前記領域に対応する画像
    が、他の領域の画像よりも高画質で復号可能に、前記復
    号化された画像データを再符号化することを特徴とする
    画像処理装置。
22. 【請求項２２】 入力される画像データに基づく動画像
    を表示する表示手段と、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段と、 前記画像データを符号化して符号化データを生成する符
    号化手段と、 前記符号化データを記憶する記憶手段と、を備え、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
    像のうち、前記指定手段により指定されたオブジェクト
    を示す画像が、他の部分の画像よりも高画質で復号可能
    に前記画像データを符号化し、 前記復号化手段は、前記記憶手段に記憶された前記符号
    化データのうち、少なくとも、前記指定手段による前記
    オブジェクトの指定開始から指定終了までの符号化デー
    タを復号化し、更に、 前記符号化手段は、前記復号化手段により復号化された
    画像データに係る画像のうち、前記オブジェクトに対応
    する画像が、他の部分の画像よりも高画質で復号可能
    に、前記復号化された画像データを再符号化することを
    特徴とする画像処理装置。
23. 【請求項２３】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示手段の表示画面中の一部の領域を指定する指定
    工程と、 前記画像データを符号化して符号化データを生成する符
    号化工程と、 前記符号化データを記憶する記憶工程と、 前記記憶工程において記憶した前記符号化データを復号
    化する復号化工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程では、 前記表示工程において表示される動画像のうち、前記指
    定工程において指定された前記領域に含まれる画像が、
    他の領域の画像よりも高画質で復号可能に前記画像デー
    タを符号化し、 前記復号化工程では、 前記記憶工程において記憶された前記符号化データのう
    ち、少なくとも、前記指定工程における前記領域の指定
    開始から指定終了までの符号化データを復号化し、更
    に、 前記符号化工程では、前記復号化工程において復号化さ
    れた画像データに係る画像のうち、前記領域に対応する
    画像が、他の領域の画像よりも高画質で復号可能に、前
    記復号化された画像データを再符号化することを特徴と
    する画像処理方法。
24. 【請求項２４】 入力される画像データに基づく動画像
    を表示する表示工程と、 前記表示工程において表示された動画像に含まれるオブ
    ジェクトを指定する指定工程と、 前記画像データを符号化して符号化データを生成する符
    号化工程と、 前記符号化データを記憶する記憶工程と、を含み、 前記表示工程では、前記指定工程における前記指定の際
    には、前記動画像の静止画像を表示し、 前記符号化工程では、前記表示工程において表示される
    動画像のうち、前記指定工程において指定されたオブジ
    ェクトを示す画像が、他の部分の画像よりも高画質で復
    号可能に前記画像データを符号化し、 前記復号化工程では、前記記憶工程において記憶された
    前記符号化データのうち、少なくとも、前記指定工程に
    おける前記オブジェクトの指定開始から指定終了までの
    符号化データを復号化し、更に、 前記符号化工程では、前記復号化工程において復号化さ
    れた画像データに係る画像のうち、前記オブジェクトに
    対応する画像が、他の部分の画像よりも高画質で復号可
    能に、前記復号化された画像データを再符号化すること
    を特徴とする画像処理方法。
25. 【請求項２５】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段の表示画面中の一部の領域を指定する指定
    手段、 前記画像データを符号化して符号化データを生成する符
    号化手段、 前記符号化データを記憶する記憶手段、 前記記憶手段に記憶された前記符号化データを復号化す
    る復号化手段、として機能させるプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、 前記表示手段により表示される動画像のうち、前記指定
    手段により指定された前記領域に含まれる画像が、他の
    領域の画像よりも高画質で復号可能に前記画像データを
    符号化し、 前記復号化手段は、前記記憶手段に記憶された前記符号
    化データのうち、少なくとも、前記指定手段による前記
    領域の指定開始から指定終了までの符号化データを復号
    化し、更に、 前記符号化手段は、前記復号化手段により復号化された
    画像データに係る画像のうち、前記領域に対応する画像
    が、他の領域の画像よりも高画質で復号可能に、前記復
    号化された画像データを再符号化することを特徴とする
    プログラム。
26. 【請求項２６】 コンピュータを、 入力される画像データに基づく動画像を表示する表示手
    段、 前記表示手段により表示された動画像に含まれるオブジ
    ェクトを指定する指定手段、 前記画像データを符号化して符号化データを生成する符
    号化手段、 前記符号化データを記憶する記憶手段、として機能させ
    るプログラムであって、 前記表示手段は、前記指定手段による前記指定の際に
    は、前記動画像の静止画像を表示し、 前記符号化手段は、前記表示手段により表示される動画
    像のうち、前記指定手段により指定されたオブジェクト
    を示す画像が、他の部分の画像よりも高画質で復号可能
    に前記画像データを符号化し、 前記復号化手段は、前記記憶手段に記憶された前記符号
    化データのうち、少なくとも、前記指定手段による前記
    オブジェクトの指定開始から指定終了までの符号化デー
    タを復号化し、更に、 前記符号化手段は、前記復号化手段により復号化された
    画像データに係る画像のうち、前記オブジェクトに対応
    する画像が、他の部分の画像よりも高画質で復号可能
    に、前記復号化された画像データを再符号化することを
    特徴とするプログラム。