JP2004328796A

JP2004328796A - ディジタル画像情報処理装置及びディジタル画像情報処理方法

Info

Publication number: JP2004328796A
Application number: JP2004210192A
Authority: JP
Inventors: Kenji Kawai; 賢治川合; Koji Takahashi; 宏爾高橋
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2004-07-16
Filing date: 2004-07-16
Publication date: 2004-11-18

Abstract

【課題】圧縮処理された入力画像情報に対してさらに独自の圧縮処理を行っても画質劣化が少なくすることのできるディジタル画像情報処理装置及びディジタル画像情報処理方法を得ることを課題とする。
【解決手段】第１の圧縮方式で圧縮された画像情報を入力する入力手段と、入力手段により入力された画像情報を第１の圧縮方式と共通の画像処理パラメータを用いて第２の圧縮方式で圧縮する再圧縮手段（５３）と、再圧縮手段で圧縮した方式を識別する情報を発生する識別情報発生手段（６０）と、第２の圧縮方式で圧縮した画像情報と識別情報とを記録媒体に記録する記録手段（５４）とを備えたディジタル画像情報処理装置が提供される。
【選択図】図３

Description

本発明は、多段に圧縮処理を行うようにしたディジタル画像情報処理装置及びディジタル画像情報処理方法に関する。

近年、画像のディジタル処理が検討されている。特に、画像データを圧縮するための高能率符号化については、標準化に向けて各種方式が提案されている。高能率符号化技術は、ディジタル伝送及び記録等の効率を向上させるために、より小さいビットレートで画像データを符号化するものである。このような高能率符号化方式として、ＣＣＩＴＴは、テレビ会議／電話用の標準化勧告案Ｈ．２６１、カラー静止画用のＪＰＥＧ（Joint Photographic Coding Experts Group ）方式及び動画用のＭＰＥＧ（Moving Picture Image Coding Experts Group ）方式を提案している。これら３種類の提案はいずれもＤＣＴを基本としたシステムである。

また、ＨＤＴＶへの応用として米国ではＦＣＣにおいてＡＴＶ（Advanced Television ）と称してＭＰＥＧ方式を改良した圧縮技術を用いてディジタルＨＤＴＶ放送の実現化を進めている。

上述のように、入出力画像の形態が多様化すると、例えば記録しようとした場合、ハードの対応や記録容量の増大に係る問題を招く。従来は圧縮された画像を受けた場合、その画像をそのまま記録するか伸張して再生していた。しかし、記録媒体の記憶容量を考慮すると、更なる圧縮処理を必要とする場合が出てくる。
また、コンポーネント方式のＤ１型ＶＴＲは、業務用ＶＴＲ市場において、コンポジット方式のＤ２型ＶＴＲよりも画質が良いとされながらも、スタジオシステムに浸透していない理由として、価格以外にシステム接続時のデータ形式の不一致が指摘されている。

本発明は、上記の実情に鑑み成されたもので、圧縮処理された入力画像情報に対してさらに独自の圧縮処理を行っても画質劣化が少なくすることのできるディジタル画像情報処理装置及びディジタル画像情報処理方法を得ることを目的とする。

上記課題を解決するその一つの発明のディジタル画像情報処理装置は、第１の圧縮方式で圧縮された画像情報を入力する入力手段と、前記入力手段により入力された画像情報を前記第１の圧縮方式と共通の画像処理パラメータを用いて第２の圧縮方式で圧縮する再圧縮手段と、前記再圧縮手段で圧縮した方式を識別する情報を発生する識別情報発生手段と、前記第２の圧縮方式で圧縮した画像情報と前記識別情報とを記録媒体に記録する記録手段とを備えたことを特徴とする。

また、上記課題を解決するその一つの発明のディジタル画像情報処理方法は、第１の圧縮方式で圧縮された画像情報を入力する入力工程と、前記入力工程により入力された画像情報を前記第１の圧縮方式と共通の画像処理パラメータを用いて第２の圧縮方式で圧縮する再圧縮工程と、前記再圧縮工程で圧縮した方式を識別する情報を発生する識別情報発生工程と、前記第２の圧縮方式で圧縮した画像情報と前記識別情報とを記録媒体に記録する記録工程とを備えたことを特徴とする。

本発明によれば、入力画像情報の圧縮形態に最適の圧縮処理となるように内部の圧縮方式を選択することにより、再圧縮による画質の劣化を極力抑えることができる。

以下、本発明のディジタル画像情報処理装置の一実施例を図面を参照しながら詳細に説明する。

（１）処理ステップとデータ量との関係
図１、図２に情報源の入力から出力となる伝送路までの各処理ステップにおけるデータ量の変化を示す。

図１では、情報源から米国ＦＣＣに提案されているＡＴＶ（Advanced TV ）方式によって圧縮された信号がディジタル伝送されたものをＭＰＥＧ−１の方式で内部圧縮する場合を例にとって説明する。

ＡＴＶ方式は、米国ディジタルＨＤＴＶの統一規格として、グランド・アライアンス（大同盟）によって固められつつある。このＡＴＶ方式の特徴は次のとおりである。走査方式は、有効走査線数１０８０本のインターレース方式とスクエア・ピクセルによる７２０本プログレッシブ方式の両方式をサポートするマルチ走査を採用している。また、フレーム・レートでは２４Ｈｚと３０Ｈｚ、フィールド周波数でも５９．９４Ｈｚと６０Ｈｚの両方をサポートするシステムとしている。

映像方式では、ＭＰＥＧ−２に準拠し、メインプロファイルのハイレベルで完全互換を確保している。このため、Ｂフレームを採用しＡＣリークを除外した。この様に、ＭＰＥＧ−２に準拠しているため、ＭＰＥＧ−２の基本となるＭＰＥＧ−１とは共通の処理パラメーターが多い。ＭＰＥＧシステム内では、デコーダーのアッパーコンパチは確保されるが、本例の様に、二段で圧縮する場合においても、後述するＭＰＥＧ−１のアルゴリズムや、パラメータの相似点からも判る通り、画質維持の点で効果が有る。

このようなＡＴＶ方式の入力信号をＭＰＥＧ−１の方式で内部圧縮するが、このＭＰＥＧ−１の特徴を以下に説明する。

ＭＰＥＧ−１は、１．５Ｍｂｐｓの符号化レートを確保し、動き補償フレーム間予測とＤＣＴを用いた符号化方式を基本としている。そして、ランダムアクセス機能を実現するために、ＧＯＰ（Group of Pictures ）と呼ばれる複数の画像フレームから構成されるレイヤーを設けている。ＧＯＰは、フレーム内符号化フレーム（Ｉピクチャ）、前方向予測符号化フレーム（Ｐピクチャ）、両方向予測符号化フレーム（Ｂピクチャ）の３種類の符号化フレームから構成される。

各フレーム（Picture レイヤー）は、Slice 、Macro Block （ＭＢ）、Block の各レイヤーによって、階層的に構成されている。Picrure は１つ以上の S lice、Slice は１つ以上のＭＢ、ＭＢは６つのBlocK （４つの輝度信号Block と２つの色差信号Block ）で構成される。Block のサイズは８画素＊８ラインである。

また、動きに関しては、予測法としてフレーム間の相関を利用する手法や、フレーム内予測法がある。さらに、動きを１６＊１６のブロック単位でサーチしたり、画面全体をサーチする方法により、動き補償を行ってもよい。例えば、ハーフペル動き補償は、予測画素の位置が２画素の間で２画素の丸め付き平均をとるものである。

尚、圧縮の変換原理としては、例えばＮＴＳＣ方式であればＤＣＴの代わりにアダマール変換を用いても良い。

図１において、第１圧縮回路５０では、ＤＣＴを用いたＡＴＶ方式の圧縮処理により、情報源のデータ量が削減される。この状態で映像信号は伝送路を経て受信側へと供給される。入力された映像信号は、第１伸張回路５１で元の情報源のデータ量まで戻す。次に、内部処理を規定するための前処理にあたる標準化回路５２で、例えばＣＣＩＲ勧告６０１に準じたデータ構造の標準化を行う。輝度信号は１３．５ＭＨｚ、色信号は６．７５ＭＨｚでサンプリングし８ｂｉｔで量子化を行う。また、ＭＰＥＧ−１の基本画像フォーマットとなるＳＩＦ（Source Input Format ）のサンプリングに合わせるために、クロマのサンプリングを４：２：２から４：２：０に変換する。こうすることによりＭＰＥＧ−１準拠のデータとして取り扱いが容易になる。

次に標準化された映像信号を第２圧縮回路５３により圧縮処理を行い、更なるデータ量の削減を行う。この状態で蓄積媒体５４に圧縮されたデータの記録を行う。尚、記録動作についての詳細は後述する。次に、再生時には第２伸張回路５５で圧縮前のデータ量まで伸張し、第１圧縮回路５６にて再び圧縮し伝送路を経て出力する。

図２は情報源から世界標準としての共通中間フォーマットであるＣＩＦ規格によって圧縮された信号がディジタル伝送された場合を示す。

ＣＩＦ（Common Intermediate Format）は、ＣＩＦの画素数を１／４に減らしたＱＣＩＦ（Quater CIF）と共にテレビ会議、テレビ電話用符号化として規格化され、動き補償付き予測とＤＣＴを基本とした世界標準フォーマットである。ＤＣＴは８＊８画素ブロックで行う。入力信号をそのまま符号化するフレーム内符号化モードと、８＊８画素の輝度信号ブロックを４つとそれに対応する色差信号ブロックからなるマクロブロック単位で前フレームからの予測誤差を符号化するフレーム間予測符号化モードがある。

動き補償は、マクロブロック単位で水平垂直と＋−１５画素の範囲で行う。フレーム内符号化は、ＪＰＥＧベースライン・システムと同様の方法で行う。このようなＣＩＦ画像が入力されると、図２のように図１とは逆に伝送路から供給された入力データ量が少ないので、標準化の過程でデータ量を増やして内部処理を行い易くする。その他の圧縮、伸張処理は図１の例と同様である。

以上のように、本発明はデータ構造の異なる情報源に応じて、内部で標準化を行い圧縮処理をして記録再生を行い、出力時に入力時のデータ構造と一致させるものである。

次に、本発明による具体的な処理について図３、図４を参照しながら説明する。尚、図３、図４においては図１同一箇所は同一符号を付している。

図３、図４において、伝送路から入力された入力信号は第１伸張回路５１に入力されると共に方式判別回路５７に入力されて画像の方式判別をし、その判別された情報を第１の判別情報ＩＤ１として蓄積媒体５４に記録する。このＩＤ１はさらに表１のルールブック１を参照して決定する第１ルールブック回路５８に入力し、入力された画像方式を第１伸張回路５１に入力する。これにより、当該方式に見合った伸張を行うことができる。

＜具体例−１＞
図３の例は、ＡＴＶのシンタックス等に基づいて判別する方式判別回路５７からのＩＤ１は、方式決定回路６０に入力される。方式決定回路６０では最適な方式を決定するために、表１、表２のルールブック１及びルールブック２を参照し、方式決定回路６０で決定された方式を第２の判別情報ＩＤ２として蓄積媒体５４に記録する。

例えば、ＨＤ１１２５という方式と判別されたら、ルールブック１で規定されているファクタの内、画質劣化を極力少なくするために共通するファクタをルールブック２の中から選択する。本実施例では、特に再符号化時の画質決定の大きな要因であるブロックサイズを重視し、ブロック数１６＊１６でＤＣＴを行い８ｂｉｔで量子化する点で共通する方式を第２ルールブック回路５９の中から選択すると、方式２−４が決定されることになる。

このようにして決定されたＩＤ２は、第２ルールブック回路５９を経て、決定された方式に応じて圧縮処理するように第２圧縮回路５３に供給される。これにより、入力信号に最適な内部独自の圧縮処理が行われる。上記第１伸張回路５１による伸張後、前処理として標準化回路５２により標準化を行い、更に入力時の圧縮形態と同様なファクタで圧縮処理を行うことによって、画質劣化が少なく入力時よりも少ないデータ量で蓄積媒体５４に画像を記録することが可能となる。

＜具体例−２＞
図４は方式決定に関し、予め方式判別と方式毎の圧縮率を規定した対応表６１を用いる例を示す。図中の対応表６１の詳細を表３に示す。

まず、ＩＤ１が方式決定回路６０に供給され、方式が決定されるが、さらに圧縮率に応じてＡ、Ｂ、Ｃの３種類の方式を選択可能とすることで、画質の劣化を極力防ぐことが可能となる。尚、パラメータとして、Ｑ特性等も考慮に入れて選択しても良い。そして、決定された方式をＩＤ２として記録し、かつ第２圧縮回路５３に供給して圧縮処理を行い、画像を記録する。

再生時は、蓄積媒体５４からＩＤ２の情報を読み取り、第２ルールブック回路５９に従って方式に関する情報が決定される。この出力信号に応じて第２伸張回路５５により伸張される。さらに、蓄積媒体５４から、ＩＤ１の情報を読み取り、入力時のデータ量と一致するように、第１ルールブック回路５８に従って第１圧縮回路５６で圧縮を行う。このようにして出力させることで、入出力で同じデータを取り扱うことが可能となり、その間の画質の劣化は極力排除される。

尚、ルールブック１に示した画像構造の各画素数は以下の通りである。

ＣＩＦ：３６０＊２８８
ＱＣＩＦ：１８０＊１４４
ＮＴＳＣ：７２０＊５２５
ＨＤＴＶ：１９２０＊１１２５
更に、画像構造別の画面の画素数の詳細を図５に示す。図５においては、入出力画面を画素イメージで図示した。また、（）内の数字は符号化有効画素数を示す。尚、ＮＴＳＣ／ＰＡＬ、ＳＥＣＡＭを併記した。

＜具体例−３＞
上記各具体例では、常時方式決定の際ルールブックを参照し書き込んであるため、ルールブックへのアクセス時間がかかる。そこでこの具体例−３では、入力信号に応じて方式変更フラグを発生させる方式をとる。つまり、入力信号の映像処理方式がいつも同じであれば、ＣＦＬ＝０とし方式変更無しとして一定のルールに従って処理する。一方、映像方式が途中で終わると、ＣＦＬ＝１を検出して上記具体例１又は２で示したＩＤ１を確認し、所定のルールブックに従い映像方式に応じた最適な圧縮を選択し処理する。

このようにすることにより、方式が変更しない限り同一方式でルールブックにアクセスすることなく圧縮処理されるため、効率良く映像方式に見合った圧縮処理を行うことができる。

また、各データブロック内のＩＤ１及びＩＤ２の記録を止めた場合、データレートが削減される。

更に、ＩＤ１、ＩＤ２とＣＦＬを併記した場合には、上記効率化を図りながらもサーチ等の特殊画面再生時におけるデコード処理に破綻をきたさない。

（２）記録動作
以下、図６を参照して記録動作について説明する。

音声信号入力端子１、２より各々左（Ｌ）右（Ｒ）のステレオ音声信号が入力され、Ａ／Ｄ変換器４、５でディジタル音声信号に変換される。このディジタル音声信号は各々信号処理回路７、８で各種雑音除去やダイナミックレンジの制限等を施した後、オーディオデータ圧縮回路１０で音声信号用のデータ圧縮処理を行う。例えば、ＭＰＥＧで提案されている適応変換符号化（ＡＴＡＣ，ＡＳＰＥＣ）や帯域分割符号化（ＭＵＳＩＣＡＭ，ＳＢ／ＡＤＰＣＭ）を用いてもよいし、Ｌ／Ｒの相関を用いた２チャンネル混合でのベクトル符号化等を用いても良い。

一方、映像入力端子３より入力されたビデオ等の映像信号は、上記Ａ／Ｄ変換器４、５より高速処理可能なＡ／Ｄ変換器６により、ディジタル映像信号に変換される。このディジタル映像信号はビデオ信号処理回路９で処理された後、映像信号用のビデオデータ圧縮回路１１でデータ量を数１０〜数１００分の１程度に圧縮する。例えば、時間的な画像相関を用いたフレーム間相関処理と、上記の手法における画質劣化を減少させるための動き補償（ＭＣ）、さらに、ＭＰＥＧの符号化方式によれば、所定枚数のフレーム画像でＧＯＰを構成し、これを時間軸で前方向から行う前方向予測フレーム（Ｐピクチャ）や前後（過去と未来）から行う両方向予測フレーム（Ｂピクチャ）による圧縮等を適宜組合わせることで実現可能である。

具体的には、ＭＰＥＧで提案されているアルゴリズムの内、ＭＰＥＧ−１では、１／２インチＶＴＲ程度の標準画質、ＭＰＥＧ−２ではＮＴＳＣ以上の画質を確保することができる。処理の詳細は、例えば１９９２年日経ＢＰ社発行の「最前線レポートディジタルテレビ」第３４〜第４４頁に記載されている。

次に後述するＩＤ信号発生回路１２よりのデータと音声データ及び映像データとをデータ合成回路１３により合成した後、メイン・メモリ１８へ格納する。このメイン・メモリ１８は、メモリ・コントローラ１７によりメモリ・アドレスや書き込み／読み出し等の制御が行われている。更に、メモリ・コントローラ１７は、システム・コントローラ１６により、動作の切り換え等の装置全体としての制御が行われている。

このシステム・コントローラ１６は、操作キー１９により記録／再生／検索などの指示が入力され、これを受けてメモリ・コントローラ１７の制御を行うと同時に、動作状況や記録／再生時間等を示すタイムコード等の情報を表示部材２０に表示し、アドレス情報生成回路１５へもタイムコード等を知らせる。このタイムコードには主に２種類ある。その第１は、記録媒体もしくは映像プログラムの冒頭からの経過時間やカメラ撮影の累積時間等である。第２は記録またはカメラ撮影時の年月日や時分秒フレームの時刻等である。後者のタイムコード発生のために、カレンダ・クロック発生回路１４を備えている。

アドレス情報生成回路１５は、メモリ・コントローラ１７からの情報格納状況等のデータを受取り、各情報のデータ量等を示す情報としてＩＤ信号発生回路１２へデータを転送する。このデータの内容の一例を図７に示す。

システム・コントローラ１６からの情報に基づきタイムコード、画質や音声のモード選択等を生成し、メモリ・コントローラ１７からの情報に基づき映像や音声のデータ量（可変長符号可の場合はデータ長）とデータ格納のメモリ上の先頭のアドレス値とを生成し、ＩＤ信号発生回路１２へ転送し、各ＩＤデータ・ブロックとして一まとめにし、データ合成回路１３によりデータ・ブロックを構成する。このデータ・ブロックの格納されているメイン・メモリ１８の先頭番地を順次ＩＤファイルに書き込んでいく。

（３）データ構成
図７に固体メモリで構成されたメイン・メモリ１８中のデータ格納例を示す。
図７の上部に横軸を時間軸とし、所定時間（Ｔ₀）毎にＩＤ信号を生成する様子を示している。

図７の中央部には、固体メモリのアドレス空間の概念図を示す。ＩＤ信号の後には、可変長符号化により処理期間毎にデータ量の異なる映像及び音声の情報データが順次格納されていく。そのため、ＩＤデータ発生は一定間隔（Ｔ₀）であるが、メモリ上では図示の通り等間隔にはならない。

そこで、検索時にデータブロックに高速アクセスできるようにするため、図７の上部に示すように、データブロックの格納場所を示すアドレスを一まとめにしたＩＤファイルを生成しておく。このＩＤファイルは、データブロックの先頭番地だけを整然とメイン・メモリ１８の記憶容量に応じて予め設定されたエリアに格納するものである。このＩＤデータは固定長で、図７の例では、合計１０種類の基本情報を有している。

これらの基本情報は、ＳＭＰＴＥに準じたタイムコード、記録時間とのトレードオフで画質や音質を選択し、可変長のＡＶ（オーディオ及びビデオ）の各データの先頭番地及びデータ量を格納する。映像方式判別は、入力映像情報に応じて伸張や記録媒体への圧縮の方式を選択する２つの判別情報ＩＤを有する。情報源からの信号の圧縮形態を判別するものを映像方式判別１とし前述のＩＤ１を取り扱うものであり、受信側で圧縮方式を決定するものを映像方式判別２とし前述のＩＤ２を取り扱うものとする。削除済フラグは、一度記録したデータを消去する際に、物理的なデリート処理の前に復帰可能な論理消去状態として、前記フラグにて通常の再生を禁止するものである。

音声信号は、Ｌ、Ｒ各チャンネルの初期化情報（リセット・データ）と圧縮処理を施した可変長のオーディオ・データで構成される。

映像信号は、例えばフレーム内符号化等による初期化画面（映像リセット・データ）と各種の圧縮方式により、可変長符号化された圧縮データにより構成されている。

各ＩＤデータ毎に、以上の構成の映像データと音声データが一組としてデータ・ブロックを構成している。本データ・ブロックは、時間軸により定義された間隔で生成される点に特徴がある。

映像信号の一例を図８に示す。ここでは、ＨＤＴＶ方式（垂直１１２５本）のＴＶ信号を基本として、アスペクト比９：１６のＴＶ信号を入力信号としている。ＨＤＴＶ信号では、ＮＴＳＣ信号に対して、ほぼ水平方向で２．５倍、垂直方向で２倍の解像度になっており、全体で５倍の情報量が毎秒３０画面分発生し、図６の入力端子３へ供給される。

この映像信号は、Ａ／Ｄ変換器６でディジタルデータ化された後、ビデオ信号処理回路９にコンポーネント信号（Ｙ：Ｒ−Ｙ：Ｂ−Ｙ＝４：２：２）として入力される。ここで、１画素当たり輝度（Ｙ）を８ｂｉｔ、色差を各々１／２のサンプリングレートで８ｂｉｔ量子化すると、１．２Ｇｂｐｓとなる。これに、１／２００の圧縮処理を施し、約６Ｍｂｐｓまでデータ量を削除する。

また、コンパクト・ディスク相当の音質のステレオ音声信号のデータレートは、１．５Ｍｂｐｓなので、これに１／５の圧縮処理を施し１．３Ｍｂｐｓとする。よって、ＡＶ合計で約６．３Ｍｂｐｓとなる。従って、１Ｇｂｉｔで１０分記録できることになる。

なお、映像信号として他に、現行の標準ＴＶ放送方式のＮＴＳＣ／ＰＡＬは勿論のこと、Ｈ．２６１に規定されるテレビ電話の国際規格であるＱＣＩＦ、ＣＩＦの形態であってもよい。

以上のようなデータ処理にてメイン・メモリ１８にＡＶデータを格納することになるが、メイン・メモリの増設や、ＩＣカード等の交換可能なメモリ形態を採ることも可能になる。

（４）再生動作
操作キー１９により再生動作を指示すると、システムコントローラ１６は表示部材２０に再生動作中の旨を表示し、メモリコントローラ１７によりメモリアドレスとリード／ライトを制御し、メイン・メモリ１８から記録動作により格納した情報信号を読み出す。前述の例で言えば毎秒３０画面の映像情報と、ステレオ（または２チャンネル分の）音声情報とこれらの検索のためのＩＤ情報とが読み出される。

上記３種のデータが混合された状態（シリアルデータ情報）でデータ分配器２１へ情報供給される。データ分配器２１にて、データは各々以下の通り分配される。

ＩＤデータは、検索情報再生回路２２において各ＩＤ毎に図７に示す通りの情報を検出し、モニタのための表示情報を表示情報再生回路２３で発生し、ビデオデータ伸張回路２４により復元された映像情報と加算器２７で合成し、Ｄ／Ａ変換器２８で汎用性のあるアナログ信号に変換し、映像モニタ３０へ表示する。

オーディオデータは、オーディオデータ伸張回路２５においてビデオデータと同様に記録時のデータ圧縮処理と逆のデータ伸張処理を施し、記録時の入力信号と同等の音声信号を再生する。データ選択回路２６では音響モニタ用の音声信号を生成するためのＤ／Ａ変換器２９及びディジタルオーディオ出力端子３３へ供給するデータを出力する。

映像と音声の各データは、前述のＩＤ信号を用いて、再生信号処理に要する遅延時間等によるズレを補正し再生する。表示情報生成回路２３からの情報に同期させ、各々の映像及び音声の再生信号をデータ選択回路２６により出力する。このＩＤは、ＭＰＥＧ−１におけるビットストリーム構成の内、第３層のパケットヘッダ中に位置しパケットデータのでコードタイミング情報を与えることにより、異メディア間の同期をとる、いわゆるタイムスタンプに相当するものである。

（５）ファイル構成
以上主たるデータの構造とデータ処理について詳細に説明してきたが、次に図９を用いてデータの検索性向上のために採られたデータ・ファイル構成について以下に説明する。

主たるＡＶデータを格納するＡＶデータ・ファイル４０と、各種制御を行うシステム・コントローラ４７と、システム・コントローラ４７に各種の指示を入力する操作キー４８と、システム・コントローラ４７よりの指示に応じてデータ処理を行う情報処理回路４１と、情報の入出力に関係する処理を行う情報入出力回路４２とよりなる基本構成に検索用のファイルを追加した。

上述の基本構成は、先に説明したように図７に含まれるので、ハード的な説明は省略してファイル構成及びその生成に関するソフト的な説明のみを以下に行う。

ビデオカメラを用いた撮影と、この時に自動発生したインデックス情報を基に検索を行う場合を例にとり図１０、図１１のフローチャートを用いて説明する。

＜記録系＞
図９、図１０において、入力端子を経由して不図示のビデオカメラからの映像および音声の信号が供給されている状態で、図１０のステップＳ１、Ｓ２で操作キー４８により撮影開始または撮影終了の指示が入力されると、システム・コントローラ４７はインデックス生成回路４６へインデックス情報を発生させるべく指示を出す。これを受けて、インデックス生成回路４６はステップＳ３〜Ｓ９により２つの検索用のファイルを生成もしくは更新する。インデックス情報は内容に応じてレベル１〜３に分けられる。

その一つは時刻ファイル４４で、インデックス情報の生成指示の出された時刻を入力中のＡＶデータと対応したＩＤファイルに連動させ時刻データとして格納する。このため、時刻を基にした検索作業が迅速に行えるようになる。すでに説明した通り、ＩＤファイルは一定時間間隔で生成しているので、撮影の開始時刻と終了時刻がわかれば、途中の任意の時刻とＡＶデータの対応付けは可能である。

もう一つは目次ファイル４５であり、ステップＳ１０〜Ｓ１１で行われる。この目次情報とは、書籍でいうところの章や段落等に相当し、音楽で言えば楽章や小節等に相当するものである。具体的には、記録の開始／停止が小見出しで、電源の入り／切りが中身出しで、日付変わりで大見出しを振り付けるようにすれば、手軽に自動生成が可能となる。更に複雑な目次生成は、手動によれば好みに応じ如何様にも作成可能である。

この時刻ファイル及び目次ファイルの構成例を表４に示す。

また、ステップＳ１２、Ｓ１３でインデックス生成回路４６からＩＤファイル４３へ撮影開始指示に応じてＩＤの新規作成命令が出され、ステップＳ１４〜Ｓ１６により撮影終了指示に応じてＩＤ生成の中止命令が出される。この流れを図９では一点鎖線で示したが、ＡＶデータ・ファイル４０から直接ＩＤファイルの空きエリアへデータ量等の情報を書き込みに行く構成としてもよい。

＜再生系＞
表４に示す時刻ファイル及び目次ファイルの構成例を用いて図１１に従い再生時の検索手順を説明する。

インデックス情報はレベル１からレベル４まで設定可能であり、本例では前述の大中小の見出しを各々１から３にあて、４は未使用のためオールゼロを割り当てている。この最小レベル単位にインデックス・ワードを構成している。

ＩＤファイルの項目には開始ＩＤ番号と終了ＩＤ番号が、時刻ファイルの項目には開始時刻の年月日及び時分秒が、目次ファイルの項目には必要に応じてインデックスの目次名称が登録される。勿論ブランクでも構わない。

従って、このような状態において、ステップＳ２１〜Ｓ３４により、インデックスに対応するＩＤを用いてＩＤファイルにアクセスし、ＡＶデータの格納アドレスを読みだし、このアドレス情報でＡＶデータ・ファイル４０をアクセスすることで所望の箇所の再生が可能となる。

一方、目次ファイルからの検索は、Ｓ３６〜Ｓ４０によりインデックスをサーチし、目次名称が登録されていれば、目次名称をディスプレイ表示し、登録されていなければ、時刻検索とほぼ同様の手順（インデックス→ＩＤ→ＡＶ）でＡＶデータ・ファイルにアクセスし、映像情報としてディスプレイ表示しても良い。

他の実施例として、記録・再生という蓄積系のみならず情報伝送の通信系に応用することもできる。

本発明の実施例による処理ステップとデータ量との関係を示した構成図である。本発明の他の実施例による処理ステップとデータ量との関係を示した構成図である。本発明の実施例によるディジタル画像情報処理装置の要部を示すブロック図である。本発明の他の実施例によるディジタル画像情報処理装置の要部を示すブロック図である。入出力画像の代表例を示す説明図である。本発明の実施例によるディジタル画像情報処理装置の全体を示すブロック図である。本発明の実施例によるデータ構成の概念図である。本発明の実施例による入力情報の概念図である。本発明の実施例によるファイル構成の概念図である。本発明の実施例によるフローチャートである。本発明の実施例による検索時のフローチャートである。

符号の説明

５３第２圧縮回路
５７方式判別回路
５８ルールブック１
５９ルールブック２
６０方式決定回路

Claims

第１の圧縮方式で圧縮された画像情報を入力する入力手段と、
前記入力手段により入力された画像情報を前記第１の圧縮方式と共通の画像処理パラメータを用いて第２の圧縮方式で圧縮する再圧縮手段と、
前記再圧縮手段で圧縮した方式を識別する情報を発生する識別情報発生手段と、
前記第２の圧縮方式で圧縮した画像情報と前記識別情報とを記録媒体に記録する記録手段とを備えたことを特徴とするディジタル画像情報処理装置。
前記共通の画像処理パラメータは、ブロックサイズ、ＤＣＴ、量子化、動き補償のうちの少なくとも１つであることを特徴とする請求項１に記載のディジタル画像情報処理装置。
前記再圧縮手段は、圧縮率を選択する圧縮率選択手段を有し、選択された圧縮率で画像情報を再圧縮することを特徴とする請求項１に記載のディジタル画像情報処理装置。
第１の圧縮方式で圧縮された画像情報を入力する入力工程と、
前記入力工程により入力された画像情報を前記第１の圧縮方式と共通の画像処理パラメータを用いて第２の圧縮方式で圧縮する再圧縮工程と、
前記再圧縮工程で圧縮した方式を識別する情報を発生する識別情報発生工程と、
前記第２の圧縮方式で圧縮した画像情報と前記識別情報とを記録媒体に記録する記録工程とを備えたことを特徴とするディジタル画像情報処理方法。
前記共通の画像処理パラメータは、ブロックサイズ、ＤＣＴ、量子化、動き補償のうちの少なくとも１つであることを特徴とする請求項４に記載のディジタル画像情報処理方法。
前記再圧縮工程は、圧縮率を選択する圧縮率選択工程を有し、選択された圧縮率で画像情報を再圧縮することを特徴とする請求項４に記載のディジタル画像情報処理方法。