JP2002058025A - 信号処理装置及び方法並びにファイル生成方法 - Google Patents
信号処理装置及び方法並びにファイル生成方法Info
- Publication number
- JP2002058025A JP2002058025A JP2000245400A JP2000245400A JP2002058025A JP 2002058025 A JP2002058025 A JP 2002058025A JP 2000245400 A JP2000245400 A JP 2000245400A JP 2000245400 A JP2000245400 A JP 2000245400A JP 2002058025 A JP2002058025 A JP 2002058025A
- Authority
- JP
- Japan
- Prior art keywords
- file
- encoded
- code stream
- jpeg2000
- encoded code
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/007—Transform coding, e.g. discrete cosine transform
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Discrete Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
(57)【要約】
【課題】 JPEG2000の静止画規格のJP2ファイルと、そ
の動画像への拡張版であるMotion-JPEG2000ファイル（M
J2ファイル）との互換性を高め、ファイル生成や復号を
容易化し、利便性を向上する。 【解決手段】 入力データ１１１としては、１つ以上の
JPEG2000符号化コードストリームとヘッダ情報とから構
成されるJP2ファイルに加え、複数フレームの動画符号
化コードストリーム、メタデータ情報を付加して生成さ
れるMotion-JPEG2000ファイル（MJ2ファイル）が用いら
れる。MJ2ファイル解読部９は、JP2ファイル内の先頭の
JPEG2000符号化コードストリームを読み出してこれらを
JPEG2000復号部１０に送出すると共に、JP2ファイル内
の先頭以外のJPEG2000符号化コードストリームを棄却ま
たは無視する。
の動画像への拡張版であるMotion-JPEG2000ファイル（M
J2ファイル）との互換性を高め、ファイル生成や復号を
容易化し、利便性を向上する。 【解決手段】 入力データ１１１としては、１つ以上の
JPEG2000符号化コードストリームとヘッダ情報とから構
成されるJP2ファイルに加え、複数フレームの動画符号
化コードストリーム、メタデータ情報を付加して生成さ
れるMotion-JPEG2000ファイル（MJ2ファイル）が用いら
れる。MJ2ファイル解読部９は、JP2ファイル内の先頭の
JPEG2000符号化コードストリームを読み出してこれらを
JPEG2000復号部１０に送出すると共に、JP2ファイル内
の先頭以外のJPEG2000符号化コードストリームを棄却ま
たは無視する。
Description
【０００１】
【発明の属する技術分野】本発明は、動画符号化コード
ストリームを含む符号化ファイルを復号する信号処理装
置及び方法並びにファイル生成方法に関し、特に、JPEG
2000符号化コードストリームとヘッダ情報とから構成さ
れるJPEG2000ファイルに加え、複数フレームの動画符号
化コードストリーム、メタデータ情報を付加して生成さ
れるMotion-JPEG2000 ファイルを復号する信号処理装置
及び方法並びにファイル生成方法に関する。
ストリームを含む符号化ファイルを復号する信号処理装
置及び方法並びにファイル生成方法に関し、特に、JPEG
2000符号化コードストリームとヘッダ情報とから構成さ
れるJPEG2000ファイルに加え、複数フレームの動画符号
化コードストリーム、メタデータ情報を付加して生成さ
れるMotion-JPEG2000 ファイルを復号する信号処理装置
及び方法並びにファイル生成方法に関する。
【０００２】
【従来の技術】従来の代表的な画像圧縮方式としては、
ＩＳＯ（国際標準化機構：International Organization
for Standardization）によって標準化されたＪＰＥＧ
（Joint Photographic coding Experts Group） 方式が
ある。このＪＰＥＧ方式とは、ＤＣＴ（離散コサイン変
換：Discrete Cosine Transform） を用いて主に静止画
を圧縮符号化する方式であり、比較的高いビットが割り
当てられる場合には、良好な符号化・復号画像を供する
ことが知られている。ただしこの方式においては、ある
程度符号化ビット数を少なくすると、ＤＣＴ特有のブロ
ック歪みが顕著になり、主観的に劣化が目立つようにな
る。
ＩＳＯ（国際標準化機構：International Organization
for Standardization）によって標準化されたＪＰＥＧ
（Joint Photographic coding Experts Group） 方式が
ある。このＪＰＥＧ方式とは、ＤＣＴ（離散コサイン変
換：Discrete Cosine Transform） を用いて主に静止画
を圧縮符号化する方式であり、比較的高いビットが割り
当てられる場合には、良好な符号化・復号画像を供する
ことが知られている。ただしこの方式においては、ある
程度符号化ビット数を少なくすると、ＤＣＴ特有のブロ
ック歪みが顕著になり、主観的に劣化が目立つようにな
る。
【０００３】これとは別に、最近においては、画像をフ
ィルタバンクと呼ばれるハイパス・フィルタとローパス
・フィルタを組み合わせたフィルタによって複数の帯域
に分割し、それらの帯域毎に符号化を行う方式の研究が
盛んになっている。その中でも、ウェーブレット符号化
は、ＤＣＴで問題とされた高圧縮でブロック歪みが顕著
になる、という欠点が無いことから、ＤＣＴに代わる新
たな技術として有力視されている。
ィルタバンクと呼ばれるハイパス・フィルタとローパス
・フィルタを組み合わせたフィルタによって複数の帯域
に分割し、それらの帯域毎に符号化を行う方式の研究が
盛んになっている。その中でも、ウェーブレット符号化
は、ＤＣＴで問題とされた高圧縮でブロック歪みが顕著
になる、という欠点が無いことから、ＤＣＴに代わる新
たな技術として有力視されている。
【０００４】また、ＪＰＥＧの後継とも言える次世代の
静止画国際標準方式として期待されているJPEG2000（Ｊ
ＰＥＧと同じ組織であるISO/IEC/JTC1SC29/WG1によって
作業中）は、2000年１２月にPart-1の標準化勧告が出さ
れる予定のフォーマットである。このJPEG2000では、画
像圧縮の基本である変換方式として、既存のＪＰＥＧの
ＤＣＴに代わり、ウェーブレット変換を採用することが
決まっている。
静止画国際標準方式として期待されているJPEG2000（Ｊ
ＰＥＧと同じ組織であるISO/IEC/JTC1SC29/WG1によって
作業中）は、2000年１２月にPart-1の標準化勧告が出さ
れる予定のフォーマットである。このJPEG2000では、画
像圧縮の基本である変換方式として、既存のＪＰＥＧの
ＤＣＴに代わり、ウェーブレット変換を採用することが
決まっている。
【０００５】現行のJPEGフォーマットのファイルは通
常".jpg"という拡張子で与えられるが、これは純粋な符
号化コードストリームである。一方、JFIFは、JPEGで圧
縮されてできた符号化コードストリームに画像情報等を
付加してファイルに格納するための標準フォーマットで
あり、C-Cube Microsystems 社によって提唱された形式
で、業界標準として広く普及している。単にJPEGファイ
ルと言った場合、多くはJFIF形式のファイルを意味して
いる。
常".jpg"という拡張子で与えられるが、これは純粋な符
号化コードストリームである。一方、JFIFは、JPEGで圧
縮されてできた符号化コードストリームに画像情報等を
付加してファイルに格納するための標準フォーマットで
あり、C-Cube Microsystems 社によって提唱された形式
で、業界標準として広く普及している。単にJPEGファイ
ルと言った場合、多くはJFIF形式のファイルを意味して
いる。
【０００６】上述したJPEG2000でも、純粋な符号化コー
ドストリームは、"jp2c"と読ばれるが、通常デジタルカ
メラやPCのソフト等で取り扱う場合には、付加情報を加
えた形のファイルフォーマットに従った形のファイルに
なると考えられる。これは".jp2"の拡張子で与えられ
る。同様に、動画を扱うMotion-JPEG2000 の場合にも、
特定のファイルフォーマット（".mj2"で与えられる）の
形で取り扱われる。
ドストリームは、"jp2c"と読ばれるが、通常デジタルカ
メラやPCのソフト等で取り扱う場合には、付加情報を加
えた形のファイルフォーマットに従った形のファイルに
なると考えられる。これは".jp2"の拡張子で与えられ
る。同様に、動画を扱うMotion-JPEG2000 の場合にも、
特定のファイルフォーマット（".mj2"で与えられる）の
形で取り扱われる。
【０００７】
【発明が解決しようとする課題】ところで、上述したよ
うに、静止画像であるJPEG2000のファイルフォーマット
（JP2） と、動画像であるMotion-JPEG2000 のファイル
フォーマット（MJ2） とは別でありながら、両者の互換
性を維持することは、アプリケーション分野の拡大の意
味でも非常に重要である。例えば、最近製品化が相次い
でいる動画撮影可能な静止画デジタルカメラは、動画撮
影時には動画のファイルを出力するが、これを１フレー
ムずつ独立に静止画として復号・表示できる必要があ
る。
うに、静止画像であるJPEG2000のファイルフォーマット
（JP2） と、動画像であるMotion-JPEG2000 のファイル
フォーマット（MJ2） とは別でありながら、両者の互換
性を維持することは、アプリケーション分野の拡大の意
味でも非常に重要である。例えば、最近製品化が相次い
でいる動画撮影可能な静止画デジタルカメラは、動画撮
影時には動画のファイルを出力するが、これを１フレー
ムずつ独立に静止画として復号・表示できる必要があ
る。
【０００８】同様に、動画のMJ2 ファイルと静止画のJP
2 ファイルとの互換性を保ちながら、MJ2 ファイルに記
録された１フレーム毎の静止画を独立に復号及び表示で
きることは便宜性が高い。
2 ファイルとの互換性を保ちながら、MJ2 ファイルに記
録された１フレーム毎の静止画を独立に復号及び表示で
きることは便宜性が高い。
【０００９】本発明は、上述のような実情に鑑みて提案
されたものであって、静止画符号化コードストリームを
含むファイルと、動画静止画符号化コードストリームを
含むファイルとの相互利用、例えば、上記JPEG2000のフ
ァイルフォーマットのJP2 ファイルと、上記Motion-JPE
G2000 のファイルフォーマットのMJ2 ファイルとの相互
利用の便宜性の向上を図り、これらのファイルフォーマ
ットの互換性を維持し、MJ2 ファイルの読み取り手段を
用いれば、静止画だけでなく動画の復号及び表示ができ
るようにし、また、MJ2 ファイル生成手段として、JP2
専用の読み取り手段でもMJ2 ファイルが解読できるよう
な信号処理装置及び方法並びにファイル生成方法を提供
することを目的とする。
されたものであって、静止画符号化コードストリームを
含むファイルと、動画静止画符号化コードストリームを
含むファイルとの相互利用、例えば、上記JPEG2000のフ
ァイルフォーマットのJP2 ファイルと、上記Motion-JPE
G2000 のファイルフォーマットのMJ2 ファイルとの相互
利用の便宜性の向上を図り、これらのファイルフォーマ
ットの互換性を維持し、MJ2 ファイルの読み取り手段を
用いれば、静止画だけでなく動画の復号及び表示ができ
るようにし、また、MJ2 ファイル生成手段として、JP2
専用の読み取り手段でもMJ2 ファイルが解読できるよう
な信号処理装置及び方法並びにファイル生成方法を提供
することを目的とする。
【００１０】
【課題を解決するための手段】上述の課題を解決するた
めに、本発明に係る信号処理装置及び方法は、１つ以上
の第１の符号化コードストリームとヘッダ情報とから構
成される第１の符号化ファイルに加え、複数フレームの
動画符号化コードストリーム、メタデータ情報を付加し
て生成される第２の符号化ファイル復号処理する際に、
第１の符号化ファイル内の先頭の第１の符号化コードス
トリームを読み出すと共に、第１の符号化ファイル内の
先頭以外の第１の符号化コードストリームを棄却または
無視するようにし、読み出された第１の符号化ファイル
内の先頭の第１の符号化コードストリームを復号するこ
とを特徴とするものである。
めに、本発明に係る信号処理装置及び方法は、１つ以上
の第１の符号化コードストリームとヘッダ情報とから構
成される第１の符号化ファイルに加え、複数フレームの
動画符号化コードストリーム、メタデータ情報を付加し
て生成される第２の符号化ファイル復号処理する際に、
第１の符号化ファイル内の先頭の第１の符号化コードス
トリームを読み出すと共に、第１の符号化ファイル内の
先頭以外の第１の符号化コードストリームを棄却または
無視するようにし、読み出された第１の符号化ファイル
内の先頭の第１の符号化コードストリームを復号するこ
とを特徴とするものである。
【００１１】より具体的には、複数の符号化コードスト
リームとメタデータ情報が合成されたMJ2 ファイルを解
読して、各構成要素に分類する手段と、分類された静止
画・動画符号化コードストリームをJPEG2000復号手段を
用いて復号する手段と、メタデータ情報の同期情報を用
いて、復号画像を出力する手段とを有するものである。
リームとメタデータ情報が合成されたMJ2 ファイルを解
読して、各構成要素に分類する手段と、分類された静止
画・動画符号化コードストリームをJPEG2000復号手段を
用いて復号する手段と、メタデータ情報の同期情報を用
いて、復号画像を出力する手段とを有するものである。
【００１２】また、本発明にファイル生成方法は、上述
の課題を解決するために、複数フレームの画像を第１の
符号化規格に基づいて符号化し第１の符号化コードスト
リームを生成し、上記複数フレームの第１の符号化コー
ドストリームの中から１フレームの符号化コードストリ
ームだけを任意に抽出し、上記第１の符号化コードスト
リームの全て又は一部の複数フレームの符号化コードス
トリームを抽出し、上記抽出された複数フレームの符号
化コードストリームに関するメタデータ情報を生成し、
上記全ての第１の符号化コードストリームとメタデータ
情報をまとめて１つの第２の符号化ファイルを生成する
ことを特徴とするものである。
の課題を解決するために、複数フレームの画像を第１の
符号化規格に基づいて符号化し第１の符号化コードスト
リームを生成し、上記複数フレームの第１の符号化コー
ドストリームの中から１フレームの符号化コードストリ
ームだけを任意に抽出し、上記第１の符号化コードスト
リームの全て又は一部の複数フレームの符号化コードス
トリームを抽出し、上記抽出された複数フレームの符号
化コードストリームに関するメタデータ情報を生成し、
上記全ての第１の符号化コードストリームとメタデータ
情報をまとめて１つの第２の符号化ファイルを生成する
ことを特徴とするものである。
【００１３】より具体的には、１フレームづつの画像を
独立して符号化するJPEG2000符号化手段と、静止画符号
化コードストリームと動画符号化コードストリームとを
別々に記録する手段と、同期情報等のメタデータ情報を
生成する手段と、上記の静止画・動画符号化コードスト
リームとメタデータ情報をすべて合成して、MJ2 ファイ
ルを生成する手段とを有するものである。
独立して符号化するJPEG2000符号化手段と、静止画符号
化コードストリームと動画符号化コードストリームとを
別々に記録する手段と、同期情報等のメタデータ情報を
生成する手段と、上記の静止画・動画符号化コードスト
リームとメタデータ情報をすべて合成して、MJ2 ファイ
ルを生成する手段とを有するものである。
【００１４】
【発明の実施の形態】以下、本発明に係る信号処理装置
及び方法並びにファイル生成方法の実施の形態につい
て、図面を参照しながら説明する。以下の実施の形態で
は、特に、静止画符号化コードストリームとしてJPEG20
00符号化コードストリームを用い、１つ以上のJPEG2000
符号化コードストリームとヘッダ情報とから成るJPEG20
00ファイルに加えて複数フレームの動画符号化コードス
トリームとメタデータ情報とを付加して生成されるMoti
on-JPEG2000 ファイルの読み出しや生成を行う実施の形
態について詳細に説明する。
及び方法並びにファイル生成方法の実施の形態につい
て、図面を参照しながら説明する。以下の実施の形態で
は、特に、静止画符号化コードストリームとしてJPEG20
00符号化コードストリームを用い、１つ以上のJPEG2000
符号化コードストリームとヘッダ情報とから成るJPEG20
00ファイルに加えて複数フレームの動画符号化コードス
トリームとメタデータ情報とを付加して生成されるMoti
on-JPEG2000 ファイルの読み出しや生成を行う実施の形
態について詳細に説明する。
【００１５】第１の実施の形態 本発明の第１の実施の形態となる信号処理装置につい
て、図１〜図３を参照しながら説明する。この第１の実
施の形態は、上記Motion-JPEG2000 ファイルを読み取る
ための装置であり、１つ以上のJPEG2000符号化コードス
トリームとヘッダ情報とから構成されるJPEG2000ファイ
ルに加え、複数フレームの動画符号化コードストリー
ム、メタデータ情報を付加して生成されるMotion-JPEG2
000 ファイルが入力され、上記JPEG2000ファイル内の先
頭のJPEG2000符号化コードストリームを読み出してこれ
らをJPEG2000デコーダ装置に送出する手段を備え、かつ
JPEG2000ファイル内の先頭以外のJPEG2000符号化コード
ストリームを棄却または無視する手段を備えているもの
である。
て、図１〜図３を参照しながら説明する。この第１の実
施の形態は、上記Motion-JPEG2000 ファイルを読み取る
ための装置であり、１つ以上のJPEG2000符号化コードス
トリームとヘッダ情報とから構成されるJPEG2000ファイ
ルに加え、複数フレームの動画符号化コードストリー
ム、メタデータ情報を付加して生成されるMotion-JPEG2
000 ファイルが入力され、上記JPEG2000ファイル内の先
頭のJPEG2000符号化コードストリームを読み出してこれ
らをJPEG2000デコーダ装置に送出する手段を備え、かつ
JPEG2000ファイル内の先頭以外のJPEG2000符号化コード
ストリームを棄却または無視する手段を備えているもの
である。
【００１６】図１は、このようなMotion-JPEG2000 のフ
ァイル（MJ2 ファイル）を読み取るための装置の構成例
を示し、MJ2 ファイル解読部９、JPEG2000復号部１０、
及びシステム制御部１１を有して構成され、必要に応じ
て音声復号部１２を設けるようにしている。
ァイル（MJ2 ファイル）を読み取るための装置の構成例
を示し、MJ2 ファイル解読部９、JPEG2000復号部１０、
及びシステム制御部１１を有して構成され、必要に応じ
て音声復号部１２を設けるようにしている。
【００１７】図１において、入力データ１１１は、上記
Motion-JPEG2000 ファイル（MJ2 ファイル）である。こ
のMJ2 ファイルのファイルフォーマットを図２の（Ｂ）
に示す。図２の（Ａ）は、JPEG2000規格に準拠したJPEG
2000ファイル（JP2 ファイル）のファイルフォーマット
を示し、このJP2 ファイル６０がそのまま図２の（Ｂ）
のMJ2 ファイル７０内に用いられている。
Motion-JPEG2000 ファイル（MJ2 ファイル）である。こ
のMJ2 ファイルのファイルフォーマットを図２の（Ｂ）
に示す。図２の（Ａ）は、JPEG2000規格に準拠したJPEG
2000ファイル（JP2 ファイル）のファイルフォーマット
を示し、このJP2 ファイル６０がそのまま図２の（Ｂ）
のMJ2 ファイル７０内に用いられている。
【００１８】すなわち、図２の（Ａ）に示すフォーマッ
トは、現在JPEG2000 Part-1 ＦＤＣ（Final Committee
Draft） に記載されているものであり、JP2 ファイル６
０は、画像のサイズや色情報等のヘッダ情報を記録する
JP2 Header（JP2 ヘッダ）６１と、１つのJPEG2000符号
化コードストリーム（JPEG2000 Codestream）６２とを
少なくとも有して成り、さらに必要に応じていくつかの
JPEG2000符号化コードストリーム６３、６４、・・・を
設けるようにしてもよい。その他の本発明に関係のない
部分は省略している。
トは、現在JPEG2000 Part-1 ＦＤＣ（Final Committee
Draft） に記載されているものであり、JP2 ファイル６
０は、画像のサイズや色情報等のヘッダ情報を記録する
JP2 Header（JP2 ヘッダ）６１と、１つのJPEG2000符号
化コードストリーム（JPEG2000 Codestream）６２とを
少なくとも有して成り、さらに必要に応じていくつかの
JPEG2000符号化コードストリーム６３、６４、・・・を
設けるようにしてもよい。その他の本発明に関係のない
部分は省略している。
【００１９】図２の（Ｂ）は、MJ2 ファイル（Motion-J
PEG2000 のファイル）７０のファイルフォーマットの一
例を示す図であり、上記JP2 ファイル６０がそのまま
（図中の上半分に）包含されている。従って、このJP2
ファイル６０の部分を解読または生成することにより、
JP2 ファイルフォーマットとMJ2 ファイルフォーマット
の互換性を維持することができる。MJ2 ファイル７０
は、このJP2 ファイル６０に加えられる部分７１とし
て、複数フレームの動画符号化コードストリーム７２
と、メタデータ情報７３とを有している。メタデータ情
報７３は、符号化コードストリームに関連する情報とし
ての動画像の表示のフレームレートや、復号及び出力の
タイミング等を含む。また、音声やテキスト情報も含め
たメタデータを用いるようにしてもよい。
PEG2000 のファイル）７０のファイルフォーマットの一
例を示す図であり、上記JP2 ファイル６０がそのまま
（図中の上半分に）包含されている。従って、このJP2
ファイル６０の部分を解読または生成することにより、
JP2 ファイルフォーマットとMJ2 ファイルフォーマット
の互換性を維持することができる。MJ2 ファイル７０
は、このJP2 ファイル６０に加えられる部分７１とし
て、複数フレームの動画符号化コードストリーム７２
と、メタデータ情報７３とを有している。メタデータ情
報７３は、符号化コードストリームに関連する情報とし
ての動画像の表示のフレームレートや、復号及び出力の
タイミング等を含む。また、音声やテキスト情報も含め
たメタデータを用いるようにしてもよい。
【００２０】再び図１に戻って、MJ2ファイル解読部９
では、上記MJ2 ファイルの入力データ１１１を入力し
て、各構成要素に分離する。その結果、静止画符号化コ
ードストリーム１０５、動画符号化コードストリーム１
０６、メタデータ情報１０７とに分類される。この内、
静止画符号化コードストリーム１０５、動画符号化コー
ドストリーム１０６はどちらもJPEG2000復号部１０に送
出されて、同部において、JPEG2000の規格で規定された
復号処理によって復号画像１１５が生成される。動画で
ある場合には、存在するフレーム数分だけの復号画像が
送出されることは言うまでもない。
では、上記MJ2 ファイルの入力データ１１１を入力し
て、各構成要素に分離する。その結果、静止画符号化コ
ードストリーム１０５、動画符号化コードストリーム１
０６、メタデータ情報１０７とに分類される。この内、
静止画符号化コードストリーム１０５、動画符号化コー
ドストリーム１０６はどちらもJPEG2000復号部１０に送
出されて、同部において、JPEG2000の規格で規定された
復号処理によって復号画像１１５が生成される。動画で
ある場合には、存在するフレーム数分だけの復号画像が
送出されることは言うまでもない。
【００２１】次にメタデータ情報１０７は、システム制
御部１１に入力されて、このシステム制御部１１から出
力される画像用同期制御信号１１２と、音声用同期制御
信号１１３に従って、復号画像１１５と復号音声１１４
とが同期をとって表示または出力される。
御部１１に入力されて、このシステム制御部１１から出
力される画像用同期制御信号１１２と、音声用同期制御
信号１１３に従って、復号画像１１５と復号音声１１４
とが同期をとって表示または出力される。
【００２２】以上の動作について図３を参照しながら説
明すると、図３のMJ2 Reader（あるいはMJ2 Motion Rea
der ともいう。）のBox ８０が、図１のMJ2 ファイル解
読部９に相当する。一方、既に図２の（Ａ）のJP2 ファ
イルフォーマットの構成で述べたように、JP2 ファイル
６０では１つ以上の符号化コードストリームが存在する
可能性がある。しかし、図３のMJ2 ReaderのBox ８０は
この内、一番先頭に位置する符号化コードストリームの
みを読み出し、それ以外の符号化コードストリームに対
しては、棄却または無視する手段を取る。
明すると、図３のMJ2 Reader（あるいはMJ2 Motion Rea
der ともいう。）のBox ８０が、図１のMJ2 ファイル解
読部９に相当する。一方、既に図２の（Ａ）のJP2 ファ
イルフォーマットの構成で述べたように、JP2 ファイル
６０では１つ以上の符号化コードストリームが存在する
可能性がある。しかし、図３のMJ2 ReaderのBox ８０は
この内、一番先頭に位置する符号化コードストリームの
みを読み出し、それ以外の符号化コードストリームに対
しては、棄却または無視する手段を取る。
【００２３】一方、図３の複数フレーム符号化コードス
トリーム７２に記録されている複数フレームの動画符号
化コードストリームを読み出すことで、図１の動画符号
化コードストリーム１０６を、MJ2ファイル解読部９よ
り得ることができる。
トリーム７２に記録されている複数フレームの動画符号
化コードストリームを読み出すことで、図１の動画符号
化コードストリーム１０６を、MJ2ファイル解読部９よ
り得ることができる。
【００２４】また、前記複数フレームの動画符号化コー
ドストリームを解読して、各フレームの符号化コードス
トリームをJPEG2000復号部１０に送出する場合におい
て、通常は、静止画符号化コードストリーム１０５と動
画符号化コードストリーム１０６の両方を、MJ2 ファイ
ル７０は有しているので、双方の符号化コードストリー
ム１０５、１０６がJPEG2000復号部１０に送出されて、
ここで復号が行われることになる。
ドストリームを解読して、各フレームの符号化コードス
トリームをJPEG2000復号部１０に送出する場合におい
て、通常は、静止画符号化コードストリーム１０５と動
画符号化コードストリーム１０６の両方を、MJ2 ファイ
ル７０は有しているので、双方の符号化コードストリー
ム１０５、１０６がJPEG2000復号部１０に送出されて、
ここで復号が行われることになる。
【００２５】ところで、Motion-JPEG2000 において、動
画像の場合は、１秒当りに出力すべきフレーム数が可変
にできるので、例えば動画符号化コードストリーム１０
６の符号化フレームレートに、忠実に従って出力しない
と、スロー再生または逆に早送りの様な、違和感のある
動画像が表示されるという問題が生ずる。従って、実際
に指定された所定のフレームレートで動画像を表示する
べく、メタデータ情報１０７がシステム制御部１１に送
られる。このシステム制御部１１からはJPEG2000復号部
１０に対し、復号及び出力のタイミングを示す制御信号
１１２が送出され、決められたタイミングで復号画像１
１５が出力される。
画像の場合は、１秒当りに出力すべきフレーム数が可変
にできるので、例えば動画符号化コードストリーム１０
６の符号化フレームレートに、忠実に従って出力しない
と、スロー再生または逆に早送りの様な、違和感のある
動画像が表示されるという問題が生ずる。従って、実際
に指定された所定のフレームレートで動画像を表示する
べく、メタデータ情報１０７がシステム制御部１１に送
られる。このシステム制御部１１からはJPEG2000復号部
１０に対し、復号及び出力のタイミングを示す制御信号
１１２が送出され、決められたタイミングで復号画像１
１５が出力される。
【００２６】また、図１の破線にて音声復号部１２を示
すているが、これは音声情報をMJ2ファイルが包含して
いた場合に有用な構成である。MJ2 ファイルフォーマッ
トは、静止画・動画のみならず、音声やテキスト情報も
含めたメタデータを含めることができるフォーマットで
あり、音声を圧縮または非圧縮で含めることが可能であ
る。
すているが、これは音声情報をMJ2ファイルが包含して
いた場合に有用な構成である。MJ2 ファイルフォーマッ
トは、静止画・動画のみならず、音声やテキスト情報も
含めたメタデータを含めることができるフォーマットで
あり、音声を圧縮または非圧縮で含めることが可能であ
る。
【００２７】図１の例では、MJ2 ファイル解読部９で解
読された音声符号化ストリーム１１０が圧縮符号化され
ている場合には、音声復号部１２において復号されて、
音声データ１１４として例えばスピーカから発せられ
る。他方、動画像の場合と同様に、同期をとる必要があ
ることから、上記メタデータ情報１０７の情報を元に、
音声を出力するタイミングを示す制御信号１１３が音声
復号部１２に送出されて、最終的に動画像１１５と音声
１１４との同期が取られることになる。
読された音声符号化ストリーム１１０が圧縮符号化され
ている場合には、音声復号部１２において復号されて、
音声データ１１４として例えばスピーカから発せられ
る。他方、動画像の場合と同様に、同期をとる必要があ
ることから、上記メタデータ情報１０７の情報を元に、
音声を出力するタイミングを示す制御信号１１３が音声
復号部１２に送出されて、最終的に動画像１１５と音声
１１４との同期が取られることになる。
【００２８】第２の実施の形態 本発明の第２実施の形態として、Motion-JPEG2000 ファ
イルフォーマットのファイルの生成方法について説明す
る。このMJ2 ファイルの生成方法が適用される装置は、
１フレーム以上の画像をJPEG2000符号化手段により符号
化し、生成された１フレーム以上のJPEG2000符号化コー
ドストリームの中から１フレームだけを任意に抽出して
記録する手段（静止画符号化コードストリーム記録手
段）と、同該すべてのまたは一部の複数フレームのJPEG
2000符号化コードストリームを抽出して記録する手段
（動画符号化コードストリーム記録手段）と、上記２つ
の手段によって記録されたデータを別々の領域に格納す
る手段と、上記複数フレームの画像情報の他、メタデー
タ情報を生成する手段と、上記すべてのJPEG2000符号化
コードストリームとメタデータ情報をまとめて１つのフ
ァイルを生成する手段を備えたものである。図４は、こ
のようなMJ2 ファイルを生成するための構成例を示すも
のである。
イルフォーマットのファイルの生成方法について説明す
る。このMJ2 ファイルの生成方法が適用される装置は、
１フレーム以上の画像をJPEG2000符号化手段により符号
化し、生成された１フレーム以上のJPEG2000符号化コー
ドストリームの中から１フレームだけを任意に抽出して
記録する手段（静止画符号化コードストリーム記録手
段）と、同該すべてのまたは一部の複数フレームのJPEG
2000符号化コードストリームを抽出して記録する手段
（動画符号化コードストリーム記録手段）と、上記２つ
の手段によって記録されたデータを別々の領域に格納す
る手段と、上記複数フレームの画像情報の他、メタデー
タ情報を生成する手段と、上記すべてのJPEG2000符号化
コードストリームとメタデータ情報をまとめて１つのフ
ァイルを生成する手段を備えたものである。図４は、こ
のようなMJ2 ファイルを生成するための構成例を示すも
のである。
【００２９】図４に示す装置は、JPEG2000符号化部１、
制御部２、静止画コードストリーム抽出部３、動画コー
ドストリーム抽出部４、メタデータ情報生成部５、MJ2
ファイル生成部６、音声符号化部８とを有して構成され
ている。また、この図４の破線で囲んだ部分が、MJ2 フ
ァイル生成部７である。
制御部２、静止画コードストリーム抽出部３、動画コー
ドストリーム抽出部４、メタデータ情報生成部５、MJ2
ファイル生成部６、音声符号化部８とを有して構成され
ている。また、この図４の破線で囲んだ部分が、MJ2 フ
ァイル生成部７である。
【００３０】この図４において、入力画像１００（動画
または静止画）は、JPEG2000符号化部１で、JPEG2000の
規格に従って符号化を行い、符号化ストリーム１０１を
出力する。制御部２では、上記符号化ストリーム１０１
が静止画であった場合には、静止画符号化コードストリ
ーム１０２として、静止画コードストリーム抽出部３に
送出する。また、上記符号化ストリーム１０１が動画で
あった場合には、動画符号化コードストリーム１０３と
して、動画コードストリーム抽出部４に送出する。
または静止画）は、JPEG2000符号化部１で、JPEG2000の
規格に従って符号化を行い、符号化ストリーム１０１を
出力する。制御部２では、上記符号化ストリーム１０１
が静止画であった場合には、静止画符号化コードストリ
ーム１０２として、静止画コードストリーム抽出部３に
送出する。また、上記符号化ストリーム１０１が動画で
あった場合には、動画符号化コードストリーム１０３と
して、動画コードストリーム抽出部４に送出する。
【００３１】ここで、上記符号化ストリーム１０１が動
画の場合には、例えば秒当りのフレームレートや動画像
の長さ（シーケンスの秒数、又は全フレーム数）等のメ
タデータの制御情報１０４を、メタデータ情報生成部５
に送出する。
画の場合には、例えば秒当りのフレームレートや動画像
の長さ（シーケンスの秒数、又は全フレーム数）等のメ
タデータの制御情報１０４を、メタデータ情報生成部５
に送出する。
【００３２】また、オプションとして、音声信号１０９
を音声符号化部８で圧縮して生成された音声符号化スト
リーム１１０が存在する場合には、音声メタデータ情報
１０８をメタデータ情報生成部５に送出する。この場
合、メタデータ情報生成部５で生成されるメタデータ
は、音声と動画像の双方の同期情報を含めた形となる。
このようなメタデータは、図２あるいは図３のMJ2 ファ
イル７０のメタデータ情報７３にパッキングされて、図
４のデータ１０７として送出される。
を音声符号化部８で圧縮して生成された音声符号化スト
リーム１１０が存在する場合には、音声メタデータ情報
１０８をメタデータ情報生成部５に送出する。この場
合、メタデータ情報生成部５で生成されるメタデータ
は、音声と動画像の双方の同期情報を含めた形となる。
このようなメタデータは、図２あるいは図３のMJ2 ファ
イル７０のメタデータ情報７３にパッキングされて、図
４のデータ１０７として送出される。
【００３３】静止画符号化コードストリーム１０２は、
図２あるいは図３のMJ2 ファイル７０内のMJ2 ファイル
６０中の複数個あるJPEG2000 Codestreamの内の先頭Box
の符号化コードストリーム６２にパッキングされて、
静止画コードストリーム１０５として送出される。同じ
く、動画符号化コードストリーム１０３は、MJ2 ファイ
ル７０内の複数フレーム符号化コードストリーム７２に
パッキングされて、動画コードストリーム１０６として
送出される。
図２あるいは図３のMJ2 ファイル７０内のMJ2 ファイル
６０中の複数個あるJPEG2000 Codestreamの内の先頭Box
の符号化コードストリーム６２にパッキングされて、
静止画コードストリーム１０５として送出される。同じ
く、動画符号化コードストリーム１０３は、MJ2 ファイ
ル７０内の複数フレーム符号化コードストリーム７２に
パッキングされて、動画コードストリーム１０６として
送出される。
【００３４】以上のようにして生成された各データ１０
５、１０６、１０７、及び必要に応じて付加される音声
符号化ストリーム１１０を、MJ2 ファイル生成部６に送
り、MJ2 ファイル生成部６から１つのファイル（MJ2 フ
ァイル）１１１として出力する。以上がMJ2 ファイル生
成の実施の形態である。
５、１０６、１０７、及び必要に応じて付加される音声
符号化ストリーム１１０を、MJ2 ファイル生成部６に送
り、MJ2 ファイル生成部６から１つのファイル（MJ2 フ
ァイル）１１１として出力する。以上がMJ2 ファイル生
成の実施の形態である。
【００３５】第３の実施の形態 本発明の第３の実施の形態は、上記第２の実施の形態に
おける静止画符号化コードストリームとして、上記動画
符号化コードストリームの全フレームの内の先頭フレー
ム、途中の任意のフレーム（例えば最も特徴的なフレー
ム）、動画符号化コードストリームとは別のフレーム等
の符号化コードストリームを用いるものである。
おける静止画符号化コードストリームとして、上記動画
符号化コードストリームの全フレームの内の先頭フレー
ム、途中の任意のフレーム（例えば最も特徴的なフレー
ム）、動画符号化コードストリームとは別のフレーム等
の符号化コードストリームを用いるものである。
【００３６】先ず、上記動画符号化コードストリームの
全フレームの先頭フレームを用いる場合は、一般的には
１番実現し易い方法であり、JPEG2000符号化部１で、入
力された動画像の先頭フレームだけを静止画符号化スト
リームとして、記録あるいは記憶しておくことで実現で
きる。他方、途中のフレームの符号化ストリームを上記
静止画符号化ストリームとして記録するためには、その
際に外部より割り込み制御をかける必要がある。また、
上記静止画符号化ストリームを入力動画像の先頭フレー
ムを符号化して生成されたストリームとし、２フレーム
以降を符号化して生成されたストリームを上記動画符号
化ストリームとすることもできる。また、上記動画符号
化ストリームとは独立の符号化コードストリームを上記
静止画コードストリームとして用いてもよい。
全フレームの先頭フレームを用いる場合は、一般的には
１番実現し易い方法であり、JPEG2000符号化部１で、入
力された動画像の先頭フレームだけを静止画符号化スト
リームとして、記録あるいは記憶しておくことで実現で
きる。他方、途中のフレームの符号化ストリームを上記
静止画符号化ストリームとして記録するためには、その
際に外部より割り込み制御をかける必要がある。また、
上記静止画符号化ストリームを入力動画像の先頭フレー
ムを符号化して生成されたストリームとし、２フレーム
以降を符号化して生成されたストリームを上記動画符号
化ストリームとすることもできる。また、上記動画符号
化ストリームとは独立の符号化コードストリームを上記
静止画コードストリームとして用いてもよい。
【００３７】第４の実施の形態 本発明の第４の実施の形態は、上記動画符号化コードス
トリームの各フレームの全てが、JPEG2000規格で定義さ
れたコード開始を示すSOC(Start Of Code)コードから始
まり、JPEG2000規格で定義されたコード終了を示すEOC
(End Of Code)コードで終結するようにしてものであ
る。
トリームの各フレームの全てが、JPEG2000規格で定義さ
れたコード開始を示すSOC(Start Of Code)コードから始
まり、JPEG2000規格で定義されたコード終了を示すEOC
(End Of Code)コードで終結するようにしてものであ
る。
【００３８】ここで、図５は、JPEG2000規格で定義され
ている１フレームの符号化コードストリームの各パラメ
ータの構成を示す図である。
ている１フレームの符号化コードストリームの各パラメ
ータの構成を示す図である。
【００３９】JPEG2000規格では、符号化対象の画像を任
意のサイズのタイルに分割して、このタイル毎に符号化
を行なう手段を有しており、それを実現するために、図
５に示すように、メインヘッダ（Main Header） ３１
と、タイルヘッダ（Tile-partHeader）３２及び符号化
されたビットストリーム（Bit stream）４６の組の複数
組とから構成されている。図５では簡略化してもう１組
のタイルヘッダ（Tile-part Header）３３及びビットス
トリーム（Bit stream）４７を示しているが、さらに組
数を増やしてもよいことは勿論である。
意のサイズのタイルに分割して、このタイル毎に符号化
を行なう手段を有しており、それを実現するために、図
５に示すように、メインヘッダ（Main Header） ３１
と、タイルヘッダ（Tile-partHeader）３２及び符号化
されたビットストリーム（Bit stream）４６の組の複数
組とから構成されている。図５では簡略化してもう１組
のタイルヘッダ（Tile-part Header）３３及びビットス
トリーム（Bit stream）４７を示しているが、さらに組
数を増やしてもよいことは勿論である。
【００４０】メインヘッダ（Main Header） ３１は、符
号化コードストリームの開始を示す開始コードSOC（Sta
rt of Codestream）４１と、メインヘッダマーカセグメ
ント（main）４２とを有し、タイルヘッダ（Tile-part
Header）３２は、タイルパートの開始を示すコードSOT
（Start of Tile-parts）４４と、タイルパートヘッダ
マーカセグメント（Tile0 tile-part0）４４と、コード
SOD（Start of Data）４５とを有している。タイルヘッ
ダ（Tile-part Header）３２の最後に位置するコードSO
D ３２に続いて、タイルパートの符号化データであるビ
ットストリーム（Bit stream）４６が配される。また、
符号化コードストリームの最後には、コードの終端を示
すコードEOC（End of Codestream）が設けられる。
号化コードストリームの開始を示す開始コードSOC（Sta
rt of Codestream）４１と、メインヘッダマーカセグメ
ント（main）４２とを有し、タイルヘッダ（Tile-part
Header）３２は、タイルパートの開始を示すコードSOT
（Start of Tile-parts）４４と、タイルパートヘッダ
マーカセグメント（Tile0 tile-part0）４４と、コード
SOD（Start of Data）４５とを有している。タイルヘッ
ダ（Tile-part Header）３２の最後に位置するコードSO
D ３２に続いて、タイルパートの符号化データであるビ
ットストリーム（Bit stream）４６が配される。また、
符号化コードストリームの最後には、コードの終端を示
すコードEOC（End of Codestream）が設けられる。
【００４１】この図５から明らかなように、１つの符号
化コードストリームは、コードSOC（Start of Code）
から始まり、EOC （End of Code） で終結している。こ
れを動画に拡張したフォーマットを図６に示す。この図
６は、図５の構成を元にして、静止画の連続した符号化
ビットストリームをシーケンシャルに繋げた例を示して
いる。１ピクチャ（フレーム）は図５に示したようにSO
C で始まりEOC で終わるので、これらを連続して、ピク
チャＰ１，Ｐ２，・・・のように並べたものである。各
フレーム（ピクチャ）が独立してSOCからEOCで完結して
いる。
化コードストリームは、コードSOC（Start of Code）
から始まり、EOC （End of Code） で終結している。こ
れを動画に拡張したフォーマットを図６に示す。この図
６は、図５の構成を元にして、静止画の連続した符号化
ビットストリームをシーケンシャルに繋げた例を示して
いる。１ピクチャ（フレーム）は図５に示したようにSO
C で始まりEOC で終わるので、これらを連続して、ピク
チャＰ１，Ｐ２，・・・のように並べたものである。各
フレーム（ピクチャ）が独立してSOCからEOCで完結して
いる。
【００４２】第５の実施の形態 本発明の第５の実施の形態は、上記図１のファイル解読
部９として、上記複数フレームの動画符号化コードスト
リームのあるフレームにJPEG2000規格で規定されたコー
ド終了を示すEOC(End Of Code)コードが存在しないと
き、JPEG2000規格で規定された次のコード開始を示すSO
C(Start Of Code)コードを探索するか又はその時点で復
号を終了するようにしたものである。
部９として、上記複数フレームの動画符号化コードスト
リームのあるフレームにJPEG2000規格で規定されたコー
ド終了を示すEOC(End Of Code)コードが存在しないと
き、JPEG2000規格で規定された次のコード開始を示すSO
C(Start Of Code)コードを探索するか又はその時点で復
号を終了するようにしたものである。
【００４３】すなわちこれは、何らかの理由であるフレ
ームのEOC コードが欠落してしまった場合には、上記第
１の実施の形態で述べたMotion-JPEG2000 のファイル読
み取りのための構成において、次のフレームのSOC コー
ドを探索する手段を有していれば、そのSOC を発見した
時点で、次のフレームの復号に移れるので問題は発生し
ないことを考慮したものである。あるいは、SOC コード
を探索せずに、その時点で復号を終了するようにしても
よい。
ームのEOC コードが欠落してしまった場合には、上記第
１の実施の形態で述べたMotion-JPEG2000 のファイル読
み取りのための構成において、次のフレームのSOC コー
ドを探索する手段を有していれば、そのSOC を発見した
時点で、次のフレームの復号に移れるので問題は発生し
ないことを考慮したものである。あるいは、SOC コード
を探索せずに、その時点で復号を終了するようにしても
よい。
【００４４】以上説明したような本発明の実施の形態に
よれば、PEG-2000 規格で定められているJP2ファイルフ
ォーマットと、この動画版であるMotion-JPEG2000 のMJ
2ファイルフォーマットとの互換性を取ることができる
ので、MJ2 ファイル解読器が、どちらのファイルも読
め、静止画・動画を共に復号出来、利便性が向上すると
いう効果がある。
よれば、PEG-2000 規格で定められているJP2ファイルフ
ォーマットと、この動画版であるMotion-JPEG2000 のMJ
2ファイルフォーマットとの互換性を取ることができる
ので、MJ2 ファイル解読器が、どちらのファイルも読
め、静止画・動画を共に復号出来、利便性が向上すると
いう効果がある。
【００４５】また、動画像のMJ2 ファイルを生成する
際、メタデータ情報を同時に生成し、画像以外にも例え
ば音声ストリームをまとめてファイル化することが出来
るので、画像と音声を同期を取ってMJ2ファイルに記
録、または表示出来るので、プレゼンテーション等でも
効果を発揮する。また、メタデータを効率良くファイル
化出来るという効果もある。
際、メタデータ情報を同時に生成し、画像以外にも例え
ば音声ストリームをまとめてファイル化することが出来
るので、画像と音声を同期を取ってMJ2ファイルに記
録、または表示出来るので、プレゼンテーション等でも
効果を発揮する。また、メタデータを効率良くファイル
化出来るという効果もある。
【００４６】ここで、上述したJPEG2000やMotion-JPEG2
000 の具体的な応用例としては、電子カメラ、カムコー
ダ、監視画像用ビデオコーデック、放送用VTR のコーデ
ック、携帯・移動体画像送受信端末（ＰＤＡ）、プリン
タ、衛星画像・医用用画像等のコーデックまたはそのソ
フトウェアモジュール、ゲーム、３次元CGで用いるテキ
スチャの圧縮・伸長器またはそのソフトウェアモジュー
ル等が挙げられる。
000 の具体的な応用例としては、電子カメラ、カムコー
ダ、監視画像用ビデオコーデック、放送用VTR のコーデ
ック、携帯・移動体画像送受信端末（ＰＤＡ）、プリン
タ、衛星画像・医用用画像等のコーデックまたはそのソ
フトウェアモジュール、ゲーム、３次元CGで用いるテキ
スチャの圧縮・伸長器またはそのソフトウェアモジュー
ル等が挙げられる。
【００４７】なお、本発明は、上述の実施の形態に限定
されるものではなく、例えば第１の符号化ファイル、第
２の符号化ファイルは、JPEG2000ファイル、Motion-JPE
G2000 ファイルに限定されないことは勿論である。
されるものではなく、例えば第１の符号化ファイル、第
２の符号化ファイルは、JPEG2000ファイル、Motion-JPE
G2000 ファイルに限定されないことは勿論である。
【００４８】
【発明の効果】本発明は、１つ以上の第１の符号化コー
ドストリームとヘッダ情報とから構成される第１の符号
化ファイルに加え、複数フレームの動画符号化コードス
トリーム、メタデータ情報を付加して生成される第２の
符号化ファイル復号処理する際に、第１の符号化ファイ
ル内の先頭の第１の符号化コードストリームを読み出す
と共に、第１の符号化ファイル内の先頭以外の第１の符
号化コードストリームを棄却または無視するようにし、
読み出された第１の符号化ファイル内の先頭の第１の符
号化コードストリームを復号することにより、第１の符
号化ファイルと第２の符号化ファイルとの互換性を高
め、動画及び静止画の復号及び表示が容易に実現でき
る。
ドストリームとヘッダ情報とから構成される第１の符号
化ファイルに加え、複数フレームの動画符号化コードス
トリーム、メタデータ情報を付加して生成される第２の
符号化ファイル復号処理する際に、第１の符号化ファイ
ル内の先頭の第１の符号化コードストリームを読み出す
と共に、第１の符号化ファイル内の先頭以外の第１の符
号化コードストリームを棄却または無視するようにし、
読み出された第１の符号化ファイル内の先頭の第１の符
号化コードストリームを復号することにより、第１の符
号化ファイルと第２の符号化ファイルとの互換性を高
め、動画及び静止画の復号及び表示が容易に実現でき
る。
【００４９】また、本発明は、複数フレームの画像を第
１の符号化規格に基づいて符号化し第１の符号化コード
ストリームを生成し、上記複数フレームの第１の符号化
コードストリームの中から１フレームの符号化コードス
トリームだけを任意に抽出し、上記第１の符号化コード
ストリームの全て又は一部の複数フレームの符号化コー
ドストリームを抽出し、上記抽出された複数フレームの
符号化コードストリームに関するメタデータ情報を生成
し、上記全ての第１の符号化コードストリームとメタデ
ータ情報をまとめて１つの第２の符号化ファイルを生成
することにより、第１の符号化ファイルとの互換性の高
い第２の符号化ファイルを生成することができる。
１の符号化規格に基づいて符号化し第１の符号化コード
ストリームを生成し、上記複数フレームの第１の符号化
コードストリームの中から１フレームの符号化コードス
トリームだけを任意に抽出し、上記第１の符号化コード
ストリームの全て又は一部の複数フレームの符号化コー
ドストリームを抽出し、上記抽出された複数フレームの
符号化コードストリームに関するメタデータ情報を生成
し、上記全ての第１の符号化コードストリームとメタデ
ータ情報をまとめて１つの第２の符号化ファイルを生成
することにより、第１の符号化ファイルとの互換性の高
い第２の符号化ファイルを生成することができる。
【００５０】具体的には、JPEG2000規格で定められてい
るJP2 ファイルフォーマットと、この動画版であるMoti
on-JPEG2000 のMJ2 ファイルフォーマットとの互換性を
取ることが出来るので、MJ2 ファイル解読器が、どちら
のファイルも読め、静止画・動画を共に復号出来、利便
性が向上する。また、動画像のMJ2 ファイルを生成する
際にメタデータ情報を同時に生成し、画像以外にも例え
ば音声ストリームをまとめてファイル化することによ
り、画像と音声を同期をとり得るように、MJ2 ファイル
の生成やMJ2 ファイルの復号を行うことができる。
るJP2 ファイルフォーマットと、この動画版であるMoti
on-JPEG2000 のMJ2 ファイルフォーマットとの互換性を
取ることが出来るので、MJ2 ファイル解読器が、どちら
のファイルも読め、静止画・動画を共に復号出来、利便
性が向上する。また、動画像のMJ2 ファイルを生成する
際にメタデータ情報を同時に生成し、画像以外にも例え
ば音声ストリームをまとめてファイル化することによ
り、画像と音声を同期をとり得るように、MJ2 ファイル
の生成やMJ2 ファイルの復号を行うことができる。
【図１】本発明の実施の形態となる信号処理装置の概略
構成を示すブロック図である。
構成を示すブロック図である。
【図２】JPEG2000（JP2）ファイルフォーマット及びMot
ion-JPEG2000（MJ2）ファイルフォーマットを説明する
ための図である。
ion-JPEG2000（MJ2）ファイルフォーマットを説明する
ための図である。
【図３】Motion-JPEG2000（MJ2）ファイルの読み出しを
説明するための図である。
説明するための図である。
【図４】本発明の実施の形態となるファイル生成方法が
適用された装置の概略構成を示すブロック図である。
適用された装置の概略構成を示すブロック図である。
【図５】JPEG2000規格のシンタックスとして規定されて
いる符号化ビットストリームの構造を示す図である。
いる符号化ビットストリームの構造を示す図である。
【図６】符号化ビットストリームの連続したピクチャの
データ構造を示す図である。
データ構造を示す図である。
１ JPEG2000符号化部、 ２ 制御部、 ３ 静止画コ
ードストリーム抽出部、 ４ 動画コードストリーム抽
出部、 ５ メタデータ情報生成部、 ６ MJ2ファイ
ル生成部、 ８ 音声符号化部、 ９ MJ2ファイル解
読部、 JPEG2000復号部、 １１ システム制御部、
１２ 音声復号部
ードストリーム抽出部、 ４ 動画コードストリーム抽
出部、 ５ メタデータ情報生成部、 ６ MJ2ファイ
ル生成部、 ８ 音声符号化部、 ９ MJ2ファイル解
読部、 JPEG2000復号部、 １１ システム制御部、
１２ 音声復号部
Claims (15)
- 【請求項１】 １つ以上の第１の符号化コードストリー
ムとヘッダ情報とから構成される第１の符号化ファイル
に加え、複数フレームの動画符号化コードストリーム、
メタデータ情報を付加して生成される第２の符号化ファ
イルが入力される信号処理装置であって、 上記第１の符号化ファイル内の先頭の上記第１の符号化
コードストリームを読み出すと共に、上記第１の符号化
ファイル内の先頭以外の上記第１の符号化コードストリ
ームを棄却または無視するファイル解読手段と、 上記ファイル解読手段から読み出された上記第１の符号
化ファイル内の先頭の上記第１の符号化コードストリー
ムを復号する復号手段とを有することを特徴とする信号
処理装置。 - 【請求項２】 上記第１の符号化ファイルはJPEG2000の
ファイルフォーマットのファイルであり、上記第２の符
号化ファイルはMotion-JPEG2000 のファイルフォーマッ
トのファイルであることを特徴とする請求項１記載の信
号処理装置。 - 【請求項３】 上記ファイル解読手段は、上記複数フレ
ームの動画符号化コードストリームを解読して、各フレ
ームの符号化コードストリームを上記復号手段に送出す
ることを特徴とする請求項１記載の信号処理装置。 - 【請求項４】 上記復号手段の復号及び出力を制御する
システム制御手段を有し、 上記ファイル解読手段は、上記複数フレームのメタデー
タ情報を解読して上記システム制御手段に渡し、 上記システム制御手段は、上記復号手段による上記複数
フレームの動画符号化コードストリームの復号及び出力
を制御して、復号された動画像を同期をとって表示する
ことを特徴とする請求項１記載の信号処理装置。 - 【請求項５】 上記第２の符号化ファイルには音声符号
化コードストリームが含まれ、 上記音声符号化コードストリームを復号する音声復号手
段を有し、 上記システム制御手段は、上記復号手段及び上記音声復
号手段を制御して、上記復号手段からの複数フレームの
復号された動画像と上記音声復号手段からの復号された
音声との同期をとることを特徴とする請求項４記載の信
号処理装置。 - 【請求項６】 上記ファイル解読手段は、上記複数フレ
ームの動画符号化コードストリームのあるフレームにJP
EG2000規格で規定されたコード終了を示すEOC(End Of C
ode)コードが存在しないとき、JPEG2000規格で規定され
た次のコード開始を示すSOC(Start Of Code)コードを探
索するか又はその時点で復号を終了することを特徴とす
る請求項２記載の信号処理装置。 - 【請求項７】 １つ以上の第１の符号化コードストリー
ムとヘッダ情報とから構成される第１の符号化ファイル
に加え、複数フレームの動画符号化コードストリーム、
メタデータ情報を付加して生成される第２の符号化ファ
イル復号処理する信号処理方法であって、 上記第１の符号化ファイル内の先頭の上記第１の符号化
コードストリームを読み出すと共に、上記第１の符号化
ファイル内の先頭以外の上記第１の符号化コードストリ
ームを棄却または無視するファイル解読工程と、 上記ファイル解読工程により読み出された上記第１の符
号化ファイル内の先頭の上記第１の符号化コードストリ
ームを復号する復号工程とを有することを特徴とする信
号処理方法。 - 【請求項８】 上記第１の符号化ファイルはJPEG2000の
ファイルフォーマットのファイルであり、上記第２の符
号化ファイルはMotion-JPEG2000 のファイルフォーマッ
トのファイルであることを特徴とする請求項７記載の信
号処理方法。 - 【請求項９】 複数フレームの画像を第１の符号化規格
に基づいて符号化し第１の符号化コードストリームを生
成する工程と、 上記複数フレームの第１の符号化コードストリームの中
から１フレームの符号化コードストリームだけを任意に
抽出する静止画抽出工程と、 上記第１の符号化コードストリームの全て又は一部の複
数フレームの符号化コードストリームを抽出する動画抽
出工程と、 上記動画像抽出工程にて抽出された複数フレームの符号
化コードストリームに関するメタデータ情報を生成する
工程と、 上記全ての第１の符号化コードストリームとメタデータ
情報をまとめて１つの第２の符号化ファイルを生成する
工程とを有することを特徴とするファイル生成方法。 - 【請求項１０】 上記第１の符号化ファイルはJPEG2000
のファイルフォーマットのファイルであり、上記第２の
符号化ファイルはMotion-JPEG2000 のファイルフォーマ
ットのファイルであることを特徴とする請求項９記載の
ファイル生成方法。 - 【請求項１１】 上記静止画抽出工程で抽出された符号
化コードストリームは、上記動画抽出工程で抽出された
符号化コードストリームの全フレームの先頭フレームで
あることを特徴とする請求項９記載のファイル生成方
法。 - 【請求項１２】 上記静止画抽出工程で抽出された符号
化コードストリームは、外部入力情報によって指定され
た、上記動画抽出工程で抽出された符号化コードストリ
ーム中の最も特徴的な画像の符号化コードストリームで
あることを特徴とする請求項９記載のファイル生成方
法。 - 【請求項１３】 上記静止画抽出工程で抽出された符号
化コードストリームは、上記動画抽出工程で抽出された
符号化コードストリーム中の１フレーム分だけを抽出し
たものであることを特徴とする請求項９記載のファイル
生成方法。 - 【請求項１４】 上記静止画抽出工程で抽出された符号
化コードストリームは、上記動画抽出工程で抽出された
符号化コードストリームとは独立のものであることを特
徴とする請求項９記載のファイル生成方法。 - 【請求項１５】 上記動画抽出工程で抽出された符号化
コードストリームは、全フレームが、JPEG2000規格で規
定されたSOC(Start Of Code)コードから始まりEOC(End
Of Code)コードで終結していることを特徴とする請求項
１０記載のファイル生成方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000245400A JP4174960B2 (ja) | 2000-08-11 | 2000-08-11 | 信号処理装置及び方法並びにファイル生成方法 |
| US09/920,768 US20020021843A1 (en) | 2000-08-11 | 2001-08-03 | Signal processing device, signal processing method and file generating method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000245400A JP4174960B2 (ja) | 2000-08-11 | 2000-08-11 | 信号処理装置及び方法並びにファイル生成方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002058025A true JP2002058025A (ja) | 2002-02-22 |
| JP4174960B2 JP4174960B2 (ja) | 2008-11-05 |
Family
ID=18735936
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000245400A Expired - Fee Related JP4174960B2 (ja) | 2000-08-11 | 2000-08-11 | 信号処理装置及び方法並びにファイル生成方法 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20020021843A1 (ja) |
| JP (1) | JP4174960B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPWO2003101102A1 (ja) * | 2002-05-24 | 2005-09-29 | 三菱電機株式会社 | 携帯通信装置の動画ファイル再生方法及び携帯通信装置用の動画ファイル再生装置 |
| US7526144B2 (en) | 2003-02-20 | 2009-04-28 | Ricoh Company, Ltd. | Image processing method, image expansion method, image output method, image conversion method, image processing apparatus, image expansion apparatus, image output apparatus, image conversion apparatus, and computer-readable storage medium |
| US7680398B2 (en) | 2003-06-11 | 2010-03-16 | Panasonic Corporation | Recording device, information recording medium and recording method |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003169333A (ja) * | 2001-09-21 | 2003-06-13 | Ricoh Co Ltd | 符号列作成装置、画像伸長システム、画像伸長装置、画像提供システム、符号列作成方法、プログラム及び記録媒体 |
| JP3869714B2 (ja) * | 2001-12-17 | 2007-01-17 | 三洋電機株式会社 | 画像記録装置 |
| DE10354556B4 (de) * | 2002-11-25 | 2008-10-09 | Samsung Electronics Co., Ltd., Suwon | Vorrichtung und Verfahren zum Anzeigen von Bildern in einem mobilen Endgerät |
| JP2004186871A (ja) * | 2002-12-02 | 2004-07-02 | Ricoh Co Ltd | 画像処理装置、撮像装置、プログラム及び記憶媒体 |
| US8769395B2 (en) * | 2002-12-13 | 2014-07-01 | Ricoh Co., Ltd. | Layout objects as image layers |
| US8036475B2 (en) * | 2002-12-13 | 2011-10-11 | Ricoh Co., Ltd. | Compression for segmented images and other types of sideband information |
| US20060158677A1 (en) * | 2005-01-18 | 2006-07-20 | Atousa Soroushi | Enhanced image data processing method and apparatus |
| JP4618676B2 (ja) * | 2005-04-28 | 2011-01-26 | 株式会社リコー | 構造化文書符号の転送方法、画像処理システム、サーバ装置、プログラム及び情報記録媒体 |
| KR101343527B1 (ko) | 2010-11-17 | 2013-12-19 | 한국전자통신연구원 | 디지털 시네마 컨텐츠 생성 및 재생 방법, 및 이를 이용한 디지털 시네마 컨텐츠 생성 및 재생 장치 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4053737A (en) * | 1976-06-25 | 1977-10-11 | Recognition Equipment Incorporated | Magnetic reader for bar encoded characters |
| US5870497A (en) * | 1991-03-15 | 1999-02-09 | C-Cube Microsystems | Decoder for compressed video signals |
| AUPO951497A0 (en) * | 1997-09-29 | 1997-10-23 | Canon Information Systems Research Australia Pty Ltd | A method for data compression |
| US5990812A (en) * | 1997-10-27 | 1999-11-23 | Philips Electronics North America Corporation | Universally programmable variable length decoder |
| JP3613983B2 (ja) * | 1998-06-25 | 2005-01-26 | ソニー株式会社 | 画像生成装置及び方法、並びに電子スチルカメラ |
-
2000
- 2000-08-11 JP JP2000245400A patent/JP4174960B2/ja not_active Expired - Fee Related
-
2001
- 2001-08-03 US US09/920,768 patent/US20020021843A1/en not_active Abandoned
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPWO2003101102A1 (ja) * | 2002-05-24 | 2005-09-29 | 三菱電機株式会社 | 携帯通信装置の動画ファイル再生方法及び携帯通信装置用の動画ファイル再生装置 |
| US7526144B2 (en) | 2003-02-20 | 2009-04-28 | Ricoh Company, Ltd. | Image processing method, image expansion method, image output method, image conversion method, image processing apparatus, image expansion apparatus, image output apparatus, image conversion apparatus, and computer-readable storage medium |
| US7680398B2 (en) | 2003-06-11 | 2010-03-16 | Panasonic Corporation | Recording device, information recording medium and recording method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4174960B2 (ja) | 2008-11-05 |
| US20020021843A1 (en) | 2002-02-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4515465B2 (ja) | 動画撮影装置および動画撮影方法、記録媒体に記録された映像信号を再生する動画再生装置および動画再生方法 | |
| US6690881B1 (en) | Digital camera apparatus and recording method thereof | |
| JP2004221999A (ja) | 画像処理方法 | |
| JP4174960B2 (ja) | 信号処理装置及び方法並びにファイル生成方法 | |
| JP5369599B2 (ja) | 映像符号化装置、映像符号化方法 | |
| KR20060051064A (ko) | 기록 장치 및 기록 방법, 재생 장치 및 재생 방법, 및프로그램 | |
| KR100578438B1 (ko) | 비디오 캡쳐 장치 및 저속 데이타 링크를 통해 고품질의 비디오를 송신하는 방법 | |
| KR20020003921A (ko) | 동영상 메일 시스템 및 방법 | |
| US9064294B2 (en) | Image processing apparatus and method | |
| WO2003036967A1 (fr) | Appareil et procede de traitement de signaux video, programme et moyen d'enregistrement | |
| JP2003023600A (ja) | 画像処理装置、動画記録再生装置、画像処理方法、プログラム、及びコンピュータ読み取り可能な記憶媒体 | |
| JP4767916B2 (ja) | 動画像符号化データ変換装置 | |
| JP3166572B2 (ja) | 動画像音声圧縮装置 | |
| JP2007060498A (ja) | Ｊｐｅｇ圧縮装置 | |
| KR20070021164A (ko) | 동영상 촬영 장치, 동영상 재생 장치 및 동영상 촬영 방법,동영상 재생 방법 | |
| JP2003078876A (ja) | 映像信号の記録方法及び装置 | |
| JP2020170998A (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
| JP2002094996A (ja) | 受信装置 | |
| JP2004040673A (ja) | 監視カメラの画像にタイムコードを付加する方法及び装置 | |
| JP2006304103A (ja) | 動画記録装置、および動画記録再生装置 | |
| JP2008092503A (ja) | 撮像装置 | |
| JP2002374500A (ja) | 画像記録装置および方法、画像再生装置および方法、磁気テープ、プログラム格納媒体、並びにプログラム | |
| JP2004208213A (ja) | ビデオ信号処理システムおよび該システムを構成するビデオ信号処理装置、携帯端末、ビデオ信号符号化装置、ビデオ信号記録装置、ビデオ信号符号化復号化装置、ならびにこれらの装置を用いた監視システム | |
| JPH11355773A (ja) | 画像圧縮装置および画像再生装置 | |
| JP2002010291A (ja) | 映像信号変換装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050621 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050822 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060808 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061010 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070918 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071109 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080729 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080811 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110829 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |