JP2000270018A - 多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体 - Google Patents
多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体Info
- Publication number
- JP2000270018A JP2000270018A JP7084999A JP7084999A JP2000270018A JP 2000270018 A JP2000270018 A JP 2000270018A JP 7084999 A JP7084999 A JP 7084999A JP 7084999 A JP7084999 A JP 7084999A JP 2000270018 A JP2000270018 A JP 2000270018A
- Authority
- JP
- Japan
- Prior art keywords
- information
- multiplexing
- counting
- predetermined value
- multiplexed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
(57)【要約】
【課題】 伝送路を有効に利用して、効率的なデータ伝
送が行える符号化装置を提供する。 【解決手段】 可変長パケットにパケット化された第１
の情報（映像ＰＥＳ）と、それに関連する第２の情報
（ＰＣＲ、ＰＳＩ）とを、固定長パケット（ＴＳ）に多
重する際、制御手段２０３は、第１の計測手段２０２か
らの第１の情報の可変長パケットのパケット数と、第２
の計測手段２０７，２０８からの第２の情報データの多
重化経過時間とに基づいて、第１の情報と第２の情報の
多重化を制御する。
送が行える符号化装置を提供する。 【解決手段】 可変長パケットにパケット化された第１
の情報（映像ＰＥＳ）と、それに関連する第２の情報
（ＰＣＲ、ＰＳＩ）とを、固定長パケット（ＴＳ）に多
重する際、制御手段２０３は、第１の計測手段２０２か
らの第１の情報の可変長パケットのパケット数と、第２
の計測手段２０７，２０８からの第２の情報データの多
重化経過時間とに基づいて、第１の情報と第２の情報の
多重化を制御する。
Description
【０００１】
【発明の属する技術分野】本発明は、例えば、画像デー
タ等を可変長符号化し、その可変長符号化データを伝送
路に応じて固定長符号化するための多重化装置、符号化
装置、情報処理システム、多重化方法、及びそれを実施
するための処理ステップをコンピュータが読出可能に格
納した記憶媒体に関するものである。
タ等を可変長符号化し、その可変長符号化データを伝送
路に応じて固定長符号化するための多重化装置、符号化
装置、情報処理システム、多重化方法、及びそれを実施
するための処理ステップをコンピュータが読出可能に格
納した記憶媒体に関するものである。
【０００２】
【従来の技術】近年、ＭＰＥＧ（Moving Picture Exper
ts Group）２規格（ISO/IEC （International Organiza
tion for Standardization/International Electrotech
ical Commission ：国際標準化機構／国際電気標準会
議）１３８１８−１〜３）に準拠したディジタル処理シ
ステムが、映像や音声等を伝送するための伝送システム
の標準となりつつある。
ts Group）２規格（ISO/IEC （International Organiza
tion for Standardization/International Electrotech
ical Commission ：国際標準化機構／国際電気標準会
議）１３８１８−１〜３）に準拠したディジタル処理シ
ステムが、映像や音声等を伝送するための伝送システム
の標準となりつつある。
【０００３】そこで、図４は、ＩＳＯ／ＩＥＣ１３８１
８−１〜３に従った一般的なディジタル伝送システムの
送信側５００の構成を示したものである。上記図４にお
いて、”５０１”は、ディジタル化された映像データ
を、ＩＳＯ／ＩＥＣ１３８１８−２に従うように圧縮す
る映像符号器であり、”５０２”は、ディジタル化され
た音声データを、ＩＳ０／ＩＥＣ１３８１８−３に従う
ように圧縮する音声符号器である。”５０３”は、映像
符号器５０１の出力（映像エレメンタリストリーム）
を、ＩＳＯ／ＩＥＣ１３８１８−１のパケッタイズド・
エレメンタリストリーム（ＰＥＳ：Packetized Element
ary Stream）に従ってパケット化するパケッタイザであ
り、”５０４”は、音声符号器５０２の出力（音声エレ
メンタリストリーム）を、ＩＳ０／ＩＥＣ１３８１８−
１のＰＥＳに従うようにパケット化するパケッタイザで
ある。”５０５”は、パケッタイザ５０３，５０４の出
力（映像ＰＥＳ及び音声ＰＥＳ）を、ＩＳＯ／ＩＥＣ１
３８１８−１のトランスポートストリーム（ＴＳ：Tran
sport Stream）に従って、それぞれＴＳパケットにパケ
ット化して多重するＴＳ多重器である。
８−１〜３に従った一般的なディジタル伝送システムの
送信側５００の構成を示したものである。上記図４にお
いて、”５０１”は、ディジタル化された映像データ
を、ＩＳＯ／ＩＥＣ１３８１８−２に従うように圧縮す
る映像符号器であり、”５０２”は、ディジタル化され
た音声データを、ＩＳ０／ＩＥＣ１３８１８−３に従う
ように圧縮する音声符号器である。”５０３”は、映像
符号器５０１の出力（映像エレメンタリストリーム）
を、ＩＳＯ／ＩＥＣ１３８１８−１のパケッタイズド・
エレメンタリストリーム（ＰＥＳ：Packetized Element
ary Stream）に従ってパケット化するパケッタイザであ
り、”５０４”は、音声符号器５０２の出力（音声エレ
メンタリストリーム）を、ＩＳ０／ＩＥＣ１３８１８−
１のＰＥＳに従うようにパケット化するパケッタイザで
ある。”５０５”は、パケッタイザ５０３，５０４の出
力（映像ＰＥＳ及び音声ＰＥＳ）を、ＩＳＯ／ＩＥＣ１
３８１８−１のトランスポートストリーム（ＴＳ：Tran
sport Stream）に従って、それぞれＴＳパケットにパケ
ット化して多重するＴＳ多重器である。
【０００４】上述のような送信側５００では、先ず、映
像データ及び音声データがそれぞれ映像符号器５０１及
び音声符号器５０２に入力される。映像符号器５０１
は、ＩＳ０／ＩＥＣ１３８１８−２に従うように、空間
的、時間的に相関性の高い情報を検査して冗長度の低い
データヘ変換する、といった処理（可変長符号化処理）
により、入力された映像データの情報量の圧縮を行う。
また、音声符号器５０２は、ＩＳ０／ＩＥＣ１３８１８
−３に従うように、入力された音声データの情報量の圧
縮を行う。このようにして、映像符号器５０１及び音声
符号器５０２にて圧縮された映像データ及び音声データ
のデータ列の中において、単独で伸張可能な単位を「ア
クセスユニット（ＡＵ）」と呼び、映像ＡＵ及び音声Ａ
Ｕのデータ列をそれぞれ、「映像エレメンタリストリー
ム（映像ＥＳ）」、「音声エレメンタリストリーム（音
声ＥＳ）」と呼ぶ。
像データ及び音声データがそれぞれ映像符号器５０１及
び音声符号器５０２に入力される。映像符号器５０１
は、ＩＳ０／ＩＥＣ１３８１８−２に従うように、空間
的、時間的に相関性の高い情報を検査して冗長度の低い
データヘ変換する、といった処理（可変長符号化処理）
により、入力された映像データの情報量の圧縮を行う。
また、音声符号器５０２は、ＩＳ０／ＩＥＣ１３８１８
−３に従うように、入力された音声データの情報量の圧
縮を行う。このようにして、映像符号器５０１及び音声
符号器５０２にて圧縮された映像データ及び音声データ
のデータ列の中において、単独で伸張可能な単位を「ア
クセスユニット（ＡＵ）」と呼び、映像ＡＵ及び音声Ａ
Ｕのデータ列をそれぞれ、「映像エレメンタリストリー
ム（映像ＥＳ）」、「音声エレメンタリストリーム（音
声ＥＳ）」と呼ぶ。
【０００５】映像符号器５０１及び音声符号器５０２に
て得られた映像ＥＳ及び音声ＥＳはそれぞれ、パケッタ
イザ５０３及び５０４に入力される。例えば、パケッタ
イザ５０３は、映像符号器５０１からの映像ＥＳを、ア
クセスユニット（ＡＵ）を基準とする単位で、映像ＥＳ
の属性を表すストリームｌＤや受信側（復号側）におけ
る復号時間や表示時間を示すタイムスタンプ情報等と共
に、可変長なパケットにパケット化する。このパケット
化されたストリームを、「映像ＰＥＳ」と呼ぶ。また、
パケッタイザ５０４においても同様にして、音声符号器
５０２からの音声ＥＳがパケット化され、これが「音声
ＰＥＳ」とされる。
て得られた映像ＥＳ及び音声ＥＳはそれぞれ、パケッタ
イザ５０３及び５０４に入力される。例えば、パケッタ
イザ５０３は、映像符号器５０１からの映像ＥＳを、ア
クセスユニット（ＡＵ）を基準とする単位で、映像ＥＳ
の属性を表すストリームｌＤや受信側（復号側）におけ
る復号時間や表示時間を示すタイムスタンプ情報等と共
に、可変長なパケットにパケット化する。このパケット
化されたストリームを、「映像ＰＥＳ」と呼ぶ。また、
パケッタイザ５０４においても同様にして、音声符号器
５０２からの音声ＥＳがパケット化され、これが「音声
ＰＥＳ」とされる。
【０００６】ＴＳ多重器５０５は、パケッタイザ５０３
及び５０４にて得られた映像ＰＥＳ及び音声ＰＥＳを受
け取り、それらをトランスポートストリーム（ＴＳ）に
変換して出力する。
及び５０４にて得られた映像ＰＥＳ及び音声ＰＥＳを受
け取り、それらをトランスポートストリーム（ＴＳ）に
変換して出力する。
【０００７】具体的には例えば、ＴＳ多重器５０５は、
図５に示すような構成としており、この構成において、
パケッタイザ５０３及び５０４からの映像ＰＥＳ及び音
声ＰＥＳをそれぞれのバッファ５０５ａ及び５０５ｂに
蓄積し、データを伝送する単位にパケット化する。この
パケットを、「トランスポートストリームパケット（Ｔ
Ｓパケット）」と呼ぶ。ここで、ＩＳＩ／ＩＥＣ１３８
１８−１では、ＴＳパケットのサイズが１８８バイトの
サイズで規定されている。また、ＴＳパケットには、復
号側でＴＳパケットの復元のために必要なシンクバイト
やＴＳパケットのＩＤを示すＰＩＤ（Packet Identific
ation ）等を含むパケットヘッダと、復号側の受信時刻
を規定する基準時刻を表すプログラムクロックリファレ
ンス（ＰＣＲ：Program Clock Reference ）等の伝送す
るにあたって必要な付属情報をアダブテーションフィー
ルドが記述され、その他の空き領域（ペイロード）に映
像ＰＥＳ又は音声ＰＥＳが格納されるようになされてい
る。その一方で、ＰＩＤの定義等、ＴＳの総合的な付属
情報については、ＰＳＩ（Program Specific Informati
on：プログラム仕様情報）として生成してバッファ５０
５ｄに記憶させておき、予め定義されているＰＩＤを持
つＴＳパケットにパケット化する。尚、ＰＣＲについて
は、１００ｍｓ周期以内でＴＳとして出力しなければな
らないので、一般的に映像ＰＥＳ及び音声ＰＥＳとは別
に、ＰＣＲのためのＰＩＤをＰＳＩにて定義し、そのＰ
ＩＤを含むパケットヘッダとアダブテーションフィール
ドのみから構成されるＴＳパケットとしてパケット化す
る。
図５に示すような構成としており、この構成において、
パケッタイザ５０３及び５０４からの映像ＰＥＳ及び音
声ＰＥＳをそれぞれのバッファ５０５ａ及び５０５ｂに
蓄積し、データを伝送する単位にパケット化する。この
パケットを、「トランスポートストリームパケット（Ｔ
Ｓパケット）」と呼ぶ。ここで、ＩＳＩ／ＩＥＣ１３８
１８−１では、ＴＳパケットのサイズが１８８バイトの
サイズで規定されている。また、ＴＳパケットには、復
号側でＴＳパケットの復元のために必要なシンクバイト
やＴＳパケットのＩＤを示すＰＩＤ（Packet Identific
ation ）等を含むパケットヘッダと、復号側の受信時刻
を規定する基準時刻を表すプログラムクロックリファレ
ンス（ＰＣＲ：Program Clock Reference ）等の伝送す
るにあたって必要な付属情報をアダブテーションフィー
ルドが記述され、その他の空き領域（ペイロード）に映
像ＰＥＳ又は音声ＰＥＳが格納されるようになされてい
る。その一方で、ＰＩＤの定義等、ＴＳの総合的な付属
情報については、ＰＳＩ（Program Specific Informati
on：プログラム仕様情報）として生成してバッファ５０
５ｄに記憶させておき、予め定義されているＰＩＤを持
つＴＳパケットにパケット化する。尚、ＰＣＲについて
は、１００ｍｓ周期以内でＴＳとして出力しなければな
らないので、一般的に映像ＰＥＳ及び音声ＰＥＳとは別
に、ＰＣＲのためのＰＩＤをＰＳＩにて定義し、そのＰ
ＩＤを含むパケットヘッダとアダブテーションフィール
ドのみから構成されるＴＳパケットとしてパケット化す
る。
【０００８】したがって、ＴＳ多重器５０５は、それぞ
れのＴＳパケットを適当なタイミングで、各バッファか
らＴＳパケット単位で読み出し、ＴＳとして出力するこ
とになる。このとき、固定レートの伝送路にあわせて有
効なＴＳパケットが無い場合、ＩＳ０／ＩＥＣ１３８１
８−１で規定されるヌルパケット（スタッフィングパケ
ット、以下、「スタッフィングデータ」とも言う）を挿
入するようにする。
れのＴＳパケットを適当なタイミングで、各バッファか
らＴＳパケット単位で読み出し、ＴＳとして出力するこ
とになる。このとき、固定レートの伝送路にあわせて有
効なＴＳパケットが無い場合、ＩＳ０／ＩＥＣ１３８１
８−１で規定されるヌルパケット（スタッフィングパケ
ット、以下、「スタッフィングデータ」とも言う）を挿
入するようにする。
【０００９】
【発明が解決しようとする課題】しかしながら、上述の
ような従来のディジタル伝送システムでは、固定レート
の伝送路に可変長である映像データを多重して伝送する
ときには、伝送路を有効に利用できず、常に無駄なスタ
ッフィングデータを多重しなければならなかった。ま
た、多重すべきプログラムの増加に伴って、スタッフィ
ングデータ量も増加してしまう、という問題もあった。
ような従来のディジタル伝送システムでは、固定レート
の伝送路に可変長である映像データを多重して伝送する
ときには、伝送路を有効に利用できず、常に無駄なスタ
ッフィングデータを多重しなければならなかった。ま
た、多重すべきプログラムの増加に伴って、スタッフィ
ングデータ量も増加してしまう、という問題もあった。
【００１０】そこで、本発明は、上記の欠点を除去する
ために成されたもので、伝送路を有効に利用して、効率
的なデータ伝送が行える、多重化装置、符号化装置、情
報処理システム、多重化方法、及びそれを実施するため
の処理ステップをコンピュータが読出可能に格納した記
憶媒体を提供することを目的とする。
ために成されたもので、伝送路を有効に利用して、効率
的なデータ伝送が行える、多重化装置、符号化装置、情
報処理システム、多重化方法、及びそれを実施するため
の処理ステップをコンピュータが読出可能に格納した記
憶媒体を提供することを目的とする。
【００１１】
【課題を解決するための手段】斯かる目的下において、
第１の発明は、可変長符号化された第１の情報を、複数
の可変長パケットにパケット化するパケット化手段と、
少なくとも上記第１の情報に関連する第２の情報を生成
する情報生成手段と、上記パケット化手段によって可変
長パケット化された第１の情報と、上記情報生成手段に
よって生成された第２の情報とを、複数の固定長パケッ
トに多重する多重化手段と、上記パケット化手段にてパ
ケット化された第１の情報のパケット数を計数する第１
の計数手段と、上記多重化手段にて第２の情報データが
多重化された経過時間を計数する第２の計数手段と、上
記第１の計数手段及び上記第２の計数手段の各計数結果
に基づいて、上記多重化手段での多重化動作を制御する
制御手段とを備えることを特徴とする。
第１の発明は、可変長符号化された第１の情報を、複数
の可変長パケットにパケット化するパケット化手段と、
少なくとも上記第１の情報に関連する第２の情報を生成
する情報生成手段と、上記パケット化手段によって可変
長パケット化された第１の情報と、上記情報生成手段に
よって生成された第２の情報とを、複数の固定長パケッ
トに多重する多重化手段と、上記パケット化手段にてパ
ケット化された第１の情報のパケット数を計数する第１
の計数手段と、上記多重化手段にて第２の情報データが
多重化された経過時間を計数する第２の計数手段と、上
記第１の計数手段及び上記第２の計数手段の各計数結果
に基づいて、上記多重化手段での多重化動作を制御する
制御手段とを備えることを特徴とする。
【００１２】第２の発明は、上記第１の発明において、
上記情報生成手段は、上記第２の情報として、上記第１
の情報に関連する第２−１の情報と、該第２−１の情報
及び上記第１の情報に関連する第２−２の情報を生成す
ることを特徴とする。
上記情報生成手段は、上記第２の情報として、上記第１
の情報に関連する第２−１の情報と、該第２−１の情報
及び上記第１の情報に関連する第２−２の情報を生成す
ることを特徴とする。
【００１３】第３の発明は、可変長符号化された第１の
情報データを入力する入力手段と、上記第１の情報を、
複数の可変長パケットにパケット化するパケット化手段
と、上記第１の情報に関連する第２−１の情報を生成す
る第１の情報生成手段と、上記第１の情報及び上記第２
−１の情報データに関連する第２−２の情報を生成する
第２の情報生成手段と、上記第１の情報、上記第２−１
の情報、及び上記第２−２の情報を、複数の固定長パケ
ットに多重する多重化手段と、上記パケット化手段にて
パケット化された第１の情報のパケット数を計数する第
１の計数手段と、上記多重化手段にて第２−１の情報が
多重化された経過時間を計数する第２−１の計数手段
と、上記多重化手段にて第２−２の情報が多重化された
経過時間を計数する第２−２の計数手段と、上記第１の
計数手段、上記第２−１の計数手段、及び上記第２−２
の計数手段の各計数結果に基づいて、上記多重化手段で
の多重化動作を制御する制御手段とを備えることを特徴
とする。
情報データを入力する入力手段と、上記第１の情報を、
複数の可変長パケットにパケット化するパケット化手段
と、上記第１の情報に関連する第２−１の情報を生成す
る第１の情報生成手段と、上記第１の情報及び上記第２
−１の情報データに関連する第２−２の情報を生成する
第２の情報生成手段と、上記第１の情報、上記第２−１
の情報、及び上記第２−２の情報を、複数の固定長パケ
ットに多重する多重化手段と、上記パケット化手段にて
パケット化された第１の情報のパケット数を計数する第
１の計数手段と、上記多重化手段にて第２−１の情報が
多重化された経過時間を計数する第２−１の計数手段
と、上記多重化手段にて第２−２の情報が多重化された
経過時間を計数する第２−２の計数手段と、上記第１の
計数手段、上記第２−１の計数手段、及び上記第２−２
の計数手段の各計数結果に基づいて、上記多重化手段で
の多重化動作を制御する制御手段とを備えることを特徴
とする。
【００１４】第４の発明は、上記第２又は３の発明にお
いて、上記第２−１の情報は、伝送同期情報を含むこと
を特徴とする。
いて、上記第２−１の情報は、伝送同期情報を含むこと
を特徴とする。
【００１５】第５の発明は、上記第２又は３の発明にお
いて、上記第２−２の情報は、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報を含むことを特徴とする。
いて、上記第２−２の情報は、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報を含むことを特徴とする。
【００１６】第６の発明は、上記第１の発明において、
上記制御手段は、上記第１の計数手段及び上記第２の計
数手段の各計数結果をそれぞれに対応する所定値と比較
し、その比較結果に基づいて、上記第１の情報又は上記
第２の情報を優先的に多重化するように制御することを
特徴とする。
上記制御手段は、上記第１の計数手段及び上記第２の計
数手段の各計数結果をそれぞれに対応する所定値と比較
し、その比較結果に基づいて、上記第１の情報又は上記
第２の情報を優先的に多重化するように制御することを
特徴とする。
【００１７】第７の発明は、上記第３の発明において、
上記制御手段は、上記第２−１の計数手段の計数結果が
所定値を超えたときに、上記第２−１の情報を優先的に
多重させるように制御することを特徴とする。
上記制御手段は、上記第２−１の計数手段の計数結果が
所定値を超えたときに、上記第２−１の情報を優先的に
多重させるように制御することを特徴とする。
【００１８】第８の発明は、上記第３の発明において、
上記制御手段は、上記第２−１の計数手段の計数結果が
所定値を超えず、上記第２−２の計数手段の計数結果が
所定値を超えたときに、上記第２−２の情報を優先的に
多重させるように制御することを特徴とする。
上記制御手段は、上記第２−１の計数手段の計数結果が
所定値を超えず、上記第２−２の計数手段の計数結果が
所定値を超えたときに、上記第２−２の情報を優先的に
多重させるように制御することを特徴とする。
【００１９】第９の発明は、上記第３の発明において、
上記制御手段は、上記第２−１の計数手段及び上記第２
−２の計数手段の各計数結果がそれぞれに対応する所定
値を超えず、上記第１の計数手段の計数結果が所定値を
超えたときに、上記第１の情報を優先的に多重させるよ
うに制御することを特徴とする。
上記制御手段は、上記第２−１の計数手段及び上記第２
−２の計数手段の各計数結果がそれぞれに対応する所定
値を超えず、上記第１の計数手段の計数結果が所定値を
超えたときに、上記第１の情報を優先的に多重させるよ
うに制御することを特徴とする。
【００２０】第１０の発明は、上記第３の発明におい
て、上記制御手段は、上記第２−１の計数手段、上記第
２−２の計数手段、上記第１の計数手段の各計数結果が
それぞれに対応する所定値を超えないときに、上記第２
−１の情報又は上記第２−２の情報を優先的に多重させ
るように制御することを特徴とする。
て、上記制御手段は、上記第２−１の計数手段、上記第
２−２の計数手段、上記第１の計数手段の各計数結果が
それぞれに対応する所定値を超えないときに、上記第２
−１の情報又は上記第２−２の情報を優先的に多重させ
るように制御することを特徴とする。
【００２１】第１１の発明は、情報を可変長符号化し、
その可変長符号化した情報を伝送路に応じて固定長符号
化する符号化装置であって、請求項１〜１１の何れかに
記載の多重化装置の機能を有することを特徴とする。
その可変長符号化した情報を伝送路に応じて固定長符号
化する符号化装置であって、請求項１〜１１の何れかに
記載の多重化装置の機能を有することを特徴とする。
【００２２】第１２の発明は、複数の機器が相互通信可
能なように接続されてなる情報処理システムであって、
上記複数の機器のうち少なくとも１つの機器は、請求項
１〜１１の何れかに記載の多重化装置の機能を有するこ
とを特徴とする。
能なように接続されてなる情報処理システムであって、
上記複数の機器のうち少なくとも１つの機器は、請求項
１〜１１の何れかに記載の多重化装置の機能を有するこ
とを特徴とする。
【００２３】第１３の発明は、複数の情報を多重化して
伝送するための多重化方法であって、可変長符号化され
た第１の情報データを、複数の可変長パケットにパケッ
ト化するパケット化ステップと、上記第１の情報に関連
する第２−１の情報を生成する第１の情報生成ステップ
と、上記第１の情報及び上記第２−１の情報データに関
連する第２−２の情報を生成する第２の情報生成ステッ
プと、上記第１の情報、上記第２−１の情報、及び上記
第２−２の情報を、複数の固定長パケットに多重する多
重化ステップと、上記パケット化ステップにてパケット
化された第１の情報のパケット数を計数する第１の計数
ステップと、上記多重化ステップにて第２−１の情報が
多重化された経過時間を計数する第２−１の計数ステッ
プと、上記多重化ステップにて第２−２の情報が多重化
された経過時間を計数する第２−２の計数ステップと、
上記第１の計数ステップ、上記第２−１の計数ステッ
プ、及び上記第２−２の計数ステップでの各計数結果に
基づいて、上記多重化ステップでの多重化処理を制御す
る制御ステップとを含むことを特徴とする。
伝送するための多重化方法であって、可変長符号化され
た第１の情報データを、複数の可変長パケットにパケッ
ト化するパケット化ステップと、上記第１の情報に関連
する第２−１の情報を生成する第１の情報生成ステップ
と、上記第１の情報及び上記第２−１の情報データに関
連する第２−２の情報を生成する第２の情報生成ステッ
プと、上記第１の情報、上記第２−１の情報、及び上記
第２−２の情報を、複数の固定長パケットに多重する多
重化ステップと、上記パケット化ステップにてパケット
化された第１の情報のパケット数を計数する第１の計数
ステップと、上記多重化ステップにて第２−１の情報が
多重化された経過時間を計数する第２−１の計数ステッ
プと、上記多重化ステップにて第２−２の情報が多重化
された経過時間を計数する第２−２の計数ステップと、
上記第１の計数ステップ、上記第２−１の計数ステッ
プ、及び上記第２−２の計数ステップでの各計数結果に
基づいて、上記多重化ステップでの多重化処理を制御す
る制御ステップとを含むことを特徴とする。
【００２４】第１４の発明は、上記第１３の発明におい
て、上記第２−１の情報は、伝送同期情報を含むことを
特徴とする。
て、上記第２−１の情報は、伝送同期情報を含むことを
特徴とする。
【００２５】第１５の発明は、上記第１３の発明におい
て、上記第２−２の情報は、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報を含むことを特徴とする。
て、上記第２−２の情報は、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報を含むことを特徴とする。
【００２６】第１６の発明は、上記第１３の発明におい
て、上記制御ステップは、上記第２−１の計数ステップ
での計数結果が所定値を超えたときに、上記第２−１の
情報を優先的に多重させるためのステップを含むことを
特徴とする。
て、上記制御ステップは、上記第２−１の計数ステップ
での計数結果が所定値を超えたときに、上記第２−１の
情報を優先的に多重させるためのステップを含むことを
特徴とする。
【００２７】第１７の発明は、上記第１３の発明におい
て、上記制御ステップは、上記第２−１の計数ステップ
での計数結果が所定値を超えず、上記第２−２の計数ス
テップでの計数結果が所定値を超えたときに、上記第２
−２の情報を優先的に多重させるためのステップを含む
ことを特徴とする。
て、上記制御ステップは、上記第２−１の計数ステップ
での計数結果が所定値を超えず、上記第２−２の計数ス
テップでの計数結果が所定値を超えたときに、上記第２
−２の情報を優先的に多重させるためのステップを含む
ことを特徴とする。
【００２８】第１８の発明は、上記第１３の発明におい
て、上記制御ステップは、上記第２−１の計数ステップ
及び上記第２−２の計数ステップでの各計数結果がそれ
ぞれに対応する所定値を超えず、上記第１の計数ステッ
プでの計数結果が所定値を超えたときに、上記第１の情
報を優先的に多重させるためのステップを含むことを特
徴とする。
て、上記制御ステップは、上記第２−１の計数ステップ
及び上記第２−２の計数ステップでの各計数結果がそれ
ぞれに対応する所定値を超えず、上記第１の計数ステッ
プでの計数結果が所定値を超えたときに、上記第１の情
報を優先的に多重させるためのステップを含むことを特
徴とする。
【００２９】第１９の発明は、上記第１３の発明におい
て、上記制御ステップは、上記第２−１の計数ステッ
プ、上記第２−２の計数ステップ、上記第１の計数ステ
ップでの各計数結果がそれぞれに対応する所定値を超え
ないときに、上記第２−１の情報又は上記第２−２の情
報を優先的に多重させるためのステップを含むことを特
徴とする。
て、上記制御ステップは、上記第２−１の計数ステッ
プ、上記第２−２の計数ステップ、上記第１の計数ステ
ップでの各計数結果がそれぞれに対応する所定値を超え
ないときに、上記第２−１の情報又は上記第２−２の情
報を優先的に多重させるためのステップを含むことを特
徴とする。
【００３０】第２０の発明は、請求項１３〜１９の何れ
かに記載の多重化方法の処理ステップを、コンピュータ
が読出可能に格納した記憶媒体であることを特徴とす
る。
かに記載の多重化方法の処理ステップを、コンピュータ
が読出可能に格納した記憶媒体であることを特徴とす
る。
【００３１】
【発明の実施の形態】以下、本発明の実施の形態につい
て図面を用いて説明する。
て図面を用いて説明する。
【００３２】本発明は、例えば、図１に示すような情報
処理装置１００に適用される。この情報処理装置１００
は、ディジタル化された映像データ及び音声データを所
定の符号化方式に従って符号化し、それらの符号化デー
タを多重化して送出するようになされており、上記図１
に示すように、映像データを圧縮する映像符号器１０１
と、音声データを圧縮する音声符号器１０２と、映像符
号器１０１の出力（映像エレメンタリストリーム）をパ
ケット化するパケッタイザ１０３と、音声符号器１０２
の出力（音声エレメンタリストリーム）をパケット化す
るパケッタイザ１０４と、パケッタイザ１０３，１０４
の各出力（映像ＰＥＳ及び音声ＰＥＳ）を多重するＴＳ
多重器１０５とを含んでなる。
処理装置１００に適用される。この情報処理装置１００
は、ディジタル化された映像データ及び音声データを所
定の符号化方式に従って符号化し、それらの符号化デー
タを多重化して送出するようになされており、上記図１
に示すように、映像データを圧縮する映像符号器１０１
と、音声データを圧縮する音声符号器１０２と、映像符
号器１０１の出力（映像エレメンタリストリーム）をパ
ケット化するパケッタイザ１０３と、音声符号器１０２
の出力（音声エレメンタリストリーム）をパケット化す
るパケッタイザ１０４と、パケッタイザ１０３，１０４
の各出力（映像ＰＥＳ及び音声ＰＥＳ）を多重するＴＳ
多重器１０５とを含んでなる。
【００３３】上述のような情報処理装置１００の最も特
徴とする構成は、ＴＳ多重器１０５にある。そこで、こ
こでは、映像データに対する所定の符号化方式として、
ＩＴＵ−Ｔ（International Telecommunication Union-
Telecommunication Standardization Sector：国際電気
通信連合−電気通信標準化部門）勧告Ｈ．２２２．０：
ＩＳ０／ＩＥＣ１３８１８−２に準拠した符号化方式を
採用し、この符号化方式にて符号化された映像データ
を、ＩＴＵ−Ｔ勧告Ｈ．２２２．０：ＩＳ０／ＩＥＣ１
３８１８−１に従ってシステム符号化される場合を一例
に挙げ、以下、ＴＳ多重器１０５について具体的に説明
する。
徴とする構成は、ＴＳ多重器１０５にある。そこで、こ
こでは、映像データに対する所定の符号化方式として、
ＩＴＵ−Ｔ（International Telecommunication Union-
Telecommunication Standardization Sector：国際電気
通信連合−電気通信標準化部門）勧告Ｈ．２２２．０：
ＩＳ０／ＩＥＣ１３８１８−２に準拠した符号化方式を
採用し、この符号化方式にて符号化された映像データ
を、ＩＴＵ−Ｔ勧告Ｈ．２２２．０：ＩＳ０／ＩＥＣ１
３８１８−１に従ってシステム符号化される場合を一例
に挙げ、以下、ＴＳ多重器１０５について具体的に説明
する。
【００３４】ＴＳ多重器１０５は、データの多重処理を
制御する多重制御部１０５ａを含む構成としている。こ
のため、ＴＳ多重器１０５は、例えば、図２に示すよう
に、パケッタイザ１０３からの映像ＰＥＳが入力端子２
０１を介して供給されるパケッタイザ２０２と、パケッ
タイザ２０２の出力が蓄積される多重化バッファ２０４
と、ＰＣＲ発生器２０５と、ＰＣＲ発生器２０５の出力
が蓄積される多重化バッファ２０６と、ＰＣＲタイマ２
０７と、ＰＳＩ発生器２０９と、ＰＳＩ発生器２０９の
出力が蓄積される多重化バッファ２１０と、ＰＳＩタイ
マ２０８と、パケッタイザ２０２、ＰＣＲタイマ２０
７、及びＰＳＩタイマ２０８の各出力に基づいて多重化
バッファ２０４，２０６，２１０の出力（ＴＳ）を制御
する多重判定器２０３とを含んでなり、この多重判定器
２０３が、上記図１の多重制御部１０５ａに対応してい
る。
制御する多重制御部１０５ａを含む構成としている。こ
のため、ＴＳ多重器１０５は、例えば、図２に示すよう
に、パケッタイザ１０３からの映像ＰＥＳが入力端子２
０１を介して供給されるパケッタイザ２０２と、パケッ
タイザ２０２の出力が蓄積される多重化バッファ２０４
と、ＰＣＲ発生器２０５と、ＰＣＲ発生器２０５の出力
が蓄積される多重化バッファ２０６と、ＰＣＲタイマ２
０７と、ＰＳＩ発生器２０９と、ＰＳＩ発生器２０９の
出力が蓄積される多重化バッファ２１０と、ＰＳＩタイ
マ２０８と、パケッタイザ２０２、ＰＣＲタイマ２０
７、及びＰＳＩタイマ２０８の各出力に基づいて多重化
バッファ２０４，２０６，２１０の出力（ＴＳ）を制御
する多重判定器２０３とを含んでなり、この多重判定器
２０３が、上記図１の多重制御部１０５ａに対応してい
る。
【００３５】上述のようなＴＳ多重器１０５において、
まず、入力端子２０１には、パケッタイザ１０３からの
映像ＰＥＳ、すなわちＩＴＵ−Ｔ勧告Ｈ．２２２．０：
ＩＳ０／ＩＥＣ１３８１８−２に従って可変長符号化さ
れた映像パケッタイズド・エレメンタリストリームが入
力される。
まず、入力端子２０１には、パケッタイザ１０３からの
映像ＰＥＳ、すなわちＩＴＵ−Ｔ勧告Ｈ．２２２．０：
ＩＳ０／ＩＥＣ１３８１８−２に従って可変長符号化さ
れた映像パケッタイズド・エレメンタリストリームが入
力される。
【００３６】パケッタイザ２０２は、入力端子２０２に
入力された映像ＰＥＳを、ＩＴＵ−Ｔ勧告Ｈ．２２２．
０：ＩＳ０／ＩＥＣ１３８１８−１に従うように、ＴＳ
（トランスポートストリーム）に変換して、それを多重
化バッファ２０４に供給する。また、このパケッタイザ
２０２は、映像ＰＥＳをパケット化したパケット数をカ
ウントする機能（計数機能）も有しており、このカウン
ト結果をパケット化情報として多重判定器２０３へ供給
する。
入力された映像ＰＥＳを、ＩＴＵ−Ｔ勧告Ｈ．２２２．
０：ＩＳ０／ＩＥＣ１３８１８−１に従うように、ＴＳ
（トランスポートストリーム）に変換して、それを多重
化バッファ２０４に供給する。また、このパケッタイザ
２０２は、映像ＰＥＳをパケット化したパケット数をカ
ウントする機能（計数機能）も有しており、このカウン
ト結果をパケット化情報として多重判定器２０３へ供給
する。
【００３７】ＰＣＲ発生器２０５は、ＩＴＵ−Ｔ勧告
Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で示さ
れるシステム同期のための、”program ＿clock ＿refe
rence＿base”及び”program ＿clock ＿reference ＿e
xtension ”を生成するためのカウンタである。このＰ
ＣＲ発生器２０５にて生成された”program ＿clock ＿
reference ＿base”及び”program ＿clock ＿referenc
e ＿extension ”は、多重化バッファ２０６へと供給さ
れる。
Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で示さ
れるシステム同期のための、”program ＿clock ＿refe
rence＿base”及び”program ＿clock ＿reference ＿e
xtension ”を生成するためのカウンタである。このＰ
ＣＲ発生器２０５にて生成された”program ＿clock ＿
reference ＿base”及び”program ＿clock ＿referenc
e ＿extension ”は、多重化バッファ２０６へと供給さ
れる。
【００３８】ＰＣＲタイマ２０７は、多重化バッファ２
０６の出力、すなわちＴＳに多重される”program ＿cl
ock ＿reference ＿base”及び”program ＿clock ＿re
ference ＿extension ”の周期（多重化した経過時間）
をカウントするタイマである。
０６の出力、すなわちＴＳに多重される”program ＿cl
ock ＿reference ＿base”及び”program ＿clock ＿re
ference ＿extension ”の周期（多重化した経過時間）
をカウントするタイマである。
【００３９】ＰＳＩ発生器２０９は、ＩＴＵ−Ｔ勧告
Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で示さ
れるプログラム仕様情報（ＰＳＩ）を生成する。このＰ
ＳＩ発生器２０９にて生成されたＰＳＩは、多重化バッ
ファ２１０へと供給される。
Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で示さ
れるプログラム仕様情報（ＰＳＩ）を生成する。このＰ
ＳＩ発生器２０９にて生成されたＰＳＩは、多重化バッ
ファ２１０へと供給される。
【００４０】ＰＳＩタイマ２０８は、多重化バッファ２
１０の出力、すなわちＴＳに多重されるＰＳＩの周期
（多重化した経過時間）をカウントするタイマである。
１０の出力、すなわちＴＳに多重されるＰＳＩの周期
（多重化した経過時間）をカウントするタイマである。
【００４１】多重判定器２０３は、パケッタイザ２０
２、及びＰＣＲタイマ２０７，ＰＳｌタイマ２０８から
の情報を受け、この情報に基づいて、多重化バッファ２
０４，２０６，２１０の出力制御を行い、この結果（多
重結果）を、ＰＣＲタイマ２０７，ＰＳｌタイマ２０８
へフィードバックする。したがって、出力端子２１１か
らは、多重判定器２０３から出力制御されたＴＳパケッ
トが出力されることになる。
２、及びＰＣＲタイマ２０７，ＰＳｌタイマ２０８から
の情報を受け、この情報に基づいて、多重化バッファ２
０４，２０６，２１０の出力制御を行い、この結果（多
重結果）を、ＰＣＲタイマ２０７，ＰＳｌタイマ２０８
へフィードバックする。したがって、出力端子２１１か
らは、多重判定器２０３から出力制御されたＴＳパケッ
トが出力されることになる。
【００４２】図３は、上述のようなＴＳ多重器１０５の
動作、特に、多重判定器２０３での多重化制御動作を示
すフローチャートである。
動作、特に、多重判定器２０３での多重化制御動作を示
すフローチャートである。
【００４３】ステップＳ３０１：先ず、多重判定器２０
３は、ＰＣＲタイマ２０７をリセットする。ＰＣＲタイ
マ２０７は、このリセット後、リアルタイムに動作す
る。
３は、ＰＣＲタイマ２０７をリセットする。ＰＣＲタイ
マ２０７は、このリセット後、リアルタイムに動作す
る。
【００４４】ステップＳ３０２：次に、多重判定器２０
３は、ＰＳＩタイマ２０８をリセットする。ＰＳＩタイ
マ２０８は、このリセット後、リアルタイムに動作す
る。
３は、ＰＳＩタイマ２０８をリセットする。ＰＳＩタイ
マ２０８は、このリセット後、リアルタイムに動作す
る。
【００４５】ステップＳ３０３：次に、多重判定器２０
３は、ＰＣＲタイマ２０７の値を読み込み、このタイマ
値と、所定値とを比較する。ここでの所定値は、ＩＴＵ
−Ｔ勧告Ｈ．２２２．０：ＩＳＯ／ＩＥＣ１３８１８−
１で規定されているＰＣＲフィールドの伝送サイクルの
上限値である１００ｍｓから、１トランスポートストリ
ームパケット分の１８８バイトを伝送する時刻を引いた
値とし、この所定値を、ＰＣＲタイマ２０７の値が超え
ていないか否か判別する。この判別の結果、所定値を超
えていた場合にはステップＳ３０４へと進み、そうでな
い場合にはステップＳ３０６へと進む。
３は、ＰＣＲタイマ２０７の値を読み込み、このタイマ
値と、所定値とを比較する。ここでの所定値は、ＩＴＵ
−Ｔ勧告Ｈ．２２２．０：ＩＳＯ／ＩＥＣ１３８１８−
１で規定されているＰＣＲフィールドの伝送サイクルの
上限値である１００ｍｓから、１トランスポートストリ
ームパケット分の１８８バイトを伝送する時刻を引いた
値とし、この所定値を、ＰＣＲタイマ２０７の値が超え
ていないか否か判別する。この判別の結果、所定値を超
えていた場合にはステップＳ３０４へと進み、そうでな
い場合にはステップＳ３０６へと進む。
【００４６】ステップＳ３０４：ステップＳ３０３の判
別の結果、ＰＣＲタイマ２０７の値が所定値を超えてい
た場合、多重判定器２０３は、多重化バッファ２０６か
らＰＣＲパケットを出力させる。 ステップＳ３０５：ステップＳ３０４でのＰＣＲパケッ
ト出力後、多重判定器２０３は、ＰＣＲタイマ２０７を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
別の結果、ＰＣＲタイマ２０７の値が所定値を超えてい
た場合、多重判定器２０３は、多重化バッファ２０６か
らＰＣＲパケットを出力させる。 ステップＳ３０５：ステップＳ３０４でのＰＣＲパケッ
ト出力後、多重判定器２０３は、ＰＣＲタイマ２０７を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
【００４７】ステップＳ３０６：ステップＳ３０３の判
別の結果、ＰＣＲタイマ２０７の値が所定値を超えてい
なかった場合、多重判定器２０３は、ＰＳＩタイマ２０
８の値を読み込み、このタイマ値と、所定値とを比較す
る。ここでの所定値は、復号時の画像回復時間を考慮し
て、５００ｍｓから１トランスポートストリームパケッ
ト分の１８８バイトを伝送する時刻を引いた値とし、こ
の所定値を、ＰＳＩタイマ２０８の値が超えていないか
否かを判別する。この判別の結果、所定値を超えていた
場合にはステップＳ３０７へと進み、そうでない場合に
はステップＳ３０９へと進む。
別の結果、ＰＣＲタイマ２０７の値が所定値を超えてい
なかった場合、多重判定器２０３は、ＰＳＩタイマ２０
８の値を読み込み、このタイマ値と、所定値とを比較す
る。ここでの所定値は、復号時の画像回復時間を考慮し
て、５００ｍｓから１トランスポートストリームパケッ
ト分の１８８バイトを伝送する時刻を引いた値とし、こ
の所定値を、ＰＳＩタイマ２０８の値が超えていないか
否かを判別する。この判別の結果、所定値を超えていた
場合にはステップＳ３０７へと進み、そうでない場合に
はステップＳ３０９へと進む。
【００４８】ステップＳ３０７：ステップＳ３０６の判
別の結果、ＰＳＩタイマ２０８の値が所定値を超えてい
た場合、多重判定器２０３は、多重化バッファ２１０か
らＰＳＩパケットを出力させる。 ステップＳ３０８：ステップＳ３０７でのＰＳＩパケッ
ト出力後、多重判定器２０３は、ＰＳＩタイマ２０８を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
別の結果、ＰＳＩタイマ２０８の値が所定値を超えてい
た場合、多重判定器２０３は、多重化バッファ２１０か
らＰＳＩパケットを出力させる。 ステップＳ３０８：ステップＳ３０７でのＰＳＩパケッ
ト出力後、多重判定器２０３は、ＰＳＩタイマ２０８を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
【００４９】ステップＳ３０９：ステップＳ３０６の判
別の結果、ＰＳＩタイマ２０８の値が所定値を超えてい
なかった場合、多重判定器２０３は、パケッタイザ２０
２からの情報（パケット数等のパケット化情報）に基づ
いて、多重化バッファ２０４に有効な映像トランスポー
トストリームパケットが存在するか否かを判別する。こ
の判別の結果、存在する場合にはステップＳ３１０へと
進み、そうでない場合にはステップＳ３１１へと進む。
別の結果、ＰＳＩタイマ２０８の値が所定値を超えてい
なかった場合、多重判定器２０３は、パケッタイザ２０
２からの情報（パケット数等のパケット化情報）に基づ
いて、多重化バッファ２０４に有効な映像トランスポー
トストリームパケットが存在するか否かを判別する。こ
の判別の結果、存在する場合にはステップＳ３１０へと
進み、そうでない場合にはステップＳ３１１へと進む。
【００５０】ステップＳ３１０：ステップＳ３０９の判
別の結果、多重化バッファ２０４に有効な映像トランス
ポートストリームパケットが存在する場合、多重判定器
２０３は、多重化バッファ２０４から映像トランスポー
トストリームを出力させる。そして、ステップＳ２０３
へと戻り、以降の処理ステップを繰り返し実行する。
別の結果、多重化バッファ２０４に有効な映像トランス
ポートストリームパケットが存在する場合、多重判定器
２０３は、多重化バッファ２０４から映像トランスポー
トストリームを出力させる。そして、ステップＳ２０３
へと戻り、以降の処理ステップを繰り返し実行する。
【００５１】ステップＳ３１１：ステップＳ３０９の判
別の結果、多重化バッファ２０４に有効な映像トランス
ポートストリームパケットが存在しない場合、多重判定
器２０３は、ステップＳ３０３にて読み込んだＰＣＲタ
イマ２０７の値と、ステップＳ３０６にて読み込んだＰ
ＳＩタイマ２０８の値とを比較し、ＰＣＲタイマ２０７
の値がＰＳＩタイマ２０８の値を超えているか否かを判
別する。この判別の結果、ＰＣＲタイマ２０７の値がＰ
ＳＩタイマ２０８の値を超えている場合にはステップＳ
３１２へと進み、そうでない場合にはステップＳ３１４
へと進む。
別の結果、多重化バッファ２０４に有効な映像トランス
ポートストリームパケットが存在しない場合、多重判定
器２０３は、ステップＳ３０３にて読み込んだＰＣＲタ
イマ２０７の値と、ステップＳ３０６にて読み込んだＰ
ＳＩタイマ２０８の値とを比較し、ＰＣＲタイマ２０７
の値がＰＳＩタイマ２０８の値を超えているか否かを判
別する。この判別の結果、ＰＣＲタイマ２０７の値がＰ
ＳＩタイマ２０８の値を超えている場合にはステップＳ
３１２へと進み、そうでない場合にはステップＳ３１４
へと進む。
【００５２】ステップＳ３１２：ステップＳ３１１の判
別の結果、ＰＣＲタイマ２０７の値がＰＳＩタイマ２０
８の値を超えている場合、多重判定器２０３は、多重化
バッファ２０６からＰＣＲパケットを出力させる。 ステップＳ３１３：ステップＳ３１２でのＰＣＲパケッ
ト出力後、多重判定器２０３は、ＰＣＲタイマ２０７を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
別の結果、ＰＣＲタイマ２０７の値がＰＳＩタイマ２０
８の値を超えている場合、多重判定器２０３は、多重化
バッファ２０６からＰＣＲパケットを出力させる。 ステップＳ３１３：ステップＳ３１２でのＰＣＲパケッ
ト出力後、多重判定器２０３は、ＰＣＲタイマ２０７を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
【００５３】ステップＳ３１４：ステップＳ３１１の判
別の結果、ＰＣＲタイマ２０７の値がＰＳＩタイマ２０
８の値を超えていない場合、多重判定器２０３は、多重
化バッファ２１０からＰＳＩパケットを出力させる。 ステップＳ３１５：ステップＳ３１４でのＰＳＩパケッ
ト出力後、多重判定器２０３は、ＰＳＩタイマ２０８を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
別の結果、ＰＣＲタイマ２０７の値がＰＳＩタイマ２０
８の値を超えていない場合、多重判定器２０３は、多重
化バッファ２１０からＰＳＩパケットを出力させる。 ステップＳ３１５：ステップＳ３１４でのＰＳＩパケッ
ト出力後、多重判定器２０３は、ＰＳＩタイマ２０８を
リセットする。そして、ステップＳ２０３へと戻り、以
降の処理ステップを繰り返し実行する。
【００５４】上述のようなステップＳ３０１〜Ｓ３１５
の処理ステップを実行することで、可変長の映像パケッ
タイズド・エレメンタリストリームを、固定長のトラン
スポートストリームパケットに多重する際、固定レート
化のための無駄なスタッフィングパケットが挿入される
のではなく、規定の挿入サイクルに達していない場合で
も、ＰＣＲパケット又はＰＳＩパケットが挿入されるこ
とになるため、従来のような多重化時の無駄となるスタ
ッフィングを削除することができる。
の処理ステップを実行することで、可変長の映像パケッ
タイズド・エレメンタリストリームを、固定長のトラン
スポートストリームパケットに多重する際、固定レート
化のための無駄なスタッフィングパケットが挿入される
のではなく、規定の挿入サイクルに達していない場合で
も、ＰＣＲパケット又はＰＳＩパケットが挿入されるこ
とになるため、従来のような多重化時の無駄となるスタ
ッフィングを削除することができる。
【００５５】尚、本発明は、上述した実施の形態での装
置に限られることはなく、複数の機器（例えば、ホスト
コンピュータ、インターフェース機器、リーダ、プリン
タ等）から構成されるシステムに適用することもでき、
或いは１つの機器（例えば、複写機、ファクシミリ装置
等）からなる装置にも適用することができる。また、上
述した実施の形態における機能を実現する様に、各種の
デバイスを動作させる様に該各種デバイスと接続された
装置或いはシステム内のコンピュータに対して、上述し
た実施の形態での機能を実現させるためのソフトウェア
のプログラムコードを供給し、そのシステム或いは装置
のコンピュータ（ＣＰＵやＭＰＵ等）が、供給されたプ
ログラムコードに従って上記の各種デバイスを動作させ
ることによって実施した場合も、本発明に含まれる。こ
の場合、上記ソフトウエアのプログラムコード自体が、
上述した実施の形態での機能を実現することになり、そ
のプログラムコード自体、及びそのプログラムコードを
コンピュータに供給するための手段、例えば、かかるプ
ログラムコードを格納した記憶媒体は、本発明を構成す
ることになる。かかるプログラムコードを格納する記憶
媒体としては、例えば、フロッピーディスク、ハードデ
ィスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、
ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯ
Ｍ等を用いることができる。また、コンピュータが供給
されたプログラムコードを実行することにより、上述し
た実施の形態での機能が実現されるだけではなく、その
プログラムコードがコンピュータにおいて稼働している
ＯＳ（オペレーティングシステム）、或いは他のアプリ
ケーション等と共同して上述した実施の形態での機能が
実現される場合にも、かかるプログラムコードは本発明
に含まれることは言うまでもない。さらに、供給された
プログラムコードが、コンピュータの機能拡張ボードや
コンピュータに接続された機能拡張ユニットに備わるメ
モリに格納された後、そのプログラムコードの指示に基
づいて、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵ等が実際の処理の一部または全部を行い、その
処理によって上述した実施の形態での機能が実現される
場合も、本発明に含まれることは言うまでもない。
置に限られることはなく、複数の機器（例えば、ホスト
コンピュータ、インターフェース機器、リーダ、プリン
タ等）から構成されるシステムに適用することもでき、
或いは１つの機器（例えば、複写機、ファクシミリ装置
等）からなる装置にも適用することができる。また、上
述した実施の形態における機能を実現する様に、各種の
デバイスを動作させる様に該各種デバイスと接続された
装置或いはシステム内のコンピュータに対して、上述し
た実施の形態での機能を実現させるためのソフトウェア
のプログラムコードを供給し、そのシステム或いは装置
のコンピュータ（ＣＰＵやＭＰＵ等）が、供給されたプ
ログラムコードに従って上記の各種デバイスを動作させ
ることによって実施した場合も、本発明に含まれる。こ
の場合、上記ソフトウエアのプログラムコード自体が、
上述した実施の形態での機能を実現することになり、そ
のプログラムコード自体、及びそのプログラムコードを
コンピュータに供給するための手段、例えば、かかるプ
ログラムコードを格納した記憶媒体は、本発明を構成す
ることになる。かかるプログラムコードを格納する記憶
媒体としては、例えば、フロッピーディスク、ハードデ
ィスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、
ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯ
Ｍ等を用いることができる。また、コンピュータが供給
されたプログラムコードを実行することにより、上述し
た実施の形態での機能が実現されるだけではなく、その
プログラムコードがコンピュータにおいて稼働している
ＯＳ（オペレーティングシステム）、或いは他のアプリ
ケーション等と共同して上述した実施の形態での機能が
実現される場合にも、かかるプログラムコードは本発明
に含まれることは言うまでもない。さらに、供給された
プログラムコードが、コンピュータの機能拡張ボードや
コンピュータに接続された機能拡張ユニットに備わるメ
モリに格納された後、そのプログラムコードの指示に基
づいて、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵ等が実際の処理の一部または全部を行い、その
処理によって上述した実施の形態での機能が実現される
場合も、本発明に含まれることは言うまでもない。
【００５６】
【発明の効果】以上説明したように本発明では、可変長
パケットにパケット化された第１の情報と、それに関連
する第２の情報（第２−１の情報、第２−２の情報等）
とを、固定長パケットに多重する際、第１の情報の可変
長パケットのパケット数と、第２の情報データの多重化
経過時間とに基づいて、多重化動作を制御するように構
成した。
パケットにパケット化された第１の情報と、それに関連
する第２の情報（第２−１の情報、第２−２の情報等）
とを、固定長パケットに多重する際、第１の情報の可変
長パケットのパケット数と、第２の情報データの多重化
経過時間とに基づいて、多重化動作を制御するように構
成した。
【００５７】具体的には例えば、可変長パケットにパケ
ット化された映像データ（第１の情報）と、ＩＴＵ−Ｔ
勧告Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で
示されるシステム同期のための”program ＿clock ＿re
ference ＿base”及び”program ＿clock ＿reference
＿extension ”の情報（ＰＣＲ：Program Clock Refere
nce ）、第２−１の情報）と、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳ０／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報（ＰＳＩ：Program Specific Informati
on、第２−２の情報）とを、ＩＳＯ／ＩＥＣ１３８１８
−１での固定長のトランスポートストリーム（ＴＳ：Tr
ansport Stream）に多重して伝送路へ送出する場合、固
定レートの伝送路にあわせて有効なＴＳパケットが無い
とき（規定の挿入サイクルに達していないとき）でも、
従来のように無駄なスタッフィングパケットが挿入され
るのではなく、ＰＣＲパケット又はＰＳＩパケットが挿
入されることになる。このため、従来のような多重化時
の無駄となるスタッフィングを削除することができる。
すなわち、本発明では、可変長の符号化データ（第１の
情報）の発生量に応じて、伝送同期情報（第２−１の情
報）及びプログラム仕様情報（第２−２の情報）を多重
するので、無駄な情報が伝送路上に送出されない。した
がって、効率的でデータ伝送を行うことができる。ま
た、伝送同期情報の多重周期が可変となっており、伝送
誤りに対しても強いという効果がある。このため、プロ
グラム仕様情報も多重周期が可変であるため、画像回復
時間も短くできる。上述のような、本発明による効果
は、多重すべきプログラム数が増加するほど増大する。
ット化された映像データ（第１の情報）と、ＩＴＵ−Ｔ
勧告Ｈ．２２２．０：ＩＳ０／ＩＥＣ１３８１８−１で
示されるシステム同期のための”program ＿clock ＿re
ference ＿base”及び”program ＿clock ＿reference
＿extension ”の情報（ＰＣＲ：Program Clock Refere
nce ）、第２−１の情報）と、ＩＴＵ−Ｔ勧告Ｈ．２２
２．０：ＩＳ０／ＩＥＣ１３８１８−１で示されるプロ
グラム仕様情報（ＰＳＩ：Program Specific Informati
on、第２−２の情報）とを、ＩＳＯ／ＩＥＣ１３８１８
−１での固定長のトランスポートストリーム（ＴＳ：Tr
ansport Stream）に多重して伝送路へ送出する場合、固
定レートの伝送路にあわせて有効なＴＳパケットが無い
とき（規定の挿入サイクルに達していないとき）でも、
従来のように無駄なスタッフィングパケットが挿入され
るのではなく、ＰＣＲパケット又はＰＳＩパケットが挿
入されることになる。このため、従来のような多重化時
の無駄となるスタッフィングを削除することができる。
すなわち、本発明では、可変長の符号化データ（第１の
情報）の発生量に応じて、伝送同期情報（第２−１の情
報）及びプログラム仕様情報（第２−２の情報）を多重
するので、無駄な情報が伝送路上に送出されない。した
がって、効率的でデータ伝送を行うことができる。ま
た、伝送同期情報の多重周期が可変となっており、伝送
誤りに対しても強いという効果がある。このため、プロ
グラム仕様情報も多重周期が可変であるため、画像回復
時間も短くできる。上述のような、本発明による効果
は、多重すべきプログラム数が増加するほど増大する。
【００５８】よって、本発明によれば、伝送路を有効に
利用して、効率的なデータ伝送を行うことができる。
利用して、効率的なデータ伝送を行うことができる。
【図１】本発明を適用した情報処理装置の構成を示すブ
ロック図である。
ロック図である。
【図２】上記情報処理装置において、多重化制御を行う
ための構成を示すブロック図である。
ための構成を示すブロック図である。
【図３】上記多重化制御処理を説明するためのフローチ
ャートである。
ャートである。
【図４】ＩＳＯ／ＩＥＣ１３８１８−１〜３に従った一
般的なディジタル伝送システムの送信側の構成を示すブ
ロック図である。
般的なディジタル伝送システムの送信側の構成を示すブ
ロック図である。
【図５】上記送信側での多重化構成を示すブロック図で
ある。
ある。
１００ 情報処理装置 １０１ 映像符号器 １０２ 音声符号器 １０３，１０４ パケッタイザ １０５ ＴＳ多重器 １０５ａ 多重化制御部 ２０１ 入力端子 ２０２ パケッタイザ ２０３ 多重判定器 ２０４，２０６，２１０ 多重化バッファ ２０５ ＰＣＲ発生器 ２０７ ＰＣＲタイマ ２０８ ＰＳＩタイマ ２０９ ＰＳＩ発生器 ２１１ 出力端子
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 MA00 ME01 RB02 RC02 RC31 RC32 SS11 SS20 SS26 TA74 TA75 TC18 TC41 TC44 TD07 UA39 5C063 AA10 AB03 AB07 AC01 AC05 CA09 CA23 CA34 CA36 EA01 EB45 EB49 5K028 KK32 MM16 SS05 SS24 5K030 HB28 JA01 JA05 KA19 KA21 9A001 CC03 EE04 JJ19
Claims (20)
- 【請求項１】 可変長符号化された第１の情報を、複数
の可変長パケットにパケット化するパケット化手段と、 少なくとも上記第１の情報に関連する第２の情報を生成
する情報生成手段と、 上記パケット化手段によって可変長パケット化された第
１の情報と、上記情報生成手段によって生成された第２
の情報とを、複数の固定長パケットに多重する多重化手
段と、 上記パケット化手段にてパケット化された第１の情報の
パケット数を計数する第１の計数手段と、 上記多重化手段にて第２の情報データが多重化された経
過時間を計数する第２の計数手段と、 上記第１の計数手段及び上記第２の計数手段の各計数結
果に基づいて、上記多重化手段での多重化動作を制御す
る制御手段とを備えることを特徴とする多重化装置。 - 【請求項２】 上記情報生成手段は、上記第２の情報と
して、上記第１の情報に関連する第２−１の情報と、該
第２−１の情報及び上記第１の情報に関連する第２−２
の情報を生成することを特徴とする請求項１記載の多重
化装置。 - 【請求項３】 可変長符号化された第１の情報データを
入力する入力手段と、 上記第１の情報を、複数の可変長パケットにパケット化
するパケット化手段と、 上記第１の情報に関連する第２−１の情報を生成する第
１の情報生成手段と、 上記第１の情報及び上記第２−１の情報データに関連す
る第２−２の情報を生成する第２の情報生成手段と、 上記第１の情報、上記第２−１の情報、及び上記第２−
２の情報を、複数の固定長パケットに多重する多重化手
段と、 上記パケット化手段にてパケット化された第１の情報の
パケット数を計数する第１の計数手段と、 上記多重化手段にて第２−１の情報が多重化された経過
時間を計数する第２−１の計数手段と、 上記多重化手段にて第２−２の情報が多重化された経過
時間を計数する第２−２の計数手段と、 上記第１の計数手段、上記第２−１の計数手段、及び上
記第２−２の計数手段の各計数結果に基づいて、上記多
重化手段での多重化動作を制御する制御手段とを備える
ことを特徴とする多重化装置。 - 【請求項４】 上記第２−１の情報は、伝送同期情報を
含むことを特徴とする請求項２又は３記載の多重化装
置。 - 【請求項５】 上記第２−２の情報は、ＩＴＵ−Ｔ勧告
Ｈ．２２２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示さ
れるプログラム仕様情報を含むことを特徴とする請求項
２又は３記載の多重化装置。 - 【請求項６】 上記制御手段は、上記第１の計数手段及
び上記第２の計数手段の各計数結果をそれぞれに対応す
る所定値と比較し、その比較結果に基づいて、上記第１
の情報又は上記第２の情報を優先的に多重化するように
制御することを特徴とする請求項１記載の多重化装置。 - 【請求項７】 上記制御手段は、上記第２−１の計数手
段の計数結果が所定値を超えたときに、上記第２−１の
情報を優先的に多重させるように制御することを特徴と
する請求項３記載の多重化装置。 - 【請求項８】 上記制御手段は、上記第２−１の計数手
段の計数結果が所定値を超えず、上記第２−２の計数手
段の計数結果が所定値を超えたときに、上記第２−２の
情報を優先的に多重させるように制御することを特徴と
する請求項３記載の多重化装置。 - 【請求項９】 上記制御手段は、上記第２−１の計数手
段及び上記第２−２の計数手段の各計数結果がそれぞれ
に対応する所定値を超えず、上記第１の計数手段の計数
結果が所定値を超えたときに、上記第１の情報を優先的
に多重させるように制御することを特徴とする請求項３
記載の多重化装置。 - 【請求項１０】 上記制御手段は、上記第２−１の計数
手段、上記第２−２の計数手段、上記第１の計数手段の
各計数結果がそれぞれに対応する所定値を超えないとき
に、上記第２−１の情報又は上記第２−２の情報を優先
的に多重させるように制御することを特徴とする請求項
３記載の多重化装置。 - 【請求項１１】 情報を可変長符号化し、その可変長符
号化した情報を伝送路に応じて固定長符号化する符号化
装置であって、 請求項１〜１１の何れかに記載の多重化装置の機能を有
することを特徴とする符号化装置。 - 【請求項１２】 複数の機器が相互通信可能なように接
続されてなる情報処理システムであって、 上記複数の機器のうち少なくとも１つの機器は、請求項
１〜１１の何れかに記載の多重化装置の機能を有するこ
とを特徴とする情報処理システム。 - 【請求項１３】 複数の情報を多重化して伝送するため
の多重化方法であって、 可変長符号化された第１の情報データを、複数の可変長
パケットにパケット化するパケット化ステップと、 上記第１の情報に関連する第２−１の情報を生成する第
１の情報生成ステップと、 上記第１の情報及び上記第２−１の情報データに関連す
る第２−２の情報を生成する第２の情報生成ステップ
と、 上記第１の情報、上記第２−１の情報、及び上記第２−
２の情報を、複数の固定長パケットに多重する多重化ス
テップと、 上記パケット化ステップにてパケット化された第１の情
報のパケット数を計数する第１の計数ステップと、 上記多重化ステップにて第２−１の情報が多重化された
経過時間を計数する第２−１の計数ステップと、 上記多重化ステップにて第２−２の情報が多重化された
経過時間を計数する第２−２の計数ステップと、 上記第１の計数ステップ、上記第２−１の計数ステッ
プ、及び上記第２−２の計数ステップでの各計数結果に
基づいて、上記多重化ステップでの多重化処理を制御す
る制御ステップとを含むことを特徴とする多重化方法。 - 【請求項１４】 上記第２−１の情報は、伝送同期情報
を含むことを特徴とする請求項１３記載の多重化方法。 - 【請求項１５】 上記第２−２の情報は、ＩＴＵ−Ｔ勧
告Ｈ．２２２．０：ＩＳＯ／ＩＥＣ１３８１８−１で示
されるプログラム仕様情報を含むことを特徴とする請求
項１３記載の多重化方法。 - 【請求項１６】 上記制御ステップは、上記第２−１の
計数ステップでの計数結果が所定値を超えたときに、上
記第２−１の情報を優先的に多重させるためのステップ
を含むことを特徴とする請求項１３記載の多重化方法。 - 【請求項１７】 上記制御ステップは、上記第２−１の
計数ステップでの計数結果が所定値を超えず、上記第２
−２の計数ステップでの計数結果が所定値を超えたとき
に、上記第２−２の情報を優先的に多重させるためのス
テップを含むことを特徴とする請求項１３記載の多重化
方法。 - 【請求項１８】 上記制御ステップは、上記第２−１の
計数ステップ及び上記第２−２の計数ステップでの各計
数結果がそれぞれに対応する所定値を超えず、上記第１
の計数ステップでの計数結果が所定値を超えたときに、
上記第１の情報を優先的に多重させるためのステップを
含むことを特徴とする請求項１３記載の多重化方法。 - 【請求項１９】 上記制御ステップは、上記第２−１の
計数ステップ、上記第２−２の計数ステップ、上記第１
の計数ステップでの各計数結果がそれぞれに対応する所
定値を超えないときに、上記第２−１の情報又は上記第
２−２の情報を優先的に多重させるためのステップを含
むことを特徴とする請求項１３記載の多重化方法。 - 【請求項２０】 請求項１３〜１９の何れかに記載の多
重化方法の処理ステップを、コンピュータが読出可能に
格納したことを特徴とする記憶媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7084999A JP2000270018A (ja) | 1999-03-16 | 1999-03-16 | 多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体 |
| US09/525,056 US7215671B1 (en) | 1999-03-16 | 2000-03-14 | Information processing apparatus and method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7084999A JP2000270018A (ja) | 1999-03-16 | 1999-03-16 | 多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000270018A true JP2000270018A (ja) | 2000-09-29 |
| JP2000270018A5 JP2000270018A5 (ja) | 2006-06-08 |
Family
ID=13443438
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7084999A Pending JP2000270018A (ja) | 1999-03-16 | 1999-03-16 | 多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000270018A (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006251428A (ja) * | 2005-03-11 | 2006-09-21 | Sony Corp | 多重化装置および多重化方法、プログラム、並びに記録媒体 |
| JP2007006349A (ja) * | 2005-06-27 | 2007-01-11 | Funai Electric Co Ltd | データ伝送システム、送信装置、受信装置、およびデータ伝送方法 |
-
1999
- 1999-03-16 JP JP7084999A patent/JP2000270018A/ja active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006251428A (ja) * | 2005-03-11 | 2006-09-21 | Sony Corp | 多重化装置および多重化方法、プログラム、並びに記録媒体 |
| US7924834B2 (en) | 2005-03-11 | 2011-04-12 | Sony Corporation | Multiplexing apparatus, multiplexing method, program, and recording medium |
| JP4678486B2 (ja) * | 2005-03-11 | 2011-04-27 | ソニー株式会社 | 多重化装置および多重化方法、プログラム、並びに記録媒体 |
| JP2007006349A (ja) * | 2005-06-27 | 2007-01-11 | Funai Electric Co Ltd | データ伝送システム、送信装置、受信装置、およびデータ伝送方法 |
| JP4556785B2 (ja) * | 2005-06-27 | 2010-10-06 | 船井電機株式会社 | データ伝送システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0987904B1 (en) | Method and apparatus for adaptive synchronization of digital video and audio playback | |
| WO2002085016A1 (en) | System and method for network delivery of low bit rate multimedia content | |
| US6584120B1 (en) | Data multiplexing apparatus and method | |
| US6333950B1 (en) | Encoding apparatus and method and computer readable recording medium in which encoding program has been recorded | |
| JPH0923424A (ja) | オーディオビジュアルストリームを送信、受信及び復号化するためのデバイス | |
| JP3839084B2 (ja) | データバッファの同期システム | |
| KR20080099630A (ko) | 부가 정보가 삽입된 영상 데이터의 전송 스트림 구조,송수신 방법 및 장치 | |
| JP2000174819A (ja) | 信号フォ―マット、エンコ―ダ、デコ―ダ及び信号送信装置 | |
| US20050201390A1 (en) | Data processing apparatus and method and computer readable storage medium | |
| US7729383B2 (en) | Multiplexer and multiplexing method | |
| JPH11317768A (ja) | 伝送システム、送信装置、記録再生装置、および記録装置 | |
| WO2001039505A2 (en) | Method and apparatus of transmitting and receiving variable bit rate streams | |
| JP3679606B2 (ja) | 符号化装置及び方法並びに符号化プログラムが記録されたコンピュータ可読記録媒体 | |
| JP2003259315A (ja) | 画像伝送装置および画像伝送方法 | |
| JP2000270018A (ja) | 多重化装置、符号化装置、情報処理システム、多重化方法、及び記憶媒体 | |
| US7215671B1 (en) | Information processing apparatus and method | |
| US6661813B2 (en) | Multiplexing apparatus and method and storage medium | |
| WO2004052015A1 (ja) | 符号化装置およびその方法 | |
| JP2000216816A (ja) | 符号化装置、方法及びコンピュ―タ読み取り可能な記憶媒体 | |
| JPH09312656A (ja) | 伝送装置およびその方法 | |
| JP2000286865A (ja) | 連続メディアデータ送信ステム | |
| JP4190428B2 (ja) | データ伝送方法およびデータ伝送機 | |
| JP4392952B2 (ja) | 符号化装置及び符号化方法 | |
| JP2000270018A5 (ja) | ||
| JP3716977B2 (ja) | 動画像ファイル生成装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060310 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060310 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071220 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080115 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080317 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080902 |