JP2010154574A - プログラムストリーム変換のためのトランスポートストリーム - Google Patents

プログラムストリーム変換のためのトランスポートストリーム Download PDF

Info

Publication number
JP2010154574A
JP2010154574A JP2010085455A JP2010085455A JP2010154574A JP 2010154574 A JP2010154574 A JP 2010154574A JP 2010085455 A JP2010085455 A JP 2010085455A JP 2010085455 A JP2010085455 A JP 2010085455A JP 2010154574 A JP2010154574 A JP 2010154574A
Authority
JP
Japan
Prior art keywords
stream
program
transport
transport stream
scr
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010085455A
Other languages
English (en)
Other versions
JP5214659B2 (ja
Inventor
Gary Allen Gendel
ジェンデル,ゲーリー,アレン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2010154574A publication Critical patent/JP2010154574A/ja
Application granted granted Critical
Publication of JP5214659B2 publication Critical patent/JP5214659B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4344Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

【課題】トランスポートストリームとプログラムストリーム間の相容れない制限により、トランスポートストリームのシンタックスとセマンティックから適当なプログラムストリームのシンタックスとセマンティックへの変換が不可能な場合がある。
【解決手段】トランスポートストリームからプログラムストリームへの変換においてトランスポートストリームとプログラムストリームデコーダの間の同期を保持する方法が提供される。システムリファレンスクロック(SCR)がトランスポートクロックから計算される(410)。プログラムストリームのためのマルチプレクサレートが計算される(480)。プログラムストリームが、トランスポートストリームから解析されたパケット化されたエレメンタリストリーム(PES)を計算されたマルチプレクサレートを用いて多重化することにより形成される(480)。
【選択図】図4

Description

本発明はデジタルデータコミュニケーションに関し、特にMPEGトランスポートストリームからプログラムストリームへの変換に関する。
現在、MPEG−2コミッティはオーディオ/ビジュアルプログラムを配信する二つのメカニズム、すなわちトランスポートストリームとプログラムストリームを決めた。トランスポートストリームはブロードキャストアプリケーションでの使用を意図したもので、マルチチャンネルプログラムガイドとその他のブロードキャスト割当てデータと共に多様な送信エラーリカバリースキームを含む。一方、プログラムストリームは、DVDやその他のファイルベースシステムなどの非等時配信システムでの使用を意図したものである。例えば大部分のコンピュータベースのMPEG−2ハードウェアなどの大部分の非ブロードキャストアプリケーションはプログラムストリームのみ入力として受け付け、オーディオ/ビジュアルコンテンツをデコードし提供する。このようなソリューションを使用するシステムにトランスポートストリームフォーマットのオーディオ/ビジュアルインプットがされると、トランスポートストリームのシンタックスとセマンティックから適当なプログラムストリームのシンタックスとセマンティックに変換する必要が生じる。一般的には、トランスポートストリームとプログラムストリーム間の相容れない制限により、この変換は不可能な場合がある。よって、コード変換する方法、またはトランスポートストリームのシンタックスとセマンティックから同等なプログラムストリームのシンタックスに変換する方法があれば望ましく非常に有利である。さらに、コード変換に関して時間不連続性などの自明でない変換をする方法があれば望ましく非常に有利である。
上記の問題は従来技術の他の関連する問題と同様に、MPEG−2トランスポートストリームからプログラムストリームへの変換である本発明により解決される。
本発明は、到来するトランスポートストリームパケットをフィルターし、トランスポートストリームから要求されたパケットに関係するパケットを収集し、有効なプログラムストリームに変換する。本発明は、時間不連続性を扱うために、また等時配信されたトランスポートストリームとデコーダ間の同期を維持するために、パケットを取り除くためにプリフィルターされたトランスポートストリームを取り扱う特別なメカニズムを含む。
本発明の一態様によると、トランスポートストリームからプログラムストリームへの変換の間にトランスポートストリームとプログラムストリームデコーダ間の同期を維持する方法が提供される。システムリファレンスクロック(SCR)がトランスポートストリームから計算される。マルチプレクサレートがプログラムストリームのために計算される。マルチプレクサレートを用いてトランスポートストリームに対応するパケット化されたエレメンタリストリーム(PES)パケットをマルチプレックスすることによりプログラムストリームが形成される。
本発明のこの態様およびその他の態様、特徴、特長は、添付した図面と共に下記の好適な実施形態の詳細な説明を読めば明らかになるであろう。
本発明の一実施形態による、MPEG−2トランスポートストリームをMPEG−2プログラムストリームに変換するシステム100を示すブロック図である。 本発明の一実施形態による、MPEG−2トランスポートストリームをMPEG−2プログラムストリームに変換するステップ・構成要素を示すハイレベルのブロック図である。 本発明の一実施形態による、図1のトランスコーダ120により実施されるトランスポートストリームからプログラムストリームへの変換方法を示したフロー図である。 本発明の一実施形態による、図1のブロック110(トランスポートストリーム・デパケット化)により実施される方法のフロー図である。 本発明の一実施形態による、図1のブロック120(PESパケットフィルタリング)により実施される方法のフロー図である。 本発明の一実施形態による、図1のブロック130(プログラムストリームアセンブリ)により実施される方法のフロー図である。 本発明の一実施形態による、到来する等時配信されたトランスポートストリームとデコーダ間の同期を維持する方法を示すフロー図である。 本発明の一実施形態による、MPEG−2トランスポートストリームからプログラムストリームへの変換における時間不連続性を処理する方法を示すフロー図である。 本発明の一実施形態による、SCRとマルチプレクサレート値を決定する方法を示すフロー図である。 本発明の他の実施形態による、SCRとマルチプレクサレート値を決定する方法を示すフロー図である。 本発明の他の実施形態による、MPEG−2トランスポートストリームをMPEG−2プログラムストリームへ変換するステップ・構成要素を示すハイレベルのブロック図である。
本発明はハードウェア、ソフトウェア、ファームウェア、特殊目的プロセッサ、またはこれらの組み合わせの多様な形態で実施してもよいことを理解すべきである。好ましくは、本発明はハードウェアと、プログラム記憶装置に有体的に具体化されたアプリケーションプログラムであるソフトウェアとの組み合わせとして実施される。このアプリケーションプログラムは任意の好適なアーキテクチャを有したマシンにアップロードされ、実行される。好ましくは、このマシンは一以上の中央処理装置(CPU)、ランダムアクセスメモリ(RAM)、インプット・アウトプット(I/O)インターフェイス等のハードウェアを有するコンピュータプラットフォームで実施される。このコンピュータプラットフォームは、オペレーティングシステムとマイクロインストラクションコードも含む。ここに説明する多様なプロセスと機能は、オペレーティングシステムを経て実行されるマイクロインストラクションコードの一部、またはアプリケーションプログラムの一部(またはこれらの組み合わせ)であってもよい。また、追加のデータ記憶装置等、その他の多様な周辺装置がこのコンピュータプラットフォームに接続されてもよい。
添付した図面に示したシステム構成要素の一部はソフトウェアで実施してもよいので、システム構成要素間の実際の接続は、本発明がプログラムされる仕方に応じて異なってもよい。本発明の教示を与えられて、関連する技術分野における当業者は本発明の実施および構成を理解することができるであろう。
本発明の概念と原理を読者に理解してもらうため、本発明の一般的な説明を与える。その後、図1から9に関して本発明の多様な態様をより詳しく説明する。
本発明は、到来するトランスポートストリームパケットをフィルターし、要求されたプログラムに関係するパケットを収集し、収集したパケットをプログラムストリームに再パッケージする。少なくとも、パケットを取り除くためにプリフィルターされたトランスポートストリームを取り扱う特殊なメカニズムと、等時配信されたトランスポートストリームとデコーダ間の同期を維持する方法とが、このアプローチ独自のものである。
図1Aは、本発明の一実施形態による、MPEG−2トランスポートストリームをMPEG−2プログラムストリームに変換するシステム100を示すブロック図である。システム100は、ブロードキャストチューナまたは等時配信システム102、トランスポートストリーム・プログラムストリーム・トランスコーダ104、およびリアルタイム・プログラムストリーム・オーディオビジュアル・レンダリングハードウェアまたはソフトウェア106を含む。ブロードキャストチューナまたは等時配信システム102は、変換すべきトランスポートストリームを受信する。トランスポートストリームは、トランスポートストリーム・プログラムストリームトランスコーダ104によりプログラムストリームに変換される。プログラムストリームはリアルタイム・プログラムストリーム・オーディオビジュアル・レンダリングハードウェアまたはソフトウェア106によりリアルタイムで解釈して表現される。
図1Bは本発明の一実施形態による、MPEG−2トランスポートストリームをMPEG−2プログラムストリームに変換するステップ・構成要素を示すハイレベルのブロック図である。
ブロック110はトランスポートストリーム・デパケット化に対応する。ブロック120はパケット化されたエレメンタリストリーム(PES)パケットフィルタリングに対応する。ブロック130はプログラムストリームアセンブリに対応する。
図1Cは、本発明の一実施形態による、図1Aのトランスコーダ120により実施されるトランスポートストリーム・プログラムストリーム変換方法を示すフロー図である。図1Cの方法は図1Bに示した構成要素・ステップを詳説するものであることが分かるであろう。PESパケットを取得するためトランスポートストリームはパーサにより解析される(ステップ1105)。カレントPESパケットがトランスポートストリームの最終パケットであるか判断する(ステップ1110)。もしそうなら、ステップ1155に進む。そうでなければ、関連するパケットを識別し(PID)についてPESパケットが収集されPESバッファに記憶される(ステップ1115)。PESパケットが完全であるか判断する(ステップ1120)。もし完全でなければ、ステップ1105に戻る。もし完全であれば、完全なPESパケットがパックバッファ(Pack Buffer)に移される(ステップ1125)。
パックバッファが完全かどうか判断する(ステップ1130)。完全でなければ、ステップ1105に戻る。完全であれば、当該完全なパック(Pack)がトランスポートストリームからの最初の完全なパックがどうかを判断する(ステップ1135)。もしそうなら、プログラムストリームスタートヘッダが出力される(ステップ1140)。もしそうでないなら、完全なパックのパックヘッダ(Pack Header)が出力される(ステップ1145)。パックバッファの内容が出力され(ステップ1150)、ステップ1105に戻る。
ステップ1155で、PESバッファに残っているバイトがパックバッファに移される。プログラムストリームシステムヘッダがパックバッファの内容に加えられる(ステップ1160)。プログラムストリームがアウトプットされる(ステップ1165)。
図2は本発明の一実施形態による、図1Bのブロック110(トランスポートストリーム・デパケット化)により実施される方法のフロー図である。図2の方法は説明を分かりやすくするため単一のトランスポートパケットに関して説明しているが、この方法はトランスポートストリームのすべてのトランスポートパケットについて繰り返されることが分かるであろう。
ステップ210で、トランスポートストリームからトランスポートパケットが抽出される。ステップ220で、トランスポートパケットからエクステンドされたタイムスタンプが抽出される。エクステンドされたタイムスタンプにより、特にもしトランスコーダに配信されたトランスポートストリームパケットが元のトランスポートストリームの全てのパケットよりなっていない場合(すなわち、単一のプログラムがMPEG−2トランスポートストリーム・デマルチプレクサにより元のストリームから抽出された場合)、バイトがデコーダに到達すべき相対時間を適当に計算できる。タイムスタンプは、当該タイムスタンプがエクステンドされたタイムスタンプとして認識され、標準のトランスポートパケットと混同されないように、ユニークな識別子が先頭につけられる。
エクステンドされたタイムスタンプは、トランスポートパケットの所定のバイト(例えば最初のバイト)の実施の配信時間に対応するリアルタイム・クロックの値よりなることが分かるであろう。通常、PCR値が完全なトランスポートストリームとして十分である。しかし、ストリームをトランスコーダに提供する前に、ストリームの一部が取り除かれると無理なく期待できる。もしそうなると、PCRスタンプの間にパケットが発生した時間が転送で失われ、SCRとマルチプレクサレートの計算を不正確にする。この計算の誤差が十分大きいと、MPEG−2ストリームのSCRとDTS/PTS(デコード・タイムスタンプ/プレゼンテーション・タイムスタンプ)間の制限を破るかもしれない。そのような場合、デコーダによるオーディオおよびビデオレンダリングが不連続となる。PCRはトランスポートストリームに対応し、SCRはプログラムストリームに対応することは、知られているとおりである。
ステップ230で、関連する情報がトランスポートパケットのパケットヘッダから抽出される。関連する情報には、PCRベースとエクステンションフィールド、パケットのPID値、ユニットスタートフラグ、不連続フラグ、パケットのペイロード(MPEG−2プログラムデータ)、ペイロードの使用可能バイト数、エクステンドされたタイムスタンプクロック値を含んでもよいが、これに限定されない。すなわち、当該技術分野における当業者によって容易に確かめられるとおり、関連する情報にはプログラムに対応する任意の情報を含んでもよい。ステップ240で、最後のプログラムクロックリファレンス(PCR)が見つかってからのバイト数をカウントする。
図3は、本発明の一実施形態による、図1Bのブロック120(PESパケットフィルタリング)により実施される方法のフロー図である。図3の方法は説明を簡単にするために単一のトランスポートパケットに関して説明されているが、当該方法はトランスポートストリームの全トランスポートパケットについて繰り返されるということが分かるであろう。
ステップ310で、トランスポートパケットに付加されたエクステンドされたタイムスタンプがあるか(すなわち、図2の方法のステップ220でトランスポートパケットから抽出されたテクステンドされたタイムスタンプがあるか)判断する。もしエクステンドされたタイムスタンプがトランスポートパケットに付加されていたら、システムクロックタイム(PCR)がエクステンドされたタイムスタンプに基づき計算される(ステップ320)。そうでなければ、エクステンドされたタイムスタンプがトランスポートパケットに付加されていなければ、パケット時間は取得しうるPCRタイムスタンプを用いて補間される(ステップ330)。パケットが元のトランスポートストリームから取り除かれていれば時間が非常に不正確になることに注意を要する。もしトランスポートストリームがMPEGチューナ(デマルチプレクサ)による1チャンネル(プログラム)の抽出であったならば、これが典型的であるであろう。
ステップ340で、例えばトランスコーダで使用されていないPID値を有する、関連していないパケットがトランスポートパケットから特定され、捨てられる。
図4は本発明の一実施形態による、図1Bのブロック130(プログラムストリームアセンブリ)によって実施される方法のフロー図である。
ステップ410で、PESバッファ(オーディオおよびビデオ)から収集できるPES情報が特定される。ステップ420で、システムクロックリファレンス(SCR)情報がPCRデータから計算される。ステップ430で、PESが各関連するPES IDについてアセンブルされる。ステップ440で、PESパケットが完全かどうか判断する。もし完全であれば、完全なPESパケットがパックバッファにコピーされる(ステップ450)。もし完全でなければ、ステップ410に戻る。
ステップ470で、パックバッファが完全かどうか判断する。もし完全であれば、マルチプレクサレートが計算され、ヘッダがパックバッファ内のPESパケットに付加され、PESパケットがマルチプレクサレートを用いて多重化され、プログラムストリーム(PS)が出力される(ステップ480)。もし完全でなければ、ステップ410に戻る。
到来する等時配信されたトランスポートストリームとデコーダ間の同期を維持するため、ユニットスタートフラグが真に設定されたPESパケットの前と後ろのPCR値を取ることにより、SCR値が正確に計算される。図5は本発明の一実施形態による、到来する等時配信されたトランスポートストリームとデコーダ間の同期を維持する方法を示すフロー図である。
パケットがエクステンドされたタイムスタンプを有しているか判断する(ステップ510)。パケットがエクステンドされたタイムスタンプを有していなければ、SCRが以下の通り計算される(ステップ520):
デルタタイム=PCR値の差
トランスポートレート=(PCR間のバイト数)/(デルタタイム)
SCR=[(ユニットスタートパケットとPCRパケットのバイト数)/(トランスポートレート)]+(ユニットスタート前のPCR)
しかし、パケットがエクステンドされたタイムスタンプを有するならば、SCRが以下の通り計算される(ステップ530):
SCR=[(ユニットスタート時のデルタタイム)/(カレントパケットまでのデルタタイム)]+(ユニットスタート前のPCR)
マルチプレクサレートが以下の通り計算される(ステップ540):
デルタSCR=(パック終わりのSCR)−(パック初めのSCR)
マルチプレクサレート=[(アウトプットのバイト数)+(27,000,000ティック)]/(50バイト)/(デルタSCR)
ユニットスタートはフレームを始めるパケットのフラグに対応する。
プログラムのスイッチング(チャンネル変更)、PCRオーバーフロー等のため、PCRの不連続性はトランスポートストリームにおいて発生する。もしSCR不連続性が発生すると、マルチプレクサレートは計算されず、前に計算されたマルチプレクサレートが維持される。
図6は本発明の一実施形態による、MPEG−2トランスポートストリームからプログラムストリームへの変換における時間不連続性を処理する方法を示すフロー図である。
ステップ610で、SCR不連続性が検出される。デコーダがシステムヘッダを使用して内部リファレンスクロックをリセットしているか判断する(ステップ620)。
もしデコーダが内部クロックをリセットするのにシステムヘッダを使用していれば、不連続において、カレントパックが捨てられ(ステップ630)、内部リファレンスクロックの同期が外れないように内部リファレンスクロックを修正するようにデコーダに知らせるため、システムヘッダが後ろのパックヘッダに付加される(ステップ640)。
しかし、もしデコーダが内部リファレンスクロックをリセットするのにシステムヘッダを使用しないときは、不連続においてタイムスタンプのデコードをディスエーブルすることによって内部リファレンスクロックをリセットしてもよい。例えば、不連続においてデコーダの低ディレイモードのオンオフを切り替えることによって達成することができる(ステップ650a)。実際の方法は具体的なハードウェアまたはソフトウェアデコーダによりなされるリファレンスクロック制御に依存する。すなわち、ここに与えられる本発明の教示により、当該技術分野における当業者は、本発明の精神と範囲内において、不連続の前後にわたってタイムスタンプデコーディングをディスイネーブルする多様な方法を考え得るであろう。
もしパケットを取り除くためトランスポートストリームがプリフィルターされていると、トランスコーダがフィルターされたストリームからSCRとマルチプレクサレートを正確に決定できない。この問題に対する二つの解決方法を例として、図7と8を参照して説明する。
図7は本発明の一実施形態によるSCRとマルチプレクサレートを決定する方法を示すフロー図である。図8は本発明の他の実施形態によるSCRとマルチプレクサレートを決定する方法を示すフロー図である。図7と8の方法は、トランスポートストリームがいくつかのパケットを取り除くためプリフィルターされ、トランスコーダがフィルターされたストリームからSCRとマルチプレクサレート値を正確に決定できないような場合に使用される。
図7を参照して、タイムスタンプは各トランスポートパケットに付加される(ステップ710)。すなわち、最初のパケットバイトが受信された時間を含む元のトランスポートパケットにヘッダが付加される。SCRとマルチプレクサレートは付加されたタイムスタンプと図5の方法を用いて正確に計算できる(ステップ720)。
図8を参照して、パケット間で落とされたバイト数のカウントが決定される(ステップ810)。プログラムストリームに含まれるべきバイトについてバイト−タイムポジショニング(SCRおよびマルチプレクサレート)を適当に計算するために、当該カウントが図5の方法により計算に含まれる(ステップ820)。
いずれの方法(図7または8)でも使用できるが、どちらの方法も新しい情報を抽出するトランスポートストリームパーサへの変更を含み、それを後続の処理に伝える。バッファのオーバーフローまたはアンダーフローの条件を避け、到来するストリームとデコーダ間の同期を維持するために、これらの方法の一方を選択する。当該技術分野の当業者は、本発明の精神と範囲から逸脱することなく、フィルターされたストリームからSCRとマルチプレクサレートを決定するこれらおよび他の方法を企図するであろう。
図9は本発明の他の実施形態によるMPEG−2トランスポートストリームをMPEG−2プログラムストリームに変換するステップ・構成要素を示すハイレベルのブロック図である。
ステップ910で、入力トランスポートストリームを受信し、パケットバッファにトランスポートストリーム(TS)パケットを蓄積する。ステップ920で、パケットがオーディオまたはビデオに対応するかどうかを判断するためにパケットヘッダを解析する。パケットがオーディオに対応するときは、PESオーディオパケットとPCRリファレンスをPESオーディオバッファ999に集積する(ステップ930)。しかし、パケットがビデオに対応するときは、PESビデオパケットとPCRリファレンスをPESビデオバッファ998に集積する(ステップ940)。ステップ950で、PESパケットをプログラムストリーム(PS)にインターリーブし、PSパックバッファ997に置く。ステップ960で、SCRを計算し、PSパックにパックヘッダを付加する。ステップ970で、PSパックを出力プログラムストリームとして出力する。
添付した図面を参照して実施形態を説明したが、本システムと方法はこれらの実施形態そのものに限定されず、当該技術分野の当業者が本発明の範囲や精神から逸脱することなく他の多様な変更や修正を施すことができることを理解すべきである。添付したクレームにより明らかなように、そのような変更や修正は本発明の範囲に含まれるものと意図されている。
以上説明した実施形態に関して次の付記を記載する。
(付記1)トランスポートストリームをプログラムストリームに変換する際に、到来する前記トランスポートストリームとプログラムストリームデコーダ間に同期を維持する方法であって、
前記トランスポートストリームからシステムクロックリファレンス(SCR)を計算するステップ(420)と、
前記プログラムストリームのマルチプレクサレートを計算するステップ(480)と、
前記マルチプレクサレートを用いて前記トランスポートストリームに対応するパケット化されたエレメンタリストリーム(PES)を多重化することにより前記プログラムストリームを形成するステップ(480)とを含む方法。
(付記2)付記1記載の方法であって、さらに前記変換の際に時間不連続性を管理するステップを含み、
前記管理するステップは、
SCR不連続性を検出するステップ(610)と、
前記デコーダが内部リファレンスクロックをリセットするためにシステムヘッダを使用するとき、カレントパックを捨て、前記デコーダに前記内部リファレンスクロックを修正し同期させるように知らせるために、後続のパックにシステムヘッダを付加するステップ(630)とを含む方法。
(付記3)付記1記載の方法であって、さらに前記変換の際時間不連続性を管理するステップを含み、前記管理するステップは、
SCR不連続性を検出するステップ(610)と、
前記デコーダが内部リファレンスクロックをリセットするためにシステムヘッダを使用しないとき、前記デコーダの内部リファレンスクロックをリセットするため、前記SCR不連続性の前後にわたって前記デコーダによるタイムスタンプデコーディングをディスエーブルするステップ(650)とを含む方法。
(付記4)付記3記載の方法であって、前記ディスエーブルするステップは、前記SCR不連続性において前記デコーダの低ディレイモードのオンオフを切り替えるステップ(650a)を含む方法。
(付記5)付記1記載の方法であって、前記SCRを計算するステップを実行するとき、前記トランスポートストリームのパケット間で落とされたバイト数を含めるステップをさらに含む方法。
(付記6)付記1記載の方法であって、前記SCRを計算するステップは、
前記トランスポートストリームのプログラムクロックリファレンス(PCR)値の間の差としてデルタタイムを算出するステップ(520)と、
前記デルタタイムで割ったPCRの間のバイト数としてトランスポートレートを算出するステップ(520)と、
ユニットスタートパケットとPCRパケット間のバイト数を前記トランスポートレートで割り、ユニットスタート前のPCRを足してSCRを算出するステップ(520)とを含む方法。
(付記7)付記1記載の方法であって、前記マルチプレクサレートを計算するステップは、
パックの終わりのSCRとパックの初めのSCRの間の差としてデルタSCRを算出するステップ(540)と、
出力するバイト数と27,000,000ティックとの積を50バイトで割り、前記デルタSCRで割ったものとして前記マルチプレクサレートを算出するステップ(540)とを含むことを特徴とする方法。
(付記8)付記1記載の方法であって、前記トランスポートストリームは所定バイトの実際の配信時間に対応する値を特定する、エクステンドされたタイムスタンプを有する少なくとも一つのパケットよりなることを特徴とする方法。
(付記9)付記8記載の方法であって、前記SCRを計算するステップはユニットスタートにおけるデルタタイムをカレントパケットへのデルタタイムで割り、ユニットスタート前のPCRを加えたものとしてSCRを算出するステップを含むことを特徴とする方法。
(付記10)付記8記載の方法であって、前記マルチプレクサレートを計算するステップは、
パックの終わりのSCRとパックの初めのSCRの間の差としてデルタSCRを算出するステップ(540)と、
出力するバイト数と27,000,000ティックとの積を50バイトで割り、前記デルタSCRで割ったものとして前記マルチプレクサレートを算出するステップ(540)を含むことを特徴とする方法。
(付記11)付記8記載の方法であって、最初のパケットバイトが受信された時間を特定するタイムスタンプを各トランスポートパケットに付加し、前記SCRを計算するステップの実行に前記タイムスタンプを使用するステップをさらに含む方法。
(付記12)トランスポートストリームをプログラムストリームに変換する際に、到来する前記トランスポートストリームとプログラムストリームデコーダ間に同期を維持する装置であって、
前記トランスポートストリームからシステムクロックリファレンス(SCR)を計算する手段(420)と、
前記プログラムストリームのマルチプレクサレートを計算する手段(480)と、
前記マルチプレクサレートを用いて前記トランスポートストリームに対応するパケット化されたエレメンタリストリーム(PES)を多重化することにより前記プログラムストリームを形成する手段(480)と
よりなる装置。
(付記13)付記12記載の装置であって、さらに、前記変換の際時間不連続性を管理する手段よりなる装置。
(付記14)付記13記載の装置であって、
前記時間不連続性を管理する手段は、
SCR不連続性を検出する手段(610)と、
前記デコーダが内部リファレンスクロックをリセットするためにシステムヘッダを使用するとき、カレントパックを捨て、前記デコーダに前記内部リファレンスクロックを修正し同期させるように知らせるために、後続のパックにシステムヘッダを付加する手段(650)とよりなる装置。
(付記15)付記13記載の方法であって、さらに前記時間不連続性を管理する手段は、
SCR不連続性を検出する手段(610)と、
前記デコーダが内部リファレンスクロックをリセットするためにシステムヘッダを使用しないとき、前記デコーダの内部リファレンスクロックをリセットするため、前記SCR不連続性の前後にわたって前記デコーダによるタイムスタンプデコーディングをディスエーブルする手段(650)とよりなる装置。
(付記16)付記15記載の装置であって、前記タイムスタンプでコーディングをディスエーブルする手段は、前記SCR不連続性において前記デコーダの低ディレイモードのオンオフを切り替える(650a)ことを特徴とする装置。
(付記17)付記12記載の装置であって、前記SCRを計算する手段は、前記SCRを計算するとき、前記トランスポートストリームのパケット間で落とされたバイト数を含めること(810)を特徴とする装置。
(付記18)付記12記載の装置であって、前記トランスポートストリームは所定バイトの実際の配信時間に対応する値を特定する、エクステンドされたタイムスタンプを有する少なくとも一つのパケットよりなること(510)を特徴とする装置。
(付記19)付記18記載の装置であって、さらに、最初のパケットバイトが受信された時間を特定するタイムスタンプを各トランスポートパケットに付加する手段よりなり、前記SCRを計算する手段は前記SCRの計算に前記タイムスタンプを使用すること(710)を特徴とする装置。
(付記20)トランスポートストリームをプログラムストリームに変換する装置であって、
前記トランスポートストリームを供給する等時配信システムと、
前記トランスポートストリームからシステムクロックリファレンス(SCR)を計算し、前記プログラムストリームのためにマルチプレクサレートを計算し、前記マルチプレクサレートを用いて前記トランスポートストリームに対応するパケット化されたエレメンタリストリーム(PES)パケットを多重化することによりプログラムストリームを形成するプログラムストリームデコーダと
よりなる装置。
(付記21)MPEGトランスポートストリームをMPEGプログラムストリームにコード変換する装置であって、
前記トランスポートストリームからパケット化されたエレメンタリストリーム(PES)パケットを解析するパーサと、
前記解析されたPESパケットの選択されたものを通過させバッファするPESフィルター(120)と、
前記MPEGプログラムストリームを形成するために前記解析されたPESパケットの選択されてバッファされたものにアクセスし、多重化するパケットアセンブラ(130)と
よりなる装置。

Claims (1)

  1. トランスポートストリームをプログラムストリームに変換する際に、到来する前記トランスポートストリームとプログラムストリームデコーダとの間の同期を維持する方法であって、
    前記トランスポートストリームのプログラムクロックリファレンス(PCR)データから前記プログラムストリームのシステムクロックリファレンス(SCR)を計算するステップであって、前記SCRの計算に用いられる前記PCRデータは、プログラムストリームの開始ヘッダを示す、フレームを始めるパケット化エレメンタリストリーム(PES)パケットの前のPCR値を含み、前記フレームを始める前記PESパケットの後のPCR値を含むステップと、
    前記プログラムストリームの出力バイト数と、前記プログラムストリームの計算したSCRとに基づき前記プログラムストリームのマルチプレクサレートを計算するステップと、
    前記プログラムストリームに対応し前記トランスポートストリームに現れるPESパケットを、前記マルチプレクサレートを用いて多重化することにより前記プログラムストリームを形成するステップとを含む方法。
JP2010085455A 2001-11-29 2010-04-01 プログラムストリーム変換のためのトランスポートストリーム Expired - Fee Related JP5214659B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/997,943 US6868125B2 (en) 2001-11-29 2001-11-29 Transport stream to program stream conversion
US09/997,943 2001-11-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003550380A Division JP5202786B2 (ja) 2001-11-29 2002-11-14 プログラムストリーム変換のためのトランスポートストリーム

Publications (2)

Publication Number Publication Date
JP2010154574A true JP2010154574A (ja) 2010-07-08
JP5214659B2 JP5214659B2 (ja) 2013-06-19

Family

ID=25544584

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2003550380A Expired - Fee Related JP5202786B2 (ja) 2001-11-29 2002-11-14 プログラムストリーム変換のためのトランスポートストリーム
JP2010085455A Expired - Fee Related JP5214659B2 (ja) 2001-11-29 2010-04-01 プログラムストリーム変換のためのトランスポートストリーム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2003550380A Expired - Fee Related JP5202786B2 (ja) 2001-11-29 2002-11-14 プログラムストリーム変換のためのトランスポートストリーム

Country Status (10)

Country Link
US (1) US6868125B2 (ja)
EP (1) EP1454418B1 (ja)
JP (2) JP5202786B2 (ja)
KR (2) KR100983989B1 (ja)
CN (1) CN100352278C (ja)
AU (1) AU2002365769A1 (ja)
BR (1) BRPI0214283B1 (ja)
MX (1) MXPA04004894A (ja)
MY (1) MY128843A (ja)
WO (1) WO2003049307A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018207499A (ja) * 2014-01-02 2018-12-27 エルジー エレクトロニクス インコーポレイティド 放送伝送装置、放送伝送装置の動作方法、放送受信装置及び放送受信装置の動作方法

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100584179B1 (ko) * 1999-01-18 2006-05-26 엘지전자 주식회사 통신 인터페이스를 이용한 디지털 데이터 스트림 송수신 장치 및 방법
KR100590185B1 (ko) * 1999-11-20 2006-06-14 삼성전자주식회사 부가정보를 포함하는 오디오/비디오데이터의 저장 및검색장치
JP3825682B2 (ja) * 2001-11-09 2006-09-27 株式会社東芝 フォーマット変換を行う情報記録装置及び情報処理装置
US20030185238A1 (en) * 2002-04-01 2003-10-02 Strasser David A. System for maintaining original delivery times in transport packets and method thereof
FR2846506B1 (fr) * 2002-10-28 2005-02-11 Philippe Marie Alber Guenebaud Dispositif de trans-compression d'un flux numerique audiovisuel pour l'adapter aux equipements de television existants
DE602004027799D1 (de) 2003-04-10 2010-08-05 Panasonic Corp Informationsaufzeichnungsmedium, einrichtung und verfahren zum aufzeichnen von informationen in einem informationsaufzeichnungsmedium
JP4346966B2 (ja) * 2003-06-13 2009-10-21 キヤノン株式会社 撮像装置
US7693222B2 (en) * 2003-08-13 2010-04-06 Ericsson Television Inc. Method and system for re-multiplexing of content-modified MPEG-2 transport streams using PCR interpolation
WO2005020557A2 (en) * 2003-08-13 2005-03-03 Skystream Networks Inc. Method and system for modeling the relationship of the bit of a transport stream and the bit rate of an elementary stream carried therein
JP2005151463A (ja) * 2003-11-19 2005-06-09 Pioneer Electronic Corp ストリームデータ受信装置およびストリームデータ受信方法
ES2334039T3 (es) * 2004-05-10 2010-03-04 Innova Patent Gmbh Dispositivo transportador con cinta transportadora.
US7668243B2 (en) * 2004-05-18 2010-02-23 Texas Instruments Incorporated Audio and video clock synchronization in a wireless network
JP2007150845A (ja) 2005-11-29 2007-06-14 Samsung Electronics Co Ltd データ再生装置,データ再生方法およびそのプログラム
CN100391261C (zh) * 2005-12-05 2008-05-28 上海广电(集团)有限公司中央研究院 一种传输流复用的方法
JP4675784B2 (ja) * 2006-01-16 2011-04-27 三菱電機株式会社 ストリーム変換装置、情報記録装置、及びストリーム変換方法
CN101395919A (zh) * 2006-03-07 2009-03-25 日本电气株式会社 运动图像分发系统和转换设备
US9106896B2 (en) * 2010-10-19 2015-08-11 Electronics And Telecommunications Research Institute Method and apparatus for non-real time stereoscopic video service
KR20140099146A (ko) * 2013-02-01 2014-08-11 한국전자통신연구원 다중 영상 기반 방송 서비스를 위한 다중 영상의 기준 pcr 결정 방법 및 그 장치
CN113542765B (zh) * 2021-07-13 2023-09-15 海信电子科技(深圳)有限公司 一种媒体数据跳变续播方法及显示设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001050773A1 (en) * 1999-12-30 2001-07-12 Koninklijke Philips Electronics N.V. Method and apparatus for converting data streams

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8922702D0 (en) * 1989-10-09 1989-11-22 Videologic Ltd Radio television receiver
CA2146472C (en) * 1994-04-22 2007-10-09 Kevin Elliott Bridgewater Packet video signal inverse transport processor with memory address circuitry
JPH09507364A (ja) * 1994-10-11 1997-07-22 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ 相互作用音声映像番組伝送方法および装置
KR0166935B1 (ko) * 1994-11-23 1999-03-20 구자홍 엠펙2 트랜스포트 디코더 장치
US5619337A (en) * 1995-01-27 1997-04-08 Matsushita Electric Corporation Of America MPEG transport encoding/decoding system for recording transport streams
KR100387460B1 (ko) * 1995-03-28 2003-10-04 코닌클리케 필립스 일렉트로닉스 엔.브이. 기록장치및방법,기록매체,재생장치
KR100226528B1 (ko) * 1995-03-29 1999-10-15 가나이 쓰도무 다중화 압축화상/음성데이타의 복호장치
US6163644A (en) * 1995-04-27 2000-12-19 Hitachi, Ltd. Method and apparatus for receiving and/or reproducing digital signal
US5959659A (en) * 1995-11-06 1999-09-28 Stellar One Corporation MPEG-2 transport stream decoder having decoupled hardware architecture
JP3269768B2 (ja) 1996-01-16 2002-04-02 株式会社東芝 ディジタル信号受信装置
US6172988B1 (en) * 1996-01-31 2001-01-09 Tiernan Communications, Inc. Method for universal messaging and multiplexing of video, audio, and data streams
US5828414A (en) * 1996-02-23 1998-10-27 Divicom, Inc. Reduction of timing jitter in audio-video transport streams
US5909257A (en) * 1996-02-27 1999-06-01 Victor Company Of Japan, Ltd. Apparatus and method of receiving broadcasted digital signal
US5828416A (en) * 1996-03-29 1998-10-27 Matsushita Electric Corporation Of America System and method for interfacing a transport decoder to a elementary stream video decorder
JP3589372B2 (ja) * 1996-06-07 2004-11-17 ソニー株式会社 データ多重化方法
US6157673A (en) * 1996-12-26 2000-12-05 Philips Electronics North America Corp. Fast extraction of program specific information from multiple transport streams
CN1219265A (zh) * 1997-03-12 1999-06-09 皇家菲利浦电子有限公司 数字信息信号在记录载体上的记录
KR19980073528A (ko) * 1997-03-15 1998-11-05 구자홍 엠펙시스템 복호기장치
KR100438693B1 (ko) * 1997-06-04 2005-08-17 삼성전자주식회사 음성및영상다중전송시스템
US6229801B1 (en) * 1997-09-26 2001-05-08 International Business Machines Corporation Delivery of MPEG2 compliant table data
US6292490B1 (en) * 1998-01-14 2001-09-18 Skystream Corporation Receipts and dispatch timing of transport packets in a video program bearing stream remultiplexer
JP3844877B2 (ja) * 1998-04-08 2006-11-15 パイオニア株式会社 ストリーム変換装置
US6195392B1 (en) * 1998-06-30 2001-02-27 U.S. Philips Corporation Method and arrangement for generating program clock reference values (PCRS) in MPEG bitstreams
JP2000138896A (ja) * 1998-10-30 2000-05-16 Hitachi Ltd 画像音声記録装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001050773A1 (en) * 1999-12-30 2001-07-12 Koninklijke Philips Electronics N.V. Method and apparatus for converting data streams

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018207499A (ja) * 2014-01-02 2018-12-27 エルジー エレクトロニクス インコーポレイティド 放送伝送装置、放送伝送装置の動作方法、放送受信装置及び放送受信装置の動作方法
US10694260B2 (en) 2014-01-02 2020-06-23 Lg Electronics Inc. Broadcast transmission device and operating method thereof, and broadcast reception device and operating method thereof
US11057684B2 (en) 2014-01-02 2021-07-06 Lg Electronics Inc. Broadcast transmission device and operating method thereof, and broadcast reception device and operating method thereof

Also Published As

Publication number Publication date
KR20100008006A (ko) 2010-01-22
EP1454418A4 (en) 2010-04-07
EP1454418A1 (en) 2004-09-08
MXPA04004894A (es) 2004-07-30
WO2003049307A1 (en) 2003-06-12
EP1454418B1 (en) 2012-08-08
BR0214283A (pt) 2004-09-21
MY128843A (en) 2007-02-28
US20030099297A1 (en) 2003-05-29
JP2005512386A (ja) 2005-04-28
US6868125B2 (en) 2005-03-15
KR100983989B1 (ko) 2010-09-30
KR20050058252A (ko) 2005-06-16
CN1599982A (zh) 2005-03-23
AU2002365769A1 (en) 2003-06-17
BRPI0214283B1 (pt) 2016-08-02
JP5202786B2 (ja) 2013-06-05
CN100352278C (zh) 2007-11-28
JP5214659B2 (ja) 2013-06-19

Similar Documents

Publication Publication Date Title
JP5214659B2 (ja) プログラムストリーム変換のためのトランスポートストリーム
JP4668515B2 (ja) マルチメディアコンテンツに同期化されたメタデータ伝送装置及び方法
JP4437341B2 (ja) ターゲットシステム復号化器及びデータのバッファ化システム
US6438145B1 (en) Transport packet distribution system and method using local header
US7359006B1 (en) Audio module supporting audio signature
US6434146B1 (en) Use of sequencing information in a local header that allows proper synchronization of packets to subsidiary interfaces within the post-processing environment of an mpeg-2 packet demultiplexing architecture
US6434170B1 (en) Memory-based circular queue with local descriptive information to implement a storage area for filtering mpeg-2 packets that are distributed and/or processed under the control of a host microprocessor by a direct memory access mechanism
US20030123556A1 (en) Information processing apparatus
JP4490811B2 (ja) 暗号化mpegトランスポートストリームからmpegプログラムストリームを作成する方法
CN100401784C (zh) 数字多媒体数据接收机的数据同步方法和设备
JPH09139937A (ja) 動画ストリーム変換装置
WO2005071970A1 (en) Method and apparatus for determining timing information from a bit stream
US7526427B2 (en) System and method for reception, processing and transmission of digital audio stream
JP3622451B2 (ja) データ処理装置およびデータ処理方法、並びに記録媒体
US8873639B2 (en) System and method for demultiplexing an MPEG-2 transport stream
JP4016215B2 (ja) ディジタル信号符号化方法および装置、並びにディジタル信号伝送方法および装置
JPH11112947A (ja) データ多重化装置およびデータ多重化方法、データ処理装置およびデータ処理方法、並びに伝送媒体
JP2885217B2 (ja) Mpegデータ処理回路
JP2004040576A (ja) データ分配装置及び方法
JP2005347787A (ja) 情報記録装置及び情報記録方法
JP2002198925A (ja) データ受信装置及びその方法
JP2001346166A (ja) 圧縮符号化データ再生方法および装置
KR100269787B1 (ko) 엠펙 포맷 간의 실시간 데이터 변환 방법
CA2210375C (en) Multiplexer for multiple media streams
Chen Examples of Video Transport Multiplexer

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100402

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120710

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20121010

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20121015

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130110

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130227

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5214659

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160308

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees