JP2003283447A - Data broadcast signal transmission apparatus and data broadcast signal transmission method - Google Patents

Data broadcast signal transmission apparatus and data broadcast signal transmission method

Info

Publication number
JP2003283447A
JP2003283447A JP2002081641A JP2002081641A JP2003283447A JP 2003283447 A JP2003283447 A JP 2003283447A JP 2002081641 A JP2002081641 A JP 2002081641A JP 2002081641 A JP2002081641 A JP 2002081641A JP 2003283447 A JP2003283447 A JP 2003283447A
Authority
JP
Japan
Prior art keywords
data
processing process
packet
data broadcast
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002081641A
Other languages
Japanese (ja)
Other versions
JP4177588B2 (en
Inventor
Masaki Tanaka
正樹 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2002081641A priority Critical patent/JP4177588B2/en
Publication of JP2003283447A publication Critical patent/JP2003283447A/en
Application granted granted Critical
Publication of JP4177588B2 publication Critical patent/JP4177588B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

<P>PROBLEM TO BE SOLVED: To provide a data broadcast signal transmission apparatus capable of efficiently transmitting the data signals of a plurality of kinds. <P>SOLUTION: Parts of a plurality of processing processes subjected to parallel processing by a CPU 153 are respectively set to a PSI/SI data reception section P2 and a PSI/SI data primary multiplex section P3 for converting PSI/SI data into a TS packet, a plurality of remaining processing processes are respectively set to a carousel data reception section P5 and a carousel data primary multiplex section P6 for converting carousel data into a TS packet, and to a PES data reception section P7 and a PES data primary multiplex section P8 for converting PES data into a TS packet. <P>COPYRIGHT: (C)2004,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】この発明は、衛星放送、地上
波放送等のデジタル放送システムにおいて、データ放送
を行うためのデータ放送信号送出装置及びデータ放送信
号送出方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a data broadcasting signal transmitting apparatus and a data broadcasting signal transmitting method for performing data broadcasting in a digital broadcasting system such as satellite broadcasting and terrestrial broadcasting.

【0002】[0002]

【従来の技術】近年、デジタル放送技術の確立に伴い、
通信衛星や放送衛星を使用する衛星放送システムではデ
ジタル放送が開始され、さらに地上波放送システムにお
いてもデジタル放送への移行が計画されている。
2. Description of the Related Art With the establishment of digital broadcasting technology in recent years,
Digital broadcasting has started in satellite broadcasting systems that use communication satellites and broadcasting satellites, and there is a plan to shift to digital broadcasting in terrestrial broadcasting systems.

【0003】上記デジタル放送では、画像や音声による
テレビジョン放送だけでなく、文字やデータによる放送
(データ放送)も可能となる。
In the above digital broadcasting, not only television broadcasting by image and sound but also broadcasting by character and data (data broadcasting) is possible.

【0004】[0004]

【発明が解決しようとする課題】ところで、上記データ
放送では、テレビジョン放送番組に連動した情報や、ま
たテレビジョン放送番組とは独立した情報等を提供して
いる。特に、テレビジョン放送番組に連動した情報につ
いては、ユーザがいつ受信を開始しても即座に表示でき
るように複数の番組データ(カルーセルデータ)を一定
の時間間隔で繰り返し送信している。このため、放送局
では、画像や音声を取り扱う送信系統の他に、カルーセ
ルデータを取り扱う送信系統と、テレビジョン放送番組
とは独立した情報(PESデータ)を取り扱う送信系統
とが別々に存在することとなる。
By the way, in the above-mentioned data broadcasting, information linked to a television broadcasting program, information independent of the television broadcasting program, and the like are provided. In particular, regarding information linked to a television broadcast program, a plurality of program data (carousel data) is repeatedly transmitted at regular time intervals so that the user can immediately display the information regardless of the start of reception. Therefore, in the broadcasting station, in addition to a transmission system that handles images and audio, a transmission system that handles carousel data and a transmission system that handles information (PES data) independent of a television broadcast program exist separately. Becomes

【0005】特に、上記放送局では、多チャンネル分の
データ放送番組を放送することになると、増設すべき送
信系統分の送出装置が必要となり、その分設置スペース
が必要になるとともに、システムのコストアップを招く
ことになる。
In particular, in the above broadcasting station, when broadcasting a data broadcasting program for multiple channels, a transmitting device for the transmission system to be added is required, an installation space is required for that amount, and the system cost is increased. It will invite up.

【0006】また、上記放送局では、放送帯域が予め固
定されているため、データ放送により伝送すべきデータ
を多重化出力レートからテレビジョン放送番組の画像及
び音声のビットレートを差し引いたレートで出力しなけ
ればならない。このため、データ放送のビットレートの
管理を行なう必要がある。
Further, in the above broadcasting station, since the broadcasting band is fixed in advance, the data to be transmitted by the data broadcasting is output at a rate obtained by subtracting the bit rate of the image and audio of the television broadcasting program from the multiplexed output rate. Must. Therefore, it is necessary to manage the bit rate of data broadcasting.

【0007】しかし、上記放送局の多重化装置では、テ
レビジョン放送の画像及び音声、データ放送のカルーセ
ルデータ及びPESデータの多重化出力レートを管理す
ることができるが、多重化出力レートに含まれるデータ
放送のビットレートについては管理することが困難であ
る。
However, the above-mentioned multiplexing device of the broadcasting station can manage the multiplexed output rate of the image and sound of the television broadcast, the carousel data and the PES data of the data broadcast, and is included in the multiplexed output rate. It is difficult to manage the bit rate of data broadcasting.

【0008】この発明の目的は、複数種類のデータ放送
信号を効率良く送出することができ、しかも省スペース
化及び低コスト化を図るとともに、複数種類のデータ放
送信号のトータルビットレートを管理することが可能な
データ放送信号送出装置及びデータ放送信号送出方法を
提供することにある。
It is an object of the present invention to efficiently transmit a plurality of types of data broadcasting signals, save space and reduce costs, and manage the total bit rate of a plurality of types of data broadcasting signals. A data broadcasting signal transmitting apparatus and a data broadcasting signal transmitting method capable of

【0009】[0009]

【課題を解決するための手段】この発明は、上記目的を
達成するために、以下のように構成される。
In order to achieve the above object, the present invention is configured as follows.

【0010】(1)所定周期ごとに複数の第1データ放
送番組それぞれの素材データを繰り返し配列してなる第
1のデータ放送番組情報、第1のデータ放送番組とは異
なる第2のデータ放送番組から成り、少なくともヘッダ
領域及び情報領域を備える規格化された第2のデータ放
送番組情報、及び受信機側で再生すべき第1及び第2の
サービス番組に関する制御情報をそれぞれパケット構造
の伝送用ストリームに変換し、多重化装置にて各伝送用
ストリームを他のストリームと多重して放送帯域中の所
定帯域を介して放送する放送信号送出システムの多重化
装置の入力端子に接続され、かつ複数のプロセスを並列
処理可能なデータ放送送出装置であって、複数のプロセ
スとして、第1のデータ放送番組情報を前記伝送用スト
リームに変換する第1の処理プロセス、第2のデータ放
送番組情報を伝送用ストリームに変換する第2の処理プ
ロセス、及び制御情報を伝送用ストリームに変換する第
3の処理プロセスを備え、かつ、入力信号のうち、第1
のデータ放送番組情報を第1の処理プロセスへ、第2の
データ放送番組情報を第2の処理プロセスへ、制御情報
を第3の処理プロセスへ導出する入力信号分離手段と、
第1、第2及び第3の処理プロセスの各出力を多重して
多重化装置に出力する多重化出力手段とを備えるように
したものである。
(1) First data broadcast program information obtained by repeatedly arranging material data of each of a plurality of first data broadcast programs at a predetermined cycle, and a second data broadcast program different from the first data broadcast program. And a standardized second data broadcast program information including at least a header area and an information area, and control information related to the first and second service programs to be reproduced on the receiver side, respectively, in a transmission stream having a packet structure. Connected to an input terminal of a multiplexer of a broadcast signal transmission system for converting each transmission stream into another stream by a multiplexer and broadcasting through a predetermined band in a broadcast band, and A data broadcast transmission device capable of parallel processing, comprising a plurality of processes for converting first data broadcast program information into the transmission stream. A first processing process, a second processing process for converting the second data broadcast program information into a transmission stream, and a third processing process for converting control information into a transmission stream, and First
Input data separation means for deriving the data broadcast program information to the first processing process, the second data broadcast program information to the second processing process, and the control information to the third processing process,
Multiplexing output means for multiplexing the respective outputs of the first, second and third processing processes and outputting them to a multiplexer is provided.

【0011】(1)の発明によれば、複数のプロセスの
うちの1つを、第1のデータ放送番組情報を伝送用スト
リームに変換する第1の処理プロセスに設定し、残りの
複数のプロセスをそれぞれ、第2のデータ放送番組情報
を伝送用ストリームに変換する第2の処理プロセス、制
御情報を伝送用ストリームに変換する第3の処理プロセ
スに設定し、入力信号分離手段により入力信号を情報種
類ごとに第1、第2及び第3の処理プロセスに振り分
け、多重化出力手段により各処理プロセスの出力伝送用
ストリームパケットを多重化して出力するようにしてい
るので、1つの送出装置を第1のデータ放送番組の送出
処理用及び第2のデータ放送番組の送出処理用に共用す
ることができ、各々送出装置を別途用意する必要はな
い。このため、1台の送出装置で複数種類のデータ放送
信号を効率良く送出することが可能となり、しかも送出
装置台数を減らせる分コストダウン、省スペース化を図
れるとともに、トータルビットレート管理を行なうこと
ができる。
According to the invention of (1), one of the plurality of processes is set as a first processing process for converting the first data broadcast program information into a transmission stream, and the remaining plurality of processes are set. Are respectively set as a second processing process for converting the second data broadcast program information into a transmission stream and a third processing process for converting control information into a transmission stream, and the input signal is separated by the input signal separating means. Since the first, second, and third processing processes are sorted by type and the output transmission stream packet of each processing process is multiplexed and output by the multiplex output means, one sending device is the first. It can be shared for the transmission processing of the data broadcasting program and the transmission processing of the second data broadcasting program, and it is not necessary to separately prepare each transmission device. Therefore, it is possible to efficiently transmit a plurality of types of data broadcasting signals with one transmitting device, and further, the number of transmitting devices can be reduced, resulting in cost reduction and space saving, and total bit rate management. You can

【0012】(2)第1の処理プロセスは、カルーセル
データを取り込み解析し、この解析結果に基づいてTS
パケットを生成すると共に、時間情報としてのSTC(S
ystem Time Clock)をTSパケットに付加し、第2の処
理プロセスは、PESデータを取り込み解析し、この解
析結果に基づいてTSパケットを生成すると共に、時間
情報としてのSTCをTSパケットに付加し、第3の処
理プロセスは、PSI/SIデータを取り込み解析し、
この解析結果に基づいてTSパケットを生成すると共
に、時間情報としてのSTCをTSパケットに付加し、
多重化出力手段は、各出力TSパケットを多重化する際
のビットレートと予め決められた基準ビットレートとを
比較し、この比較結果に基づきTSパケットを送出ST
C順に従って選択的に多重出力することを特徴とする。
(2) The first processing process takes in and analyzes carousel data, and based on the analysis result, TS
A packet is generated and STC (S
ystem Time Clock) is added to the TS packet, and the second processing process takes in and analyzes the PES data, generates a TS packet based on the analysis result, and adds STC as time information to the TS packet, The third process is to capture and analyze PSI / SI data,
A TS packet is generated based on the analysis result, and STC as time information is added to the TS packet,
The multiplexing output means compares the bit rate at the time of multiplexing each output TS packet with a predetermined reference bit rate, and sends the TS packet based on the comparison result.
It is characterized in that multiple outputs are selectively output in the C order.

【0013】(2)の発明によれば、多重化出力手段に
より各TSパケットを多重化する際のビットレートが基
準ビットレートと比較され、この比較結果に基づいて、
TSパケットがSTCの早い順に選択されて、多重出力
される。したがって、ビットレートが基準ビットレート
を超えたとしても、これに比較的柔軟に対応することが
でき、これにより放送帯域中の限られたデータ放送用の
帯域を有効に利用して、複数種類のデータ放送信号を効
率良く放送できる。
According to the invention of (2), the bit rate at the time of multiplexing each TS packet is compared with the reference bit rate by the multiplexing output means, and based on the comparison result,
TS packets are selected in order from the earliest STC and are multiplexed and output. Therefore, even if the bit rate exceeds the reference bit rate, it is possible to deal with this relatively flexibly, and by effectively using the limited band for data broadcasting in the broadcasting band, a plurality of types of Data broadcasting signals can be efficiently broadcast.

【0014】[0014]

【発明の実施の形態】以下、この発明の実施形態につい
て図面を参照して詳細に説明する。
BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

【0015】図1は、この発明に係るデジタル放送信号
多重送出装置が適用される局内システムの一実施形態を
示すブロック構成図である。
FIG. 1 is a block diagram showing an embodiment of an intra-station system to which the digital broadcast signal multiplex transmitting apparatus according to the present invention is applied.

【0016】このシステムは、同図に示すように、エン
コーダ(ENC)11,12と、マルチプレクサ(MU
X)13と、符号化多重制御部(EMC)14と、デー
タ放送送出部15と、自動番組送出制御部(APC)1
6と、局内時計17と、データサーバ(DS)18とを
備えている。
This system includes encoders (ENC) 11 and 12 and a multiplexer (MU) as shown in FIG.
X) 13, an encoding / multiplexing control unit (EMC) 14, a data broadcast transmission unit 15, and an automatic program transmission control unit (APC) 1
6, a local clock 17 and a data server (DS) 18.

【0017】エンコーダ11は、テレビジョン放送番組
の映像信号をMPEG2符号化方式で圧縮符号化してビ
ットストリームを生成し、マルチプレクサ13に出力す
る。エンコーダ12は、テレビジョン放送番組の音声信
号をAAC(Advanced AudioCoding)符号化方式で圧縮
符号化してビットストリームを生成し、マルチプレクサ
13に出力する。
The encoder 11 compresses and encodes the video signal of the television broadcast program by the MPEG2 encoding system to generate a bit stream, and outputs it to the multiplexer 13. The encoder 12 compresses and encodes the audio signal of the television broadcast program by the AAC (Advanced Audio Coding) encoding method to generate a bit stream, and outputs the bit stream to the multiplexer 13.

【0018】マルチプレクサ13は、各エンコーダ1
1,12の出力と、データ放送送出部15から出力され
るデータ放送用データとを多重化し、トランスポートス
トリームとして送出する。
The multiplexer 13 includes each encoder 1
The outputs of 1 and 12 and the data for data broadcast output from the data broadcast transmitter 15 are multiplexed and transmitted as a transport stream.

【0019】符号化多重制御部14は、自動番組送出制
御部16から提供される指示情報、放送スケジュールデ
ータ及び局内時計17で計測される編成時刻に基づいて
エンコーダ11,12及びマルチプレクサ13を制御す
る。
The encoding / multiplexing control unit 14 controls the encoders 11 and 12 and the multiplexer 13 based on the instruction information provided from the automatic program transmission control unit 16, the broadcast schedule data, and the organization time measured by the local clock 17. .

【0020】データ放送送出部15は、自動番組送出制
御部16から提供される指示情報及びデータサーバ18
から提供される編成情報に基づいて、データ放送のTS
パケットをマルチプレクサ13に送出するものである。
The data broadcast transmission section 15 includes the instruction information and the data server 18 provided from the automatic program transmission control section 16.
TS of data broadcasting based on the organization information provided by
The packet is sent to the multiplexer 13.

【0021】自動番組送出制御部16は、データサーバ
18から提供される放送スケジュールデータ及び局内時
計17で計測される番組編成時刻に従って、符号化多重
部14及びデータ放送送出部15に対し指示情報を送出
して符号化多重部14の符号化多重処理を制御し、また
データ放送送出部15の送出処理を制御するようにして
いる。
The automatic program transmission control unit 16 sends instruction information to the encoding / multiplexing unit 14 and the data broadcast transmission unit 15 according to the broadcast schedule data provided from the data server 18 and the program organization time measured by the local clock 17. The data is transmitted to control the encoding / multiplexing process of the encoding / multiplexing unit 14, and the transmission process of the data broadcast transmitting unit 15 is controlled.

【0022】図2は、上記データ放送送出部15の具体
的構成を示すブロック図である。
FIG. 2 is a block diagram showing a specific configuration of the data broadcast transmission section 15.

【0023】図2において、データバス151上には入
力インタフェース(I/F)152、CPU153、R
AM154、出力バッファ155が接続される。また、
CPU153には、ROM156が接続される。また、
出力バッファ155には、出力インタフェース(I/
F)157が接続される。
In FIG. 2, an input interface (I / F) 152, a CPU 153, and an R are provided on the data bus 151.
The AM 154 and the output buffer 155 are connected. Also,
The ROM 156 is connected to the CPU 153. Also,
The output interface (I / I
F) 157 is connected.

【0024】CPU153は、例えば複数の処理プロセ
スを並列処理するマルチタスクオペレーション方式のプ
ロセッサであり、ROM156に記憶された制御プログ
ラムに基づいて、図3に示すようなソフトウェア処理を
実行する。
The CPU 153 is, for example, a multi-task operation system processor that processes a plurality of processing processes in parallel, and executes software processing as shown in FIG. 3 based on a control program stored in the ROM 156.

【0025】すなわち、ROM156に記憶された制御
プログラムには、複数のプロセスとして、アプリケーシ
ョンインタフェース(I/F)処理部P1と、PSI/
SIデータ受信部P2と、PSI/SIデータ一次多重
部P3と、二次多重処理部P4と、カルーセルデータ受
信部P5と、カルーセルデータ一次多重部P6と、PE
Sデータ受信部P7と、PESデータ一次多重部P8と
がある。これらはCPU153の制御の下で互いに独立
して動作する。
That is, in the control program stored in the ROM 156, the application interface (I / F) processing unit P1 and PSI /
SI data receiving section P2, PSI / SI data primary multiplexing section P3, secondary multiplexing processing section P4, carousel data receiving section P5, carousel data primary multiplexing section P6, PE
There is an S data receiving section P7 and a PES data primary multiplexing section P8. These operate independently of each other under the control of the CPU 153.

【0026】CPU153において、アプリケーション
インタフェース処理部P1では、上記データサーバ18
から提供される編成情報に基づいて、入力されたデータ
が受信機側で再生すべきデータ放送番組に関する制御情
報としてのPSI/SIデータ、カルーセルデータ、P
ESデータを識別し、識別したPSI/SIデータをP
SI/SIデータ受信部P2へ、カルーセルデータをカ
ルーセルデータ受信部P5へ、PESデータをPESデ
ータ受信部P7へと振り分ける。
In the CPU 153, in the application interface processing section P1, the data server 18
PSI / SI data, carousel data, P as control information related to the data broadcast program to be reproduced on the receiver side based on the organization information provided by
Identifies ES data and identifies identified PSI / SI data as P
The carousel data is distributed to the SI / SI data receiving unit P2, the carousel data receiving unit P5, and the PES data is distributed to the PES data receiving unit P7.

【0027】PSI/SIデータ受信部P2では、受信
したPSI/SIデータをRAM154の然るべき領域
へ格納する。PSI/SIデータ一次多重部P3では、
上記PSI/SIデータ受信部P2にてRAM154に
格納されたPSI/SIデータをTSパケットに変換す
ると共に、このTSパケットに送出順序付け、送出ST
Cの付加を行ない、しかる後にTSパケットを出力バッ
ファ155に格納する。
The PSI / SI data receiving section P2 stores the received PSI / SI data in an appropriate area of the RAM 154. In the PSI / SI data primary multiplexing unit P3,
The PSI / SI data receiving section P2 converts the PSI / SI data stored in the RAM 154 into a TS packet, sets the transmission order of the TS packet, and transmits the ST
C is added, and then the TS packet is stored in the output buffer 155.

【0028】カルーセルデータ受信部P5では、受信し
たカルーセルデータをRAM154の然るべき領域へ格
納する。カルーセルデータ一次多重部P6では、上記カ
ルーセルデータ受信部P5にてRAM154に格納され
たカルーセルデータをTSパケットに変換すると共に、
このTSパケットに送出順序付け、送出STCの付加を
行ない、しかる後にTSパケットを出力バッファ155
に格納する。
The carousel data receiving section P5 stores the received carousel data in an appropriate area of the RAM 154. The carousel data primary multiplexing unit P6 converts the carousel data stored in the RAM 154 by the carousel data receiving unit P5 into TS packets, and
The transmission order is added to this TS packet and the transmission STC is added, and then the TS packet is output to the output buffer 155.
To store.

【0029】PESデータ受信部P7では、受信したP
ESデータをRAM154の然るべき領域へ格納する。
PESデータ一次多重部P8では、上記PESデータ受
信部P7にてRAM154に格納されたPESデータを
TSパケットに変換すると共に、このTSパケットに送
出順序付け、送出STCの付加を行ない、しかる後にT
Sパケットを出力バッファ155に格納する。このと
き、STC値に基づき、PTS(Presentation Time St
amp)及びDTS(Decorde Time Stamp)の打ち換え処理
を行なう。
The PES data receiving section P7 receives the received P
The ES data is stored in an appropriate area of the RAM 154.
The PES data primary multiplexing unit P8 converts the PES data stored in the RAM 154 by the PES data receiving unit P7 into TS packets, sets the sending order to the TS packets, and adds the sending STC.
The S packet is stored in the output buffer 155. At this time, based on the STC value, PTS (Presentation Time St
amp) and DTS (Decorde Time Stamp).

【0030】二次多重処理部P4では、出力バッファ1
55に格納されたTSパケットを、該TSパケットに付
加されているSTC値の高い順に出力インタフェース1
57を介して出力する。
In the quadratic multiplexing processor P4, the output buffer 1
The TS packets stored in 55 are output interface 1 in the order of higher STC values added to the TS packets.
Output via 57.

【0031】かくして、データ放送送出部15からPE
Sデータ、カルーセルデータ、PSI/SIデータを多
重したTSが生成される。
Thus, from the data broadcast transmission section 15 to the PE
A TS in which S data, carousel data, and PSI / SI data are multiplexed is generated.

【0032】また、二次多重処理部P4では、PESデ
ータ、カルーセルデータ、PSI/SIデータの各TS
パケットを多重する際のビットレートを基準レートと比
較し、この比較結果からビットレートが基準レートを超
える恐れがある場合に、STCが早い順からTSパケッ
トを出力し、万一超えてしまった時点で、出力すべきT
Sパケットを破棄するようにもしている。
In the second-order multiplexing processing section P4, each TS of PES data, carousel data, and PSI / SI data is
When the bit rate when multiplexing packets is compared with the reference rate, and if there is a risk that the bit rate will exceed the reference rate from this comparison result, the STC outputs TS packets from the earliest and the time when they exceed the reference rate. And output T
The S packet is also discarded.

【0033】次に、以上の構成による処理動作について
説明する。上記PESデータ及びカルーセルデータは、
互いに独立して制作されるデータ放送番組を示すデータ
である。また、上記PSI/SIデータは、受信機にお
いてデータ放送番組の開始・停止を制御するために必要
なデータである。
Next, the processing operation of the above configuration will be described. The above PES data and carousel data are
It is data indicating data broadcast programs produced independently of each other. Further, the PSI / SI data is data necessary for controlling the start / stop of the data broadcast program in the receiver.

【0034】上記PSI/SIデータは、図4(a)に
示す如く、一定周期ごとに送出するデータであり、カル
ーセルデータは、図4(b)に示す如く、送出すべきデ
ータ放送番組数分のESデータを一定周期ごとに繰り返
し配列したデータであり、PESデータは、図4(c)
に示す如く、放送時刻に従って送出すべきデータであ
る。
As shown in FIG. 4A, the PSI / SI data is data to be transmitted at regular intervals, and the carousel data is the same as the number of data broadcast programs to be transmitted, as shown in FIG. 4B. ES data of FIG. 4 is repeatedly arranged at regular intervals, and the PES data is as shown in FIG.
As shown in, the data is data to be transmitted according to the broadcast time.

【0035】しかしながら、カルーセルデータとPES
データは、互いに独立して生成されているため、別々の
送出装置が必要となり、チャンネル数が増えると放送局
内のシステム構成が複雑となる。そこで、この実施形態
では、PSI/SIデータ、カルーセルデータ及びPE
Sデータをそのまま1台のデータ放送送出部15に入力
し、データ放送送出部15内のCPU153にてマルチ
タスク処理によりPSI/SIデータ、カルーセルデー
タ及びPESデータを別々に処理する。
However, carousel data and PES
Since the data is generated independently of each other, separate transmitting devices are required, and the system configuration in the broadcasting station becomes complicated as the number of channels increases. Therefore, in this embodiment, PSI / SI data, carousel data, and PE
The S data is input as it is to one data broadcast transmission unit 15, and the CPU 153 in the data broadcast transmission unit 15 processes PSI / SI data, carousel data and PES data separately by multitask processing.

【0036】ここで、データ放送送出部15では、PS
I/SIデータ受信部P2にてPSI/SIデータをR
AM154に格納し、カルーセルデータ受信部P5にて
カルーセルデータをRAM154のPSI/SIデータ
とは別の領域に格納し、PESデータ受信部P7にてP
ESデータをRAM154のPSI/SIデータ及びカ
ルーセルデータとは別の領域に格納する。
Here, in the data broadcast transmission unit 15, PS
The PSI / SI data is read by the I / SI data receiving unit P2.
The data is stored in the AM 154, the carousel data receiving unit P5 stores the carousel data in an area different from the PSI / SI data of the RAM 154, and the PES data receiving unit P7 stores P
The ES data is stored in an area other than the PSI / SI data and the carousel data of the RAM 154.

【0037】RAM154に格納されたPSI/SIデ
ータは、PSI/SIデータ一次多重部P3にて、ST
C、TSヘッダ、アダプテーションフィールド等が付加
されてTSパケットに生成され、出力バッファ155に
書き込まれる。また、RAM154に格納されたカルー
セルデータは、カルーセルデータ一次多重部P6にて、
STC、TSヘッダ、アダプテーションフィールド等が
付加されてTSパケットに生成され、出力バッファ15
5に書き込まれる。さらに、RAM154に格納された
PESデータは、PESデータ一次多重部P8にて、S
TC、TSヘッダ、アダプテーションフィールド等が付
加されてTSパケットに生成され、出力バッファ155
に書き込まれる。
The PSI / SI data stored in the RAM 154 is transferred to the ST in the PSI / SI data primary multiplexing unit P3.
A C packet, a TS header, an adaptation field and the like are added to generate a TS packet, which is written in the output buffer 155. The carousel data stored in the RAM 154 is stored in the carousel data primary multiplexing unit P6 as
An STC, a TS header, an adaptation field and the like are added to generate a TS packet, and the output buffer 15
Written to 5. Further, the PES data stored in the RAM 154 is stored in the SES in the PES data primary multiplexing unit P8.
TC, TS header, adaptation field, etc. are added to generate a TS packet, and the output buffer 155
Written in.

【0038】そして、出力バッファ155に書き込まれ
た各TSパケットは、二次多重処理部P4にてそれぞれ
STC値が識別され、その識別結果に基づいて、出力イ
ンタフェース157に転送される。これで、PSI/S
Iデータ、カルーセルデータ及びPESデータを多重化
したデータ放送用のTSが生成される。
The STC value of each TS packet written in the output buffer 155 is identified by the secondary multiplexing processing section P4, and transferred to the output interface 157 based on the identification result. With this, PSI / S
A TS for data broadcasting in which I data, carousel data, and PES data are multiplexed is generated.

【0039】また、二次多重処理部P4では、多重化す
べきビットレートが基準レートと比較され、万一基準レ
ートを超えることがあった場合に、その時点で送出すべ
きTSパケットを破棄しマルチプレクサ13の破綻を防
ぐ。また、TSパケットを破棄する場合に、破棄する旨
をアラームとして外部に報知するようにしてもよい。
In the second-order multiplexing processing unit P4, the bit rate to be multiplexed is compared with the reference rate. If the reference rate is exceeded, the TS packet to be transmitted at that point is discarded and the multiplexer is used. Prevent the bankruptcy of 13. Further, when the TS packet is discarded, the fact that it is discarded may be notified to the outside as an alarm.

【0040】したがって、上記データ放送送出部15に
よれば、PSI/SIデータ、カルーセルデータ及びP
ESデータをそのまま入力しても、多重化ビットレート
に応じてPSI/SIデータ、カルーセルデータ及びP
ESデータを効率良く多重化して送出することができ
る。このため、マルチプレクサ13にて、データ放送用
のTSのビットレートを管理する必要がなく、その分マ
ルチプレクサ13の処理負荷を軽減できる。
Therefore, according to the data broadcast transmitting section 15, the PSI / SI data, the carousel data, and the P
Even if ES data is input as it is, PSI / SI data, carousel data, and P
ES data can be efficiently multiplexed and transmitted. Therefore, the multiplexer 13 does not need to manage the bit rate of the TS for data broadcasting, and the processing load of the multiplexer 13 can be reduced accordingly.

【0041】以上のように上記実施形態によれば、CP
U153により並列処理される複数の処理プロセスのう
ちの1つを、PSI/SIデータをTSパケットに変換
するPSI/SIデータ一次多重部P3に設定し、残り
の複数の処理プロセスをそれぞれ、カルーセルデータを
TSパケットに変換するカルーセルデータ一次多重部P
6、PESデータをTSパケットに変換するPESデー
タ一次多重部P8に設定しているので、1台のデータ放
送送出部15をPESデータの送出処理用及びカルーセ
ルデータの送出処理用に共用することができ、各々送出
装置を別途用意する必要はない。
As described above, according to the above embodiment, the CP
One of the plurality of processing processes to be processed in parallel by U153 is set in the PSI / SI data primary multiplexing unit P3 for converting PSI / SI data into TS packets, and the remaining plurality of processing processes are respectively set to carousel data. Carousel data primary multiplexing unit P for converting data into TS packets
6. Since the PES data primary multiplexing unit P8 for converting PES data into TS packets is set, one data broadcast transmission unit 15 can be shared for PES data transmission processing and carousel data transmission processing. However, it is not necessary to separately prepare each sending device.

【0042】従って、1台のデータ放送送出部15でP
ESデータ及びカルーセルデータを効率良くTSパケッ
ト化して送出することが可能となり、しかもコストダウ
ン、省スペース化を図れるとともに、データ放送におけ
るトータルビットレート管理を行なうことができる。
Therefore, in one data broadcasting transmission unit 15, P
The ES data and the carousel data can be efficiently TS-packed and transmitted, and further, cost reduction and space saving can be achieved, and total bit rate management in data broadcasting can be performed.

【0043】また、上記実施形態によれば、二次多重処
理部P4により各TSパケットを多重化する際のビット
レートが基準ビットレートと比較され、この比較結果か
ら多重化ビットレートが基準レートを超える恐れがある
場合に、TSパケットがSTCの早い順に選択されて、
多重出力される。
Further, according to the above-described embodiment, the bit rate at the time of multiplexing each TS packet is compared with the reference bit rate by the quadratic multiplexing processing unit P4, and from the result of this comparison, the multiplexing bit rate becomes the reference rate. If there is a risk of exceeding, TS packets are selected in the order of STC,
Multiple output.

【0044】したがって、多重化ビットレートが基準レ
ートを超えたとしても、これに比較的柔軟に対応するこ
とができ、これにより放送帯域中の限られたデータ放送
用の帯域を有効に利用して、複数種類のデータ放送信号
を効率良く放送できる。
Therefore, even if the multiplexing bit rate exceeds the reference rate, it can be dealt with relatively flexibly, and this effectively uses the limited band for data broadcasting in the broadcasting band. , Multiple types of data broadcast signals can be efficiently broadcast.

【0045】なお、この発明は上記実施形態に限定され
るものではない。例えば、上記実施形態では、MPEG
規格のデータ放送信号を取り扱う例について説明した
が、MPEG以外のデータ放送信号を取り扱うようにし
てもよい。
The present invention is not limited to the above embodiment. For example, in the above embodiment, MPEG
Although an example of handling a standard data broadcast signal has been described, a data broadcast signal other than MPEG may be handled.

【0046】その他、局内システムの構成、データ放送
送出部の種類やその構成、データ放送送出部におけるデ
ータの処理制御手順等についても、この発明の要旨を逸
脱しない範囲で種々変形して実施できる。
In addition, the configuration of the in-office system, the type and configuration of the data broadcast transmission unit, the data processing control procedure in the data broadcast transmission unit, and the like can be variously modified and implemented without departing from the scope of the present invention.

【0047】[0047]

【発明の効果】以上詳述したようにこの発明によれば、
複数種類のデータ放送信号を効率良く送出することがで
き、しかも省スペース化及び低コスト化を図るととも
に、複数種類のデータ放送信号のトータルビットレート
を管理することが可能なデータ放送信号送出装置及びデ
ータ放送信号送出方法を提供することができる。
As described above in detail, according to the present invention,
A data broadcast signal transmission device capable of efficiently transmitting a plurality of types of data broadcast signals, saving space and cost, and managing the total bit rate of a plurality of types of data broadcast signals, and A data broadcast signal transmission method can be provided.

【図面の簡単な説明】[Brief description of drawings]

【図1】この発明に係るデータ放送信号送出装置が適用
される局内システムの一実施形態を示すブロック図。
FIG. 1 is a block diagram showing an embodiment of an in-station system to which a data broadcast signal transmission device according to the present invention is applied.

【図2】図1に示したデータ放送送出部のハードウェア
構成を示すブロック図。
FIG. 2 is a block diagram showing a hardware configuration of a data broadcast transmitting section shown in FIG.

【図3】図1に示したデータ放送送出部のソフトウェア
構成を示すブロック図。
FIG. 3 is a block diagram showing a software configuration of a data broadcast transmission section shown in FIG.

【図4】上記実施形態で取り扱うPSI/SIデータ、
カルーセルデータ及びPESデータのタイミング図。
FIG. 4 is PSI / SI data handled in the above embodiment,
The timing chart of carousel data and PES data.

【符号の説明】[Explanation of symbols]

11,12…エンコーダ(ENC)、 13…マルチプレクサ(MUX)、 14…符号化多重制御部(EMC)、 15…データ放送送出部、 16…自動番組送出制御部(APC)、 17…局内時計、 18…データサーバ(DS)、 P1…アプリケーションインタフェース(I/F)処理
部、 P2…PSI/SIデータ受信部、 P3…PSI/SIデータ一次多重部、 P4…二次多重処理部、 P5…カルーセルデータ受信部、 P6…カルーセルデータ一次多重部、 P7…PESデータ受信部、 P8…PESデータ一次多重部。
11, 12 ... Encoder (ENC), 13 ... Multiplexer (MUX), 14 ... Encoding multiplex control unit (EMC), 15 ... Data broadcast sending unit, 16 ... Automatic program sending control unit (APC), 17 ... Local clock, 18 ... Data server (DS), P1 ... Application interface (I / F) processing unit, P2 ... PSI / SI data receiving unit, P3 ... PSI / SI data primary multiplexing unit, P4 ... Secondary multiplexing processing unit, P5 ... Carousel Data receiving unit, P6 ... Carousel data primary multiplexing unit, P7 ... PES data receiving unit, P8 ... PES data primary multiplexing unit.

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】 所定周期ごとに複数の第1データ放送番
組それぞれの素材データを繰り返し配列してなる第1の
データ放送番組情報、前記第1のデータ放送番組とは異
なる第2のデータ放送番組から成り、少なくともヘッダ
領域及び情報領域を備える規格化された第2のデータ放
送番組情報、及び受信機側で再生すべき前記第1及び第
2のサービス番組に関する制御情報をそれぞれパケット
構造の伝送用ストリームに変換し、多重化装置にて各伝
送用ストリームを他のストリームと多重して放送帯域中
の所定帯域を介して放送する放送信号送出システムの前
記多重化装置の入力端子に接続され、かつ複数のプロセ
スを並列処理可能なデータ放送信号送出装置であって、 前記複数のプロセスとして、前記第1のデータ放送番組
情報を前記伝送用ストリームに変換する第1の処理プロ
セス、前記第2のデータ放送番組情報を前記伝送用スト
リームに変換する第2の処理プロセス、及び前記制御情
報を前記伝送用ストリームに変換する第3の処理プロセ
スを備え、 かつ、入力信号のうち、前記第1のデータ放送番組情報
を第1の処理プロセスへ、前記第2のデータ放送番組情
報を第2の処理プロセスへ、前記制御情報を第3の処理
プロセスへ導出する入力信号分離手段と、 前記第1、第2及び第3の処理プロセスの各出力を多重
して前記多重化装置に出力する多重化出力手段とを備え
たことを特徴とするデータ放送信号送出装置。
1. First data broadcasting program information, which is obtained by repeatedly arranging material data of each of a plurality of first data broadcasting programs at a predetermined cycle, and a second data broadcasting program different from the first data broadcasting program. Standardized second data broadcast program information including at least a header area and an information area, and control information related to the first and second service programs to be reproduced on the receiver side for transmission of a packet structure, respectively. Connected to an input terminal of the multiplexer of the broadcast signal transmission system for converting into a stream and multiplexing each transmission stream with other streams by the multiplexer to broadcast through a predetermined band in the broadcast band, and A data broadcast signal transmission device capable of parallel processing of a plurality of processes, wherein the first data broadcast program information is used for the transmission as the plurality of processes. A first processing process for converting to stream, a second processing process for converting the second data broadcast program information into the transmission stream, and a third processing process for converting the control information into the transmission stream. Of the input signals, the first data broadcast program information is sent to the first processing process, the second data broadcast program information is sent to the second processing process, and the control information is sent to the third processing process. And a multiplexing output means for multiplexing the respective outputs of the first, second and third processing processes and outputting the multiplexed outputs to the multiplexing device. Signal transmission device.
【請求項2】 所定周期ごとに複数の第1データ放送番
組それぞれから成るMPEG(Moving Picture Experts
Group)規定のES(Elementary Stream)データを繰り返
し配列してなるカルーセルデータ、前記第1のデータ放
送番組とは異なる第2のデータ放送番組から成るPES
(Packetized Elementary Stream)データ、及び受信機側
で再生すべき前記第1及び第2のサービス番組に関する
PSI/SIデータをそれぞれパケット構造のTS(Tr
ansport Stream)に変換し、多重化装置にて各TSを他
のTSと多重して放送帯域中の所定帯域を介して放送す
る放送信号送出システムの前記多重化装置の入力端子に
接続され、かつ複数のプロセスを並列処理可能なデータ
放送信号送出装置であって、 前記複数のプロセスとして、前記カルーセルデータを前
記TSパケットに変換する第1の処理プロセス、前記P
ESデータを前記TSパケットに変換する第2の処理プ
ロセス、及び前記PSI/SIデータを前記TSパケッ
トに変換する第3の処理プロセスを備え、 かつ、入力信号のうち、前記カルーセルデータを第1の
処理プロセスへ、前記PESデータを第2の処理プロセ
スへ、前記PSI/SIデータを第3の処理プロセスへ
導出する入力信号分離手段と、 前記第1、第2及び第3の処理プロセスの各出力TSパ
ケットを多重して前記多重化装置に出力する多重化出力
手段とを備えたことを特徴とするデータ放送信号送出装
置。
2. An MPEG (Moving Picture Experts) composed of a plurality of first data broadcast programs at predetermined intervals.
Group) Carousel data obtained by repeatedly arranging ES (Elementary Stream) data, and a PES composed of a second data broadcast program different from the first data broadcast program.
(Packetized Elementary Stream) data and PSI / SI data relating to the first and second service programs to be reproduced on the receiver side are respectively TS (Tr
ansport stream), and each TS is multiplexed with another TS by a multiplexer and is connected to an input terminal of the multiplexer of a broadcast signal transmission system for broadcasting via a predetermined band in a broadcast band, and A data broadcast signal transmitting device capable of performing parallel processing on a plurality of processes, wherein the first processing process for converting the carousel data into the TS packets is P as the plurality of processes.
A second processing process for converting ES data into the TS packet and a third processing process for converting the PSI / SI data into the TS packet are provided, and the carousel data in the first An input signal separation means for deriving the PES data to a second processing process and the PSI / SI data to a third processing process, and outputs of the first, second and third processing processes. A data broadcasting signal transmitting device, comprising: a multiplexing output means for multiplexing TS packets and outputting them to the multiplexing device.
【請求項3】 前記第1の処理プロセスは、前記カルー
セルデータを取り込み解析し、この解析結果に基づいて
TSパケットを生成すると共に、時間情報としてのST
C(System Time Clock)をTSパケットに付加し、 前記第2の処理プロセスは、前記PESデータを取り込
み解析し、この解析結果に基づいてTSパケットを生成
すると共に、時間情報としてのSTCをTSパケットに
付加し、 前記第3の処理プロセスは、前記PSI/SIデータを
取り込み解析し、この解析結果に基づいてTSパケット
を生成すると共に、時間情報としてのSTCをTSパケ
ットに付加し、 前記多重化出力手段は、各出力TSパケットを多重化す
る際のビットレートと予め決められた基準ビットレート
とを比較し、この比較結果に基づきTSパケットを送出
STC順に従って選択的に多重出力することを特徴とす
る請求項2記載のデータ放送信号送出装置。
3. The first processing process captures and analyzes the carousel data, generates a TS packet based on the analysis result, and stores ST as time information.
C (System Time Clock) is added to the TS packet, and the second processing process captures and analyzes the PES data, generates a TS packet based on the analysis result, and also generates STC as time information in the TS packet. The third processing process takes in and analyzes the PSI / SI data, generates a TS packet based on the analysis result, and adds STC as time information to the TS packet, The output means compares the bit rate at the time of multiplexing each output TS packet with a predetermined reference bit rate, and selectively multiplex-outputs the TS packets according to the transmission STC order based on the comparison result. The data broadcasting signal transmission device according to claim 2.
【請求項4】 所定周期ごとに複数の第1データ放送番
組それぞれの素材データを繰り返し配列してなる第1の
データ放送番組情報、前記第1のデータ放送番組とは異
なる第2のデータ放送番組から成り、少なくともヘッダ
領域及び情報領域を備える規格化された第2のデータ放
送番組情報、及び受信機側で再生すべき前記第1及び第
2のサービス番組に関する制御情報をそれぞれパケット
構造の伝送用ストリームに変換し、これら伝送用ストリ
ームを多重化して出力し、かつ複数のプロセスを並列処
理可能なデータ放送信号送出装置に使用される方法であ
って、 前記複数のプロセスとして、前記第1のデータ放送番組
情報を前記伝送用ストリームに変換する第1の処理プロ
セス、前記第2のデータ放送番組情報を前記伝送用スト
リームに変換する第2の処理プロセス、及び前記制御情
報を前記伝送用ストリームに変換する第3の処理プロセ
スを備えておき、 入力信号のうち、前記第1のデータ放送番組情報を第1
の処理プロセスへ、前記第2のデータ放送番組情報を第
2の処理プロセスへ、前記制御情報を第3の処理プロセ
スへ導出し、 前記第1、第2及び第3の処理プロセスの各出力を多重
することを特徴とするデータ放送信号送出方法。
4. First data broadcast program information, which is obtained by repeatedly arranging material data of each of a plurality of first data broadcast programs every predetermined period, and a second data broadcast program different from the first data broadcast program. Standardized second data broadcast program information including at least a header area and an information area, and control information related to the first and second service programs to be reproduced on the receiver side for transmission of a packet structure, respectively. A method used for a data broadcast signal transmitting device which converts a stream, multiplexes and outputs these transmission streams, and is capable of processing a plurality of processes in parallel, wherein the plurality of processes include the first data. A first processing process for converting broadcast program information into the transmission stream, and converting the second data broadcast program information into the transmission stream. Second processing process, and leave a third processing process for converting the control information into the transmission stream, among the input signal, the first data broadcast program information first
The second data broadcasting program information to the second processing process and the control information to the third processing process, and outputs the respective outputs of the first, second and third processing processes. A method for transmitting a data broadcast signal, characterized by multiplexing.
JP2002081641A 2002-03-22 2002-03-22 Data broadcast signal transmission apparatus and data broadcast signal transmission method Expired - Fee Related JP4177588B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002081641A JP4177588B2 (en) 2002-03-22 2002-03-22 Data broadcast signal transmission apparatus and data broadcast signal transmission method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002081641A JP4177588B2 (en) 2002-03-22 2002-03-22 Data broadcast signal transmission apparatus and data broadcast signal transmission method

Publications (2)

Publication Number Publication Date
JP2003283447A true JP2003283447A (en) 2003-10-03
JP4177588B2 JP4177588B2 (en) 2008-11-05

Family

ID=29230195

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002081641A Expired - Fee Related JP4177588B2 (en) 2002-03-22 2002-03-22 Data broadcast signal transmission apparatus and data broadcast signal transmission method

Country Status (1)

Country Link
JP (1) JP4177588B2 (en)

Also Published As

Publication number Publication date
JP4177588B2 (en) 2008-11-05

Similar Documents

Publication Publication Date Title
JP4240545B2 (en) System for digital data format conversion and bitstream generation
KR100466237B1 (en) Method and system for converting protocol of digital broadcasting system
US20130003863A1 (en) Network media adapter
US8514893B2 (en) Digital video apparatus for multiplexing single program transport streams into a multiple program transport stream
CN101151902A (en) Device and method for initializing decoder in digital broadcasting receiver
JP6904166B2 (en) Switching method, IP retransmission system, IP retransmission device and control device
US6516376B1 (en) Command and control architecture for a video decoder and a host
US9100672B2 (en) Data transmitting device and data transmitting and receiving system
JP4282258B2 (en) Digital broadcast signal multiplex transmission device
US20040013270A1 (en) Apparatus and method for converting contents
US20050108778A1 (en) Method and apparatus for simultaneous display of multiple audio/video programs transmitted over a digital link
US7577170B2 (en) System for the dynamic multiplexing of digital streams
CN107210041B (en) Transmission device, transmission method, reception device, and reception method
JPH10190617A (en) Video signal decoding device
US6496233B1 (en) Command and control architecture for a video decoder and an audio decoder
JP4177588B2 (en) Data broadcast signal transmission apparatus and data broadcast signal transmission method
JP3741668B2 (en) Data multiplexer
WO1998026577A2 (en) Multiple-source transmission system
KR100962083B1 (en) Method and system for converting a first data stream into a second data stream
JP4244448B2 (en) Information transmission system, information comparison method, and information comparison device
KR20030055414A (en) Apparatus for program and system information conversion method in digital television systems
EP2111043A2 (en) Method of transmitting audiovisual contents in &#39;push&#39; environments
JPH11340936A (en) Method and device for multiplexing data
JP4550210B2 (en) Digital broadcast signal transmission system and service information processing apparatus thereof
KR101169430B1 (en) Apparatus and method for providing information in digital broadcasting

Legal Events

Date Code Title Description
A621 Written request for application examination

Effective date: 20050322

Free format text: JAPANESE INTERMEDIATE CODE: A621

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080212

A521 Written amendment

Effective date: 20080414

Free format text: JAPANESE INTERMEDIATE CODE: A523

A131 Notification of reasons for refusal

Effective date: 20080520

Free format text: JAPANESE INTERMEDIATE CODE: A131

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080722

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080819

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080822

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 4

Free format text: PAYMENT UNTIL: 20120829

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120829

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130829

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees