JP4074504B2 - Receiver - Google Patents

Receiver Download PDF

Info

Publication number
JP4074504B2
JP4074504B2 JP2002301817A JP2002301817A JP4074504B2 JP 4074504 B2 JP4074504 B2 JP 4074504B2 JP 2002301817 A JP2002301817 A JP 2002301817A JP 2002301817 A JP2002301817 A JP 2002301817A JP 4074504 B2 JP4074504 B2 JP 4074504B2
Authority
JP
Japan
Prior art keywords
data
subtitle
time
broadcast
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002301817A
Other languages
Japanese (ja)
Other versions
JP2004140504A (en
Inventor
昌晃 石丸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2002301817A priority Critical patent/JP4074504B2/en
Publication of JP2004140504A publication Critical patent/JP2004140504A/en
Application granted granted Critical
Publication of JP4074504B2 publication Critical patent/JP4074504B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、時間インターリーブ処理を行う方式のデジタル放送の放送番組を受信する受信装置に関する。特に、日本方式の地上デジタル放送(ISDB−T:Integrated Service Digital Broadcast−Terrestrial)による放送番組を受信する受信装置に関する。
【0002】
【従来の技術】
従来、移動受信の受信状態を向上することを目的としたデジタル放送の例として、図10のスペクトル図に示される放送番組の提供方法を用いたものがある(例えば、特許文献1参照)。図10では、横軸401は周波数を表し、縦軸402は放送電力を表しており、上記デジタル放送の放送信号403を表示している。このデジタル放送は、図10に示すように、デジタル変調された複数の搬送波からなるOFDM(Orthogonal Frequency Division Multiplexing)セグメントを複数集めた地上デジタル放送の放送信号403によって形成されている。上記OFDMセグメントは図中で隣接した矩形406,407,408から409等で示されている。
【0003】
ここで、「OFDMセグメント」とは、OFDM方式の放送波を形成する複数の搬送波、たとえば、地上デジタル放送であれば、1405個から5617個の搬送波による放送波全体の中での隣接する搬送波のグループを意味する。たとえば、地上デジタル放送では、1放送波を13セグメントに分割し、セグメント単位で、エラー訂正のためのデータの冗長化や各種インターリーブ処理等を別々に行うことができるように構成されている(実際には更にセグメントをまとめた3グループに対して処理を行う)。
【0004】
上記放送信号403は、OFDMセグメントを複数集めて放送信号403を形成するとき、各OFDMセグメントのうちの少なくともいずれかの特定セグメントの電力を他のセグメントとは異なるように設定している。
【0005】
つまり、上記の他のセグメントより放送電力を大きくした特定のセグメント(405または406)のみを用いて移動受信用の放送を行うことにより、移動受信における受信強度を増加させて、移動しながらの受信においても受信障害を生じにくい放送の提供方法が可能となっている。
【0006】
以降、上記のように特定のセグメントのみを用いて行う放送を「部分受信セグメントによる放送」と呼ぶ。また、特に、上記部分受信セグメントの内、1セグメントのみを受信して視聴することを目的とした放送を、以降、「1セグメント放送」と呼ぶ。上記日本方式の地上デジタル放送では、上記1セグメント放送の放送波は、放送波全体のセグメントの中央(図10のセグメント405の位置)に配置される。
【0007】
【特許文献1】
特開2000−101542号公報
【0008】
【発明が解決しようとする課題】
しかしながら、上記放送番組の提供方法では、送受信装置の構成が複雑となってしまうため、地上デジタル放送の規格として採用されず、実質上利用することができない。また、特に地上デジタル放送の移動受信で重要視されている上記1セグメント放送では、上記放送番組の提供方法においても、セグメント内で放送出力電力を変化させることができないため、受信電波が弱いなど受信状況が劣化した場合、映像も音声も字幕もほぼ同時に乱れてしまい視聴者が番組の進行についていけなくなるという問題を生じてしまう。
【0009】
本発明の課題は、一時的な受信状況の劣化が生じた場合でも、字幕の表示を置換することを可能とする放送番組を受信する受信装置を提供することである。
【0010】
特に、地上テレビ放送のデジタル化は、放送局側のデジタル化に対応するための大きな設備投資が必要な割に、デジタル化による利点が少ないということが問題となっている。その中で、移動中の受信機会の増加、すなわち視聴者の視聴時間の増加は、デジタル化による利点の中で最も大きなもののひとつである。これは、現状で視聴時間が生活の中でほぼ上限にまで増加しているため、視聴時間を増加させるには、移動中の時間や、駅,停留所等の待ち時間に視聴するなどの新しい視聴機会を増加させる必要があるからである。そのため、持ち運びに適した小型受信機に適した狭帯域放送の上記部分受信セグメントによる放送や、とりわけ上記1セグメント放送が特に重要視されている。
【0011】
そのため、移動中に受信状態の劣化が生じた場合でも、視聴者が放送番組の進行を追いかけることができるようにし、放送番組への興味を継続させることは、非常に大きな課題のひとつである。
【0012】
【課題を解決するための手段】
上記目的を達成するため、この発明の受信装置では、データ多重放送が可能なデジタル放送で、時間的な間隔をあけて放送された置換可能な複数の字幕データを含む放送を受信手段で受信して、受信された字幕データを字幕出力手段により出力する。そして、上記置換可能な複数の字幕データのあるものに受信障害が生じた場合、上記受信障害が生じた字幕データとは異なる置換可能な別の字幕データによって上記字幕出力手段の出力を字幕置換手段で置換すると共に、映像データまたは音声データに受信障害を生じた場合、上記字幕データによる字幕の表示を開始するように、上記字幕出力手段を字幕出力開始手段で制御する。つまり、映像データまたは音声データに受信障害を生じた場合、受信装置が、字幕を表示する設定でなくとも、字幕の表示を行う設定に切り替え、字幕の表示を自動的に開始する。
つまり、字幕データを含む放送は、受信手段によって受信され、字幕データは、字幕として例えばディスプレイ装置に表示される。このとき、受信障害が生じた字幕データは、時間間隔をあけて放送されている置換可能な別の字幕データによって置換されて出力される。
上記構成の受信装置によれば、一時的に放送電波の受信強度が弱まったり妨害波が入っ たりして、放送規格のエラー訂正方式によってエラーが訂正しきれない場合でも、上記の時間間隔をあけて放送した置換可能な別の字幕データによって置換して字幕出力を行うことができる。そして、受信している放送される置換可能な字幕の全ての放送時刻で受信障害とならない限りは、画面上に字幕が表示される。
そのため、受信状態が劣化した場合でも、視聴者は、番組の進行でせりふ等の重要な情報を見落とすことがなくなり、視聴者に連続した放送を提供することができる。
特に、置換可能な字幕データは、時間的な間隔をあけて放送されていることにより、データの置換が効果的に行えることから、たとえば、受信装置はバッファなどの遅延手段を用いて、時間間隔をあけて放送されたデータを同期して、置換出力する構成とする。
また、映像または音声の出力が欠落した場合でも、字幕が自動的に表示されることにより、視聴者にとって番組の進行で情報が抜け落ちることがなくなる。
また、この場合の、映像データまたは音声データの受信障害は、実際に映像や音声が途切れた場合だけでなく、復調時、復号時のエラー発生頻度が増加した場合も含む。たとえば、エラー発生頻度に所定のしきい値を設けて、そのしきい値を上回るエラー頻度を生じた場合に受信障害と判断するように構成することができる。特に、復調時、復号時のエラー発生頻度が増加した場合に、実際に映像や音声が途切れる前に字幕の表示をするように構成する方がより好ましい。
また、一実施形態の受信装置では、映像データまたは音声データの上記受信障害が復旧した場合、上記字幕出力開始手段によって開始された字幕の出力を停止するように、上記字幕出力手段を字幕出力停止手段で制御する。つまり、映像または音声の受信障害の後、受信障害が復旧した場合、字幕の表示を自動的に停止する。
上記実施形態の受信装置によれば、受信障害が復旧した場合、自動的に字幕の表示を停止することで、利便性を向上させる。特に、移動受信の場合では、受信状況が繰り返し変化する場合が多く、そのたび毎に利用者が字幕の表示を停止する操作をしなければならなくなる場合がある。そのため本構成が特に適している。
また、字幕の表示の自動的な停止は、受信障害の復旧後すぐに停止しても、一定時間おいて停止するようにしても構わない。しかし、特に、受信障害が一定期間無い状態が続いた場合に字幕の表示を停止するように構成することがより好ましい。
この発明の受信装置が受信する放送番組の提供方法としては、データ多重放送が可能なデジタル放送において、上記デジタル放送の放送方式で時間インターリーブ処理を行う。そして、置換可能な複数の字幕データの夫々を時間的な間隔をあけて放送する。このとき、上記置換可能な複数の字幕データのうちの少なくとも2つの字幕データの時間的な間隔が、上記時間インターリーブ処理によって上記複数の字幕データが時間軸上に拡散される時間的な長さ以上とする。
【0013】
つまり、上記放送方式の時間インターリーブ処理によってデータが時間軸上に拡散される時間的な長さ(以降、時間インターリーブ長と呼ぶ)以上に、上記置換可能な複数の字幕データの夫々が時間間隔をあけて放送番組中で放送される。
【0014】
上記放送番組の提供方法によれば、一時的に放送電波の受信強度が弱まったり妨害波が入ったりして、上記放送方式のエラー訂正方式によってエラーが訂正しきれない場合でも、上記の時間間隔をあけて放送した置換可能な別の字幕データによって置換して字幕出力を行うことが可能な放送番組を提供することができる。また、上記時間間隔が時間インターリーブ長以上としていることで、上記の別の字幕データで置換できる確率が向上する。
【0015】
この場合の「置換可能な複数の字幕データ」とは、本来放送される字幕データと、少なくとも1つ以上の上記本来放送される字幕データと字幕内容が同じ別の字幕データであり、ある字幕データを別の字幕データの代わりに置換して出力することが可能なものを意味する。
【0016】
上記の「字幕内容が同じ」とは、視聴者が見る字幕内容が同じ物であり、データの多重化等を行うための識別符号等の制御符号は異なっていてもよい。また、意図的に字幕の表記を、あるいはその一部を、たとえば、漢字、ひらがな、カタカナとするなど、あるいは字体(筆記体、行書体、ゴシック体、斜体、等)を変えたりするなどしてもよい
【0017】
一方、たとえば、日本語、英語、中国語、その他の外国語等のように、本来、別々の言語により視聴する目的で複数の字幕を放送する場合、つまり、二カ国語字幕、あるいは、多カ国語字幕で放送される場合もある。この場合は、ある言語の字幕の受信障害を他の言語によって置換しても一般の視聴者にとって意味をなさないため、本発明には含まれない。また、スポーツ中継など一方のチームの側に肩入れした解説字幕を別に放送するなど、視聴者がその一つを選択して視聴するような放送番組は、ある字幕データに受信障害が発生しても他の字幕データで置換することができないため、本発明には含まれない。
【0018】
また、たとえば、低年齢用の字幕(例えば仮名を主体とした字幕)と大人用の字幕(例えば漢字主体の字幕)の場合では、大人用の字幕の受信障害を低年齢用の字幕で置換することが可能であるので本発明に含まれるが、逆に低年齢用の字幕の受信障害を大人用の字幕で置換することは、低年齢者には意味をなさないので、この発明の目的としてはあまり好ましくない。
【0019】
また、この場合の「複数の字幕データの夫々を時間インターリーブ長以上の時間間隔をあけて放送する」とは、たとえば、前述の時間インターリーブ処理によって、各字幕データが時間軸上に拡散される時間の中央値をもって、上記複数の字幕データ間での上記中央値同士の時間間隔が時間インターリーブ長以上となるように設定して、上記複数の字幕データを送信することを指す。
【0020】
あるいは、たとえば、各字幕データに付随する提示時刻と、その字幕データの放送時刻とのずれの時間の各字幕データ間での差が、時間インターリーブ長以上となるように設定して、上記複数の字幕データを送信することを指す。
【0021】
つまり、上記置換できる複数の字幕データの夫々を、上記時間インターリーブ長以上の時間間隔をあけて放送する構成とすることで、ある字幕データの時間インターリーブ処理による時間軸方向での拡散の範囲が、置換できる別の字幕データの時間インターリーブ処理による時間軸方向での拡散の範囲に対して重なりがなくなる。それにより、一時的に放送電波の受信強度が低下して、ある字幕データの受信に障害が生じても、上記時間インターリーブ長以上の時間をずらして放送される置換可能な別の字幕データには影響しない。そのため、一定の個数の置換できる字幕データにおいて、受信障害の場合に字幕出力を置換できる確率が大きく向上する。
【0022】
また、上記置換可能な複数の字幕データが3個以上ある場合は、その全ての字幕データ間で上記時間インターリーブ長以上の時間的な間隔を設けて放送することで、より確実に受信障害の出力を置換することができるので好ましい。しかし、上記置換可能な複数の字幕データの組み合わせのいずれかについて、上記時間インターリーブ長以上の時間間隔をあけて放送すればよく、必ずしも全ての置換可能な字幕データを上記時間インターリーブ長以上の時間的な間隔を設けて放送する必要はない。
【0023】
また、上記の「時間インターリーブ処理」とは、放送方式において、時間軸上で積極的にデータを拡散させる処理であり、主に、フェージングによる一時的な受信電力の低下による放送の途切れを防止する目的のものである。上記のデータを拡散させる方法は、上記の時間インターリーブ処理の他にも、バイトインターリーブ処理や、ビットインターリーブ処理によってデータの拡散が行われ、その拡散の一部は、時間軸上に広がりを持つ場合がある。の時間インターリーブ長は、それらの時間軸方向への拡散の幅を含めてもよい。しかし、たとえば、日本方式の地上デジタル放送の放送方式では、それらの時間軸方向への拡散幅は、時間インターリーブ処理による拡散幅に比べて小さく、実質上、無視して考えられる。
【0024】
また、上記の時間インターリーブ処理を用いた放送方式におけるエラー訂正では、上記時間インターリーブ長にわたって受信に障害が生じた場合は、エラー訂正ができなくなってしまう。それに対して、置換可能な複数の字幕データの夫々を上記時間インターリーブ長以上の時間間隔をあけて放送する構成により、より長い時間の受信障害においても字幕を置換して出力することが可能となる。
【0025】
また、特に視聴者の視聴時間の向上に大きく寄与する移動受信では、公衆の場での受信の機会が多く、携帯電話と同様に利用者のマナー上、音声出力を制限して、音声を文字化した字幕での視聴(実際には音声を出力しないが、以降、便宜上、放送の利用を視聴と表現するものとする)が増加する。そのため、字幕での視聴の利便性が向上しなければ、視聴者の視聴時間の大幅な向上を行うことができない。音声と同じく字幕が途切れた場合、場合によってはせりふを見逃して番組の進行についていけなくなってしまう場合もある。そのため、この放送番組の提供方法が特に効果を有する。
【0026】
また、字幕データは、映像や音声のデータに比べてきわめてデータ量が少ないため、置換可能な複数の字幕データを放送しても本来の放送に支障を来たすことがない。そのため、特に音声や映像のデータを置換可能な複数のデータとして送らず、字幕データを置換可能な複数の字幕データを放送する構成は、放送局、受信装置双方の負担が少ない割に上記のように視聴率を向上させる効果が大きいので特に好ましい。
【0027】
【0028】
【0029】
【0030】
【0031】
【0032】
上記の時間インターリーブ処理は、前述のように主にフェージングによる放送電波の受信強度の一時的な低下によるデータの欠落を補償することを目的としており、短時間の受信強度の低下を想定している。しかし、実際に放送を行ってみると、受信障害を起こしやすい条件が複数重なったり、受信位置が完全に電波的な影に入ってしまったりし、受信が途絶える機会が想定以上あった。
【0033】
たとえば、電車やバスに乗って移動している場合では、複雑なビルの配置によってフェージングによる受信強度の低下が連続して生じたり、大きなビルの影に入ったりして電波的に影になったりして受信が途切れる場合がある。また、歩行中や、駅のホームや、バスの停留所等の待合所では、通行する乗り物や人の影響が重なり受信が途切れる場合がある。
【0034】
しかし、上記のような環境で検討した結果、上記の受信障害は、ほとんどが1秒以上にわたって続くことがまれであることがわかった。そのため、置換可能な複数の字幕データの夫々の間隔を1秒以上として放送する実施形態が特に効果を有する。
【0035】
また、上記放送番組の提供方法では、上記データ多重放送が、デジタル変調された複数の搬送波からなる複数のOFDMセグメントの部分受信セグメントによる放送である。
【0036】
つまり、置換可能な複数の字幕データは、その他のデータ(例えば映像や音声のデータ)と共にデータ多重化され、デジタル変調された複数の搬送波からなる複数のOFDMセグメントの部分受信セグメントによって放送される。OFDM変調方式では、他の放送法式と異なり、元々周波数帯域の一部を使用して狭帯域の放送を行うことができる利点を有する。たとえば、前述の地上デジタル放送のように、放送波の中の特定のOFDMセグメントを使用して番組を放送する部分受信セグメントによる放送が行われる場合がある。そして、移動受信では、受信装置の携帯性の制約から、この部分受信セグメントを利用する場合が多い。しかし、上記部分受信セグメントによる放送の場合、特に地上デジタル放送の規格では、映像、音声、字幕等のデータは同じエラー訂正方式、たとえば、同じ冗長度、同じ時間インターリーブ長で放送が行われるために、受信中に受信障害を生じる場合は全てが同じように受信できなくなってしまい、視聴者が番組の進行を見失いやすく、番組の視聴率が増加しない問題を生じる可能性がある。
【0037】
記放送番組の提供方法によれば、上記のように字幕の途切れを減少させて番組の視聴率を増加させる効果を有する。
【0038】
また、特に、上記部分受信セグメント放送では、受信装置が小型化されて移動受信の機会が増加するので上記の問題が著しい。また、とりわけ、移動受信では、受信アンテナに十分な指向性アンテナを用いない場合が多いので、フェージングの影響がより大きくより頻繁になる傾向がある。そのため、効果が特に大きい。
【0039】
また、字幕データは映像データや音声データに比べてデータ量が非常に少ないため、置換可能な複数の字幕データの夫々を放送しても放送データ全体のデータ量の増加がきわめて少なく、部分受信セグメントによる狭帯域放送、とりわけ1セグメント放送に特に適する。
【0040】
また、上記放送番組の提供方法では、例えば、置換可能な複数の映像データを、上記時間インターリーブ処理によって上記複数の映像データの夫々が時間軸上に拡散される時間的な長さ以上の時間的な間隔をあけて放送する。つまり、置換可能な複数の字幕データと同じく、置換可能な複数の映像データの夫々が時間間隔をあけて放送される。このとき、上記置換可能な複数の映像データのうちの少なくとも2つの映像データの時間的な間隔が、上記時間インターリーブ処理によって上記複数の映像データが時間軸上に拡散される時間的な長さ以上とする。
【0041】
記放送番組の提供方法によれば、字幕だけでなく、映像の途切れも少なくなり、公衆の場での視聴の機会を大きく増加する放送番組を提供することができる。
【0042】
当然、字幕や映像に限らず、音声のデータも同様に置換できるデータを放送しても構わないが、上記のように、視聴時間自体を増加するためには、視覚的に利用する字幕と映像を先ず途切れなくすることがより好ましく、上記放送番組の提供方法が特に効果が大きい。
【0043】
この場合の「置換可能な複数の映像データ」とは、本来放送される映像データと、少なくとも1つ以上の上記本来放送される映像データと映像内容が同じ別の映像データであり、ある映像データを別の映像データの代わりに置換して出力することが可能なものを意味する。
【0044】
上記の「映像内容が同じ」とは、視聴者が見る映像内容が同じ物であり、データの多重化を行うための識別符号等の制御符号は異なっていてもよい。また、意図的に映像の色調や解像度を微妙に変えたりするなどしてもよい。また、置換可能な映像データには、動画の画像フレームが間引かれているものが含まれていても構わないし、その間引かれる頻度が一定でなくても構わない。また、あるいは、映像フレームの間引きかたは、たとえば一定の間隔で間引くように自動的に行うことも可能であるが、放送局側であらかじめ重要な場面を選定し、その場面を残すように間引く方法も可能である。放送局側であらかじめ重要な場面を選定し、その場面を残すように間引く方がより確実に視聴者に必要な場面を視聴させることができ、視聴率を高める放送番組とすることができる。
【0045】
特に上記部分受信セグメントによる放送、とりわけ上記1セグメント放送では、放送帯域が小さいので、上記の画像フレームが間引かれている映像データを、上記置換可能な映像データとして用いることが好ましい。
【0046】
一方、複数の映像を放送して視聴者が選択するような場合、たとえば、ドラマのストーリーを複数に分岐させて、視聴者がその一つを選択して視聴するような複数の映像データでは、ある映像データに受信障害が発生しても別のストーリーの映像データで置換することができないため、本発明には含まれない。
【0047】
また、スポーツ中継など一方のチームの側に肩入れした映像を別に放送するなど、視聴者がその一つを選択して視聴するような放送番組は、ある映像データに受信障害が発生しても他の映像データで置換することができないため、本発明には含まれない。
【0048】
【0049】
【0050】
【0051】
【0052】
【0053】
【0054】
【0055】
【0056】
【0057】
【0058】
【0059】
【0060】
【0061】
【0062】
【0063】
【0064】
【0065】
【0066】
また、上記データ多重放送が可能なデジタル放送を送信する送信装置としては、字幕符号化手段で字幕データを符号化する。そして、上記字幕符号化手段で符号化された字幕データを第1の遅延手段で遅延させる。また、上記第1の遅延手段の遅延時間よりも、放送方式の時間インターリーブ処理によって字幕データが時間軸上に拡散される時間的な長さ以上短い遅延時間で、上記字幕符号化手段により符号化された字幕データを第2の遅延手段で遅延させる。そして、少なくとも上記第1の遅延手段と上記第2の遅延手段からの上記符号化された字幕データを多重化したデータストリームをデータストリーム作成手段で作成する。そして、上記データストリームを放送手段により、データ多重放送が可能なデジタル放送として放送する。
【0067】
つまり、字幕データはまず符号化される。放送を行うためには、上記の符号化された字幕データを含めて放送全体で単位時間あたりのデータ量を放送帯域にあわせたデータストリームとする必要がある。そのために、上記符号化された字幕データは遅延手段によって遅延させて上記データストリーム作成手段への送出を調節することが行われる。このとき、上記第1の遅延手段の遅延時間に対して、上記第2の遅延手段の遅延時間を時間インターリーブ長以上の差だけ小さくする。なお、上記字幕符号化手段により符号化され字幕データは、置換可能な複数の字幕データであって、そのうちの少なくとも2つの字幕データの時間的な間隔が、上記第1,第2の遅延手段により時間インターリーブ長以上となるようにする。
【0068】
上記構成の送信装置によれば、置換可能な複数の字幕データの夫々を、上記時間インターリーブ長以上の時間的な間隔をあけて放送する放送番組を提供することができる。
【0069】
【発明の実施の形態】
以下、この発明の受信装置を図示の実施の形態により詳細に説明する。
【0070】
〔第1実施形態〕
この発明の第1実施形態では、データ多重放送が可能なデジタル放送の一例としての日本方式の地上デジタル放送の伝送方式(BST−OFDM:Band Segmented Transmision−Orthogonal Frequency Division Multiplexing)による放送において、放送番組の提供方法およびそれを放送するための送信装置およびその放送を受信するための受信装置の説明を行う。上記の日本方式の地上デジタル放送は、時間インターリーブ処理を行う放送方式を採用している。
【0071】
また、特にデジタル変調された複数の搬送波からなる複数のOFDMセグメントの部分受信セグメントによる放送の一例として1セグメント放送(部分受信セグメントのうちの1セグメントのみを受信して視聴することを目的とした放送)における放送の場合について説明する。
【0072】
図1は、第1実施形態の送信装置のブロック図を示している。また、図2は、この発明の第1実施形態の受信装置のブロック図を示している。
【0073】
まず、全体の構成について説明する。図1は、上記のデータ多重放送が可能なデジタル放送を送信する送信装置の一例として本発明に関連する構成を中心として表記している。
【0074】
図1に示す送信装置は、字幕データを符号化する字幕符号化手段の一例として符号化部106を有し、また、上記符号化部106により符号化された字幕データを遅延させる第1の遅延手段の一例として遅延バッファ112と、遅延バッファ112の遅延時間よりも時間インターリーブ長以上短くした遅延時間で、上記符号化された字幕データを遅延させる第2の遅延手段の一例として遅延バッファ115,116を有している。
【0075】
また、上記送信装置は、上記遅延バッファ112,115,116からの上記符号化された字幕データを受け取り、それらを多重化したデータストリームを作成するデータストリーム作成手段の一例としてシステム符号化多重化部117を有している。
【0076】
また、上記送信装置は、データストリームを放送する放送手段の一例として、変調部119,送信部122を有している。
【0077】
また、図2は、上記のデータ多重放送が可能なデジタル放送を受信する受信装置の一例として本発明に関連する構成を中心として表記している。
【0078】
図2に示す受信装置は、時間的な間隔をもって放送された置換可能な複数の字幕データを含む放送を受信する受信手段の一例として、受信部201,復調部203,分離システム復号化部205を有している。
【0079】
また、上記受信装置は、上記字幕データを出力する字幕出力手段の一例として、字幕用の復号化部226,映像合成部223,ディスプレイ224を有している。
【0080】
また、上記受信装置は、上記置換可能な複数の字幕データのあるものに受信障害が生じた場合、上記受信障害が生じた字幕データとは異なる置換可能な別の字幕データによって上記字幕出力手段の出力を置換する字幕置換手段の一例として字幕置換部225を有している。
【0081】
次に、図1を用いて、放送番組の提供方法について、送信装置の処理の流れを追って説明を行う。
【0082】
放送番組のデータは、音声用のデータ入力部101、映像用のデータ入力部102、字幕用のデータ入力部103よりそれぞれ供給されるものとする。
【0083】
音声用の符号化部104,映像用の符号化部105,映像用の符号化部106では、上記データ入力部101,102,103よりの入力データをそれぞれ符号化し、1次パケット107,108,109として、それぞれ遅延バッファ110,111,112に送出する。
【0084】
たとえば、上記音声用のデータ入力部101,映像用のデータ入力部102からのテレビ音声データやテレビ映像データは、上記符号化部104,105で、MPEG−2(Moving Picture Experts Group Phase 2)やMPEG−4(Moving Picture Experts Group Phase 4)等の符号化方式により、映像フレーム毎、あるいは音声フレーム毎に符号化され、上記1次パケット107,108が作成される。
【0085】
ここでは、1セグメント放送であるため、映像データの符号化にはMPEG−4方式が用いられ、音声データの符号化にはMPEG−2方式が用いられる。
【0086】
ここで、「映像フレーム」とは1画面の映像データを意味し、「音声フレーム」とは、所定時間の音声波形のデータを意味し、共に各フレーム単位で1つの1次パケットを構成している。
【0087】
また、上記字幕用のデータ入力部103よりの字幕データは、上記字幕用の符号化部106で、一時期に表示する字幕(以降、字幕フレームと呼ぶ)のデータをまとめて、放送規格のフォーマットに従い、文字コードの変換を行い、文字フォントや、表示位置の指定データなどと共に符号化され、上記1次パケット109が作成される。
【0088】
このとき、システムタイムクロック(STC:System Time Clock)113からの時刻情報を用いて、受信装置での同期再生に必要な提示時刻(PTS:Presentation Time Stamp)114が上記各1次パケットに付加される。また、映像データ等では、更に復号を行う時刻を示す復号時刻(DTS:Decoding Time Stamp)が付加される場合もある。つまり、上記提示時刻や復号時刻は、上記の映像フレーム、音声フレーム、字幕フレームを視聴者へ提示するためのタイミングを示す情報の一例である。
【0089】
上記のMPEG−2、MPEG−4、字幕データの放送規格のフォーマットや、1次パケットへの変換は、各放送方式の既存の技術であり詳細な説明は省略する。
【0090】
この第1実施形態では、更に、上記字幕用の符号化部106の出力の1次パケット109を複製して、別の1次パケットを作成し、遅延バッファ112と異なる遅延バッファ115,116に送出するように構成した。つまり、置換可能な複数の字幕データの一例として同じ字幕データの内容の1次パケットを複数の遅延バッファ112,115,116に送るように構成している。
【0091】
そして、上記システム符号化多重化部117では、上記の各遅延バッファ110,111,112,115,116の1次パケットを読み出し、各1次パケットの違い、この場合、バッファ毎の違いを区別するための識別符号が付加された2次パケット(TSP:Transport Stream Packet)に再変換する。そして、上記2次パケットを多重化し、上記2次パケットが連続するトランスポートストリーム(TS:Transport Stream)118を作成し、変調部119に送出する。
【0092】
また、上記システム符号化多重化部117では、図示していないが、他に番組配列情報(SI:Servece Information)や番組仕様情報(PSI:Program Specific Information)などのその他のデータ情報も符号化されて同様に多重化される。
【0093】
また、上記システムタイムクロック113からの上記時刻情報により受信時に各データの同期再生を行うためのシステムタイムクロックのリファレンス信号(PCR:Program Clock Reference)120が作成され、同様に上記システム符号化多重化部117で多重化される。
【0094】
このとき、上記各遅延バッファは、上記符号化部104,105,106の処理時間の変動を平滑化したり、データ量の変動のある1次パケットから一定の伝送速度の上記トランスポートストリーム118を作成するためのデータ量の不整合によるオーバーフローやアンダーフローを防止するバッファリングの働きをしたりする。そのため、微視的には遅延バッファの遅延時間は処理によってある程度変動する。以降、遅延バッファの遅延時間は、上記の遅延時間の微視的な変動を無視できる程度に平均化した値とする。
【0095】
この第1実施形態では、上記時間インターリーブ長以上の時間的な間隔をあけて、上記置換可能な複数の字幕データの夫々を時間間隔をあけて放送する方法の一例として、上記遅延バッファ116の遅延時間を上記遅延バッファ115の遅延時間より短く、上記遅延バッファ115の遅延時間を上記遅延バッファ112の遅延時間より短くし、各遅延バッファの遅延時間の差を上記時間インターリーブ長の2倍とするように構成している。
【0096】
上記各遅延バッファの遅延時間の差を上記時間インターリーブ長の2倍とすることで、1つのフェージングによる受信強度の低下の影響が別の置換可能な音声データにまで影響することをより確実に防ぐことができる。
【0097】
そして、上記変調部119では、上記システム符号化多重化部117で作成された上記トランスポートストリーム118を変調し、ベースバンド信号(あるいは中間周波数信号)121を作成して送信部122に送出する。
【0098】
この第1実施形態の送信装置では、地上デジタル放送の伝送方式を用い、上記変調部119で、エラー訂正のための冗長化処理、エネルギー拡散処理、時間インターリーブ処理、周波数インターリーブ処理等のインターリーブ処理などの後、離散逆フーリエ変換やデジタルアナログ変換等を行ってベースバンド信号(あるいは中間周波数信号)を作成する。
【0099】
そして、上記送信部122で、ベースバンド信号(あるいは中間周波数信号)121を、周波数変換器,フィルタ,アンプ等を通して高周波信号とし、アンテナより放送電波として放送する。
【0100】
上記システム符号化多重化部117での2次パケットの生成方法や上記変調部119や上記送信部122の構成は、既存の技術であり詳細は省略する。
【0101】
上記第1実施形態の送信装置によれば、上記遅延バッファ112,115,116の遅延時間の差を上記時間インターリーブ長以上にしているために、字幕データの夫々を、置換可能な複数の字幕データとして、上記時間インターリーブ長以上の時間間隔をあけて放送する放送番組を提供することが可能となる。
【0102】
また、上記放送番組の提供方法によれば、置換可能な複数の字幕データの夫々を放送方式の時間インターリーブ長以上の時間間隔をあけて放送するため、上記変調部119のエラー訂正方式によるデータの拡散が上記の置換可能な複数の字幕データ間で時間的に重ならない。そのため、放送方式のエラー訂正でエラーが訂正しきれなかった場合でも、上記置換可能な複数の字幕データの内の置換可能な別の字幕データが正常に受信できている可能性が高く、上記のエラー訂正しきれなかった場合でも字幕の表示を継続できる放送番組を提供することができる。
【0103】
また、上記放送番組の提供方法では、視聴者の利用状況に合わせて、放送局が上記置換可能な字幕データの放送回数や、複数回放送するそれぞれの放送時間の時間間隔を簡単に調節することが可能となる利点を有する。特に放送方式の規格を変更することなく変更することができる特別の利点がある。
【0104】
また、この第1実施形態では、上記符号化部106の出力の上記1次パケット109を複製して、上記遅延バッファ112に対して別の置換可能な字幕データの1次パケットを作成し、上記遅延バッファ115,116に送出するように構成したが、上記字幕用のデータ入力部103からの字幕データを用いて上記符号化部106とは別の符号化部を用いてパケット化されたデータを作成し、上記遅延バッファ115,116に送出するように構成してもよい。
【0105】
上記のように符号化部が別の場合、置換可能な字幕データ間で、同一の内容の字幕データに対して、付加する提示時刻を同一にすることが好ましいが、上記提示時刻を一定時間のオフセット量だけずらして放送し、受信側でオフセット量だけ考慮して処理するように構成することもできる。
【0106】
次に、図2を用いて、放送番組を受信する受信装置の処理の流れを追って説明を行う。
【0107】
まず、受信部201において、放送電波をアンテナで受信し、チューナ,アンプ,フィルター,周波数変換器等を通して選局した放送局の放送番組のベースバンド信号(あるいは中間周波数信号)202に変換する。
【0108】
そして、復調部203では、上記ベースバンド信号(あるいは中間周波数信号)202を復調して、2次パケット(TSP)が連続するトランスポートストリーム(TS)204を再生する。
【0109】
この第1実施形態では、地上デジタル放送方式の受信装置として、上記復調部203で、上記ベースバンド信号(あるいは中間周波数信号)202をアナログデジタル変換、離散フーリエ変換、デインターリーブ処理、エラー訂正処理を行って2次パケットを復調する。
【0110】
この過程で、図1に示す送信装置の変調部119で作成された冗長化された符号を用いて、2次パケット単位でエラー訂正が行われる。そのため、エラーが訂正しきれなかった2次パケットは欠落することになる。
【0111】
次に、分離システム復号化部205で、上記トランスポートストリーム204をデータの種類毎に1次パケット206,207,208,209,210に分離復号し、それぞれ、音声用のデータバッファ211、映像用のデータバッファ212、字幕用のデータバッファ213,214,215に送出する。
【0112】
つまり、図1のシステム符号化多重化部117で、2次パケットに付加した上記識別符号によりデータを区別することで多重化されたデータを分離し、図1の遅延バッファ110,111,112,115,116における送信側の1次パケットに対応する1次パケットとして、上記1次パケット206,207,208,209,210を再生する。
【0113】
このとき、エラーが訂正しきれずに欠落した2次パケットから再生されるべき1次パケットは、同じく再生できずに欠落することになる。
【0114】
また、システムタイムクロックのリファレンス信号(PCR)216も同様に復号され、システムタイムクロック再生部217により同期再生のためのシステムタイムクロックが再生される。
【0115】
そして、音声用の復号化部218では、上記音声用のデータバッファ211の1次パケットを復号して音声信号219とし、スピーカ220より出力する。
【0116】
また、映像用の復号化部221では、上記映像用のデータバッファ212の1次パケットを復号してテレビ映像信号222とし、映像合成部223に送出する。
【0117】
また、映像合成部223では、複数の入力映像信号、つまり、テレビ映像信号や字幕映像信号や装置の状態を示す映像信号等を合成してディスプレイ224に表示する。
【0118】
図3に上記ディスプレイ224のディスプレイ画面301を模式的に示す。この第1実施形態では、ディスプレイ画面301の一部302に上記映像用の復号化部221からの映像信号によりテレビ映像を表示し、別の字幕表示部303に字幕を表示するように構成した。
【0119】
また、図2に示す字幕置換部225では、上記字幕用のデータバッファ213,214,215の1次パケットを読み出し、字幕データの受信障害を検出し、受信障害がないかまたは受信障害が所定頻度より少ない置換可能な字幕データの1次パケットを字幕用の復号化部226に送出する。
【0120】
上記字幕用の復号化部226では、放送方式のフォーマットに従い1次パケットを復号し、字幕映像信号227を作成し、上記映像合成部223に送出する。それによって、字幕がディスプレイ224のディスプレイ画面301(図3に示す)の字幕表示部303に表示される。
【0121】
このとき、上記各データの復号化部218,221,226では、各1次パケットに付加されている提示時刻と、上記システムタイムクロック再生部217からの時刻情報228とによって出力時刻を制御することで、各復号化部からの出力を同期させる。
【0122】
また、場合によっては、地上デジタル放送での映像データのように、1次パケットに付加されている復号時刻にあわせて復号処理を行い、提示時刻にあわせて出力するように処理を行う場合もある。
【0123】
上記の復調部203、分離システム復号化部205、および、各復号化部218,221,226の構成や、復調処理、分離処理、システム復号化処理、および、各データの復号処理の手順は、既存の技術であり詳細は省略する。
【0124】
次に、上記字幕置換部225において字幕データの受信障害を検出する方法について図5に示すフローチャートで説明する。この第1実施形態では、1次パケット中の字幕データに付加される提示時刻を用いて受信障害を検出している。
【0125】
先ず、各置換可能な複数の字幕データを有する字幕用のデータバッファ213,214,215から、それぞれデータバッファ中で最も早い提示時刻の字幕データを取得し、その中でさらに最も早い提示時刻の字幕データを選出する(S11)、この第1実施形態の場合、字幕データの1次パケットは、提示時刻順に送信されてくるので、各データバッファに最も速く送出されたデータをデータバッファ間で比較することになる。このとき、たとえば、データバッファにデータが保持されていないものがあれば、最も早い提示時刻の所定時間前の時刻(つまり、表示処理の時間を考慮して提示時刻に表示が間に合う時間)まで、次のステップS12に進まないようにし、データバッファにデータが着信するのを待つようにすることができる。
【0126】
次に、ステップS11で選出した字幕データについて受信障害を判断する(S12)。つまり、選出した字幕データの提示時刻と同じ提示時刻の字幕データは受信障害が無いと判断し、それよりも遅い提示時刻の字幕データは、受信障害が発生して正常な字幕データではないと判断する。当然、ステップS11,S12では、全ての字幕用のデータバッファのデータが受信障害を生じてしまっている場合には、それらの中でより受信障害の少ない字幕データを選択することになる。
【0127】
次に、上記受信障害のない字幕データを字幕復号化部に送出する(S13)。上記字幕用の復号化部226に送出された字幕データは、前述のように復号され、画面に表示される。
【0128】
その後、上記受信障害のなかった字幕データ(送出が終了した字幕データ)は破棄し、受信障害で正常な字幕データでないものは、時間的に後の字幕データなので、後で利用するために対応する元のデータバッファに戻す(S14)。
【0129】
そして、終了の指示が無ければ、ステップS11に戻り、処理の終了の指示があった場合は、処理を終了する(S15)。
【0130】
以上によって、各データバッファの字幕データを比較して、受信障害を検出することが可能となる。そして、受信障害のない字幕データを用いて画面に出力することができる。
【0131】
上記のステップS12において、比較する上で、提示時刻は各データバッファの複数の字幕データで一致していることが好ましいが、規定の一定の間隔をあけるように、あるいは、規定の時間内で提示時刻をずらすように放送されている場合、それを考慮して比較することも可能である。
【0132】
このように、ステップS11,S12によって、上記複数の字幕データ間で、上記字幕データ毎にそれぞれ付加されている識別符号を比較して、各字幕データの受信障害を検出する障害検出手段が構成される。
【0133】
また、ステップS13によって、上記障害検出手段により受信障害がないかまたは受信障害が所定頻度より少ないと判断した字幕データを字幕出力手段に出力する選択送出手段が構成される。
【0134】
つまり、この第1実施形態では、上記識別符号の例として、上記提示時刻を用いているのである。
【0135】
あるいはまた、上記識別符号の別の例として、地上デジタル放送での映像データのように、1次パケットに付加されている復号時刻にあわせて復号処理を行い、提示時刻にあわせて出力するように制御を行う場合もあるので、識別符号として上記復号時刻を用いて上記の受信障害の検出、また、その場合の置換出力を行う場合もある。
【0136】
あるいは、識別符号のまた別の例として、たとえば、字幕のせりふや文章、行、段落、あるいは一度に表示する字幕の固まりに付加する符号(例えば通し番号)等も利用することができる。いずれにしても、上記ステップS12で使用する識別符号は、各置換可能な複数の字幕データ間で同じ内容の字幕データを識別できる内容を含んでいることが必要である。
【0137】
また、この第1実施形態では、字幕データの受信障害の検出は、上記データバッファ213,214,215の後で行っているが、これに限られるものではなく、たとえば、字幕に復号後、各字幕間で比較して受信障害を検出することもできる。
【0138】
あるいは、上記分離システム復号化部205の直後で各1次パケットを、既に蓄積されている1次パケットと比較して受信障害を検出して、置換することもできる。この場合、データバッファを複数持つ必要がなくなる利点を有する。
【0139】
また、上記映像合成部223は、テレビ映像、字幕映像のほか、携帯電話の着信を示す表示307(図3に示す)や、電子メールの着信を示す表示308(図3に示す)や、放送番組の受信状態を示すエラー頻度のたとえば棒グラフ309(図3に示す)での表示、等を必要に応じて合成して表示するように構成するようにしてもよい。
【0140】
次に、受信装置の受信障害時とその復旧後の動作について説明する。
【0141】
ここでは、公衆の場所での放送の視聴においてマナーモードとして、音声の出力を停止し、字幕による視聴を行う場合を例としている。
【0142】
先ず、上記分離システム復号化部205は、音声の1次パケットの分離およびシステム復号を停止し、映像と字幕の1次パケットの分離およびシステム復号を行うよう設定される。これによって音声の1次パケット206は出力されずに音声出力が停止する。
【0143】
映像と字幕の1次パケット207,208,209,210は、各バッファに出力され、上記の説明のように提示時刻に上記ディスプレイ224に表示される。これによって、利用者はテレビ映像と字幕を視聴することができる。
【0144】
そして、一時的に受信電波が弱くなるなどの受信障害が発生し、上記復調部203で行われる放送方式のエラー訂正でデータを復元できる許容量を超えると、2次パケットのあるものは欠落し、映像や字幕の1次パケットが欠落する。
【0145】
しかし、上記字幕置換部225では、置換可能な複数の字幕データの1次パケットを用いて置換して字幕データを出力するため、しばらくは、正しい1次パケットを出力することができる。
【0146】
移動受信では、フェージングや障害物による電波の遮蔽によって一時的に受信ができなくなる場合が多く、移動に伴って復旧するので、1次パケットの欠落はその後、ほとんどの場合1秒以内で復旧する。
【0147】
受信障害が復旧するまでの時間より、置換可能な複数の字幕データの放送される放送時刻の間隔、すなわち、遅延バッファ112,115,116の遅延時間の差が大きければ、受信障害前に受信した1次パケットによって置換して正しい字幕データを出力することが可能となる。
【0148】
上記第1実施形態の受信装置によれば、上記のように時間間隔をあけて放送された置換可能な字幕データを用いて、エラー訂正しきれなかった場合でも、置換可能な別の字幕で置換出力できるため、字幕が途切れることが少なくなり、利用者は字幕を見ながら、番組の進行を追いかけることができ、番組の進行を見失うことなく受信障害の復旧を待つことができる。
【0149】
〔第2実施形態〕
次に、上記第1実施形態で示した放送番組の提供方法および送信装置の異なる形態について第2実施形態として説明する。
【0150】
この第2実施形態では、図1のシステム符号化多重化部117で、全体の送信データ量に応じて、放送帯域に収まる範囲内で、置換可能な字幕データの放送回数を増減させるように構成している。
【0151】
この第2実施形態では、以下、上記第1実施形態との違いの部分についてのみ説明を行う。
【0152】
図1で説明すると、符号化多重化部117で送信データ量が多い場合は、遅延バッファ116から読み出した字幕データを2次パケットに変換せずにデータを捨て、送信データ量が少なく放送帯域に余裕がある場合は、遅延バッファ116から読み出した字幕データを2次パケットに変換するように構成する。
【0153】
上記の処理を、図4のフローチャートで説明すれば、先ず、送信データ量を算出する(S1)。この場合の送信量は、映像、音声、字幕、その他、前述の番組配列情報(SI)や番組仕様情報(PSI)などの、上記放送回数を増減させる字幕データ以外、つまり遅延バッファ116の1次パケット以外の合計の送信データ量を指す。
【0154】
次に、置換可能な字幕データを追加した場合の送信データ量を算出し(S2)、放送帯域に収まるか否かを判断する(S3)。
【0155】
そして、上記ステップS3で放送帯域に収まる範囲のデータ量の場合は、置換可能な字幕データを追加し(S4)、上記ステップS3でデータ量が放送帯域に収まらないデータ量の場合は、置換可能な字幕データを追加せずに、破棄する(S5)。
【0156】
以上を、たとえば、単位時間毎、あるいは、置換可能な字幕データの1次パケットの取得毎に行う。
【0157】
このように、データが送信されたりされなかったりする置換可能な字幕データは、結果として不定期にデータが間引かれた置換可能な字幕データとなる。そのため、以上の放送を受信した場合では、置換可能な字幕データのあるものは、放送帯域の混み具合によって元々欠落しているものがあることになる。しかし、欠落した置換可能な字幕データは、第1実施形態で説明した受信装置において、通信障害によって置換可能な字幕データが欠落したものと同様に扱うことができ、欠落していない置換可能な字幕データは、他の正常に受信された字幕データと同じく字幕を置換出力することが可能となる。
【0158】
置換可能な複数の字幕データを放送した場合、特に上記の部分受信セグメントによる放送、とりわけ1セグメント放送では、放送帯域の多くを占めて、番組配列情報や、番組仕様情報など、その他のデータ放送を多重することに支障が生じる場合がある。しかし、一定以上の放送帯域を確保しておいたのでは、置換可能な複数の字幕データの数が減ってしまうことになる。
【0159】
上記第2実施形態の放送番組の提供方法および送信装置によれば、放送データの少ないときには置換可能な字幕データの放送回数を増加し、放送データの多いときには置換可能な字幕データの放送回数を減少するため、放送帯域をより有効に利用して字幕データを置換出力することができる。
【0160】
また、上記ステップS3,S5で意図的に字幕データを欠落させた場合でも、実際の通信障害と同様に扱うことができ、受信装置に特別な機構を追加する必要がない利点を有する。
【0161】
つまり、ステップS1,S2,S3,S4,S5によって、上記置換可能な複数の字幕データの一部の放送が、上記一部のデータ以外の他のデータのデータ量に応じて行われ、全体のデータ量が放送帯域以下となるように制御するデータ量調整手段が構成される。
【0162】
また、ステップS3で放送帯域とデータ量の比較を行う場合、放送帯域ぎりぎりまで置換可能な字幕データを追加するように構成しても構わないし、総データ量が帯域よりある程度少なくなるように設定することもできる。地上デジタル放送では、総データ量が放送帯域より少ない場合は、2次パケットに自動的にダミーデータが付加されて、最終的なデータ量を一定にする様に規格化されている。
【0163】
〔第3実施形態〕
次に、上記第1実施形態で示した受信装置の異なる形態について第3実施形態として説明する。
【0164】
この第3実施形態の受信装置では、受信した個々の置換可能な複数の字幕データの受信障害を検出せず、置換可能な複数の字幕データを提示時刻に応じて順次復号して表示するように構成している。
【0165】
この第3実施形態では、以下、上記第1実施形態との違いの部分についてのみ説明を行う。
【0166】
図2を用いて説明すれば、字幕置換部は、バッファ213,214,215の提示時刻となったデータを字幕用の復号化部226に順次出力する。つまり、字幕が常に上書きされて過去の字幕が削除される。
【0167】
上記第3実施形態によれば、受信障害が無い場合は、置換可能な複数の字幕データにより、次々に字幕が上書きされるが視聴者は同じ内容の重ね書きなので気が付かない。そして、ある字幕データに受信障害が生じた場合は、受信障害が生じていない別の置換可能な字幕データで置換されて字幕が表示される。つまり、上書き回数が減るだけで、置換可能な字幕データの全てが受信障害となるまでは正しく字幕の表示が行われる。
【0168】
上記第3実施形態は、同じ字幕が重ねて表示されて、視聴している利用者が気づかない場合、最も簡単な方法となる。
【0169】
しかし、字幕が過去に表示されたものとあわせて表示される場合、たとえば、字幕表示部303に、過去の複数回の字幕304,305,306を表示し、新しい字幕が追加される毎に、あるいは一定時間毎に、表示が304から305,306へと移動して消えていくように構成する場合は、上記の構成では、同じ字幕が2重、あるいは複数回、表示されてしまうことになる。そのため、提示時刻等から、同じ字幕と判断されるものは同じ場所に上書きするか、表示しないようにし、異なる字幕と判断されるものは現状の304の字幕を305,306へと順次移動させて、新しく304に書き込むように構成することが好ましい。
【0170】
つまり、図6のフローチャートで説明すれば、先ず、最後に表示した字幕の提示時刻を記憶する(S21)。
【0171】
次に、各置換可能な複数の字幕データの提示時刻となったものを順次取得する(S22)。実際には、表示までの処理に要する時間を考慮して提示時刻より少し前に取得する様にする。つまり、各置換可能な複数の字幕データを、各データバッファ213,214,215から順番に検索して、現時点で表示処理すべき提示時刻の字幕データを取得する。
【0172】
次に、ステップS22で取得した字幕データの提示時刻と、ステップS21の最後に表示した字幕の提示時刻とを比較して、提示時刻が同じか否かを判断する(S23)。
【0173】
ステップS23で提示時刻が同じであれば、字幕を上書きする(S24)。この場合、上書きしないで字幕データを処理しないで破棄しても構わない。また、置換可能な複数の字幕データ間で字幕データが同じ提示時刻を有する場合、処理(ステップS22,S23,S24)を行う時間だけ提示時間が遅れてしまう場合もあるので、処理時間による遅れを考慮する必要がある場合もある。
【0174】
一方、ステップS23で提示時刻が異なれば、画面の過去に表示した字幕を移動させて、新しい行に字幕を表示する(S25)。字幕表示部からはみ出す古い字幕は消去される。
【0175】
ステップS24,S25の後、終了の指示が無ければ、ステップS21に戻り、処理の終了の指示があった場合は、処理を終了する(S26)。そして、ステップS21に戻った場合は、ステップS24,S25で表示された字幕の提示時刻が最後に表示した字幕の提示時刻として記憶されることになる。
【0176】
以上によって、個々の置換可能な複数の字幕データの受信障害を検出する特別な機構を設けることなく、受信障害において置換可能な字幕データを相互の間で置換して画面に出力することができる。
【0177】
このように、ステップS21,S22,S23,S24,S25によって、上記置換可能な複数の字幕データを画面上で上書きする上書出力手段が構成される。
【0178】
あるいは、上記のステップS24で上書きしないで重複する字幕データを破棄するように構成すれば、ステップS21,S22,S23,S24,S25によって、上記置換可能な複数の字幕データを置換可能な字幕データが重複しないよう選別して表示する選択送出手段が構成される。
【0179】
上記第3実施形態によれば、受信障害が無い場合は、置換可能な複数の字幕データにより、次々に字幕が上書きされるが視聴者は同じ内容の重ね書きなので気が付かない。そして、ある字幕データに受信障害が生じた場合は、受信障害が生じていない別の置換可能な字幕データで置換されて字幕が表示される。つまり、上書き回数が減るだけで、置換可能な字幕データの全てが受信障害となるまでは正しく字幕の表示が行われる。
【0180】
さらに、字幕を表示するとき、最後に表示した字幕が置換可能な字幕、つまり同じ内容のものか判断して上書きするか、新しい行に表示するかを区別して処理するので、過去の字幕表示を複数行保持するような字幕表示方法にも用いることができる。特に、移動受信では、周りの状況に注意して視線をディスプレイからそらす機会が多いので、過去の字幕を複数行表示して、視聴者が字幕を見逃すことがないようにすることで番組への興味を増して視聴率を向上させることが可能な受信装置を提供することができる。
【0181】
〔第4実施形態〕
次に、上記第1実施形態で示した受信装置の異なる形態について第4実施形態として説明する。
【0182】
第4実施形態の受信装置では、映像、音声の受信障害に伴って、字幕を自動的に表示し、受信障害の復旧に伴って、字幕を自動的に消す構成としている。
【0183】
この第4実施形態では、以下、上記第1実施形態との違いの部分についてのみ説明を行う。
【0184】
図2で説明すれば、音声用の復号化部218,映像用の復号化部221で1次パケットが欠落している場合、それぞれエラー信号229,230を上記映像合成部223に出力するように構成し、上記エラー信号229,230に応じて上記映像合成部223において、字幕の表示を切り替える。
【0185】
図7に示すフローチャートで説明すれば、まず、音声と映像を出力する設定をする(S31)。つまり、上記映像合成部223は字幕を表示しないように設定され、通常は字幕を消して普通にテレビを視聴する状態とする。
【0186】
この第4実施形態では、上記映像合成部223は、上記エラー信号229,230の少なくとも一方のエラー信号がある場合は字幕映像を合成し、両方とものエラー信号がない場合は合成を停止するように設定する。また、分離システム復号化部205は、常に音声,映像順次字幕の1次パケットの分離および復号化を行うよう設定される。
【0187】
次に、受信障害の有無を判断する(S32)。この第4実施形態では、音声と映像のどちらか一方のエラー信号229,230が発信され場合は、受信障害があると判断するように構成している。
【0188】
ステップS32で、受信障害が無い場合は、ステップS32の判断を繰り返す。つまり、正常に放送番組が受信できている場合であり、利用者はディスプレイに表示される映像と、スピーカから出力される音声によって放送番組を視聴する。
【0189】
一方、ステップS32で、受信障害がある場合は、音声と映像と字幕を出力する設定をする(S33)。つまり、一時的に受信電波が弱くなるなどの受信障害が発生した場合である。この第4実施形態では、復調部203で放送方式のエラー訂正でデータを復元できる許容量を超えると、映像または音声の1次パケットが欠落し、映像や音声が途切れる。すると、上記音声用の復号化部218や、上記映像用の復号化部221でのデータの欠落を示すエラー信号229,230が発せられ、上記映像合成部223は字幕映像信号227の合成を開始し、字幕がディスプレイ224に表示される。
【0190】
このとき、字幕データは、第1実施形態に示したように、複数の系列の1次パケットにより、置換して字幕データを出力しているので、上記映像合成部223には、上記字幕用の復号化部226からの正しい字幕映像信号が入力されている。そのため、上記映像合成部223は、字幕映像信号を合成してディスプレイ224に出力することができるのである。
【0191】
次に、正常受信の判断、つまり、受信障害が無いことを判断する(S34)。この第4実施形態では、音声と字幕の両方のエラー信号229,230が発信されていない場合に正常受信と判断するように構成している。
【0192】
移動受信では、フェージングや障害物による電波の遮蔽によって一時的に受信ができなくなる場合が多く、移動に伴って復旧するので、映像や音声のエラーはその後復旧する。すると、音声用の復号化部218や映像用の復号化部221はエラー信号229,230を停止する。
【0193】
ステップS34で、正常受信でない、つまり、受信障害がある場合は、ステップS34の判断を繰り返す。つまり、まだ受信障害が続いている状態である。
【0194】
一方、ステップS34で、正常受信、つまり、受信障害が無い場合は、受信障害が無い期間が所定の期間続いたか判断する(S35)。
【0195】
そして、ステップS35で、受信障害が無い期間が所定の期間続いていない場合、ステップS34に戻る。つまり、受信障害から復旧してまだ所定の時間が経過していない状態である。
【0196】
一方、ステップS35で、受信障害が無い期間が所定の期間続いた場合、字幕の出力を停止し、音声と映像を出力する設定をする(S36)。つまり、上記映像合成部223は字幕を表示しないように設定され、字幕を消して普通にテレビを視聴する状態に戻る。
【0197】
そして、終了の指示があるまで、ステップS32に戻って、繰り返す(S37)。
【0198】
以上によって、受信障害が生じると字幕を表示し、受信障害から復旧すると字幕を消すことができる。
【0199】
このように、ステップS32,S33によって、映像データまたは音声データに受信障害を生じた場合、上記字幕データによる字幕の表示を開始するように、上記字幕出力手段を制御する字幕出力開始手段が構成される。
【0200】
また、ステップS34,S36によって、映像データまたは音声データの上記受信障害が復旧した場合、上記字幕出力開始手段によって開始された表示を停止するように、上記字幕出力手段を制御する字幕出力停止手段が構成される。
【0201】
また、特に、ステップS34,S35,S36によって、映像データまたは音声データの上記受信障害が復旧した場合、受信障害が生じない一定期間を経た後、上記字幕出力開始手段によって開始された表示を停止するように、上記字幕出力手段を制御する字幕出力停止手段が構成される。
【0202】
また、受信装置の電源の切断や受信の設定、出力の設定の変更等のために、記載していないが上記の各ステップから処理が終了される場合もある。
【0203】
上記第4実施形態によって、受信障害が生じた場合に、字幕が表示され、視聴者は番組の進行を、字幕を利用して追いかけながら受信障害の復旧を待つことができる。また、受信障害が復旧した場合には、字幕が消え通常の番組の視聴を行うことができる受信装置を提供することができる。
【0204】
この第4実施形態では、字幕は、映像データと音声データのどちらかにエラーがあった場合に字幕を表示するように構成しているが、音声データにエラーがあった場合にのみ表示するように構成することも可能である。しかし、映像データにエラーがあって映像が表示できない場合、視聴者はディスプレイ装置から情報が得られないのでつまらないと思う場合があり、視聴者は画面からつい目を離してしまう。そのため、映像データのエラーのみがあった場合でも字幕を表示して、使用者の視覚をディスプレイに引き付けた方が、映像が再開した場合にすぐに映像が視野に入り、使用者により満足感を与えることができる。
【0205】
また、映像の受信障害が発生した場合、受信状態が悪く、続いて音声の受信障害も発生する場合が多い。そのため、映像の受信障害だけの場合でも字幕を表示するようにした方が、引き続き音声の受信障害が生じた場合、音声が途切れる前に字幕を表示することができる。それによって、使用者が音声と字幕の対応に慣れる時間的ゆとりが生まれ、音声が途切れた場合でも情報を見逃すことが少なくなる。
【0206】
特に地上デジタル放送規格で移動受信に主に利用される部分受信セグメントでは、音声と映像のエラー訂正が同じ冗長度で行われているため、受信障害が同程度に発生する場合が多く、情報量の多い映像が確率的に先にエラーを訂正できない状態、すなわち、受信障害となる場合が多い。そのため、音声と映像の両方のエラー信号を用いて字幕の表示を制御することで音声が途切れる前に字幕を表示できる可能性が高く効果的である。
【0207】
また、復調部203での2次パケット単位のエラー訂正において検出されるエラーの頻度を信号化(エラー信号229)し、それを用いて受信状態が悪くなった場合に、受信障害の発生で実際に映像や音声が途切れる前に字幕の表示を行うようにする方がより好ましい。その場合、映像や音声が途切れなくても、復調部203での2次パケット単位のエラー訂正において検出されるエラーの頻度が、所定頻度としてのしきい値を超えた場合、受信障害が発生したと判断するようにする。
【0208】
この受信障害の判断を図7のフローチャートの上記ステップS32,S34で用いるようにすることができる。その場合、より確実に受信障害に先駆けて字幕を表示することができ、視聴者が映像と音声から字幕による視聴に自然に移ることができる利点を有する。
【0209】
また、この第4実施形態のように、受信障害、あるいは、字幕を表示する条件から復旧して一定時間を置いて字幕を消すようにした方が、視聴者が字幕から映像と音声による視聴に自然に移ることができるのでより好ましい。あるいは、字幕が表示されたり消えたりすることが繰り返されるとかえって見づらくなる場合がある。そのため、字幕を消すのは良好な受信状態が一定期間続いた後とすることが好ましい。
【0210】
あるいは、受信状態が良好になった場合は、利用者の指示により字幕を消すように構成するようにしてもよい。この場合、たとえば、受信状態をエラーの頻度としてディスプレイに棒グラフ309などでの表示をするように構成し、受信状態を判断できるようにすることが好ましい。
【0211】
〔第5実施形態〕
次に、この発明の第5実施形態では、第1実施形態と同じく、データ多重放送が可能なデジタル放送の一例としての日本方式の地上デジタル放送の伝送方式による放送において、データ多重放送が可能なデジタル放送を送信する送信装置および受信装置の一例について説明する。この第5実施形態の送信装置は、置換可能な複数の字幕データに加えて、置換可能な複数の映像データの夫々を時間インターリーブ長以上の時間間隔をあけて放送する構成をしている。
【0212】
この第5実施形態では、以下、上記第1実施形態との違いの部分についてのみ説明を行う。
【0213】
図8は、第5実施形態の送信装置のブロック図の一部であり、図1の送信装置と一部が異なる部分を示しており、それ以外の部分は図1と同じであり省略している。また、図9は、この発明の第5実施形態の受信装置のブロック図の一部であり、図2の受信装置と一部が異なる部分を示しており、それ以外の部分は図2と同じであり省略している。なお、図8,図9において、図1,図2と同一の構成部は同一参照番号を付している。
【0214】
まず、全体の構成について説明する。
【0215】
図8に示す送信装置は、映像データを符号化する映像符号化手段の一例として映像データ用の符号化部105を有し、また、上記符号化部105により符号化された映像データを遅延させる遅延バッファ111と、上記映像データを遅延させる遅延バッファ111の遅延時間よりも時間インターリーブ長以上短くした遅延時間で、上記符号化された映像データを遅延させる遅延バッファ901を有している。
【0216】
また、上記送信装置は、上記映像データを遅延させる遅延バッファ111と上記映像データを遅延させる遅延バッファ901からの上記符号化された映像データを受け取り、それらを多重化したデータストリームを作成するデータストリーム作成手段の一例としてシステム符号化多重化部117を有している。
【0217】
また、図9に示す受信装置には、上記映像データを出力する映像出力手段の一例として、映像用の復号化部221,映像合成部223,ディスプレイ224を有している。
【0218】
また、上記受信装置は、上記置換可能な複数の映像データのあるものに受信障害が生じた場合、上記受信障害が生じた映像データとは異なる置換可能な別の映像データによって上記映像出力手段の出力を置換する映像置換手段の一例として映像置換部904を有している。
【0219】
また、図9では省略しているが、上記受信装置は、時間的な間隔をあけて放送された置換可能な複数の映像データを含む放送を受信する受信手段の一例として、図2に示す受信部201,復調部203,分離システム復号化部205を有している。
【0220】
次に、図8を用いて、放送番組の提供方法について、送信装置の処理の流れを追って説明を行う。
【0221】
放送番組のデータが、音声用のデータ入力部101,映像用のデータ入力部102,字幕用のデータ入力部103よりそれぞれ供給され、符号化部104,105,106でそれぞれ符号化し、1次パケット107,108,109として、それぞれ遅延バッファ110,111,112に送出するのは第1実施形態と同じである。
【0222】
この第5実施形態では、更に、上記映像データ符号化部105の出力の1次パケット108を複製して別の1次パケットを作成し、遅延バッファ111と異なる遅延バッファ901に送出するように構成した。つまり、置換可能な複数の映像データの一例として同じ映像データの内容の1次パケットを複数の遅延バッファ111,901に送るように構成している。
【0223】
この第5実施形態では、また、上記字幕データ符号化部106の出力の1次パケット109を複製したものは、第1実施形態とは異なって、遅延バッファ115のみに送出するように構成した。つまり、置換可能な複数の字幕データの一例として同じ字幕データの内容の1次パケットを複数の遅延バッファ112,115の2箇所に送るように構成している。
【0224】
そして、上記システム符号化多重化部117では、上記の各遅延バッファ110,111,901,112,115の1次パケットを読み出し、各1次パケットの違い、この場合、バッファ毎の違いを区別するための識別符号が付加された2次パケット(TSP)に再変換する。そして、上記2次パケットを多重化し、上記2次パケットが連続するトランスポートストリーム(TS)118(図1に示す)を作成し、変調部119(図1に示す)に送出する。
【0225】
この第5実施形態では、上記時間インターリーブ長以上の時間的な間隔をあけて、上記置換可能な複数の映像データの夫々を時間間隔あけて放送する方法の一例として、上記遅延バッファ901の遅延時間を上記遅延バッファ111の遅延時間よりも短くし、各遅延バッファの遅延時間の差を上記時間インターリーブ長の2倍とするように構成している。
【0226】
以降は、第1実施形態と同様に処理されて放送電波として放送される。
【0227】
次に、図9を用いて、放送番組を受信する受信装置の処理の流れを追って説明を行う。
【0228】
放送電波をアンテナで受信し、選局した放送局の放送番組のベースバンド信号(あるいは中間周波数信号)202(図2に示す)に変換し、復調部203(図2に示す)で2次パケット(TSP)が連続するトランスポートストリーム(TS)204(図2に示す)を再生するのは、第1実施形態の図2における処理と同じである。
【0229】
次に、分離システム復号化部205で、上記トランスポートストリーム204をデータの種類毎に1次パケット206,207,902,208,209に分離復号し、それぞれ、音声用のデータバッファ211、映像用のデータバッファ212,903、字幕用のデータバッファ213,214に送出する。
【0230】
つまり、図8のシステム符号化多重化部117で、2次パケットに付加した上記識別符号によりデータを区別することで多重化されたデータを分離し、図8の遅延バッファ110,111,901,112,115における送信側の1次パケットに対応する1次パケットとして、上記1次パケット206,207,902,208,209を再生する。
【0231】
この第5実施形態では、映像置換部904で、上記映像用のデータバッファ212,903の1次パケットを読み出し、映像データの受信障害を検出し、受信障害がないかまたは受信障害が所定頻度より少ない置換可能な映像データの1次パケットを映像用の復号化部221に送出する。
【0232】
また、第5実施形態では、字幕置換部225で、上記字幕用のデータバッファ213,214の1次パケットを読み出し、字幕データの受信障害を検出し、受信障害がないかまたは受信障害が所定頻度より少ない置換可能な字幕データの1次パケットを字幕用の復号化部226に送出する。
【0233】
そして、映像用の復号化部221では、上記映像置換部904からの1次パケットを復号してテレビ映像信号222とし、映像合成部223に送出する。
【0234】
また、上記字幕用の復号化部226では、上記字幕置換部225からの1次パケットを復号して字幕映像信号227を作成し、上記映像合成部223に送出する。
【0235】
それによって、映像と字幕がディスプレイ224に表示される。
【0236】
上記映像置換部904で、受信障害がないかまたは受信障害が所定頻度より少ない置換可能な映像データの1次パケットを映像用の復号化部221に送出する方法は、第1実施形態で字幕データの提示時刻を比較して字幕データの受信障害を検出した方法と同じ方法を用いることができる。また、この場合、映像データは復号時刻の順に放送されるために、上記の提示時刻の代りに復号時刻を用いることがより好ましい。
【0237】
つまり、各映像用のデータバッファ212,903の映像データの復号時刻を比較して映像データの受信障害を検出する。
【0238】
上記第5実施形態の送信装置によれば、上記遅延バッファ111,901の遅延時間の差を上記時間インターリーブ長以上にしているために、置換可能な複数の字幕データのほかに、置換可能な複数の映像データの夫々を、上記時間インターリーブ長以上の時間間隔をあけて放送する放送番組を提供することが可能となる。
【0239】
また、上記放送番組の提供方法によれば、放送方式の時間インターリーブ長以上の時間間隔をあけて、置換可能な複数の字幕データおよび置換可能な複数の映像データを複数回放送するため、変調部119(図1に示す)のエラー訂正方式によるデータの拡散が上記の置換可能な複数の字幕データ間だけでなく、置換可能な複数の映像データ間でも時間的に重ならない。そのため、放送方式のエラー訂正でエラーが訂正しきれなかった場合でも、上記置換可能な複数の映像データの内の置換可能な別の映像データが正常に受信できている可能性が高く、上記のエラー訂正しきれなかった場合でも字幕と映像の表示を継続できる放送番組を提供することができる。
【0240】
また、上記放送番組の提供方法では、視聴者の利用状況に合わせて、放送局が上記置換可能な映像データの放送回数や、複数回放送するそれぞれの放送時間の時間間隔を簡単に調節することが可能となる利点を有する。特に放送方式の規格を変更することなく変更することができる特別の利点がある。
【0241】
上記第5実施形態の受信装置によれば、エラー訂正しきれなかった場合でも、置換可能な別の字幕や置換可能な別の映像で置換出力できるため、字幕や映像が途切れることが少なくなり、利用者は字幕と映像を見ながら、番組の進行を追いかけることができ、番組の進行を見失うことなく受信障害の復旧を待つことができる。
【0242】
また、上記の第1実施形態、第5実施形態では、置換可能な複数の字幕データを放送する時間間隔を時間インターリーブ長の2倍としているが、時間インターリーブ長以上であればよく、より好ましくは1秒以上とする。これは、実際には、駅のホームや、バスの停留所等の待合所や、電車での移動中での受信障害が1秒弱にわたって続くことがあることが多いためである。しかし、待合所などでは人や車の移動によって、また、電車やバスなどの移動車両中では車両の移動によって、受信状態が刻々変化し、実際に利用してみると受信障害が生じても1秒程度で回復する場合がほとんどであるためである。また、より好ましくは、上記の遅延時間の間隔はその倍の2秒以上とすることで、都市近郊の複雑な地形で受信状況が劣化した場合でもより確実に別の時刻に放送された置換可能な字幕データで置換が可能となる。
【0243】
また、受信装置のバッファを必要以上大きくしないため、置換可能な複数の字幕データの夫々を時間間隔をあけて放送するそれぞれの時刻の間隔、すなわち上記の遅延時間の間隔は1分以下にすることが好ましい。また、この遅延時間の値が大きいと提示時刻とデータが送信される時刻との差が大きくなり、電源を入れた後や、チャンネルを変えたあとで字幕出力の置換が行える状態となるまでの時間が大きくなるので、より好ましくは15秒以下にすることが好ましい。
【0244】
これは、放送番組中のコマーシャルのほとんどが15秒単位で編成されているように、視聴者が場面をおおよそ理解するのに必要な時間である。そのため、反対に、視聴者は電源を入れたり、チャンネルを変えたりした後、15秒程度は、番組内容に必ずしもついていっていないため、放送が途切れてもあまり気にならない。それに対して、15秒を過ぎると、番組内容を把握し、番組を楽しむ姿勢になっているため、放送が途切れた場合、満足感を得られない場合が多い。そのため、15秒以内で上記のようにデータの置換が行える状態とすることが好ましい。
【0245】
また、上記第1実施形態では、送信された置換可能な複数の字幕データとして、本来の字幕データ(遅延バッファ112に貯えられるデータに相当)に対して、別々の置換可能な字幕データ(遅延バッファ115,116に貯えられるデータに相当)を2回放送して、合計3回置換可能な字幕データを放送するように構成したが、第5実施形態のように別の置換可能な字幕データを1回放送して、合計2回置換可能な字幕データを放送するように構成することもできる。あるいは、別の置換可能な字幕データを3回以上放送して、合計4回以上の置換可能な字幕データを放送するように構成することもできる。
【0246】
また、上記の第1実施形態、第3実施形態、第4実施形態、第5実施形態では、送信された置換可能な複数の字幕の全てを用いて、受信障害時に字幕出力を置換出力するように構成しているが、本発明はこの構成に限られるものではなく、上記放送された置換可能な複数の字幕データの一部のみを用いて、受信装置において受信障害の字幕データの置換出力を行うこともできる。
【0247】
つまり、放送局で上記置換可能な字幕データとして、多めの置換可能な複数の字幕データを放送しておき、受信装置の性能に応じて放送された置換可能な複数の字幕データの一部を使用して、受信障害時の置換出力を行うように構成する。
【0248】
特に移動受信を行う場合、受信装置は字幕用のデータバッファの容量や処理速度の面で制限があるので、性能に応じて置換可能な字幕データの一部を使用する構成が適している。この場合、図1の遅延バッファの遅延時間が大きい字幕データの置換可能な字幕データから順に用いるようにすることで、受信装置の記憶容量を低減させることができる。
【0249】
あるいは、置換可能な複数の字幕データの存在を視聴者に提示して、視聴者にその中から置換出力に使用する置換可能な複数の字幕データを選択するようにすることもできる。あるいはまた、自動的に置換可能な複数の字幕データの複数の組み合わせを順番に選択して、それぞれの置換可能な複数の字幕データの組み合わせで置換処理が行われる頻度を算出し、置換処理が行われる頻度の大きい置換可能な複数の字幕データの組み合わせを採用するように構成することもできる。
【0250】
また、上記の第1実施形態、第3実施形態、第4実施形態では、映像用の復号化部221は、映像データが欠落した場合、エラーのない最後の映像を出力するように構成した方が好ましい。
【0251】
あるいは、映像用の復号化部は、保存している過去の映像、あるいは、それを用いて種々の加工を行った映像を表示するように構成することもできる。たとえば、縮小した数秒おきの映像を順次ならべて表示したり、映像の一部を拡大したり縮小したり、色彩を変化させたり、形を歪ませたりして表示する。
【0252】
これによって、利用者は、受信障害時に置換可能な複数の字幕データを用いて置換出力した字幕で番組の進行を追いかけつつ、変化した場面の視聴を楽しみながら、受信障害の復旧を待つことができる。
【0253】
あるいは、受信障害が長引く場合は、放送番組の場面が変わる場合があり、過去の映像と、字幕で得る番組の進行が一致しなくなることが多い。そのため、映像の受信障害が一定期間続いた場合、映像を次第に消す、つまりフェードアウトするように加工して出力するように構成することがより好ましい。この場合、テレビ放送の画面が変わる平均的なタイミングから映像の受信障害が4から10秒続いた時に映像を次第に消すように設定することで、番組の進行と、映像との不一致による違和感が少なく好ましい。
【0254】
また、上記の第1実施形態から第5実施形態では、放送方式として、地上デジタル放送の規格を用いたが、放送方式は地上デジタル放送の規格に限られるものではなく、その他の時間インターリーブ処理を行う規格のデータ多重放送が可能なデジタル放送に適用することが可能である。つまり、日本の地上デジタル放送方式のように、移動受信に優れた時間インターリーブ処理を行う方式と組み合わせていることで、少ない個数の置換可能な複数の字幕データで、より効果的に置換して正しい字幕データを出力することが可能となっている。これは、時間インターリーブ処理により、ほとんどのフェージングによる受信障害がエラー訂正されるため、エラー訂正しきれなかった受信障害の頻度が小さくなり、時間インターリーブ長より時間をあけて放送した置換可能な字幕データが同時に受信障害となることが確率的に少なくなるためである。
【0255】
デジタル放送の規格の放送方式では一般に、映像、音声、字幕等のデータは、パリティを付加するなど冗長化され、周波数軸上や時間軸上でインターリーブ処理によって拡散される。それによって、部分的、あるいは一時的に電波の受信が途切れた場合でも、受信装置でエラー訂正を行い正しいデータを出力することができるように構成されている。
【0256】
本発明の実施形態における置換可能な複数の字幕データの夫々を放送する構成は正しいデータを視聴者に提供する面では同じ目的を有するが、上記の放送方式でのパリティの付加等のエラー訂正のための処理と比べると、時間インターリーブ処理が、放送方式すなわち、送受信装置に密接に関連して構成され規格で決められているのに対して、番組の提供方法として構成されていることが最も大きな違いである。そのため、番組放送の送受信装置に大きな特別な変更を行うことなく、また、本構成を用いない放送番組と共存することが可能である利点を有する。
【0257】
つまり、この第5実施形態では、1次パケットの作成時点で置換可能な複数の字幕データを作成するか、または、1次パケットの複製によって置換可能な複数の字幕データを作成し、それらの1次パケットを2次パケットに再構成して多重化している。この構成により、放送方式の規格の変更を行うことなく置換可能な複数の字幕データを放送することができる。すなわち、放送方式では、2次パケットの連続した2次パケットストリームを符号化,変調して放送するので、本発明が扱うデジタル放送の1次パケットの中身は、放送方式としては一定の規格にさえ入っていれば放送規格の変更ではなく、番組編成の段階での編集で可能となる。
【0258】
そのため、置換可能な字幕データは、上記の受信障害の置換方法に対応していない受信機からは、単なる重複したデータの放送であって、受信に障害を与えない。これは、たとえば、選択可能な日本語の字幕と英語の字幕と同様に扱われることになる。
【0259】
たとえば、受信障害の置換方法に対応した受信機には、置換可能な複数の字幕データの存在を、上記の番組配列情報(SI)や番組仕様情報(PSI)で通知して、受信機側で自動的に受信障害での置換出力を開始するように構成してもよい。
【0260】
【発明の効果】
【0261】
以上より明らかなように、この発明の受信装置によれば、時間インターリーブ処理を行う方式のデジタル放送の放送番組を受信し、放送の伝送方式のエラー訂正方式規格によってエラー訂正ができなかった一時的な受信状況の劣化の際でも、字幕データを、別の置換可能な字幕データで置換して出力することができる。
【0262】
【図面の簡単な説明】
【図1】 図1は第1実施形態の放送番組の提供方法を用いた送信装置のブロック図である。
【図2】 図2は本発明の第1実施形態の受信装置のブロック図である。
【図3】 図3は上記受信装置のディスプレイ画面を説明するための図である。
【図4】 図4は第2実施形態の放送番組の提供方法を用いた送信装置の置換可能な字幕データの放送回数を変化させる構成を説明するためのフローチャートである。
【図5】 図5は上記第1実施形態の受信装置の字幕データの受信障害を検出する方法を説明するためのフローチャートである。
【図6】 図6は本発明の第3実施形態の放送番組の提供方法を用いた受信装置の字幕データの置換を説明するためのフローチャートである。
【図7】 図7は本発明の第4実施形態の受信装置の字幕の表示を説明するためのフローチャートである。
【図8】 図8は第5実施形態の放送番組の提供方法を用いた送信装置のブロック図である。
【図9】 図9は本発明の第5実施形態の放送番組の提供方法を用いた受信装置のブロック図である。
【図10】 図10は従来の放送番組の提供方法を説明するための図である。
【符号の説明】
101,102,103…データ入力部、
104,105,106…符号化部、
107,108,109…1次パケット、
113…システムタイムクロック、
114…提示時刻、
110,111,112,115,116,901…遅延バッファ、
117…システム符号化多重化部、
118…トランスポートストリーム、
119…変調部、
120…システムタイムクロックのリファレンス信号、
121…ベースバンド信号(あるいは中間周波数信号)、
122…送信部、
201…受信部、
202…ベースバンド信号(あるいは中間周波数信号)、
203…復調部、
204…トランスポートストリーム、
205…分離システム復号化部、
206,207,208,209,210,902…1次パケット、
211,212,213,214,215,903…データバッファ、
216…システムタイムクロックのリファレンス信号、
217…システムタイムクロック再生部、
218,221,226…復号化部、
219…音声信号
220…スピーカ、
222…テレビ映像信号、
223…映像合成部、
224…ディスプレイ、
225…字幕置換部、
227…字幕映像信号、
229…エラー信号、
904…映像置換部。
[0001]
BACKGROUND OF THE INVENTION
  The present invention relates to a broadcast number of a digital broadcast using a time interleave process.PairReceiving device to receiveIn placeRelated. In particular, the broadcast number of Japanese terrestrial digital broadcasting (ISDB-T: Integrated Service Digital Broadcast-Terrestrial)PairReceiving device to receiveIn placeRelated.
[0002]
[Prior art]
  Conventionally, as an example of digital broadcasting aimed at improving the reception state of mobile reception, there is one using a broadcast program providing method shown in the spectrum diagram of FIG. 10 (see, for example, Patent Document 1). In FIG. 10, the horizontal axis 401 represents frequency, the vertical axis 402 represents broadcast power, and the broadcast signal 403 of the digital broadcast is displayed. As shown in FIG. 10, this digital broadcast is formed by a digital terrestrial broadcast signal 403 obtained by collecting a plurality of OFDM (Orthogonal Frequency Division Multiplexing) segments composed of a plurality of digitally modulated carriers. The OFDM segment is indicated by adjacent rectangles 406, 407, 408 to 409, etc. in the figure.
[0003]
  Here, the “OFDM segment” refers to a plurality of carriers forming an OFDM broadcast wave, for example, in the case of digital terrestrial broadcasting, adjacent carrier waves in the entire broadcast wave of 1405 to 5617 carriers. Means a group. For example, in terrestrial digital broadcasting, one broadcast wave is divided into 13 segments, and data redundancy for error correction, various interleaving processes, and the like can be performed separately for each segment (actual In addition, processing is performed for three groups in which segments are further collected).
[0004]
  In the broadcast signal 403, when a plurality of OFDM segments are collected to form the broadcast signal 403, the power of at least one specific segment of each OFDM segment is set to be different from the other segments.
[0005]
  In other words, by performing broadcasting for mobile reception using only a specific segment (405 or 406) whose broadcast power is higher than that of the other segments described above, the reception intensity in mobile reception is increased and reception while moving Even in Japan, a broadcast providing method that does not easily cause a reception failure is possible.
[0006]
  Hereinafter, broadcasting performed using only a specific segment as described above is referred to as “broadcast by a partial reception segment”. In particular, a broadcast intended to receive and view only one segment of the partial reception segments is hereinafter referred to as “one segment broadcast”. In the Japanese terrestrial digital broadcasting, the broadcast wave of the one-segment broadcast is arranged at the center of the segment of the entire broadcast wave (position of segment 405 in FIG. 10).
[0007]
[Patent Document 1]
          JP 2000-101542 A
[0008]
[Problems to be solved by the invention]
  However, in the broadcast program providing method described above, the configuration of the transmission / reception apparatus becomes complicated, so it is not adopted as a standard for terrestrial digital broadcasting and cannot be used practically. In addition, in the one-segment broadcasting, which is particularly important for mobile reception of digital terrestrial broadcasting, the broadcast output power cannot be changed within the segment even in the broadcasting program providing method. When the situation deteriorates, the video, audio, and subtitles are disturbed almost simultaneously, causing a problem that the viewer cannot keep up with the progress of the program.
[0009]
  An object of the present invention is to provide a broadcast number that can replace the display of subtitles even when the reception situation temporarily deteriorates.PairReceiving device to receivePlaceIs to provide.
[0010]
  In particular, the digitization of terrestrial television broadcasting has a problem that there are few advantages due to digitization in spite of the large capital investment required to cope with the digitization on the broadcasting station side. Among them, an increase in reception opportunities while moving, that is, an increase in viewing time of viewers is one of the greatest advantages of digitization. This is because the viewing time has increased to almost the upper limit in daily life, so in order to increase the viewing time, new viewing such as watching while moving or waiting time at stations, stops, etc. This is because opportunities need to be increased. For this reason, the narrow band broadcast suitable for carrying around by the partial reception segment and particularly the one segment broadcast are particularly regarded as important.
[0011]
  For this reason, it is one of the very big issues to enable viewers to follow the progress of a broadcast program and continue interest in the broadcast program even when the reception state deteriorates during movement.
[0012]
[Means for Solving the Problems]
  To achieve the above objective,In the receiving apparatus of the present invention, the received subtitle data is received by the receiving means, which is a digital broadcast capable of data multiplex broadcasting, including a plurality of replaceable subtitle data broadcasted at time intervals. Is output by subtitle output means. Then, when there is a reception failure in some of the replaceable subtitle data, the subtitle replacement means outputs the subtitle output means output with another replaceable subtitle data different from the subtitle data in which the reception failure has occurred. The subtitle output means is controlled by the subtitle output start means so that the subtitle display by the subtitle data is started when a reception failure occurs in the video data or audio data. That is, when a reception failure occurs in video data or audio data, the receiving apparatus switches to a setting for displaying subtitles instead of a setting for displaying subtitles, and automatically starts displaying subtitles.
  That is, the broadcast including the caption data is received by the receiving unit, and the caption data is displayed on the display device as the caption, for example. At this time, the caption data in which the reception failure has occurred is replaced with another replaceable caption data that is broadcast at a time interval and output.
  According to the receiving apparatus having the above configuration, the reception intensity of the broadcast wave is temporarily weakened or the interference wave enters. Even if the error cannot be corrected by the error correction method of the broadcast standard, it is possible to perform subtitle output by substituting with another replaceable subtitle data broadcasted at the above time interval. The subtitles are displayed on the screen as long as there is no reception failure at all broadcast times of replaceable subtitles being broadcast.
  Therefore, even when the reception state deteriorates, the viewer does not overlook important information such as dialogue due to the progress of the program, and can provide continuous broadcasting to the viewer.
  In particular, replaceable subtitle data is broadcast at a time interval, so that the replacement of the data can be performed effectively. For example, the receiving apparatus uses a delay means such as a buffer to set the time interval. The data broadcasted with a gap is synchronized and output as a replacement.
  Even if video or audio output is lost, the subtitles are automatically displayed, so that information is not lost to the viewer as the program progresses.
  Further, the video data or audio data reception failure in this case includes not only the case where the video or audio is actually interrupted, but also the case where the frequency of error occurrence during demodulation and decoding increases. For example, a predetermined threshold value may be provided for the error occurrence frequency, and a reception failure may be determined when an error frequency exceeding the threshold value occurs. In particular, it is more preferable to display subtitles before video or audio is actually interrupted when the frequency of error occurrence during demodulation and decoding increases.
  Further, in the receiving apparatus according to an embodiment, when the reception failure of the video data or the audio data is recovered, the subtitle output unit stops the subtitle output so that the subtitle output started by the subtitle output start unit is stopped. Control by means. That is, when the reception failure is recovered after the video or audio reception failure, the subtitle display is automatically stopped.
  According to the receiving apparatus of the above embodiment, when the reception failure is recovered, the convenience is improved by automatically stopping the display of subtitles. In particular, in the case of mobile reception, the reception situation often changes repeatedly, and each time the user has to perform an operation to stop displaying subtitles. Therefore, this configuration is particularly suitable.
  Moreover, the automatic stop of the subtitle display may be stopped immediately after the reception failure is recovered or may be stopped after a certain period of time. However, in particular, it is more preferable to configure the subtitle display to stop when there is no reception failure for a certain period.
  Of this inventionReceive device receivesBroadcast program provision methodAsIn digital broadcasting capable of data multiplex broadcasting, time interleaving processing is performed by the digital broadcasting broadcasting method. Then, each of the replaceable subtitle data is broadcast at time intervals. At this time, a time interval between at least two pieces of subtitle data among the plurality of subtitle data that can be replaced is equal to or longer than a time length in which the plurality of subtitle data is spread on the time axis by the time interleaving process. And
[0013]
  In other words, each of the plurality of replaceable subtitle data has a time interval greater than the time length in which the data is spread on the time axis by the time interleave processing of the broadcasting system (hereinafter referred to as the time interleave length). It will be broadcast in the broadcast program.
[0014]
  According to the broadcast program providing method, even if the reception intensity of the broadcast radio wave is temporarily weakened or an interference wave is included, and the error cannot be completely corrected by the error correction method of the broadcast method, the time interval described above is used. It is possible to provide a broadcast program that can be replaced with another replaceable subtitle data that has been broadcasted and that can be output as a subtitle. In addition, since the time interval is equal to or longer than the time interleave length, the probability of replacement with the other subtitle data is improved.
[0015]
  The “subtitle data that can be replaced” in this case is subtitle data that is originally broadcast, and at least one subtitle data that has the same subtitle content as the subtitle data that is originally broadcast. Can be output instead of other caption data.
[0016]
  The above “subtitle content is the same” means that the viewer sees the same subtitle content, and control codes such as identification codes for data multiplexing may be different. Also, intentionally subtitles or part of them, for example, kanji, hiragana, katakana, etc., or change the font (cursive, line, gothic, italic, etc.) AlsoGood.
[0017]
  On the other hand, when broadcasting multiple subtitles originally for the purpose of viewing in different languages, such as Japanese, English, Chinese, other foreign languages, etc., that is, bilingual subtitles or multilingual It may be broadcast with word subtitles. In this case, even if a subtitle reception failure in a certain language is replaced by another language, it does not make sense for general viewers, and thus is not included in the present invention. Also, broadcast programs that viewers select and view one such as sports broadcasts such as explanatory subtitles broadcasted by one team side, even if reception trouble occurs in certain subtitle data Since it cannot be replaced with other caption data, it is not included in the present invention.
[0018]
  In addition, for example, in the case of subtitles for young people (for example, subtitles mainly composed of kana) and subtitles for adults (for example, subtitles mainly composed of kanji), subtitles for adult subtitles are replaced with subtitles for younger age. However, it is included in the present invention, but on the contrary, substituting reception for subtitles for young people with subtitles for adults does not make sense for younger people. Is less preferred.
[0019]
  Further, in this case, “broadcast each of a plurality of subtitle data with a time interval greater than or equal to the time interleave length” means, for example, a time during which each subtitle data is spread on the time axis by the time interleave processing described above. Is set such that the time interval between the medians between the plurality of caption data is equal to or greater than the time interleave length, and the plurality of caption data is transmitted.
[0020]
  Alternatively, for example, the difference between each caption data in the time difference between the presentation time accompanying each caption data and the broadcast time of the caption data is set to be equal to or greater than the time interleave length, This refers to sending closed caption data.
[0021]
  In other words, by setting each of the plurality of subtitle data that can be replaced to be broadcast with a time interval greater than or equal to the time interleave length, the range of spread in the time axis direction by time interleave processing of certain subtitle data is There is no overlap in the range of diffusion in the time axis direction by the time interleaving process of other subtitle data that can be replaced. As a result, even if the reception intensity of broadcast radio waves temporarily decreases and a failure occurs in the reception of certain subtitle data, other subtitle data that can be replaced that is broadcast with a time shifted by more than the time interleave length is used. It does not affect. Therefore, in the fixed number of subtitle data that can be replaced, the probability that the subtitle output can be replaced in the case of reception failure is greatly improved.
[0022]
  In addition, when there are three or more subtitle data that can be replaced, broadcasting with a time interval greater than or equal to the time interleave length between all the subtitle data allows more reliable output of reception failure. Is preferred because it can be substituted. However, any one of the plurality of replaceable subtitle data combinations may be broadcast with a time interval equal to or greater than the time interleave length, and all replaceable subtitle data is not necessarily temporally longer than the time interleave length. There is no need to broadcast at a long interval.
[0023]
  In addition, the “time interleaving process” described above is a process of actively diffusing data on the time axis in the broadcasting system, and mainly prevents broadcast interruption due to a temporary decrease in received power due to fading. That is the purpose. In addition to the time interleaving process described above, the data is spread by byte interleaving or bit interleaving, and part of the spreading has a spread on the time axis. There is.ThisThese time interleave lengths may include the width of diffusion in the time axis direction. However, for example, in the Japanese terrestrial digital broadcasting broadcasting system, the spreading width in the time axis direction is smaller than the spreading width by the time interleaving process, and can be substantially ignored.
[0024]
  Further, in the error correction in the broadcasting system using the time interleaving process, if a failure occurs in reception over the time interleave length, the error correction cannot be performed. On the other hand, PlaceWith the configuration in which each of a plurality of replaceable subtitle data is broadcast with a time interval equal to or greater than the time interleave length, subtitles can be replaced and output even in a longer reception failure.
[0025]
  In mobile reception, which greatly contributes to improving the viewing time of viewers, there are many opportunities for reception in the public place. Like mobile phones, voice output is restricted by restricting voice output in the manner of the user. Viewing with subtitles that have been converted (actually, no audio is output, but for the sake of convenience, the use of broadcasting is expressed as viewing for the sake of convenience) increases. Therefore, unless the convenience of viewing with subtitles is improved, the viewing time of the viewer cannot be significantly improved. If the subtitles are interrupted, as in the case of the audio, in some cases, it may be impossible to keep up with the progress of the program by overlooking the dialogue. Therefore, thisRelease ofThe transmission program providing method is particularly effective.
[0026]
  In addition, subtitle data has an extremely small amount of data compared to video and audio data, and therefore, even if a plurality of replaceable subtitle data is broadcast, the original broadcasting is not hindered. Therefore, in particular, the configuration in which a plurality of subtitle data that can replace subtitle data is not transmitted as a plurality of substitutable data that is not transmitted as audio or video data is as described above although the burden on both the broadcasting station and the receiving device is small. It is particularly preferable because it has a great effect of improving the audience rating.
[0027]
[0028]
[0029]
[0030]
[0031]
[0032]
  The time interleaving process described above is intended to compensate for data loss due to a temporary decrease in the reception intensity of broadcast radio waves due to fading as described above, and assumes a decrease in reception intensity for a short time. . However, when actually broadcasting, there were more than the chances that the reception could be interrupted due to multiple conditions that could easily cause a reception failure, or the reception position was completely in the shadow of a radio wave.
[0033]
  For example, when moving on a train or bus, the reception strength may decrease continuously due to fading due to the complicated layout of the building, or it may be shadowed by radio waves due to the shadow of a large building. And reception may be interrupted. In addition, reception may be interrupted due to the influence of passing vehicles or people while walking, at a station platform, or at a bus stop such as a bus stop.
[0034]
  However, as a result of examination in the above environment, it has been found that the above reception failure rarely lasts for more than 1 second. For this reason, each subtitle data that can be replaced is broadcast with an interval of 1 second or more.FruitThe embodiment is particularly effective.
[0035]
  Also,the aboveIn the broadcast program providing method, the data multiplex broadcast is broadcast by partial reception segments of a plurality of OFDM segments composed of a plurality of digitally modulated carriers.
[0036]
  In other words, a plurality of replaceable subtitle data is data-multiplexed together with other data (for example, video and audio data) and broadcast by partial reception segments of a plurality of OFDM segments composed of a plurality of digitally modulated carriers. Unlike other broadcasting methods, the OFDM modulation method has an advantage that narrow band broadcasting can be performed using part of the frequency band. For example, as in the above-described terrestrial digital broadcasting, there is a case where broadcasting is performed by a partial reception segment that broadcasts a program using a specific OFDM segment in a broadcast wave. In mobile reception, this partial reception segment is often used due to restrictions on portability of the receiving apparatus. However, in the case of broadcasting by the partial reception segment, particularly in the terrestrial digital broadcasting standard, data such as video, audio, and subtitles are broadcast with the same error correction method, for example, with the same redundancy and the same time interleave length. If a reception failure occurs during reception, all of them cannot be received in the same way, and the viewer may easily lose track of the program, which may cause a problem that the audience rating of the program does not increase.
[0037]
  UpReleaseAccording to the transmission program providing method, there is an effect of increasing the audience rating of the program by reducing the interruption of subtitles as described above.
[0038]
  In particular, in the partial reception segment broadcasting, since the receiving apparatus is downsized and the opportunity for mobile reception increases, the above problem is significant. In particular, in mobile reception, since there are many cases where a sufficient directional antenna is not used as a reception antenna, the influence of fading tends to be larger and more frequent. for that reason, EffectThe fruit is particularly large.
[0039]
  Also, subtitle data has a very small amount of data compared to video data and audio data. Therefore, even if each of a plurality of replaceable subtitle data is broadcast, the increase in the total data amount of the broadcast data is extremely small, and the partial reception segment Is particularly suitable for narrow-band broadcasting, especially for one-segment broadcasting.
[0040]
  Also,the aboveIn the broadcast program provision method,For example,A plurality of replaceable video data is broadcast with a time interval greater than a time length in which each of the plurality of video data is spread on the time axis by the time interleaving process. That is, like the replaceable subtitle data, each of the replaceable video data is broadcast with a time interval. At this time, a time interval between at least two pieces of video data among the plurality of replaceable video data is equal to or longer than a time length in which the plurality of video data are spread on the time axis by the time interleaving process. And
[0041]
  UpReleaseAccording to the transmission program providing method, it is possible to provide a broadcast program that not only includes subtitles but also reduces video interruptions and greatly increases the chance of viewing in the public place.
[0042]
  Of course, it is possible to broadcast not only subtitles and videos but also audio data that can be replaced in the same way. However, as described above, in order to increase the viewing time itself, the subtitles and videos that are used visually are used. It is more preferable to make the process uninterrupted first,Broadcast program provision methodIs particularly effective.
[0043]
  In this case, “a plurality of replaceable video data” refers to video data originally broadcast and different video data having the same video content as at least one or more video data originally broadcast. Can be output in place of another video data.
[0044]
  The above “same video content” means that the video content viewed by the viewer is the same, and control codes such as identification codes for multiplexing data may be different. Also, if you intentionally change the color tone or resolution of the video,Good. In addition, the replaceable video data may include data in which moving image frames are thinned out, and the frequency of thinning out may not be constant. Alternatively, video frames can be thinned out automatically, for example by thinning out at regular intervals, but there is also a method in which important scenes are selected in advance on the broadcasting station side and thinned out to leave the scenes. Is possible. By selecting an important scene in advance on the broadcast station side and thinning out the scene so that the scene is left, the viewer can be surely viewed the necessary scene, and the broadcast program can be improved.
[0045]
  In particular, in the broadcast by the partial reception segment, particularly in the one-segment broadcast, since the broadcast band is small, it is preferable to use the video data in which the image frames are thinned out as the replaceable video data.
[0046]
  On the other hand, when a plurality of videos are broadcasted and selected by a viewer, for example, in a plurality of video data in which a story of a drama is branched into a plurality and a viewer selects and views one of them, Even if a reception failure occurs in certain video data, it cannot be replaced with video data of another story, so it is not included in the present invention.
[0047]
  In addition, a broadcast program that viewers select and watch one of them, such as sports broadcasts broadcast separately on the side of one team, can be used even if reception failure occurs in certain video data. Therefore, it is not included in the present invention.
[0048]
[0049]
[0050]
[0051]
[0052]
[0053]
[0054]
[0055]
[0056]
[0057]
[0058]
[0059]
[0060]
[0061]
[0062]
[0063]
[0064]
[0065]
[0066]
  Also,Send digital broadcasts that allow data multiplex broadcastingTransmitterAsThe subtitle data is encoded by the subtitle encoding means. Then, the subtitle data encoded by the subtitle encoding means is delayed by the first delay means. Further, the subtitle encoding means encodes the subtitle data with a delay time shorter than the time length over which the subtitle data is spread on the time axis by the time interleaving process of the broadcasting system, than the delay time of the first delay means. The subtitle data is delayed by the second delay means. Then, a data stream creation means creates a data stream in which the encoded caption data from at least the first delay means and the second delay means is multiplexed. Then, the data stream is broadcast by a broadcasting means as a digital broadcast capable of data multiplex broadcasting.
[0067]
  That is, the caption data is first encoded. In order to perform broadcasting, it is necessary to use a data stream in which the amount of data per unit time in the entire broadcasting including the encoded caption data is matched to the broadcasting band. For this purpose, the encoded subtitle data is delayed by delay means to adjust the transmission to the data stream creating means. At this time, the delay time of the second delay means is made smaller than the delay time of the first delay means by a difference equal to or greater than the time interleave length. Note that the caption data encoded by the caption encoding means is a plurality of replaceable caption data, and the time interval between at least two of the caption data is determined by the first and second delay means. Try to be over the time interleave length.
[0068]
  According to the transmission apparatus configured as described above, it is possible to provide a broadcast program that broadcasts a plurality of replaceable subtitle data with a time interval equal to or greater than the time interleave length.
[0069]
DETAILED DESCRIPTION OF THE INVENTION
  Hereinafter, the present inventionReceiverWill be described in detail with reference to the illustrated embodiment.
[0070]
[First Embodiment]
  In the first embodiment of the present invention, in a broadcasting system based on Japanese terrestrial digital broadcasting (BST-OFDM: Band Segmented Transmission-Orthogonal Frequency Division Multiplexing) as an example of a digital broadcasting capable of data multiplex broadcasting., ReleaseA transmission program providing method, a transmitting apparatus for broadcasting the transmitting program, and a receiving apparatus for receiving the broadcast will be described. The above-mentioned Japanese terrestrial digital broadcasting employs a broadcasting method that performs time interleaving processing.
[0071]
  In addition, as an example of a broadcast by a partial reception segment of a plurality of OFDM segments composed of a plurality of digitally modulated carriers, a one-segment broadcast (broadcast intended to receive and view only one segment of the partial reception segments) ) Will be described.
[0072]
  Figure 1The second1 shows a block diagram of a transmission apparatus according to an embodiment. FIG. FIG. 2 is a block diagram of the receiving apparatus according to the first embodiment of the present invention.
[0073]
  First, the overall configuration will be described. FIG. 1 shows a configuration related to the present invention as an example of a transmission apparatus that transmits a digital broadcast capable of data multiplex broadcasting.
[0074]
  The transmission apparatus shown in FIG. 1 has an encoding unit 106 as an example of subtitle encoding means for encoding subtitle data, and a first delay that delays the subtitle data encoded by the encoding unit 106. As an example of the means, the delay buffer 112 and delay buffers 115 and 116 as examples of the second delay means for delaying the encoded caption data with a delay time shorter than the delay time of the delay buffer 112 by a time interleave length or more. have.
[0075]
  In addition, the transmission device receives the encoded caption data from the delay buffers 112, 115, and 116, and a system encoding multiplexing unit as an example of a data stream generating unit that generates a data stream obtained by multiplexing them 117.
[0076]
  In addition, the transmission apparatus includes a modulation unit 119 and a transmission unit 122 as an example of a broadcast unit that broadcasts a data stream.
[0077]
  FIG. 2 shows a configuration related to the present invention as an example of a receiving apparatus that receives the digital broadcast capable of data multiplex broadcasting.
[0078]
  The receiving apparatus shown in FIG. 2 includes a receiving unit 201, a demodulating unit 203, and a separation system decoding unit 205 as an example of a receiving unit that receives a broadcast including a plurality of replaceable subtitle data broadcast at time intervals. Have.
[0079]
  In addition, the reception apparatus includes a caption decoding unit 226, a video synthesis unit 223, and a display 224 as an example of a caption output unit that outputs the caption data.
[0080]
  In addition, when a reception failure occurs in some of the replaceable subtitle data, the receiving device uses the subtitle output means to replace the subtitle data different from the subtitle data in which the reception failure has occurred. A subtitle replacement unit 225 is provided as an example of subtitle replacement means for replacing output.
[0081]
  Next, a broadcast program providing method will be described with reference to FIG.
[0082]
  Broadcast program data is supplied from an audio data input unit 101, a video data input unit 102, and a caption data input unit 103, respectively.
[0083]
  In the audio encoding unit 104, the video encoding unit 105, and the video encoding unit 106, the input data from the data input units 101, 102, and 103 are encoded and primary packets 107, 108, 109 is sent to the delay buffers 110, 111, and 112, respectively.
[0084]
  For example, TV audio data and TV video data from the audio data input unit 101 and the video data input unit 102 are encoded by the encoding units 104 and 105 in MPEG-2 (Moving Picture Experts Group Phase 2) or The primary packets 107 and 108 are created by encoding for each video frame or each audio frame by an encoding method such as MPEG-4 (Moving Picture Experts Group Phase 4).
[0085]
  Here, since it is a one-segment broadcast, the MPEG-4 system is used for encoding video data, and the MPEG-2 system is used for encoding audio data.
[0086]
  Here, “video frame” means video data for one screen, and “audio frame” means audio waveform data for a predetermined time, and each frame unit constitutes one primary packet. Yes.
[0087]
  In addition, subtitle data from the subtitle data input unit 103 is a subtitle encoding unit 106 that collects subtitle data (hereinafter referred to as subtitle frames) to be displayed at one time and follows the broadcast standard format. The character code is converted and encoded together with the character font, display position designation data, etc., and the primary packet 109 is created.
[0088]
  At this time, using the time information from the system time clock (STC: System Time Clock) 113, a presentation time (PTS: Presentation Time Stamp) 114 required for synchronous reproduction in the receiving device is added to each primary packet. The In addition, in video data or the like, a decoding time (DTS: Decoding Time Stamp) indicating a time for further decoding may be added. In other words, the presentation time and the decoding time are examples of information indicating timing for presenting the video frame, the audio frame, and the caption frame to the viewer.
[0089]
  The above-described MPEG-2, MPEG-4, and subtitle data broadcast standard formats and conversion to primary packets are existing techniques of each broadcasting system, and detailed description thereof is omitted.
[0090]
  In the first embodiment, the primary packet 109 output from the caption encoding unit 106 is further duplicated to create another primary packet, which is sent to delay buffers 115 and 116 different from the delay buffer 112. Configured to do. That is, as an example of a plurality of subtitle data that can be replaced, a primary packet having the same subtitle data content is sent to a plurality of delay buffers 112, 115, and 116.
[0091]
  The system encoding and multiplexing unit 117 reads the primary packets of the delay buffers 110, 111, 112, 115, and 116, and distinguishes the difference between the primary packets, in this case, the difference between the buffers. Is converted again into a secondary packet (TSP: Transport Stream Packet) to which an identification code is added. Then, the secondary packets are multiplexed, and a transport stream (TS: Transport Stream) 118 in which the secondary packets are continuous is created and sent to the modulation unit 119.
[0092]
  In addition, although not shown, the system encoding and multiplexing unit 117 encodes other data information such as program arrangement information (SI: Service Information) and program specification information (PSI: Program Specific Information). Are similarly multiplexed.
[0093]
  In addition, a system time clock reference signal (PCR: Program Clock Reference) 120 for performing synchronous reproduction of each data at the time of reception is generated based on the time information from the system time clock 113, and similarly the system coding multiplexing is performed. Multiplexed by the unit 117.
[0094]
  At this time, each delay buffer smoothes fluctuations in the processing time of the encoding units 104, 105, and 106, and creates the transport stream 118 having a constant transmission rate from a primary packet with fluctuations in the data amount. Or buffering to prevent overflow and underflow due to inconsistencies in the amount of data. Therefore, microscopically, the delay time of the delay buffer varies to some extent depending on the processing. Thereafter, the delay time of the delay buffer is a value averaged to such an extent that microscopic fluctuations in the delay time can be ignored.
[0095]
  In the first embodiment, as an example of a method of broadcasting each of the plurality of replaceable subtitle data with a time interval longer than the time interleave length, a delay of the delay buffer 116 is used. The time is shorter than the delay time of the delay buffer 115, the delay time of the delay buffer 115 is shorter than the delay time of the delay buffer 112, and the difference between the delay times of the delay buffers is made twice the time interleave length. It is configured.
[0096]
  By making the difference between the delay times of the delay buffers twice the time interleave length, it is possible to more reliably prevent the influence of a decrease in reception strength due to one fading from affecting another replaceable voice data. be able to.
[0097]
  The modulation unit 119 modulates the transport stream 118 created by the system encoding and multiplexing unit 117 to create a baseband signal (or intermediate frequency signal) 121 and send it to the transmission unit 122.
[0098]
  In the transmission apparatus of the first embodiment, a terrestrial digital broadcast transmission method is used, and the modulation unit 119 performs redundancy processing for error correction, energy spreading processing, time interleaving processing, interleaving processing such as frequency interleaving processing, and the like. Thereafter, a baseband signal (or intermediate frequency signal) is created by performing discrete inverse Fourier transform, digital analog conversion, or the like.
[0099]
  The transmission unit 122 converts the baseband signal (or intermediate frequency signal) 121 into a high-frequency signal through a frequency converter, a filter, an amplifier, etc., and broadcasts it as a broadcast radio wave from the antenna.
[0100]
  The generation method of the secondary packet in the system encoding and multiplexing unit 117 and the configuration of the modulation unit 119 and the transmission unit 122 are existing techniques and will not be described in detail.
[0101]
  According to the transmitting apparatus of the first embodiment, since the difference between the delay times of the delay buffers 112, 115, and 116 is greater than or equal to the time interleave length, a plurality of subtitle data that can replace each subtitle data. As described above, it is possible to provide a broadcast program that is broadcast with a time interval longer than the time interleave length.
[0102]
  Also, according to the broadcast program providing method, each of a plurality of subtitle data that can be replaced is broadcast with a time interval equal to or longer than the time interleave length of the broadcast system. Spreading does not overlap in time between the plurality of replaceable subtitle data. Therefore, even when the error cannot be corrected by the error correction of the broadcasting system, it is highly likely that another replaceable subtitle data among the replaceable subtitle data can be normally received. It is possible to provide a broadcast program that can continue to display subtitles even when errors cannot be corrected.
[0103]
  In the broadcast program providing method, the broadcast station can easily adjust the number of subtitle data broadcasts that can be replaced and the time interval of each broadcast time to be broadcast a plurality of times according to the usage situation of the viewer. Has the advantage of being possible. In particular, there is a special advantage that can be changed without changing the broadcasting standard.
[0104]
  In the first embodiment, the primary packet 109 output from the encoding unit 106 is duplicated to generate another replaceable subtitle data primary packet for the delay buffer 112. Although it is configured to send the data to the delay buffers 115 and 116, the data packetized using the encoding unit different from the encoding unit 106 using the subtitle data from the subtitle data input unit 103 is used. It may be configured so that it is created and sent to the delay buffers 115 and 116.
[0105]
  When the encoding unit is different as described above, it is preferable that the presentation time to be added is the same for the subtitle data having the same content between the subtitle data that can be replaced. It can also be configured such that the broadcast is shifted by the offset amount, and the reception side takes into account only the offset amount.
[0106]
  Next, with reference to FIG. 2, a description will be given of the processing flow of the receiving apparatus that receives the broadcast program.
[0107]
  First, in the receiving unit 201, a broadcast radio wave is received by an antenna and converted into a baseband signal (or intermediate frequency signal) 202 of a broadcast program of a selected broadcast station through a tuner, an amplifier, a filter, a frequency converter, and the like.
[0108]
  The demodulator 203 demodulates the baseband signal (or intermediate frequency signal) 202 to reproduce a transport stream (TS) 204 in which secondary packets (TSP) are continuous.
[0109]
  In the first embodiment, the demodulating unit 203 performs analog-to-digital conversion, discrete Fourier transform, deinterleave processing, and error correction processing on the baseband signal (or intermediate frequency signal) 202 as a terrestrial digital broadcast receiving device. And demodulate the secondary packet.
[0110]
  In this process, error correction is performed in units of secondary packets using the redundant code created by the modulation unit 119 of the transmission apparatus shown in FIG. Therefore, the secondary packet whose error cannot be corrected is lost.
[0111]
  Next, the separation system decoding unit 205 separates and decodes the transport stream 204 into primary packets 206, 207, 208, 209, and 210 for each data type. Data buffer 212 and caption data buffers 213, 214, and 215.
[0112]
  That is, the system encoding and multiplexing unit 117 in FIG. 1 separates the multiplexed data by distinguishing the data by the identification code added to the secondary packet, and the delay buffers 110, 111, 112, The primary packets 206, 207, 208, 209, and 210 are reproduced as primary packets corresponding to the primary packets on the transmission side 115 and 116, respectively.
[0113]
  At this time, the primary packet to be reproduced from the secondary packet that has been lost without correcting the error cannot be reproduced and is lost.
[0114]
  The system time clock reference signal (PCR) 216 is similarly decoded, and the system time clock reproducing unit 217 reproduces the system time clock for synchronous reproduction.
[0115]
  The audio decoding unit 218 decodes the primary packet of the audio data buffer 211 to generate an audio signal 219 and outputs the audio signal 219 from the speaker 220.
[0116]
  Also, the video decoding unit 221 decodes the primary packet of the video data buffer 212 to form a television video signal 222 and sends it to the video synthesis unit 223.
[0117]
  In addition, the video composition unit 223 synthesizes a plurality of input video signals, that is, a television video signal, a caption video signal, a video signal indicating the state of the apparatus, and the like and displays them on the display 224.
[0118]
  FIG. 3 schematically shows the display screen 301 of the display 224. In the first embodiment, a television video is displayed on a part 302 of the display screen 301 by a video signal from the video decoding unit 221 and a subtitle is displayed on another subtitle display unit 303.
[0119]
  2 reads out the primary packets of the subtitle data buffers 213, 214, and 215, detects reception failure of the caption data, and there is no reception failure or reception failure has a predetermined frequency. The primary packet of subtitle data that can be replaced is sent to the decoding unit 226 for subtitles.
[0120]
  The subtitle decoding unit 226 decodes the primary packet according to the broadcast format, creates a subtitle video signal 227, and sends it to the video synthesis unit 223. Thereby, the subtitle is displayed on the subtitle display unit 303 of the display screen 301 (shown in FIG. 3) of the display 224.
[0121]
  At this time, the data decoding units 218, 221 and 226 control the output time based on the presentation time added to each primary packet and the time information 228 from the system time clock recovery unit 217. Thus, the output from each decoding unit is synchronized.
[0122]
  In some cases, like video data in terrestrial digital broadcasting, the decoding process is performed in accordance with the decoding time added to the primary packet, and the process is performed to output in accordance with the presentation time. .
[0123]
  The configuration of the demodulation unit 203, the separation system decoding unit 205, and the decoding units 218, 221, and 226, the demodulation process, the separation process, the system decoding process, and the procedure of the decoding process of each data are as follows. Since it is an existing technology, details are omitted.
[0124]
  Next, a method of detecting a reception failure of caption data in the caption replacement unit 225 will be described with reference to the flowchart shown in FIG. In the first embodiment, the reception failure is detected using the presentation time added to the caption data in the primary packet.
[0125]
  First, subtitle data having the earliest presentation time in the data buffer is obtained from the subtitle data buffers 213, 214, and 215 each having a plurality of subtitle data that can be replaced. In the case of this first embodiment, the primary packet of caption data is transmitted in the order of presentation time, so that the data sent to each data buffer the fastest is compared between the data buffers. It will be. At this time, for example, if there is something that does not hold the data in the data buffer, until the time before the predetermined time of the earliest presentation time (that is, the time when display is in time for the presentation time in consideration of the display processing time), It is possible to prevent the process from proceeding to the next step S12 and wait for data to arrive in the data buffer.
[0126]
  Next, a reception failure is determined for the caption data selected in step S11 (S12). In other words, it is determined that caption data having the same presentation time as the presentation time of the selected caption data does not have a reception failure, and caption data having a presentation time later than that is determined not to be normal caption data due to a reception failure. To do. Naturally, in steps S11 and S12, when all the data in the data buffer for captions has a reception failure, the caption data with less reception failure is selected from them.
[0127]
  Next, the caption data having no reception failure is sent to the caption decoding unit (S13). The caption data transmitted to the caption decoding unit 226 is decoded as described above and displayed on the screen.
[0128]
  After that, the subtitle data without the reception failure (subtitle data for which transmission has been completed) is discarded, and the non-normal subtitle data due to the reception failure is subtitle data later in time, so that it can be used later. Return to the original data buffer (S14).
[0129]
  If there is no end instruction, the process returns to step S11. If there is an end instruction, the process ends (S15).
[0130]
  As described above, it is possible to detect the reception failure by comparing the caption data of each data buffer. And it can output on a screen using subtitle data without reception failure.
[0131]
  In the above step S12, it is preferable that the presentation times coincide with each other in a plurality of subtitle data in each data buffer in the comparison, but the presentation time is provided at a predetermined fixed interval or within a predetermined time. When broadcasts are made such that the time is shifted, it is possible to compare in consideration of that.
[0132]
  As described above, the steps S11 and S12 constitute failure detecting means for comparing the identification codes added for each of the caption data between the plurality of caption data and detecting a reception failure of each caption data. The
[0133]
  Further, step S13 constitutes a selective transmission means for outputting the caption data determined by the failure detection means that there is no reception failure or the reception failure is less than a predetermined frequency to the caption output means.
[0134]
  That is, in the first embodiment, the presentation time is used as an example of the identification code.
[0135]
  Alternatively, as another example of the identification code, the decoding process is performed in accordance with the decoding time added to the primary packet and output in accordance with the presentation time like video data in terrestrial digital broadcasting. Since control may be performed, the reception failure may be detected using the decoding time as an identification code, and a replacement output in that case may be performed.
[0136]
  Alternatively, as another example of the identification code, for example, a subtitle dialog, a sentence, a line, a paragraph, or a code (for example, a serial number) added to a group of subtitles displayed at a time can be used. In any case, the identification code used in step S12 needs to include content that can identify caption data having the same content among a plurality of replaceable caption data.
[0137]
  In the first embodiment, detection of subtitle data reception failure is performed after the data buffers 213, 214, and 215. However, the present invention is not limited to this. For example, after decoding into subtitles, A reception failure can also be detected by comparing between subtitles.
[0138]
  Alternatively, immediately after the separation system decoding unit 205, each primary packet can be compared with the already accumulated primary packet to detect a reception failure and can be replaced. In this case, there is an advantage that it is not necessary to have a plurality of data buffers.
[0139]
  In addition to the television video and caption video, the video composition unit 223 displays a display 307 (shown in FIG. 3) indicating an incoming call of a mobile phone, a display 308 (shown in FIG. 3) showing an incoming email, For example, a bar graph 309 (shown in FIG. 3) of the error frequency indicating the reception status of the program may be combined and displayed as necessary.
[0140]
  Next, the operation at the time of reception failure of the reception device and the operation after recovery will be described.
[0141]
  Here, as an example, a manner mode is set for viewing a broadcast in a public place, and the output of audio is stopped and viewing is performed with subtitles.
[0142]
  First, the separation system decoding unit 205 is set to stop the separation of audio primary packets and system decoding, and to separate video and subtitle primary packets and system decoding. As a result, the voice output stops without outputting the voice primary packet 206.
[0143]
  Video and subtitle primary packets 207, 208, 209, and 210 are output to each buffer and displayed on the display 224 at the presentation time as described above. As a result, the user can view television images and subtitles.
[0144]
  If a reception failure such as a weak reception radio wave occurs temporarily and the allowable amount that data can be recovered by the error correction of the broadcasting system performed by the demodulation unit 203 is exceeded, some of the secondary packets are lost. , Primary packets of video and subtitles are missing.
[0145]
  However, the subtitle replacement unit 225 outputs the subtitle data by replacing the subtitle data with a plurality of subtitle data that can be replaced, so that the correct primary packet can be output for a while.
[0146]
  In mobile reception, reception is often temporarily lost due to fading or obstruction of radio waves by obstacles, and recovery is accompanied by movement. Therefore, the loss of the primary packet is recovered within 1 second in most cases thereafter.
[0147]
  If the interval between the broadcast times when a plurality of subtitle data that can be replaced is broadcasted, that is, the difference in delay time between the delay buffers 112, 115, and 116, is larger than the time until the reception failure is recovered, it is received before the reception failure. It is possible to output correct caption data by replacing the primary packet.
[0148]
  According to the receiving apparatus of the first embodiment, even when error correction cannot be completed using the replaceable subtitle data broadcast with a time interval as described above, replacement with another replaceable subtitle is performed. Since the subtitles are not interrupted, the user can follow the progress of the program while watching the subtitles, and can wait for the recovery of the reception failure without losing sight of the progress of the program.
[0149]
[Second Embodiment]
  Next, a different form of the broadcast program providing method and transmitting apparatus shown in the first embodiment will be described as a second embodiment.
[0150]
  In the second embodiment, the system encoding and multiplexing unit 117 of FIG. 1 is configured to increase or decrease the number of broadcasts of subtitle data that can be replaced within a range that fits in the broadcast band according to the total amount of transmission data. is doing.
[0151]
  In the second embodiment, only differences from the first embodiment will be described below.
[0152]
  Referring to FIG. 1, when the amount of transmission data is large in the encoding and multiplexing unit 117, the subtitle data read from the delay buffer 116 is discarded without being converted into secondary packets, and the amount of transmission data is small and the broadcast band is reduced. When there is room, subtitle data read from the delay buffer 116 is converted into a secondary packet.
[0153]
  If the above process is described with reference to the flowchart of FIG. 4, first, the transmission data amount is calculated (S1). The transmission amount in this case is video, audio, subtitles, and other than subtitle data such as the above-described program arrangement information (SI) and program specification information (PSI) that increase or decrease the number of broadcasts, that is, the primary of the delay buffer 116. Refers to the total amount of transmitted data other than packets.
[0154]
  Next, the amount of transmission data when subtitle data that can be replaced is added is calculated (S2), and it is determined whether or not it falls within the broadcast band (S3).
[0155]
  If the amount of data falls within the broadcast band in step S3, replaceable subtitle data is added (S4). If the amount of data does not fit in the broadcast band in step S3, replacement is possible. Discard without adding additional caption data (S5).
[0156]
  The above is performed, for example, every unit time or each time a primary packet of subtitle data that can be replaced is acquired.
[0157]
  In this way, replaceable subtitle data in which data is transmitted or not becomes replaceable subtitle data in which data is thinned irregularly as a result. Therefore, when the above broadcast is received, some of the subtitle data that can be replaced is originally missing due to the congestion of the broadcast band. However, the substitutable subtitle data that can be replaced can be handled in the same manner as the subtitle data that can be replaced due to a communication failure in the receiving apparatus described in the first embodiment. The data can be output by replacing the subtitles in the same manner as other normally received subtitle data.
[0158]
  When a plurality of subtitle data that can be replaced is broadcast, especially in the above-mentioned partial reception segment broadcast, especially one segment broadcast, it occupies most of the broadcast band, and other data broadcasts such as program arrangement information and program specification information are transmitted. There may be a problem in multiplexing. However, if a predetermined or higher broadcast band is secured, the number of subtitle data that can be replaced is reduced.
[0159]
  According to the broadcast program providing method and transmitting apparatus of the second embodiment, the number of subtitle data broadcasts that can be replaced is increased when the broadcast data is small, and the number of subtitle data broadcasts that can be replaced is decreased when the broadcast data is large. Therefore, subtitle data can be replaced and output using the broadcast band more effectively.
[0160]
  Further, even when caption data is intentionally lost in steps S3 and S5, it can be handled in the same way as an actual communication failure, and there is an advantage that it is not necessary to add a special mechanism to the receiving apparatus.
[0161]
  That is, in steps S1, S2, S3, S4, and S5, a part of the replaceable subtitle data is broadcast according to the data amount of other data other than the part of the data. Data amount adjusting means for controlling the data amount to be equal to or less than the broadcast band is configured.
[0162]
  Further, when the broadcast band and the data amount are compared in step S3, subtitle data that can be replaced up to the limit of the broadcast band may be added, and the total data amount is set to be somewhat smaller than the band. You can also. In terrestrial digital broadcasting, when the total data amount is smaller than the broadcast band, dummy data is automatically added to the secondary packet so that the final data amount is standardized.
[0163]
[Third Embodiment]
  Next, a different form of the receiving apparatus shown in the first embodiment will be described as a third embodiment.
[0164]
  In the receiving apparatus according to the third embodiment, the reception failure of each received replaceable subtitle data is not detected, and the replaceable subtitle data is sequentially decoded and displayed according to the presentation time. It is composed.
[0165]
  In the third embodiment, only differences from the first embodiment will be described below.
[0166]
  Referring to FIG. 2, the caption substitution unit sequentially outputs data at the presentation times of the buffers 213, 214, and 215 to the caption decoding unit 226. That is, subtitles are always overwritten and past subtitles are deleted.
[0167]
  According to the third embodiment, when there is no reception failure, subtitles are overwritten one after another by a plurality of subtitle data that can be replaced, but the viewer is unaware that the same content is overwritten. When a reception failure occurs in certain caption data, the caption is displayed by being replaced with another replaceable caption data in which no reception failure has occurred. That is, only by reducing the number of overwrites, the subtitles are correctly displayed until all replaceable subtitle data becomes a reception failure.
[0168]
  The third embodiment is the simplest method when the same subtitles are displayed in a superimposed manner and the user who is viewing does not notice.
[0169]
  However, when subtitles are displayed together with those displayed in the past, for example, the subtitle display unit 303 displays a plurality of past subtitles 304, 305, and 306, and each time a new subtitle is added, Alternatively, when the display is moved from 304 to 305, 306 and disappears at regular time intervals, the same subtitle is displayed twice or a plurality of times in the above configuration. . Therefore, from the presentation time, etc., those that are determined to be the same subtitle are overwritten or not displayed in the same place, and those that are determined to be different subtitles are moved sequentially from the current 304 subtitles to 305,306. It is preferable to configure to newly write to 304.
[0170]
  That is, if it demonstrates with the flowchart of FIG. 6, first, the presentation time of the last displayed subtitle will be memorize | stored (S21).
[0171]
  Next, the subtitle data that can be replaced are sequentially acquired at the presentation time (S22). Actually, it is acquired a little before the presentation time in consideration of the time required for processing until display. That is, a plurality of subtitle data that can be replaced is sequentially searched from the data buffers 213, 214, and 215, and subtitle data at a presentation time to be displayed at the present time is acquired.
[0172]
  Next, the presentation time of the caption data acquired in step S22 is compared with the presentation time of the caption displayed at the end of step S21 to determine whether or not the presentation times are the same (S23).
[0173]
  If the presentation time is the same in step S23, the caption is overwritten (S24). In this case, the subtitle data may be discarded without being overwritten without being overwritten. In addition, when the caption data has the same presentation time among a plurality of replaceable caption data, the presentation time may be delayed by the time for performing the processing (steps S22, S23, S24). There are cases where it is necessary to consider.
[0174]
  On the other hand, if the presentation time is different in step S23, the subtitles displayed in the past on the screen are moved to display the subtitles in a new line (S25). Old subtitles that protrude from the subtitle display section are deleted.
[0175]
  If there is no end instruction after steps S24 and S25, the process returns to step S21. If there is an end instruction, the process ends (S26). And when returning to step S21, the presentation time of the caption displayed in steps S24 and S25 is stored as the presentation time of the caption displayed last.
[0176]
  As described above, the subtitle data that can be replaced in the reception failure can be replaced with each other and output to the screen without providing a special mechanism for detecting the reception failure of the plurality of subtitle data that can be replaced.
[0177]
  Thus, the steps S21, S22, S23, S24, and S25 constitute overwriting output means for overwriting the replaceable subtitle data on the screen.
[0178]
  Alternatively, if the overlapping subtitle data is discarded without being overwritten in step S24, subtitle data that can replace the plurality of subtitle data that can be replaced is obtained in steps S21, S22, S23, S24, and S25. A selective sending means for selecting and displaying so as not to overlap each other is configured.
[0179]
  According to the third embodiment, when there is no reception failure, subtitles are overwritten one after another by a plurality of subtitle data that can be replaced, but the viewer is unaware that the same content is overwritten. When a reception failure occurs in certain caption data, the caption is displayed by being replaced with another replaceable caption data in which no reception failure has occurred. That is, only by reducing the number of overwrites, the subtitles are correctly displayed until all replaceable subtitle data becomes a reception failure.
[0180]
  Furthermore, when displaying subtitles, the last displayed subtitle is processed as a subtitle that can be replaced, that is, whether it is the same content and overwritten or displayed on a new line. It can also be used in a caption display method that holds multiple lines. In mobile reception, in particular, there are many opportunities to look away from the display while paying attention to the surroundings, so display multiple lines of past subtitles so that viewers do not miss subtitles. It is possible to provide a receiving device that can increase interest and improve the audience rating.
[0181]
[Fourth Embodiment]
  Next, a different form of the receiving apparatus shown in the first embodiment will be described as a fourth embodiment.
[0182]
  The receiving apparatus according to the fourth embodiment is configured to automatically display subtitles when video and audio reception failures occur, and to automatically delete subtitles when reception failures are restored.
[0183]
  In the fourth embodiment, only differences from the first embodiment will be described below.
[0184]
  Referring to FIG. 2, when the primary packet is missing in the audio decoding unit 218 and the video decoding unit 221, the error signals 229 and 230 are output to the video synthesis unit 223, respectively. The subtitle display is switched in the video composition unit 223 in accordance with the error signals 229 and 230.
[0185]
  If described with reference to the flowchart shown in FIG. 7, first, settings are made to output audio and video (S31). That is, the video composition unit 223 is set so as not to display subtitles, and normally, the subtitles are turned off and the television is normally viewed.
[0186]
  In the fourth embodiment, the video synthesizing unit 223 synthesizes the caption video when there is at least one error signal of the error signals 229 and 230, and stops the synthesis when neither error signal is present. Set to. Further, the separation system decoding unit 205 is set to always perform separation and decoding of the primary packets of audio and video sequential subtitles.
[0187]
  Next, it is determined whether or not there is a reception failure (S32). In the fourth embodiment, when one of the audio and video error signals 229 and 230 is transmitted, it is determined that there is a reception failure.
[0188]
  If there is no reception failure in step S32, the determination in step S32 is repeated. That is, the broadcast program can be normally received, and the user views the broadcast program with the video displayed on the display and the sound output from the speaker.
[0189]
  On the other hand, if there is a reception failure in step S32, settings are made to output audio, video, and subtitles (S33). That is, this is a case where a reception failure such as a temporarily weakened received radio wave occurs. In the fourth embodiment, when the demodulating unit 203 exceeds an allowable amount that data can be restored by error correction of the broadcasting system, the primary packet of video or audio is lost and the video or audio is interrupted. Then, error signals 229 and 230 indicating data loss in the audio decoding unit 218 and the video decoding unit 221 are issued, and the video synthesis unit 223 starts synthesis of the subtitle video signal 227. Then, the subtitle is displayed on the display 224.
[0190]
  At this time, as shown in the first embodiment, the subtitle data is replaced with a plurality of series of primary packets and the subtitle data is output, so the video composition unit 223 receives the subtitle data. The correct caption video signal from the decoding unit 226 is input. Therefore, the video synthesizing unit 223 can synthesize a caption video signal and output it to the display 224.
[0191]
  Next, it is determined whether there is normal reception, that is, there is no reception failure (S34). In the fourth embodiment, when the error signals 229 and 230 for both audio and subtitles are not transmitted, it is determined that the reception is normal.
[0192]
  In mobile reception, it is often impossible to receive temporarily due to fading or shielding of radio waves by obstacles, and since it recovers with movement, video and audio errors are subsequently recovered. Then, the audio decoding unit 218 and the video decoding unit 221 stop the error signals 229 and 230.
[0193]
  If the reception is not normal in step S34, that is, if there is a reception failure, the determination in step S34 is repeated. That is, the reception failure continues.
[0194]
  On the other hand, if it is determined in step S34 that there is normal reception, that is, there is no reception failure, it is determined whether a period without reception failure continues for a predetermined period (S35).
[0195]
  If it is determined in step S35 that the period without reception failure does not continue for a predetermined period, the process returns to step S34. That is, it is a state in which a predetermined time has not yet elapsed after recovery from the reception failure.
[0196]
  On the other hand, if a period of no reception failure continues in step S35 for a predetermined period, the subtitle output is stopped and audio and video are set to be output (S36). That is, the video composition unit 223 is set so as not to display the subtitle, and the subtitle is turned off to return to the state where the television is normally viewed.
[0197]
  Then, the process returns to step S32 and repeats until an end instruction is given (S37).
[0198]
  As described above, the caption can be displayed when a reception failure occurs, and the caption can be erased when the reception failure is recovered.
[0199]
  As described above, the subtitle output start means for controlling the subtitle output means is configured to start displaying the subtitles by the subtitle data when the reception failure occurs in the video data or the audio data in steps S32 and S33. The
[0200]
  Also, subtitle output stopping means for controlling the subtitle output means to stop the display started by the subtitle output start means when the reception failure of the video data or audio data is recovered by steps S34 and S36. Composed.
[0201]
  In particular, when the reception failure of the video data or audio data is recovered by steps S34, S35, and S36, the display started by the caption output start unit is stopped after a certain period of time when no reception failure occurs. As described above, subtitle output stopping means for controlling the subtitle output means is configured.
[0202]
  Further, although not described, the processing may be terminated from the above steps due to power-off of the receiving apparatus, reception setting, output setting change, and the like.
[0203]
  According to the fourth embodiment, when a reception failure occurs, captions are displayed, and the viewer can wait for recovery of the reception failure while following the progress of the program using the captions. In addition, it is possible to provide a receiving apparatus capable of watching a normal program when the reception failure is recovered and the captions disappear.
[0204]
  In this fourth embodiment, subtitles are configured to display subtitles when there is an error in either video data or audio data, but only when there is an error in audio data. It is also possible to configure. However, if there is an error in the video data and the video cannot be displayed, the viewer may not be able to obtain information from the display device, which may be boring, and the viewer keeps an eye on the screen. Therefore, even if there is only an error in the video data, displaying subtitles and attracting the user's vision to the display will immediately enter the field of view when the video resumes, and the user will be more satisfied. Can be given.
[0205]
  In addition, when a video reception failure occurs, the reception state is often poor, followed by an audio reception failure. For this reason, even if there is only a video reception failure, it is possible to display the subtitles before the audio is interrupted if the audio reception failure continues if the subtitles are displayed. As a result, the user is freed by time to get used to the correspondence between audio and subtitles, and information is less likely to be missed even when the audio is interrupted.
[0206]
  Especially in the partial reception segment mainly used for mobile reception in the terrestrial digital broadcasting standard, error correction of audio and video is performed with the same redundancy, so reception failures often occur at the same level, and the amount of information In many cases, an image with a large amount of video is stochastically unable to correct an error first, that is, a reception failure. Therefore, it is highly effective that the caption can be displayed before the sound is interrupted by controlling the display of the caption using both the audio and video error signals.
[0207]
  In addition, when the frequency of errors detected in the error correction of the secondary packet unit in the demodulator 203 is signaled (error signal 229) and the reception state deteriorates by using the signal, the reception failure actually occurs. It is more preferable to display subtitles before video and audio are interrupted. In that case, even if the video and audio are not interrupted, if the frequency of errors detected in the secondary packet unit error correction in the demodulator 203 exceeds a predetermined threshold value, a reception failure has occurred. Judge that.
[0208]
  This determination of reception failure can be used in steps S32 and S34 in the flowchart of FIG. In this case, subtitles can be displayed more reliably before reception failure, and the viewer can naturally move from video and audio to viewing with subtitles.
[0209]
  In addition, as in the fourth embodiment, it is more effective for viewers to view video and audio from subtitles by recovering from reception failure or subtitle display conditions and ending the subtitles after a certain period of time. Since it can move naturally, it is more preferable. Alternatively, it may be difficult to see the captions when the subtitles are repeatedly displayed and disappeared. For this reason, it is preferable to delete the caption after a good reception state continues for a certain period.
[0210]
  Alternatively, when the reception state becomes good, the subtitle may be erased according to a user instruction. In this case, for example, it is preferable to display the bar graph 309 or the like on the display with the reception state as the frequency of errors so that the reception state can be determined.
[0211]
[Fifth Embodiment]
  Next, in the fifth embodiment of the present invention, as in the first embodiment, data multiplex broadcasting is possible in broadcasting based on the transmission method of Japanese terrestrial digital broadcasting as an example of digital broadcasting capable of data multiplex broadcasting. An example of a transmission apparatus and a reception apparatus that transmit digital broadcasting will be described. The transmission apparatus according to the fifth embodiment is configured to broadcast each of a plurality of replaceable video data with a time interval equal to or greater than the time interleave length in addition to the plurality of replaceable subtitle data.
[0212]
  In the fifth embodiment, only differences from the first embodiment will be described below.
[0213]
  Figure 8The second5 is a part of a block diagram of a transmission apparatus according to a fifth embodiment, and shows a part that is partially different from the transmission apparatus of FIG. 1, and other parts are the same as those in FIG. FIG. 9 is a part of a block diagram of a receiving apparatus according to the fifth embodiment of the present invention. FIG. 9 shows a part different from the receiving apparatus in FIG. 2, and the other parts are the same as those in FIG. It is omitted. 8 and 9, the same components as those in FIGS. 1 and 2 are denoted by the same reference numerals.
[0214]
  First, the overall configuration will be described.
[0215]
  The transmission apparatus shown in FIG. 8 has a video data encoding unit 105 as an example of video encoding means for encoding video data, and delays the video data encoded by the encoding unit 105. A delay buffer 111 and a delay buffer 901 that delays the encoded video data with a delay time that is shorter than the delay time of the delay buffer 111 that delays the video data by a time interleave length or more.
[0216]
  The transmission apparatus receives the encoded video data from the delay buffer 111 that delays the video data and the delay buffer 901 that delays the video data, and creates a data stream that multiplexes them. A system encoding / multiplexing unit 117 is provided as an example of the creating means.
[0217]
  In addition, the receiving apparatus illustrated in FIG. 9 includes a video decoding unit 221, a video synthesis unit 223, and a display 224 as an example of a video output unit that outputs the video data.
[0218]
  In addition, when a reception failure occurs in some of the replaceable video data, the receiving device uses the replaceable video data different from the video data in which the reception failure has occurred to replace the video output means. An image replacement unit 904 is provided as an example of image replacement means for replacing the output.
[0219]
  Although omitted in FIG. 9, the receiving apparatus shown in FIG. 2 is an example of a receiving unit that receives a broadcast including a plurality of replaceable video data broadcasted at time intervals. A unit 201, a demodulator 203, and a separation system decoder 205.
[0220]
  Next, a broadcast program providing method will be described with reference to FIG.
[0221]
  Broadcast program data is supplied from an audio data input unit 101, a video data input unit 102, and a subtitle data input unit 103, respectively, and encoded by encoding units 104, 105, and 106, respectively. 107, 108 and 109 are sent to the delay buffers 110, 111 and 112, respectively, as in the first embodiment.
[0222]
  In the fifth embodiment, the primary packet 108 output from the video data encoding unit 105 is further duplicated to create another primary packet, which is sent to a delay buffer 901 different from the delay buffer 111. did. That is, as an example of a plurality of replaceable video data, a primary packet having the same video data content is sent to a plurality of delay buffers 111 and 901.
[0223]
  In the fifth embodiment, a copy of the primary packet 109 output from the caption data encoding unit 106 is transmitted to only the delay buffer 115, unlike the first embodiment. That is, as an example of a plurality of subtitle data that can be replaced, a primary packet having the same subtitle data content is sent to two locations of the plurality of delay buffers 112 and 115.
[0224]
  The system encoding and multiplexing unit 117 reads out the primary packets of the delay buffers 110, 111, 901, 112, and 115, and distinguishes the difference between the primary packets, in this case, the difference between the buffers. Is converted again into a secondary packet (TSP) to which an identification code is added. Then, the secondary packets are multiplexed, a transport stream (TS) 118 (shown in FIG. 1) in which the secondary packets are continuous is created, and is sent to the modulation unit 119 (shown in FIG. 1).
[0225]
  In the fifth embodiment, the delay time of the delay buffer 901 is an example of a method of broadcasting each of the plurality of replaceable video data with a time interval longer than the time interleave length. Is made shorter than the delay time of the delay buffer 111, and the difference between the delay times of the delay buffers is set to be twice the time interleave length.
[0226]
  Thereafter, the same processing as in the first embodiment is performed and broadcast as a broadcast radio wave.
[0227]
  Next, the processing flow of the receiving apparatus that receives a broadcast program will be described with reference to FIG.
[0228]
  Broadcast radio waves are received by an antenna, converted into a baseband signal (or intermediate frequency signal) 202 (shown in FIG. 2) of a broadcast program of a selected broadcast station, and then demodulated by a demodulator 203 (shown in FIG. 2). The reproduction of the transport stream (TS) 204 (shown in FIG. 2) in which (TSP) is continuous is the same as the processing in FIG. 2 of the first embodiment.
[0229]
  Next, the separation system decoding unit 205 separates and decodes the transport stream 204 into primary packets 206, 207, 902, 208, and 209 for each data type, respectively. Data buffers 212 and 903 and caption data buffers 213 and 214.
[0230]
  That is, the system encoding / multiplexing unit 117 in FIG. 8 separates the multiplexed data by distinguishing the data by the identification code added to the secondary packet, and the delay buffers 110, 111, 901, FIG. The primary packets 206, 207, 902, 208, and 209 are reproduced as primary packets corresponding to the primary packets on the transmitting side at 112 and 115, respectively.
[0231]
  In the fifth embodiment, the video replacement unit 904 reads the primary packets of the video data buffers 212 and 903 to detect a video data reception failure, and there is no reception failure or a reception failure occurs at a predetermined frequency. The primary packet of video data with a few replacements is sent to the video decoding unit 221.
[0232]
  In the fifth embodiment, the subtitle replacement unit 225 reads the primary packets of the subtitle data buffers 213 and 214, detects subtitle data reception failure, and has no reception failure or reception failure at a predetermined frequency. The primary packet of subtitle data that can be replaced is sent to the decoding unit 226 for subtitles.
[0233]
  Then, the video decoding unit 221 decodes the primary packet from the video replacement unit 904 into a television video signal 222 and sends it to the video composition unit 223.
[0234]
  Also, the caption decoding unit 226 decodes the primary packet from the caption replacement unit 225 to generate a caption video signal 227 and sends it to the video synthesis unit 223.
[0235]
  Thereby, the video and the subtitle are displayed on the display 224.
[0236]
  The method of sending the primary packet of replaceable video data in the video replacement unit 904 that has no reception failure or a reception failure less than a predetermined frequency to the video decoding unit 221 is the subtitle data in the first embodiment. It is possible to use the same method as the method of detecting the reception failure of the caption data by comparing the presentation times. In this case, since the video data is broadcast in the order of the decoding time, it is more preferable to use the decoding time instead of the presentation time.
[0237]
  In other words, the video data reception failure is detected by comparing the decoding times of the video data in the data buffers 212 and 903 for each video.
[0238]
  According to the transmission apparatus of the fifth embodiment, since the difference between the delay times of the delay buffers 111 and 901 is greater than or equal to the time interleave length, in addition to the replaceable subtitle data, the replaceable subtitle data It is possible to provide a broadcast program that broadcasts each of the video data with a time interval greater than or equal to the time interleave length.
[0239]
  Further, according to the broadcast program providing method, the modulation unit broadcasts a plurality of replaceable subtitle data and a plurality of replaceable video data a plurality of times with a time interval equal to or longer than the time interleave length of the broadcast system. Data diffusion by the error correction method 119 (shown in FIG. 1) does not overlap in time not only between the plurality of replaceable subtitle data but also between the plurality of replaceable video data. Therefore, even when the error cannot be corrected by the error correction of the broadcasting system, it is highly likely that another replaceable video data among the replaceable video data can be normally received. It is possible to provide a broadcast program that can continue displaying subtitles and video even if error correction cannot be completed.
[0240]
  In the broadcast program providing method, the broadcast station can easily adjust the number of broadcasts of the replaceable video data and the time interval of each broadcast time to be broadcast a plurality of times according to the usage situation of the viewer. Has the advantage of being possible. In particular, there is a special advantage that can be changed without changing the broadcasting standard.
[0241]
  According to the receiving device of the fifth embodiment, even when error correction cannot be completed, replacement output can be performed with another subtitle that can be replaced or another video that can be replaced. The user can follow the progress of the program while watching the subtitles and the video, and can wait for the recovery of the reception failure without losing sight of the progress of the program.
[0242]
  In the first embodiment and the fifth embodiment, the time interval for broadcasting a plurality of replaceable subtitle data is set to twice the time interleave length. However, the time interval may be longer than the time interleave length, and more preferably. 1 second or longer. This is because in practice, there are many cases in which reception failure while moving on a train station, a waiting place such as a bus stop, or a train continues for less than one second. However, even if a reception failure occurs due to the movement of a person or a car at a waiting place or the movement of a vehicle such as a train or a bus due to movement of a vehicle, even if a reception failure occurs in actual use, it is 1 This is because most cases recover in about a second. More preferably, the delay time interval is set to 2 seconds or more, which is twice as long, so that even if the reception situation deteriorates in the complicated terrain near the city, it can be more reliably replaced at another time. Subtitle data can be replaced.
[0243]
  In order not to make the buffer of the receiving apparatus larger than necessary, the time intervals at which each of the replaceable subtitle data is broadcast with a time interval, that is, the above delay time interval should be 1 minute or less. Is preferred. In addition, if this delay time value is large, the difference between the presentation time and the data transmission time becomes large, so that the subtitle output can be replaced after the power is turned on or after the channel is changed. Since time increases, it is more preferable to set it to 15 seconds or less.
[0244]
  This is the time required for the viewer to roughly understand the scene so that most of the commercials in the broadcast program are organized in units of 15 seconds. Therefore, on the contrary, the viewer does not necessarily care about the content of the program for about 15 seconds after turning on the power or changing the channel. On the other hand, after 15 seconds, the user is in a position to grasp the contents of the program and enjoy the program. Therefore, it is preferable that the data can be replaced as described above within 15 seconds.
[0245]
  Further, in the first embodiment, as a plurality of replaceable subtitle data that has been transmitted, original subtitle data (corresponding to data stored in the delay buffer 112) is separately replaced with subtitle data (delay buffer). 115 corresponding to the data stored in 115 and 116), and subtitle data that can be replaced a total of three times is broadcast. However, another subtitle data that can be replaced is 1 as in the fifth embodiment. The subtitle data that can be replaced twice in total can be broadcast. Alternatively, another subtitle data that can be replaced can be broadcast three or more times, and a total of four or more subtitle data that can be replaced can be broadcast.
[0246]
  In the first embodiment, the third embodiment, the fourth embodiment, and the fifth embodiment, the subtitle output is replaced and output at the time of reception failure using all of the transmitted subtitles that can be replaced. However, the present invention is not limited to this configuration. Only a part of the plurality of replaceable subtitle data broadcasted above is used, and the substituting output of the subtitle data with reception failure is performed in the receiving apparatus. It can also be done.
[0247]
  In other words, a plurality of replaceable subtitle data is broadcast as the replaceable subtitle data at the broadcasting station, and a part of the replaceable subtitle data broadcast according to the performance of the receiving apparatus is used. Thus, the replacement output at the time of reception failure is configured.
[0248]
  In particular, when performing mobile reception, the receiving apparatus is limited in terms of the capacity of the data buffer for captions and the processing speed, so a configuration using a part of caption data that can be replaced according to performance is suitable. In this case, the storage capacity of the receiving apparatus can be reduced by using subtitle data that can be replaced with subtitle data having a large delay time in the delay buffer in FIG.
[0249]
  Alternatively, the presence of a plurality of subtitle data that can be replaced can be presented to the viewer, and the subtitle data that can be used for replacement output can be selected from the viewer. Alternatively, a plurality of combinations of a plurality of subtitle data that can be automatically replaced are sequentially selected, and a frequency at which the replacement processing is performed for each combination of the plurality of subtitle data that can be replaced is calculated. It is also possible to adopt a combination of a plurality of replaceable subtitle data that is frequently replaced.
[0250]
  In the first embodiment, the third embodiment, and the fourth embodiment described above, the video decoding unit 221 is configured to output the last video with no error when video data is missing. Is preferred.
[0251]
  Alternatively, the video decoding unit can be configured to display a stored past video or a video that has been subjected to various processing using the past video. For example, the reduced videos are displayed in sequence every few seconds, part of the video is enlarged or reduced, the color is changed, or the shape is distorted.
[0252]
  As a result, the user can wait for the recovery of the reception failure while following the progress of the program with subtitles that are output by replacement using a plurality of subtitle data that can be replaced at the time of reception failure while enjoying watching the changed scene. .
[0253]
  Or, when the reception failure is prolonged, the scene of the broadcast program may change, and the progress of the program obtained by the past video and the subtitle often does not match. Therefore, it is more preferable that the video is gradually erased, that is, processed and output so as to fade out when the video reception failure continues for a certain period. In this case, by setting so that the video is gradually erased when the video reception failure continues for 4 to 10 seconds from the average timing at which the TV broadcast screen changes, there is less discomfort due to the progress of the program and the discrepancy with the video preferable.
[0254]
  In the first to fifth embodiments, the terrestrial digital broadcasting standard is used as the broadcasting method. However, the broadcasting method is not limited to the terrestrial digital broadcasting standard, and other time interleaving processing is performed. It is possible to apply to digital broadcasting capable of data multiplex broadcasting of the standard to be performed. In other words, when combined with a system that performs time interleaving processing that excels in mobile reception, such as the Japanese terrestrial digital broadcasting system, it is more effective to replace more effectively with a small number of replaceable subtitle data. Caption data can be output. This is because the time-interleave process corrects most of the reception failures due to fading, so the frequency of reception failures that could not be corrected is reduced, and replaceable subtitle data that was broadcast longer than the time interleave length. This is because it is probabilistically less likely to become a reception failure at the same time.
[0255]
  In the broadcasting system of the standard of digital broadcasting, generally, data such as video, audio, and subtitles is made redundant by adding parity and spread by interleaving processing on the frequency axis and the time axis. As a result, even when reception of radio waves is interrupted partially or temporarily, the receiving apparatus can perform error correction and output correct data.
[0256]
  The configuration of broadcasting each of a plurality of subtitle data that can be replaced in the embodiment of the present invention has the same purpose in providing correct data to the viewer. However, error correction such as addition of parity in the above broadcasting system is possible. Compared with the processing for the time interleaving processing is configured in close relation to the broadcasting system, that is, the transmission / reception device, and determined by the standard, TurnThe biggest difference is that it is configured as a method of providing a set. Therefore, there is an advantage that it is possible to coexist with a broadcast program that does not use this configuration without making a large special change in the program broadcast transmission / reception apparatus.
[0257]
  That is, in the fifth embodiment, a plurality of subtitle data that can be replaced at the time of creation of the primary packet is created, or a plurality of subtitle data that can be replaced by duplicating the primary packet is created, and one of them is created. The next packet is reconstructed into a secondary packet and multiplexed. With this configuration, it is possible to broadcast a plurality of replaceable subtitle data without changing the broadcasting standard. That is, in the broadcasting system, since a secondary packet stream of continuous secondary packets is encoded and modulated for broadcasting, the present inventionDigital broadcasting handled byThe contents of the primary packet can be edited at the stage of program organization, rather than changing the broadcast standard, as long as it is within a certain standard as a broadcasting system.
[0258]
  Therefore, replaceable subtitle data is simply duplicated data broadcast from a receiver that does not support the reception failure replacement method described above, and does not interfere with reception. This is handled in the same way as selectable Japanese subtitles and English subtitles, for example.
[0259]
  For example, the receiver corresponding to the reception failure replacement method notifies the presence of a plurality of subtitle data that can be replaced by the above-described program arrangement information (SI) or program specification information (PSI), and the receiver side You may comprise so that the replacement output by a reception failure may be started automatically.
[0260]
【The invention's effect】
[0261]
  As is clear from the aboveAccording to the receiving device of the present invention,Digital broadcasts with time interleave processingReceiving a broadcast program, and subtitle data is replaced with another replaceable subtitle data and output even when the reception condition is temporarily degraded due to the error correction method standard of the broadcast transmission method. be able to.
[0262]
[Brief description of the drawings]
[FIG. 1] FIG.Is the first1 is a block diagram of a transmission apparatus using a broadcast program providing method according to an embodiment. FIG.
[FIG. 2] FIG.Of the present inventionIt is a block diagram of the receiver of 1st Embodiment.
FIG. 3 is a diagram for explaining a display screen of the receiving apparatus.
FIG. 4Is the firstIt is a flowchart for demonstrating the structure which changes the frequency | count of broadcast of subtitle data which can be replaced of the transmitter using the broadcast program providing method of the second embodiment.
FIG. 5 is a flowchart for explaining a method of detecting a reception failure of caption data in the receiving apparatus of the first embodiment.
FIG. 6 is a flowchart for explaining subtitle data replacement of a receiving apparatus using the broadcast program providing method according to the third embodiment of the present invention.
FIG. 7 is a flowchart for explaining subtitle display of the receiving apparatus according to the fourth embodiment of the present invention;
FIG. 8Is the firstIt is a block diagram of the transmitter which used the provision method of the broadcast program of 5 embodiment.
FIG. 9 showsOf the present inventionIt is a block diagram of the receiver which used the provision method of the broadcast program of 5th Embodiment.
FIG. 10 is a diagram for explaining a conventional broadcast program providing method;
[Explanation of symbols]
  101, 102, 103 ... data input section,
  104, 105, 106 ... encoding unit,
  107, 108, 109 ... primary packets,
  113 ... System time clock,
  114 ... presentation time,
  110, 111, 112, 115, 116, 901 ... delay buffer,
  117... System encoding and multiplexing unit,
  118 ... Transport stream,
  119: modulation unit,
  120 ... System time clock reference signal,
  121 ... baseband signal (or intermediate frequency signal),
  122... Transmitter
  201 ... receiving part,
  202 ... baseband signal (or intermediate frequency signal),
  203 ... demodulator,
  204 ... Transport stream,
  205 ... Separation system decoding unit,
  206, 207, 208, 209, 210, 902 ... primary packets,
  211, 212, 213, 214, 215, 903 ... data buffer,
  216 ... System time clock reference signal,
  217 ... System time clock reproduction unit,
  218, 221, 226 ... Decoding unit,
  219 ... Audio signal
  220 ... speaker,
  222 ... TV video signal,
  223 ... Video composition unit,
  224 ... display,
  225: Subtitle replacement unit,
  227 ... Subtitle video signal,
  229 ... error signal,
  904 ... Video replacement unit.

Claims (2)

データ多重放送が可能なデジタル放送を受信する受信装置において、
時間的な間隔をあけて放送された置換可能な複数の字幕データを含む放送を受信する受信手段と、
上記受信手段により受信された上記字幕データを出力する字幕出力手段と、
上記置換可能な複数の字幕データのあるものに受信障害が生じた場合、上記受信障害が生じた字幕データとは異なる置換可能な別の字幕データによって上記字幕出力手段の出力を置換する字幕置換手段とを有すると共に、
映像データまたは音声データに受信障害を生じた場合、上記字幕データによる字幕の表示を開始するように、上記字幕出力手段を制御する字幕出力開始手段を有することを特徴とする受信装置。
In a receiving apparatus for receiving digital broadcasting capable of data multiplex broadcasting,
Receiving means for receiving a broadcast including a plurality of replaceable subtitle data broadcasted at time intervals;
Subtitle output means for outputting the subtitle data received by the receiving means;
Subtitle replacement means for replacing the output of the subtitle output means with another replaceable subtitle data different from the caption data in which the reception failure has occurred when there is a reception failure in some of the replaceable subtitle data And having
A receiving apparatus, comprising: subtitle output start means for controlling the subtitle output means so as to start displaying subtitles by the subtitle data when a reception failure occurs in video data or audio data.
請求項に記載の受信装置において、
映像データまたは音声データの上記受信障害が復旧した場合、上記字幕出力開始手段によって開始された字幕の出力を停止するように、上記字幕出力手段を制御する字幕出力停止手段を有することを特徴とする受信装置。
The receiving device according to claim 1 ,
A subtitle output stop unit that controls the subtitle output unit to stop the subtitle output started by the subtitle output start unit when the reception failure of the video data or the audio data is recovered. Receiver device.
JP2002301817A 2002-10-16 2002-10-16 Receiver Expired - Fee Related JP4074504B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002301817A JP4074504B2 (en) 2002-10-16 2002-10-16 Receiver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002301817A JP4074504B2 (en) 2002-10-16 2002-10-16 Receiver

Publications (2)

Publication Number Publication Date
JP2004140504A JP2004140504A (en) 2004-05-13
JP4074504B2 true JP4074504B2 (en) 2008-04-09

Family

ID=32450067

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002301817A Expired - Fee Related JP4074504B2 (en) 2002-10-16 2002-10-16 Receiver

Country Status (1)

Country Link
JP (1) JP4074504B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4495558B2 (en) * 2004-09-21 2010-07-07 日本放送協会 Transport stream switching method and apparatus
JP4664173B2 (en) * 2004-10-06 2011-04-06 パナソニック株式会社 Transmitting apparatus, reproducing apparatus, and methods for subtitle concealment broadcasting
JP4931037B2 (en) * 2005-11-08 2012-05-16 シャープ株式会社 Data broadcast content display device and data broadcast content display method
JP4546395B2 (en) * 2005-12-27 2010-09-15 京セラ株式会社 Broadcast reception control method and broadcast reception apparatus
JP2007184728A (en) * 2006-01-05 2007-07-19 Sharp Corp Personal digital assistant
JP2007336478A (en) * 2006-06-19 2007-12-27 Sharp Corp Output method and output apparatus
JP5075383B2 (en) * 2006-09-27 2012-11-21 株式会社東芝 Subtitle transmission apparatus and subtitle transmission method
JP5078139B2 (en) * 2007-08-28 2012-11-21 株式会社日立国際電気 Program bank system
US20090060055A1 (en) * 2007-08-29 2009-03-05 Sony Corporation Method and apparatus for encoding metadata into a digital program stream

Also Published As

Publication number Publication date
JP2004140504A (en) 2004-05-13

Similar Documents

Publication Publication Date Title
JP4894858B2 (en) Receiving machine
US7580612B2 (en) Digital broadcast sending apparatus, receiving apparatus and digital broadcast system
JP4352976B2 (en) Receiving apparatus and receiving method
US20050024543A1 (en) Robust reception of digital broadcast transmission
US8488944B2 (en) Broadcast program recording apparatus and control method for the same
JP4891595B2 (en) Mobile television receiver
CA2400112A1 (en) Receiving terminal device and control method of receiving terminal devices
JP4074504B2 (en) Receiver
US20080030623A1 (en) Robust reception of digital broadcast transmission
JP5354664B2 (en) Digital data receiver and program
US7260316B2 (en) Digital broadcast/analog broadcast receiving and recording apparatus
JP4477056B2 (en) Receiving apparatus and receiving method
US8254764B2 (en) Recording apparatus, image reproducing apparatus, and special reproduction method therefor
JP5075383B2 (en) Subtitle transmission apparatus and subtitle transmission method
JP4866135B2 (en) Image processing apparatus and image processing method
CN114189737B (en) Digital television rapid channel switching method and digital television
JP2006191344A (en) Analog/digital broadcasting reception recording/reproducing device
JP2004140505A (en) Providing method, receiver, and transmitter for broadcast program
CA2723861C (en) Digital broadcasting transmitter, digital broadcasting receiver, and methods thereof
JP2004140506A (en) Providing method, receiver, and transmitter for broadcast program
KR20030030092A (en) Method processing broadcasting error unit of personal video recoder
JP3982923B2 (en) Digital broadcast receiver
JP2005347915A (en) Digital broadcasting receiver and receiving method
JP2001309255A (en) Receiver of digital tv broadcasting
JP2009171393A (en) Broadcast receiver, broadcast receiving method and broadcast receiving program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070604

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070626

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070822

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080125

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110201

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120201

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees