JP2014150335A

JP2014150335A - 情報処理装置、情報処理方法及びプログラム

Info

Publication number: JP2014150335A
Application number: JP2013016840A
Authority: JP
Inventors: Masaya Yamazaki; 雅也山崎
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2013-01-31
Filing date: 2013-01-31
Publication date: 2014-08-21

Abstract

【課題】１つの映像を複数のストリームに分割して受信側へ送る場合でも、受信側が送信側との同期を取ることができる情報処理装置を提供すること。
【解決手段】実施形態によれば、情報処理装置は、第１処理部と、第２処理部と、加算器とを具備する。第１処理部は、時刻情報を含む第１データを受信し、第１データを第１信号に変換する。第２処理部は、第１データと時間的に関連する第２データを受信し、第２データを第２信号に変換する。加算器は、第１信号と第２信号を加算する。第２処理部は、受信した第２データが時刻情報を含まない場合、第１データの時刻情報に基づいて第１処理部の処理タイミングに対する処理タイミングを調整して動作する。
【選択図】図１

Description

本発明の実施形態はデジタル放送を受信する情報処理装置、情報処理方法及びプログラムに関する。

従来、ＭＰＥＧ２−ＴＳ方式等のデジタル放送を受信して、テレビ映像を表示するテレビジョン受信装置は、放送局との時刻同期をとる必要がある。このため、放送局はＭＰＥＧ２−ＴＳ方式のデジタルストリームにＰＣＲ(Program Clock Reference)を挿入する。ＰＣＲは放送局が規定する絶対時間を示す。受信装置は、受信したデジタルストリームからＰＣＲを抽出する。受信装置の基準時間は、システムタイムクロック(ＳＴＣ：System Time Clock)をカウントするＳＴＣカウンタの値により決定される。受信装置は、抽出したＰＣＲの値とＳＴＣカウンタの値とを比較して、受信装置の基準時間が放送局の絶対時間と一致するように、システムタイムクロックを発生する発振器を制御する。これにより、放送局の絶対時間に対する受信装置の基準時間のずれを直すことができ、テレビジョン受信装置と放送局との時刻同期が取られる。

現在普及しているデジタル放送は、水平方向が１９２０画素で垂直方向が１０８０画素の所謂２ｋ１ｋと称される方式である。この方式では、映像ストリームはチャンネルあたり1本のみであり、放送される各映像ストリームにＰＣＲが挿入されているので、上記の手法により、放送局との時刻同期を取ることができる。

２ｋ１ｋ方式よりも高解像度な映像データを伝送する、例えば水平方向が３８４０画素、垂直方向が２１６０画素の４ｋ２ｋと称される方式、水平方向が７６８０画素、垂直方向が４３２０画素の８ｋ４ｋと称される方式が近年実現されている。

このような高解像度なデジタル放送方式では、情報量の多い高解像度映像データを限られた伝送路帯域で放送配信するにあたって、その伝送をいかに行うかが重要な課題となっている。伝送路の容量に制限があり、情報量の多い高解像度映像データを伝送することが困難な場合、映像データを複数のストリームに分割して伝送することが考えられている。このような方式では、受信装置は複数のストリーム毎に送信局との同期をとることが困難である場合がある。

特開2000-069437号公報特表2007-519280号公報特開平10-257039号公報

従来の情報処理装置では、１つの映像を複数のストリームに分割して受信側へ送る場合、受信側が送信側との同期を取ることが困難である場合がある。

本発明の目的は、１つの映像を複数のストリームに分割して受信側へ送る場合でも、受信側が送信側との同期を取ることができる情報処理装置、情報処理方法及びプログラムを提供することである。

実施形態によれば、情報処理装置は、第１処理部と、第２処理部と、加算器とを具備する。第１処理部は、時刻情報を含む第１データを受信し、第１データを第１信号に変換する。第２処理部は、第１データと時間的に関連する第２データを受信し、第２データを第２信号に変換する。加算器は、第１信号と第２信号を加算する。第２処理部は、受信した第２データが時刻情報を含まない場合、第１データの時刻情報に基づいて第１処理部の処理タイミングに対する処理タイミングを調整して動作する。

第１実施形態の情報処理システムの一例を示すブロック図である。第１実施形態の放送局と放送波受信機の一例を示すブロック図である。第２実施形態の情報処理システムの一例を示すブロック図である。第３実施形態の情報処理システムの一例を示すブロック図である。第４実施形態の情報処理システムの一例を示すブロック図である。第５実施形態の情報処理システムの一例を示すブロック図である。第６実施形態の情報処理システムの一例を示すブロック図である。第７実施形態の情報処理システムの一例を示すブロック図である。第７実施形態の放送局と放送波受信機の一例を示すブロック図である。

第１実施形態
以下、第１実施形態について図面を参照して説明する。情報処理装置の実施形態は４ｋ２ｋ方式の高解像度のテレビジョン受信装置を例にとり説明する。

図１は、放送局１０と、放送局１０からの放送波及び差分情報を受信するテレビジョン受信装置３０の構成例を示している。放送局１０は、放送波送信機１２と、差分情報配信サーバ１４を含む。

放送波送信機１２は、電波を媒体として番組の主映像データを送信する。主映像データの元の映像データは、例えば４ｋ２ｋの高解像度映像データであり、この高解像度映像データをダウンスケールして得られた２ｋ１ｋ映像データが、主映像データである。高解像度映像データと主映像データの差分は、差分情報として、差分情報配信サーバ１４に送られる。差分情報配信サーバ１４は、インターネット２０を介して差分情報を配信することができる。

テレビジョン受信装置３０は、放送波受信機３２、差分情報受信部４８を有する。放送波受信機３２で受信され復調された主映像ストリームは、信号処理部２４Ａ、２６Ａに入力される。差分情報受信部４８で受信され復調された差分情報のストリームは信号処理部２６Ａに入力される。

図２は、放送波送信機１２、差分情報配信サーバ１４、放送波受信機３２の詳細な構成を示す図である。放送波送信機１２は、例えば４ｋ２ｋの高解像度映像データ６２を、これより解像度が低い主映像データ（例えば２ｋ１ｋ映像データ）に変換するダウンスケーラ６４を有する。差分情報生成部６８は、高解像度映像データと主映像データとの差である４ｋ２ｋ差分情報を生成する。

主映像データは、映像データとオーディオデータを含むものとする。映像データは、エンコーダ６６においてエンコードされパケット化され、１つの番組が複数のパケットのストリームとして構築される。

エンコード方式は、例えば、ＭＰＥＧ(Moving Picture Expert Group)方式、ＡＶＣ(Advanced Video Coding)方式などがある。オーディオデータは、例えば、ＰＣＭ(Pulse Code Modulation)方式、ＭＰＥＧ方式などでエンコードされている。その他に、各種の制御データを含む制御パケットも生成される。

各パケットのヘッダにはパケット識別情報（主映像データパケットの識別情報、オーディオデータパケットの識別情報、差分情報パケットの識別情報、パケットの配列順位を示す時間情報、制御データパケットの識別情報等）が記述される。また、差分情報の有無を示すデータが、主映像データのパケット識別情報に含まれていてもよい。

また、制御データパケットのデータエリアには、コントロールすべきパケットに関する情報が記述されている。例えば、コントロールすべきパケットの放送局名、放送チャンネル、番組名、放送時間帯情報など各種の情報と、コントロールすべきパケットの識別情報テーブルが含まれている。

放送局からは複数の番組が放送されるので、制御データパケットは、複数の番組に関する情報として、上記した放送局名、放送チャンネル、番組名、放送時間帯などコントロールすべきパケットに関する情報を搬送する。

エンコーダ６６から出力された主映像データパケットストリーム（トランスポートストリームとも称する）は、変調器７０において放送波として伝送するための信号に変調され、この変調信号は電力増幅器７２を介して増幅された後、アンテナ７４から送信される。

ＭＰＥＧ２−ＴＳの場合は、主映像データパケットストリームは、１８８バイト毎のトランスポートパケットによって多重・分離されている。トランスポートパケットは、同期バイト（８ビット）、パケット識別情報ＰＩＤ（１３バイト）、アダプテーション・フィールド制御（２バイト）、巡回カウンタ（４バイト）、アダプテーション・フィールド、ペイロード（情報）等を含む。アダプテーション・フィールドは、放送局側の絶対時間(時刻同期用のプログラム時刻基準値)を示すＰＣＲ等を含む。

差分情報生成部６８からの差分情報は、差分情報配信サーバ１４に送られる。差分情報配信サーバ１４において、差分情報に関しても主映像データと同様に、エンコーダ７６において差分情報がエンコードされパケット化される。１つの番組が複数のパケットのストリームとして構築される。各パケットのヘッダにはパケット識別情報として、差分情報パケットの識別情報、パケットの順序を示す時間情報が記述される。上記した制御データパケットは、差分情報パケットのストリームにも挿入されて送信される。しかし、差分情報パケットストリームは、主映像データパケットストリームとは異なり、ＰＣＲを含まない。これは、インターネット２０を介する配信は、放送とは異なり、パケットの伝送遅延が生じ、リアルタイム性が保証されておらず、ＰＣＲの信頼性が低いからである。また、図２における差分情報生成部６８は、好ましくは、２ｋ１ｋ映像データを、後述するエンコーダ６６〜デコーダ３４〜アップスケーラ３６を通した後のローカルデコード４ｋ２ｋ映像として模倣し、差分情報生成演算を行う。こうすることで、後述する加算器３８において差分情報を加算すべき相手として、エンコーダ６６〜デコーダ３４〜アップスケーラ３６の特性を反映した良好な品質を保つことが可能となる。

エンコーダ７６から出力された差分情報パケットストリーム（トランスポートストリームと称しても良い）は、モデム７８においてインターネット送信に適合した高周波信号に変調されて出力される。差分情報配信サーバ１４は、インターネット２０を介してユーザから要求される要求信号に応じて、或いは、自動的に差分情報を含むインターネット信号を配信する。

テレビジョン受信装置３０は、制御データパケットの制御データを復号して、放送局、放送チャンネル、番組名、放送時間帯など、コントロールすべきパケットに関する各種データを得ることができる。

図１に戻り、信号処理部２４Ａは、デコーダ３４、ＰＣＲ抽出部４０、比較器４２、ＳＴＣカウンタ４４を含み、ＳｏＣ（System On a Chip）の１チップＬＳＩからなる場合が考えられる。信号処理部２４Ａに入力された主映像データパケットストリームは、デコーダ３４とＰＣＲ抽出部４０に入力される。デコーダ３４は、主映像データパケットストリームを復号処理して、２ｋ１ｋ主映像データをアップスケーラ３６に入力する。ＰＣＲ抽出部４０は、入力主映像データパケットストリームからＰＣＲを抽出し、比較器４２にＰＣＲを供給する。比較器４２は、ＰＣＲをＳＴＣカウンタ４４のカウント値と比較する。ＳＴＣカウンタ４４は、信号処理部２４Ａ外に設けられた電圧制御発振器（ＶＣＸＯ）４６の出力パルスによりカウントアップする。ＳＴＣカウンタ４４のカウント値は受信装置の主映像系の基準時間としてデコーダ３４とアップスケーラ３６に入力され、それらの動作タイミングを制御する。なお、適宜なタイミングで、ＰＣＲ抽出部４０の出力がＳＴＣカウンタ４４に供給され、ＳＴＣカウンタ４４のカウント値がＰＣＲにリセットされる。適宜なタイミングとは、ストリームの切り変わり目（電源投入後初めてストリームを受信し始めた時や、放送局(チャンネル)を切り替えた時、番組が変わる時等、ＰＣＲ値の連続性が一旦失われた場合）である。比較器４２の出力（両入力信号の差を表す）は電圧制御発振器４６に供給され、発振周波数を制御する。これにより、受信装置３０の信号処理部２４Ａの基準時間を送信局の絶対時間と一致させることができる。

アップスケーラ３６は、２ｋ１ｋ主映像データを４ｋ２ｋ主映像データに変換する。この変換は単に画素数を増やす方法や超解像技術により高精細感を出す方法などあるが、得られた４ｋ２ｋ主映像データは、放送局側の送信機１２で主映像データから取り除かれた差分情報が欠けているので、低画質な４ｋ２ｋ主映像データである。

信号処理部２６Ａは、デコーダ５０、ＰＣＲ抽出部５２、比較器５４、ＳＴＣカウンタ５６を含み、信号処理部２４Ａと同様に、１チップＬＳＩからなる場合が考えられる。放送波受信機３２から出力された主映像データパケットストリームは、ＰＣＲ抽出部５２に入力され、差分情報受信部４８から出力された差分映像データパケットストリームは、デコーダ５０に入力される。デコーダ５０は、差分映像データパケットストリームを復号処理して４ｋ２ｋ差分映像データを出力する。ＰＣＲ抽出部５２で主映像データパケットストリームから抽出されたＰＣＲは比較器５４でＳＴＣカウンタ５６のカウント値と比較される。ＳＴＣカウンタ５６は、信号処理部２６Ａ外に設けられた電圧制御発振器５８の出力パルスによりカウントアップする。ＳＴＣカウンタ５６のカウント値は受信装置の差分情報系の基準時間としてデコーダ５０に入力される。なお、適宜なタイミングで、ＰＣＲ抽出部５２の出力がＳＴＣカウンタ５６に供給され、ＳＴＣカウンタ５６のカウント値がＰＣＲにリセットされる。適宜なタイミングとは、ストリームの切り変わり目（電源投入後初めてストリームを受信し始めた時や、放送局(チャンネル)を切り替えた時、番組が変わる時等、ＰＣＲ値の連続性が一旦失われた場合）である。比較器５４の出力（両入力信号の差を表す）は電圧制御発振器５８に供給され、発振周波数を制御する。これにより、受信装置３０の信号処理部２６Ａの基準時間を送信局の絶対時間と一致させることができる。

アップスケーラ３６から出力された低画質な４ｋ２ｋ映像データと、デコーダ５０から出力された４ｋ２ｋ差分映像データが加算器３８に供給され、両者が重畳され、高画質な４ｋ２ｋ映像データが表示装置６０に供給される。表示装置６０はテレビジョン受信装置３０とは別体として図示されているが、テレビジョン受信装置３０と一体でもよい。

上述したように、主映像系と差分情報系それぞれに発振器を設け、主映像ストリームを主映像の信号処理部と差分情報の信号処理部に分配しているので、第１実施形態は、個別ＶＣＸＯ・ストリーム分配方式とも称する。

以上説明したように、第１実施形態によれば、放送波受信機３２で受信された２ｋ１ｋ映像データ（主映像データ）と、差分情報受信部４８で受信された４ｋ２ｋ差分情報とを用いて、４ｋ２ｋ映像データ（高解像度映像データ）を作成することができる。すなわち、主映像データを高解像度・高画質化するために差分情報が用いられる。主映像の信号処理部２４Ａと差分情報の信号処理部２６Ａにはそれぞれ個別の電圧制御発振器４６、５８が接続されている。主映像の信号処理部２４Ａは、主映像ストリームから抽出したＰＣＲを、電圧制御発振器４６の出力をカウントするＳＴＣカウンタ４４の出力と比較し、比較結果に応じて電圧制御発振器４６の周波数を制御する。従って、信号処理部２４Ａの基準時間を放送局の絶対時間に合わせることができる。差分情報には、放送局の絶対時間を示すＰＣＲが含まれていないが、主映像ストリームを差分情報の信号処理部２６Ａにも入力し、それから抽出したＰＣＲに基づいて、差分情報の信号処理部２６Ａの基準時間を放送局の絶対時間に合わせることができ、その結果、信号処理部２４Ａと２６Ａとを同期させることができる。
以下、他の実施形態を説明する。他の実施形態の説明において第１実施形態と同一部分は同一参照数字を付してその詳細な説明は省略する。

第２実施形態
図３は、第２実施形態の情報処理システムの一例を示すブロック図である。第１実施形態では、放送波受信機３２から出力される主映像ストリームが信号処理部２４Ａ、２６Ａに入力され（ストリーム分配方式）、信号処理部２６Ａにおいても常時ＰＣＲを抽出しているが、第２実施形態は、主映像ストリームは信号処理部２４Ｂのみに入力し、信号処理部２４ＢのＰＣＲ抽出部４０において抽出したＰＣＲを差分情報の信号処理部２６Ｂの比較器５４に入力する構成である。ＰＣＲ抽出部４０が抽出したＰＣＲはＬＳＩ間通信により信号処理部２６Ｂへ常時伝送される。このため、第２実施形態は、個別ＶＣＸＯ・ＰＣＲ伝達方式とも称する。

すなわち、第２実施形態は、第１実施形態の差分情報の信号処理部２６ＡのＰＣＲ抽出部５２を省略して、主映像の信号処理部２４ＢのＰＣＲ抽出部４０が差分情報の信号処理部２６ＢのＰＣＲ抽出部を兼ねている。また、適宜なタイミングで、ＰＣＲ抽出部４０の出力がＳＴＣカウンタ４４および５６に供給され、ＳＴＣカウンタ４４および５６のカウント値がＰＣＲにリセットされる。(以降、各種実施形態においても、ＳＴＣカウンタの初期値セット動作としては同様に行う)。ＰＣＲ抽出部４０の出力はＬＳＩ間通信によりＳＴＣカウンタ５６に供給される。他は、第１実施形態と同じである。

第２実施形態によっても、主映像の信号処理部２４Ｂの基準時間を放送局の絶対時間に合わせることができるとともに、差分情報の信号処理部２６Ｂの基準時間も放送局の絶対時間に合わせることができ、その結果、信号処理部２４Ｂと２６Ｂとを同期させることができる。

第３実施形態
図４は、第３実施形態の情報処理システムの一例を示すブロック図である。第３実施形態は、第２実施形態の差分情報の信号処理部２６Ｂの比較器５４を主映像の信号処理部２４Ｃ内に移動するとともに、差分情報系の電圧制御発振器５８の出力をカウントするＳＴＣカウンタを主映像の信号処理部２４Ｃ内にも設けたものに相当し、主映像系と差分情報系の電圧制御発振器の制御は主映像の信号処理部２４Ｃが一括して行う。このため、第３実施形態は、個別ＶＣＸＯ・ＳＴＣ一括管理方式とも称する。

すなわち、主映像の信号処理部２４Ｃ内で、ＰＣＲ抽出部４０の出力が比較器４２、１０２に供給される。比較器４２は、主映像の信号処理部２４Ｃ内のＳＴＣカウンタ４４のカウント値とＰＣＲ値とを比較し、比較結果に応じて電圧制御発振器４６の発振周波数を制御する。ＳＴＣカウンタ４４のカウント値はデコーダ３４、アップスケーラ３６の動作タイミングを制御する。比較器１０２は、ＳＴＣカウンタ１０４のカウント値とＰＣＲ値とを比較し、比較結果に応じて差分情報系の電圧制御発振器５８の発振周波数を制御する。ＳＴＣカウンタ１０４は差分情報系の電圧制御発振器５８の出力パルスによりカウントアップする。なお、適宜なタイミングで、ＰＣＲ抽出部４０の出力がＳＴＣカウンタ４４、１０４に供給され、ＳＴＣカウンタ４４、１０４のカウント値がＰＣＲにリセットされる。適宜なタイミングとは、ストリームの切り変わり目（電源投入後初めてストリームを受信し始めた時や、放送局(チャンネル)を切り替えた時、番組が変わる時等、ＰＣＲ値の連続性が一旦失われた場合）である。

差分情報の信号処理部２６Ｃ内で、差分情報ストリームのデコーダ５０はＳＴＣカウンタ５６のカウント値で動作タイミングが制御される。ＳＴＣカウンタ５６は電圧制御発振器５８の出力パルスによりカウントアップする。なお、適宜なタイミングで、ＰＣＲ抽出部４０の出力がＬＳＩ間通信によりＳＴＣカウンタ５６に供給され、ＳＴＣカウンタ５６のカウント値がＰＣＲにリセットされる。適宜なタイミングとは、ストリームの切り変わり目（電源投入後初めてストリームを受信し始めた時や、放送局(チャンネル)を切り替えた時、番組が変わる時等、ＰＣＲ値の連続性が一旦失われた場合）である。このため、第３実施形態でも、信号処理部２４Ｃと信号処理部２６ＣとはＬＳＩ間通信可能な状態で接続されており、信号処理部２４Ｃから信号処理部２６ＣへＰＣＲがＬＳＩ間通信で適宜なタイミングで伝送されている。

第３実施形態では、差分情報系の電圧制御発振器５８が主映像の信号処理部２４Ｃ内のＳＴＣカウンタ１０４のカウント値に基づいて制御されている。ＰＣＲは上記のタイミングで大きく変わる可能性があるので、ＳＴＣカウンタ５６の初期値としてＰＣＲをセットし、ＳＴＣカウンタ５６、１０４とを同期させる。

第３実施形態によっても、第１、第２実施形態と同様に、主映像の信号処理部２４Ｃの基準時間を放送局の絶対時間に合わせることができるとともに、差分情報の信号処理部２６Ｃの基準時間も放送局の絶対時間に合わせることができ、その結果、信号処理部２４Ｃと２６Ｃとを同期させることができる。

第４実施形態
図５は、第４実施形態の情報処理システムの一例を示すブロック図である。第５実施形態は、第２実施形態の差分情報系の電圧制御発振器５８、比較器５４を省略し、主映像系の電圧制御発振器の出力を差分情報系のＳＴＣカウンタがカウントするものである。このため、第４実施形態は、単一ＶＣＸＯ・ＶＣＸＯ出力分配方式とも称する。

すなわち、主映像の信号処理部２４Ｄは第２実施形態の主映像の信号処理部２４Ｂと同じである。主映像系の電圧制御発振器４６の出力が主映像系のＳＴＣカウンタ４４に入力されるとともに、差分情報系のＳＴＣカウンタ５６にも入力される。

適宜なタイミングで、ＰＣＲ抽出部４０の出力がＳＴＣカウンタ４４、５６に供給され、ＳＴＣカウンタ４４、５６のカウント値がＰＣＲにリセットされる。適宜なタイミングとは、ストリームの切り変わり目である。このため、第４実施形態でも、信号処理部２４Ｄと信号処理部２６ＤとはＬＳＩ間通信可能な状態で接続されており、信号処理部２４Ｄから信号処理部２６ＤへＰＣＲがＬＳＩ間通信で適宜なタイミングで伝送されている。第４実施形態では、差分情報系のデコーダ５０は信号処理部２６Ｄ内のＳＴＣカウンタ５６のカウント値に基づいて制御されている。ＰＣＲは上記のタイミングで大きく変わる可能性があるので、ＳＴＣカウンタ５６の初期値としてＰＣＲをセットし、ＳＴＣカウンタ４４とＳＴＣカウンタ５６とを同期させる。

第４実施形態によっても、上記実施形態と同様に、主映像の信号処理部２４Ｄの基準時間を放送局の絶対時間に合わせることができるとともに、差分情報の信号処理部２６Ｄの基準時間も放送局の絶対時間に合わせることができ、その結果、信号処理部２４Ｄと信号処理部２６Ｄとを同期させることができる。

第５実施形態
図６は、第５実施形態の情報処理システムの一例を示すブロック図である。第５実施形態は、単一ＶＣＸＯ・ＶＣＸＯスルー出力方式とも称する。第５実施形態は、第４実施形態の変形例に相当する。第４実施形態では、電圧制御発振器４６の出力が信号処理部２４Ｄ、２６Ｄにそれぞれ供給されるが、第５実施形態では、電圧制御発振器４６の出力が信号処理部２４Ｅのみに供給され、信号処理部２４Ｄ内で分岐して、ＳＴＣカウンタ４４と信号処理部２６Ｅ内のＳＴＣカウンタ５６に供給される。このため、第５実施形態でも、信号処理部２４Ｅと２６ＥとはＬＳＩ間通信可能な状態で接続されており、信号処理部２４Ｅから信号処理部２６Ｅへ電圧制御発振器４６の出力がＬＳＩ間通信で適宜なタイミングで伝送されている。他は、第４実施形態と同じであるので、第５実施形態は第４実施形態同様の作用効果を奏する。

図５に示した第４実施形態では、電圧制御発振器４６の出力を信号処理部２４Ｅの外で分岐し、信号線を介して信号処理部２６Ｅ内のＳＴＣカウンタ５６に供給しているので、分岐配線の形状によっては電気的特性が劣化する可能性がある。第５実施形態では、電圧制御発振器４６の出力を信号処理部２４Ｅへ一旦入力し再び出力することでＳＴＣカウンタ５６に供給しているので、分岐配線形状の影響を受けることがない。

第６実施形態
図７は、第６実施形態の情報処理システムの一例を示すブロック図である。主映像系の発振器は、上述の実施形態と同様に、電圧制御発振器４６を利用するが、差分情報系の発振器は電圧制御発振器ではなく、安価な固定周波数の発振器９０を利用する。これ以外は、第５実施形態と同じ構成要素からなる。ただし、主映像の信号処理部２４ＦのＳＴＣカウンタ４４のカウント値が差分信号の信号処理部２６ＦのＳＴＣカウンタ５６にセットされる。このため、第６実施形態は、片方ＸＯ・ＳＴＣ値伝達方式とも称する。

第６実施形態でも、信号処理部２４Ｆと信号処理部２６ＦとはＬＳＩ間通信可能な状態で接続されており、信号処理部２４Ｆから信号処理部２６ＦへＳＴＣカウンタ４４のカウント値がＬＳＩ間通信で適宜なタイミングで伝送されている。ＳＴＣカウンタ５６は固定周波数の発振器９０の出力によりカウントアップする。そのため、発振器９０の発振周波数が所望の周波数からずれると、ＳＴＣカウンタ５６のカウント値が所望のカウント値からずれるが、電圧制御発振器４６の出力をカウントするＳＴＣカウンタ４４のカウント値に随時リセットしてＳＴＣカウンタ４６の値にセットすることにより、ずれを抑えることが出来る。

また、差分信号の信号処理部２６ＦのＳＴＣカウンタ５６には主映像の信号処理部２４ＦのＳＴＣカウンタ４４のカウント値がセットされるとしたが、この代わりに、ＰＣＲ抽出部４０の出力を適宜なタイミングでセットしてもよい。いずれにしても、差分信号の信号処理部２６ＦのＳＴＣカウンタ５６のカウント値をリセットする間隔が短ければ短い程、ＳＴＣカウンタ５６の精度は高い。

第６実施形態によっても、受信機の基準時刻を放送局の絶対時間に同期させることができる。

第７実施形態
図８は、第７実施形態の情報処理システムの一例を示すブロック図である。第７実施形態では、主映像の信号処理部２４Ｇと差分情報の信号処理部２６Ｇはほぼ独立して動作し、適宜なタイミング（ストリームの切り変わり目）で、ＰＣＲ抽出部４０の出力がＳＴＣカウンタ５６に供給されＳＴＣカウンタ５６のカウント値がＰＣＲにリセットされる以外は、お互いに信号を積極的にはやり取りしない。差分情報系の発振器は、第６実施形態と同様に固定周波数の発振器９０を用いる。このため、第７実施形態は、片方ＸＯ・フリーラン方式とも称する。

第６実施形態と異なる点は、ストリームデータに加算動作制御用のタイムスタンプが挿入されている点である。タイムスタンプはデコーダ３４、５０で検出され、検出されたタイムスタンプはタイムスタンプ比較器９２に供給される。比較器９２は両者が一致した場合は、加算動作許可信号を加算器３８Ａに供給する。加算動作許可信号が供給された場合は、加算器３８Ａは、アップスケーラ３６からの低画質４ｋ２ｋ映像信号にデコーダ５０からの４ｋ２ｋ差分映像信号を重畳して、高画質４ｋ２ｋ映像信号を生成する。加算動作許可信号が供給されない場合は、加算器３８Ａは、アップスケーラ３６からの低画質４ｋ２ｋ映像信号にデコーダ５０からの４ｋ２ｋ差分映像信号を重畳せず、低画質４ｋ２ｋ映像信号をそのまま出力する。

図９は、放送波送信機１２Ａの詳細な構成を示す図である。放送波送信機１２Ａは、図２に示した放送波送信機１２に対してタイムスタンプ付加部９４が追加されている。タイムスタンプ付加部９４はダウンスケーラ６４と差分情報生成部６８とに接続される。タイムスタンプ付加部９４は、ダウンスケーラ６４で得られた主映像データパケットストリームの各フレームと差分映像データパケットストリームの各フレームとに、同期用のタイムスタンプを付加する。両データパケットストリームの対応するフレームには、同じ値のタイムスタンプが付されている。

これにより、第７実施形態の加算器３８Ａは、主映像データパケットストリームのフレームと差分映像データパケットストリームのフレームとが同期する場合のみ、両ストリームを加算することができる。差分情報系の発振器９０の出力をカウントするＳＴＣカウンタ５６のカウント値はフリーランで進ませるので、主映像系の電圧制御発振器４６の出力をカウントするＳＴＣカウンタ４４と正しく同期できない可能性もあるが、第７実施形態はそのようなケースに柔軟に対応する。ＳＴＣカウンタ５６はストリームの切り変わり目といった長い時間間隔でＰＣＲに合致させても、その後の進み具合がＳＴＣカウンタ４４と一致しなくなる場合があるかもしれないが、フレーム単位で一致しなかったことを検出するタイムスタンプ比較器９２の検出結果に基づいて、差分映像を使用せず、低画質の４ｋ２ｋ映像をそのまま出力することが可能である。すなわち、差分映像は使用しないフレームがあっても良く、主映像と差分映像とのフレーム単位の等時性が確立されたときのみ、両映像が適応的に加算器３８Ａにより重畳される。

第７実施形態によっても、受信機の基準時刻を放送局の絶対時間に同期させることができる。

上述の実施形態によれば、放送で受信した２ｋ１ｋの主映像ストリームと、通信路経由で受信した４ｋ２ｋの差分情報ストリームを別チップのＬＳＩによりデコード処理する場合、それぞれのＬＳＩにおけるＳＴＣカウンタの同期を取ることができる。これにより、両者のデコード結果を加算することにより、４ｋ２ｋの高解像度の映像を実現することができる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

例えば、差分情報は、インターネットを介して送受信されると説明したが、必ずしもインターネットに限定されるものではない。放送波に空チャンネルがある場合は、主映像と差分情報をともに放送波を介して送受信してもよい。また、放送波、インターネット以外の他の通信チャンネルを使って差分情報を送受信してもよい。

上述の実施形態では、主映像ストリームと差分情報ストリームとを同時に放送、配信する例を説明したが、差分情報ストリームは事前に配信して、記憶部に記憶しておいてもよい。

上述の実施形態は、オンエアされる映像の受信に関して説明したが、ＨＤＤ等へ一旦蓄積されたストリームを再生する場合にも、本発明は同様に適用できる。すなわち、受信した放送波ストリームをＨＤＤ等の記憶媒体へ蓄積する際に、ストリーム到着時刻のタイムスタンプを付加し、ＨＤＤ等から再生する際に、タイムスタンプを検出し、蓄積時と同等のレートでストリームを取り出すようにする。これにより、あたかもオンエアされた場合と同じようにＨＤＤ等から再生することが可能である。なお、絶対時刻は変化しているので、ＤＴＳ(Decoding Time Stamp)やＰＴＳ(Presentation Time Stamp)を書き換える必要がある。

信号処理部２４、２６、アップスケーラ３６、加算器３８は、ハードウエア構成であっても良いし、プログラムによるソフトウエア処理で実現されても良い。さらには、上記の実施形態は、プログラムを格納した記録媒体を用いる装置としても実現可能である。

３２…放送波受信機、２４Ａ，２６Ａ…信号処理部、４０，５２…ＰＣＲ抽出部、４２，５４…比較器、４４，５６…ＳＴＣカウンタ、４６，５８…電圧制御発振器、３４，５０…デコーダ、３６…アップスケーラ、３８…加算器、４８…差分情報受信部。

Claims

時刻情報を含む第１データを受信し、該第１データを第１信号に変換する第１処理部と、
前記第１データと時間的に関連する第２データを受信し、該第２データを第２信号に変換する第２処理部と、
前記第１信号と前記第２信号を加算する加算器と、
を具備し、
前記第２処理部は、受信した前記第２データが時刻情報を含まない場合、前記第１データの前記時刻情報に基づいて前記第１処理部の処理タイミングに対する処理タイミングを調整して動作する情報処理装置。
前記第１データは、放送局の時刻情報を含む主映像ストリームであり、
前記第１処理部は、前記放送局の時刻情報に基づいたタイミングで前記主映像ストリームを第１表示信号に変換し、
前記第２データは、時刻情報を含まない差分映像ストリームであり、
前記第２処理部は、前記放送局の時刻情報に基づいたタイミングで前記差分映像ストリームを第２表示信号に変換する請求項１記載の情報処理装置。
前記主映像ストリームは、第１映像信号より解像度が低い第２映像信号の信号をエンコードして生成されたストリームであり、
前記差分映像ストリームは、前記第１映像信号と第２映像信号との差分をエンコードして生成されたストリームであり、
前記加算器は前記第１映像信号を生成する請求項２記載の情報処理装置。
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダとを具備し、
前記第２処理部は前記第１データも受信し、第２発振器と、前記第２発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値と前記受信した前記第１データに含まれる前記時刻情報との差に応じて前記第２発振器の周波数を制御する第２制御部と、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備する請求項２記載の情報処理装置。
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダとを具備し、
前記第２処理部は前記第１処理部から前記時刻情報を受信し、第２発振器と、前記第２発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値と前記受信した時刻情報との差に応じて前記第２発振器の周波数を制御する第２制御部と、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備する請求項２記載の情報処理装置。
前記第２処理部は第２発振器と、前記第２発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備し、
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダと、
前記第２発振器の出力をカウントする第３カウンタと、
前記第３カウンタのカウント値と前記時刻情報との差に応じて前記第２発振器の周波数を制御する第２制御部とを具備する請求項２記載の情報処理装置。
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダとを具備し、
前記第２処理部は前記第１発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備し、
前記第２処理部は前記第１処理部から前記時刻情報を受信し、該時刻情報を前記第２カウンタにセットする請求項２記載の情報処理装置。
前記第２処理部は前記第１処理部から前記第１発振器の出力を受信する請求項７記載の情報処理装置。
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダとを具備し、
前記第２処理部は固定周波数の第２発振器と、前記第２発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備し、
前記第２処理部は前記第１処理部から前記時刻情報または第１カウンタの出力を受信し、該時刻情報またはカウンタ出力を前記第２カウンタにセットする請求項２記載の情報処理装置。
前記第１処理部は第１発振器と、前記第１発振器の出力をカウントする第１カウンタと、前記第１カウンタのカウント値と前記時刻情報との差に応じて前記第１発振器の周波数を制御する第１制御部と、前記第１カウンタのカウント値に応じたタイミングで前記主映像ストリームを処理する第１デコーダとを具備し、
前記第２処理部は固定周波数の第２発振器と、前記第２発振器の出力をカウントする第２カウンタと、前記第２カウンタのカウント値に応じたタイミングで前記差分映像ストリームを処理する第２デコーダとを具備し、
前記情報処理装置は、前記主映像ストリームと前記差分映像ストリームとのタイミングの一致あるいは不一致を検出する検出手段をさらに具備し、
前記加算器は、前記検出手段が一致を検出すると前記第１デコーダの出力と前記第２デコーダの出力を加算し、前記検出手段が不一致を検出すると前記第１デコーダの出力をそのまま出力する請求項２記載の情報処理装置。
受信した時刻情報を含む第１データを第１信号に変換することと、
前記第１データと時間的に関連する、受信した第２データを第２信号に変換することと、
前記第１信号と前記第２信号を加算することと、
を具備する情報処理方法であって、
前記第２信号に変換することは、前記受信した第２データが時刻情報を含まない場合、前記第１データの前記時刻情報に基づいて処理タイミングを調整する情報処理方法。
コンピュータにより実行されるプログラムであって、前記プログラムは
受信した時刻情報を含む第１データを第１信号に変換することと、
前記第１データと時間的に関連する、受信した第２データを第２信号に変換することと、
前記第１信号と前記第２信号を加算することと、
を具備し、
前記第２信号に変換することは、前記受信した第２データが時刻情報を含まない場合、前記第１データの前記時刻情報に基づいて処理タイミングを調整するものであるプログラム。