JP6822407B2 - 受信装置、データ処理方法、及び、プログラム - Google Patents

受信装置、データ処理方法、及び、プログラム Download PDF

Info

Publication number
JP6822407B2
JP6822407B2 JP2017537731A JP2017537731A JP6822407B2 JP 6822407 B2 JP6822407 B2 JP 6822407B2 JP 2017537731 A JP2017537731 A JP 2017537731A JP 2017537731 A JP2017537731 A JP 2017537731A JP 6822407 B2 JP6822407 B2 JP 6822407B2
Authority
JP
Japan
Prior art keywords
data
time
clock signal
output
time stamp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017537731A
Other languages
English (en)
Other versions
JPWO2017038481A1 (ja
Inventor
道人 石井
道人 石井
愼治 根岸
愼治 根岸
和博 石谷
和博 石谷
岳人 渡辺
岳人 渡辺
康行 茶木
康行 茶木
義明 大石
義明 大石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2017038481A1 publication Critical patent/JPWO2017038481A1/ja
Application granted granted Critical
Publication of JP6822407B2 publication Critical patent/JP6822407B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/18Arrangements for synchronising broadcast or distribution via plural systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/38Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space
    • H04H60/40Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space for identifying broadcast time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00Arrangements for synchronising receiver with transmitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/81Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself
    • H04H60/90Wireless transmission systems
    • H04H60/91Mobile communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)
  • Circuits Of Receivers In General (AREA)

Description

本技術は、受信装置、データ処理方法、及び、プログラムに関し、特に、異なる伝送路を介して伝送されるデータを受信し、受信したデータを切り替えて出力する場合に用いて好適な受信装置、データ処理方法、及び、プログラムに関する。
MMT(MPEG Media Transport)を用いた次世代の放送システムでは、放送伝送路と通信伝送路の両方を利用してデータを伝送することが可能である。例えば、放送伝送路を介して、メインの映像に関するデータを伝送し、通信伝送路を介して、メインの映像に対応するサブの映像(例えば、別アングルの映像)に関するデータ、字幕データ、メインの映像とは異なる言語の音声データ等を伝送することが可能である(例えば、特許文献1参照)。
特開2013−9343号公報
しかしながら、通信伝送路では、トラフィックの増加や障害等により、放送伝送路よりデータの伝送が遅延することが予想される。従って、例えば、受信側の装置において、放送伝送路を介して伝送されるメインの映像と通信伝送路を介して伝送されるサブの映像との切り替えを行う場合に、映像や音声等の乱れが発生するおそれがある。例えば、メインの映像からサブの映像への切り替え時に、出力されるサブの映像の時刻がメインの映像の時刻から遡るリピートが発生するおそれがある。また、例えば、サブの映像からメインの映像への切り替え時に、出力されるメインの映像の時刻がサブの映像の時刻より進むスキップが発生するおそれがある。
本技術はこのような状況に鑑みてなされたものであり、異なる伝送路を介して伝送されるデータを受信して出力する場合に、データの出力の切り替えを円滑に行うことができるようにするものである。
本技術の一側面の受信装置は、それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータを受信する受信部と、各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成部と、前記複数のクロック信号を補正するクロック信号補正部と、前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御部と、受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する蓄積部とを備え、前記クロック信号補正部は、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、前記出力制御部は、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、前記蓄積部は、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する。
前記受信部には、第1のタイムスタンプが付与され、第1の伝送路を介して伝送される第1のデータを受信する第1の受信部、及び、前記第1のタイムスタンプに対応する第2のタイムスタンプが付与され、第2の伝送路を介して伝送される第2のデータを受信する第2の受信部を含ませ、前記クロック信号生成部には、前記第1のタイムスタンプに基づいて第1のクロック信号を生成する第1のクロック信号生成部、及び、前記第2のタイムスタンプに基づいて第2のクロック信号を生成する第2のクロック信号生成部を含ませ、前記クロック信号補正部には、前記第1のクロック信号を補正する第1のクロック信号補正部、及び、前記第2のクロック信号を補正する第2のクロック信号補正部を含ませ、前記第1のクロック信号補正部には、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記第1のクロック信号の時刻を補正後の前記第2のクロック信号の時刻に合わせさせ、前記第2のクロック信号補正部には、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記第2のクロック信号の時刻を補正後の前記第1のクロック信号の時刻に合わせさせ、前記出力制御部には、補正後の前記第1のクロック信号に基づいて前記第1のデータの出力を制御し、補正後の前記第2のクロック信号に基づいて前記第2のデータの出力を制御させ、前記蓄積部には、前記第1のデータを出力中の場合、補正後の前記第1のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第1のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積させ、前記第2のデータを出力中の場合、補正後の前記第2のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第2のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積させることができる。
前記第1の伝送路を、放送伝送路とし、前記第2の伝送路を、通信伝送路とし、前記第2のクロック信号補正部に、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定させることができる。
前記蓄積部には、前記通信伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限させることができる。
前記第1のクロック信号補正部には、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定させることができる。
前記出力制御部には、前記通信伝送路の遅延量が第2の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わせないようにすることができる。
前記第1のクロック信号補正部には、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最新の前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より前である場合、前記第1のクロック信号の時刻を最新の前記第1のタイムスタンプの時刻に基づいて設定させ、前記第2のクロック信号補正部には、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定させることができる。
前記蓄積部には、前記第1の伝送路に対する前記第2の伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限させ、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータの蓄積量を制限させることができる。
前記第1のクロック信号補正部には、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定させ、前記第2のクロック信号補正部には、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より後である場合、前記第2のクロック信号の時刻を最も古い前記第2のタイムスタンプの時刻に基づいて設定させることができる。
前記出力制御部には、前記第1の伝送路に対する前記第2の伝送路の遅延量が第3の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わず、前記第2の伝送路に対する前記第1の伝送路の遅延量が第4の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わせないようにすることができる。
前記クロック信号補正部には、出力するデータの切り替え時に、前記蓄積部に蓄積されている切り替え先のデータの最新の前記タイムスタンプが切り替え元のデータに対応する補正後の前記クロック信号の時刻より前である場合、前記切り替え先のデータに対応する前記クロック信号の時刻を前記切り替え先のデータの最新の前記タイムスタンプの時刻に基づいて設定させることができる。
前記蓄積部には、前記複数のデータのうちの第1のデータを出力中の場合、前記複数のデータのうちの第2のデータの伝送に用いる第2の伝送路に対する前記第1のデータの伝送に用いる第1の伝送路の遅延量が第1の閾値を超えている場合、前記第2のデータの蓄積量を制限させることができる。
前記クロック信号補正部には、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記タイムスタンプが、前記第1のデータに対応する補正後の第1のクロック信号の時刻より後である場合、前記第2のデータに対応する第2のクロック信号の時刻を最も古い前記タイムスタンプの時刻に基づいて設定させることができる。
前記出力制御部には、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わせないようにすることができる。
前記複数のデータを、MMT(MPEG Media Transport)を用いて伝送し、前記タイムスタンプを、PTS(Presentation Time Stamp)とすることができる。
本技術の一側面のデータ処理方法は、それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成ステップと、前記複数のクロック信号を補正するクロック信号補正ステップと、前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップとを含み、前記クロック信号補正ステップにおいて、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、前記出力制御ステップにおいて、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、前記蓄積制御ステップにおいて、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する。
本技術の一側面のプログラムは、それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成ステップと、前記複数のクロック信号を補正するクロック信号補正ステップと、前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップとを含み、前記クロック信号補正ステップにおいて、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、前記出力制御ステップにおいて、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、前記蓄積制御ステップにおいて、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する処理をコンピュータに実行させる。
本技術の一側面においては、それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータが受信され、各データの前記タイムスタンプに基づいて複数のクロック信号が生成され、前記複数のクロック信号が補正され、前記複数のデータの中から出力するデータが選択され、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択されたデータを出力するタイミングが制御され、受信された前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータが少なくとも蓄積されるとともに、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻が、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせられ、それぞれ対応する前記クロック信号に基づいて、各データの出力が制御され、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータが少なくとも蓄積されるように制御される。
本技術の一側面によれば、異なる伝送路を介して伝送されるデータを受信して出力する場合に、データの出力の切り替えを円滑に行うことができる。
なお、本明細書に記載された効果は、あくまで例示であり、本技術の効果は、本明細書に記載された効果に限定されるものではなく、付加的な効果があってもよい。
本技術を適用した受信装置の一実施の形態を示すブロック図である。 受信装置により実行される出力制御処理を説明するためのフローチャートである。 受信データと出力データのタイムスタンプの推移の第1の例を示すグラフである。 受信データと出力データのタイムスタンプの推移の第2の例を示すグラフである。 コンピュータの構成例を示すブロック図である。
以下、本技術を実施するための形態(以下、実施の形態という)について説明する。なお、説明は以下の順序で行う。
1.実施の形態
2.変形例
<1.実施の形態>
{受信装置の構成例}
図1は、本技術を適用した受信装置101の一実施の形態を示すブロック図である。
受信装置101は、MMTを用いて放送局等から伝送されるデータを受信し、受信したデータの出力を制御する装置である。データの伝送方式は、例えば、ARIB-STD-B60の規格に準拠する。
受信装置101は、受信部111、タイムスタンプ解析部112、STC(System Time Clock)生成部113、STC補正部114、蓄積部115、通信トラフィック計測部116、及び、出力制御部117を含むように構成される。受信部111は、放送データ受信部111a及び通信データ受信部111bを含むように構成される。タイムスタンプ解析部112は、放送タイムスタンプ解析部112a及び通信タイムスタンプ解析部112bを含むように構成される。STC生成部113は、放送STC生成部113a及び通信STC生成部113bを含むように構成される。STC補正部114は、放送STC補正部114a及び通信STC補正部114bを含むように構成される。蓄積部115は、放送データ蓄積部115a及び通信データ蓄積部115bを含むように構成される。
また、放送データ受信部111a、放送タイムスタンプ解析部112a、放送STC生成部113a、放送STC補正部114a、及び、放送データ蓄積部115aにより、放送データ処理部121が構成される。通信データ受信部111b、通信タイムスタンプ解析部112b、通信STC生成部113b、通信STC補正部114b、及び、通信データ蓄積部115bにより、通信データ処理部122が構成される。
放送データ受信部111aは、放送局等から放送伝送路を介して伝送されるデータ(以下、放送データと称する)を受信する。放送データ受信部111aは、受信した放送データを放送タイムスタンプ解析部112aに供給する。
通信データ受信部111bは、放送局等から通信伝送路を介して伝送されるデータ(以下、通信データと称する)を受信する。通信データ受信部111bは、受信した通信データを通信タイムスタンプ解析部112bに供給する。
ここで、放送伝送路では、放送データの遅延や不達はほぼ発生しない。一方、通信伝送路は、例えば、インターネット等のネットワーク等により構成され、トラフィックの増加や障害等により、通信データの遅延や不達が発生する場合がある。
また、放送データ及び通信データは、例えば、映像、音声、字幕等のコンテンツに関するデータ(以下、コンテンツデータと称する)、及び、コンテンツの出力等の制御に用いるデータ(以下、制御データと称する)を含む。さらに、放送データ及び通信データは、それぞれパケットに分割され、パケット単位で伝送される。なお、以下、コンテンツデータのパケットをコンテンツパケットと称し、制御データのパケットを制御パケットと称する。
また、放送データ及び通信データの各コンテンツパケットにはタイムスタンプが付与される。放送データに付与されるタイムスタンプと、通信データに付与されるタイムスタンプは、互いに対応する。すなわち、各データに付与されるタイムスタンプは、同じ体系のタイムスタンプであり、共通の時間軸に沿った時刻を示し、同じ仕様を有する。例えば、コンテンツデータの復号時刻を示すDTS(Decode Time Stamp)やコンテンツデータの提示時刻を示すPTS(Presentation Time Stamp)等が、このタイムスタンプとして用いられる。なお、以下、主にPTSをタイムスタンプとして用いる場合を例に挙げて説明する。従って、以下、特に断りがない限り、タイムスタンプの用語はPTSを指すものとする。
なお、全てのコンテンツパケットにタイムスタンプを付与するようにしてもよいし、一部のコンテンツパケットにタイムスタンプを付与するようにしてもよい。また、例えば、各コンテンツパケットに付与したタイムスタンプを、各コンテンツパケット内に含めて伝送するようにしてもよいし、コンテンツパケットとは別に、制御パケットに含めて伝送するようにしてもよい。さらに、例えば、タイムスタンプの値をそのままコンテンツパケット又は制御パケットに含めるようにしてもよいし、タイムスタンプの算出に用いるデータをコンテンツパケット又は制御パケットに含めるようにし、受信側において、タイムスタンプの値を算出するようにしてもよい。
また、制御パケットは、例えば、NTP(Network Time Protocol)に基づく時刻データを含む。
放送タイムスタンプ解析部112aは、放送データのタイムスタンプ(以下、放送タイムスタンプと称する)の解析を行う。例えば、放送タイムスタンプ解析部112aは、放送データから放送タイムスタンプを抽出したり、放送タイムスタンプの算出を行ったりする。そして、放送タイムスタンプ解析部112aは、放送タイムスタンプを放送STC生成部113aに供給する。また、放送タイムスタンプ解析部112aは、放送タイムスタンプの解析を行った後、放送データを放送データ蓄積部115aに供給し、蓄積させる。
通信タイムスタンプ解析部112bは、通信データのタイムスタンプ(以下、通信タイムスタンプと称する)の解析を行う。例えば、通信タイムスタンプ解析部112bは、通信データから通信タイムスタンプを抽出したり、通信タイムスタンプの算出を行ったりする。そして、通信タイムスタンプ解析部112bは、通信タイムスタンプを通信STC生成部113bに供給する。また、通信タイムスタンプ解析部112bは、通信タイムスタンプの解析を行った後、通信データを通信データ蓄積部115bに供給し、蓄積させる。
放送STC生成部113aは、放送タイムスタンプに基づいてSTC(以下、放送STCと称する)を生成する。放送STCは、放送データに含まれるコンテンツデータの出力の制御等に用いるクロック信号である。放送STC生成部113aは、放送STCを放送STC補正部114aに供給する。
通信STC生成部113bは、通信タイムスタンプに基づいてSTC(以下、通信STCと称する)を生成する。通信STCは、通信データに含まれるコンテンツデータの出力の制御等に用いるクロック信号である。通信STC生成部113bは、通信STCを通信STC補正部114bに供給する。
なお、各STCの生成方法には、任意の方法を採用することができる。例えば、一般的なクロックリカバリの方法を用いて、タイムスタンプを含むパケットの到着時刻とタイムスタンプの値を使用して線形値を算出することにより、STCが生成される。この場合、例えば、他のパケットと到着時刻がかけ離れたパケットに含まれるタイムスタンプは、採用しないようにしてもよい。
放送STC補正部114aは、出力制御部117から通知される出力データの切り替えのタイミングで、通信STC補正部114bから供給される補正後の通信STC(以下、補正通信STCと称する)、及び、放送データ蓄積部115aに蓄積されている放送データのタイムスタンプに基づいて、放送STCの補正を行う。放送STC補正部114aは、補正後の放送STC(以下、補正放送STCと称する)を、通信STC補正部114b、放送データ蓄積部115a、通信データ蓄積部115b、及び、出力制御部117に供給する。
通信STC補正部114bは、出力制御部117から通知される出力データの切り替えのタイミングで、放送STC補正部114aから供給される補正放送STC、及び、通信データ蓄積部115bに蓄積されている通信データのタイムスタンプに基づいて、通信STCの補正を行う。通信STC補正部114bは、補正後の補正通信STCを、放送STC補正部114a、放送データ蓄積部115a、通信データ蓄積部115b、及び、出力制御部117に供給する。
放送データ蓄積部115aは、放送データを一時的に蓄積し、蓄積している放送データを出力制御部117に供給する。また、後述するように、放送データ蓄積部115aは、補正放送STC、補正通信STC、及び、通信トラフィック計測部116から供給される通信伝送路のトラフィックの計測結果に基づいて、放送データの蓄積量(バッファ量)を調整する。
通信データ蓄積部115bは、通信データを一時的に蓄積し、蓄積している通信データを出力制御部117に供給する。また、後述するように、通信データ蓄積部115bは、補正放送STC、及び、補正通信STCに基づいて、通信データの蓄積量(バッファ量)を調整する。
通信トラフィック計測部116は、通信データが伝送される通信伝送路のトラフィックを計測する。通信トラフィック計測部116は、通信伝送路のトラフィックの計測結果を、放送データ蓄積部115a及び出力制御部117に供給する。
なお、通信伝送路のトラフィックの計測方法には、任意の方法を採用することが可能である。例えば、通信トラフィック計測部116は、IPネットワークのpingコマンドや、他の通信ネットワークのloopbackコマンド等を用いて、通信伝送路のトラフィックを計測する。また、例えば、通信トラフィック計測部116は、異常値を除去する等の平滑化処理を行うようにしてもよい。
出力制御部117は、後述するように、外部から与えられる指令、補正放送STC、補正通信STC、及び、通信伝送路のトラフィックの計測結果に基づいて、放送データに含まれるコンテンツデータ及び通信データに含まれるコンテンツデータの出力を制御する。例えば、出力制御部117は、放送データのコンテンツデータ及び通信データのコンテンツデータの中から一方を選択し、出力する。そして、出力制御部117の後段において、コンテンツデータを提示する処理(例えば、映像・画像の表示、音声の出力等)が行われる。
次に、図2のフローチャートを参照して、受信装置101により実行される出力制御処理について説明する。
ステップS1において、出力制御部117は、放送データを出力中であるか否かを判定する。放送データを出力中であると判定された場合、処理はステップS2に進む。
ステップS2において、出力制御部117は、放送データから通信データへの出力の切り替えが指令されたか否かを判定する。例えば、出力制御部117は、図示せぬ入力部を介して、ユーザにより放送データから通信データへの出力の切り替えの指令が入力された場合、放送データから通信データへの出力の切り替えが指令されたと判定し、処理はステップS3に進む。
ステップS3において、出力制御部117は、通信トラフィック計測部116の計測結果に基づいて、通信伝送路の遅延量が閾値を超えているか否かを判定する。通信伝送路の遅延量が閾値を超えていると判定された場合、処理はステップS4に進む。
ステップS4において、通信STC補正部114bは、通信STCの時刻を調整する。具体的には、出力制御部117は、放送データから通信データに出力を切り替えることを通信STC補正部114bに通知する。
通信STC補正部114bは、通信データ蓄積部115bに蓄積されている通信データの最新のタイムスタンプが補正放送STCの現在時刻以降(補正放送STCの現在時刻を含む)である場合、補正放送STCの現在時刻に通信STCの時刻を合わせる。これは、例えば、現在出力中の放送データのコンテンツデータに続く通信データのコンテンツデータが、すでに通信データ蓄積部115bに蓄積されている場合である。
一方、通信STC補正部114bは、通信データ蓄積部115bに蓄積されている通信データの最新のタイムスタンプが補正放送STCの現在時刻より前である場合、当該最新のタイムスタンプの時刻に基づいて、通信STCの時刻を設定する。例えば、通信STC補正部114bは、当該最新のタイムスタンプの時刻に通信STCの時刻を合わせる。また、例えば、通信STC補正部114bは、当該最新のタイムスタンプの時刻より少し前の時刻に通信STCの時刻を合わせるようにしてもよい。これは、例えば、通信伝送路に遅延や障害が発生し、現在出力中の放送データのコンテンツデータに続く通信データのコンテンツデータが、まだ通信データ蓄積部115bに蓄積されていない場合である。
ここで、通信STC生成部113bから供給される通信STCの時刻と、調整後の補正通信STCの時刻の時間差がT1である場合、これ以降、通信STC補正部114bは、通信STC生成部113bから供給される通信STCの時刻から時間差T1を引いた時刻に通信STCの時刻を補正する。従って、これ以降、通信STCと補正通信STCとは、時間差(位相差)がT1となり、クロック間隔(周波数)が同じになる。
ステップS5において、出力制御部117は、調整後の通信STCに基づいて、通信データを出力する。具体的には、出力制御部117は、調整後の補正通信STCの現在時刻とタイムスタンプが一致する通信データのコンテンツデータを通信データ蓄積部115bから読み出し、読み出したコンテンツデータを出力する。
これにより、補正放送STCの現在時刻以降のタイムスタンプが付与された通信データをすでに受信済みである場合、放送データから通信データへの出力の切り替えが円滑に行われる。すなわち、放送データから通信データへの出力の切り替え時に、出力中の放送データのコンテンツデータと時間的に連続する通信データのコンテンツデータが出力されるため、コンテンツデータの連続性が確保され、映像や音声等の乱れが発生しない。
一方、補正放送STCの現在時刻以降のタイムスタンプが付与された通信データをまだ受信できていない場合、通信データ蓄積部115bに蓄積されている通信データのコンテンツデータのうちタイムスタンプが最新のデータが出力される。この最新のタイムスタンプの時刻は補正放送STCの現在時刻より前なので、放送データから通信データへの出力の切り替え時に、出力されるコンテンツデータの時刻が遡るリピートが発生する。
なお、このとき、出力制御部117は、コンテンツデータを復号して出力するようにしてもよいし、復号せずに出力するようにしてもよい。また、出力制御部117は、コンテンツデータを復号する場合、事前に復号しておくようにしてもよいし、出力時に復号するようにしてもよい。
その後、処理はステップS11に進む。
一方、ステップS2において、放送データから通信データへの切り替えが指令されていないと判定された場合、又は、ステップS3において、通信伝送路の遅延量が閾値を超えていると判定された場合、処理はステップS6に進む。
ステップS6において、出力制御部117は、補正後の放送STCに基づいて、放送データを出力する。具体的には、出力制御部117は、タイムスタンプが補正放送STCの現在時刻と一致する放送データのコンテンツデータを放送データ蓄積部115aから読み出し、読み出したコンテンツデータを出力する。
従って、ステップS3において、通信伝送路の遅延量が閾値を超えていると判定された場合、放送データから通信データへの出力の切り替えが行われずに、放送データのコンテンツのデータの出力が継続する。
なお、この場合、例えば、出力制御部117は、出力の切り替えができない旨を後段に通知する。そして、後段において、適切な処理が行われる。
また、このとき、出力制御部117は、コンテンツデータを復号して出力するようにしてもよいし、復号せずに出力するようにしてもよい。また、出力制御部117は、コンテンツデータを復号する場合、事前に復号しておくようにしてもよいし、出力時に復号するようにしてもよい。
その後、処理はステップS11に進む。
一方、ステップS1において、通信データを出力中であると判定された場合、処理はステップS7に進む。
ステップS7において、出力制御部117は、通信データから放送データへの出力の切り替えが指令されたか否かを判定する。例えば、出力制御部117は、図示せぬ入力部を介して、ユーザにより通信データから放送データへの出力の切り替えの指令が入力された場合、通信データから放送データへの出力の切り替えが指令されたと判定し、処理はステップS8に進む。
ステップS8において、放送STC補正部114aは、放送STCの時刻を調整する。具体的には、出力制御部117は、通信データから放送データに出力を切り替えることを放送STC補正部114aに通知する。
放送STC補正部114aは、放送データ蓄積部115aに蓄積されている放送データの最も古いタイムスタンプが補正通信STCの現在時刻以前(補正通信STCの現在時刻を含む)である場合、補正通信STCの現在時刻に補正放送STCの時刻を合わせる。これは、例えば、放送データ蓄積部115aの容量が足りており、現在出力中の通信データのコンテンツデータに続く放送データのコンテンツデータが蓄積されている場合である。
一方、放送STC補正部114aは、放送データ蓄積部115aに蓄積されている放送データの最も古いタイムスタンプの時刻が補正通信STCの現在時刻より後である場合、当該最も古いタイムスタンプの時刻に基づいて、補正放送STCの時刻を設定する。例えば、放送STC補正部114aは、当該最も古いタイムスタンプの時刻に補正放送STCの時刻を合わせる。或いは、放送STC補正部114aは、当該最も古いタイムスタンプの時刻より少し後の時刻に補正放送STCの時刻を合わせる。これは、例えば、通信伝送路の大幅な遅延や障害が発生し、放送データ蓄積部115aの容量が不足し、現在出力中の通信データのコンテンツデータに続く放送データのコンテンツデータが放送データ蓄積部115aからすでに削除されている場合である。
ここで、放送STC生成部113aから供給される放送STCの時刻と、調整後の補正放送STCの時刻の時間差がT2である場合、これ以降、放送STC補正部114aは、放送STC生成部113aから供給される放送STCの時刻から時間差T2を引いた時刻に放送STCの時刻を補正する。従って、これ以降、放送STCと補正放送STCとは、時間差(位相差)がT2となり、クロック間隔(周波数)が同じになる。
ステップS9において、出力制御部117は、調整後の放送STCに基づいて、放送データを出力する。具体的には、出力制御部117は、調整後の補正放送STCの現在時刻とタイムスタンプが一致する放送データのコンテンツデータを放送データ蓄積部115aから読み出し、読み出したコンテンツデータを出力する。
これにより、放送データ蓄積部115aの容量が足りており、現在出力中の通信データのコンテンツデータに続く放送データのコンテンツデータが蓄積されている場合、通信データから放送データへの出力の切り替えが円滑に行われる。すなわち、通信データから放送データへの出力の切り替え時に、出力中の通信データのコンテンツデータと時間的に連続する放送データのコンテンツデータが出力されるため、コンテンツデータの連続性が確保され、映像や音声等の乱れが発生しない。
一方、通信伝送路の大幅な遅延や障害が発生し、放送データ蓄積部115aの容量が不足し、現在出力中の通信データのコンテンツデータに続く放送データのコンテンツデータが蓄積されていない場合、放送データ蓄積部115aに蓄積されている放送データのコンテンツデータのうちタイムスタンプが最も古いデータが出力される。この最も古いタイムスタンプの時刻は補正通信STCの現在時刻より後なので、通信データから放送データへの出力の切り替え時に、出力されるコンテンツデータの時刻が進むスキップが発生する。
なお、このとき、出力制御部117は、コンテンツデータを復号して出力するようにしてもよいし、復号せずに出力するようにしてもよい。また、出力制御部117は、コンテンツデータを復号する場合、事前に復号しておくようにしてもよいし、出力時に復号するようにしてもよい。
その後、処理はステップS11に進む。
一方、ステップS7において、通信データから放送データへの出力の切り替えが指令されていないと判定された場合、処理はステップS10に進む。
ステップS10において、出力制御部117は、補正後の通信STCに基づいて、通信データを出力する。具体的には、出力制御部117は、補正通信STCの現在時刻とタイムスタンプが一致する通信データのコンテンツデータを通信データ蓄積部115bから読み出し、読み出したコンテンツデータを出力する。
なお、このとき、出力制御部117は、コンテンツデータを復号して出力するようにしてもよいし、復号せずに出力するようにしてもよい。また、出力制御部117は、コンテンツデータを復号する場合、事前に復号しておくようにしてもよいし、出力時に復号するようにしてもよい。
その後、処理はステップS11に進む。
ステップS11において、放送データ蓄積部115aは、通信トラフィック計測部116の計測結果に基づいて、通信伝送路の遅延量が閾値を超えているか否かを判定する。通信伝送路の遅延量が閾値を超えていないと判定された場合、処理はステップS12に進む。
なお、ステップS3の閾値とステップS11の閾値を、同じ値に設定してもよいし、異なる値に設定してもよい。
ステップS12において、放送データ蓄積部115aは、出力側のSTCの現在時刻以前の放送データを削除する。
具体的には、放送データを出力中の場合、放送データ蓄積部115aは、タイムスタンプが補正放送STCの現在時刻以前(補正放送STCの現在時刻を含む)の放送データのコンテンツデータ、及び、対応する制御データを削除する。これにより、放送伝送路を介して受信した放送データのうち、タイムスタンプが補正放送STCの現在時刻より後の放送データが、放送データ蓄積部115aに蓄積された状態となる。従って、ステップS6又はステップS9において出力された放送データのタイムスタンプより後のタイムスタンプが付与された放送データが、放送データ蓄積部115aに蓄積された状態となる。
なお、このとき、例えば、放送データ蓄積部115aは、補正放送STCの現在時刻より所定の時間前以降のタイムスタンプが付与された放送データを少し残すようにしてもよい。
一方、通信データを出力中の場合、放送データ蓄積部115aは、タイムスタンプが補正通信STCの現在時刻以前(補正通信STCの現在時刻を含む)の放送データのコンテンツデータ、及び、対応する制御データを削除する。これにより、放送伝送路を介して受信した放送データのうち、タイムスタンプが補正通信STCの現在時刻より後の放送データが、放送データ蓄積部115aに蓄積された状態となる。従って、ステップS5又はステップS10において出力された通信データのタイムスタンプより後のタイムスタンプが付与された放送データが、放送データ蓄積部115aに蓄積された状態となる。
なお、このとき、例えば、放送データ蓄積部115aは、通信放送STCの現在時刻より所定の時間前以降のタイムスタンプが付与された放送データを少し残すようにしてもよい。
その後、処理はステップS14に進む。
一方、ステップS11において、通信伝送路の遅延量が閾値を超えていると判定された場合、処理はステップS13に進む。
ステップS13において、放送データ蓄積部115aは、放送データの蓄積量を制限する。例えば、放送データ蓄積部115aは、最新のタイムスタンプから所定の時間以内のタイムスタンプが付与されている放送データのコンテンツデータ、及び、対応する制御データを残し、それより古いコンテンツデータ、及び、対応する制御データを削除する。これにより、放送伝送路を介して受信した放送データのうち、最新のタイムスタンプから所定の時間以内のタイムスタンプが付与されている放送データが、放送データ蓄積部115aに蓄積された状態となる。
この処理により、放送データ蓄積部115aの放送データの蓄積量(バッファ量)が所定の最大値に制限される。そして、通信伝送路の遅延量が閾値を超え、受信済みの放送データと通信データのタイムスタンプの差が広がっても、この最大値を超える放送データは放送データ蓄積部115aに蓄積されない。すなわち、放送データ蓄積部115aのバッファ量が最大値に固定される。
その後、処理はステップS14に進む。
ステップS14において、通信データ蓄積部115bは、出力側のSTCの現在時刻以前の通信データを削除する。
具体的には、放送データを出力中の場合、通信データ蓄積部115bは、タイムスタンプが補正放送STCの現在時刻以前(補正放送STCの現在時刻を含む)の通信データのコンテンツデータ、及び、対応する制御データを削除する。これにより、通信伝送路を介して受信した通信データのうち、タイムスタンプが補正放送STCの現在時刻より後の通信データが、通信データ蓄積部115bに蓄積された状態となる。従って、ステップS6又はステップS9において出力された放送データのタイムスタンプより後のタイムスタンプが付与された通信データが、通信データ蓄積部115bに蓄積された状態となる。
なお、このとき、例えば、通信データ蓄積部115bは、補正放送STCの現在時刻より所定の時間前以降のタイムスタンプが付与された通信データを少し残すようにしてもよい。
一方、通信データを出力中の場合、通信データ蓄積部115bは、タイムスタンプが補正通信STCの現在時刻以前(補正通信STCの現在時刻を含む)の通信データのコンテンツデータ、及び、対応する制御データを削除する。これにより、通信伝送路を介して受信した通信データのうち、タイムスタンプが補正通信STCの現在時刻より後の通信データが、通信データ蓄積部115bに蓄積された状態となる。従って、ステップS5又はステップS10において出力された通信データのタイムスタンプより後のタイムスタンプが付与された通信データが、通信データ蓄積部115bに蓄積された状態となる。
なお、このとき、例えば、通信データ蓄積部115bは、通信放送STCの現在時刻より所定の時間前以降のタイムスタンプが付与された通信データを少し残すようにしてもよい。
その後、処理はステップS1に戻り、ステップS1以降の処理が実行される。
以上のようにして、放送データと通信データ間の出力の切り替えを円滑に行うことができる。この点について、図3及び図4を参照して、少し詳しく説明する。
なお、以下の説明では、説明を分かりやすくするために、放送データのコンテンツデータを出力する場合のコンテンツデータの記載を省略し、単に放送データを出力すると表現する場合がある。同様に、通信データのコンテンツデータを出力する場合のコンテンツデータの記載を省略し、単に通信データを出力すると表現する場合がある。
上述したように、放送伝送路では放送データの遅延や不達がほぼ発生しないのに対し、通信伝送路では通信データの遅延や不達が発生する。従って、通信データのタイムスタンプに基づいて生成される通信STCが、放送データのタイムスタンプに基づいて生成される放送STCより遅れる場合がある。しかし、受信装置101では、出力の切り替え時に放送STCの時刻と通信STCの時刻合わせが行われるため、基本的に放送STCの時刻が、遅延する可能性のある通信STCの時刻に合わせられる。
そして、補正放送STCに従って放送データが出力され、補正通信STCに従って通信データが出力されるため、基本的に放送データよりタイムスタンプが遅れる可能性のある通信データのタイムスタンプに基づいて、放送データ及び通信データを出力するタイミングが制御される。これにより、例えば、通信データの伝送の遅延に追従して放送データが出力されるようになる。すなわち、通信データの伝送が遅延した場合には、受信済みの通信データの最新のタイムスタンプ付近のタイムスタンプが付与された放送データが出力される。そして、出力された放送データよりタイムスタンプが新しい放送データは、放送データ蓄積部115aに蓄積される。
例えば、図3は、受信した放送データと通信データを独立してそのまま出力するようにした場合の受信データと出力データのタイムスタンプの推移の例を示すグラフである。グラフの横軸は現実の時刻を示し、縦軸はタイムスタンプを示している。直線L1は、受信した放送データのタイムスタンプの推移を示し、直線L2は、受信した通信データのタイムスタンプの推移を示している。この例では、通信データの伝送遅延が発生しており、同じ時刻に受信する放送データと通信データのタイムスタンプに時間差が生じている。また、直線L1上の太い実線は、出力される放送データのタイムスタンプの推移を示し、直線L2上の太い点線は、出力される通信データのタイムスタンプの推移を示している。
例えば、タイムスタンプが時刻TS2の放送データが出力される予定の時刻t1において、放送データから通信データに出力を切り替える場合、まだタイムスタンプが時刻TS2より前の時刻TS1までの通信データしか受信されていない。従って、出力を切り替えたときに、タイムスタンプが時刻TS1の通信データが出力される。すなわち、時刻t1において、出力されるデータのタイムスタンプが時刻TS2から時刻TS1に戻るリピートが発生する。
次に、タイムスタンプが時刻TS3の通信データが出力される予定の時刻t2において、通信データから放送データに出力を切り替える場合、すでにタイムスタンプが時刻TS3より後の時刻TS4までの放送データが受信されている。従って、出力を切り替えたときに、タイムスタンプが時刻TS4の放送データが出力される。すなわち、時刻t2において、出力されるデータのタイムスタンプが時刻TS3から時刻TS4に進むスキップが発生する。
一方、図4は、受信装置101の受信データと出力データのタイムスタンプの推移の例を示すグラフである。図3と同様に、グラフの横軸は現実の時刻を示し、縦軸はタイムスタンプを示している。直線L1及びL2は、図3の直線L1及びL2と同じものである。また、直線L2上の太い実線は、出力される放送データのタイムスタンプの推移を示し、直線L2上の太い点線は、出力される通信データのタイムスタンプの推移を示している。
この例に示されるように、出力される放送データのタイムスタンプは、受信済みの通信データの最新のタイムスタンプとほぼ一致する。そして、例えば、タイムスタンプが時刻TS11の放送データが出力される予定の時刻t11において、放送データから通信データに出力を切り替える場合、タイムスタンプが時刻TS11の通信データがすでに受信されている。従って、出力を切り替えたときに、タイムスタンプが時刻TS11の通信データが出力される。また、時刻t11において、少なくともタイムスタンプが時刻TS11から最新の時刻TS12までの時間ΔTS1の放送データが、放送データ蓄積部115aに蓄積される。
次に、タイムスタンプが時刻TS13の通信データが出力される予定の時刻t12において、通信データから放送データに出力を切り替える場合、少なくともタイムスタンプが時刻TS13から最新の時刻TS14までの時間ΔTS2の放送データが放送データ蓄積部115aに蓄積されている。従って、出力を切り替えたときに、タイムスタンプが時刻TS13の放送データが出力される。
このように、通信伝送路に遅延が生じても、出力の切り替えを円滑に行うことができる。
また、図3及び図4では、受信する放送データと通信データのタイムスタンプの時間差が一定である例を示したが、タイムスタンプの時間差が広がるように推移したり、狭まるように推移したりする場合も想定される。この場合、放送STCと通信STCの時刻の推移(クロック間隔)に差が生じ、補正放送STCと補正通信STCの時刻にズレが発生する。
しかし、放送データを出力中の場合、ステップS14の処理により、少なくとも補正放送STCの現在時刻以降の通信データが通信データ蓄積部115bに蓄積される。従って、放送データから通信データに出力を切り替えた場合に、出力中の放送データと時間的に連続する通信データが通信データ蓄積部115bに存在する。従って、補正放送STCと補正通信STCの時刻にズレが生じても、出力の切り替え時に、出力中の放送データと時間的に連続する通信データを確実に出力することができる。
同様に、通信データを出力中の場合、ステップS12の処理により、少なくとも補正通信STCの現在時刻以降の放送データが放送データ蓄積部115aに蓄積される。従って、通信データから放送データに出力を切り替えた場合に、出力中の通信データと時間的に連続する放送データが放送データ蓄積部115aに存在する。従って、補正放送STCと補正通信STCの時刻にズレが生じても、出力の切り替え時に、出力中の通信データと時間的に連続する放送データを確実に出力することができる。
このように、放送STCと通信STCの時刻にズレが生じても、出力の切り替えを円滑に行うことができる。
<2.変形例>
以下、上述した本技術の実施の形態の変形例について説明する。
{変形例1:他の2種類の伝送路の組み合わせを用いる場合の変形例}
本技術は、放送伝送路と通信伝送路の組み合わせ以外の2種類の伝送路を介してデータを伝送する場合にも適用することが可能である。
ただし、図2の出力制御処理は、通信伝送路において遅延が発生し、放送伝送路ではほぼ遅延が発生しない前提で行われる。従って、2種類の伝送路の両方に遅延が発生する場合には、若干の処理の変更が必要である。
具体的には、例えば、データの切り替え方向に関わらず、図2のステップS2乃至S6と同様の処理を行うようにすればよい。
ただし、ステップS3の判定処理において、例えば、切り替え元のデータの伝送路に対する切り替え先のデータの伝送路の遅延量が判定される。ここで、切り替え元のデータとは、現在出力中のデータのことであり、切り替え先のデータとは、切り替え後に出力されるデータのことである。
また、出力の切り替え時に、ステップS4の処理と同様に、切り替え先のデータに対応するSTC(以下、切り替え先STCと称する)が、切り替え元のデータに対応する補正後のSTC(以下、切り替え元STCと称する)の時刻に合わせられる。ただし、ステップS4の処理と同様に、蓄積されている切り替え先のデータの最新のタイムスタンプが、補正後の切り替え元STCの時刻より前である場合、当該最新のタイムスタンプの時刻に基づいて、切り替え先STCの時刻が設定される。また、ステップS8の処理と同様に、蓄積されている切り替え先のデータの最も古いタイムスタンプが、補正後の切り替え元STCの時刻より後である場合、当該最も古いタイムスタンプの時刻に基づいて、切り替え先STCの時刻が設定される。
さらに、例えば、一方の伝送路に対する他方の伝送路の遅延量が閾値を超えた場合、ステップS13の処理と同様に、一方の伝送路のデータの蓄積量が制限される。
{変形例2:3種類の以上の伝送路を用いる場合の変形例}
また、本技術は、3種類以上の伝送路を介してデータを伝送する場合にも適用することができる。この場合、各伝送路を介して伝送されるデータのうち最も遅延しているデータ(最もタイムスタンプが遅いデータ)のタイムスタンプに基づいて、選択したデータを出力するタイミングを制御するようにすればよい。
例えば、図2のステップS4及びS8の処理のように、出力の切り替え時に、切り替え先STCの時刻を、補正後の切り替え元STCの時刻に合わせるようにすればよい。また、蓄積されている切り替え先のデータの最新のタイムスタンプが、補正後の切り替え元STCの時刻より前である場合、当該最新のタイムスタンプの時刻に基づいて、切り替え先STCの時刻を設定するようにすればよい。さらに、蓄積されている切り替え先のデータの最も古いタイムスタンプが、補正後の切り替え元STCの時刻より後である場合、当該最も古いタイムスタンプの時刻に基づいて、切り替え先STCの時刻を設定するようにすればよい。
これにより、最終的に、各STCの時刻が、最も遅延しているSTCの時刻に合わせられるようになる。その結果、最も遅延しているデータのタイムスタンプに基づいて、選択したデータを出力するタイミングが制御されるようになる。
また、例えば、図2のステップS12及びS14の処理と同様に、各データについて、出力中のデータに対応する補正後のSTCの時刻より後のタイムスタンプが付与されたデータを少なくとも蓄積するようにすればよい。
さらに、例えば、図2のステップS3及びS6の処理のように、出力の切り替えが指令された場合、切り替え元のデータの伝送路に対する切り替え先のデータの伝送路の遅延量が第1の閾値を超えているとき、切り替えを行わないようにすればよい。
また、例えば、図2のステップS11及びS13の処理のように、ある伝送路Aに対する出力中のデータが伝送される伝送路Bの遅延量が第2の閾値を超えている場合、伝送路Aを介して伝送されるデータの蓄積量を制限するようにすればよい。
なお、第1の閾値と第2の閾値は、同じ値に設定してもよいし、異なる値に設定してもよい。
{変形例3:STCに関する変形例}
また、例えば、PTS以外のタイムスタンプに基づいてSTCを生成するようにしてもよい。
さらに、例えば、NTPに基づいてSTCを生成するようにしてもよい。
ただし、NTPは、その性質上遅延が発生してもすぐに反映されないため、基本的にはジッタを持たない構造になっている。従って、NTPに基づいてSTCを生成する場合、このSTCは、通信伝送路の遅延の有無や変動等により発生するジッタを含まないことになる。一方、タイムスタンプの一種であるPTSに基づいて生成したSTCは、通信伝送路のジッタを含む。従って、PTSに基づくSTCを用いた方が、NTPに基づくSTCを用いた場合より、より正確に通信伝送路のジッタがSTCに反映されるため、出力の切り替え時のスキップ及びリピートが発生しにくくなる。
そこで、例えば、NTPに基づいてSTCを生成し、通信伝送路の遅延量の測定値を加味して補正したSTCを、放送側と通信側で共通に用いるようにしてもよい。この場合、安定したNTPを基準にしてSTCを生成することができる。
{その他の変形例}
また、例えば、通信トラフィック計測部116による通信伝送路のトラフィックの計測結果に基づいて、通信伝送路の遅延量を予測して、放送データ蓄積部115aのバッファ量を調整するようにしてもよい。この場合、放送データ蓄積部115aのバッファ量の初期値を決めておいてもよい。
さらに、複数の伝送路を介して伝送するデータの送信元は、必ずしも同じである必要はない。例えば、放送局から放送伝送路を介して放送データを伝送し、通信業者から通信伝送路を介して通信データを伝送するようにしてもよい。
また、例えば、受信装置101内にディスプレイ等の表示装置やスピーカ等の音声出力装置等を設け、コンテンツデータを提示する処理(例えば、映像・画像の表示、音声の出力等)を行うようにしてもよい。
さらに、本技術は、MMTを用いてデータを伝送する場合に限らず、例えば、互いに対応するタイムスタンプが付与された複数のデータを異なる伝送路を介して伝送する場合に適用することができる。
{コンピュータの構成例}
上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
図5は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
コンピュータにおいて、CPU(Central Processing Unit)301,ROM(Read Only Memory)302,RAM(Random Access Memory)303は、バス304により相互に接続されている。
バス304には、さらに、入出力インタフェース305が接続されている。入出力インタフェース305には、入力部306、出力部307、記憶部308、通信部309、及びドライブ310が接続されている。
入力部306は、キーボード、マウス、マイクロフォンなどよりなる。出力部307は、ディスプレイ、スピーカなどよりなる。記憶部308は、ハードディスクや不揮発性のメモリなどよりなる。通信部309は、ネットワークインタフェースなどよりなる。ドライブ310は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア311を駆動する。
以上のように構成されるコンピュータでは、CPU301が、例えば、記憶部308に記憶されているプログラムを、入出力インタフェース305及びバス304を介して、RAM303にロードして実行することにより、上述した一連の処理が行われる。
コンピュータ(CPU301)が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア311に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
コンピュータでは、プログラムは、リムーバブルメディア311をドライブ310に装着することにより、入出力インタフェース305を介して、記憶部308にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部309で受信し、記憶部308にインストールすることができる。その他、プログラムは、ROM302や記憶部308に、あらかじめインストールしておくことができる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
また、本明細書において、システムとは、複数の構成要素(装置、モジュール(部品)等)の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、1つの筐体の中に複数のモジュールが収納されている1つの装置は、いずれも、システムである。
さらに、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
例えば、本技術は、1つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
また、上述のフローチャートで説明した各ステップは、1つの装置で実行する他、複数の装置で分担して実行することができる。
さらに、1つのステップに複数の処理が含まれる場合には、その1つのステップに含まれる複数の処理は、1つの装置で実行する他、複数の装置で分担して実行することができる。
また、本明細書に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。
さらに、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
また、例えば、本技術は以下のような構成も取ることができる。
(1)
それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータを受信する受信部と、
前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御部と、
受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する蓄積部と
を備える受信装置。
(2)
前記受信部は、第1のタイムスタンプが付与され、第1の伝送路を介して伝送される第1のデータを受信する第1の受信部、及び、前記第1のタイムスタンプに対応する第2のタイムスタンプが付与され、第2の伝送路を介して伝送される第2のデータを受信する第2の受信部を含み、
前記第1のタイムスタンプに基づいて第1のクロック信号を生成する第1のクロック信号生成部と、
前記第2のタイムスタンプに基づいて第2のクロック信号を生成する第2のクロック信号生成部と、
前記第1のクロック信号を補正する第1のクロック信号補正部と、
前記第2のクロック信号を補正する第2のクロック信号補正部と
をさらに備え、
前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記第1のクロック信号の時刻を補正後の前記第2のクロック信号の時刻に合わせ、
前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記第2のクロック信号の時刻を補正後の前記第1のクロック信号の時刻に合わせ、
前記出力制御部は、補正後の前記第1のクロック信号に基づいて前記第1のデータの出力を制御し、補正後の前記第2のクロック信号に基づいて前記第2のデータの出力を制御し、
前記蓄積部は、前記第1のデータを出力中の場合、補正後の前記第1のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第1のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積し、前記第2のデータを出力中の場合、補正後の前記第2のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第2のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積する
前記(1)に記載の受信装置。
(3)
前記第1の伝送路は、放送伝送路であり、
前記第2の伝送路は、通信伝送路であり、
前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定する
前記(2)に記載の受信装置。
(4)
前記蓄積部は、前記通信伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限する
前記(3)に記載の受信装置。
(5)
前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定する
前記(4)に記載の受信装置。
(6)
前記出力制御部は、前記通信伝送路の遅延量が第2の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わない
前記(4)又は(5)に記載の受信装置。
(7)
前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最新の前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より前である場合、前記第1のクロック信号の時刻を最新の前記第1のタイムスタンプの時刻に基づいて設定し、
前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定する
前記(2)に記載の受信装置。
(8)
前記蓄積部は、前記第1の伝送路に対する前記第2の伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限し、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータの蓄積量を制限する
前記(7)に記載の受信装置。
(9)
前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定し、
前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より後である場合、前記第2のクロック信号の時刻を最も古い前記第2のタイムスタンプの時刻に基づいて設定する
前記(8)に記載の受信装置。
(10)
前記出力制御部は、前記第1の伝送路に対する前記第2の伝送路の遅延量が第3の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わず、前記第2の伝送路に対する前記第1の伝送路の遅延量が第4の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わない
前記(8)又は(9)に記載の受信装置。
(11)
各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成部と、
前記複数のクロック信号を補正するクロック信号補正部と
をさらに備え、
前記クロック信号補正部は、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、
前記出力制御部は、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、
前記蓄積部は、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する
前記(1)に記載の受信装置。
(12)
前記クロック信号補正部は、出力するデータの切り替え時に、前記蓄積部に蓄積されている切り替え先のデータの最新の前記タイムスタンプが切り替え元のデータに対応する補正後の前記クロック信号の時刻より前である場合、前記切り替え先のデータに対応する前記クロック信号の時刻を前記切り替え先のデータの最新の前記タイムスタンプの時刻に基づいて設定する
前記(11)に記載の受信装置。
(13)
前記蓄積部は、前記複数のデータのうちの第1のデータを出力中の場合、前記複数のデータのうちの第2のデータの伝送に用いる第2の伝送路に対する前記第1のデータの伝送に用いる第1の伝送路の遅延量が第1の閾値を超えている場合、前記第2のデータの蓄積量を制限する
前記(12)に記載の受信装置。
(14)
前記クロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記タイムスタンプが、前記第1のデータに対応する補正後の第1のクロック信号の時刻より後である場合、前記第2のデータに対応する第2のクロック信号の時刻を最も古い前記タイムスタンプの時刻に基づいて設定する
前記(13)に記載の受信装置。
(15)
前記出力制御部は、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わない
前記(13)又は(14)に記載の受信装置。
(16)
前記複数のデータは、MMT(MPEG Media Transport)を用いて伝送され、
前記タイムスタンプは、PTS(Presentation Time Stamp)である
前記(1)乃至(15)のいずれかに記載の受信装置。
(17)
それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、
前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、
受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップと
を含むデータ処理方法。
(18)
それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、
前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、
受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップと
を含む処理をコンピュータに実行させるためのプログラム。
101 受信装置, 111 受信部, 111a 放送データ受信部, 111b 通信データ受信部, 112 タイムスタンプ解析部, 112a 放送タイムスタンプ解析部, 112b 通信タイムスタンプ解析部, 113 STC生成部, 113a 放送STC生成部, 113b 通信STC生成部, 114 STC補正部, 114a 放送STC補正部, 114b 通信STC補正部, 115 蓄積部, 115a 放送データ蓄積部, 115b 通信データ蓄積部, 116 通信トラフィック計測部, 117 出力制御部

Claims (17)

  1. それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータを受信する受信部と、
    各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成部と、
    前記複数のクロック信号を補正するクロック信号補正部と、
    前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御部と、
    受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する蓄積部と
    を備え、
    前記クロック信号補正部は、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、
    前記出力制御部は、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、
    前記蓄積部は、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積する
    受信装置。
  2. 前記受信部は、第1のタイムスタンプが付与され、第1の伝送路を介して伝送される第1のデータを受信する第1の受信部、及び、前記第1のタイムスタンプに対応する第2のタイムスタンプが付与され、第2の伝送路を介して伝送される第2のデータを受信する第2の受信部を含み、
    前記クロック信号生成部は、前記第1のタイムスタンプに基づいて第1のクロック信号を生成する第1のクロック信号生成部、及び、前記第2のタイムスタンプに基づいて第2のクロック信号を生成する第2のクロック信号生成部を含み、
    前記クロック信号補正部は、前記第1のクロック信号を補正する第1のクロック信号補正部、及び、前記第2のクロック信号を補正する第2のクロック信号補正部を含み、
    前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記第1のクロック信号の時刻を補正後の前記第2のクロック信号の時刻に合わせ、
    前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記第2のクロック信号の時刻を補正後の前記第1のクロック信号の時刻に合わせ、
    前記出力制御部は、補正後の前記第1のクロック信号に基づいて前記第1のデータの出力を制御し、補正後の前記第2のクロック信号に基づいて前記第2のデータの出力を制御し、
    前記蓄積部は、前記第1のデータを出力中の場合、補正後の前記第1のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第1のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積し、前記第2のデータを出力中の場合、補正後の前記第2のクロック信号の時刻より後の前記第1のタイムスタンプが付与された前記第1のデータ、及び、補正後の前記第2のクロック信号の時刻より後の前記第2のタイムスタンプが付与された前記第2のデータを少なくとも蓄積する
    請求項1に記載の受信装置。
  3. 前記第1の伝送路は、放送伝送路であり、
    前記第2の伝送路は、通信伝送路であり、
    前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定する
    請求項2に記載の受信装置。
  4. 前記蓄積部は、前記通信伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限する
    請求項3に記載の受信装置。
  5. 前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定する
    請求項4に記載の受信装置。
  6. 前記出力制御部は、前記通信伝送路の遅延量が第2の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わない
    請求項4に記載の受信装置。
  7. 前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最新の前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より前である場合、前記第1のクロック信号の時刻を最新の前記第1のタイムスタンプの時刻に基づいて設定し、
    前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最新の前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より前である場合、前記第2のクロック信号の時刻を最新の前記第2のタイムスタンプの時刻に基づいて設定する
    請求項2に記載の受信装置。
  8. 前記蓄積部は、前記第1の伝送路に対する前記第2の伝送路の遅延量が第1の閾値を超えている場合、前記第1のデータの蓄積量を制限し、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータの蓄積量を制限する
    請求項7に記載の受信装置。
  9. 前記第1のクロック信号補正部は、前記第2のデータから前記第1のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第1のデータの最も古い前記第1のタイムスタンプが補正後の前記第2のクロック信号の時刻より後である場合、前記第1のクロック信号の時刻を最も古い前記第1のタイムスタンプの時刻に基づいて設定し、
    前記第2のクロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記第2のタイムスタンプが補正後の前記第1のクロック信号の時刻より後である場合、前記第2のクロック信号の時刻を最も古い前記第2のタイムスタンプの時刻に基づいて設定する
    請求項8に記載の受信装置。
  10. 前記出力制御部は、前記第1の伝送路に対する前記第2の伝送路の遅延量が第3の閾値を超えている場合、前記第1のデータから前記第2のデータへの出力の切り替えを行わず、前記第2の伝送路に対する前記第1の伝送路の遅延量が第4の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わない
    請求項8に記載の受信装置。
  11. 前記クロック信号補正部は、出力するデータの切り替え時に、前記蓄積部に蓄積されている前記切り替え先のデータの最新の前記タイムスタンプが前記切り替え元のデータに対応する補正後の前記クロック信号の時刻より前である場合、前記切り替え先のデータに対応する前記クロック信号の時刻を前記切り替え先のデータの最新の前記タイムスタンプの時刻に基づいて設定する
    請求項1に記載の受信装置。
  12. 前記蓄積部は、前記複数のデータのうちの第1のデータを出力中の場合、前記複数のデータのうちの第2のデータの伝送に用いる第2の伝送路に対する前記第1のデータの伝送に用いる第1の伝送路の遅延量が第1の閾値を超えている場合、前記第2のデータの蓄積量を制限する
    請求項11に記載の受信装置。
  13. 前記クロック信号補正部は、前記第1のデータから前記第2のデータへの出力の切り替え時に、前記蓄積部に蓄積されている前記第2のデータの最も古い前記タイムスタンプが、前記第1のデータに対応する補正後の第1のクロック信号の時刻より後である場合、前記第2のデータに対応する第2のクロック信号の時刻を最も古い前記タイムスタンプの時刻に基づいて設定する
    請求項12に記載の受信装置。
  14. 前記出力制御部は、前記第2の伝送路に対する前記第1の伝送路の遅延量が第2の閾値を超えている場合、前記第2のデータから前記第1のデータへの出力の切り替えを行わない
    請求項12に記載の受信装置。
  15. 前記複数のデータは、MMT(MPEG Media Transport)を用いて伝送され、
    前記タイムスタンプは、PTS(Presentation Time Stamp)である
    請求項1に記載の受信装置。
  16. それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、
    各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成ステップと、
    前記複数のクロック信号を補正するクロック信号補正ステップと、
    前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、
    受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップと
    を含み、
    前記クロック信号補正ステップにおいて、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、
    前記出力制御ステップにおいて、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、
    前記蓄積制御ステップにおいて、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する
    データ処理方法。
  17. それぞれ異なる伝送路を介して伝送され、互いに対応するタイムスタンプが付与された複数のデータの受信を制御する受信制御ステップと、
    各データの前記タイムスタンプに基づいて複数のクロック信号を生成するクロック信号生成ステップと、
    前記複数のクロック信号を補正するクロック信号補正ステップと、
    前記複数のデータの中から出力するデータを選択し、前記複数のデータのうち最も前記タイムスタンプが遅いデータの前記タイムスタンプに基づいて、選択したデータを出力するタイミングを制御する出力制御ステップと、
    受信した前記複数のデータのうち、出力されたデータの前記タイムスタンプより後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する蓄積制御ステップと
    を含み、
    前記クロック信号補正ステップにおいて、出力するデータの切り替え時に、切り替え先のデータに対応する前記クロック信号の時刻を、切り替え元のデータに対応する補正後の前記クロック信号の時刻に合わせ、
    前記出力制御ステップにおいて、それぞれ対応する前記クロック信号に基づいて、各データの出力を制御し、
    前記蓄積制御ステップにおいて、出力中のデータに対応する補正後の前記クロック信号の時刻より後の前記タイムスタンプが付与された前記複数のデータを少なくとも蓄積するように制御する
    処理をコンピュータに実行させるためのプログラム。
JP2017537731A 2015-09-01 2016-08-18 受信装置、データ処理方法、及び、プログラム Active JP6822407B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015171993 2015-09-01
JP2015171993 2015-09-01
PCT/JP2016/074105 WO2017038481A1 (ja) 2015-09-01 2016-08-18 受信装置、データ処理方法、及び、プログラム

Publications (2)

Publication Number Publication Date
JPWO2017038481A1 JPWO2017038481A1 (ja) 2018-06-21
JP6822407B2 true JP6822407B2 (ja) 2021-01-27

Family

ID=58187314

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017537731A Active JP6822407B2 (ja) 2015-09-01 2016-08-18 受信装置、データ処理方法、及び、プログラム

Country Status (3)

Country Link
US (1) US10887644B2 (ja)
JP (1) JP6822407B2 (ja)
WO (1) WO2017038481A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107748654B (zh) * 2017-09-13 2020-12-22 东莞市爱协生智能科技有限公司 一种基于mipi协议的视频图像放大的方法及其系统
JP7225807B2 (ja) * 2019-01-09 2023-02-21 沖電気工業株式会社 放送装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10031355A1 (de) * 2000-06-28 2002-01-17 Grundig Ag Verfahren und Vorrichtung zur zeitsynchronen Weiterleitung von Signalen
US20020059641A1 (en) * 2000-11-15 2002-05-16 Satoshi Tsujimura Program reception apparatus
US7346698B2 (en) * 2000-12-20 2008-03-18 G. W. Hannaway & Associates Webcasting method and system for time-based synchronization of multiple, independent media streams
JP4615958B2 (ja) * 2004-10-15 2011-01-19 クラリオン株式会社 デジタル放送の送出装置、受信装置およびデジタル放送システム
US8495244B2 (en) * 2005-06-29 2013-07-23 Jumpstart Wireless Corporation System and method for dynamic automatic communication path selection, distributed device synchronization and task delegation
US7907212B2 (en) * 2006-03-20 2011-03-15 Vixs Systems, Inc. Multiple path audio video synchronization
US9591376B2 (en) * 2006-09-06 2017-03-07 Broadcom Corporation Method and system for synchronizing signals in a communication system
US8272008B2 (en) * 2007-02-28 2012-09-18 At&T Intellectual Property I, L.P. Methods, systems, and products for retrieving audio signals
US7782851B2 (en) * 2007-06-26 2010-08-24 At&T Intellectual Property I, L.P. System and method of detecting lost video data packets
US8358589B2 (en) * 2008-02-08 2013-01-22 Freescale Semiconductor, Inc. Buffer module, receiver, device and buffering method using windows
US9036092B2 (en) * 2013-06-24 2015-05-19 Broadcom Corporation Video channel change system
JP2011066871A (ja) * 2009-08-21 2011-03-31 Sony Corp コンテンツ伝送方法及び表示装置
EP2323392B1 (en) * 2009-11-03 2012-01-04 Tektronix International Sales GmbH Method and apparatus for measuring delay within a compressed digital stream
JP2012095053A (ja) * 2010-10-26 2012-05-17 Toshiba Corp ストリーム伝送システム、送信装置、受信装置、ストリーム伝送方法及びプログラム
KR20120084252A (ko) 2011-01-19 2012-07-27 삼성전자주식회사 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
EP2498494A1 (en) * 2011-03-11 2012-09-12 Thomson Licensing Decoder and method at the decoder for synchronizing the rendering of contents received through different networks
JP5586511B2 (ja) * 2011-03-25 2014-09-10 日本放送協会 同期制御装置及びプログラム
JP6018799B2 (ja) 2011-05-20 2016-11-02 日本放送協会 放送通信連携システム
JP2013009332A (ja) * 2011-05-20 2013-01-10 Nippon Hoso Kyokai <Nhk> 受信機
US9762774B2 (en) * 2011-08-12 2017-09-12 Samsung Electronics Co., Ltd. Receiving apparatus and receiving method thereof
US9264353B2 (en) * 2011-09-22 2016-02-16 Qualcomm Incorporated Dynamic subflow control for a multipath transport connection in a wireless communication network
JP2013092515A (ja) * 2011-10-06 2013-05-16 Sony Corp 周波数差検出装置、周波数差検出方法、およびプログラム
RU2635263C2 (ru) * 2012-01-17 2017-11-09 Нэт Инсайт Интеллекчуал Пропэти Аб Способ резервирования для сетей связи
WO2013190789A1 (ja) 2012-06-22 2013-12-27 ソニー株式会社 受信装置およびその同期処理方法
JP5641090B2 (ja) * 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
EP3133817A4 (en) * 2014-04-18 2017-11-15 LG Electronics Inc. Broadcast signal transmitting apparatus, broadcast signal receiving apparatus, broadcast signal transmitting method and broadcast signal receiving method

Also Published As

Publication number Publication date
US20180242035A1 (en) 2018-08-23
US10887644B2 (en) 2021-01-05
JPWO2017038481A1 (ja) 2018-06-21
WO2017038481A1 (ja) 2017-03-09

Similar Documents

Publication Publication Date Title
EP2798850B1 (en) Apparatus and method for synchronized transmission of multimedia content over an asynchronous network
US10945015B2 (en) Transmitting method, receiving method, transmitting device, and receiving device
US9088818B2 (en) Adaptive media delay matching
US9621682B2 (en) Reduced latency media distribution system
US20080126825A1 (en) Timing recovery method and system thereof
US10721008B2 (en) Transmitting system, multiplexing apparatus, and leap second correction method
US20140233590A1 (en) Time control device, time control method, and program
US10334293B2 (en) Multiplexing apparatus, receiving apparatus, multiplexing method, and delay adjustment method
JP2013223091A (ja) 同期信号調整装置、同期信号調整方法、映像表示装置、および同期信号発生装置
JP6822407B2 (ja) 受信装置、データ処理方法、及び、プログラム
US8937973B2 (en) Transmitting device, receiving device, communication system, transmission method, reception method, and program
US20240064359A1 (en) Transmitting method, receiving method, transmitting device, and receiving device
JP5383520B2 (ja) 映像フレーム及び音声フレームとの間の同期外れを補正する中継装置、プログラム、システム及び方法
EP2871848A1 (en) Providing correction information for media synchronization
JP2020005063A (ja) 処理装置及びその制御方法、出力装置、同期制御システム、並びにプログラム
JP5958008B2 (ja) ストリーム処理装置、ストリーム処理方法およびストリーム処理プログラム
JP4612688B2 (ja) 受信装置
US10750233B2 (en) Recording apparatus, recording method, and program
JP7409786B2 (ja) 伝送装置および伝送装置の制御方法
JP6484403B2 (ja) 通信装置、通信プログラム、通信方法
Savino et al. Program clock reference correction in transport stream processors with rate adaptation
US12041704B2 (en) Synchronous control system, transmission device, reception device, synchronous control method, and synchronous control program
Savino et al. A framework for adaptive PCR jitter correction in MPEG-2 TS processors
US20230095732A1 (en) Synchronous control system, transmission device, reception device, synchronous control method, and synchronous control program
JP2018037901A (ja) 配信装置、同期システム、配信方法及び配信プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190723

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200721

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201020

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201221

R151 Written notification of patent or utility model registration

Ref document number: 6822407

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151