JP6743931B2 - Transmission device, transmission method, reception device, and reception method - Google Patents
Transmission device, transmission method, reception device, and reception method Download PDFInfo
- Publication number
- JP6743931B2 JP6743931B2 JP2019057551A JP2019057551A JP6743931B2 JP 6743931 B2 JP6743931 B2 JP 6743931B2 JP 2019057551 A JP2019057551 A JP 2019057551A JP 2019057551 A JP2019057551 A JP 2019057551A JP 6743931 B2 JP6743931 B2 JP 6743931B2
- Authority
- JP
- Japan
- Prior art keywords
- time
- time information
- information
- presentation
- transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本技術は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、ビデオ、オーディオなどの伝送メディアを含む伝送ストリームを送信する送信装置等に関する。 The present technology relates to a transmitting device, a transmitting method, a receiving device, and a receiving method, and more particularly, to a transmitting device that transmits a transmission stream including a transmission medium such as video and audio.
次世代の放送方式において不可欠なサービス要件として、放送と通信の融合サービスが挙げられる。放送と通信の融合サービスも様々な形態が想定されるが、1つの放送番組を構成する画像・音声等の基本信号が一部放送、一部通信で伝送されるケースがその1形態として考えられている。 An integral service requirement for the next-generation broadcasting system is the integrated service of broadcasting and communication. Various forms of integrated services of broadcasting and communication are envisioned, but one form is considered to be the case where basic signals such as images and sounds that make up one broadcast program are partially broadcast and partially transmitted. ing.
現在の放送システムでは、伝送メディアのトランスポート方式として、MPEG2−TS(Moving Picture Experts Group-2 Transport Stream)方式が広く用いられている(例えば、特許文献1を参照)。また、通信による伝送メディアの配信システムとして、MPEG−DASH(Moving Picture Experts Group-Dynamic Adaptive Streaming over HTTP)が知られている(例えば、非特許文献1を参照)。 In the current broadcasting system, the MPEG2-TS (Moving Picture Experts Group-2 Transport Stream) method is widely used as a transport method for transmission media (see, for example, Patent Document 1). In addition, as a delivery system of transmission media by communication, MPEG-DASH (Moving Picture Experts Group-Dynamic Adaptive Streaming over HTTP) is known (for example, refer to Non-Patent Document 1).
上述の放送と通信の融合サービスを実現する上で技術的な課題となるのは、異なる経路で伝送する映像・音声の同期提示である。提示同期制御を実現する上で、ベースとなる時間軸(タイムライン)を共有することが要求される。 A technical issue in realizing the above-mentioned integrated service of broadcasting and communication is the synchronous presentation of video and audio transmitted through different routes. In order to realize the presentation synchronization control, it is required to share the base time axis (timeline).
一般に、放送ではSTC(System Time Clock)と呼ばれる各送信システムで独立する27MHzのカウンタ値が時間軸として使用され、通信ではUTC(Universal Time, Coordinated)と呼ばれる絶対時刻(データフォーマットとしてNTP形式)が時間軸として使用される。 Generally, in broadcasting, a counter value of 27 MHz, which is independent in each transmission system called STC (System Time Clock), is used as a time axis, and in communication, an absolute time (NTP format as a data format) called UTC (Universal Time, Coordinated) is used. Used as a time axis.
本技術の目的は、放送と通信の融合サービスにおける提示同期制御を良好に実現可能とすることにある。 An object of the present technology is to enable excellent presentation synchronization control in a combined service of broadcasting and communication.
本技術の概念は、
伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む伝送ストリームおよび該伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って変調波を得、該変調波を送信する送信部を備え、
上記伝送ストリームには、上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号に、上記第1の時間軸とは異なる第2の時間軸による時刻情報を挿入する時刻情報挿入部をさらに備える
送信装置にある。
The concept of this technology is
After individually performing channel coding processing on the transmission medium and the transmission control signal corresponding to the transmission stream including the presentation time information on the first time axis for each presentation unit of the transmission medium A modulated wave is obtained by performing time division multiplexing and modulation processing, and a transmitter is provided for transmitting the modulated wave,
Time information on the first time axis is inserted in the transmission stream,
The transmission device further includes a time information insertion unit that inserts time information into the transmission control signal based on a second time axis different from the first time axis.
本技術において、送信部により、変調波の送信が行われる。この変調波は、伝送メディアとこの伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む伝送ストリームおよびこの伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行うことで得られたものである。伝送ストリームには、第1の時間軸による時刻情報が挿入されている。そして、時刻情報挿入部により、伝送制御信号に、第1の時間軸とは異なる第2の時間軸による時刻情報が挿入される。 In the present technology, the transmitter transmits the modulated wave. This modulated wave is individually channel-coded for a transmission medium, a transmission stream including presentation time information on the first time axis for each presentation unit of this transmission medium, and a transmission control signal corresponding to this transmission stream. It is obtained by performing time division multiplexing and modulation processing after performing the processing. Time information on the first time axis is inserted in the transmission stream. Then, the time information inserting section inserts the time information based on the second time axis different from the first time axis into the transmission control signal.
例えば、伝送ストリームはMPEG2−TSであり、第1の時間軸による時刻情報はSTCベースのPCRであり、第2の時間軸による時刻情報はUTCベースのNTPフォーマットの時刻情報である、ようにされてもよい。また、例えば、伝送制御信号はTMCC情報であり、時刻情報挿入部は、TMCC情報に、拡張情報として、第2の時間軸による時刻情報を挿入する、ようにされてもよい。 For example, the transport stream is MPEG2-TS, the time information on the first time axis is the STC-based PCR, and the time information on the second time axis is the time information in the UTC-based NTP format. May be. Further, for example, the transmission control signal may be TMCC information, and the time information inserting unit may insert time information based on the second time axis as extended information into the TMCC information.
このように本技術においては、伝送ストリームに第1の時間軸による時刻情報が挿入される他に、伝送制御信号に第2の時間軸による時刻情報が挿入されるものである。そのため、受信側では、放送と通信の融合サービスにおける提示同期制御を良好に実現できる。 As described above, in the present technology, time information based on the first time axis is inserted into the transmission stream, and time information based on the second time axis is inserted into the transmission control signal. Therefore, the receiving side can favorably realize the presentation synchronization control in the integrated service of broadcasting and communication.
なお、本技術において、例えば、伝送ストリームに、伝送制御信号に第2の時間軸による時刻情報が挿入されていることを示す識別情報を挿入する識別情報挿入部をさらに備える、ようにされてもよい。この場合、例えば、伝送ストリームはMPEG2−TSであり、識別情報挿入部は、識別情報が記述された記述子をネットワーク・インフォメーション・テーブルに挿入する、ようにされてもよい。このように識別情報が挿入されることで、受信側では、伝送制御信号に第2の時間軸による時刻情報が挿入されていることを容易に識別可能となる。 Note that the present technology may further include, for example, an identification information insertion unit that inserts identification information indicating that time information based on the second time axis is inserted in the transmission control signal into the transmission stream. Good. In this case, for example, the transport stream may be MPEG2-TS, and the identification information insertion unit may insert the descriptor in which the identification information is described into the network information table. By thus inserting the identification information, the receiving side can easily identify that the time information based on the second time axis is inserted in the transmission control signal.
この場合、例えば、第2の時間軸による時刻情報がUTCベースのNTPフォーマットの時刻情報であるとき、識別情報には、NTPフォーマットがロングフォーマットであるかショートフォーマットであるかを示す情報が付加される、ようにされてもよい。これにより、受信側では、NTPフォーマットがロングフォーマットであるかショートフォーマットであるかを容易に認識できる。 In this case, for example, when the time information on the second time axis is the time information in the UTC-based NTP format, information indicating whether the NTP format is the long format or the short format is added to the identification information. You may do so. As a result, the receiving side can easily recognize whether the NTP format is the long format or the short format.
また、この場合、識別情報には、第1の時間軸による時刻情報と第2の時間軸による時刻情報との伝送遅延差情報が付加される、ようにされてもよい。これにより、受信側では、第2の時間軸による提示時刻情報を第1の時間軸による提示時刻情報に変換するために必要な送信側における伝送遅延差情報を得ること可能となる。 Further, in this case, the transmission delay difference information between the time information on the first time axis and the time information on the second time axis may be added to the identification information. As a result, the reception side can obtain the transmission delay difference information necessary for converting the presentation time information on the second time axis into the presentation time information on the first time axis.
また、本技術の他の概念は、
伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む第1の伝送ストリームおよび該第1の伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って得られた変調波を受信する第1の受信部を備え、
上記第1の伝送ストリームには上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号には上記第1の時間軸とは異なる第2の時間軸による時刻情報が挿入されており、
上記変調波から上記第1の伝送ストリームおよび上記第2の時間軸による時刻情報を取得する取得部と、
伝送メディアと該伝送メディアの提示単位毎の上記第2の時間軸による提示時刻情報を含む第2の伝送ストリームを受信する第2の受信部と、
上記取得部で取得された上記第1の伝送ストリームに含まれる上記第1の時間軸による時刻情報に同期した時刻情報を発生する時刻情報発生部と、
上記取得部で取得された上記第1の伝送ストリームに含まれる伝送メディアの提示を、上記第1の伝送ストリームに含まれる提示時刻情報と、上記時刻情報発生部で発生される時刻情報に基づいて制御する第1の制御部と、
上記第2の受信部で受信された上記第2の伝送ストリームに含まれる伝送メディアの提示を、上記第2の伝送ストリームに含まれる提示時刻情報と、上記取得部で取得された上記第2の時間軸による時刻情報と、上記時刻情報発生部で発生される時刻情報に基づいて制御する第2の制御部をさらに備える
受信装置にある。
In addition, another concept of the present technology is
A transmission path code for each of a transmission medium and a first transmission stream including presentation time information on a first time axis for each presentation unit of the transmission medium and a transmission control signal corresponding to the first transmission stream. A first receiving unit that receives a modulated wave obtained by performing time division multiplexing and modulation processing after performing the conversion processing,
Time information on the first time axis is inserted in the first transport stream,
Time information on a second time axis different from the first time axis is inserted in the transmission control signal,
An acquisition unit that acquires time information based on the first transmission stream and the second time axis from the modulated wave;
A second receiving unit for receiving a transmission medium and a second transmission stream including presentation time information on the second time axis for each presentation unit of the transmission medium;
A time information generating unit that generates time information synchronized with the time information on the first time axis included in the first transport stream acquired by the acquisition unit;
The presentation of the transmission medium included in the first transmission stream acquired by the acquisition unit is based on the presentation time information included in the first transmission stream and the time information generated by the time information generation unit. A first control unit for controlling,
The presentation of the transmission medium included in the second transport stream received by the second receiving unit, the presentation time information included in the second transport stream, and the second presentation time information obtained by the obtaining unit. The receiving device further includes a second control unit that controls based on the time information based on the time axis and the time information generated by the time information generating unit.
本技術において、第1の受信部により、変調波が受信される。この変調波は、伝送メディアとこの伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む第1の伝送ストリームおよびこの第1の伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って得られたものである。ここで、第1の伝送ストリームには、第1の時間軸による時刻情報が挿入されており、伝送制御信号には第1の時間軸とは異なる第2の時間軸による時刻情報が挿入されている。 In the present technology, the modulated wave is received by the first receiving unit. This modulated wave is applied to each of the transmission medium, the first transmission stream including the presentation time information on the first time axis for each presentation unit of the transmission medium, and the transmission control signal corresponding to the first transmission stream. It is obtained by individually performing transmission path coding processing and then performing time division multiplexing and modulation processing. Here, the time information on the first time axis is inserted in the first transmission stream, and the time information on the second time axis different from the first time axis is inserted in the transmission control signal. There is.
取得部により、変調波から第1の伝送ストリームおよび第2の時間軸による時刻情報が取得される。第2の受信部により、伝送メディアと、この伝送メディアの提示単位毎の第2の時間軸による提示時刻情報を含む第2の伝送ストリームが受信される。また、時刻情報発生部により、取得部で取得された第1の伝送ストリームに含まれる第1の時間軸による時刻情報に同期した時刻情報が発生される。 The acquisition unit acquires the time information on the first transmission stream and the second time axis from the modulated wave. The second receiving unit receives the second transmission stream including the transmission medium and the presentation time information on the second time axis for each presentation unit of the transmission medium. Further, the time information generating unit generates time information synchronized with the time information on the first time axis included in the first transmission stream acquired by the acquisition unit.
そして、第1の制御部により、取得部で取得された第1の伝送ストリームに含まれる伝送メディアの提示が、第1の伝送ストリームに含まれる提示時刻情報と、時刻情報発生部で発生される時刻情報に基づいて制御される。また、第2の制御部により、第2の受信部で受信された第2の伝送ストリームに含まれる伝送メディアの提示が、この第2の伝送ストリームに含まれる提示時刻情報と、取得部で取得された第2の時間軸による時刻情報と、時刻情報発生部で発生される時刻情報に基づいて制御される。 Then, the first control unit causes the presentation of the transmission medium included in the first transmission stream acquired by the acquisition unit to be generated by the presentation time information included in the first transmission stream and the time information generation unit. It is controlled based on time information. Also, the presentation of the transmission medium included in the second transport stream received by the second receiving unit is acquired by the second control unit by the presentation time information included in the second transport stream and the acquisition unit. The control is performed based on the time information based on the generated second time axis and the time information generated by the time information generating unit.
例えば、第1の時間軸はSTCベースの時間軸であり、第2の時間軸はUTCベースの時間軸である、ようにされてもよい。また、例えば、第1の伝送ストリームはMPEG2−TSであり、伝送制御信号はTMCC情報であり、TMCC情報に、拡張情報として、第2の時間軸による時刻情報が挿入されている、ようにされてもよい。 For example, the first timeline may be an STC-based timeline and the second timeline may be a UTC-based timeline. Further, for example, the first transport stream is MPEG2-TS, the transmission control signal is TMCC information, and time information on the second time axis is inserted as extended information in the TMCC information. May be.
また、例えば、第2の制御部は、取得部で取得された第2の時間軸による時刻情報とこの時刻情報の受信時における時刻情報発生部で発生される時刻情報との対応関係と、第1の時間軸による時刻情報と第2の時間軸による時刻情報との伝送遅延差情報を用いて、第2の伝送ストリームに含まれる提示時刻情報を第1の時間軸による提示時刻情報に変換し、この変換された提示時刻情報と、時刻情報発生部で発生される時刻情報に基づいて、第2の伝送ストリームに含まれる伝送メディアの提示を制御する、ようにされてもよい。 In addition, for example, the second control unit may determine a correspondence relationship between the time information based on the second time axis acquired by the acquisition unit and the time information generated by the time information generation unit when the time information is received, Using the transmission delay difference information between the time information on the first time axis and the time information on the second time axis, the presentation time information included in the second transport stream is converted to the presentation time information on the first time axis. The presentation of the transmission medium included in the second transmission stream may be controlled based on the converted presentation time information and the time information generated by the time information generating unit.
この場合、例えば、伝送遅延差情報は、送信側の伝送遅延差情報と受信側の伝送遅延差情報とからなり、第1の伝送ストリームには、送信側の伝送遅延差情報が含まれている、ようにされてもよい。また、この場合、第2の制御部は、対応関係として、最新の2つの対応関係を用いる、ようにされてもよい。 In this case, for example, the transmission delay difference information is composed of transmission delay difference information on the transmitting side and transmission delay difference information on the receiving side, and the first transmission stream includes the transmission delay difference information on the transmitting side. , May be done. In this case, the second control unit may use the latest two correspondences as the correspondence.
このように本技術においては、第1の伝送ストリームに含まれる伝送メディアの提示が、第1の時間軸による提示時刻情報と、時刻情報発生部で発生される第1の時間軸による時刻情報に基づいて制御されると共に、第2の伝送ストリームに含まれる伝送メディアの提示が、第2の時間軸による提示時刻情報と、取得部で取得された第2の時間軸による時刻情報と、時刻情報発生部で発生される第1の時間軸による時刻情報に基づいて制御されるものである。そのため、放送と通信の融合サービスにおける提示同期制御を良好に実現できる。 As described above, in the present technology, the presentation of the transmission medium included in the first transport stream is performed based on the presentation time information on the first time axis and the time information on the first time axis generated by the time information generating unit. The presentation of the transmission medium included in the second transmission stream is controlled based on the presentation time information based on the second time axis, the time information based on the second time axis acquired by the acquisition unit, and the time information. The control is performed based on the time information on the first time axis generated by the generator. Therefore, the presentation synchronization control in the integrated service of broadcasting and communication can be realized well.
本技術によれば、放送と通信の融合サービスにおける提示同期制御を良好に実現できる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。 According to the present technology, presentation synchronization control in an integrated service of broadcasting and communication can be favorably realized. It should be noted that the effects described in the present specification are merely examples and are not limited, and may have additional effects.
以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
1.実施の形態
2.変形例
Hereinafter, modes for carrying out the invention (hereinafter, referred to as “embodiments”) will be described. The description will be given in the following order.
1.
<1.実施の形態>
[放送・通信ハイブリッドシステムの構成例]
図1は、放送・通信ハイブリッドシステム10の構成例を示している。放送・通信ハイブリッドシステム10において、送信側には放送送出システム110および配信サーバ120が配置され、受信側には受信機200が配置されている。
<1. Embodiment>
[Configuration example of broadcasting/communication hybrid system]
FIG. 1 shows a configuration example of a broadcast/
放送送出システム110は、ビデオ、オーディオなどの伝送メディア(コンポーネント)を含む伝送ストリームとしてのトランスポートストリームTSと、このトランスポートストリームTSに対応した伝送制御情報としてのTMCC(Transmission and Multiplexing Configuration Control)情報のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って得られた変調波からなる放送信号を送出する。
The
トランスポートストリームTSには、伝送メディアの提示単位毎の提示時刻情報(PTS:Presentation Time Stamp)が含まれている。この提示時刻情報は、STC(System Time Clock)をベースとするものである。また、このトランスポートストリームTSには、STCベースのPCR(Program Clock Reference)が挿入されている。この実施の形態において、TMCC情報には、UTC(Universal Time, Coordinated)ベースのNTP(Network Time Protocol)フォーマットの時刻情報が挿入される。 The transport stream TS includes presentation time information (PTS: Presentation Time Stamp) for each presentation unit of the transmission medium. This presentation time information is based on STC (System Time Clock). Further, STC-based PCR (Program Clock Reference) is inserted in this transport stream TS. In this embodiment, time information in UTC (Universal Time, Coordinated) based NTP (Network Time Protocol) format is inserted into the TMCC information.
また、トランスポートストリームTSには、TMCC情報にNTPフォーマットの時刻情報が挿入されていることを示す識別情報が挿入される。この実施の形態においては、ネットワーク・インフォメーション・テーブル(NIT:Network Information Table)の配下に、この識別情報が記述された時刻情報参照記述子(time_reference_descriptor)が挿入される。ネットワーク・インフォメーション・テーブルには、チャンネル番号や変調方式、ガードインターバルなど、送信するネットワークに関する情報が含まれる。この時刻情報参照記述子の詳細については、後述する。 Further, in the transport stream TS, identification information indicating that time information in NTP format is inserted in TMCC information is inserted. In this embodiment, a time information reference descriptor (time_reference_descriptor) in which this identification information is described is inserted under a network information table (NIT). The network information table includes information about the network to be transmitted, such as channel number, modulation method, and guard interval. Details of this time information reference descriptor will be described later.
配信サーバ120は、ビデオ、オーディオなどの伝送メディア(コンポーネント)を含む伝送ストリームを、例えば、受信側からの要求に応じ、通信ネットワーク300を通じて、受信側に配信する。この伝送ストリームには、伝送メディアの提示単位毎の提示時刻情報が含まれている。この提示時刻情報は、UTCをベースとするものである。この実施の形態において、通信による伝送メディアの配信システムはMPEG−DASHであり、配信サーバ120はDASHストリーミングサーバ(DASH MPDサーバも兼ねる)であるとする。
The
受信機200は、放送送出システム110から送られてくる放送信号を受信すると共に、配信サーバ120から配信される伝送ストリームを受信する。受信機200は、トランスポートストリームTSに含まれているPCRに同期した時刻情報(STC)を発生する。そして、受信機200は、この時刻情報(STC)に基づいて、トランスポートストリームTSに含まれている伝送メディアの提示を制御すると共に、配信サーバ120から配信される伝送ストリームに含まれている伝送メディアの提示を制御する。
The
受信機200は、配信サーバ120から配信される伝送ストリームに含まれている伝送メディアの提示を制御する際、TMCC情報に挿入されているUTCベースのNTPフォーマットの時刻情報を利用する。すなわち、受信機200は、このNTPフォーマットの時刻情報の受信時における上述の時刻情報(STC)との対応関係から、配信サーバ120から配信される伝送ストリームに含まれている提示時刻情報をUTCベースからSTCベースに変換して利用する。
The
図2は、図1に示す放送・通信ハイブリッドシステム10におけるそれぞれの系を概略的に示している。番組素材から放送系にメインの画像、音声のデータが入力される。これらの画像、音声のデータにエンコード処理が施されて得られたトランスポートストリームTSが、放送送出システム110から放送伝送路を通じて受信機200に送られる。ここで、エンコード処理時に、STC(System Time Clock)に基づいて、ビデオ、オーディオのPESパケットに提示時刻情報(PTS)が挿入される。また、トランスポートストリームTSに、STC(System Time Clock)に基づいて、PCRが挿入される。
FIG. 2 schematically shows each system in the broadcast/
番組素材から通信系にサブの画像、音声のデータが入力される。これらの画像、音声のデータにエンコード処理が施されて得られた伝送ストリームが、配信サーバ120から通信伝送路を通じて受信機200に送られる。ここで、エンコード処理時に、UTC(Universal Time, Coordinated)に基づいて、画像、音声の提示単位毎に提示時刻情報が挿入される。
Sub image and audio data is input from the program material to the communication system. A transmission stream obtained by performing an encoding process on these image and sound data is sent from the
この実施の形態では、上述したように、放送系においてTMCC情報にUTCベースのNTPフォーマットの時刻情報が挿入され、受信機200でこの時刻情報が用いられて通信系で配信された伝送ストリームに含まれる画像、音声の提示が制御される。したがって、放送系と通信系における提示時刻情報の時間軸が異なっていても、放送と通信の融合サービスにおける提示同期が可能となる。
In this embodiment, as described above, the time information of the UTC-based NTP format is inserted in the TMCC information in the broadcasting system, and this time information is used in the
図3は、放送信号の構成を示すシステム・パイプ・モデル(System Pipe Model)である。1つのRFチャネルの中で一つまたは複数のトランスポートストリームが伝送される。各々のトランスポートストリームは、“TS−id”で識別される。また、一つのトランスポートストリームに、一つまたは複数のサービスが存在する。各々のサービスは、“Service_id”で識別される。このサービスが、いわゆるチャネルに当たる。 FIG. 3 is a system pipe model showing the structure of a broadcast signal. One or more transport streams are transmitted in one RF channel. Each transport stream is identified by "TS-id". Also, one or more services exist in one transport stream. Each service is identified by "Service_id". This service corresponds to a so-called channel.
一つのサービスの中に、伝送メディア(コンポーネント)として、ビデオ(Video)、オーディオ(Audio)、クローズドキャプション(Closed Caption)などが含まれる。つまり、各サービスは、ビデオ、オーディオ、クローズドキャプションなどの各コンポーネントから構成される。 One service includes video (Video), audio (Audio), closed caption, etc. as transmission media (components). That is, each service is composed of components such as video, audio, and closed captions.
また、一つのトランスポートストリームに、PSI(Program Specific Information)/SI(Service Information)といわれる制御信号が存在する。さらに、一つのトランスポートストリームに、STC(System Time Clock)ベースのPCR(Program Clock Reference)が存在する。 In addition, a control signal called PSI (Program Specific Information)/SI (Service Information) exists in one transport stream. Further, STC (System Time Clock) based PCR (Program Clock Reference) exists in one transport stream.
また、1つのRFチャネルの中で、上述した一つまたは複数のトランスポートストリームと並列して、伝送制御信号であるTMCC情報が伝送される。この実施の形態においては、上述したように、このTMCC情報に、UTC(Universal Time, Coordinated)ベースのNTP(Network Time Protocol)フォーマットの時刻情報が存在する。このTMCC情報は、物理レイヤの制御信号である。 In addition, TMCC information, which is a transmission control signal, is transmitted in parallel with one or a plurality of transport streams described above in one RF channel. In this embodiment, as described above, the TMCC information includes time information in the UTC (Universal Time, Coordinated) based NTP (Network Time Protocol) format. This TMCC information is a physical layer control signal.
図4は、デジタル放送に関するTMCC情報の構成例を示している。「変更指示」のフィールドは、TMCC情報の内容に変更が生じるごとに1ずつ加算され、その値が‘11111111’となった場合は、‘00000000’に戻る。「伝送モード/スロット情報」のフィールドは、伝送主信号の変調方式、誤り訂正内符号化の符号化率、衛星出力バックオフおよび割当てスロット数を示す。 FIG. 4 shows a configuration example of TMCC information regarding digital broadcasting. The "change instruction" field is incremented by 1 each time the content of the TMCC information is changed, and when the value becomes "11111111", it returns to "00000000". The field of “transmission mode/slot information” indicates the modulation method of the transmission main signal, the coding rate of error correction intra-coding, the satellite output backoff, and the number of allocated slots.
「ストリーム種別/相対ストリーム情報」のフィールドは、相対ストリーム番号とストリームの種別の対応関係を示す。「パケット形式/相対ストリーム情報」のフィールドは、相対ストリーム番号とパケットの形式の対応関係を示す。「ポインタ/スロット情報」のフィールドは、スロットに格納される最初のパケットの先頭の位置と最後のパケットの末尾の位置を示す。 The field of “stream type/relative stream information” indicates the correspondence between the relative stream number and the stream type. The field of “packet format/relative stream information” indicates the correspondence between the relative stream number and the packet format. The field of "pointer/slot information" indicates the position of the beginning of the first packet and the position of the end of the last packet stored in the slot.
「相対ストリーム/スロット情報」のフィールドは、スロットと相対ストリーム番号の対応関係を示す。「相対ストリーム/伝送ストリームID対応表」のフィールドは、相対ストリーム番号とトランスポートストリーム識別子との対応関係を示す。「送受信制御情報」のフィールドは、緊急警報放送における受信機の起動制御のための信号およびアップリンク制御情報を伝送する。 The field of “relative stream/slot information” indicates the correspondence between slots and relative stream numbers. The field of "relative stream/transmission stream ID correspondence table" indicates the correspondence between the relative stream number and the transport stream identifier. The field of “transmission/reception control information” carries a signal for activation control of the receiver in emergency alert broadcasting and uplink control information.
TMCC情報の最後に「拡張情報」の3614ビットのフィールドが存在する。この実施の形態においては、この「拡張情報」のフィールドの先頭の80ビットが使用されて、UTCベースのNTPフォーマットの時刻情報が挿入される。図5は、拡張情報(時刻情報)の構成例を示している。「拡張識別子」の16ビットフィールドは、例えば、「0x0001」とされ、拡張情報が時刻情報であることを示す。「拡張情報」の64ビットフィールドには、UTCベースのNTPフォーマットの時刻情報が挿入される。ここでは、NTPフォーマットは、64ビットのロングフォーマットとされる。 At the end of the TMCC information, there is a 3614 bit field of "extended information". In this embodiment, the first 80 bits of this "extended information" field are used to insert time information in the UTC-based NTP format. FIG. 5 shows a configuration example of the extended information (time information). The 16-bit field of "extended identifier" is, for example, "0x0001", indicating that the extended information is time information. The time information in the UTC-based NTP format is inserted in the 64-bit field of "extended information". Here, the NTP format is a 64-bit long format.
ここで、NTP(Network Time Protocol)について説明する。NTPは、ITU(International Telecommunication Union)でインターネットの標準として規定されているプロトコルである。パーソナルコンピュータ、スマートフォンなどのクライアントからNTPプロトコルによりNTPサーバにアクセスすることで、時刻情報を得ることができる。NTPサーバが提供する時刻情報は、1900年1月1日からの積算秒数(UTC:Coordinated Universal Time)で表現されている。 Here, NTP (Network Time Protocol) will be described. NTP is a protocol defined as an Internet standard by ITU (International Telecommunication Union). Time information can be obtained by accessing the NTP server by the NTP protocol from a client such as a personal computer or a smartphone. The time information provided by the NTP server is represented by the cumulative number of seconds (UTC: Coordinated Universal Time) from January 1, 1900.
図6(a)は、NTPサーバが提供する時刻情報のロングフォーマット(NTP time stamp long format)を示している。この時刻情報は、64ビットフォーマットであり、上位32ビットはUTCの積算秒数を示し、下位32ビットは秒未満を示している。また、図6(b)は、NTPサーバが提供する時刻情報のショートフォーマット(NTP time stamp short format)を示している。この時刻情報は、32ビットフォーマットであり、上位16ビットはUTCの積算秒数を示し、下位16ビットは秒未満を示している。 FIG. 6A shows a long format (NTP time stamp long format) of time information provided by the NTP server. This time information is in a 64-bit format, the upper 32 bits indicate the number of seconds that the UTC has accumulated, and the lower 32 bits indicate less than seconds. Further, FIG. 6B shows the short format (NTP time stamp short format) of the time information provided by the NTP server. This time information is in a 32-bit format, the upper 16 bits indicate the number of seconds that the UTC has accumulated, and the lower 16 bits indicate less than seconds.
図7は、時刻情報参照記述子(time_reference_descriptor)の構成例を示している。「descriptor_tag」の8ビットフィールドは、記述子タイプを示す。ここでは、時刻情報参照記述子であることを示す。「descriptor_length」の8ビットフィールドは、デスクリプタの長さ(サイズ)を示し、デスクリプタの長さとして、以降のバイト数を示す。 FIG. 7 shows a configuration example of the time information reference descriptor (time_reference_descriptor). An 8-bit field of "descriptor_tag" indicates a descriptor type. Here, it indicates that it is a time information reference descriptor. The 8-bit field of "descriptor_length" indicates the length (size) of the descriptor, and indicates the number of subsequent bytes as the length of the descriptor.
「time_reference_mode」の2ビットフィールドは、時刻情報の伝送モードを示す。“0”は、PCRのみが伝送されることを示す。“1”は、PCRを伝送する他に、MPEGで規格策定中のTSタイムライン拡張方式で、NTPフォーマットの時刻情報がPESで伝送されることを示す。なお、この伝送モードは、従来からの放送システムに影響が大きく、また、伝送するための帯域が必要となる。“2”は、PCRを伝送する他に、TMCC情報でNTPフォーマットの時刻情報が伝送されることを示す。 A 2-bit field of "time_reference_mode" indicates a transmission mode of time information. “0” indicates that only PCR is transmitted. “1” indicates that, in addition to transmitting the PCR, the time information in the NTP format is transmitted by the PES by the TS timeline extension method under standardization by MPEG. It should be noted that this transmission mode has a great influence on the conventional broadcasting system, and requires a band for transmission. “2” indicates that, in addition to transmitting the PCR, time information in the NTP format is transmitted as TMCC information.
「time_reference_format」の2ビットフィールドは、PCRの他に伝送されるNTPフォーマットの時刻情報がロングフォーマット(図6(a)参照)であるかショートフォーマット(図6(b)参照)であるかを示す。“0”は、ショートフォーマットであることを示す。“1”は、ロングフォーマットであることを示す。 The 2-bit field of "time_reference_format" indicates whether the time information of the NTP format other than the PCR is the long format (see FIG. 6A) or the short format (see FIG. 6B). .. “0” indicates the short format. “1” indicates a long format.
「delay_adjustment」の32ビットフィールドは、システムレイヤのPCRと物理レイヤのNTPフォーマットの時刻情報との伝送遅延差ΔT1を示す。この伝送遅延差ΔT1は、1/90000秒単位とされる。PCRとNTPフォーマットの時刻情報の伝送遅延差は、送信側、受信側のいずれにおいても発生する。伝送遅延差ΔT1は、送信側における伝送遅延差である。 The 32-bit field of “delay_adjustment” indicates the transmission delay difference ΔT1 between the PCR of the system layer and the time information of the NTP format of the physical layer. This transmission delay difference ΔT1 is set to 1/90,000 seconds. The transmission delay difference between the time information in the PCR and the time information in the NTP format occurs on both the transmitting side and the receiving side. The transmission delay difference ΔT1 is a transmission delay difference on the transmitting side.
後述するように、受信側において、UTCベースの提示時刻情報をSTCベースの提示時刻情報に変換する際、送信側、受信側の双方の伝送遅延差が必要となる。送信側の伝送遅延差ΔT1は、上述したように時刻情報参照記述子の「delay_adjustment」の32ビットフィールドに指定される。また、受信側の伝送遅延差ΔT2に関しては、受信側で計算時に固定値が設定される。 As will be described later, when converting the UTC-based presentation time information into the STC-based presentation time information on the receiving side, the transmission delay difference between both the transmitting side and the receiving side is required. The transmission delay difference ΔT1 on the transmitting side is specified in the 32-bit field of “delay_adjustment” of the time information reference descriptor as described above. The transmission delay difference ΔT2 on the receiving side is set to a fixed value at the time of calculation on the receiving side.
図8は、PCR/NTPの伝送遅延モデルを示している。送信側では、STCベースのPCRと、UTCベースのNTPフォーマットの時刻情報があるタイミングにおいて同時に抜き出されたとき、トランスポートストリームTSに対する伝送路符号化の処理遅延Ttssと、TMCC情報に対する伝送路符号化の処理遅延Ttmccsの差だけ、PCRとNTPフォーマットの時刻情報との間に伝送遅延差ΔT1が発生する。つまり、ΔT1=(Ttss−Ttmccs)である。 FIG. 8 shows a PCR/NTP transmission delay model. On the transmitting side, when the STC-based PCR and the UTC-based NTP format time information are simultaneously extracted at a certain timing, the transmission path coding processing delay Ttss for the transport stream TS and the transmission path code for the TMCC information are extracted. The transmission delay difference ΔT1 is generated between the PCR and the time information in the NTP format by the difference in the processing delay Ttmccs of the conversion. That is, ΔT1=(Ttss-Ttmccs).
伝送路符号化されたトランスポートストリームTSと伝送路符号化されたTMCC情報とは多重化および変調の処理がされた後に、放送伝送路を通じて、受信側に送られる。この放送伝送路で、PCRとNTPフォーマットの時刻情報は共通に伝送路遅延Tbtrだけ遅延する。つまり、この放送伝送路では、PCRとNTPフォーマットの時刻情報の遅延差はゼロである。 The transmission path-encoded transport stream TS and the transmission path-encoded TMCC information are multiplexed and modulated, and then sent to the receiving side through the broadcast transmission path. In this broadcast transmission line, the time information in the PCR and the NTP format is commonly delayed by the transmission line delay Tbtr. That is, in this broadcast transmission path, the delay difference between the PCR and the time information in the NTP format is zero.
受信側では、トランスポートストリームTSに対する伝送路復号化の処理遅延Ttsrと、TMCC情報に対する伝送復号化の処理遅延Ttmccrの差だけ、PCRとNTPフォーマットの時刻情報との間に伝送遅延差ΔT2が発生する。つまり、ΔT2=(Ttsr−Ttmccr)である。したがって、PCRとNTPフォーマットの時刻情報との間のトータルの伝送遅延差ΔTは、ΔT=ΔT1+ΔT2となる。 On the receiving side, a transmission delay difference ΔT2 is generated between the PCR and the time information in the NTP format by the difference between the transmission line decoding processing delay Ttsr for the transport stream TS and the transmission decoding processing delay Ttmccr for the TMCC information. To do. That is, ΔT2=(Ttsr-Ttmccr). Therefore, the total transmission delay difference ΔT between the PCR and the time information in the NTP format is ΔT=ΔT1+ΔT2.
[放送送出システムの構成例]
図9は、放送送出システム110の構成例を示している。この放送送出システム110は、27MHzのクロック(システムクロック)を生成する電圧制御発振器121と、1/1716分周をする分周器122と、比較器123と、STCベースの時計部を構成する9ビットカウンタ124aおよび33ビットカウンタ124bと、パケット化部125を有している。また、放送送出システム110は、ビデオ/オーディオエンコード処理部126と、パケット化/タイムスタンプ付加部127と、エンコーダバッファ128と、マルチプレクサ129を有している。
[Configuration example of broadcast transmission system]
FIG. 9 shows a configuration example of the
また、放送送出システム110は、時刻信号インタフェース131と、32ビットレジスタ132a,132bを有している。また、この放送送出システム110は、2**24Hzのクロック(システムクロック)を生成する電圧制御発振器133と、UTCベースの時計部を構成する24ビットカウンタ134aおよび32ビットカウンタ134bと、比較器135を有している。また、放送送出システム110は、伝送路符号化装置141を有している。この伝送路符号化装置141には、トランスポートストリームTSの伝送路符号化を行う主信号系処理部141aと、TMCC情報の伝送路符号化を行う制御信号系処理部141bと、時分割多重/直交変調処理部141cが含まれている。
The
電圧制御発振器121で生成される27MHzのクロックは分周器122で1/1716分周され、この分周器122からは1水平期間の時間長でパルスが出力される。この分周器122の出力パルスは比較器123に供給され、リファレンス水平同期信号(Ref. Hsync)の位相と比較される。この比較器123から出力される比較誤差信号は、電圧制御発振器121に制御信号として供給される。電圧制御発振器121、分周器122および比較器123はPLL(Phase Locked Loop)回路を構成し、電圧制御発振器121では、リファレンス水平同期信号に同期した27MHzのクロックが生成される。
The 27 MHz clock generated by the voltage controlled
この電圧制御発振器121から出力される27MHzのクロックは、9ビットカウンタ124aでカウントされ、300分周される。そして、この9ビットカウンタ124aで得られる90KHzのクロックは、33ビットカウンタ124bでカウントされる。これら9ビットカウンタ124aおよび33ビットカウンタ124bの(33+9)ビットのビット出力は、STCベースの時刻情報となる。
The 27 MHz clock output from the voltage controlled
このSTCベースの時刻情報は、パケット化部125に供給される。パケット化部125では、このSTCベースの時刻情報に基づいたプログラム・クロック・リファレンス(PCR:Program Clock Reference)を含むアダプテーションフィールドを持つTSパケットが生成される。このTSパケットは、所定の間隔で生成され、順次マルチプレクサ129に供給される。なお、PCRは、TSストリーム中に100ms間隔で出現することが推奨されている。
This STC-based time information is supplied to the
ビデオ/オーディオエンコード処理部126では、電圧制御発振器121で得られる27MHzのクロックに同期して、ビデオ、オーディオが符号化される。パケット化/タイムスタンプ付加部127では、符号化後のビデオ、オーディオのエレメンタリストリームからアクセスユニット毎にPESパケットが生成され、さらにペイロードに符号化ビデオ、符号化オーディオを含むTSパケットが生成される。このTSパケットは、エンコーダバッファ128を通じてマルチプレクサ129に供給される。
The video/audio encode
また、このパケット化/タイムスタンプ付加部127には、33ビットカウンタ124bから出力される33ビットのビット出力が供給される。この33ビットのビット出力は、90kHzの精度の時刻情報である。パケット化/タイムスタンプ付加部127では、この33ビットのビット出力に基づいて、プレゼンテーション・タイム・スタンプ(PTS:Presentation Time Stamp)が各PESパケットのヘッダに挿入される。
Further, the packetization/time
マルチプレクサ129には、上述したように、PCRを含むTSパケットと、符号化ビデオ、符号化オーディオを含むTSパケットが供給される。マルチプレクサ129では、各TSパケットが多重化されて、トランスポートストリームTSが生成される。このトランスポートストリームTSには、PSI/SIの制御信号も含まれる。マルチプレクサ129では、NIT(Network Information Table)の配下に、上述した時刻情報参照記述子(time_reference_descriptor)(図7参照)が挿入される。
As described above, the
また、時刻信号インタフェース131により、例えば、インターネット経由で図示しないNTPサーバに所定の時間間隔でアクセスされ、64ビットフォーマットの時刻情報(図6(a)参照)が取得される。32ビットレジスタ132a,132bでは、時刻信号インタフェース131で取得される64ビットフォーマットの時刻情報が保持される。32ビットレジスタ132aには上位32ビットのビットデータが保持され、32ビットレジスタ132bには下位32ビットのビットデータが保持される。32ビットレジスタ132a,132bの保持内容は、時刻信号インタフェース131で64ビットフォーマットの時刻情報を取得する毎に更新される。
Further, the
時刻情報を取得する頻度が十分高い場合にはこのままの構成でよいが、低い場合にはレジスタ132a,132bはNTPサーバの時計を再現するように自動的に時刻を示すカウンタとして継続動作することも考えられる。ここで、取得した時刻情報の下位32ビットを示すレジスタ132bの出力がオール0となった時点で、時刻情報の上位32ビットを示すレジスタ132aの出力は32ビットカウンタ134bの初期値として設定され、かつ24ビットカウンタ134aは0に設定される。この設定動作は放送送出システム110が動作を開始する1回のみに限定される。
If the frequency of acquiring the time information is sufficiently high, this configuration may be used as it is, but if the frequency is low, the
電圧制御発振器133では、2**24Hzのクロックが発生される。24ビットカウンタ134aでは、電圧制御発振器133から出力される2**24Hzのクロックがカウントされる。32ビットカウンタ134bでは、24ビットカウンタ134aの桁上げ出力である1Hzのクロックがカウントされて、秒精度の時刻情報(Regenerated UTC)である32ビットのビット出力が得られる。24ビットカウンタ134aおよび32ビットカウンタ134bの56ビットのビット出力は、初期値からの上記カウンタ動作により、UTCベースの時刻情報となる。
The voltage controlled
マルチプレクサ129で生成されるトランスポートストリームTSは、伝送路符号化装置141の主信号系処理部141aに供給される。この主信号系処理部141bでは、トランスポートストリームTSに対して、外符号符号化、電力拡散、内符号符号化、マッピング等の伝送路符号化処理が施される。
The transport stream TS generated by the
また、24ビットカウンタ134aおよび32ビットカウンタ134bの56ビットのビット出力は、UTCベースのNTPフォーマットの時刻情報として、伝送路符号化装置141の制御信号系処理部141bに供給される。また、この制御信号系処理部141bには、トランスポートストリームTSを伝送する際の伝送パラメータTMCCが供給される。
Further, the 56-bit bit outputs of the 24-bit counter 134a and the 32-
この制御信号系処理部141bでは、伝送パラメータTMCCをもとにTMCC情報が生成される。この際、TMCC情報の拡張情報のフィールドに、NTPロングフォーマットの時刻情報が挿入される(図5参照)。なお、上述したように24ビットカウンタ134aおよび32ビットカウンタ134bのビット出力は56ビットであるので、下位8ビットはオール「0」とされる。また、この主信号系処理部141bでは、生成されたTMCC情報に対して、外符号符号化、電力拡散、内符号符号化、マッピング等の伝送路符号化処理が施される。
In this control
また、伝送路符号化装置141の時分割多重/直交変調処理部141cでは、主信号系処理部141aおよび制御信号系処理部141bの出力に対して、時分割多重と直交変調の処理が施され、中間周波の変調波が得られる。
Further, in the time division multiplexing/quadrature
[受信機の構成例]
図10は、受信機200の構成例を示している。この受信機200は、放送伝送路復号部210と、デマルチプレクサ211と、27MHzのクロック(システムクロック)を生成する電圧制御発振器212と、STCベースの時計部(時刻情報発生部)を構成する9ビットカウンタ213aおよび33ビットカウント213bと、比較器214を有している。
[Example of receiver configuration]
FIG. 10 shows a configuration example of the
また、受信機200は、デコーダバッファ215と、放送提示制御部216と、放送AVデコーダ217を有している。また、受信機200は、UTC/STCマッピング情報生成部220と、通信インタフェース231と、MPD解析部232と、デコーダバッファ233と、通信提示制御部234と、通信AVデコーダ235と、合成部241を有している。
The
放送伝送路復号部210では、受信された放送信号(変調波)に対して伝送路復号化等の処理などが施され、トランスポートストリームTSが得られる。また、放送伝送路復号部210では、トランスポートストリームTSのNIT(Network Information Table)に配置されている時刻情報参照記述子(time_reference_descriptor)に基づき、TMCC情報に挿入されているNTPフォーマットの時刻情報が抽出される。
In the broadcast transmission
放送伝送路復号部210で得られたトランスポートストリームTSは、デマルチプレクサ211に供給される。このデマルチプレクサ211では、PCRを含むTSパケットからPCRが抽出される。選局時や電源投入時において、最初に受信された42ビットのPCRはカウンタ213aおよびカウンタ213bからなる42ビットの時計部(時刻情報発生部)に初期値としてセットされる、その後に受信されたPCRは、比較器214に供給される。
The transport stream TS obtained by the broadcast
また、電圧制御発振器42で生成される27MHzのクロックは9ビットカウンタ213aでカウントされ、300分周される。そして、この9ビットカウンタ213aで得られる90KHzのクロックは、33ビットカウンタ213bでカウントされる。これら9ビットカウンタ213aおよび33ビットカウンタ213bの42ビットのビット出力は、STCベースの時刻情報となる。 The 27 MHz clock generated by the voltage controlled oscillator 42 is counted by the 9-bit counter 213a and divided by 300. The 90 KHz clock obtained by the 9-bit counter 213a is counted by the 33-bit counter 213b. The 42-bit bit outputs of the 9-bit counter 213a and the 33-bit counter 213b serve as STC-based time information.
このSTCベースの時刻情報は、比較器214に供給される。比較器214では、例えば、デマルチプレクサ211からPCRが供給されるタイミングで、STCベースの時刻情報がラッチされ、PCRと比較される。この比較器214から出力される比較誤差信号は、電圧制御発振器212に制御信号として供給される。電圧制御発振器212、カウンタ213a,213bおよび比較器214はPLL(Phase Locked Loop)回路を構成し、電圧制御発振器212ではPCRに同期した27MHzのクロックが生成され、またカウンタ213a,213bではPCRに同期したSTCベースの時刻情報が生成される。
This STC-based time information is supplied to the
また、デマルチプレクサ211では、符号化ビデオ、符号化オーディオを含むTSパケットが抽出され、デコーダバッファ215に一時的に蓄積される。また、カウンタ213bの33ビットのビット出力(90KHzのカウント値)がSTCベースの時刻情報として放送提示制御部216に供給される。
Also, the
放送提示制御部216では、デコーダバッファ215に蓄積されている各PESパケットのPTSが確認される。そして、この放送提示制御部216では、STCベースの時刻情報が参照され、デコード処理すべきPESパケットをデコーダバッファ215から放送AVデコーダ217が順次取り込むことが行われる。放送AVデコーダ217では、PESパケットのデパケット化が行われ、さらに符号化ビデオ、符号化オーディオの復号化が行われ、ベースバンドのビデオ(ビデオデータ)、オーディオ(オーディオデータ)が得られる。
The broadcast
また、放送伝送路復号部210で抽出されるUTCベースのNTPフォーマットの時刻情報は、UTC/STCマッピング情報生成部220に供給される。このUTC/STCマッピング情報生成部220には、カウンタ213bの33ビットのビット出力(90KHzのカウント値)がSTCベースの時刻情報として供給される。このUTC/STCマッピング情報生成部220では、NTPフォーマットの時刻情報と、その抽出タイミングにおけるSTCベースの時刻情報のペア情報(U,S)が、マッピング情報として生成される。
Also, the time information in the UTC-based NTP format extracted by the broadcast transmission
UTCベースのNTPフォーマットの時刻情報は送信側から適当な周期で送られてくるが、受信される毎に、上述のペア情報が継続して生成される。UTC/STCマッピング情報生成部220には、常に最新のペア情報と、その一つ前のペア情報が保持された状態におかれる。
The time information in the UTC-based NTP format is sent from the transmitting side at an appropriate period, but the above-mentioned pair information is continuously generated each time it is received. The UTC/STC mapping
また、通信インタフェース231で、配信サーバ120(図1参照)と通信が行われ、MPDファイルが受信されると共に、ビデオ、オーディオなどの伝送メディア(コンポーネント)を含む伝送ストリームが受信される。MPDファイルはMPD解析部232に供給され、このMPD解析部232で得られるMPD解析情報は通信提示制御部234に供される。また、通信インタフェース231で受信される伝送ストリームは、通信提示制御部234に供給されると共に、デコーダバッファ233に供給される。
Further, the
MPEG−DASHでは、MPDファイルに伝送メディアの提示単位毎のタイミング情報が開示されていると共に、伝送メディア本体にも提示単位毎のタイミング情報が存在する。通信提示制御部234は、これらのタイミング情報に基づいて、伝送メディアの提示単位毎の提示時刻情報を取得する。この提示時刻情報は、UTCベースである。
In MPEG-DASH, the timing information for each presentation unit of the transmission medium is disclosed in the MPD file, and the timing information for each presentation unit also exists in the transmission media body. The communication
通信提示制御部234は、カウンタ213bの33ビットのビット出力(90KHzのカウント値)であるSTCベースの時刻情報と、UTC/STCマッピング情報生成部220で生成された最新の2つのペア情報(U,S)に基づいて、UTCベースの提示時刻情報をSTCベースの提示時刻情報に変換(タイムライン換算)する。
The communication
UTCベースからSTCベースへの変換についてさらに説明する。図11(a)は、送信側におけるSTCおよびUTCのタイムライン(時間軸)を並べて示している。UTCのタイムライン上のUn-1,UnはTMCC情報に挿入されて送信されるUTCベースの時刻を示す。また、STCのタイムライン上のSn-1,Snは、それぞれ、UTCベースの時刻Un-1,Unに対応した、STCベースの時刻を示している。送信側におけるSTCおよびUTCのタイムラインの関係では、UTCベースの提示時刻UtarはSTCベースの時刻Starに対応する。 The conversion from UTC base to STC base will be further described. FIG. 11A shows the timelines (time axis) of STC and UTC on the transmission side side by side. Un-1 and Un on the UTC timeline indicate the UTC-based time inserted in the TMCC information and transmitted. Also, Sn-1 and Sn on the STC timeline indicate STC-based times corresponding to UTC-based times Un-1 and Un, respectively. In the relationship between the STC and UTC timelines on the transmitting side, the UTC-based presentation time Utar corresponds to the STC-based time Star.
図11(b)は、受信側におけるSTCおよびUTCのタイムライン(時間軸)を並べて示している。STCのタイムラインは、UTCのタイムラインに比べて、ΔTだけ遅延したものとなる。このΔTは、PCRとNTPフォーマットの時刻情報との間のトータルの伝送遅延差である。上述したように、この伝送遅延差ΔTは、送信側における伝送遅延差ΔT1と受信側における伝送遅延差ΔT2とが加算されたものである。 FIG. 11B shows the timeline (time axis) of STC and UTC on the receiving side side by side. The STC timeline is delayed by ΔT compared to the UTC timeline. This ΔT is the total transmission delay difference between the PCR and the time information in the NTP format. As described above, this transmission delay difference ΔT is the sum of the transmission delay difference ΔT1 on the transmitting side and the transmission delay difference ΔT2 on the receiving side.
UTC/STCマッピング情報生成部220では、UTCベースの時刻Un-1に対してSTCベースの時刻S´n-1がペアとされる。この時刻S´n-1は、時刻Sn-1よりΔTだけ前の時刻である。また、UTC/STCマッピング情報生成部220では、UTCベースの時刻Unに対してSTCベースの時刻S´nがペアとされる。この時刻S´nは、時刻SnよりΔTだけ前の時刻である。受信側におけるSTCおよびUTCのタイムラインの関係では、UTCベースの提示時刻UtarはSTCベースの時刻S´tarに対応する。この時刻S´tarは、時刻StarよりΔTだけ前の時刻である。
In the UTC/STC mapping
通信提示制御部234では、以下の数式(1)によって、UTCベースの提示時刻UtarがSTCベースの時刻Starに変換(ターゲットタイム換算)される。
(Star−Sn)/(Sn−Sn-1)=(Utar−Un)/(Un−Un-1)
Star=((Utar−Un)(Sn−Sn-1)/(Un−Un-1))+Sn
=((Utar−Un)(S´n−S´n-1)/(Un−Un-1))+S´n+ΔT1+ΔT2
・・・(1)
In the communication
(Star-Sn)/(Sn-Sn-1) = (Utar-Un)/(Un-Un-1)
Star=((Utar-Un)(Sn-Sn-1)/(Un-Un-1))+Sn
= ((Utar-Un)(S'n-S'n-1)/(Un-Un-1))+S'n+ΔT1+ΔT2
...(1)
図10に戻って、通信提示制御部234では、デコーダバッファ233に蓄積されている各提示単位の、上述したようにSTCベースに変換された提示時刻が確認される。そして、通信提示制御部234では、カウンタ213bからのSTCベースの時刻情報が参照され、デコード処理すべきビデオ、オーディオの各提示単位を、デコーダバッファ233から通信AVデコーダ235が順次取り込むことが行われる。通信AVデコーダ235では、各提示単位の符号化ビデオ、符号化オーディオの復号化が行われ、ベースバンドのビデオ(ビデオデータ)、オーディオ(オーディオデータ)が得られる。
Returning to FIG. 10, the communication
合成部241では、放送AVデコーダ217で得られるビデオデータ、オーディオデータのAV出力に、通信AVデコーダ235で得られるビデオデータ、オーディオデータのAV出力が合成され、最終的なAV出力とされる。そして、受信機200では、このビデオデータによる映像表示が行われ、オーディオデータによる音声出力が行われる。
In the
上述したように、図1に示す放送・通信ハイブリッドシステム10において、放送送出システム110では、トランスポートストリームTSにSTCベースのPCRが挿入される他に、TMCC情報にUTCベースのNTPフォーマットの時刻情報が挿入されるものである。そのため、受信側では、放送と通信の融合サービスにおける提示同期制御を良好に実現できる。
As described above, in the broadcast/
また、図1に示す放送・通信ハイブリッドシステム10において、放送送出システム110では、UTCベースのNTPフォーマットの時刻情報が、TMCC情報の拡張情報フィールドに挿入されるものである。そのため、UTCベースのNTPフォーマットの時刻情報を伝送するための新たな帯域を必要としない。
Further, in the broadcast/
また、図1に示す放送・通信ハイブリッドシステム10において、放送送出システム110では、トランスポートストリームTSに、TMCC情報にUTCベースのNTPフォーマットの時刻情報が挿入されていることを示す識別情報が挿入されるものである。つまり、NITに、時刻情報参照記述子が挿入されるものである。そのため、受信側では、TMCC情報にUTCベースのNTPフォーマットの時刻情報が挿入されていることを容易に識別可能となる。
Further, in the broadcast/
また、図1に示す放送・通信ハイブリッドシステム10において、放送送出システム110でトランスポートストリームTSに挿入される時刻情報参照記述子には、送信側におけるシステムレイヤのPCRと物理レイヤのNTPフォーマットの時刻情報との伝送遅延差ΔT1が記述される。そのため、受信側では、TMCC情報にUTCベースのNTPフォーマットの時刻情報が挿入されて送られてきても、この伝送遅延差ΔT1を用いて、UTCベースの提示時刻情報をSTCベースの提示時刻情報に良好に変換可能となる。
Further, in the broadcast/
<2.変形例>
なお、上述実施の形態では、伝送ストリームはトランスポートストリームTS(MPEG2−TS)であり、第1の時間軸による時刻情報がSTCベースのPCRであり、第2の時間軸による時刻情報がUTCベースのNTPフォーマットの時刻情報である例を示した。詳細説明は省略するが、本技術は、同様の伝送ストリームを取り扱うその他の場合にも同様に適用できることは勿論である。
<2. Modification>
In the above-described embodiment, the transport stream is the transport stream TS (MPEG2-TS), the time information on the first time axis is PCR based on STC, and the time information on the second time axis is UTC based. The example is the time information of the NTP format. Although detailed description is omitted, it goes without saying that the present technology can be similarly applied to other cases in which the same transport stream is handled.
また、本技術は、以下のような構成を取ることもできる。
(1)伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む伝送ストリームおよび該伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って変調波を得、該変調波を送信する送信部を備え、
上記伝送ストリームには、上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号に、上記第1の時間軸とは異なる第2の時間軸による時刻情報を挿入する時刻情報挿入部をさらに備える
送信装置。
(2)上記伝送ストリームはMPEG2−TSであり、
上記第1の時間軸による時刻情報はSTCベースのPCRであり、
上記第2の時間軸による時刻情報はUTCベースのNTPフォーマットの時刻情報である
前記(1)に記載の送信装置。
(3)上記伝送制御信号はTMCC情報であり、
上記時刻情報挿入部は、上記TMCC情報に、拡張情報として、上記第2の時間軸による時刻情報を挿入する
前記(1)または(2)に記載の送信装置。
(4)上記伝送ストリームに、上記伝送制御信号に上記第2の時間軸による時刻情報が挿入されていることを示す識別情報を挿入する識別情報挿入部をさらに備える
前記(1)から(3)のいずれかに記載の送信装置。
(5)上記第2の時間軸による時刻情報がUTCベースのNTPフォーマットの時刻情報であるとき、上記識別情報には、上記NTPフォーマットがロングフォーマットであるかショートフォーマットであるかを示す情報が付加される
前記(4)に記載の送信装置。
(6)上記識別情報には、上記第1の時間軸による時刻情報と上記第2の時間軸による時刻情報との伝送遅延差情報が付加される
前記(4)または(5)に記載の送信装置。
(7)上記伝送ストリームはMPEG2−TSであり、
上記識別情報挿入部は、上記識別情報が記述された記述子をネットワーク・インフォメーション・テーブルに挿入する
前記(4)から(6)のいずれかに記載の送信装置。
(8)送信部により、伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む伝送ストリームおよび該伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って変調波を得、該変調波を送信する送信ステップを有し、
上記伝送ストリームには、上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号に、上記第1の時間軸とは異なる第2の時間軸による時刻情報を挿入する時刻情報挿入ステップをさらに有する
送信方法。
(9)伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む第1の伝送ストリームおよび該第1の伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って得られた変調波を受信する第1の受信部を備え、
上記第1の伝送ストリームには上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号には上記第1の時間軸とは異なる第2の時間軸による時刻情報が挿入されており、
上記変調波から上記第1の伝送ストリームおよび上記第2の時間軸による時刻情報を取得する取得部と、
伝送メディアと該伝送メディアの提示単位毎の上記第2の時間軸による提示時刻情報を含む第2の伝送ストリームを受信する第2の受信部と、
上記取得部で取得された上記第1の伝送ストリームに含まれる上記第1の時間軸による時刻情報に同期した時刻情報を発生する時刻情報発生部と、
上記取得部で取得された上記第1の伝送ストリームに含まれる伝送メディアの提示を、上記第1の伝送ストリームに含まれる提示時刻情報と、上記時刻情報発生部で発生される時刻情報に基づいて制御する第1の制御部と、
上記第2の受信部で受信された上記第2の伝送ストリームに含まれる伝送メディアの提示を、上記第2の伝送ストリームに含まれる提示時刻情報と、上記取得部で取得された上記第2の時間軸による時刻情報と、上記時刻情報発生部で発生される時刻情報に基づいて制御する第2の制御部をさらに備える
受信装置。
(10)上記第2の制御部は、
上記取得部で取得された上記第2の時間軸による時刻情報と該時刻情報の受信時における上記時刻情報発生部で発生される時刻情報との対応関係と、上記第1の時間軸による時刻情報と上記第2の時間軸による時刻情報との伝送遅延差情報を用いて、上記第2の伝送ストリームに含まれる提示時刻情報を上記第1の時間軸による提示時刻情報に変換し、該変換された提示時刻情報と、上記時刻情報発生部で発生される時刻情報に基づいて、上記第2の伝送ストリームに含まれる伝送メディアの提示を制御する
前記(9)に記載の受信装置。
(11)上記伝送遅延差情報は、送信側の伝送遅延差情報と受信側の伝送遅延差情報とからなり、
上記第1の伝送ストリームには、上記送信側の伝送遅延差情報が含まれている
前記(10)に記載の受信装置。
(12)上記第2の制御部は、
上記対応関係として、最新の2つの対応関係を用いる
前記(10)または(11)に記載の受信装置。
(13)上記第1の時間軸はSTCベースの時間軸であり、上記第2の時間軸はUTCベースの時間軸である
前記(9)から(12)のいずれかに記載の受信装置。
(14)上記第1の伝送ストリームはMPEG2−TSであり、
上記伝送制御信号はTMCC情報であり、
上記TMCC情報に、拡張情報として、上記第2の時間軸による時刻情報が挿入されている
前記(9)から(13)のいずれかに記載の受信装置。
(15)第1の受信部により、伝送メディアと該伝送メディアの提示単位毎の第1の時間軸による提示時刻情報を含む第1の伝送ストリームおよび該第1の伝送ストリームに対応した伝送制御信号のそれぞれに対して個別に伝送路符号化処理を行った後に時分割多重と変調の処理を行って得られた変調波を受信する第1の受信ステップを有し、
上記第1の伝送ストリームには上記第1の時間軸による時刻情報が挿入されており、
上記伝送制御信号には上記第1の時間軸とは異なる第2の時間軸による時刻情報が挿入されており、
上記変調波から上記第1の伝送ストリームおよび上記第2の時間軸による時刻情報を取得する取得ステップと、
第2の受信部により、伝送メディアと該伝送メディアの提示単位毎の上記第2の時間軸による提示時刻情報を含む第2の伝送ストリームを受信する第2の受信ステップと、
上記取得ステップで取得された上記第1の伝送ストリームに含まれる上記第1の時間軸による時刻情報に同期した時刻情報を発生する時刻情報発生ステップと、
上記取得ステップで取得された上記第1の伝送ストリームに含まれる伝送メディアの提示を、上記第1の伝送ストリームに含まれる提示時刻情報と、上記時刻情報発生ステップで発生される時刻情報に基づいて制御する第1の制御ステップと、
上記第2の受信ステップで受信された上記第2の伝送ストリームに含まれる伝送メディアの提示を、上記第2の伝送ストリームに含まれる提示時刻情報と、上記取得ステップで取得された上記第2の時間軸による時刻情報と、上記時刻情報発生ステップで発生される時刻情報に基づいて制御する第2の制御ステップをさらに有する
受信方法。
Further, the present technology may also be configured as below.
(1) A transmission path encoding process is individually performed on each of a transmission stream including a transmission medium, presentation time information on a first time axis for each presentation unit of the transmission medium, and a transmission control signal corresponding to the transmission stream. After that, a time division multiplexing and modulation process is performed to obtain a modulated wave, and a transmitter is provided to transmit the modulated wave,
Time information on the first time axis is inserted in the transmission stream,
The transmission device further comprising a time information insertion unit that inserts time information on a second time axis different from the first time axis into the transmission control signal.
(2) The transport stream is MPEG2-TS,
The time information on the first time axis is STC-based PCR,
The time information according to the second time axis is time information in a UTC-based NTP format.
(3) The transmission control signal is TMCC information,
The said time information insertion part is a transmitter as described in said (1) or (2) which inserts the time information by the said 2nd time axis into the said TMCC information as extended information.
(4) The transmission stream further includes an identification information insertion unit that inserts identification information indicating that the time information based on the second time axis is inserted into the transmission control signal. The transmitting device according to any one of 1.
(5) When the time information on the second time axis is the time information in the UTC-based NTP format, information indicating whether the NTP format is the long format or the short format is added to the identification information. The transmission device according to (4) above.
(6) The transmission information according to (4) or (5), in which transmission delay difference information between time information on the first time axis and time information on the second time axis is added to the identification information. apparatus.
(7) The transmission stream is MPEG2-TS,
The transmission device according to any one of (4) to (6), wherein the identification information insertion unit inserts the descriptor in which the identification information is described in a network information table.
(8) The transmission unit individually transmits a transmission path for each of the transmission stream including the transmission medium, the presentation time information on the first time axis for each presentation unit of the transmission medium, and the transmission control signal corresponding to the transmission stream. After performing encoding processing, time division multiplexing and modulation processing are performed to obtain a modulated wave, and there is a transmitting step of transmitting the modulated wave,
Time information on the first time axis is inserted in the transmission stream,
The transmission method further comprising a time information inserting step of inserting time information on a second time axis different from the first time axis into the transmission control signal.
(9) Individually for each of the first transmission stream including the transmission medium, the presentation time information on the first time axis for each presentation unit of the transmission medium, and the transmission control signal corresponding to the first transmission stream A first receiving unit that receives a modulated wave obtained by performing time division multiplexing and modulation processing after performing transmission path coding processing,
Time information on the first time axis is inserted in the first transport stream,
Time information on a second time axis different from the first time axis is inserted in the transmission control signal,
An acquisition unit that acquires time information based on the first transmission stream and the second time axis from the modulated wave;
A second receiving unit for receiving a transmission medium and a second transmission stream including presentation time information on the second time axis for each presentation unit of the transmission medium;
A time information generating unit that generates time information synchronized with the time information on the first time axis included in the first transport stream acquired by the acquisition unit;
The presentation of the transmission medium included in the first transmission stream acquired by the acquisition unit is based on the presentation time information included in the first transmission stream and the time information generated by the time information generation unit. A first control unit for controlling,
The presentation of the transmission medium included in the second transport stream received by the second receiving unit, the presentation time information included in the second transport stream, and the second presentation time information obtained by the obtaining unit. The receiving device further comprising a second control unit that controls based on time information based on a time axis and the time information generated by the time information generating unit.
(10) The second control unit is
Correspondence between the time information acquired by the acquisition unit based on the second time axis and the time information generated by the time information generation unit when the time information is received, and the time information based on the first time axis. And the presentation time information included in the second transport stream is converted into the presentation time information on the first time axis by using the transmission delay difference information between the presentation time information on the second time axis and the time information on the second time axis. The receiving apparatus according to (9), wherein the presentation of the transmission medium included in the second transmission stream is controlled based on the presentation time information and the time information generated by the time information generating unit.
(11) The transmission delay difference information is composed of transmission delay difference information on the transmitting side and transmission delay difference information on the receiving side,
The reception device according to (10), wherein the first transmission stream includes transmission delay difference information on the transmission side.
(12) The second control unit is
The receiving apparatus according to (10) or (11), wherein the latest two correspondences are used as the correspondence.
(13) The receiving device according to any one of (9) to (12), wherein the first time axis is an STC-based time axis and the second time axis is a UTC-based time axis.
(14) The first transport stream is MPEG2-TS,
The transmission control signal is TMCC information,
The receiving device according to any one of (9) to (13), wherein time information based on the second time axis is inserted as extension information in the TMCC information.
(15) The first receiving unit includes a transmission medium, a first transmission stream including presentation time information on a first time axis for each presentation unit of the transmission medium, and a transmission control signal corresponding to the first transmission stream. A first reception step of receiving a modulated wave obtained by performing time division multiplexing and modulation processing after individually performing transmission path coding processing on each of
Time information on the first time axis is inserted in the first transport stream,
Time information on a second time axis different from the first time axis is inserted in the transmission control signal,
An acquisition step of acquiring time information on the first transmission stream and the second time axis from the modulated wave;
A second receiving step of receiving, by the second receiving unit, a second transport stream including a transmission medium and presentation time information on the second time axis for each presentation unit of the transmission medium;
A time information generating step of generating time information synchronized with the time information on the first time axis included in the first transmission stream acquired in the acquisition step;
The presentation of the transmission medium included in the first transport stream acquired in the obtaining step is based on the presentation time information included in the first transport stream and the time information generated in the time information generating step. A first control step for controlling,
The presentation of the transmission medium included in the second transport stream received in the second receiving step is performed by the presentation time information included in the second transport stream and the second presentation time information obtained in the obtaining step. The receiving method further comprising a second control step of controlling based on time information on the time axis and the time information generated in the time information generating step.
本技術の主な特徴は、トランスポートストリームTSにSTCベースのPCRを挿入する他に、TMCC情報にUTCベースのNTPフォーマットの時刻情報を挿入することで、受信側で放送と通信の融合サービスにおける提示同期制御を良好に実現可能としたことである(図9参照)。 The main feature of the present technology is that, in addition to inserting STC-based PCR into the transport stream TS, by inserting time information in UTC-based NTP format into TMCC information, a receiver-side integrated service for broadcasting and communication is provided. That is, the presentation synchronization control can be favorably realized (see FIG. 9).
10・・・放送・通信ハイブリッドシステム
110・・・放送送出システム
120・・・配信サーバ
121・・・電圧制御発振器(27MHz)
122・・・分周器(1/1716)
123・・・比較器
124a・・・9ビットカウンタ
124b・・・33ビットカウンタ
125・・・パケット化部
126・・・ビデオ/オーディオエンコード処理部
127・・・パケット化/タイムスタンプ付加部
128・・・エンコーダバッファ
129・・・マルチプレクサ
131・・・時刻信号インタフェース
132a,132b・・・32ビットカウンタ
133・・・電圧制御発振器(2**24Hz)
134a・・・24ビットカウンタ
134b・・・32ビットカウンタ
135・・・比較器
141・・・伝送路符号化装置
141a・・・主信号系処理部
141b・・・制御信号系処理部
141c・・・時分割多重/直交変調処理部
200・・・受信機
201・・・放送伝送路復号部
211・・・デマルチプレクサ
212・・・電圧制御発振器(27MHz)
213a・・・9ビットカウンタ
213b・・・33ビットカウンタ
214・・・比較器
215・・・デコーダバッファ
216・・・放送提示制御部
217・・・放送AVデコーダ
220・・・UTC/STCマッピング情報生成部
231・・・通信インタフェース
232・・・MPD解析部
233・・・デコーダバッファ
234・・・通信提示制御部
235・・・通信AVデコーダ
241・・・合成部
300・・・通信ネットワーク
10... Broadcast/
122... Divider (1/1716)
123...
134a... 24-bit counter 134b... 32-
213a... 9-bit counter 213b... 33-
Claims (4)
上記送信部は、上記第1の時間軸とは異なる第2の時間軸による時刻情報を上記第1の時間軸による時刻情報に対応させるための対応時刻情報と送信側における信号符号化処理の遅延に関する処理遅延情報とを含む参照時刻情報をさらに送信する、
送信装置。 A transmission unit including a transmission medium and presentation time information on a first time axis for each presentation unit of the transmission medium, and transmitting a transmission stream in which the time information on the first time axis is inserted;
The transmission unit of the signal encoding process in the signal-side feeding and the corresponding time information to correspond to the time information with different second time axis in the time information according to the first time base and the first time-axis further transmits a reference time information and a processing delay information concerning the delay,
Transmitter.
上記送信ステップでは、上記第1の時間軸とは異なる第2の時間軸による時刻情報を上記第1の時間軸による時刻情報に対応させるための対応時刻情報と送信側における信号符号化処理の遅延に関する処理遅延情報とを含む参照時刻情報をさらに送信する、
送信方法。 The transmitting unit includes a transmitting step of transmitting a transmission stream including a transmission medium and presentation time information on a first time axis for each presentation unit of the transmission medium, and inserting the time information on the first time axis. Then
Above transmission step, the first time-axis signal encoding process in the signal-side feeding and the corresponding time information to correspond to the time information with different second time axis in the time information according to the first time base and further transmits a reference time information and a processing delay information concerning the delay,
How to send.
上記第1の伝送メディアの提示を、上記第1の時間軸による提示時刻情報に基づいて制御し、上記第2の時間軸による提示時刻情報を、上記対応時刻情報と上記処理遅延情報とに基づいて上記第1の時間軸による提示時刻情報に変換し、上記第2の伝送メディアの提示を制御する制御部をさらに備える
受信装置。 A first transmission medium and a first transmission stream including presentation time information on a first time axis for each presentation unit of the first transmission medium, and time information on the first time axis is inserted; processing delay information concerning the delay of the signal encoding processing in Shin-side feeding and the corresponding time information to correspond to the time information with different second time axis in the time information according to the first time base and the first time-axis A reception unit that receives a second transmission stream that includes reference time information including a second transmission medium, and presentation time information based on the second time axis for each presentation unit of the second transmission medium,
The presentation of the first transmission medium is controlled based on the presentation time information based on the first time axis, and the presentation time information based on the second time axis is based on the corresponding time information and the processing delay information. The receiving apparatus further includes a control unit that converts the presentation time information according to the first time axis to control presentation of the second transmission medium.
制御部が、上記第1の伝送メディアの提示を、上記第1の時間軸による提示時刻情報に基づいて制御し、上記第2の時間軸による提示時刻情報を、上記対応時刻情報と上記処理遅延情報とに基づいて上記第1の時間軸による提示時刻情報に変換し、上記第2の伝送メディアの提示を制御する制御ステップをさらに有する
受信方法。 The receiving unit includes a first transmission medium and presentation time information on the first time axis for each presentation unit of the first transmission medium, and the time information on the first time axis is inserted. a transmission stream, the delay of the signal encoding process in the signal-side feeding and the corresponding time information to correspond to the time information with different second time axis in the time information according to the first time base and the first time-axis Reception for receiving a second transmission stream including reference time information including processing delay information regarding the second transmission medium, and presentation time information according to the second time axis for each presentation unit of the second transmission medium. Have steps,
A control unit controls presentation of the first transmission medium based on presentation time information on the first time axis, and presents presentation time information on the second time axis to the corresponding time information and the processing delay. The receiving method further comprising a control step of converting the presentation time information on the first time axis based on the information and controlling the presentation of the second transmission medium.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019057551A JP6743931B2 (en) | 2019-03-26 | 2019-03-26 | Transmission device, transmission method, reception device, and reception method |
JP2020128360A JP6908170B2 (en) | 2019-03-26 | 2020-07-29 | Sending method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019057551A JP6743931B2 (en) | 2019-03-26 | 2019-03-26 | Transmission device, transmission method, reception device, and reception method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018057093A Division JP6504294B2 (en) | 2018-03-23 | 2018-03-23 | Transmission apparatus, transmission method, reception apparatus and reception method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020128360A Division JP6908170B2 (en) | 2019-03-26 | 2020-07-29 | Sending method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019146188A JP2019146188A (en) | 2019-08-29 |
JP6743931B2 true JP6743931B2 (en) | 2020-08-19 |
Family
ID=67773264
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019057551A Active JP6743931B2 (en) | 2019-03-26 | 2019-03-26 | Transmission device, transmission method, reception device, and reception method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6743931B2 (en) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0993553A (en) * | 1995-09-26 | 1997-04-04 | Matsushita Electric Ind Co Ltd | Image communication equipment and image communication method |
JP5075383B2 (en) * | 2006-09-27 | 2012-11-21 | 株式会社東芝 | Subtitle transmission apparatus and subtitle transmission method |
CN101179484A (en) * | 2006-11-09 | 2008-05-14 | 华为技术有限公司 | Method and system of synchronizing different media stream |
KR101828639B1 (en) * | 2010-10-15 | 2018-03-22 | 톰슨 라이센싱 | Method for synchronizing multimedia flows and corresponding device |
US20140079368A1 (en) * | 2012-03-12 | 2014-03-20 | Panasonic Corporation | Display device and transmission device |
JP5972616B2 (en) * | 2012-03-15 | 2016-08-17 | 日本放送協会 | Reception device, clock restoration method, and program |
KR101501344B1 (en) * | 2012-05-02 | 2015-03-10 | 삼성전자주식회사 | Method and apparatus for transmitting and receiving multimedia service |
-
2019
- 2019-03-26 JP JP2019057551A patent/JP6743931B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019146188A (en) | 2019-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2014188960A1 (en) | Transmission device, transmission method, reception device and reception method | |
JP5708876B1 (en) | Transmitting apparatus, transmitting method, receiving apparatus, and receiving method | |
KR102052684B1 (en) | Transmission apparatus, transmission method, reception apparatus and reception method | |
JP6302274B2 (en) | Transmitting apparatus and receiving apparatus | |
JP5672407B2 (en) | Transmitting apparatus, transmitting method, receiving apparatus, and receiving method | |
WO2015050175A1 (en) | Receiving device and receiving method | |
KR102171652B1 (en) | Transmission device, transmission method, reception device, and reception method | |
JP6318953B2 (en) | Transmitting apparatus, transmitting method, receiving apparatus, and receiving method | |
JP3906712B2 (en) | Data stream processing device | |
JP6743931B2 (en) | Transmission device, transmission method, reception device, and reception method | |
JP2018182617A (en) | Information processing apparatus, information processing method, program, and recording medium manufacturing method | |
JP6813933B2 (en) | Video / audio transmission system, transmission method, transmitter and receiver | |
JP3893643B2 (en) | Signal multiplexing method and transmission signal generating apparatus using the same | |
JP6908170B2 (en) | Sending method | |
JP7120399B2 (en) | Sending method | |
JP6504294B2 (en) | Transmission apparatus, transmission method, reception apparatus and reception method | |
KR100950771B1 (en) | Apparatus and method for transmitting and receiving the broadcasting signal | |
WO2015151781A1 (en) | Transmission device, transmission method, reception device, and reception method | |
JP6515741B2 (en) | Content transmission system, transmission apparatus, transmission method, transmission program | |
JP2014150335A (en) | Information processing apparatus, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190410 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190410 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200128 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200326 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200630 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200713 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6743931 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |