WO2017014054A1 - 送信装置、および送信方法、受信装置、および受信方法、並びにプログラム - Google Patents

送信装置、および送信方法、受信装置、および受信方法、並びにプログラム Download PDF

Info

Publication number
WO2017014054A1
WO2017014054A1 PCT/JP2016/070084 JP2016070084W WO2017014054A1 WO 2017014054 A1 WO2017014054 A1 WO 2017014054A1 JP 2016070084 W JP2016070084 W JP 2016070084W WO 2017014054 A1 WO2017014054 A1 WO 2017014054A1
Authority
WO
WIPO (PCT)
Prior art keywords
time stamp
group
unit
time
packet
Prior art date
Application number
PCT/JP2016/070084
Other languages
English (en)
French (fr)
Inventor
愼治 根岸
岳人 渡辺
和博 石谷
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US15/735,667 priority Critical patent/US10567852B2/en
Publication of WO2017014054A1 publication Critical patent/WO2017014054A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/28—Arrangements for simultaneous broadcast of plural pieces of information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00—Arrangements for synchronising receiver with transmitter
    • H04L7/04—Speed or phase control by synchronisation signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26291—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for providing content or additional data updates, e.g. updating software modules, stored at the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets

Abstract

本技術は、送信済みのタイムスタンプを動的に変更することができるようにする送信装置、および送信方法、受信装置、および受信方法、並びにプログラムに関する。 送信装置が、送信済みのタイムスタンプに対して、変更のあった同一のMPUのタイムスタンプをデコード前に受信できるように送信する。受信装置は、変更のあった同一のMPUのタイムスタンプを受信すると、タイムスタンプメモリ上で更新し、更新されたタイムスタンプを利用して、デコードすることにより、動的にタイムスタンプを変更することができる。本技術は、送信装置および受信装置に適用することができる。

Description

送信装置、および送信方法、受信装置、および受信方法、並びにプログラム
　本技術は、送信装置、および送信方法、受信装置、および受信方法、並びにプログラムに関し、特に、送信済みのタイムスタンプを動的に変更できるようにした送信装置、および送信方法、受信装置、および受信方法、並びにプログラムに関する。
　従来、例えばデジタル放送では、データ構造として、ISO13818-1に規定されるMPEG（Moving Picture Experts Group）-2 TS（Transport Stream）が使用されている。
　ビデオのピクチャやオーディオのフレームのように、時刻情報が対応付けられる単位はアクセスユニットと称される。
　MPEG-2 TSでは、アクセスユニット単位で対応づけられるデコード時刻や提示時刻は、ビデオやオーディオのデータをパケット化する際に、そのヘッダ内に符号化されるため、ストリーム上で時刻情報と対応するアクセスユニットデータの先頭は近接しており、デコード時刻や提示時刻は確定した値を付与することが容易である。
　一方、例えば、MPEG-H規格のPart1で規定されるMMT（MPEG Media Transport）を用いた標準規格であるARIB（Association of Radio Industries and Business）-STD-B60では、ビデオやオーディオのアクセスユニットと対応づけられるデコード時刻や提示時刻を、MMTメッセージを用いる方法により、ビデオやオーディオのデータとは異なるパケットとしてパケット化される（特許文献１参照）。
特許５６７２４０７号（特開２０１５－０１５７５９号公報）
　しかしながら、上述の技術においては、ビデオやオーディオの複数個のアクセスユニットをグループとし、グループに含まれるアクセスユニットに対応づけられるデコード時刻や提示時刻をまとめて送信するため、予めグループ全体の時刻情報を確定している必要がある。
　このため、例えば、シーンチェンジを検出して高い画質で符号化するためにビデオのエンコード方法を変更したい場合でも、送信済みのデコード時刻や提示時刻が固定されたままの状態となる。
　また、例えば、編集点を挟むために、グループの境界を変更したい場合でも、デコード時刻や提示時刻を送信済みのグループ長は固定されたままの状態となる。
　本技術は、このような状況に鑑みてなされたものであり、特に、送信済みのタイムスタンプを動的に変更できるようにするものである。
　本技術の第１の側面の受信装置は、タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、前記タイムスタンプパケット化部は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置である。
　前記タイムスタンプパケット化部には、複数の前記タイムスタンプが対応付けられるデータをグループのうち、前記グループ単位で、確定したタイムスタンプのみを追加して、前記タイムスタンプパケットにパケット化させ、前記多重化部には、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記確定したタイムスタンプのみが追加された、タイムスタンプパケットを、前記受信装置に再送させるようにすることができる。
　前記タイムスタンプパケット化部には、複数の前記タイムスタンプが対応付けられるデータのグループ中に、未確定のタイムスタンプがあるとき、前記未確定のタイムスタンプを示す情報を含めて、前記タイムスタンプパケットにパケット化させ、前記多重化部には、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記未確定のタイムスタンプを示す情報を含むタイムスタンプパケットを、前記受信装置に再送させるようにすることができる。
　前記タイムスタンプパケット化部には、複数の前記タイムスタンプが対応付けられるデータのグループの、前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含めて、前記タイムスタンプパケットにパケット化させ、前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループの前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含むタイムスタンプパケットにパケット化して、前記受信装置に再送させるようにすることができる。
　前記多重化部には、前記受信装置において、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される所定時間だけ前に受信されるタイミングで、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送させるようにすることができる。
　本技術の第１の側面の受信方法は、タイムスタンプをタイムスタンプパケットにパケット化し、前記タイムスタンプが対応付けられるデータをエンコードし、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化し、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信するステップを含ませ、前記タイムスタンプパケットにパケット化するタイムスタンプパケット化ステップの処理は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化ストリームを生成して受信装置に送信するステップの処理は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信方法である。
　本技術の第１の側面のプログラムは、タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部としてコンピュータに実行させ、前記タイムスタンプパケット化部は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送するプログラムである。
　本技術の第１の側面においては、タイムスタンプがタイムスタンプパケットにパケット化され、前記タイムスタンプが対応付けられるデータがエンコードされ、エンコードされたエンコードデータがデータパケットにパケット化され、前記タイムスタンプパケットと、前記データパケットとが多重化され、多重化ストリームが生成されて受信装置に送信され複数の前記タイムスタンプが対応付けられるデータがグループとして、前記グループ単位で、複数のタイムスタンプがタイムスタンプパケットにパケット化され、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプが、タイムスタンプパケットにパケット化され、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットが、前記受信装置に再送される。
　本技術の第２の側面の受信装置は、タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、前記タイムスタンプパケット化部は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置において、前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、前記タイムスタンプを記憶するタイムスタンプ記憶部と、前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部とを含み、前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する受信装置である。
　前記更新管理部には、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコード、または、未提示のタイムスタンプが変更されているとき、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させるようにすることができる。
　前記更新管理部には、確定した前記タイムスタンプのみが追加された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記追加されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させるようにすることができる。
　本技術の第２の側面の受信方法は、タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、前記タイムスタンプパケット化部は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置の受信方法において、前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離し、前記タイムスタンプを記憶し、記憶される前記タイムスタンプの更新を管理し、前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードし、前記記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御するステップを含み、記憶される前記タイムスタンプの更新を管理する管理ステップの処理は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、記憶されている前記タイムスタンプを更新して記憶させ、前記タイミングを制御する制御ステップの処理は、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する受信方法である。
　本技術の第２の側面のプログラムは、タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、前記タイムスタンプパケット化部は、複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置を制御するコンピュータに、前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、前記タイムスタンプを記憶するタイムスタンプ記憶部と、前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部として機能させ、前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御するプログラムである。
　本技術の第２の側面においては、タイムスタンプがタイムスタンプパケットにパケット化され、前記タイムスタンプが対応付けられるデータがエンコードされ、エンコードされたエンコードデータがデータパケットにパケット化され、前記タイムスタンプパケットと、前記データパケットとが多重化され、多重化ストリームが生成されて受信装置に送信され、複数の前記タイムスタンプが対応付けられるデータがグループとして、前記グループ単位で、複数のタイムスタンプがタイムスタンプパケットにパケット化され、前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプが、タイムスタンプパケットにパケット化され、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットが、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置であって、前記多重化ストリームが、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離され、前記タイムスタンプが記憶され、記憶される前記タイムスタンプの更新が管理され、分離された、エンコードされている前記タイムスタンプに対応付けられるデータがデコードされ、記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータがデコードされるタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータが提示されるタイミングとが制御され、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプが、前記再送されたタイムスタンプに基づいて、記憶されている前記タイムスタンプが更新されて記憶され、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータがデコードされるタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータが提示されるタイミングとが制御される。
　本技術の第１の側面の送信装置および第２の側面の受信装置は、それぞれ独立した装置であっても良いし、第１の側面の送信装置および第２の側面の受信装置として機能するブロックであっても良い。
　本技術の一側面によれば、送信済みのタイムスタンプを動的に変更することが可能となる。
本技術を適用した送信装置の第１の実施の形態の構成例を説明する図である。 MMTにおけるデコード/提示時刻が対応づけられるデータのパケット構造例を説明する図である。 MMTにおけるデコード/提示時刻のパケット構造例を説明する図である。 MMTにおけるデコード/提示時刻の対応付けを説明する図である。 図１の送信装置による送信処理を説明するフローチャートである。 従来の受信装置の構成例を説明する図である。 本技術を適用した受信装置の第１の実施の形態の構成例を示す図である。 図８の受信装置による受信方法を説明するフローチャートである。 従来の受信装置を説明する図である。 タイムスタンプを変更する処理を説明する図である。 アクセスユニットAU数を変更する処理を説明する図である。 本技術を適用した受信装置の第２の実施の形態の構成例を示す図である。 図１の送信装置による確定したAUのタイムスタンプを追加するときの送信処理を説明するフローチャートである。 図１の送信装置による確定したAUのタイムスタンプを追加するときの送信処理を説明する図である。 図１３の送信処理に対応する受信処理を説明するフローチャートである。 確定したAU数と未確定のAU数とを明示的に送受信するときの処理を説明する図である。 確定したAU数と未確定のAU数とを明示的に送受信するときの処理を説明する図である。 本技術を適用した送信装置の第３の実施の形態の構成例を示す図である。 図１７の送信装置による送信処理を説明するフローチャートである。 通常のMPU拡張タイムスタンプ記述子のシンタックスを説明する図である。 図１９の送信処理を実現するMPU拡張タイムスタンプ記述子のシンタックス例を説明する図である。 図１８の受信装置による受信処理を説明するフローチャートである。 図１９の送信処理を実現するMPU拡張タイムスタンプ記述子のシンタックスの第１の変形例を説明する図である。 図１９の送信処理を実現するMPU拡張タイムスタンプ記述子のシンタックスの第２の変形例を説明する図である。 図１９の送信処理を実現するMPU拡張タイムスタンプ記述子のシンタックスの第３の変形例を説明する図である。 タイムスタンプの更新の有無を示す情報を含めるようにするときのMPU拡張タイムスタンプ記述子のシンタックスの第４の変形例を説明する図である。 タイムスタンプの完了を示す情報を含めるようにするときのMPU拡張タイムスタンプ記述子のシンタックスの第４の変形例を説明する図である。 汎用のパーソナルコンピュータの構成例を説明する図である。
　＜第１の実施の形態＞
　＜送信装置の第１の実施の形態＞
　図１を参照して、本技術を適用した送信装置の第１の実施の形態の構成例について説明する。図１の送信装置は、デコード時刻および提示時刻が対応付けられるビデオオーディオデータと、そのデコード時刻、および提示時刻からなるタイムスタンプとを個別にパケット化する。尚、以降において、デコード時刻、および提示時刻をデコード/提示時刻とも称する。
　送信装置１１は、エンコーダ３１、エンコーダバッファ３２、エンコードデータパケット化部３３、同期制御部３４、制御情報パケット化部３５、および多重化部３６を備えている。
　エンコーダ３１は、ビデオ・オーディオ信号よりビデオデータとオーディオデータとからなるビデオオーディオデータをエンコードすることで符号化信号からなるエンコードデータを生成し、エンコーダバッファ３２に出力して、一時的に格納させる（バッファリングさせる）。
　エンコーダデータパケット化部３３は、エンコーダバッファ３２にバッファリングされている符号化信号からなるエンコーダデータを順次読み出してパケット化し、多重化部３６に出力する。
　同期制御部３４は、エンコーダ３１におけるエンコードの動作を制御すると共に、エンコードされた符号化信号からなるエンコードデータのデコード/提示時刻からなるタイムスタンプを生成して制御情報パケット化部３５に出力する。
　制御情報パケット化部３５は、デコード/提示時刻の情報からなるタイムスタンプを含むデコード/提示時刻を含む制御情報を生成すると共にパケット化する。
　多重化部３６は、パケット化されたビデオオーディオデータと、パケット化されたデコード/提示時刻からなるタイムスタンプを含む制御情報とを多重化して、多重化ストリームとして出力する。
　＜ビデオ・オーディオ信号を含むパケットの構造＞
　次に、図２を参照して、ビデオオーディオデータを含むパケットの構造について説明する。
　図２は、デコード/提示時刻が対応付けられるビデオオーディオデータと、そのデコード/提示時刻とが個別にパケット化されるときの例として、MMT（MPEG Media Transport）におけるデコード/提示時刻が対応付けられるビデオオーディオデータのパケット構造例を示したものである。
　図２の最上段で示されるように、MMTP（MMT Protocol） Packet４１は、そのヘッダ部からなるMMTP Packet Header４２と、ペイロード部からなるMMTP Payload４３とを含む。
　MMTP Packet Header４２は、packet_id４４、および、RAP_flag４５を含む。
　packet_id４４は、多重化されたパケット列の中から特定データのパケット列、すなわち、MMTP payload４３のデータを識別する情報を含む。
　RAP_flag４５は、MMTP Payload４３がランダムアクセスポイントを含むか否かを識別する情報を含んでいる。
　MMTP Payload４３は、Payload Header４６とPayload data byte４７を含む。Payload Header４６は、MPU（Media Progress Unit）と呼ばれるグループ毎に付けられる通し番号であるmpu_sequence_number４８を含む。MPUは、例えば、ビデオのランダムアクセスポイント間とすることが一般的である。尚、Payload data byte４７については、図３を参照して、詳細を後述する。
　＜制御情報パケットの構造＞
　次に、図３を参照して、デコード/提示時刻が対応付けられるビデオオーディオデータと、そのデコード/提示時刻とを個別にパケット化する例として、MMTにおいて、上述した特許文献１に記載のMMTメッセージを用いる方法におけるデコード/提示時刻からなるタイムスタンプを含む制御情報パケットの構造例について説明する。
　MPUに対するデコード/提示時刻の情報は、MPUタイムスタンプ記述子５３およびMPU拡張タイムスタンプ記述子５４と呼ばれる記述子として、MMTP Payload data byte４７のMPT（MMT Package Table）５１中にパケット化される。
　＜デコード/提示時刻が対応付けられるビデオオーディオデータと、そのデコード/提示時刻との対応付け＞
　次に、図４を参照して、デコード/提示時刻からなるタイムスタンプが対応付けられるビデオオーディオデータと、そのデコード/提示時刻の対応付けについて説明する。
　制御情報パケット６１に含まれる記述子中のデコード/提示時刻と、ビデオやオーディオストリームのビデオオーディオパケット６２とに含まれるMPUとを対応付ける方法について説明する。
　制御情報パケット６１のpacket_id５２が、対応するビデオオーディオパケット６２のpacket_id４４を特定する。
　また、制御情報パケット６１のmpu_sequence_number５５または５６が、対応するビデオオーディオパケット６２のmpu_sequence_number４８のMPUを特定する。
　RAP_flag４５によりランダムアクセスポイントである場合、mpu_sequence_number４８が変化するビデオオーディオパケット６２が、記述子に含まれるデコード/提示時刻の対応付けられる先頭であると特定することができる。
　尚、図４においては、MMTP Packet列として多重化されている例を示しているが、MMTP Packetはインターネットプロトコルなどによりさらにパケット化されてから多重化される場合もある（図示せず）。
　＜図１の送信装置による送信処理＞
　次に、図５のフローチャートを参照して、図１の送信装置１１による送信処理について説明する。
　ステップＳ１１において、送信装置１１は、ビデオおよびオーディオからなるビデオオーディオデータを取得する。
　ステップＳ１２において、エンコーダ３１は、同期制御部３４により制御されて、ビデオオーディオデータをエンコードする。
　ステップＳ１３において、エンコーダ３１は、エンコードデータをエンコードバッファ３２にバッファリングさせる。
　ステップＳ１４において、エンコードデータパケット化部３３は、エンコードバッファ３２にバッファリングされている、ビデオオーディオデータのエンコードデータを順次パケット化して多重化部３６に出力する。
　ステップＳ１５において、同期制御部３４は、エンコーダ３１によりエンコードされたビデオオーディオデータをデコード/提示時刻からなるタイムスタンプの情報を制御情報パケット化部３５に出力する。
　ステップＳ１６において、制御情報パケット化部３５は、タイムスタンプを含む制御情報を生成すると共に、パケット化して多重化部３６に出力する。
　ステップＳ１７において、多重化部３６は、パケット化されたタイムスタンプを含む制御情報と、パケット化されたビデオオーディオデータとを多重化して、多重化ストリームとして送信する。
　ステップＳ１８において、同期制御部３４は、処理済みのMPUについて、タイムスタンプを変更したり、グループの構成を変更して、同一のMPUに対して、ビデオオーディオデータと制御情報を再送する必要があるか否かを判定する。ステップＳ１８において、例えば、シーンチェンジが検出されて高い画質で符号化するためにビデオのエンコード方法を変更したい場合や、編集点を挟むためにグループの境界を変更したい場合等、すなわち、処理済みのMPUと同一のMPUであって、変更が施されたビデオオーディオデータと、そのビデオオーディオデータに対応するタイムスタンプとを、再送する必要がある場合、処理は、ステップＳ１９に進む。
　ステップＳ１９において、再送処理が実行される。尚、再送処理とは、処理済みのMPUと同一のMPUであって、変更が施されたビデオオーディオデータと、そのビデオオーディオデータに対応するタイムスタンプとについて、ステップＳ１１乃至Ｓ１７と同様の処理がなされるのみであるため、その説明は省略する。
　＜従来の受信装置の構成例＞
　ここで、図６を参照して、従来の受信装置７０の構成について説明する。
　受信装置７０は、多重分離部７１、STC管理部７２、同期再生制御部７３、タイムスタンプFIFO７４、バッファ７５－１乃至７５－ｎ、デコーダ７６－１乃至７６－ｎ、および表示部７７－１乃至７７－ｎを含む。尚、以降において、バッファ７５－１乃至７５－ｎ、デコーダ７６－１乃至７６－ｎ、および表示部７７－１乃至７７－ｎを、それぞれ特に区別する必要がない場合、単にバッファ７５、デコーダ７６、および表示部７７と称するものとし、その他の構成についても同様に称するものとする。
　多重分離部７１は、複数の番組や複数のビデオやオーディオデータが多重化されたパケットの中から、受信対象となるパケットのみを分離する。より詳細には、多重分離部７１は、入力パケット列の中から送信側のクロックを復元するためのクロック参照情報、制御パケットに含まれるデコード/提示時刻の情報からなるタイムスタンプ、およびビデオオーディオパケットからなるパケット化されたビデオオーディオデータを分離する。そして、多重分離部７１は、クロック参照情報をSTC管理部７２に供給し、タイムスタンプをタイムスタンプFIFO７４に供給し、分離済みのビデオオーディオデータのパケットをバッファ７５に供給する。
　クロック参照情報は、MPEG-H規格のPart1で規定されるMMT（MPEG Media Transport）を用いた標準規格であるARIB-STD-B60の場合は、NTP（Network Time Protocol）が用いられる。
　STC（System Time Clock）管理部７２はクロック参照情報により現在のシステム時刻STCを生成し、同期再生制御部７３に供給する。
　同期再生制御部７３は、タイムスタンプFIFO（First In First Out）７４に格納されるタイムスタンプの情報に基づいて、STC管理部７２より供給されてくるシステム時刻STCに同期して、バッファ７５に蓄積されたビデオオーディオデータを、デコーダ７６を制御してデコードさせて、表示部７７に表示させる。
　タイムスタンプFIFO７４は、多重分離部７１より供給されてくるタイムスタンプを順次記憶し、古いものから順次削除し、同期再生制御部７３からの要求に応じてタイムスタンプを供給する。
　バッファ７５－１および７５－ｎは、それぞれチャンネルごとにビデオオーディオデータを順次蓄積し、適宜、デコーダ７６－１乃至７６－ｎに供給する。
　デコーダ７６－１乃至７６－ｎは、タイムスタンプにおけるデコード時刻になると、同期再生制御部７３により制御され、それぞれチャンネルごとにエンコードされているビデオオーディオデータをデコードし、ビデオおよびオーディオとして復元して表示部７７に出力する。表示部７７は、タイムスタンプにおける提示時刻になると、同期再生制御部７３により制御され、デコードされたビデオおよびオーディオを、それぞれ表示させると共に、音声として出力させる。
　＜従来の受信装置における受信方法＞
　すなわち、タイムスタンプは、タイムスタンプFIFO７４により、時刻ｔ１において、mpu_seq(N)で示される番号Nで示されるMPUのタイムスタンプを含む制御情報８１－Ｎが記憶されると、以降の時刻ｔ２においては、mpu_seq（N＋1）で示される番号（N＋1）で示されるMPUのタイムスタンプを含む制御情報８１－（Ｎ＋１）が記憶される。
　尚、図７においては、タイムスタンプを含む制御情報８１－Ｎは、上からmpu_seq(N)、mpu_of_au=9、左右に、PTS[0]乃至PTS[8]およびDTS[0]乃至DTS[8]が記載されており、MPUのシーケンス番号がNであり、MPUとなるアクセスユニットAU（フレーム）が9枚であり、PTS[0]乃至PTS[8]のそれぞれに時系列に9アクセスユニットAU（フレーム）分の提示時刻が記録され、DTS[0]乃至DTS[8]のそれぞれに時系列の9アクセスユニットAU（フレーム）分のデコード時刻が記録される。
　また、図７における制御情報８１－（Ｎ＋１）については、MPUのシーケンス番号が１インクリメントされる以外は、制御情報８１－Ｎと同様であるので、その説明は省略するものとする。
　さらに、図７の中段においては、多重化ストリームが、下段のSTCに対応付けて摸されており、この中で、斜線部で示された範囲が、図中、左から順に制御情報８１－Ｎ，８１－（Ｎ＋１）であることを示している。
　このように、従来の受信装置７０では、時系列に新しいタイムスタンプが新たに記憶されるのみであるため、送信済みのタイムスタンプを更新できない。すなわち、例えば、シーンチェンジが検出されて高い画質で符号化するためにビデオのエンコード方法を変更したい場合や、編集点を挟むためにグループの境界を変更したい場合等、上述したステップＳ１８の再送処理に対応できない恐れがある。
　＜受信装置の第１の実施の形態＞
　上述したように、シーンチェンジが検出されて高い画質で符号化するためにビデオのエンコード方法を変更したい場合や、編集点を挟むためにグループの境界を変更したい場合等、すなわち、ビデオオーディオデータおよびタイムスタンプを更新する必要がある場合、送信装置は、変更が施されたビデオオーディオデータに対応する、デコード/提示時刻からなるタイムスタンプの情報を含む制御情報を生成して再送処理を実行している（図５のステップＳ１９参照）。
　そこで、図８を参照して、この再送処理に対応した、本技術を適用した受信装置の第１の実施の形態の構成例について説明する。尚、図８の受信装置７０において、図６の受信装置７０の構成と同一の機能を備えた構成については、同一の名称、および同一の符号を付しており、その説明は適宜省略するものとする。
　すなわち、図８の受信装置７０において、図６の受信装置７０と異なる点は、タイムスタンプFIFO７４に代えて、タイムスタンプメモリ９２を備え、さらに、更新管理部９１を備えた点である。
　更新管理部９１は、STCがデコード時刻となったとき、ビデオのピクチャやオーディオフレーム等のアクセスユニットデータとタイムスタンプ情報とを対応づける。更新管理部９１は、多重分離部７１が抽出したアクセスユニットとタイムスタンプとを対応づけた状態でタイムスタンプメモリに記憶しておき、タイムスタンプ情報を更新して記憶する際に、アクセスユニットとの対応付けをやり直す。
　＜図８の受信装置による受信処理＞
　次に、図９のフローチャートを参照して、図８の受信装置による受信処理について説明する。
　ステップＳ３１において、多重分離部７１は、多重化ストリームからなるパケット列より、クロック参照情報、タイムスタンプ、およびチャンネルごとのビデオオーディオデータ（分離済みデータ）に分離して、それぞれSTC管理部７２、および更新管理部９１、およびバッファ７５に出力する。
　ステップＳ３２において、STC管理部７２は、クロック参照情報に基づいて、STCを生成して、同期再生制御部７３に出力する。
　ステップＳ３３において、更新管理部９１は、タイムスタンプメモリ９２を参照して、供給されてきたタイムスタンプと比較し、同一グループ（同一MPU）のタイムスタンプが既に受信されているか否かを判定する。すなわち、供給されてきたタイムスタンプが、更新されて、新たに供給されてきたものであるか否かが判定される。
　ステップＳ３３において、同一グループのタイムスタンプが既に受信されていて、更新されたタイムスタンプが送信されてきている場合、処理は、ステップＳ３４に進む。
　ステップＳ３４において、更新管理部９１は、同一グループのタイムスタンプについて、未デコードのタイムスタンプを、送信されてきたタイムスタンプの値に置換してタイムスタンプメモリ９２に記憶させる。
　＜タイムスタンプを変更する例＞
　すなわち、例えば、図１０で示されるように、時刻ｔ１１において、MPUのシーケンス番号がNで、フレーム数が9枚のタイムスタンプ情報を含む制御情報１０１－１が、既に、タイムスタンプメモリ９２に記憶されており、時刻ｔ１２において、新たなタイムスタンプが発生し、送信されてくる場合、更新されたタイムスタンプが送信されてきているものとみなされる。
　時刻ｔ１２以降においては、既にタイムスタンプが記録されているものとみなされて、時刻ｔ１３において、タイムスタンプメモリ９２上で、制御情報１０１－２のうち、未デコードのアクセスユニットAU[4]乃至[8]のタイムスタンプであるPTS[4]乃至[8]およびDTS[4]乃至[8]が、送信されてきたタイムスタンプであるPTS'[4]乃至[8]およびDTS'[4]乃至[8]に置換される。すなわち、時刻ｔ１２においては、タイムスタンプのPTS[0]乃至[3]およびDTS[0]乃至[3]がデコード済みであることが示されている。
　ただし、図１０においては、時刻ｔ１３は、デコード時刻DTS[4]より前のタイミングであることが必須となる。したがって、制御情報１４１－２は、図８の受信装置７０において、アクセスユニットAU[4]のデコード時刻DTS[4]までに受信できるように、送信装置１１が送信処理を完了する必要がある。また、時刻ｔ１４においては、次のシーケンス番号（N+1）の制御情報１０１－３が記憶されていることが示されている。
　尚、図１０においては、最上段の左から順に制御情報１０１－１乃至１０１－３が示されており、このうち、制御情報１０１－１，１０１－２が同一のシーケンス番号N（＝mpu_seq(N)）で、アクセスユニットAU（フレーム数）が9枚（＝mpu_of_au＝９）であって、以下、上から左に提示時刻を示すタイムスタンプPTS[0]乃至[8]が示され、右にデコード時刻を示すタイムスタンプDTS[0]乃至[8]が示されている。
　＜アクセスユニット数を変更する例＞
　また、該当するグループであるMPU中のアクセスユニット数が9から4へと変更した場合、図１１で示されるように、アクセスユニット数を示すタイムスタンプの制御情報のうちアクセスユニット数を示す情報（mpu_of_au＝4）と、対応するAU[0]乃至[3]のタイムスタンプPTS[0]乃至[3]が示され、左にデコード時刻を示すタイムスタンプDTS[0]乃至[3]が記録されるようにしてもよい。
　ここで、図９のフローチャートの説明に戻る。
　一方、ステップＳ３３において、同一グループのタイムスタンプが初めて受信されて、新規のタイムスタンプが送信されてきている場合、処理は、ステップＳ３５に進む。
　ステップＳ３５において、更新管理部９１は、新規のタイムスタンプをタイムスタンプメモリ９２に記憶させる。
　ステップＳ３６において、同期再生制御部７３は、タイムスタンプメモリ９２に記録されている制御情報のタイムスタンプの情報を読み出し、STCと照合して、デコードするべき時刻（デコード時刻）になったか否かを判定する。ステップＳ３６において、例えば、デコード時刻になったとみなされた場合、処理は、ステップＳ３７に進む。
　ステップＳ３７において、同期再生制御部７３は、デコーダ７６を制御して、バッファ７５に格納されているビデオオーディオデータをデコードさせる。
　尚、ステップＳ３６において、デコード時刻ではないとみなされた場合、ステップＳ３７の処理はスキップされる。
　ステップＳ３８において、同期再生制御部７３は、タイムスタンプメモリ９２に記録されている制御情報のタイムスタンプの情報を読み出し、STCと照合して、提示するべき時刻（提示時刻）になったか否かを判定する。ステップＳ３８において、例えば、提示時刻になったとみなされた場合、処理は、ステップＳ３９に進む。
　ステップＳ３９において、同期再生制御部７３は、表示部７７を制御して、デコーダ７６より供給されてくるデコードされたビデオオーディオデータを提示させ、処理は、ステップＳ３１に戻る。
　尚、ステップＳ３８において、提示すべき時刻ではないとみなされた場合、ステップＳ３９の処理はスキップされる。
　以上の処理により、例えば、シーンチェンジが検出されて高い画質で符号化するためにビデオのエンコード方法を変更したい場合や、編集点を挟むためにグループの境界を変更したい場合等、すなわち、ビデオオーディオデータおよびタイムスタンプを更新する必要がある場合でも、適切に受信することが可能となる。
　尚、再送信のタイミングが、変更が行われたアクセスユニットのデコード時刻よりも前に到着するタイミング（例えば、デコード時刻よりも所定時間だけ前のタイミング）になるようにすることにより、デコードに間に合うタイミングでタイムスタンプの更新を反映することが可能となる。
　＜第２の実施の形態＞
　＜受信装置の第２の実施の形態＞
　以上においては、例えば、シーンチェンジが検出されて高い画質で符号化するためにビデオのエンコード方法を変更したい場合や、編集点を挟むためにグループの境界を変更したい場合等、すなわち、ビデオオーディオデータおよびタイムスタンプを更新する必要がある場合に再送処理されるとき、タイムスタンプをタイムスタンプメモリ上で更新する例について説明してきた。
　しかしながら、更新したビデオオーディオデータとタイムスタンプとを利用できるようにできれば、他の方法でもよく、例えば、MPU内のうち、確定したAU数だけ順次追加しながら制御情報を更新して、順次送信し、受信装置７０において、最新の制御情報を利用することで、デコードが開始されるまでに順次タイムスタンプを追加して記憶するようにしてもよい。
　図１２は、確定したAU数だけ順次追加しながら送信されてくる制御情報を順次追加して記憶するようにした受信装置の第２の実施の形態の構成例を示している。尚、図６における構成と同一の機能を備えた構成については、同一の名称および同一の符号を付しており、その説明は適宜省略するものとする。
　すなわち、図１２の受信装置７０において、図６の受信装置７０と異なる点は、更新管理部１２１が設けられた点である。
　更新管理部１２１は、順次供給されるタイムスタンプのうち、新規のタイムスタンプをタイムスタンプFIFO７４に記憶させると共に、同一のMPUのタイムスタンプの場合、AU数が、直前のAU数よりも多いとき、タイムスタンプを上書きする。
　ここで、送信装置１１の制御情報パケット化部３５は、同一MPUのグループ中で、同期制御部３４が確定したタイムスタンプのみを追加しながら、追加部分のデコードが開始されるまでに受信されるように制御情報パケットを生成し出力する。または、送信装置１１の制御情報パケット化部３５は、追加部分のデコードが開始されてから一定時間が経過するまでに受信されるように制御情報パケットを生成し出力する。
　また、送信装置１１は、未確定の範囲で、同一MPUのグループ中のタイムスタンプが変更されたり、グループの構成が変更されても、送信済みのタイムスタンプについては、変更は生じないようにするものとする。
　尚、送信装置１１の構成については、図１の例と同様であるが、制御情報パケット化部３５が、同一MPUのグループ中で、AUが追加されるとき、追加されたAUに関するタイムスタンプを追加して制御情報パケットを生成して出力する。
　＜確定したAUのタイムスタンプを追加するときの送信処理について＞
　次に、図１３のフローチャートを参照して、確定したAUのタイムスタンプを追加するときの送信処理について説明する。尚、図１３のフローチャートにおけるステップＳ４１乃至Ｓ４７の処理は、図５のフローチャートにおけるステップＳ１１乃至Ｓ１７の処理と同様であるので、その説明は省略するものとする。
　すなわち、ステップＳ４８において、同期制御部３４は、処理済みのMPUについて、未確定のタイムスタンプを追加して、同一のMPUに対して、ビデオオーディオデータと制御情報を再送する必要があるか否かを判定する。ステップＳ４８において、例えば、同一のMPUであって、未確定であったビデオオーディオデータと、そのビデオオーディオデータに対応するタイムスタンプとが確定されて、追加する必要がある場合、処理は、ステップＳ４９に進む。
　ステップＳ４９において、追加処理が実行される。尚、追加処理は、送信済みのMPUと同一のMPUであって、未確定だったタイムスタンプが確定し、追加されたビデオオーディオデータと追加されたタイムスタンプを含む制御情報とについて、ステップＳ１１乃至Ｓ１７と同様の処理がなされるのみであるため、その説明は省略する。
　以上の処理により、例えば、図１４で示されるように、時刻ｔ３１において、mpu_sequence_numberがNのMPUにおいて、まずアクセスユニットAU[0]乃至AU[1]のタイムスタンプのみが確定したため、時刻ｔ３２において、AU数2のタイムスタンプ情報を含む制御情報１３１－１が送信される。
　続いて、時刻ｔ３３において、アクセスユニットAU[2]乃至AU[3]のタイムスタンプが確定したため、アクセスユニットAU数が4のタイムスタンプとして、新たに確定した分のタイムスタンプを含めた制御情報１３１－２が、時刻ｔ３４において送信される。
　同様に、時刻ｔ３５において、アクセスユニットAU[4]乃至AU[5]のタイムスタンプが確定したため、アクセスユニットAU数が6のタイムスタンプとして、新たに確定した分のタイムスタンプを含めた制御情報１３１－３が、時刻ｔ３６に送信される。
　時刻ｔ３７において、アクセスユニットAU[6]乃至AU[8]のタイムスタンプが確定したため、アクセスユニットAU数が9のタイムスタンプとして、新たに確定した分のタイムスタンプを含めた制御情報１３１－４が、時刻ｔ３８に送信される。
　時刻ｔ３１乃至ｔ３８の一連の処理により、mpu_sequence_numberがNのMPUの制御情報の送信が完了する。この結果、制御情報は、新たに確定したAUのタイムスタンプが順次追加されながら、同一のMPUのタイムスタンプが、全てのAUのタイムスタンプが確定するまで、繰り返し送信することが可能となる。
　尚、追加送信のタイミングは、追加が行われるアクセスユニットのデコードが開始される時刻よりも前に受信装置へ到着するタイミング（例えば、デコード時刻よりも所定時間だけ前のタイミング）で行うことにより、受信装置はデコードに間に合うタイミングでタイムスタンプの追加を反映することが可能となる。
　＜図１３の送信処理に対応する受信処理について＞
　次に、図１５のフローチャートを参照して、図１３の送信処理に対応する、図１２の受信装置７０による受信処理について説明する。尚、図１５のフローチャートのステップＳ５１乃至Ｓ５３、およびステップＳ５６乃至Ｓ６０の処理は、図９のフローチャートのステップＳ３１乃至Ｓ３３、およびステップＳ３５乃至Ｓ３９の処理と同様であるので、その説明は省略するものとする。
　すなわち、ステップＳ５３において、同一グループのタイムスタンプが既に受信されていて、更新されたタイムスタンプが送信されてきている場合、処理は、ステップＳ５４に進む。
　ステップＳ５４において、更新管理部１２１は、該当する同一MPUのグループのAU数が増えているか否かを判定する。ステップＳ５４において、AU数が増えている場合、新たなタイムスタンプが確定したものとみなされ、処理は、ステップＳ５５に進む。
　ステップＳ５５において、更新管理部１２１は、同一グループのタイムスタンプについて、AUが追加された新たなタイムスタンプを、タイムスタンプFIFO７４に追加して記憶させる。
　例えば、図１４で示される時刻ｔ３１乃至ｔ３８の一連の処理で送信されてくる、mpu_sequence_numberがNのMPUの制御情報の受信が完了する。この結果、制御情報は、新たに確定したAUのタイムスタンプが順次追加されながら、順次受信することが可能となる。
　以上の処理により、タイムスタンプメモリなどで、新たなタイムスタンプを置換するといった処理が必要ないので、処理負荷を低減させることが可能になると共に、ビデオオーディオデータおよびタイムスタンプを更新する必要がある場合でも、適切に受信することが可能となる。
　＜第３の実施の形態＞
　以上においては、MPU内のうち、確定したAU数だけ順次追加しながら制御情報を更新して、順次送信し、受信装置において、最新の制御情報を利用することで、デコードが開始されるまでに順次タイムスタンプを追加して記憶する例について説明してきた。しかしながら、確定したAU数だけタイムスタンプを順次追加できれば、他の方法でもよく、例えば、確定したAU数と、未確定なAU数とを明示しながら、順次確定したAUのタイムスタンプを追加しながら、タイムスタンプを追加して記憶するようにしてもよい。
　すなわち、図１６で示されるように、例えば、num_of_au＝9で固定し、時刻ｔ５１において、mpu_sequence_numberがNのMPUにおいて、まず、アクセスユニットAU[0]乃至AU[1]のタイムスタンプのみが確定したため、時刻ｔ５２において、アクセスユニットAU[0]乃至AU[1]と、それ以外の領域については、未定値（unknown）としたタイムスタンプを含む制御情報１４１－１が送信されるようにする。
　続いて、時刻ｔ５３において、アクセスユニットAU[2]乃至AU[3]のタイムスタンプが確定したため、アクセスユニットAU[0]乃至AU[3]と、それ以外の領域については、未定値（unknown）としたタイムスタンプを含む制御情報１４１－２が、時刻ｔ５４において送信される。
　同様に、時刻ｔ５５において、アクセスユニットAU[4]乃至AU[5]のタイムスタンプが確定したため、アクセスユニットAU[0]乃至AU[5]と、それ以外の領域については、未定値（unknown）としたタイムスタンプを含む制御情報１４１－３が、時刻ｔ５６において送信される。
　また、時刻ｔ５７において、アクセスユニットAU[6]乃至AU[8]のタイムスタンプが確定したため、アクセスユニットAU[0]乃至AU[8]のタイムスタンプ情報を含む制御情報１４１－４が、時刻ｔ５８において送信される。
　時刻ｔ５１乃至ｔ５８の一連の処理により、mpu_sequence_numberがNのMPUの制御情報の送信が完了する。この結果、新たに確定したAUのタイムスタンプを順次追加しながら制御情報を順次送信することが可能となる。
　＜第３の実施の形態における送信装置の構成例＞
　次に、図１７を参照して、確定したAU数と、未確定なAU数とを明示しながら、順次確定したAUのタイムスタンプを追加しながら制御情報を送信するようにした送信装置の構成例について説明する。尚、図１７の送信装置１１において、図１の送信装置１１の構成と同一の機能を備えた構成については、同一の名称、および同一の符号を付しており、その説明は適宜省略するものとする。
　すなわち、図１７の送信装置１１において、図１の送信装置１１と異なる点は、制御情報パケット化部３５に代えて、制御情報パケット化部２０１を備えた点である。制御情報パケット化部２０１は、基本的な機能は、制御情報パケット化部３５と同様の機能を備えると共に、さらに、確定したAU数と、未確定なAU数とを明示しながら、順次確定したアクセスユニットAUのタイムスタンプを追加しながら、制御情報を追加して生成する。結果として、受信装置においては、未確定なAU数を予め把握することが可能となる。
　＜第３の実施の形態における受信装置の構成例＞
　次に、図１８を参照して、確定したAU数と、未確定なAU数とを明示しながら、順次確定したAUのタイムスタンプを追加しながら生成された制御情報を受信するようにした受信装置の構成例を示している。尚、図１８の受信装置７０において、図６の受信装置７０の構成と同一の機能を備えた構成については、同一の名称、および同一の符号を付しており、その説明は適宜省略するものとする。
　すなわち、図１８の受信装置７０において、図６の受信装置７０と異なる点は、更新管理部２２１を追加した点である。
　更新管理部２２１は、タイムスタンプが含まれる制御情報をタイムスタンプFIFO７４に格納する。この際、更新管理部２２１は、新規なタイムスタンプをタイムスタンプFIFO７４に格納し、新規の制御情報に含まれるタイムスタンプに未確定の情報が含まれているとき、未確定の情報が含まれていることを記憶する。そして、更新管理部２２１は、次のタイムスタンプが送信されてくるとき、直前の制御情報に含まれるタイムスタンプに未確定の情報が含まれているとき、AUのうち、確定したタイムスタンプが追加された制御情報を追加して順次記憶させ、未確定のタイムスタンプが存在するときには、その情報を記憶しておく。そして、更新管理部２２１は、全てのAUについてタイムスタンプが確定した後に、再び新規の制御情報を記憶し、同様の処理を繰り返す。
　＜図１７の送信装置による送信処理について＞
　次に、図１９のフローチャートを参照して、図１７の送信装置１１により送信処理について説明する。尚、図１９のステップＳ７１乃至Ｓ７５，Ｓ７９の処理は、図５におけるステップＳ１１乃至Ｓ１５，Ｓ１７の処理と同様であるので、その説明は、適宜省略する。
　すなわち、ステップＳ７６において、制御情報パケット化部２０１は、グループ内に未確定のAUのタイムスタンプの情報が含まれるか否かを判定する。ステップＳ７６において、例えば、図１６における、時刻ｔ５１で示されるように、アクセスユニットAU[0]乃至AU[1]のタイムスタンプが確定しているのみで、アクセスユニットAU[2]乃至AU[8]のタイムスタンプが未確定の場合、未確定の情報が存在するものとみなして、処理は、ステップＳ７７に進む。
　ステップＳ７７において、制御情報パケット化部２０１は、未確定の情報を含むデコード時刻/提示時刻からなるタイムスタンプを含む制御情報を生成してパケット化する。すなわち、この場合、例えば、図１６で示されるような制御情報１４１－１が生成される。
　一方、ステップＳ７６において、例えば、図１６における、時刻ｔ５７で示されるように、アクセスユニットAU[0]乃至AU[8]の全てのタイムスタンプが確定しており、未確定のタイムスタンプが存在しない場合、未確定の情報が存在しないものとみなして、処理は、ステップＳ７８に進む。
　ステップＳ７８おいて、制御情報パケット化部２０１は、未確定の情報を含まないデコード時刻/提示時刻からなるタイムスタンプを含む制御情報を生成してパケット化する。すなわち、この場合、例えば、図１６で示されるような制御情報１４１－４が生成される。
　以上の処理により、確定したAU数と、未確定なAU数とを明示しながら、順次確定したAUのタイムスタンプを追加しながら生成された制御情報を送信することが可能となる。結果として、確定したタイムスタンプのみが追加されて送信されることになるので、受信装置は受信済みのタイムスタンプを更新する処理を不要とすることができる。
　この際、制御情報パケット化部２０１は、例えば、図３のMPU拡張タイムスタンプ記述子５４を利用して、上述したステップＳ７７，Ｓ７８の処理を実現するためのコマンドを記載して、処理を実行するようにすることができる。
　より具体的には、MPU拡張タイムスタンプ記述子５４は、例えば、ARIB-STD-B60で規定されているシンタックスであり、例えば、図２０で示されるように記述される。
　＜通常のMPU拡張タイムスタンプ記述子のシンタックス＞
　図２０は、MPU拡張タイムスタンプ記述子５４のシンタックス記述例を示しており、左から、記述（Syntax）、ビット数（No. of Bits）、およびフォーマット（Format）が示されている。
　第１行目は、「MPU_Extended_Timestamp_Descriptor」と記述されており、MPU拡張タイムスタンプ記述子５４であることが宣言されている。
　第２行目は、「descriptor_tag」と記述されており、16ビットの記述子を識別するタグが記載されている。
　第３行目は、「descriptor_length」と記述されており、8ビットの記述子の長さを示す情報が記載されている。
　第４行目は、「reserved」と記述されており、5ビットの記述子の予備部分であることが記述されている。
　第５行目は、「pts_offset_type」と記述されており、2ビットの記述子のオフセットタイプが記述されている。
　第６行目は、「timescale_flag」と記述されており、1ビットの記述子のタイムスケールフラグが記述されている。
　第７行目乃至第９行目は、「if (timescale_flag==1)」、および「{timescale}」と記述されており、第６行目のフラグが1であるとき、32ビットで設定される「{timescale}」が定義されている。
　第１０行目乃至第１２行目は、「if (pts_offset_type==1)」、および「{default_pts_offset}」と記述されており、第５行目のタイプが1であるとき、16ビットで設定される「{default_pts_offset}」が定義されている。
　第１３行目乃至第２３行目は、MPU毎のタイムスタンプ情報を記述領域である。
　第１３行目は、「for (i=0; i<N; i++)」と記述されており、第２３行目までの処理がカウンタiの0乃至N回までのループであることが定義されている。
　第１４行目は、「mpu_sequence_number」と記述されており、MPU毎の制御情報のタイムスタンプのシーケンス番号が32ビットで記述されている。
　第１５行目は、「mpu_decoding_time_offset」と記述されており、当該MPU内で、復号順で最初のAUの復号時刻と、提示順で最初のAUの提示時刻の差分の絶対値が16ビットで定義されている。
　第１６行目は、「num_of_au」と記述されており、「dts_pts_offset」、および「pts_offset」を含むアクセスユニットAUの数が8ビットで定義されている。
　第１７行目は、「for(j=0;j<num_of_au;j++)」と記述されており、第１７行目乃至第２０行目処理のカウンタjの0乃至num_of_au回までのループであることが定義されている。
　第１８行目は、「dts_pts_offset」と記述されており、AU毎の、復号時刻から提示時刻までの差分が16ビットで定義されている。
　第１９行目は、「if(pts_offset_type==2)」と記述されており、５行目で定義されるタイプが2であるとき、第２０行目の、「pts_offset」の記述に従って、提示順で直前のAUとの提示時刻の差分が16ビットの値とすることが定義されている。
　すなわち、第１７行目乃至第２１行目のループ処理により、各AUに対応するタイムスタンプが設定されることが記述されている。
　また、第１３行目乃至第２３行目のループ処理により、同一のMPU単位で、タイムスタンプが設定される処理が繰り返されることが示されている。
　このように定義された記述により、図５で示されるような送信処理において、例えば、図１０、または、図１１で示されるような制御情報１０１におけるタイムスタンプが記述されることになる。
　＜図１９の送信処理を実現するMPU拡張タイムスタンプ記述子のシンタックス例＞
　次に、図２０で示した通常のMPU拡張タイムスタンプ記述子の一部の記載を変更（追加）した、図１９の送信処理を実現するシンタックス例について説明する。尚、以降のシンタックスについては、図２０における第１３行目乃至第２３行目の記載に対応するmpu_sequence_numberごとにタイムスタンプ情報を表すループ部分の記載のみについて説明するものとする。
　すなわち、図２１で示されるように、AU毎にタイムスタンプ情報が有効であるか否かを示すvalid_flagを導入し、valid_flagが有効であることを示している場合のみ、dts_pts_offsetやpts_offsetといったタイムスタンプ情報を含める。尚、図２１においては、通常の記述に対して、追加した行に色が付されている。
　すなわち、図２１における第７行目には、「valid_flag」と記述されており、対応するAUが確定したタイムスタンプであるか否かを示す1ビットのフラグが設定されている。
　図２１における第８行目には、「if(valid_flag==1)」と記述されており、「valid_flag」が、対応するAUが確定したタイムスタンプであることを示す1に設定されているとき、タイムスタンプが記述されることが示されている。
　＜図１８の受信装置による受信処理について＞
　次に、図２２のフローチャートを参照して、図１８の受信装置による受信処理について説明する。尚、図２２の受信処理におけるステップＳ９１，Ｓ９２，Ｓ９８乃至Ｓ１０１の処理は、図９の受信処理におけるステップＳ３１，Ｓ３２，Ｓ３６乃至Ｓ３９の処理と同様であるので、その説明は省略するものとする。
　すなわち、ステップＳ９３において、更新管理部２２１は、直前の制御情報に含まれるタイムスタンプにおいて、未確定の情報が存在したか否かを判定する。ステップＳ９３において、未確定の情報がない場合、処理は、ステップＳ９５に進む。
　ステップＳ９３において、直前の制御情報におけるタイムスタンプに未確定の情報がない場合、直前のタイムスタンプは全てのAUのタイムスタンプが確定している完全なタイムスタンプであり、以降においては、新規のタイムスタンプが送信されてきたものとみなされるので、更新管理部２２１は、送信されてきた制御情報に含まれるタイムスタンプを新規のMPUのグループのタイムスタンプとしてタイムスタンプFIFO７４に格納し、処理は、ステップＳ９６に進む。
　ステップＳ９６において、更新管理部２２１は、今回のタイムスタンプに未確定の情報が含まれているか否かを判定し、未確定の情報が存在する場合、ステップＳ９７において、次回の処理において、直前のタイムスタンプに未確定の情報があることを記憶する。
　尚、ステップＳ９６において、未確定の情報がない場合、ステップＳ９７の処理はスキップされる。
　一方、ステップＳ９３において、直前のタイムスタンプに未確定の情報がある場合、処理は、ステップＳ９４に進む。
　ステップＳ９４において、更新管理部２２１は、直前の制御情報のタイムスタンプにおけるMPUと同一のグループのタイムスタンプを追加してタイムスタンプFIFO７４に格納し、処理は、ステップＳ９６に進む。
　すなわち、タイムスタンプを含む制御情報が送信されてくる度に、未確定の情報の有無を記憶しておき、直前のタイムスタンプにおいて未確定の情報が記憶されているような場合、直前の同一のMPUのタイムスタンプであって、未確定の情報のうち、確定された情報が追加されたタイムスタンプが送信されてきたものとみなし、追加してタイムスタンプFIFO７４に格納されるようにした。
　結果として、受信装置は、送信されてきたタイムスタンプを追加して記憶するだけの処理とするだけで、タイムスタンプの管理を容易なものとすることが可能となる。
　＜第１の変形例＞
　以上においては、図２１で示されるような、ARIB-STD-B60で規定されているMPU拡張タイムスタンプ記述子５４の一部を変更した記述を利用することで、確定したAU数と、未確定なAU数とを明示しながら、順次確定したAUのタイムスタンプを追加しながら生成された制御情報を送受信する例について説明してきたが、同様の機能を果たす限り、MPU拡張タイムスタンプ記述子５４の記述は、他の記述であってもよいものである。
　例えば、図２３の第７行目で示されるように、図２１と同様にAU毎にタイムスタンプ情報が有効であるか否かを示すvalid_flagを導入し、valid_flagが有効であることを示している場合のみ、dts_pts_offsetやpts_offsetといったタイムスタンプ情報が有効な値であることを示すようにしてもよい。
　＜第２の変形例＞
　また、図２４の第４行目で示されるように、MPUを構成するAU数を示すnum_of_au_in_mpuを導入し、num_of_au_in_mpuとnum_of_auに差分がある場合は、その差分に相当するAUに対するタイムスタンプ情報が未確定であることを示すようにしてもよい。
　＜第３の変形例＞
　さらに、図２５の第５行目で示されるように、num_of_auがMPUを構成するAU数を示すものとして、タイムスタンプ情報が確定済みのAU数を示すnum_of_vaild_auを導入し、num_of_auとnum_of_vaild_auに差分がある場合は、その差分に相当するAUに対するタイムスタンプ情報が未確定であることを示すようにしてもよい。
　num_of_vaild_auの個数分dts_pts_offsetやpts_offsetといったタイムスタンプ情報を含むようにしても良いし、num_of_auの個数分含むが、num_of_auとnum_of_vaild_auの差分相当は値が無効であるとしてもよい。
　いずれにおいても、確定したタイムスタンプのみを追加して送信することで、受信装置は受信済みのタイムスタンプを更新する処理を不要とすることができる。
　＜第４の変形例＞
　さらに、本技術によってタイムスタンプを更新する場合、受信装置がタイムスタンプ更新の有無を簡単に知る事ができると、更新があった場合のみ処理を行う事が可能になる。
　例えば、図２６の第４行目で示されるように、タイムスタンプの更新の有無を示すupdate_flagを導入することで、受信装置はupdate_flagにより更新有りと示されている場合のみ、更新処理を実施するようにしてもよい。
　＜第５の変形例＞
　また、図２７の第４行目で示されるように、対象となるMPUに対するタイムスタンプ情報が確定し、以降の更新は無いことを示すcomplete_flagを導入することで、受信装置はcomplete_flagにより以降の更新は無いものと示されたMPUに対しては、以降更新処理を行う必要がないと判断する事が可能になる。
　尚、本技術においては、上述したシンタックスに限定されるものではなく、例えば、更新があった場合にカウントアップするカウンタ等によってタイムスタンプ更新の有無を通知するようにしてもよい。
　以上の処理により、グループの構成またはグループ内のタイムスタンプに変更があった場合、変更部分のデコードが開始されるまでに受信されるように、同一のグループに対応づけられるタイムスタンプをまとめて再送信し、受信側にて変更部分の更新を行う事により、動的にグループの構成やタイムスタンプの変更を行うことが可能になる。
　結果として、リアルタイムで入力ソースをエンコードする送信装置では、例えば、シーンチェンジを検出して高い画質で符号化するためにビデオのエンコード方法を動的に変更することが可能になる。
　また、例えば、編集点を挟むために、グループの境界を変更したい場合、デコード時刻や提示時刻が送信済みであっても、変更できるので、編集点を挟むことが可能になる。
　さらに、送信装置が、グループの中で確定したタイムスタンプのみを追加して送信し、受信装置にて追加を行う事により、動的にグループの構成やタイムスタンプの変更を行うことが可能になる。
　この際、一度受信したタイムスタンプを更新する必要がないため、受信装置における受信済みのタイムスタンプを更新する処理を省略することが可能となる。
　さらに、更新の有無を通知することにより、受信装置がタイムスタンプ更新の有無を簡単に知る事ができ、更新があった場合のみ処理を行う事で処理を簡素化することが可能になる。
　＜ソフトウェアにより実行させる例＞
　ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
　図２８は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタ-フェイス１００５が接続されている。バス１００４には、ROM(Read Only Memory)１００２およびRAM(Random Access Memory)１００３が接続されている。
　入出力インタ-フェイス１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。
　CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１ら読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM１００３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。
　以上のように構成されるコンピュータでは、CPU１００１が、例えば、記憶部１００８に記憶されているプログラムを、入出力インタフェース１００５及びバス１００４を介して、RAM１００３にロードして実行することにより、上述した一連の処理が行われる。
　コンピュータ（CPU１００１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア１０１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
　コンピュータでは、プログラムは、リムーバブルメディア１０１１をドライブ１０１０に装着することにより、入出力インタフェース１００５を介して、記憶部１００８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１００９で受信し、記憶部１００８にインストールすることができる。その他、プログラムは、ROM１００２や記憶部１００８に、あらかじめインストールしておくことができる。
　なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
　また、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
　なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
　例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
　また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
　さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
　尚、本技術は、以下のような構成も取ることができる。
＜１＞　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
　前記タイムスタンプパケット化部は、
　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
　送信装置。
＜２＞　前記タイムスタンプパケット化部は、
　　複数の前記タイムスタンプが対応付けられるデータをグループのうち、前記グループ単位で、確定したタイムスタンプのみを追加して、前記タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記確定したタイムスタンプのみが追加された、タイムスタンプパケットを、前記受信装置に再送する
　＜１＞に記載の送信装置。
＜３＞　前記タイムスタンプパケット化部は、
　　複数の前記タイムスタンプが対応付けられるデータのグループ中に、未確定のタイムスタンプがあるとき、前記未確定のタイムスタンプを示す情報を含めて、前記タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記未確定のタイムスタンプを示す情報を含むタイムスタンプパケットを、前記受信装置に再送する
　＜１＞または＜２＞のいずれかに記載の送信装置。
＜４＞　前記タイムスタンプパケット化部は、
　　複数の前記タイムスタンプが対応付けられるデータのグループの、前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含めて、前記タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループの前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含むタイムスタンプパケットにパケット化して、前記受信装置に再送する
　＜１＞乃至＜３＞のいずれかに記載の送信装置。
＜５＞　前記多重化部は、前記受信装置において、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される所定時間だけ前に受信されるタイミングで、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
　＜１＞乃至＜４＞のいずれかに記載の送信装置。
＜６＞　タイムスタンプをタイムスタンプパケットにパケット化し、
　前記タイムスタンプが対応付けられるデータをエンコードし、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化し、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信するステップを含ませ、
　前記タイムスタンプパケットにパケット化するタイムスタンプパケット化ステップの処理は、
　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化ストリームを生成して受信装置に送信するステップの処理は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
　送信方法。
＜７＞　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部としてコンピュータに実行させ、
　前記タイムスタンプパケット化部は、
　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
　プログラム。
＜８＞　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
　前記タイムスタンプパケット化部は、
　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置において、
　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、
　前記タイムスタンプを記憶するタイムスタンプ記憶部と、
　前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、
　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、
　前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部とを含み、
　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、
　前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
　受信装置。
＜９＞　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコード、または、未提示のタイムスタンプが変更されているとき、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させる
　＜８＞に記載の受信装置。
＜１０＞　前記更新管理部は、確定した前記タイムスタンプのみが追加された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記追加されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させる
　＜８＞または＜９＞に記載の受信装置。
＜１１＞　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
　前記タイムスタンプパケット化部は、
　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置の受信方法において、
　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離し、
　前記タイムスタンプを記憶し、
　記憶される前記タイムスタンプの更新を管理し、
　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードし、
　前記記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御するステップを含み、
　記憶される前記タイムスタンプの更新を管理する管理ステップの処理は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、記憶されている前記タイムスタンプを更新して記憶させ、
　前記タイミングを制御する制御ステップの処理は、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
　受信方法。
＜１２＞　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
　前記タイムスタンプパケット化部は、
　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置を制御するコンピュータに、
　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、
　前記タイムスタンプを記憶するタイムスタンプ記憶部と、
　前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、
　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、
　前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部として機能させ、
　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、
　前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
　プログラム。
　１１　送信装置，　３１　エンコーダ，　３２　エンコーダバッファ，　３３　エンコードデータパケット化部，　３４　同期制御部，　３５　制御情報パケット化部，　３６　多重化部，　７０　受信装置，　７１　多重化分離部，　７２　STC管理部，　７３　同期再生制御部，　７４　タイムスタンプFIFO，　７５－１乃至７５－ｎ　バッファ，　７６－１乃至７６－ｎ　デコーダ，　７７　表示部，　９１　更新管理部，　９２　タイムスタンプメモリ，　１２１　更新管理部，　２０１　制御情報パケット化部，　２２１　更新管理部

Claims (12)

  1. 　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
    　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
    　前記タイムスタンプパケット化部は、
    　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
    　送信装置。
  2. 　前記タイムスタンプパケット化部は、
    　　複数の前記タイムスタンプが対応付けられるデータをグループのうち、前記グループ単位で、確定したタイムスタンプのみを追加して、前記タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記確定したタイムスタンプのみが追加された、タイムスタンプパケットを、前記受信装置に再送する
    　請求項１に記載の送信装置。
  3. 　前記タイムスタンプパケット化部は、
    　　複数の前記タイムスタンプが対応付けられるデータのグループ中に、未確定のタイムスタンプがあるとき、前記未確定のタイムスタンプを示す情報を含めて、前記タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループ内で、前記未確定のタイムスタンプを示す情報を含むタイムスタンプパケットを、前記受信装置に再送する
    　請求項１に記載の送信装置。
  4. 　前記タイムスタンプパケット化部は、
    　　複数の前記タイムスタンプが対応付けられるデータのグループの、前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含めて、前記タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記グループの前記タイムスタンプを、前記タイムスタンプの更新の有無、または、完了を示す情報を含むタイムスタンプパケットにパケット化して、前記受信装置に再送する
    　請求項１に記載の送信装置。
  5. 　前記多重化部は、前記受信装置において、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される所定時間だけ前に受信されるタイミングで、前記変更または追加が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
    　請求項１に記載の送信装置。
  6. 　タイムスタンプをタイムスタンプパケットにパケット化し、
    　前記タイムスタンプが対応付けられるデータをエンコードし、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化し、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信するステップを含ませ、
    　前記タイムスタンプパケットにパケット化するタイムスタンプパケット化ステップの処理は、
    　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化ストリームを生成して受信装置に送信するステップの処理は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
    　送信方法。
  7. 　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
    　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部としてコンピュータに実行させ、
    　前記タイムスタンプパケット化部は、
    　　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する
    　プログラム。
  8. 　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
    　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
    　前記タイムスタンプパケット化部は、
    　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置において、
    　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、
    　前記タイムスタンプを記憶するタイムスタンプ記憶部と、
    　前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、
    　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、
    　前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部とを含み、
    　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、
    　前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
    　受信装置。
  9. 　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコード、または、未提示のタイムスタンプが変更されているとき、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させる
    　請求項８に記載の受信装置。
  10. 　前記更新管理部は、確定した前記タイムスタンプのみが追加された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記追加されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させる
    　請求項８に記載の受信装置。
  11. 　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
    　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
    　前記タイムスタンプパケット化部は、
    　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置の受信方法において、
    　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離し、
    　前記タイムスタンプを記憶し、
    　記憶される前記タイムスタンプの更新を管理し、
    　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードし、
    　前記記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御するステップを含み、
    　記憶される前記タイムスタンプの更新を管理する管理ステップの処理は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、記憶されている前記タイムスタンプを更新して記憶させ、
    　前記タイミングを制御する制御ステップの処理は、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
    　受信方法。
  12. 　タイムスタンプをタイムスタンプパケットにパケット化するタイムスタンプパケット化部と、
    　前記タイムスタンプが対応付けられるデータをエンコードするエンコード部と、
    　前記エンコード部によりエンコードされたエンコードデータをデータパケットにパケット化するデータパケット化部と、
    　前記タイムスタンプパケットと、前記データパケットとを多重化し、多重化ストリームを生成して受信装置に送信する多重化部とを含み、
    　前記タイムスタンプパケット化部は、
    　複数の前記タイムスタンプが対応付けられるデータをグループとして、前記グループ単位で、複数のタイムスタンプをタイムスタンプパケットにパケット化し、
    　前記グループの構成、または、前記グループ内のタイムスタンプに変更が発生した場合、変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプを、タイムスタンプパケットにパケット化し、
    　前記多重化部は、前記受信装置において、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプに対応する前記エンコードデータのデコードが開始される前に受信されるタイミングで、前記変更が発生した前記グループの構成、または、前記グループ内のタイムスタンプの、前記タイムスタンプパケットを、前記受信装置に再送する送信装置より送信されてくる前記多重化ストリームを受信する受信装置を制御するコンピュータに、
    　前記多重化ストリームより、前記タイムスタンプと、エンコードされている前記タイムスタンプに対応付けられるデータとに分離する分離部と、
    　前記タイムスタンプを記憶するタイムスタンプ記憶部と、
    　前記タイムスタンプ記憶部に記憶される前記タイムスタンプの更新を管理する更新管理部と、
    　前記分離部により分離された、エンコードされている前記タイムスタンプに対応付けられるデータをデコードするデコード部と、
    　前記タイムスタンプ記憶部に記憶されている、前記タイムスタンプの情報に基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する同期制御部として機能させ、
    　前記更新管理部は、再送された前記タイムスタンプが送信されてくる場合、前記グループ内の前記タイムスタンプのうち、前記未デコードのタイムスタンプを、前記再送されたタイムスタンプに基づいて、前記タイムスタンプ記憶部に記憶されている前記タイムスタンプを更新して記憶させ、
    　前記同期制御部は、前記タイムスタンプ記憶部に、更新されて記憶されている前記タイムスタンプに基づいて、前記エンコードされている前記タイムスタンプに対応付けられるデータをデコードするタイミングと、前記デコードされた、前記タイムスタンプに対応付けられるデータを提示するタイミングとを制御する
    　プログラム。
PCT/JP2016/070084 2015-07-21 2016-07-07 送信装置、および送信方法、受信装置、および受信方法、並びにプログラム WO2017014054A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/735,667 US10567852B2 (en) 2015-07-21 2016-07-07 Transmission device, transmission method, reception device, reception method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-144419 2015-07-21
JP2015144419A JP2017028463A (ja) 2015-07-21 2015-07-21 送信装置、および送信方法、受信装置、および受信方法、並びにプログラム

Publications (1)

Publication Number Publication Date
WO2017014054A1 true WO2017014054A1 (ja) 2017-01-26

Family

ID=57833953

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/070084 WO2017014054A1 (ja) 2015-07-21 2016-07-07 送信装置、および送信方法、受信装置、および受信方法、並びにプログラム

Country Status (3)

Country Link
US (1) US10567852B2 (ja)
JP (1) JP2017028463A (ja)
WO (1) WO2017014054A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2762400C1 (ru) * 2018-02-22 2021-12-21 Долби Интернешнл Аб Способ и устройство обработки вспомогательных потоков медиаданных, встроенных в поток mpeg-h 3d audio
US20220120852A1 (en) * 2020-10-21 2022-04-21 Infineon Technologies Ag Modular sequencer for radar applications

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015001783A1 (ja) * 2013-07-03 2015-01-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ データ送信方法、データ再生方法、データ送信装置およびデータ再生装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6137834A (en) * 1996-05-29 2000-10-24 Sarnoff Corporation Method and apparatus for splicing compressed information streams
US7298741B2 (en) * 2003-02-27 2007-11-20 Sharp Laboratories Of America, Inc. Robust MPEG-2 multiplexing system and method using an adjustable time stamp
JP6237547B2 (ja) 2013-03-14 2017-11-29 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP6652320B2 (ja) * 2013-12-16 2020-02-19 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 送信方法、受信方法、送信装置及び受信装置
EP3280150A1 (en) * 2015-03-31 2018-02-07 Panasonic Intellectual Property Corporation of America Transmission method, reception method, transmission device and reception device
US9723610B2 (en) * 2015-04-07 2017-08-01 Qualcomm Incorporated Multi-layer timing synchronization framework

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015001783A1 (ja) * 2013-07-03 2015-01-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ データ送信方法、データ再生方法、データ送信装置およびデータ再生装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"ARIB STD-B60 Version 1.2", 17 March 2015 (2015-03-17), pages 4,5,9 - 12,29-48,75,106,107, Retrieved from the Internet <URL:http://arib.or.jp/english/ html/overview/doc/2-STD-B60vl_2.pdf> [retrieved on 20160830] *

Also Published As

Publication number Publication date
US10567852B2 (en) 2020-02-18
US20190230420A1 (en) 2019-07-25
JP2017028463A (ja) 2017-02-02

Similar Documents

Publication Publication Date Title
JP6302274B2 (ja) 送信装置及び受信装置
KR101967818B1 (ko) 수신 장치 및 그 수신 방법
KR102471088B1 (ko) Mmtp 스트림을 mpeg-2 ts로 변환하는 방법 및 장치
US10334293B2 (en) Multiplexing apparatus, receiving apparatus, multiplexing method, and delay adjustment method
JP6617809B2 (ja) 復号装置、復号方法、および復号用プログラム
US20200221160A1 (en) Decoding device, reception device, transmission device, transmission/reception system, decoding method, and storage medium having decoding program stored therein
WO2017014054A1 (ja) 送信装置、および送信方法、受信装置、および受信方法、並びにプログラム
JP6957186B2 (ja) 情報処理装置、情報処理方法、プログラム、および記録媒体製造方法
WO2017082059A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP4564350B2 (ja) 信号処理装置
US20140369425A1 (en) Elementary stream multiplexing method, multiplexing system, encoding or decoding method and apparatus
WO2017033764A1 (ja) 記録装置、および記録方法、並びにプログラム
JP5367771B2 (ja) 映像伝送システム
JP7024353B2 (ja) Ｍｐｕ処理装置、送信装置、ｍｐｕ処理方法及びプログラム
JP6684433B2 (ja) 送信装置、送信方法、並びに、プログラム
US20050057686A1 (en) Method and apparatus for sending and receiving and for encoding and decoding a telop image
JP3978814B2 (ja) 送信装置とその方法、受信装置、および、伝送装置
US8275246B2 (en) Digital content reproducing and storing apparatus, digital content reproducing and storing method, digital content storing apparatus, digital content reproducing apparatus, and computer readable medium storing digital content reproducing and storing program
US10178040B2 (en) Data processing device, receiving device, data processing method, and program
JP2009231920A (ja) コンテンツ符号化装置及びコンテンツ符号化／多重化装置
JP2009100114A (ja) データ記録再生方法
JP2006262465A (ja) バッファに貯蔵されたパケットからタイムスタンプをパーシングしてビデオ同期化を実行する装置及び方法
JP2004158921A (ja) データ送信装置及びデータ受信装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16827616

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16827616

Country of ref document: EP

Kind code of ref document: A1