JP6728246B2 - マルチメディアシステムにおける信号送受信方法及び装置 - Google Patents

マルチメディアシステムにおける信号送受信方法及び装置 Download PDF

Info

Publication number
JP6728246B2
JP6728246B2 JP2017566110A JP2017566110A JP6728246B2 JP 6728246 B2 JP6728246 B2 JP 6728246B2 JP 2017566110 A JP2017566110 A JP 2017566110A JP 2017566110 A JP2017566110 A JP 2017566110A JP 6728246 B2 JP6728246 B2 JP 6728246B2
Authority
JP
Japan
Prior art keywords
event
mmt
information
message
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2017566110A
Other languages
English (en)
Other versions
JP2018524904A (ja
Inventor
ヤン,ヒョン−ク
イ,ビョン−デ
リュ,ヨン−ソン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industry Academic Cooperation Foundation of Kyonggi University
Original Assignee
Industry Academic Cooperation Foundation of Kyonggi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industry Academic Cooperation Foundation of Kyonggi University filed Critical Industry Academic Cooperation Foundation of Kyonggi University
Priority claimed from PCT/KR2016/006678 external-priority patent/WO2016208988A1/en
Publication of JP2018524904A publication Critical patent/JP2018524904A/ja
Application granted granted Critical
Publication of JP6728246B2 publication Critical patent/JP6728246B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • H04N21/6543Transmission by server directed to the client for forcing some client operations, e.g. recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6581Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

本発明はマルチメディアシステムにおいて信号を送受信する方法及び装置に関するもので、特にマルチメディアシステムでイベントに関連したイベント情報を送受信する方法及び装置に関する。
マルチメディアサービスは、テレビ電話のような対話形サービス、ビデオオンデマンド(VOD)サービスのようなストリーミングサービス、マルチキャスト及びブロードキャストサービスのようなサービスを意味する。
リアルタイムマルチメディアサービスは、サービスのタイプに従って対話形サービス、インタラクティブサービス、ストリーミングサービスに分類される。また、リアルタイムマルチメディアサービスは、参加するユーザーの数によってユニキャスト、マルチキャスト、及びブロードキャストに分類され得る。
一方、MPEG-2TS(Moving Picture Experts Group-2 Transport Stream)は、マルチメディアコンテンツの伝送に使用される技術であって、エラーが存在する伝送環境で複数のブロードキャストプログラム(符号化された複数のビデオビットストリーム)が多重化されたビットストリームを転送するための代表的な転送技術である。
MPEG技術に基づいてマルチメディアサービスをサポートするためのマルチメディア転送技術のうちの一つとして、MMT(MPEG Media Transport)技術が提案されている。MMT技術は、様々なタイプのネットワーク環境で、テレビ(TV)、モバイルデバイスのような多様な端末を通じて多様なタイプのマルチメディアサービスをスムーズに提供するためのMPEGの新たな技術である。例えば、MMT技術は、ヘテロジニアスネットワーク(heterogeneous network)を介して複合コンテンツを効率的に伝送するために適用され得る。ここで、複合コンテンツは、ビデオ、オーディオ、アプリケーションによるマルチメディアエレメントを有するコンテンツの集合を意味する。ヘテロジニアスネットワークは、例えばブロードキャストネットワークと移動通信ネットワークなどを含むネットワークであり得る。
一方、ブロードキャストネットワークは、通信ネットワークと有機的に相互作用(interwork)するハイブリッド転送技術に基づいてアプリケーションプログラムサービスをサポートするために、ブロードキャストネットワーク又は通信ネットワークを用いてアプリケーションプログラムサービスを実行するために必要なデータ又はファイル受信し、端末がアプリケーションプログラムサービス及びアプリケーションプログラムサービスに関連したデータを認識及び選択可能なようにシグナリング情報を提供する必要がある。
したがって、MMT技術を使用するシステムにおいて、アプリケーションプログラムサービスを提供するためのシグナリング情報を送受信する方案に対する必要性があった。
一方、上記した情報は、本発明の理解を助けるための背景情報のみとして提示されるだけである。上記のいずれかが本発明に関する従来技術として適用されるか否かに関しては、何の決定も判定も下されていない。
したがって、本発明は、上記した従来技術の問題点に鑑みてなされたものであって、その目的は、マルチメディアシステムにおける信号を送受信する装置及び方法を提供することにある。
本発明の他の目的は、マルチメディアシステムにおけるイベント(event)に関連したイベント情報を送受信する装置及び方法を提供することにある。
さらに、本発明の他の目的は、マルチメディアシステムにおいてイベントに関連したイベント情報をマルチメディアサービスと共に提供する装置及び方法を提供することにある。
上記のような目的を達成するために、本発明の一態様によれば、マルチメディアシステムにおける送信装置の動作方法が提供される。その方法は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットを送信するステップを有し、上記イベントは、アクションが取られることを示しアプリケーションに対する通知を含む。
本発明の他の態様によれば、マルチメディアシステムにおける送信装置の動作方法が提供される。その方法は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットの存在を示す第1の情報を送信するステップを有し、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
また、本発明の他の態様によれば、マルチメディアシステムにおける受信装置の制御方法が提供される。その方法は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットを受信するステップを有し、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
本発明の他の態様によれば、マルチメディアシステムにおける受信装置の制御方法が提供される。その方法は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットの存在を示す第1の情報を受信するステップを有し、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
さらに、本発明の他の態様によれば、マルチメディアシステムにおける送信装置が提供される。その送信装置は、イベントに関連するイベント情報を含むマルチメディアサービスのデータパケットを送信する送信器を含み、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
本発明の他の態様によれば、マルチメディアシステムにおける送信装置が提供される。その送信装置は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットの存在を示す第1の情報を送信する送信器を含み、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
さらに、本発明の他の態様によれば、マルチメディアシステムにおける受信装置が提供される。その受信装置は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットを受信する受信器を含み、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
本発明の他の態様によれば、マルチメディアシステムにおける受信装置が提供される。その受信装置は、イベントに関連するイベント情報を含むマルチメディアサービスのデータユニットの存在を示す第1の情報を含むメッセージを受信する受信器を含み、上記イベントは、アクションが取られることを示すアプリケーションに対する通知を含む。
本発明の他の態様、利点、及び顕著な特徴は、下記の詳細な説明から当業者には公知であり、その詳細な説明は、添付の図面とともに本発明の実施形態で開示する。
本発明を詳細に説明するのに先立って、本明細書の全般にわたって使用される特定の単語及び語句の定義を開示することが望ましい。“含む(include)”及び “備える(comprise)”という語句だけではなく、その派生語(derivatives thereof)は、限定されない含有(inclusion)を意味する。“又は(or)”という用語は、“及び/又は(and/or)”の意味を包括する。“関連した(associated with)”及び“それと関連した(associated therewith)”という語句だけではなく、その派生語句は、“含む(include)”、“含まれる(be included within)”、“相互に接続する(interconnect with)”、“包含する(contain)”、“包含される(be contained within)”、“接続する(connect to or with)”、“結合する(couple to or with)”、“疎通する(be communicable with)”、“協力する(cooperate with)”、“相互配置する(interleave)”、“並置する(juxtapose)”、“近接する(be proximate to)”、“接する(be bound to or with)”、“有する(have)”、及び“特性を有する(have a property of)”などを意味することができる。制御器は、少なくとも1つの動作を制御する装置、システム又はその部分を意味するもので、ハードウェア、ファームウェア、ソフトウェア、又は、それらのうちの2つ以上の組合せで実現することができる。特定の制御部に関連する機能は、集中しているか、あるいは近距離、又は遠距離に分散されることもあることに留意すべきである。特定の単語及び語句に関するこのような定義は、本明細書の全般にわたって規定されるもので、当業者には、大部分の場合ではなくても、多くの場合において、このような定義がそのように定義された単語及び語句の先行使用にはもちろん、将来の使用にも適用されるものであることが自明である。
本発明による実施形態の上記及び他の態様、特徴、及び利点は、添付の図面と共に述べる以下の詳細な説明から、一層明らかになるはずである。
本発明は、マルチメディアシステムにおいて信号を送受信することを可能にする効果がある。
また、本発明は、マルチメディアシステムにおいてイベントに関連したイベント情報を送受信することができる効果がある。
さらに、本発明は、マルチメディアシステムにおいてイベントに関連したイベント情報をマルチメディアサービスと共に提供することができる効果がある。
本発明の一実施形態によるMMTシステムの階層構造を概略的に示す図である。 本発明の一実施形態によるMMTシステムにおけるMMTペイロードの構成を概略的に示す図である。 本発明の一実施形態によるMMTシステムにおけるMMTパッケージの論理的構成を概略的に示す図である。 本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスを実行するための端末の動作プロセスを概略的に示す図である。 本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスに関連した情報を受信する装置の内部構造を概略的に示す図である。 本発明の一実施形態によるMMTシステムにおいてMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスを概略的に示す図である。 本発明の一実施形態によるMMTシステムにおいてMPUに基づいてイベント情報を処理するプロセスを概略的に示す図である。 本発明の一実施形態によるMMTシステムにおける送信装置の内部構成を概略的に示す図である。 本発明の一実施形態によるMMTシステムにおける受信装置の内部構成を概略的に示す図である。
以下、本発明の望ましい実施形態を添付の図面を参照して詳細に説明する。
図面において、同一の構成要素に対しては、できるだけ同一の参照符号及び参照番号を付して説明する。
添付の図面を参照した下記の説明は、特許請求の範囲の記載及びこれと均等なものの範囲内で定められるような本発明の実施形態の包括的な理解を助けるために提供するものであり、この理解を助けるための様々な特定の詳細を含むが、一つの実施形態に過ぎない。従って、本発明の範囲及び趣旨を逸脱することなく、ここに説明する実施形態の様々な変更及び修正が可能であるということは、当該技術分野における通常の知識を有する者には明らかである。なお、公知の機能又は構成に関する具体的な説明は、明瞭性と簡潔性のために省略する。
次の説明及び請求項に使用する用語及び単語は、辞典的意味に限定されるものではなく、発明者により本発明の理解を明確且つ一貫性があるようにするために使用する。従って、特許請求の範囲とこれと均等なものに基づいて定義されるものであり、本発明の実施形態の説明が単に実例を提供するためのものであって、本発明の目的を限定するものでないことは、本発明の技術分野における通常の知識を持つ者には明らかである。
英文明細書に記載の“a”、“an”、及び“the”、すなわち単数形は、コンテキスト中に特記で明示されない限り、複数形を含むことは、当業者には理解できることである。したがって、例えば、“コンポーネント表面(a component surface)”との記載は一つ又は複数の表面を含む。
‘第1’、‘第2’のように序数を含む用語は多様な構成要素を説明するために使用されるが、構成要素は、上記用語により限定されない。これらの用語は、一つの構成要素を他の構成要素から区別する目的のみで使われる。例えば、本発明の権利範囲を外れることなく、第1の構成要素は第2の構成要素と称され、同様に第2の構成要素も第1の構成要素と称され得る。‘及び/又は’という用語は、複数の関連した記載項目の組み合わせ又は複数の関連した記載項目のうち何れかの項目を含む。
コンテキスト中に特記して明示されない限り、単数形が複数形を含むことは、当業者には容易に分かることであろう。また、‘含む’又は‘有する’などの用語は、明細書上に記載された特徴、数字、段階、動作、構成要素、部品又はこれらの組合せが存在することを指定しようとするものであって、一つ又はそれ以上の他の特徴、数字、段階、動作、構成要素、部品、若しくはこれらの組合せが、存在する或いは付加される可能性を予め排除しないことが理解されなければならない。
また、別途に異なる定義をしない限り、技術的又は科学的な用語を含めて、ここで使われるすべての用語は本発明が属する技術分野で通常の知識を有する者により一般的に理解されることと同一の意味を有する。一般的に使用される辞書に定義されるような用語は関連技術の文脈上の意味と一致する意味を有すると理解されなければならない。
本発明の多様な実施形態によると、電子デバイスは、通信機能を有する。例えば、電子デバイスは、スマートフォン、パーソナルコンピュータ(PC)、携帯電話、テレビ電話、電子書籍リーダ、デスクトップPC、ラップトップPC、ネットブックPC、PDA(Personal Digital Assistant)、PMP(Portable Multimedia Player)、mp3プレーヤー、モバイル医療デバイス、カメラ、ウェアラブルデバイス(例えば、HMD(Head-Mounted Device)、電気衣類、電子ブレース(electronic brace)、電子ネックレス、電子アクセサリ、電子タトゥー、又はスマート時計)であってもよい。
本発明の実施形態によると、電子デバイスは、通信機能を有するスマート家電であってもよい。スマート家電は、例えばテレビジョン、DVD(Digital Video Disk)プレーヤー、オーディオ、冷蔵庫、エアコン、電気掃除機、オーブン、電子レンジ、洗濯機、ドライヤー、空気清浄器、セットトップボックス、TVボックス(例えば、Samsung HomeSync(登録商標)、Apple TV(登録商標)、又はGoogle TV(登録商標))、ゲーム機、電子辞書、電子キー、カムコーダ、電子ピクチャーフレームであってもよい。
本発明の実施形態によると、電子デバイスは、医療機器(例えば、MRA(Magnetic Resonance Antiography)装置、MRI(Magnetic Resonance Imaging)装置、CT(Computed Tomography)機器、映像機器、又は超音波装置)、ナビゲーション機器、GPS(Global Positioning System)受信器、イベントデータレコーダ(Event Data Recorder:EDR)、フライトデータレコーダ(Flight Data Recorder:FDR)、自動車用インフォテインメント装置、航海電子装置(例えば、航海ナビゲーション装置、ジャイロスコープ、又はコンパス)、航空電子機器、セキュリティ機器、産業又は個人用ロボットであってもよい。
本発明の実施形態によると、電子デバイスは、通信機能を有する家具、ビル/構造物の一部、電子ボード、電子署名受信器、プロジェクタ、多様な測定装置(例えば、水、電気、ガス、又は電磁波測定装置)であってもよい。
本発明の他の実施形態によると、電子デバイスは、上記した装置の組み合わせであってもよい。また、本発明の実施形態による電子デバイスは、上記装置に制限されるものではないことは、当該技術分野における通常の知識を持つ者には明らかである。
本発明の多様な実施形態によると、例えば、端末は電子デバイスであってもよい。
さらに、本発明の多様な実施形態によると、送信装置は、サービスプロバイダ又は端末であり得る。
また、本発明の多様な実施形態によると、受信装置は、端末又はサービスプロバイダであってもよい。
さらに、本発明の多様な実施形態によると、送受信装置は、端末又はサービスプロバイダであってもよい。
また、本発明の多様な実施形態において、端末は、移動端末(MS)、無線端末、移動デバイス、ユーザー端末(UE)のような用語と混用できると仮定する。
本発明の一実施形態では、マルチメディアシステムにおける信号を送受信する装置及び方法を提案する。
また、本発明の一実施形態では、マルチメディアシステムにおいてイベントに関連したイベント情報を送受信する装置及び方法を提案する。
さらに、本発明の一実施形態では、マルチメディアシステムでイベントに関連したイベント情報をマルチメディアサービスと共に提供する装置及び方法を提案する。
一方、本発明の一実施形態で提案する方法及び装置は、LTE(Long Term Evolution)移動通信システム、LTE-A(LTE-Advanced)移動通信システム、LAA(Licensed-Assisted Access)-LTE移動通信システム、高速ダウンリンクパケットアクセス(HSDPA)移動通信システム、高速アップリンクパケットアクセス(HSUPA)移動通信システム、3GPP2(3rd Generation Partnership Project2)の高速レートパケットデータ(HRPD)移動通信システム、3GPP2の広帯域符号分割多重アクセス(WCDMA(登録商標))移動通信システム、3GPP2の符号分割多重アクセス(CDMA)移動通信システム、IEEE(Institute of Electrical and Electronics Engineers)802.16m通信システム、IEEE802.16e通信システム、進化したパケットシステム(EPS)、モバイルインターネットプロトコル(Mobile IP)システム、デジタルマルチメディア放送(DMB)サービス、携帯用デジタルビデオ放送(DVP-H)、及びモバイル/携帯用進化したテレビシステム協会(ATSC-M/H)サービスのようなモバイル放送サービスと、インターネットプロトコルテレビ(IPTV)サービスのようなデジタルビデオ放送システムと、MPEG(Moving Picture Experts Group)メディア伝送(MMT)システムのような多様な通信システムに適用可能である。
また、本発明の一実施形態で提案する方法及び装置は、MMT方式に基づいた進化したテレビシステム協会(ATSC)システムにも適用できる。
以下、説明の便宜上、本発明の多様な実施形態において、マルチメディアシステムは、MMT方式に基づいたシステムと仮定する。
まず、MMTプロトコル(MMTP)は、インターネットプロトコル(IP)ネットワークを介してMMTペイロードフォーマット(PF)を含む配信フレーム(delivery frame)を配信するためのアプリケーションレイヤプロトコルを定義する。
MMTペイロードは、MMTペイロードフォーマットを含み、効率的に伝送できるように設計される。ヘテロジニアスIPネットワークを介してMPEGメディアデータを効率的に配信するために、MMTPはカプセル化フォーマットと、配信プロトコルと、シグナリングメッセージフォーマットを定義する。
MMT技術では、パッケージとアセットのようなデータモデルを定義する。パッケージは、一本の映画のような一つの独立したコンテンツを意味し、アセットはコンテンツに含まれる映像、音声、又はデータのようなエレメントを区別する論理的個体を意味する。ここで、一つのパッケージは、複数のアセットを含むことができる。以下、説明の便宜上、アセットは“MMTアセット”と称することができ、パッケージは“MMTパッケージ”とも称することができる。
図1を参照して、本発明の一実施形態によるMMTシステムの階層構造について説明する。
図1は、本発明の一実施形態によるMMTシステムの階層構造を概略的に示す。
図1を参照すれば、MMTシステムの階層構造は、マルチメディアデータパケットを構成し、マルチメディアデータパケットを伝送するメディア符号化レイヤ110、カプセル化機能レイヤ120、配信機能レイヤ130、転送プロトコルレイヤ140、IPレイヤ150、及び制御機能レイヤ100を含む。カプセル化機能レイヤは“レイヤE”との用語に置き換えることができ、配信機能レイヤは“レイヤD”との用語に置き換えることができ、制御機能レイヤは“レイヤC”との用語に置き換えることができる。
本発明の一実施形態によると、メディア符号化レイヤ110とカプセル化機能レイヤ120は、マルチメディアコンテンツ及び/又はマルチメディアサービスによるマルチメディアデータを生成するマルチメディアデータ生成部として動作する。
また、配信機能レイヤ130は、マルチメディアデータ生成部から入力されるマルチメディアデータに基づいてマルチメディアデータパケットを構成するマルチメディアデータ構成部として動作する。マルチメディアデータ構成部に該当する配信機能レイヤ130は、マルチメディアデータ生成部から提供された少なくとも一つのマルチメディアデータを識別してヘッダー情報を構成し、このヘッダー情報と少なくとも一つのマルチメディアデータとを結合してマルチメディアデータパケットを構成する。
メディア符号化レイヤ110で圧縮されたマルチメディアデータは、カプセル化機能レイヤ120を通じてファイルフォーマットに類似したフォーマットとしてパッケージ化される。すなわち、カプセル化機能レイヤ120は、メディア符号化レイヤ110から提供される符号化されたメディアデータ又は格納されたメディアデータに基づいて、MMTサービスのためのユニットとしてデータセグメントを生成し、データセグメントを用いてMMTサービスのためのアクセスユニットを生成する。ここで、アクセスユニットは、タイミング情報が与えられる最も小さいメディアデータエンティティを示す。また、カプセル化機能レイヤ120は、アクセスユニットを結合及び/又は分割することにより、複合コンテンツの生成、格納、及び転送のためのパケットフォーマットを生成する。
配信機能レイヤ130は、カプセル化機能レイヤ120から出力されるデータユニットをMMTペイロードフォーマットに変換した後、MMTペイロードフォーマットにMMT転送パケットヘッダーを付加してMMT転送パケットを構成するか、あるいは、既存の転送プロトコルとしてリアルタイムプロトコル(RTP)を用いてRTPパケットを構成する。
配信機能レイヤ130で構成されたパケット、すなわちMMT転送パケット又はRTPパケットは、ユーザーデータグラムプロトコル(UDP)あるいはトランスポート制御プロトコル(TCP)のようなプロトコルをサポートする転送プロトコルレイヤ140を経た後、IPレイヤ150でIPパケットとして生成され、生成されたIPパケットが伝送される。転送プロトコルレイヤ140及びIPレイヤ150は、データ転送部として動作できる。
さらに、選択的に存在できる制御機能レイヤ100は、データの転送に必要な制御情報又はシグナリング情報を生成してデータと共に送信するか、あるいは、別途のシグナリング手段により制御情報又はシグナリング情報を送信する。
一方、配信機能レイヤ130で生成されるMMTペイロードフォーマットは、MMTプロトコル又はRTPにより配信されるメディアユニットの論理構造を定義する。
MMTペイロードは、カプセル化されたデータユニットあるいはMMTレイヤプロトコル又は他の既存のアプケーション転送プロトコルによる他の情報を配信するためのペイロードフォーマットにより特定される。MMTペイロードは、ストリーミングに関する情報及びファイル転送に関する情報を提供する。
ストリーミングにおいて、データユニットは、MMTメディアフラグメントユニット(MFU)又はMMTメディアプロセッシングユニット(MPU)であり得る。以下、説明の便宜上、MMT MFUは“MFU”とも称され、MMT MPUは“MPU”とも称されることに留意しなければならない。
また、ファイル転送の場合、データユニットは、MMTアセット及びMMTパッケージであり得る。
本発明の一実施形態によるMMTシステムの階層構造について図1を参照して説明し、次に本発明の一実施形態によるMMTシステムでMMTペイロードの構成について図2を参照して説明する。
図2は、本発明の一実施形態によるMMTシステムにおけるMMTペイロードの構成を概略的に示す。
図2を参照すると、MMTペイロード200は、少なくとも一つのMMT MFU210、少なくとも一つのMMT MPU220、少なくとも一つのMMTアセット230、及びMMTパッケージのうち少なくとも一つを含むことができる。
MMT MFU210は、いかなるメディアCODECからも独立しており、メディアデコーダにより独立的に復号化可能な符号化されたメディアデータを含む一般的なコンテナを意味する。
MMT MFU210は、MMT MPU220のフラグメントを示し、独立的に復号化可能な最小単位である。例えば、一つのフレームをアクセスユニットとして使用して符号化動作が実行される場合、MMT MFU210は、一つのビデオフレームであり、あるいは一つのフレーム内に含まれた一つのスライスであり得る。
MMT MPU220は、一つ以上のMMT MFUと付加的な配信及びプロセッシング関連情報を含むコンテナであって、異なるアクセスユニットから生成された多様な個数のMMT MFUを含むことができる。MMT MPU220は、MMTに準拠したエンティティによって完全で独立的に復号化可能な符号化されたメディアデータユニットを意味し、アプリケーション環境による特定のサイズを有する。例えば、ビデオの場合、MMT MPU220は、1GOP(Group of Picture)のサイズを有することができる。他の例として、MMT MPU220は、1GOPに含まれる複数のピクチャーフレームを含み、MMT MFU210は、各ピクチャーフレームを含むことができる。例えば、1GOPは、1秒のビデオであり得る。MMTアセット230は、一つ以上のMMT MPUで構成されるデータエンティティであって、同一のMMT構成情報(Composition Information)(MMT-CI)及びMMT転送特性(MMT-TC)が適用される最も大きいデータユニットである。MMTアセット230は、パッケージ化されたあるいは多重化されたデータを含むただ一つのタイプのデータのみを含む。例えば、各MMTアセット230は、オーディオのエレメンタリストリームの少なくとも一部、MPEGユーザーインターフェース(MPEG-U)ウィジェットパッケージ、MPEG-2転送ストリームの少なくとも一部、MP4(MPEG-4)ファイルの少なくとも一部、及びMMTパッケージの全体又は少なくとも一部のうちいずれか一つであり得る。
以下、説明の便宜上、エレメンタリストリームは“ES”と称され、転送ストリームは“TS”とも称され、MMT-CIは“CI”とも称され、MMT-TCは“転送特性(TC)”とも称されることに留意しなければならない。ここで、エレメンタリストリームは、特定メディアコーデック(CODEC)により定義され、論理的に一つ以上のMMTアセットであり得る。階層化コーデック及びマルチビューコーデックをサポートするMMTアセット230は、他のMMTアセットとオーバーラップされ得る。
また、MMT-CIは、MMTアセットの空間及び時間関係を定義する情報を意味し、MMT-TCは、MMTアセットの配信に要求されるサービス品質(QoS)を定義する。MMT-TCは、特定配信環境に対してアセット配信特性(ADC)で表現できる。
MMTパッケージ240は、MMTに準拠したエンティティにより処理される符号化されたメディアデータと関連情報の集合体(collection)として定義される。
本発明の一実施形態によるMMTシステムにおけるMMTペイロードの構成について図2を参照して説明し、次に図3を参照して、本発明の一実施形態によるMMTシステムにおけるMMTパッケージの論理的構造について説明する。
図3は、本発明の一実施形態によるMMTシステムにおけるMMTパッケージの論理的構造を概略的に示す。
図3を参照すると、MMTパッケージ300は、一つ以上のMMTアセット320とMMT-CI310及びMMT-TCを表す一つ以上のADC330を含む。
さらに、MMTパッケージ300は、識別子(ID)のような記述情報及びMMTアセット320の位置情報を含み、MMTパッケージ300内のMMTアセット320は、多重化又は接続され得る。
MMTパッケージ300の処理は、MPUの単位で実行される。一つ以上のMMTアセット320は、同一のMMTアセットIDを有する一つ以上のMPUの集合体であって、一つ以上のMMTアセット320の各々に関連したTCは、一つ以上のADC330により表現される。一つ以上のADC330は、MMTパッケージ300をパケット化するエンティティによりMMTペイロードのパラメータとMMTパケットのヘッダー情報を構成するために使用できる。
一方、MMTパッケージに関する構成情報及びMMTパッケージに関する構成情報を端末で受信して消費するために必要な情報は、MMTシグナリングメッセージを通じて送信される。MMTシステムにおいて、MMTシグナリング機能領域は、メディア消費とメディア配信に関連したメッセージフォーマットを定義する。
MMTシステムにおいて、メディア消費に関連したメッセージは、伝送されるメディアデータを消費するために必要な情報を提供し、次のように定義される。
まず、MPEG-2TSのプログラムマップテーブル(PMT)に類似した用途で使用されるパッケージアクセス(PA)メッセージは、伝送されるパッケージの再生に必要なすべての情報を含む。PAメッセージは、MMTパッケージを受信及び消費するために初めに送信されなければならないメッセージであり、以後に別途のメッセージを通じて個別情報が更新され得る。
また、表現情報を提供するメディアプレゼンテーション情報(MPI)メッセージは、国際標準化機構(ISO)/国際電気協会(IEC)23008-11で定義されるCI、又はISO/IEC23009-1で定義されるメディアプレゼンテーションディスクリプション(MPD)のような多様な表現情報の伝送に使用される。
さらに、MMTパッケージテーブル(MPT)メッセージは、伝送されるMMTパッケージに関する情報を提供する。このMPTメッセージは、MMTパッケージのID、MMTパッケージも含まれるMMTアセット情報を提供する。説明の便宜上、MPTは“MMTパッケージ(MP)テーブル”と称される。
クロック関連情報(CRI)メッセージは、MMTアセットとMPEG-2ESとの間の同期化のためにネットワークタイムプロトコル(NTP)タイムスタンプとMPEG-2のシステムタイミングクロック(STC)との間のマッピング情報を提供する。
さらに、デバイス能力情報(DCI)メッセージは、メディア消費に必要な端末性能情報を提供する。
一方、放送通信融合及び転送ネットワークの高度化と共に超高画質テレビ(UHDTV)、3次元テレビ(3DTV)、マルチビューTVのような高画質実感型放送サービス技術、多様なタイプの固定型及び携帯用マルチメディアデバイスを有機的に活用するためのNスクリーンサービス技術のような次世代ブロードキャスト及びマルチメディアサービスを可能にする革新的な技術が継続して提案されている。
特に、ブロードキャストプログラムと相互作用することにより多様な付加情報を提供するか、又は、ブロードキャストネットワークと通信ネットワークとを有機的に相互作用させることにより融合型マルチメディアサービスを可能としたハイブリッド伝送技術に基づいて独立的に多様な付加情報を提供するアプリケーションプログラムサービスは、事実感と現場感が極大化した映像コンテンツの提供と共に、次世代放送サービスの核心成功要素と見なされている。以下、説明の便宜上、アプリケーションプログラムサービスは、“アプリケーション”とも称されることに留意しなければならない。
代表的なアプリケーションプログラムサービスの一つは、視聴者参加型サービス、例えば、文字メッセージ、クイズ、投票(poll)、アンケート調査、人気投票、チケット予約、競売、電子クーポン、モバイルダウンロードのようなTV電子商取引、天気、スポーツ、ゲームのような放送プログラムと独立的に提供されるアプリケーションプログラムサービスと、ポータルサービス、ターゲティング広告などを含む。
端末がアプリケーションプログラムサービスをサポートするために、シグナリング情報は、ブロードキャストネットワークまたは通信ネットワークを用いてアプリケーションプログラムサービスを実行するために必要なデータまたはファイルを受信し、アプリケーションプログラムサービス及び関連データを認識及び選択するために要求される。
アプリケーションプログラムサービスに関連するシグナリング情報は、2つのタイプに分けられる。すなわち、シグナリング情報は、アプリケーションプログラムサービスリスト、アプリケーションプログラムサービス名、及び転送情報のような個別サービスに対する全般的な属性を提供するシグナリング情報と、アプリケーションプログラムサービスの動作を制御するイベント情報に分類できる。放送プログラムとインタワーキングされるアプリケーションプログラムサービスは、イベント情報を放送プログラムと共に伝送することによって多様で豊富な放送サービスを提供できる。ここで、イベントは、アクションが取られることを示すアプリケーションプログラムサービスに関する通知(notification)、例えば時限(timed)通知を示す。
図4を参照して、本発明の一実施形態によるMMTシステムにおいて、アプリケーションプログラムサービスを実行するための端末の動作プロセスについて説明する。
図4は、本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスを実行するための端末の動作プロセスを概略的に示す。
図4を参照して、図4に示す端末の動作プロセスが特定時間にターゲティング広告を提供するアプリケーションプログラムサービスを実行するための端末の動作プロセスであることに留意しなければならない。
図4を参照すると、端末は、ステップ405で、要請された放送プログラム(図4に“Show X"で図示)のオーディオストリーム及びビデオストリームをサービスプロバイダから受信して再生する。ステップ410において、端末は、アプリケーションプログラムサービスに関連したシグナリングを提供するチャンネルとしてアプリケーション情報ストリームを通じて放送プログラムに関連したアプリケーションプログラムサービスに関するシグナリング情報を獲得し、必要である場合、ブロードキャストネットワークまたは通信ネットワークを介してアプリケーションプログラムサービスの実行に必要なデータを受信する。以下、説明の便宜上、アプリケーションプログラムサービスに関するシグナリング情報及びデータを“アプリケーション情報”と呼ぶ。
さらに、ステップ415において、端末は、放送プログラムを再生する間に、イベントを提供するチャンネルとしてイベントストリームを通じて送信されるイベント情報を受信し、受信したイベント情報による動作を実行する。一例として、図4では、端末は、Show Xの特定部分、例えば広告が始まる時点で、広告中である製品の付加情報を提供するアプリケーションプログラムサービスYの実行に関連するイベント情報を受信する。端末は、ステップ420で、イベント情報に基づいてアプリケーションプログラムサービスY、すなわち広告サービスを実行する。所定時間後に、アプリケーションプログラムサービスYに対する終了イベントが受信される場合、端末は、ステップ425で、アプリケーションプログラムサービスYを終了する。
MMTシステムでは、メディア消費とメディア配信に関連した多様なシグナリングメッセージを定義する。しかしながら、現在まで提案されているシグナリングメッセージは、パッケージに関する構成情報及びパッケージに含まれる各アセットを受信するために必要な情報を提供する。特に、MPTメッセージで使われるMPTは、パッケージに含まれる各アセットに関する構成情報及び各アセットを受信するために必要な位置情報を定義する。そして、各アセットに関する構成情報及び各アセットの受信に必要な位置情報のような基本情報以外の付加情報は、ディスクリプタを用いて提供され、MPTメッセージは、多様なディスクリプタを格納するコンテナフォーマットを定義する。
MPIテーブルで使用されるMPEG CIは、パッケージに含まれる各アセットに対する端末の論理的画面での位置情報と各アセットの再生に対する時間情報を含むことができる。しかしながら、MPEG CIは、MMT方式に基づいて転送されるアセットに関する制御情報を提供することが主目的であり、MMTプロトコル以外の転送プロトコルを通じて転送されるアプリケーションプログラムサービスに適用することが困難である場合がある。
したがって、本発明の一実施形態では、MMT方式に基づいてアプリケーションプログラムサービスに関連する情報及びアプリケーションプログラムサービスの動作を制御するためのイベント情報を送信する方式を提案し、以下に具体的に説明する。
図5を参照して、本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスに関連した情報を受信する装置の内部構成について説明する。
図5は、本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスに関連した情報を受信する装置の内部構成を概略的に示す。
図5を参照すると、アプリケーションプログラムサービスに関連した情報を受信する装置は、一例として端末であり得る。
上記装置は、データ受信器505、制御器500、シグナリング情報データベース(DB)560、及びサービスディスプレイ570を含む。
データ受信器505は、MMTプロトコル、ROUTE(real-time object delivery over Unidirectional transport)プロトコル、及びハイパーテキスト転送プロトコル(HTTP)のような転送プロトコルのうち少なくとも一つに基づいて通信ネットワークまたはブロードキャストネットワークを介して転送されるパケットを受信するためにMMTデータ受信器510、ROUTEデータ受信器515、HTTPデータ受信器520、及びXXXデータ受信器525のうち少なくとも一つを含み、受信されたパケットをそのタイプに従ってファイルデータ受信器530、メディアデータ受信器540、またはシグナリングデータ受信器550に出力する。ここで、XXXデータ受信器525は、MMTプロトコル、ROUTEプロトコル、HTTP以外の転送プロトコルに基づいて転送されるパケットを受信するデータ受信器を意味する。
ファイルデータ受信器530は、データ受信器505から出力されるパケットを処理してパケットに含まれたデータを獲得し、データをファイルプロセッサ535に出力する。ファイルデータ受信器530は、MMT方式で定義される一般ファイル配信(GFD)モードで転送されるMMTPパケットを受信し、MMTPパケットに基づいたMMTPペイロードを構成し、MMTPペイロードをファイルプロセッサ535に出力する。ファイルデータ受信器530は、多様なファイル転送プロトコルのうちいずれか一つを通じて転送されるパケットを受信し、受信したパケットから希望するデータを抽出し、抽出したデータをファイルプロセッサ535に出力する。ファイルプロセッサ535は、ファイルデータ受信器530から出力されたデータに基づいてファイルを構成する。
メディアデータ受信器540及びメディアプロセッサ545の各々は、メディアデータを処理する。例えば、メディアデータがMMT方式で定義されるMPUである場合、メディアプロセッサ545は、MMTPのMPUモードで伝送されるメディアデータを処理できる。このとき、メディアデータ受信器540は、データ受信器505内のMMTデータ受信器510から出力されたMMTPパケットに従ってMMTPペイロードを構成してMPUを生成し、メディアプロセッサ545は、MPUをサービスディスプレイ570を通じて再生する。
メディアデータがファイルを通じて伝送される場合、ファイルプロセッサ535はメディアプロセッサ545にメディアファイルを出力し、メディアプロセッサ545はメディアファイルをサービスディスプレイ570を通じて再生する。
また、メディアデータがISO/IEC23009-1で定義されたDASH(Dynamic Adaptive Streaming over HTTP)形式に従う場合、メディアプロセッサ545は、ROUTEプロトコルに基づいて転送されたメディアデータを処理できる。このとき、メディアプロセッサ545は、ROUTEデータ受信器515から出力されたROUTEパケットを処理してDASHセグメントを生成し、DASHセグメントをサービスディスプレイ570を通じて再生する。
メディアデータ受信器540は、MPU又はDASHセグメントのようにISOBMFF(ISO Base Media File Format)に従うメディアファイルの全体を生成した後にメディアファイルをメディアプロセッサ545に出力し、あるいはチャンネル転換に要求される時間を短縮するためにメディアファイルの全体が生成される前に生成されたメディアファイルの一部をメディアプロセッサ545に出力することができる。
データ受信器505から出力されるパケットがシグナリング情報を含む場合、パケットは、シグナリングデータ受信器550に出力され、シグナリングデータ受信器550がシグナリング情報を再構成するために使用される。シグナリング情報は、シグナリングプロセッサ555に出力され、付加情報はシグナリング情報によって実行される。例えば、シグナリング情報がMMTPに基づいて転送される場合、シグナリングデータ受信器550は、MMTデータ受信器510からシグナリング情報を含むMMTPパケットを受信し、受信したMMTPパケットに基づいてMMTPペイロードを再構成し、シグナリングプロセッサ555は、MMTPペイロードに含まれるシグナリング情報をパーシング(parsing)して必要な情報をシグナリング情報DB560に格納する。
シグナリング情報がファイルに含まれる場合、シグナリングプロセッサ555は、ファイルプロセッサ535から出力されるシグナリング情報を含むファイルを入力し、ファイルからシグナリング情報をパーシングして必要情報をシグナリング情報DB560に格納する。
シグナリングプロセッサ555は、パーシングされたシグナリング情報に基づいて他の構成要素と相互作用して追加的な動作を実行する。例えば、アプリケーションプログラムサービスに関連したシグナリング情報が受信される場合、シグナリングプロセッサ555は、アプリケーションプログラムサービスの実行に必要なデータを受信するために必要な情報をファイルデータ受信器530に出力し、それによってファイルデータ受信器530はアプリケーションプログラムサービスの実行に必要なデータを受信する。
一方、アプリケーションプログラムサービスの制御に関連したイベント情報は、専用シグナリングチャンネル又はメディアデータを通じて送信できる。すなわち、アプリケーションプログラムサービスの制御に関連したイベント情報は、メディアデータに含まれ得る。例えば、MMTで、アプリケーションプログラムサービスの制御に関連したイベント情報は、シグナリングメッセージを通じて送信され、あるいはメディアデータを含むMPUを通じて送信される。すなわち、MMTでは、アプリケーションプログラムサービスの制御に関連したイベント情報は、MPUに含まれる。もう一つの例として、DASHの場合、シグナリング情報は、MPDを通じて又はメディアデータを含んでいるDASHセグメントを通じて送信できる。すなわち、DASHの場合、シグナリング情報は、MPD又はDASHセグメントに含まれてもよい。
したがって、メディアデータ受信器540は、メディアデータにイベント情報が含まれる場合、イベント情報を抽出してシグナリングプロセッサ555に出力し、それによってイベント情報はアプリケーションプログラム管理器565に出力され、アプリケーションプログラムサービスの動作を制御するために使用される。
アプリケーションプログラム管理器565は、アプリケーションプログラムサービスに関する全般的な情報を格納及び管理し、各アプリケーションプログラムサービスの動作を管理し、サービスディスプレイ570を通じて各アプリケーションプログラムサービスに関する情報を表示する。このために、アプリケーションプログラム管理器565は、シグナリングプロセッサ555とファイルプロセッサ535と相互作用してアプリケーションプログラムサービスの提供に必要なデータ及びシグナリング情報を受信するようになる。
次に、本発明の一実施形態によるMMTシステムにおいてアプリケーションプログラムサービスに関連したシグナリング情報及びイベント情報を送信するプロセスに関して説明する。
1)アプリケーションプログラムサービスに関連したシグナリング情報の送信
アプリケーションプログラムサービスに関連した情報は、アプリケーションプログラムサービスの名称、転送方式、ライフサイクルのようなアプリケーションプログラムサービスに対する主要属性を含む。
本発明の一実施形態では、アプリケーションプログラムサービスに関連した情報を送信するために、MMTシグナリングセッションを通じて送信されるシグナリングメッセージとしてアプリケーション情報テーブル(AIT)メッセージが使用され得る。以下、説明の便宜上、AITは、“AIテーブル”とも称されることに留意しなければならない。
下記の<表1>は、AITメッセージ及びAITメッセージに含まれるAIテーブルのフォーマットの一例を示す。
Figure 0006728246
<表1>において、message_idフィールドはAITメッセージのIDを示し、versionフィールドはAITメッセージのバージョンを示し、lengthフィールドはAITメッセージの長さを示す。lengthフィールドは、lengthフィールドの次の位置からAITメッセージの終了までの長さを示し、例えばバイト長であり得る。
<表1>において、message_payloadフィールドはAITメッセージのペイロードを示し、AI_table()フィールドはAITを含む。
AITメッセージは、AITメッセージが適用されるサービスを識別するためのIDをさらに含むことができる。また、AITメッセージは、extension部分にAITメッセージを識別するためのURI(Uniform Resource Identifier)が存在するか否かを示す1ビットフラグをさらに含んでいてもよい。例えば、1ビットフラグがオン状態である場合、URIを示すフィールドは、AITメッセージにさらに含まれ得る。
MMTパッケージに含まれたすべてのアプリケーションプログラムサービスに関する情報は、一つのAIテーブルを通じて送信され、あるいは複数のAIテーブルを通じて送信され得る。ここで、すべてのアプリケーションプログラムサービスに関する情報を含むAIテーブルは、“完全AIテーブル”と称され、すべてのアプリケーションプログラムサービスに関する情報のうち一部を含むAIテーブルは“サブセットAIテーブル”と称されることに留意しなければならない。
各サブセットAIテーブルは、独立的なAITメッセージに含まれる。
<表2>は、AIテーブルのフォーマットの一例を示す。
Figure 0006728246
<表2>において、table_idフィールドはtable_idを示し、table_idはAIテーブルのIDを示す。完全AIテーブルとサブセットAIテーブルは、異なるtable_idを有することができる。table_idフィールドの値は順番に割り当てられ、それによってサブセットAIテーブルのサブセットAIテーブル番号はtable_idフィールドに基づいて計算できる。例えば、サブセットAIテーブル番号は“table_id−ベースサブセットAIテーブルのtable_id”で計算できる。ベースサブセットAIテーブルは、サブセットAIテーブル番号が0であるサブセットAIテーブルを意味する。例えば、1から14のサブセットAIテーブル番号は、ベースサブセットAIテーブルでなく、サブセットAIテーブルを示し、サブセットAIテーブル番号15は完全AIテーブルを示す。
<表2>において、versionフィールドは、AIテーブルのバージョンを示す。新バージョンのAIテーブルが受信される場合、AIテーブルは、既存バージョンのAIテーブルから新バージョンのAIテーブルに変更される。versionフィールドは、既存のMMTシグナリングテーブルのうちMPIテーブルに含まれるversionフィールドと同様に解析できる(table_idフィールドが完全AIテーブルを示す場合、subset-0 AIテーブルに含まれるtable_idフィールドの値がtable_idフィールドの値と同一である場合(AI_table_modeフィールドの値が‘1’である場合)、あるいはより低いサブセットAIテーブル番号を有するすべてのサブセットAIテーブルがtable_idフィールドの値と同一のバージョン値を有する場合(AI_table_modeフィールドの値が‘0’である場合)、あるいはサブセットAIテーブルのプロセッシングが独立的である場合(AI_table_modeフィールドの値が‘2’である場合))。
ここで、AI_table_modeフィールドは、AIテーブルが分割される場合に分割されたAIテーブルの処理方式を示すAI_table_modeを示し、既存のMMTシグナリングテーブルのうちMPIテーブルに含まれるPI_modeフィールドに類似した方式で使用される。ここで、PI_modeフィールドに関する具体的な説明は省略する。
subset-0 AIテーブルがより新たなバージョンを有する場合、MMT受信エンティティ内に格納されている以前の最大14までの、より高いサブセットAIテーブル番号を有するすべてのサブセットAIテーブルは、AI_table_modeが独立モードである場合を除いてはこれ以上必要ないと取り扱える。ここで、MMT受信エンティティは端末を含む。サブセットAIテーブル番号が0でなく、AI_table_modeの値が‘1’である場合、MMT受信エンティティに格納されているsubset-0 AIテーブルのバージョンと異なるバージョンを有するサブセットAIテーブルのコンテンツは無視される。また、サブセットAIテーブル番号が0でなく、AI_table_modeの値が‘0’である場合、MMT受信エンティティに格納されているより低いサブセットAIテーブル番号を有するサブセットAIテーブルのバージョンと異なるバージョンを有するサブセットAIテーブルのコンテンツは無視される。バージョン変更時ごとにモジュロ-256が増加する。
<表2>において、lengthフィールドはAIテーブルの長さを示し、lengthフィールドの次の位置からAIテーブルの終了までの長さを示す。例えばlengthフィールドはバイト長であり得る。
“sequential_order_processing_mode”で、AIテーブルのサブセットAIテーブル番号が‘0’でない場合、MMT受信エンティティは、AIテーブルを処理する前にAIテーブルと同一のバージョンを有するより低いサブセットAIテーブル番号を有するすべてのサブセットAIテーブルを受信する。例えば、MMT受信エンティティは、MMT受信エンティティが同一のバージョンのsubset-2 AIテーブルを受信しない場合、subset-3 AIテーブルを処理できない。“order_irrelevant_processing_mode”で、AIテーブルのサブセットAIテーブル番号が‘0’でない場合、MMT受信エンティティは、MMT受信エンティティに格納されているサブセット-0 AIテーブルがAIテーブルと同一のバージョンを有する間はAIテーブルを受信した後にAIテーブルを直ちに処理しなければならない。“independent_processing_mode”で、サブセットAIテーブルの各バージョンは個別的に管理される。“independent_processing_mode”では、フラグメントされたAIテーブルが適用される。
AI_table_modeフィールドで使用される値及び説明の一例は、次の<表3>のように示す。
Figure 0006728246
さらに、<表2>において、AI_table_descriptor_bytesフィールドは、AIテーブルのディスクリプタを示し、AI_countフィールドはAIテーブルに含まれたアプリケーションプログラムサービスの個数を示し、application_attributes()フィールドは、各アプリケーションプログラムサービスの属性を示す。
上記したように、AIテーブルは、アプリケーションプログラムサービスに関連した多様な属性を含み、application_attributes()フィールドに多様な属性が含まれる。多様な属性は、アプリケーションプログラムサービスの名称、アプリケーションプログラムサービスに関連したデータの転送情報と優先順位などが含まれる。
<表4>は、application_attributes()の一例を示す。
Figure 0006728246
本発明の一実施形態において、アプリケーションプログラムサービスに関連した情報は、MMTパッケージに関連したシグナリングメッセージとしてMPTメッセージを通じて送信できる。
具体的にMPTメッセージは、MMTパッケージにアプリケーションプログラムサービスが存在するか否かを示すディスクリプタを含む。アプリケーションプログラムサービスが存在するか否かを示すディスクリプタがMPTメッセージに含まれるので、端末は、MMTに基づいて転送される放送サービスを再生するためにMPTメッセージを受信する必要があり、それによって、端末は、より早くアプリケーションプログラムサービスが存在するか否かを検出できる。
MPTメッセージを通じてMMTパッケージ内にアプリケーションプログラムサービスが存在することを検出する場合、端末は、上記したAITメッセージを受信することによって、アプリケーションプログラムサービスに関連した詳細情報を獲得できる。
MPTメッセージは、単にアプリケーションプログラムサービスが存在するか否かのみを通知するだけでなく、必要によって、AITに含まれる情報のうち端末に最初に提供すべき情報をさらに含むことができる。最初に提供すべき情報は、端末の性能改善、または経験品質(Quality of Experience:QoE)の改善を助ける情報であり得る。
<表5>は、MPTメッセージに含まれるディスクリプタとしてのapplication_service_descriptorのフォーマットの一例を示す。
Figure 0006728246
<表5>において、descriptor_tagフィールドは、inband_event_descriptorフィールドを識別するタグを示し、descriptor_lengthフィールドはinband_event_descriptorフィールドの長さを示し、application_service_availableフィールドはパッケージ内にアプリケーションプログラムサービスが存在するか否かを示す。例えば、application_service_availableフィールドの値が0である場合、パッケージ内にアプリケーションプログラムサービスが存在しないことを意味する。application_service_availableフィールドの値が1である場合、パッケージ内にアプリケーションプログラムサービスが存在することを意味する。アプリケーションプログラムサービスに関連した情報は、AITメッセージを通じて送信される。
2)イベント情報の送信
イベント情報は、放送プログラム内で該当イベントが発生する時点が予めわかっているか否かに従って2つのタイプの方式で伝送できる。
第一に、録画放送のように特定イベントが発生する時点が予めわかる場合、静的イベント送信方式が使用される。
第ニに、生放送のように特定イベントが発生する時点が予めわからない場合に、動的イベント送信方式が使用される。
イベント情報は、アプリケーションプログラムサービスに通知される。
本発明の一実施形態において、イベント情報は、MMTシグナリングチャンネルを介して送信されるMMTシグナリングメッセージ、すなわちアプリケーションイベント情報(AEI)メッセージを通じて送信できる。AEIメッセージは、静的イベント送信方式及び動的イベント送信方式の両方ともに適用できる。動的イベント方式の場合、イベント情報は、該当イベントが発生するメディアデータ、例えばMPU内に含まれ得る。
<表6>及び<表7>は、イベント情報を含むMMTシグナリングメッセージ、例えばAEIメッセージとAEIメッセージに含まれるアプリケーションイベント(AE)テーブルのフォーマットの一例を示す。
Figure 0006728246
<表6>において、message_idフィールドはAEIメッセージのIDを示し、versionフィールドはAEIメッセージのバージョンを示し、lengthフィールドはAEIメッセージの長さを示す。lengthフィールドは、lengthフィールドの次の位置からAEIメッセージの終了までの長さを示す。例えば、このlengthフィールドはバイト長であり得る。また、AE_table()フィールドはAEテーブルを含む。
本発明の一実施形態において、AEIメッセージは、extension部分にAEIメッセージが適用されるサービスを識別するためのIDをさらに含むことができる。AEIメッセージは、extension部分にAEIメッセージを識別するためのURIが存在するか否かを示す1ビットフラグをさらに含む。1ビットフラグがオン状態である場合、URIを表すフィールドは、AEIメッセージにさらに含まれ得る。
Figure 0006728246
<表7>において、table_idフィールドはAEテーブルのIDを示す。また、<表7>で、versionフィールドはAEテーブルのバージョンを示し、lengthフィールドはAEテーブルの長さを示す。lengthフィールドは、lengthフィールドの次の位置からAEテーブルの終了までの長さを示す。例えば、lengthフィールドはバイト長であり得る。さらに、<表7>で、number_of_app_eventsフィールドは、AEテーブルに含まれるイベントの個数を示し、AE_descriptor()フィールドは各イベントの情報を含む。
イベント情報は、AE_descriptor()フィールドに格納され、イベントに関連したアプリケーションプログラムサービスのID、イベントが適用される時間及び期間、イベント動作のようなイベントに関連した多様な情報を含むことができる。
<表8>は、AE_descriptor()の一例を示す。
Figure 0006728246
<表8>において、descriptor_tagフィールドはAE_descriptor()を識別するタグを意味し、descriptor_lengthフィールドはAE_descriptor()の長さを意味し、application_identifier()フィールドはイベントが適用されるアプリケーションの固有IDを示す。
次に、<表9>は、application_identifier()フィールドのフォーマットの一例を示す。
Figure 0006728246
<表8>において、scheme_id_uri_lengthフィールドはscheme_id_uriの長さを示す。例えば、scheme_id_uri_lengthフィールドは、バイト長であり得る。さらに、<表8>において、scheme_id_uriフィールドは、event_dataフィールドを通じて送信される値の意味及び文法を定義し、event_value_lengthフィールドはevent_dataフィールドの長さを示す。例えば、event_value_lengthフィールドは、バイト長であり得る。
さらに、<表8>において、event_valueフィールドはイベント値を示す。イベント値の範囲及び意味は、scheme_id_uriにより決定される。また、<表8>において、event_idフィールドはイベントの固有IDを示し、event_presentation_timeフィールドはイベントが適用されるメディア再生時間を示し、event_durationフィールドはイベントが有効なメディア再生時間を示し、event_dataフィールドはイベント内容を示す。
本発明の一実施形態において、イベント情報は、メディアデータを通じて送信される。
MMTプロトコルにおいて、メディアデータはMPUに含まれ、MPUは、ISOBMFF構造に従う。イベント情報は、MPUに含まれるevtiボックスに含まれ、evtiボックスのフォーマットの一例は<表10>に示すようである。
Figure 0006728246
<表10>において、scheme_id_uriフィールドはevent_dataフィールドを通じて送信される値の意味及び文法を定義し、event_valueフィールドはイベント値を含む。イベント値の範囲及び意味は、scheme_id_uriにより決定される。また、<表10>において、event_idフィールドはイベントの固有IDを示し、event_presentation_time_deltaフィールドは、MPUが再生される時間とイベントが適用されるメディア、すなわちMPUの再生時間との間の差を示す。すなわち、event_presentation_time_deltaフィールドは、イベントの開始時間を示す。event_durationフィールドは、イベントが有効なメディアの再生時間、すなわちイベントの期間(duration)を表し、event_dataフィールドはイベント内容、すなわちイベントにより開始されるアクションを示す。<表10>において、application_identifierフィールドは、イベントが適用されるアプリケーションプログラムサービスのIDを示す。
本発明の一実施形態において、イベント情報は、アセットに含まれるMPUを通じて送信され、MMTシグナリング情報は、アセットに含まれたMPUにイベント情報が含まれていることを知らせるために使用できる。
このために、MMTパッケージ情報を送信するMPテーブルは、アセットレベルで使用されるディスクリプタとしてinband_event_descriptorを含む。
端末は、MPテーブルを通じてinband_event_descriptorを受信することによって、アセットに含まれるMPUにイベント情報が含まれていることを検出できる。このように、アセットに含まれるMPUにイベント情報が含まれていることを検出する場合、端末は、MPUを受信してMPUに含まれたevtiボックスからイベント情報を獲得する。
下記の<表11>は、inband_event_descriptorのフォーマットの一例を示す。
Figure 0006728246
<表11>において、descriptor_tagフィールドはinband_event_descriptorを識別するタグであり、descriptor_lengthフィールドはinband_event_descriptorの長さを示し、scheme_id_uri_lengthフィールドはscheme_id_uriの長さを示し、scheme_id_uriフィールドはevent_dataフィールドを通じて送信される値の意味及び文法を定義する。例えば、scheme_id_uri_lengthフィールドはバイト長であり得る。
さらに、<表11>で、event_value_lengthフィールドはevent_dataフィールドの長さを示し、event_valueフィールドはイベント値を含む。例えば、event_value_lengthフィールドは、バイト長であり得る。イベント値の範囲及び意味は、scheme_id_uriにより決定される。
図6を参照して、本発明の一実施形態によるMMTシステムにおけるMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスについて説明する。
図6は、本発明の一実施形態によるMMTシステムにおけるMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスを概略的に示す。
図6を参照すると、ステップ605において、端末は、サービスが選択されたことを検出する。ステップ610において、端末は、サービスに関連したMMTシグナリングメッセージの受信をモニタリングし、サービスに関連したMMTシグナリングメッセージを受信した場合、受信したMMTシグナリングメッセージをパーシングする。ステップ615において、端末は、MMTシグナリングメッセージがAITメッセージを含むか否かを判定する。
MMTシグナリングメッセージがAITメッセージを含まない場合、端末は、ステップ620で、選択されたサービスのビデオ/オーディオストリームを再生する。
MMTシグナリングメッセージがAITメッセージを含む場合には、端末は、ステップ625で、AITメッセージに含まれたAIテーブルに基づいてアプリケーションプログラムサービスに関連したデータを受信する。ステップ625で、端末は、AIテーブルに含まれたアプリケーションプログラムの属性及び入力されるパラメータに基づいて、アプリケーションプログラムサービスに関連したデータを受信する開始時間、アプリケーションプログラムサービスを直ちに実行するか否かなどを判定できる。
ステップ630において、端末は、イベント情報を含むシグナリングメッセージとしてAEIメッセージの受信をモニタリングし、AEIメッセージが受信される場合、このAEIメッセージに含まれるAEテーブルからイベント適用時間に関する情報を獲得する。端末は、ステップ630で、イベント適用時間に到達したか否かを判定する。
イベント適用時間に到達した場合、端末は、ステップ635において、イベントに基づいてアプリケーションプログラムサービスに対する制御を実行する。ここで、アプリケーションプログラムサービスに対する制御は、アプリケーションプログラムサービスを開始する制御又はアプリケーションプログラムサービスを終了する制御を含むことができる。
イベント適用時間に到達していない場合、端末は、ステップ620に進行する。
図6は、本発明の一実施形態によるMMTシステムにおけるMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスを示すが、図6に対して多様な変更を行うことができる。例えば、図6では直列的な動作が示されるが、図6の動作はオーバーラップしてもよいし、並列して発生してもよいし、異なる順序で発生してもよいし、複数回発生してもよい。
図6を参照して、本発明の一実施形態によるMMTシステムにおいてMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスについて説明し、次に図7を参照して、本発明の一実施形態によるMMTシステムでMPUに基づいてイベント情報を処理するプロセスについて説明する。
図7は、本発明の一実施形態によるMMTシステムにおけるMPUに基づいてイベント情報を処理するプロセスを概略的に示す。
図7を参照すると、ステップ705において、端末は、サービスが選択されたことを検出する。ステップ710において、端末は、サービスに関連したMMTシグナリングメッセージの受信をモニタリングし、サービスに関連したMMTシグナリングメッセージを受信した場合、受信したMMTシグナリングメッセージをパーシングする。ステップ715において、端末は、MMTシグナリングメッセージがAITメッセージを含むか否かを判定する。
MMTシグナリングメッセージがAITメッセージを含まない場合、端末は、ステップ720において、選択されたサービスのビデオ/オーディオストリームを再生する。
一方、MMTシグナリングメッセージがAITメッセージを含む場合、端末は、ステップ725で、AITメッセージに含まれたAIテーブルに基づいて、アプリケーションプログラムサービスに関連したデータを受信する。また、ステップ725において、端末は、AIテーブルに含まれたアプリケーションプログラムの属性及び入力されるパラメータに基づき、アプリケーションプログラムサービスに関連したデータを受信開始時間、アプリケーションプログラムサービスを直ちに実行するか否かなどを判定できる。
ステップ710で、MMTシグナリングメッセージを受信した端末は、ステップ740で、MMTシグナリングメッセージに基づいてMPUにイベント情報が含まれるか否かを判定する。すなわち、端末は、MMTシグナリングメッセージに含まれているMPテーブルに含まれたアセットレベルディスクリプタを分析し、それによってアセットに含まれたMPUにイベント情報が含まれるか否かを判定する。
アセットレベルディスクリプタがMPUにイベント情報が含まれることを示す場合、端末は、ステップ745において、アセットに含まれるMPUを受信する度に、アセットに含まれるMPUからイベント情報を抽出し格納する。
ステップ730において、端末は、サービスの再生中に周期的にイベント適用時間に到達したか否かを判定する。例えば、イベント適用時間に関する情報は、AEIメッセージ内のAEテーブルから獲得できる。イベント適用時間に到達した場合、端末は、ステップ735で、関連イベントを適用してアプリケーションプログラムサービスに対する制御を実行する。
図7は、本発明の一実施形態によるMMTシステムにおいてMMTシグナリングメッセージに基づいてイベント情報を処理するプロセスを示すが、図7に対して多様な変更を行うことができる。例えば、図7では直列的な動作が示されるが、動作はオーバーラップしてもよいし、並列して発生してもよいし、異なる順序で発生してもよいし、複数回発生してもよい。
本発明の一実施形態において、シグナリングテーブル及びディスクリプタは、次の<表12>のように構成されるmmt_atsc3_message()としてカプセル化され、mmt_atsc3_message()は、MMTPのシグナリングメッセージモードで送信され得る。
Figure 0006728246
<表12>において、message_idフィールドは、mmt_atsc3_message()のIDを示す。message_idフィールドは、例えば16ビットフィールドで実現できる。<表12>において、versionフィールドは、mmt_atsc3_message()のバージョンを表す。versionフィールドは、例えば8ビットのフィールドとして実現できる。
<表12>において、lengthフィールドは、mmt_atsc3_message()の長さを示す。例えば、lengthフィールドはバイト長であり、32ビットのフィールドとして実現できる。mmt_atsc3_message()の長さは、lengthフィールドの次のバイトからmmt_atsc3_message()の最後のバイトまでのバイトの数であり得る。
さらに、<表12>において、service_idフィールドは、mmt_atsc3_message()に含まれるペイロードを通じて送信される情報が適用されるサービスを識別するためのIDを示す。service_idフィールドは、例えば16ビットのフィールドとして実現できる。service_idフィールドは、後述するUSDのatsc:serviceId attributeと同一の値に設定される。
<表12>において、atsc3_message_content_typeフィールドは、mmt_atsc3_message()に含まれるペイロードを通じて送信される情報のタイプを示す。atsc3_message_content_typeフィールドは16ビットフィールドで実現できる。
例えば、atsc3_message_content_typeフィールドは、次の<表13>のような値を示す。
Figure 0006728246
<表12>において、atsc3_message_content_versionフィールドは、mmt_atsc3_message()に含まれるメッセージペイロードを通じて送信される情報のバージョンを示す。atsc3_message_content_versionフィールドは、一例として、8ビットのフィールドとして実現できる。メッセージペイロードは、service_idとatsc3_message_content_typeの組み合わせに基づいて区別できる。
<表12>において、atsc3_message_content_compressionフィールドは、mmt_atsc3_message()に含まれるメッセージペイロードに含まれたatsc3_message_content_byteフィールドに適用される圧縮方式を示す。例えば、atsc3_message_content_compresseionフィールドは8ビットのフィールドとして実現できる。
<表12>において、URI_lengthフィールドは、メッセージペイロードを識別するために使われるURIの長さを示す。例えば、URI_lengthフィールドは、8ビットのフィールドとして実現できる。URIが使用されない場合、URI_lengthフィールドの値は、0に設定され得る。
<表12>において、URI_byteフィールドは、メッセージペイロードを識別するために使用されるURIの各バイトを示す。URI_byteフィールドは、8ビットのフィールドとして実現できる。例えば、URI_byteフィールドは、UTF(Universal coded character set+Transformation Format)−8キャラクタで表現され、ヌル終端キャラクタは含まれない。
<表12>において、atsc3_message_content_byteフィールドは、メッセージペイロードを通じて送信される情報の各バイトを示す。例えば、atsc3_message_content_byteフィールドは、8ビットのフィールドとして実現できる。
一方、<表12>に示すmmt_atsc3_message()は、拡張可能マークアップ言語(XML)フォーマット、バイナリフォーマットなどを含むすべてのフォーマットのシグナリング情報を、メッセージペイロードを通じて送信し、各シグナリング情報のフォーマットは、atsc3_message_content_typeを用いて識別できる。
本発明の一実施形態により、inband_event_descriptorが<表12>のmmt_atsc3_message()に含まれるペイロードを通じて送信される場合、inband_event_descriptorは、次の<表14>のようなフォーマットを有する。
Figure 0006728246
<表14>において、descriptor_tagフィールドは、inband_event_descriptorを識別するタグを示し、descriptor_lengthフィールドはinband_event_descriptorの長さを示し、number_of_assetsフィールドはinband_event_descriptorに記載されたアセットの数を示す。<表14>において、asset_id_lengthフィールドは、アセットIDの長さを示し、asset_id_byteフィールドはアセットIDの各バイトを示す。例えば、asset_id_lengthフィールドは、バイト長さを示すことができる。
<表14>で、scheme_id_uri_lengthフィールドはscheme_id_uriの長さを示し、scheme_id_uriフィールドは、event_dataフィールドを通じて送信される値の意味及び文法を定義する。scheme_id_uri_lengthフィールドは、例えばバイト長を示す。
また、<表14>において、event_value_lengthフィールドはevent_dataフィールドの長さを示し、event_valueフィールドはイベント値を含む。イベント値の範囲及び意味は、scheme_id_uriにより決定され、event_value_lengthフィールドはバイト長を示すことができる。
本発明の一実施形態において、イベント情報はアセットに含まれるMPUを通じて送信され、MMTシグナリング情報は、アセットに含まれたMPUにイベント情報が含まれていることを知らせるために使われる。このために、mmt_atsc3_message()は、アセットレベルで使用されるディスクリプタとしてinband_event_descriptorをペイロードに含む。
端末は、mmt_atsc3_message()を通じてinband_event_descriptorを獲得し、アセットに含まれたMPUにイベント情報が含まれていることを検出する場合、アセットに含まれたMPUを受信し、MPUに含まれたevtiボックスからイベント情報を獲得できる。
次に、図8を参照して、本発明の一実施形態によるMMTシステムにおける送信装置の内部構造について説明する。
図8は、本発明の一実施形態によるMMTシステムにおける送信装置の内部構造を概略的に示す。
図8を参照すると、まず、送信装置800はMMT送信エンティティであり、MMT送信エンティティはサービスプロバイダであり得る。
送信装置800は、送信器811、制御器813、受信器815、格納ユニット817、及び出力ユニット819を含む。
制御器813は、送信装置800の全般的な動作を制御する。特に、制御器813は、本発明の一実施形態によるMMTシステムにおけるイベント情報を送受信する動作に関連した動作を制御する。本発明の一実施形態によるMMTシステムにおいて、イベント情報を送受信する動作に関連した動作については、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
送信器811は、制御器813の制御によってMMTシステムに含まれる他のエンティティ、例えばMMT受信エンティティのような他のエンティティに各種信号及び各種メッセージを送信する。例えば、MMT受信エンティティは、端末であり得る。送信器811により送信される各種信号及び各種メッセージについては、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
受信器815は、制御器813の制御によってMMTシステムに含まれる他のエンティティ、例えばMMT受信エンティティのような他のエンティティから各種信号及び各種メッセージを受信する。ここで、受信器815により受信される各種信号及び各種メッセージについては、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
格納ユニット817は、制御器813の制御によって本発明の一実施形態によるMMTシステムで実行されるイベント情報を送受信する動作に関係する動作に関連したプログラムと各種データなどを格納する。また、格納ユニット817は、受信器815により他のエンティティから受信された各種信号及び各種メッセージを格納する。
出力ユニット819は、制御器813の制御によって送信装置800が実行する本発明の一実施形態によるMMTシステムで実行されるイベント情報を送受信する動作に関する動作に関連した各種信号及び各種メッセージを出力する。ここで、出力ユニット819により出力される各種信号及び各種メッセージについては、図1乃至図7及び<表1>ないし<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
送信装置800において、送信器811、制御器813、受信器815、格納ユニット817、及び出力ユニット819は、分離した別途のユニットとして記載されているが、これは単に説明の便宜のためであることは容易に理解できる。言い換えると、送信器811、制御器813、受信器815、格納ユニット817、及び出力ユニット819のうち少なくとも2個以上が単一ユニットに組み込まれてもよい。
さらに、送信装置800は、1個のプロセッサで実現されてもよい。
図8を参照して、本発明の一実施形態によるMMTシステムにおける送信装置の内部構成に関して説明し、次に図9を参照して本発明の一実施形態によるMMTシステムで受信装置の内部構成に関して説明する。
図9は、本発明の一実施形態によるMMTシステムにおける受信装置の内部構造を概略的に示す。
図9を参照すると、まず受信装置900はMMT受信エンティティであり、MMT受信エンティティは端末などであり得る。
また、受信装置900は、送信器911、制御器913、受信器915、格納ユニット917、及び出力ユニット919を含む。
まず、制御器913は、受信装置900の全般的な動作を制御する。特に、制御器913は、本発明の一実施形態によるMMTシステムにおけるイベント情報を送受信する動作に関連した動作を制御する。本発明の一実施形態によるMMTシステムにおいて、イベント情報を送受信する動作に関連した動作については、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
送信器911は、制御器913の制御下でMMTシステムに含まれる他のエンティティ、例えばMMT送信エンティティのような他のエンティティに各種信号及び各種メッセージを送信する。例えば、MMT送信エンティティは、サービスプロバイダであり得る。送信器911に送信される各種信号及び各種メッセージについては、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここでは詳細な説明は省略する。
また、受信器915は、制御器913の制御によってMMTシステムに含まれる他のエンティティ、例えばMMT送信エンティティのような他のエンティティから各種信号及び各種メッセージを受信する。ここで、受信器915に受信される各種信号及び各種メッセージについては、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
格納ユニット917は、制御器913の制御によって本発明の一実施形態によるMMTシステムで実行されるイベント情報を送受信する動作に関連した動作に関連したプログラムと各種データを格納する。また、格納ユニット917は、受信器915により他のエンティティから受信される各種信号及び各種メッセージを格納する。
出力ユニット919は、制御器913の制御によって受信装置900が実行する本発明の一実施形態によるMMTシステムで実行されるイベント情報を送受信する動作に関連した動作に関連した各種信号及び各種メッセージを出力する。ここで、出力ユニット919により出力される各種信号及び各種メッセージについては、図1乃至図7及び<表1>乃至<表14>を参照してすでに説明したので、ここではその詳細な説明を省略する。
受信装置900において、送信器911、制御器913、受信器915、格納ユニット917、及び出力ユニット919は、分離した別途のユニットとして記載されているが、これは単に説明の便宜のためであることは容易に理解できる。言い換えると、送信器911、制御器913、受信器915、格納ユニット917、及び出力ユニット919のうち少なくとも2個以上が一つのユニットに組み込まれてもよい。
また、受信装置900は、1個のプロセッサで実現されてもよい。
上記した本発明による実施形態は、コンピュータ読み取り可能な記録媒体に記憶されたコンピュータ読み取り可能なコードとして実施できる。このコンピュータ読み取り可能な記録媒体は、コンピュータシステムによって読み取り可能なデータを格納する任意のデータストレージデバイスである。コンピュータ読み取り可能な記録媒体の例としては、ROM(Read-Only Memory)、RAM(Random-Access Memory)、CD-ROM、磁気テープ、フロッピーディスク、光データ格納装置、及び搬送波(有線/無線伝送経路を介してインターネットを経由するデータ伝送のような)を含むが、これに限定されない。また、このコンピュータ読み取り可能な記録媒体は、ネットワーク接続されたコンピュータシステムを介して分散されることによって、コンピュータ読み取り可能なコードは分散して格納及び実行される。また、本発明を達成するための機能(function)プログラム、コード、及びコードセグメントは、当該技術分野における熟練されたプログラマにとっては容易に解釈できる。
本発明の実施形態によるトポロジ処理方法は、ハードウェア、ソフトウェア、又はそれらの組み合わせの形態で実現可能であることがわかる。このようなソフトウェアは、例えば、揮発性又は非揮発性格納装置(例えば、削除可能/再書き込み可能なROM、メモリ(例えば、RAM、メモリチップ、及び集積回路(IC)チップ)、又は光的に又は磁気的に記録可能な機械(例えば、コンピュータ)-読み取り可能な格納媒体(例えば、CD(Compact Disc)、DVD(Digital Versatile Disc)、磁気ディスク、及び磁気テープ)に格納することができる。トポロジ処理方法は、制御部及びメモリを含むコンピュータ又は移動端末により実現され得る。このメモリは、本発明の実施形態を実現するための命令を含むプログラムを格納するのに適合した機械読み取り可能な格納媒体であり得る。
したがって、本発明は、本請求項により定められた装置及び方法を実現するための符号を含むプログラム、及びこのようなプログラムを格納する機械(例えば、コンピュータ)読み取り可能な格納媒体を含む。このプログラムは、有線/無線接続を通じて伝送される通信信号のような媒体を介して電気的に伝送でき、これに均等なものと共に本発明に含まれる。
また、本発明の多様な実施形態による装置は、有線又は無線で連結されるプログラムプロバイダからプログラムを受信して格納できる。プログラムプロバイダは、プログラム処理装置が予め設定されたコンテンツ保護方法を実行する指示を含むプログラム、コンテンツ保護方法に必要な情報を格納するためのメモリと、グラフィック処理装置との有線又は無線通信を実行するための通信部と、グラフィック処理装置の要請又は自動で該当プログラムを送受信装置に伝送する制御部とを含むことができる。
以上、本発明の詳細な説明においては具体的な実施形態に関して説明したが、特許請求の範囲の記載及びこれと均等なものに基づいて定められる本発明の範囲及び精神を逸脱することなく、形式や細部の様々な変更が可能であることは、当該技術分野における通常の知識を持つ者には明らかである。

Claims (6)

  1. マルチメディアシステムにおける送信装置の制御方法であって、
    イベントに関連するイベント情報を伝送するステップを含み、
    前記イベントは、アクションが取られることを表すアプリケーションに対する通知を含み、
    前記イベント情報がDASH(Dynamic Adaptive Streaming over Hypertext Transfer Protocol)基盤サービスのための第1のイベントを示す場合、前記イベント情報は、MPD(Media Presentation Description)内に含まれる第1のイベント情報ボックス内で伝送され、
    前記イベント情報がMMT(Moving Picture Experts Group Media Transport)基盤サービスのための第2のイベントを示す場合、前記イベント情報は、MMTペイロード内でMPU(Media Processing Unit)内に含まれる第2のイベント情報ボックス内で伝送されることを特徴とする方法。
  2. 前記イベント情報がMMT基盤サービスのための前記第2のイベントを示す場合、前記イベント情報は、前記イベントの識別子(ID)、前記イベントの開始時間、前記イベント期間、及び前記イベントのイベントデータのうち少なくとも一つを含むことを特徴とする請求項1に記載の方法。
  3. 前記イベントの開始時間は、前記MPUが再生される時間と前記MPUで前記イベントが適用される時間との間の差を含むことを特徴とする請求項2に記載の方法。
  4. 前記イベントデータは、前記アクションを含むことを特徴とする請求項2に記載の方法。
  5. 前記イベント情報がMMT基盤サービスのための前記第2のイベントを示す場合、前記MPU内の前記イベント情報の存在を示す第1の情報を送信するステップをさらに含む ことを特徴とする請求項1に記載の方法
  6. 請求項1乃至請求項のいずれか1項の方法を実行するように構成されることを特徴とする送信装置。
JP2017566110A 2015-06-23 2016-06-23 マルチメディアシステムにおける信号送受信方法及び装置 Expired - Fee Related JP6728246B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2015-0089353 2015-06-23
KR20150089353 2015-06-23
KR1020150158360A KR102473346B1 (ko) 2015-06-23 2015-11-11 디지털 방송 서비스 방법 및 장치
KR10-2015-0158360 2015-11-11
PCT/KR2016/006678 WO2016208988A1 (en) 2015-06-23 2016-06-23 Method and apparatus for transmitting and receiving signal in multimedia system

Publications (2)

Publication Number Publication Date
JP2018524904A JP2018524904A (ja) 2018-08-30
JP6728246B2 true JP6728246B2 (ja) 2020-07-22

Family

ID=57810628

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017566110A Expired - Fee Related JP6728246B2 (ja) 2015-06-23 2016-06-23 マルチメディアシステムにおける信号送受信方法及び装置

Country Status (4)

Country Link
EP (1) EP3314906A4 (ja)
JP (1) JP6728246B2 (ja)
KR (2) KR102473346B1 (ja)
CN (2) CN107787586B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10433027B2 (en) * 2017-02-15 2019-10-01 Electronics And Telecommunications Research Institute Method and apparatus for signaling video enhancement information (VEI) for video quality enhancement of fixed/mobile broadcasting hybrid 3DTV
CN109818926B (zh) * 2018-12-25 2020-10-09 西安长远电子工程有限责任公司 一种无需预先规划的通信方法
KR102176098B1 (ko) * 2019-01-28 2020-11-10 김영언 음원 인식 방법 및 장치
CN113961156A (zh) * 2020-07-20 2022-01-21 北京字节跳动网络技术有限公司 多屏显示方法、装置、系统、电子设备及计算机介质
CN113114655A (zh) * 2021-04-07 2021-07-13 深圳市瑞驰信息技术有限公司 一种基于tcp/ip的二进制数据交互协议设计方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070049042A (ko) * 2005-11-07 2007-05-10 삼성전자주식회사 휴대 방송 시스템에서 서비스 가이드 컨텐츠 및 통지이벤트 정보의 전송 방법 및 절차
US20080064326A1 (en) 2006-08-24 2008-03-13 Stephen Joseph Foster Systems and Methods for Casting Captions Associated With A Media Stream To A User
JP5671297B2 (ja) * 2009-11-16 2015-02-18 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation Imsネットワークを介してマルチメディア・サービスを最適化するための方法及びシステム
US9226045B2 (en) * 2010-08-05 2015-12-29 Qualcomm Incorporated Signaling attributes for network-streamed video data
KR20120084233A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 엠엠티 제어 계층을 이용한 위젯/어플리케이션 명령어 전송 방법
WO2012099423A2 (ko) * 2011-01-19 2012-07-26 삼성전자 주식회사 방송 시스템에서의 제어 메시지 구성 장치 및 방법
KR20120119790A (ko) * 2011-04-22 2012-10-31 삼성전자주식회사 미디어 데이터 전송 방법 및 장치와 미디어 데이터 수신 방법 및 장치
EP2712187A4 (en) 2011-05-20 2014-10-15 Japan Broadcasting Corp BROADCASTING / COMMUNICATION CONNECTION SYSTEM, APPLICATION MANAGEMENT SERVER, RECEIVER, RECEIVER RECEIVER METHOD AND APPLICATION MANAGEMENT METHOD WITH THE APPLICATION MANAGEMENT SERVER
WO2011144117A2 (zh) * 2011-05-27 2011-11-24 华为技术有限公司 媒体发送方法、媒体接收方法和客户端及系统
KR101946861B1 (ko) * 2011-09-21 2019-02-13 삼성전자주식회사 멀티미디어 방송 서비스의 미디어 데이터 동기화 방법 및 장치
EP3780591B1 (en) 2011-12-02 2023-04-12 Sony Group Corporation Information processing apparatus, information processing method, and program to activate an application
US20140344875A1 (en) * 2012-01-20 2014-11-20 Electronics And Telecommunications Research Institute Method for transmitting media data having access unit divided into media fragment units in heterogeneous network
JP6064249B2 (ja) * 2012-07-09 2017-01-25 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 動的適応ストリーミングオーバーハイパーテキスト転送プロトコルクライアント挙動フレームワークおよびセッション管理の実装
TW201414295A (zh) 2012-09-20 2014-04-01 Sony Corp 收訊裝置、收訊方法、播送裝置、播送方法、程式、及連動應用程式控制系統
JP2015015706A (ja) * 2013-07-03 2015-01-22 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America データ送信方法、データ再生方法、データ送信装置およびデータ再生装置
JP6616064B2 (ja) * 2013-07-25 2019-12-04 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法および受信方法
WO2015029401A1 (ja) * 2013-08-29 2015-03-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法および受信方法ならびに送信装置および受信装置
US9930086B2 (en) * 2013-10-28 2018-03-27 Samsung Electronics Co., Ltd. Content presentation for MPEG media transport

Also Published As

Publication number Publication date
KR20170000312A (ko) 2017-01-02
EP3314906A1 (en) 2018-05-02
KR102473346B1 (ko) 2022-12-05
EP3314906A4 (en) 2018-07-11
CN112738645A (zh) 2021-04-30
KR20220165693A (ko) 2022-12-15
JP2018524904A (ja) 2018-08-30
CN112738645B (zh) 2023-05-30
CN107787586A (zh) 2018-03-09
CN107787586B (zh) 2020-12-25
KR102598237B1 (ko) 2023-11-10

Similar Documents

Publication Publication Date Title
US11317138B2 (en) Method and apparatus for transmitting or receiving service signaling for broadcasting service
JP6174691B2 (ja) 対話型サービスを処理する装置及び方法
US9043849B2 (en) Method for linking MMT media and DASH media
JP6045692B2 (ja) 対話型サービスを処理する装置及び方法
JP6728246B2 (ja) マルチメディアシステムにおける信号送受信方法及び装置
US10645432B2 (en) Method and apparatus for transmitting and receiving media information in communication system
US10880596B2 (en) Method and apparatus for transmitting and receiving signal in multimedia system
US20200221161A1 (en) Reception apparatus, transmission apparatus, and data processing method
US10469919B2 (en) Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method, and broadcast signal reception method
US9998798B2 (en) Reception device, reception method, transmission device, and transmission method
CA3018476A1 (en) Systems and methods for signaling of information associated with audio content
KR20170138994A (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US20180139476A1 (en) Dynamic event signaling
KR102494266B1 (ko) 방송 시스템에서 방송 서비스 정보 제공 방법 및 장치
US11444885B2 (en) Transmission device, transmission method, reception device, and reception method
US10425689B2 (en) Reception apparatus, transmission apparatus, and data processing method
TWI673999B (zh) 供視聽內容及/或資料傳輸的方法
KR102465142B1 (ko) 멀티미디어 시스템에서 신호를 송신 및 수신하는 장치 및 방법
KR20160129631A (ko) 방송 시스템에서 이벤트 정보 전송장치 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190326

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191030

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191119

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200609

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200701

R150 Certificate of patent or registration of utility model

Ref document number: 6728246

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees