JP2020017983A - ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びにレンダリングデバイス、実行デバイス、及び生成デバイス - Google Patents

ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びにレンダリングデバイス、実行デバイス、及び生成デバイス Download PDF

Info

Publication number
JP2020017983A
JP2020017983A JP2019171040A JP2019171040A JP2020017983A JP 2020017983 A JP2020017983 A JP 2020017983A JP 2019171040 A JP2019171040 A JP 2019171040A JP 2019171040 A JP2019171040 A JP 2019171040A JP 2020017983 A JP2020017983 A JP 2020017983A
Authority
JP
Japan
Prior art keywords
additional data
multimedia stream
execution
execution device
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019171040A
Other languages
English (en)
Other versions
JP7253477B2 (ja
Inventor
アグロ,ロベルト
Agro Roberto
ベンディアブダラー,ハリム
Bendiabdallah Halim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Publication of JP2020017983A publication Critical patent/JP2020017983A/ja
Application granted granted Critical
Publication of JP7253477B2 publication Critical patent/JP7253477B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • H04N21/4349Demultiplexing of additional data and video streams by extracting from data carousels, e.g. extraction of software modules from a DVB carousel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8186Monomedia components thereof involving executable data, e.g. software specially adapted to be executed by a peripheral of the client device, e.g. by a reprogrammable remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8545Content authoring for generating interactive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】再生デバイスによるマルチメディアストリームの再生と、実行デバイスによるソフトウェアアプリケーションによる動作の実行間の同期可能な方法、プログラム及び装置を提供する。【解決手段】方法は、再生デバイス20において、マルチメディアアイテムと同期した付加データを含むマルチメディアストリームを受信するステップと、付加データが異なる実行デバイス21を対象としていることを示す宛先情報のアイテムをマルチメディアストリーム内で検出するステップと、付加データを抽出するステップと、付加データを実行デバイス21に送信するステップと、送信された付加データを処理する動作の、ソフトウェアアプリケーションによる実行をトリガするステップと、マルチメディアアイテムを再生するステップとを含む。【選択図】図3

Description

1. 技術分野
本発明の分野は、デジタルテレビ(DTV)の分野である。
デジタルテレビシステムでは、マルチメディアトランスポートストリームが、ケーブル
、衛星、地上無線、又は非対称デジタル加入者線(ADSL)によって配信される。この
マルチメディアトランスポートストリームは、1つ又は複数の放送番組(サービスとも呼
ばれる)を含み、これらの放送番組のそれぞれは、画像、音及び他の補完情報(データ)
によって構成されている。マルチメディアトランスポートストリームは、特定の復号器(
セットトップボックスとも呼ばれる)若しくは接続されたテレビセット、又はより一般的
には、そのようなストリームをデマルチプレックスする機能及び復号化する機能が設けら
れた再生端末若しくはレンダリング端末を所有するユーザ(最終顧客)にブロードキャス
トされる。
本発明は、限定されるものではないが、特に、ムービングピクチャエキスパートグルー
プ−2 トランスポートストリーム(MPEG−2 TS)標準規格と、ISO/CEI
13818−1標準規格に記載されているデジタルビデオブロードキャスト(DVB)標
準規格とに準拠したマルチメディアトランスポートストリームの場合に適用することがで
きる。
より詳細には、本発明は、例えば、接続されたテレビ及び復号器(すなわち、セットト
ップボックス)の場合に、ユーザがテレビ放送番組(テレビチャンネル)を視聴している
間、テレビの画面上に表示される情報の追加を規定するハイブリッドブロードキャストブ
ロードバンドTV(HBBTV)標準規格に定義されたインタラクティブテレビに適用す
ることができる。
2. 背景技術
テレビでは、視聴者参加(又はオーディエンス参加)をもたらす番組の数が増加してい
る。例えば、リアリティ番組では、視聴者は候補者に投票することもできるし、ゲーム番
組では、視聴者はクイズに答えることもできる。あらゆる場合において、テレビ視聴者は
、番組中に尋ねられた質問に答えなければならない。テレビ視聴者は、テレビ画面によっ
て表示される少なくとも1つの画像を通じて質問を尋ねられる。これを補うものとして又
はこれに代えて、この質問は、番組のプレゼンタが音声で明確に述べることができ、テレ
ビスピーカによってレンダリングされる。
2.1 HBBTV
HBBTV標準規格によれば、テレビ画面上に表示される付加情報は、マルチメディア
ストリーム内で直接入手可能であるか(ブロードキャストされた情報)、又はそれ以外に
、ユーザの端末(接続されたテレビ又はセットトップボックス)と、放送業者又は放送業
者に関連して事業を営むサードパーティのサーバとの間の接続(リターンチャンネル)を
介して送達される(ブロードバンドユニキャストアクセスを通じて送信された情報)。こ
れによって、最終的には、接続されたテレビによって一般に提供されるあらゆる使用、す
なわち、キャッチアップTV、ビデオオンデマンド(VOD)、インタラクティブ広告、
放送番組のカスタマイズ、投票、ゲーム、ソーシャルネットワーク、番組ガイド等を包含
することが可能になる。
例えば、料理番組の間、視聴者は、情報が放送業者によってストリーミングされている
場合に自身のHBBTV端末上にレシピを表示することができる。
HBBTV端末(すなわち、HBBTV標準規格に準拠した端末)は、インタラクティ
ブテレビミドルウェアプログラムが実行されるシステムソフトウェアプログラムを一般に
含むソフトウェアアーキテクチャを有する。インタラクティブテレビミドルウェアプログ
ラム内では、インタラクティブアプリケーション(ブラウザを含む)を管理するモジュー
ルと、テーブルを管理するモジュールと、オブジェクトカルーセルを管理するモジュール
とを一般に区別することができる。
所与の放送番組と(テレビチャンネル上で)関連付けられた所与のインタラクティブア
プリケーションの展開中に、放送業者は、マルチメディアストリーム内でこの所与の放送
番組を送信する。この放送番組は、以下のものを含む。
・要素オーディオストリーム及び/又は要素ビデオストリーム;
・これらの要素ストリームを記載したテーブル、特に「放送番組割り当てテーブル」(
PAT)及び「放送番組マップテーブル」(PMT);
・例えば、「デジタル記憶媒体のコマンド及び制御」(DSM CC)標準規格に従っ
て符号化されたオブジェクトカルーセル内で送信された所与のインタラクティブアプリケ
ーションの構成要素(特に、ウェブページのフォームにおける、例えばHTMLによるソ
フトウェアコード);
・所与の放送番組(所与のインタラクティブアプリケーションを含む)に利用可能な全
てのインタラクティブアプリケーションを識別するアプリケーション情報テーブル(AI
T)及びこれらのインタラクティブアプリケーションが利用可能となる方法(この場合、
所与のインタラクティブアプリケーションのオブジェクトカルーセル)。
この所与の放送番組が受信されると、HBBTV端末は、オーディオストリーム及びビ
デオストリームを(それらを記載したテーブルを通じて)表示する。その上、インタラク
ティブテレビミドルウェアプログラム内において、テーブル管理モジュールは、AITテ
ーブルを処理し、所与のインタラクティブアプリケーションのソフトウェアコードがオブ
ジェクトカルーセル内で送信されたことを検出する。カルーセル管理モジュールは、所与
のインタラクティブアプリケーションの構成要素を受信して再アセンブルし、アプリケー
ション管理モジュールは、所与のインタラクティブアプリケーション(カルーセル管理モ
ジュールによって再アセンブルされたもの)を管理する。いずれのインタラクティブアプ
リケーションとも同様に、このアプリケーションは、例えば、次の状態、すなわち、ロー
ド、一時停止、アクティブ又は無効(destroyed)のうちの1つを取ることができる。
所与のインタラクティブアプリケーションの展開の1つの変形形態では、所与の(ブロ
ードキャストされた)放送番組は、所与のインタラクティブアプリケーションの構成要素
を含まないが、AITテーブルが、所与のインタラクティブアプリケーションを取得する
ことができるURLアドレスを指定する。HBBTV端末のインタラクティブテレビミド
ルウェア内において、その後、次のアクションが行われる。すなわち、テーブル管理モジ
ュールがAITテーブルを処理し、このURLアドレスを取得する;アプリケーション管
理モジュールのブラウザが、所与のインタラクティブアプリケーションを受信するための
要求をこのURLアドレスに送信する;及びアプリケーション管理モジュールが所与のイ
ンタラクティブアプリケーションを管理する。
この動作の1つの欠点は、用いられている展開モードが何であろうとも、ユーザにとっ
て視覚的な不快感が存在するということにある。実際、所与のテレビチャンネル(放送番
組)において、ユーザが、ウェブポータルへのアクセスを提案する放送番組と関連付けら
れた特定のインタラクティブアプリケーションにアクセスするときは常に、これによって
、HBBTV端末のリモコン上のボタン(例えば、OKボタン)を押下することによって
ポータルへのアクセスが可能であることをユーザに知らせるメッセージ又はロゴを含むウ
ィンドウが、現在のTV放送番組の上に重なるものとして表示される。その上、ユーザは
、ポータルへのアクセスを確認するとき、自身のHBBTV端末上においてポータルの画
面に向けてリダイレクトされるので、もはや現在のTV放送番組を辿ることができない。
2.1 「第2画面」アプリケーション
テレビ放送番組を補完する付加コンテンツを提供するのに用いられるスマートフォン又
はタブレットにおけるサービスの開発のための、放送業者及びテレビコンテンツ制作業者
による数多くの構想がある。これらの独自の開発は、「第2画面アプリケーション」とし
て知られており、TV放送番組を見るのに用いられるデバイス(例えば、テレビ)と異な
るデバイス(例えば、スマートフォン又はタブレット)における(例えば、全てのチャン
ネル、1つのチャンネル又は1つの放送番組の)範囲に応じてテレビ放送番組を補完する
コンテンツを提供する。これらの付加コンテンツは、TV放送番組と同期している場合も
あるし、同期していない場合もあるエディトリアル又はインタラクティブコンテンツ(ク
イズ、調査、予報等)とすることができる。
ほとんどの場合、TVストリームと、第2のデバイスの第2画面アプリケーション上に
表示されるコンテンツとの間には同期が必要であり、幾つかの異なる技術によって実施す
ることができ、その中でも以下の技術によって実施することができる。
・ウォータマーキング:この技法は、コンテンツ内への「マーカ」の挿入を可能にする
補助情報をオーディオビジュアルコンテンツに追加することからなる。この技法は、多く
の場合、著作権を挿入するのに用いられる。また、この技法は、ユーザに知覚不能である
が、プロセス又はアクションをトリガするために第2画面アプリケーションが取り込むこ
とができるオーディオマーカをTVストリーム内に挿入するのにも用いられる。デジタル
ウォータマーキングは、放送業者レベルで実施される。
・デジタルフィンガプリンティング:この技法は、オーディオビジュアルコンテンツか
らシグネチャのファイルを生成することにその本質がある。このファイルは、その後、(
例えば、第2画面アプリケーションを実行する第2のデバイスにおいて)ストリームをリ
スンするオーディオ同期モジュールが、コンテンツ内での正確な位置を知ることを可能に
する。例えば、シリーズ物の或るエピソードのオーディオシグネチャは、そのエピソード
内での、視聴者が位置している位置を知ることを可能にする。この技法は、放送業者に左
右されず、視聴者がTVを視聴している部屋における周囲の雑音及び受信の品質に依存す
るのであまり信頼性が高くない。
・タイムスタンピングとして知られている技法:この技法は、第2画面アプリケーショ
ンにおいて、時間に関してのみイベントをトリガすることにその本質がある。この技法は
、あまり信頼性が高くなく、TVストリームを受信する様々な手段(IPTV、TNT、
衛星等)の間で発生する可能性がある遅滞又は発散の管理を行うことができない。
このため、これらの第2画面アプリケーションの主要な欠点は、それらの効率的な動作
に必要とされる同期技法の信頼性又は精度がないとことにある。
これらの第2画面アプリケーションの第2の欠点は、これらの第2画面アプリケーショ
ンが各放送業者、更には各放送番組に固有であり、このため、それらのアプリケーション
のそれぞれについて開発された技術的機能のプーリング(mutualisation)が可能でない
ということにある。
3. 発明の概要
1つの特定の実施の形態は、レンダリングデバイスによるマルチメディアストリームの
レンダリングと少なくとも1つの実行デバイスによるソフトウェアアプリケーションによ
る動作の実行との間の同期の方法であって、前記レンダリングデバイス及び前記実行デバ
イスは、ローカルエリア通信ネットワーク内に存在する方法を提案する。
該方法は、前記レンダリングデバイスにおいて、以下のステップ、すなわち、
前記マルチメディアストリームを受信するステップであって、前記マルチメディアスト
リームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加デ
ータを含む、受信するステップと、
前記付加データが前記レンダリングデバイスと異なる少なくとも1つの実行デバイスを
対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内
で検出するステップと、
前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出
するステップと、
前記付加データを前記少なくとも1つの実行デバイスに送信するステップであって、該
送信するステップは、該送信された付加データを処理する動作の、前記実行デバイスの前
記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
前記マルチメディア要素をレンダリングするステップと、
を含む。
したがって、本発明は、マルチメディアストリームに含まれ、マルチメディアストリー
ムをレンダリングするデバイスによって受信された付加データを、例えば、異なる実行デ
バイスに前もってダウンロード及びインストールされたソフトウェアアプリケーションを
介したこれらの付加データに関するこの処理動作の実行を担当する当該異なるデバイスに
向けて再送信する際に、付加データを処理する動作の実行を、マルチメディアストリーム
に含まれるマルチメディア要素のレンダリングと同期させる方法を提案する。
本発明の一般的な原理は、特に、付加データが、マルチメディアストリームを受信した
デバイス以外のデバイスによる処理を対象としていることを検出するのに用いられるイン
ジケータがマルチメディアストリームに存在することに依拠している。このインジケータ
が検出されると、マルチメディアストリームをレンダリングするデバイスは、このインジ
ケータを処理して、このマルチメディアストリームから付加データを抽出し、その後、こ
れらの付加データを、例えば、通信モジュールを介して受信側の実行デバイスに送信する
したがって、これらの付加データは、ストリームをレンダリングするデバイスと異なる
デバイスによって処理され、これによって、レンダリングデバイスにおいてマルチメディ
アストリーム(例えば、テレビセットにおいてテレビ放送番組)を見続けることができる
ユーザの改善された人間工学が可能になると同時に、付加データを処理する動作(この動
作は、例えば、所与のウェブページの接続及び表示、又はマルチメディア要素のコンテン
ツに関するインタラクティブアプリケーションの実行に対応する)の、この異なるデバイ
ス(例えば、スマートフォン又はタブレット)による実行によって生成された付加情報の
利益が得られる。
加えて、本発明によって、マルチメディアストリームのマルチメディア要素のレンダリ
ングと、付加データを処理する動作との間の精密かつ正確な同期が可能になる。例えば、
この処理する動作が、実行デバイスによる付加情報のレンダリングを含むとき、本発明に
よって、実行デバイスによるこれらの付加情報の実行と、レンダリングデバイスによるマ
ルチメディア要素のレンダリングとの間の同期が可能になる。実際に、ストリーム内に挿
入された付加データは、マルチメディア要素と同期され、単一のレンダリングデバイスに
よって受信されるので、それらの処理を担当する実行デバイスも、そのため、同期形式で
それらの付加データを受信し、及びそれらの付加データを処理する。
最後に、マルチメディアストリームと付加データとの間の同期が、精度の点から最適化
されるだけでなく、この同期は、マルチメディアストリーム内で送信されたデータによっ
て確保されるので、従来技術の技法のように追加の同期手段を設ける必要がない。したが
って、これらの様々な実施の形態によれば、本発明によって、煩雑な同期手段(オーディ
オ同期、ウォータマーキング又はフィンガプリンティングの技法等)の使用が回避される
と同時に、効率的な同期が提供される。
例えば、上記マルチメディアストリームは、HBBTVタイプのストリームであり、上
記付加データは、第2画面タイプのインタラクティブアプリケーションに対応する。
したがって、この実施の形態によれば、本発明によって、HBBTVストリームをレン
ダリングするデバイスと異なるデバイスにおける第2画面タイプのインタラクティブアプ
リケーションの実行が可能になる。このインタラクティブアプリケーションは、HBBT
Vストリーム内に挿入され、HBBTV同期手段に従ってHBBTVストリームと同期さ
れている。
この実施の形態によれば、本発明によって、同期の精度の点で良好に動作する、例えば
第2画面タイプのインタラクティブアプリケーションサービスをユーザに提供することが
可能になる。このインタラクティブアプリケーションは、トランスポートされ、レンダリ
ングデバイスによって受信されたHBBTVストリームに含まれ、その後、実行デバイス
のソフトウェアアプリケーションによって同期して送信され利用される付加データによっ
てアクセス可能にされる。
特に、レンダリングデバイスによってマルチメディア要素をレンダリングする動作及び
実行デバイスによって付加データを処理する動作は同期している。なぜならば、付加デー
タ及びマルチメディア要素は、マルチメディアストリームにおいて同期して受信され、一
方でレンダリングデバイスによって、他方で実行デバイスによって受信されると直ちに、
このストリームから抽出されて処理されるからである。特に、付加データの送信は、これ
らの付加データを処理する動作をトリガするので、レンダリングデバイスによるマルチメ
ディア要素のレンダリング及び実行デバイスによるこれらの付加データの処理は、これら
の2つのデバイスによって並列に行うことができる。
特に、一方では、付加データの処理の結果得られたデータの実行デバイス上での表示と
、他方では、マルチメディアコンテンツのレンダリングデバイス上での表示/レンダリン
グとの間のレイテンシは、一方では、レンダリングデバイスがマルチメディアコンテンツ
を復号化、及び/又は、レンダリングするのに要する時間に依存し、他方では、付加デー
タを実行デバイスに送信する時間に、実行デバイスがこれらの付加データを処理するのに
要する時間を加えたものに依存する。実際には、このレイテンシは、1秒よりもはるかに
短い状態にある。このレイテンシは、数十ミリ秒程度又は数百ミリ秒程度である。このた
め、マルチメディアストリームに含まれる付加データは、実行デバイス側での処理をトリ
ガする「トリガ」又はコマンドを形成する。この処理は、即時的であり、これらの付加デ
ータが実行デバイスによって受信されると直ちにトリガされる。
本発明の特定の特徴によれば、前記宛先に関する情報(すなわち、宛先情報)は、前記
HBBTVストリームのAIT(アプリケーション情報テーブル)シグナリングテーブル
に存在するディスクリプタによって搬送される。
したがって、同期の精度の点で良好に動作する第2画面タイプのアプリケーションサー
ビスをユーザに提供するために、本発明は、この実施の形態において、このAITテーブ
ルによって識別されたアプリケーションが、HBBTVストリームをレンダリングするデ
バイスと異なるデバイスを対象としているか否かを示すことを可能にするディスクリプタ
をHBBTVストリームのAITテーブルに追加する。
このように、このディスクリプタが検出されると、レンダリングデバイスは、ストリー
ムにおいて受信されてAITテーブルによって識別された(インタラクティブアプリケー
ションに対応する)付加データを、このインタラクティブアプリケーションを実行する別
のデバイスに再送信しなければならないことを知っている。
本発明の1つの特定の態様によれば、前記方法は、以下のステップ、すなわち、
前記付加データと関連付けられるとともに前記実行デバイスを対象とする少なくとも1
つのデータパケットを前記マルチメディアストリーム内で検出するステップと、
前記データパケットを前記マルチメディアストリームから抽出するステップと、
前記付加データと関連付けられた前記データパケットを前記実行デバイスに送信するス
テップであって、該送信は、前記データパケットを処理する動作の、前記実行デバイスの
前記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
を更に含む。
したがって、この実施の形態によれば、マルチメディアストリーム内に事前に挿入され
た付加データと関連付けられ、このため、実行デバイスを対象としていることにもなるデ
ータパケットを、マルチメディアストリーム内でレンダリングデバイスによって検出する
ことができ、それによって、それらのデータパケットを受信側の実行デバイスに向けて再
送信することができる。
例えば、これらのデータパケットをマルチメディアストリーム内に挿入して、以前に受
信された付加データを更新することができるとともに、マルチメディアストリームの正確
な同期から利益を得ることができる。
例えば、前記付加データと関連付けられた前記データパケットは、HBBTVの「イベ
ントストリーム」タイプのイベントに対応する。
したがって、この実施の形態によれば、「イベントストリーム」タイプのイベントをレ
ンダリングデバイスによって実行デバイスに送信し、例えば、付加データが実行デバイス
において処理されているとき、マルチメディアストリームと同期したイベントの通知を提
供することもできる。
例えば、付加データが第2画面タイプのインタラクティブアプリケーションに対応する
とき、イベントストリームは、インタラクティブアプリケーションの実行中にこのインタ
ラクティブアプリケーションにイベントを通知することを可能にする。例えば、インタラ
クティブアプリケーションはクイズアプリケーションであり、このクイズアプリケーショ
ンが開始すると、「イベントストリーム」は、特定のクイズの開始の通知を提供するのに
用いることができる。
付加データと関連付けられたデータパケットの受信及び/又は処理は、例えば、このデ
ータパケットを処理のためにインタラクティブアプリケーションに送信するために、付加
データを受信して処理したソフトウェアアプリケーションが担当することができる。これ
以外に、このデータパケットは、インタラクティブアプリケーションが直接担当すること
ができる。
ここでも、一方では、データパケットの処理の結果得られたデータの実行デバイス上で
の表示と、他方では、このデータパケットとともに受信されたマルチメディアコンテンツ
のレンダリングデバイス上での表示/レンダリングとの間のレイテンシは、一方では、レ
ンダリングデバイスがマルチメディアコンテンツを復号化及び/又は処理する時間に依存
し、他方では、実行デバイスへのデータパケットの送信の時間に、実行デバイスによるこ
のデータパケットの処理の時間を加えたものに依存する。実際には、このレイテンシは、
1秒よりもはるかに短い状態にある。このレイテンシは、数十ミリ秒程度であるか又は数
百ミリ秒程度の場合もある。
このため、マルチメディアストリームに含まれるデータパケットは、実行デバイス側で
の処理をトリガするトリガ又はコマンドを形成する。この処理は、即時的であり、実行デ
バイスによるこのデータパケットの受信時にトリガされる。
選択された実施の形態のオプションが何であろうとも、前記方法は、以下のステップ、
すなわち、
前記付加データと関連付けられるとともに前記少なくとも1つの実行デバイスを対象と
する少なくとも1つのデータパケットを前記マルチメディアストリーム内で検出するステ
ップと、
前記データパケットを前記マルチメディアストリームから抽出するステップと、
前記データパケットを前記少なくとも1つの実行デバイスに送信するステップであって
、該送信は、前記データパケットを処理する動作の、前記インタラクティブアプリケーシ
ョンによる実行をトリガする、送信するステップと、
を含む。
本発明の1つの特定の特徴によれば、前記抽出するステップは、前記付加データ及び/
又は前記付加データと関連付けられた前記データパケットをデマルチプレックスすること
に対応する。
したがって、この実施の形態によれば、レンダリングデバイスによって受信されたマル
チメディアストリームの処理は、ストリーム内に挿入された付加データを、解釈も実行も
することなく、付加データの解釈及び実行をそれ自身で担当する異なる実行デバイスへ送
信することができるようにデマルチプレックスすることにある。
例えば、付加データが、ストリーム内に挿入されたURLに対応する場合、上記デマル
チプレックスすることは、このURLを実行デバイスに送信することができるように抽出
することにある。
HBBTVの「イベントストリーム」等の付加データと関連付けられたデータパケット
の場合、上記デマルチプレックスすることは、このイベントストリームを実行デバイスに
送信するために抽出することにある。
1つの特定の態様によれば、前記方法は、前記実行デバイスに以前に送信された付加デ
ータを処理する前記動作の、前記実行デバイスの前記ソフトウェアアプリケーションによ
る前記実行の終了を示す少なくとも1つのインジケータを前記マルチメディアストリーム
内で検出するステップも含む。
したがって、この実施の形態によれば、本発明によって、実行デバイスによる付加デー
タの実行を、マルチメディアストリーム内で検出され、レンダリングデバイスによって実
行デバイスに送信されたインジケータを通じて停止することも可能になる。
例えば、HBBTV標準規格では、特定のテーブルがこのために提供されている。
1つの特定の特徴によれば、前記方法は、前記レンダリングデバイスが前記ローカルエ
リア通信ネットワーク内に存在することをアナウンスする予備ステップを更に含む。
したがって、本発明のこの実施の形態によれば、レンダリングデバイスは、接続されて
いるローカルエリア通信ネットワークに存在するものとして報告され、それによって、こ
の同じローカルエリア通信ネットワークに同様に存在する単数又は複数の実行デバイスは
、例えば、ユニバーサルプラグアンドプレイ(UPnP)エンティティの発見に用いられ
る簡易サービス発見プロトコル(SSDP)等の発見プロセスを介して、その存在を知る
ことができる。
本発明の別の態様によれば、前記方法は、前記実行デバイスにおいて、以下のステップ
、すなわち、
前記存在をアナウンスするステップの間に、前記アナウンスされたレンダリングデバイ
スを発見するステップと、
前記レンダリングデバイスから到来する付加データを受信するステップと、
受信された付加データを処理する動作を前記実行デバイスの前記ソフトウェアアプリケ
ーションによって実行するステップと、
を更に含む。
本発明のこの実施の形態は、より詳細には、実行デバイス及びこのデバイスにおいて実
施されるステップに関係する。
特に、実行デバイスは、必要な場合には、自身と同じローカルエリアネットワークに接
続された単数又は複数のレンダリングデバイスとのデータ通信のメカニズムを実施するこ
とができるように、このレンダリングデバイス又はこれらのレンダリングデバイスを知る
ことから開始する。
特に、レンダリングデバイスが、ローカルエリアネットワークにおいてその存在をアナ
ウンスするステップを実施すると、実行デバイスは、このため、このレンダリングデバイ
スを発見することができる。
この発見プロセスが実行されると、実行デバイスは、レンダリングデバイスによって、
本発明の様々な実施の形態に従って前もって受信されて再送信された付加データを受信す
る。
上記で既に説明したように、これらの付加データは、レンダリングデバイスにおいてレ
ンダリングされるマルチメディアストリームと同期しており、このため、実行デバイスに
おける適切なモジュールによって解釈及び実行される。このように、実行デバイスは、こ
れらの付加データをレンダリングデバイスから受信した後、ソフトウェアアプリケーショ
ン、例えば、実行デバイスに前もってダウンロードされてインストールされたアプリケー
ションを介してそれらの付加データを解釈及び実行する。
例えば、実行デバイスは、通信モジュールを通じてレンダリングデバイスから到来する
付加データを受信する。この通信モジュールは、その後、これらの付加データを解釈及び
実行する実行デバイスのモジュールにこれらの付加データを送信する。これらのモジュー
ルは、その後、ソフトウェアアプリケーションによってこれらの付加データを処理する動
作を実行する。
1つの特定の態様によれば、前記レンダリングデバイスにおいて前記送信するステップ
及び前記実行デバイスにおいて前記受信するステップは、
前記実行デバイスによって前記レンダリングデバイスに送信される、データの受信を要
求するメカニズムと、
前記レンダリングデバイスの主導でデータを前記実行デバイスに送信するメカニズムと

を含む群に属するメカニズムに従って実施される。
したがって、本発明は、その様々な実施の形態に従って、付加データ及び関連付けられ
たデータパケット(イベント等)をマルチメディアストリームレンダリングデバイスから
付加データを実行するデバイスに送信する幾つかの既知のメカニズムの使用を提供する。
これらの既知のメカニズムの中で、サーバ主導のメカニズム又は顧客主導のメカニズムを
実施することができる(例えば、「ポーリング」、「httpサーバプッシュ」、「UD
P」送信等)。
また、本発明は、マルチメディアストリームを生成する方法であって、以下のステップ
、すなわち、
付加データを前記マルチメディアストリーム内に挿入するステップと、
前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異な
る少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報
を前記マルチメディアストリーム内に挿入するステップと、
前記宛先情報の検出後における受信側の実行デバイスへの前記付加データの送信用に設
計された前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに
前記マルチメディアストリームを送信するステップと、
を含む、方法に関する。
したがって、本発明の別の態様は、マルチメディアストリームの生成と、第1段階にお
けるこのマルチメディアストリーム内への付加データの挿入とに関係する。
第2段階において、マルチメディアストリームを生成する方法は、付加データがストリ
ームをレンダリングするデバイスと異なる実行デバイスを対象としていることを、ストリ
ームをレンダリングするデバイスが検出することを可能にするインジケータをマルチメデ
ィアストリーム内に挿入する。
また、本発明は、コンピュータプログラムであって、該プログラムがコンピュータにお
いて実行されると、上記説明したような同期及び生成の方法を実施するプログラムコード
命令を含む、コンピュータプログラムに関する。
また、本発明は、コンピュータ又はプロセッサによって実行されて、上記説明したよう
な同期及び生成の方法を実施することができる一組の命令を含むコンピュータプログラム
を記憶する、コンピュータ可読記憶媒体に関する。
本発明の別の態様は、ローカルエリア通信ネットワーク内に存在する、マルチメディア
ストリームをレンダリングするデバイスであって、以下の手段、すなわち、
前記マルチメディアストリームを受信するモジュールであって、前記マルチメディアス
トリームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加
データを含む、受信するモジュールと、
前記付加データが該レンダリングデバイスと異なる少なくとも1つの実行デバイスを対
象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内で
検出するモジュールと、
前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出
するモジュールと、
前記付加データを前記実行デバイスに送信するモジュールであって、該送信は、該送信
された付加データを処理する動作の、前記実行デバイスの前記ソフトウェアアプリケーシ
ョンによる実行をトリガする、送信するモジュールと、
前記マルチメディア要素をレンダリングするモジュールと、
を備える、デバイスに関する。
そのようなデバイスは、例えば、マルチメディアストリームを受信し、この方法のステ
ップを実施するのに用いられるアプリケーションを含むテレビ、復号器又はこの場合もコ
ンピュータである。そのようなレンダリングデバイスは、そのブロードキャスト/送信モ
ードが何であろうとも、マルチメディアストリームを解釈してレンダリングすることが可
能な任意のデバイスに対応する。
本発明の別の態様は、ローカルエリア通信ネットワーク内に存在する、付加データを実
行するデバイスであって、以下の手段、すなわち、
前記ローカルエリアネットワーク内でアナウンスされた少なくとも1つのレンダリング
デバイスを発見するモジュールと、
前記レンダリングデバイスから到来する付加データを受信するモジュールと、
受信された付加データを処理する動作の、該実行デバイスのソフトウェアアプリケーシ
ョンによる前記実行のためのモジュールと、
を備える、デバイスに関する。
そのようなデバイスは、例えば、スマートフォン又はタブレットである。
本発明の別の態様は、マルチメディアストリームを生成するデバイスであって、以下の
手段、すなわち、
付加データを前記マルチメディアストリーム内に挿入する手段と、
前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異な
る少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報
を前記マルチメディアストリーム内に挿入する手段であって、これらのデバイスは、ロー
カルエリア通信ネットワーク内に存在する、挿入する手段と、
前記宛先情報の検出後における受信側の実行デバイスへの付加データの送信用に設計さ
れた前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに前記
マルチメディアストリームを送信する手段と、
を備える、デバイスに関する。
4. 図面のリスト
本発明の他の特徴及び利点は、例示的で非網羅的な例として与えられた以下の説明及び
添付図面から明らかになる。
本発明の1つの特定の実施形態による付加データを送信する方法の主要なステップを提示する図である。 本発明の1つの特定の実施形態によるシステムのブロック図である。 図2のシステムの2つのデバイス間の通信の運動学の一例を全体的に示すシーケンス図である。 本発明の1つの実施形態によるレンダリングデバイスの単純化した構造の一例を示す図である。 本発明の1つの実施形態による実行デバイスの単純化した構造の一例を示す図である。 本発明の1つの実施形態による生成デバイスの単純化した構造の一例を示す図である。
5. 詳細な説明
本明細書の全ての図において、同一の要素及びステップは、同じ参照符号によって指定
される。
この説明では、以下において、非網羅的な例として、マルチメディアストリーム100
がMPEG−2 TS標準規格及びHBBTV標準規格に準拠しているものと仮定される
とともに、このマルチメディアストリームは、レンダリングデバイスと物理的に異なる実
行デバイス上で実行されるインタラクティブアプリケーション、例えば「第2画面」タイ
プのアプリケーションに対応する付加データ110を含むものと仮定される。このインタ
ラクティブアプリケーションは、HBBTVアプリケーション(HBBTVアプリケーシ
ョンは、HTML(HTML−CE)及び/又はJavaScript(登録商標)で符
号化され、HBBTVストリームにおいて搬送されるアプリケーションである)である場
合もあるし、そうでない場合もあり、ウェブアプリケーションである場合もあるし、そう
でない場合もある。しかしながら、本発明は、異なるタイプのアプリケーションに適用す
ることができ、特定の符号化モードを暗に意味するものではない。実行デバイスのソフト
ウェアアプリケーションが、場合によってはこの実行デバイスのオペレーティングシステ
ムを利用することによって、その実行をトリガすることが可能であることで十分である。
付加データ110は、マルチメディアストリーム100のマルチメディア要素120(
例えば、所与の放送番組等のマルチメディアストリームの現在の部分)と同期している。
すなわち、付加データ110は、マルチメディアストリームに同期して挿入される。した
がって、実行デバイスへの付加データの送信及びマルチメディア要素の表示は、この付加
データの処理とこの要素の表示との間で遅滞なく連続的に処理される。
次に図1を参照して、図2に示すようなシステムにおける、本発明の1つの特定の実施
形態による同期の方法の主要なステップを提示する。
このシステムでは、マルチメディアストリーム100をレンダリングするレンダリング
デバイス20、例えばHBBTVテレビセットと、付加データ110(マルチメディアス
トリーム100に含まれ、マルチメディアストリーム100に含まれたマルチメディア要
素120と同期している)を処理する動作を実行する例えばスマートフォンといった実行
デバイス21、例えばソフトウェアアプリケーションとを検討することにする。
例えば、HBBTVマルチメディアストリームは、テレビ放送されるゲーム番組に対応
し、付加データは、テレビ放送されているゲーム番組がレンダリングされる画面と異なる
第2画面上での実行を対象としたインタラクティブクイズアプリケーションに対応する。
このアプリケーションは、例えば、視聴者が、テレビ放送されているゲーム番組を自身の
接続されたテレビで人間工学的に視聴し続けている間、自身のスマートフォンを介してク
イズの質問に答えることを可能にすることにある。
本同期方法の最初のステップは、最初の受信ステップ10においてマルチメディアスト
リーム100を受信するレンダリングデバイス20において実施される。
次に、I−Destとして示される宛先情報をマルチメディアストリーム10内で検出
するために、検出ステップ11が実施される。この宛先情報I−Destは、付加データ
110が、レンダリングデバイス20と異なる少なくとも1つの実行デバイス、この場合
、実行デバイス21を対象としていることを示す。
この例では、この検出ステップ11は、インタラクティブアプリケーションが、DVB
テーブルによってMPEG2 TSタイプのマルチメディアストリームにおいて識別可能
であることに基づいている。これはAIT(アプリケーション情報テーブル)である。こ
のテーブルは、インタラクティブアプリケーションの実行を可能にする様々な情報を実際
に含み、特に、本発明のこの実施形態では、このテーブルは、本明細書では宛先情報I−
Destと呼ばれるプライベートディスクリプタをトランスポートする。この宛先情報I
−Destは、インタラクティブアプリケーションが関係している受信端末を示す。検討
されている例では、この受信端末は実行デバイス21である。
この検出ステップ11は、この実施形態によれば、HBBTV−SUPとして示される
、レンダリングデバイス20の補助HBBTVモジュール201によって実施される。こ
のように、レンダリングデバイス20は、全ての「標準」的なHBBTV機能を実施する
のに用いられる標準HBBTVモジュール200と、本発明をその異なる特定の実施形態
に従って実施する補助HBBTVモジュール201とを備える。
次の抽出ステップ12において、マルチメディアストリーム100の付加データ110
とマルチメディア要素120とがデマルチプレックスされ、それによって、これらの付加
データ110は、送信ステップ13の間に実行デバイス21に送信することができる。
一方、マルチメディア要素120は、レンダリングステップ14の間にレンダリングデ
バイス20においてレンダリングされる。
例えば、この抽出ステップ12は、レンダリングデバイス20の標準HBBTVモジュ
ール200によって実施される。
その上、この抽出ステップ12は、レンダリングデバイス20におけるマルチメディア
要素120のレンダリングと、実行デバイス21における付加データ110を処理する動
作の実行とが同期するように、これらの送信された付加データ110を処理する動作の、
実行デバイス21のソフトウェアアプリケーション211による実行をトリガする。
実行デバイス21のソフトウェアアプリケーション211は、例えば、レンダリングデ
バイスから受信された付加データを処理することを可能にするために実行デバイス21に
おいてダウンロードされたアプリケーションである。このソフトウェアアプリケーション
は、例えば、「ネイティブ」アプリケーションである(このアプリケーションは、オペレ
ーティングシステムに応じて「Google Play」又は「AppleStore」
においてダウンロードすることができる)。
したがって、このソフトウェアアプリケーション211は、付加データを処理する実行
デバイス21において実施され、以下では、例えば、送信された付加データ110に対応
するHBBTVタイプのインタラクティブアプリケーション及び/又は第2画面タイプの
インタラクティブアプリケーションと明確に区別されなければならない。
したがって、付加データ110を処理するこの動作の、このソフトウェアアプリケーシ
ョン211による実行は、この例では、実際にはインタラクティブアプリケーションの実
行をトリガすることにある。
上記で既に示したように、実行デバイスからのインタラクティブアプリケーションの実
行をトリガする方法には、2つの方法がある。すなわち、HBBTVストリームがインタ
ラクティブアプリケーションへのアクセスに関する情報を含む(例えば、AITテーブル
が、インタラクティブアプリケーションをダウンロードすることができるURLアドレス
を含む)こと、又はインタラクティブアプリケーションを構成する単数若しくは複数のソ
フトウェアモジュールの一部分若しくは全体が、実行デバイス21によって解釈又は実行
することができる形態でHBBTVストリームに(例えば、実行デバイス21のソフトウ
ェアアプリケーション211によって解釈することができるメタデータの形態で、例えば
、DVBカルーセルに)カプセル化されていることのいずれかである。
このため、上記第1の形態の場合、付加データを処理する動作は、URLを取得するこ
とと、対象のインタラクティブアプリケーションを構成するデータを返信として受信する
ために、このURLアドレスにHTTP要求を送信することと、インタラクティブアプリ
ケーションを実行することと、この実行の結果得られるコンテンツ(検討中の例ではクイ
ズの質問)を表示することとにある。ロードされたデータは、ソフトウェアアプリケーシ
ョン211によって受信され、その後、表示されるウェブページとすることもできるし、
実行デバイス21によって(ソフトウェアアプリケーション211又は端末21のオペレ
ーティングシステムによって)解釈及び/又は実行することができる別の(非ウェブ)ア
プリケーションとすることもできる。
このため、上記第2の形態の場合、付加データを処理する動作は、実行デバイス21に
よって(ソフトウェアアプリケーション211又は端末21のオペレーティングシステム
によって)解釈及び/又は実行することができるインタラクティブアプリケーションを構
成するメタデータを解釈することと、実行デバイス21によってインタラクティブアプリ
ケーションを実行することと、この実行の結果得られるコンテンツ(検討中の例ではクイ
ズの質問)を表示することとにある。
その上、送信ステップ13は、レンダリングデバイス20の通信モジュール203によ
って実施することができ、これによって、実行デバイス21に向けたサーバタイプの通信
、例えば、実行デバイス21の通信モジュール213に向けたサーバタイプの通信が可能
になる。
したがって、実行デバイス21の通信モジュール213は、レンダリングデバイス20
の通信モジュール203から到来する付加データ110を受信し、それらのデータを、例
えば、上記で説明したようにそれらのデータの解釈を担当するソフトウェアアプリケーシ
ョン211のモジュール(例えば、従来のMMI及びビジネスモジュール)に送信する。
1つの実施形態では、通信モジュール213は、ソフトウェアアプリケーション211自
体に統合される。
次に、本発明の異なる特定の実施形態による、レンダリングデバイスと実行デバイスと
の間で実施することができる異なる通信モードの説明を提供する。これらの通信モードに
よって、実行デバイス21のソフトウェアアプリケーション211は、新たな付加データ
110がレンダリングデバイス20から検出されたことの通知を受けることができる。
幾つかの既知の通信技術は、特に、2つの既知のタイプのメカニズムに従って実施する
ことができる。
例えば、「ポーリング」と呼ばれる第1のタイプのメカニズムによれば、実行デバイス
21の通信モジュール213は、新たなデータが入手可能であるか否かを調べ、入手可能
である場合にそれらを取り出すために、周期的な要求をレンダリングデバイス20の通信
モジュール203に送信する。
「プッシュ」メカニズムとして知られている第2のタイプの通信メカニズムによれば、
例えば、「httpサーバプッシュ」技法として知られている技法に従って、レンダリン
グデバイス20(「サーバ」)から実行デバイス21(「顧客」)へ、「サーバ」の主導
でデータを送信する異なる技法が用いられる。
第1の技法によれば、レンダリングデバイス20のHTTPサーバは、その最後の応答
を実行デバイス21に送信した後、接続をクローズしない。このため、この接続はオープ
ンしたままであり、サーバは、顧客がサーバに再度インタロゲートして新たなイベントを
取り出すまで、イベントをスタックする。
「HTML5」標準規格に基づく他の2つの技法は、「プッシュ」メカニズム、「サー
バ送信イベント」メカニズム、及び「ウェブソケット」メカニズムを可能にする。「ウェ
ブソケット」プログラミングインタフェースは、特に、顧客とサーバとの間に双方向通信
(「全二重」通信として知られている)をセットアップするのに用いることができる。
「ロングポーリング」として知られている技法によれば、顧客は、要求をサーバに送信
し、サーバが通知のための新たなイベントを有していない場合、この要求は、新たな通知
が到着するまでブロック位置に留まる。
ユーザデータグラムプロトコル(UDP)伝送技法によれば、サーバは、UDPプロト
コルを介して通知要求を送出することができる。UDPパケットの送信は、ユニキャスト
モード(以前、UDPパケットを受信するために自身のIPアドレス及び関係したポート
を与えた顧客のみを限定的に対象とする)又はマルチキャストモード(UPnPイベント
の場合と同様)で行うことができる。マルチキャスト手法は、例えば、ローカルエリアネ
ットワークの幾つかの実行デバイスに新たなイベントの到着を知らせることを可能にする
図3は、レンダリングデバイス20、例えばHBBTV TVと、実行デバイス21、
例えばスマートフォンとの間における、LONG Pとして示される「ロングポーリング
」タイプの通信の一例を示している。この例では、顧客、すなわちスマートフォンは、要
求LONG Pをサーバ、すなわちHBBTV TVに送出する。HBBTV TVがい
ずれかの新たなイベント(例えば、SEとして示されるストリームイベント)又はAIT
テーブルを受信しない限り、スマートフォンに応答は行われず、新たなイベントがHBB
TV TVによって受信されると、HBBTV TVは、より具体的には、スマートフォ
ンの通信モジュール213にデータを送信することによってスマートフォンに応答する。
この通信モジュール213は、これらのデータを受信し、これらのデータの実行を担当す
るスマートフォンのモジュール、すなわちソフトウェアアプリケーション211にこれら
のデータを送信する。
2つのデバイス間、すなわち、レンダリングデバイス20と実行デバイス21との間で
選ばれた通信技法が何であろうとも、あらゆるデータ交換の前のステップによって、本発
明の様々な特定の実施形態による、本発明の実施に関与するローカルエリア通信ネットワ
ークの異なるデバイスの相互リンクが可能になる。
この予備ステップは、ローカルエリア通信ネットワーク内での「発見」ステップ又はレ
ンダリングデバイス20の存在をアナウンスするステップからなることができる。
したがって、第1の代替の実施形態によれば、レンダリングデバイス20は、接続され
たローカルエリア通信ネットワークに存在するものとして自身を報告し、それによって、
このまさに同じローカルエリア通信ネットワークに同じく存在する実行デバイス21は、
例えば、UPnP SSDP等の既知の発見プロセスを通じて、その存在を知ることがで
きる。例えば、これらのアナウンスは、レンダリングデバイス20によって周期的に送信
される。
第2の変形形態によれば、この発見ステップは、レンダリングデバイスを探索するため
の、実行デバイス21による探索要求の送信からなることもできる。ローカルエリア通信
ネットワークに存在する単数又は複数のレンダリングデバイスは、この探索要求に直接応
答する。
図2に示すものと異なる1つの特定の実施形態によれば、幾つかのレンダリングデバイ
スが、ローカルエリア通信ネットワークに存在することができる。この場合、実行デバイ
スは、これらの異なるレンダリングデバイスの存在を知っており、用いられることになり
、このため、実行デバイスが通信しなければならないレンダリングデバイスをユーザが選
択することができるレンダリングデバイスのリストをユーザに提示することによって、こ
れらの異なるレンダリングデバイスの存在をユーザに知らせる。
このため、この発見ステップが行われると、レンダリングデバイス20及び実行デバイ
ス21は相互リンクされる。レンダリングデバイス20は、その後、上記で説明したよう
に、適切な宛先情報がマルチメディアストリーム内に検出されると、このマルチメディア
ストリームから抽出された付加データを実行デバイス21に送信することができる。
上記で説明した様々なステップが、本発明の様々な特定の実施形態に従って実施される
と、レンダリングデバイスにおけるマルチメディアストリームのマルチメディア要素のレ
ンダリングは、実行デバイスにおける、このマルチメディア要素と同期した付加データを
処理する動作の実行と同期される。
実際に、上記で説明した第1の代替の実施形態によれば、付加データの処理とマルチメ
ディアストリームのレンダリングとの間の同期は、AITテーブルを搬送するマルチメデ
ィアストリームと同期した付加データを含むこのAITテーブルの使用によって可能にな
る。実際には、このAITテーブルは、単一のレンダリングデバイス20によって受信さ
れて処理されるので、それらの処理を担当する実行デバイス21は、それらを受信し、こ
のため、それらの同期した処理も行う。
別の変形形態によれば、HBBTVストリーム内の付加データの同期は、HBBTVス
トリームがDSM CC標準規格に従って符号化されたオブジェクトのカルーセル内にカ
プセル化されることによって可能になる。MPEG2 TSと関連付けられたこのツール
は、特に、MPEG2トランスポーテーションストリームにおける付加データの送信に加
えて同期イベントの送信も管理する。
これらのイベントは、従来から「ストリームイベント」と呼ばれ、放送番組信号におい
て同期して送信することができる小さなデータパケットからなる。このため、これらのイ
ベントは、例えば、インタラクティブクイズに対する質問及び回答等の付加データを特定
の時点において送信することを可能にする。
この場合、本発明の様々な特定の実施形態によれば、これらのパケットは、レンダリン
グデバイス20内でデマルチプレックスされた後、直ちに処理され、受信側の実行デバイ
ス21に直ちに送信される。このため、付加データ(例えば、インタラクティブアプリケ
ーション等)をTVチャンネルのマルチメディアストリームと精密かつ正確に同期させる
ことが可能である。
インタラクティブアプリケーションの実行について、HBBTVストリームをレンダリ
ングするデバイスと異なるデバイスにこの実行を移すことにその本質がある上述した形態
に加えて、幾つかの変形形態を想定することができることに留意しなければならない。
したがって、インタラクティブアプリケーションをHBBTVストリームのレンダリン
グデバイスと、更には異なる実行デバイスとの双方において実行することも可能である。
この場合、AITテーブルは、例えば、インタラクティブアプリケーションが実行デバ
イスにおける実行を対象としていることを示すディスクリプタと、同アプリケーションが
レンダリングデバイスにおいても実行することができることを示すディスクリプタとを含
む。
例えば、インタラクティブアプリケーションが、ユーザに視覚的な不快感をほとんど与
えないものである場合、ユーザは、自身のスマートフォンを用いず、自身の接続されたテ
レビにおいてアプリケーションと直接インタラクトすることを好む場合がある。
この場合、接続されたテレビにおけるインタラクティブアプリケーションの実行は、リ
モコンの特定のボタンの確認等のユーザアクションによって条件付けることができる。
次に、本発明の1つの特定の実施形態によるマルチメディアストリームを生成する方法
の主要なステップを提示する。
第1段階において、この生成方法は、付加データをマルチメディアストリーム内に挿入
する。これらの付加データは、ストリームの対応する部分のレンダリングと同期して処理
される。
例えば、HBBTVストリームの場合、これらの付加データは、ストリームによって搬
送されるAITテーブルによって識別可能なインタラクティブアプリケーションに対応し
、このAITテーブルは、このインタラクティブアプリケーションをロードして実行する
ための情報を含む。
第2段階において、マルチメディアストリームを生成するこの方法は、インジケータを
マルチメディアストリーム内に挿入する。このインジケータは、ストリームをレンダリン
グするデバイスが、付加データがこのストリームをレンダリングするデバイスと異なる実
行デバイスを対象としていることを検出することを可能にする。
例えば、HBBTVストリームの場合、このインジケータは、インタラクティブアプリ
ケーションが実行されるデバイスを示すAITテーブルのディスクリプタに対応する。
最後に、この生成する方法は、本発明の様々な特定の実施形態に従って、宛先情報の検
出後における受信側の実行デバイスへの付加データの送信用に設計された少なくとも1つ
のレンダリングデバイスにマルチメディアストリームを送信する。
最後に、図4a〜図4cをそれぞれ参照して、本発明の1つの特定の実施形態によるレ
ンダリングデバイスの単純化した構造、実行デバイスの単純化した構造及び生成デバイス
の単純化した構造を提示する。
図4aに示すように、そのようなレンダリングデバイスは、バッファメモリを含むメモ
リ2000と、例えばマイクロプロセッサμPを装備して、本発明による同期方法を実施
するコンピュータプログラム2002によって駆動される処理ユニット2001とを備え
る。
初期化において、コンピュータプログラム2002のコード命令が、例えば、RAM内
にロードされ、その後、処理ユニット2001のプロセッサによって実行される。処理ユ
ニット2001は、マルチメディアストリームを入力する。処理ユニット2001のマイ
クロプロセッサは、コンピュータプログラム2002の命令に従って、上記で説明した同
期方法のステップを実施し、マルチメディアストリームの要素のレンダリングを、ストリ
ームと同期した付加データの、異なるデバイスにおける処理の実行と同期させる。このた
めに、レンダリングデバイスは、マルチメディアストリームを受信するモジュールであっ
て、このマルチメディアストリームは、このマルチメディアストリームに含まれるマルチ
メディア要素と同期した付加データを含む、受信するモジュールと、付加データがレンダ
リングデバイスと異なる少なくとも1つの実行デバイスを対象としていることを示す少な
くとも1つの宛先情報をマルチメディアストリーム内で検出するモジュールと、マルチメ
ディア要素及び付加データをマルチメディアストリームから抽出するモジュールと、付加
データを実行デバイスに送信するモジュールであって、この送信は、この送信された付加
データを処理する動作の、実行デバイスのソフトウェアアプリケーションによる実行をト
リガする、送信するモジュールと、マルチメディア要素をレンダリングするモジュールと
、を更に備える。
これらのモジュールは、処理ユニット2001のマイクロプロセッサによって駆動され
る。
一方、図4bに示すように、そのような実行デバイスは、バッファメモリを含むメモリ
2100と、例えばマイクロプロセッサμPを装備して、本発明による同期方法を実施す
るコンピュータプログラム2102によって駆動される処理ユニット2101とを備える
初期化において、コンピュータプログラム2102のコード命令が、例えば、RAM内
にロードされ、その後、処理ユニット2101のプロセッサによって実行される。処理ユ
ニット2101は、付加データを入力する。処理ユニット2101のマイクロプロセッサ
は、コンピュータプログラム2102の命令に従って、上記で説明した実行方法のステッ
プを実施する。このために、付加データを実行するデバイスは、ローカルエリアネットワ
ーク内でアナウンスされる少なくとも1つのレンダリングデバイスを発見するモジュール
と、レンダリングデバイスから到来する付加データを受信するモジュールと、受信された
付加データを処理する動作の、実行デバイスのソフトウェアアプリケーションによる実行
のためのモジュールとを更に備える。
これらのモジュールは、処理ユニット2101のマイクロプロセッサによって駆動され
る。
図4cに示すように、そのような生成デバイスは、バッファメモリを含むメモリ40と
、例えばマイクロプロセッサμPを装備して、本発明による同期方法を実施するコンピュ
ータプログラム42によって駆動される処理ユニット41とを備える。
初期化において、コンピュータプログラム42のコード命令が、例えば、RAM内にロ
ードされ、その後、処理ユニット41のプロセッサによって実行される。処理ユニット4
1は、マルチメディアストリームを入力する。処理ユニット41のマイクロプロセッサは
、コンピュータプログラム42の命令に従って、上記で説明した生成方法のステップを実
施し、同期した付加データを含むマルチメディアストリームを生成する。このために、マ
ルチメディアストリームを生成するデバイスは、付加データと、付加情報がマルチメディ
アストリームをレンダリングするデバイスと異なる少なくとも1つの実行デバイスを対象
としていることを示す少なくとも1つの宛先情報とをマルチメディアストリーム内に挿入
する手段と、宛先情報の検出後における受信側の実行デバイスへの付加データの送信用に
設計された送信手段とを備える。上記生成するデバイス及び上記レンダリングするデバイ
スは、ローカルエリア通信ネットワーク内に存在する。
これらのモジュールは、処理ユニット41のマイクロプロセッサによって駆動される。
これらのモジュールは、処理ユニット41のマイクロプロセッサによって駆動される。
なお、出願当初の特許請求の範囲の記載は以下の通りである。
請求項1:
レンダリングデバイスによるマルチメディアストリームのレンダリングと少なくとも1つの実行デバイスによるソフトウェアアプリケーションによる動作の実行との間の同期の方法であって、前記レンダリングデバイス及び前記実行デバイスは、ローカルエリア通信ネットワーク内に存在し、該方法は、前記レンダリングデバイスにおいて、以下のステップ、すなわち、
前記マルチメディアストリームを受信するステップであって、前記マルチメディアストリームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加データを含む、受信するステップと、
前記付加データが前記レンダリングデバイスと異なる少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内で検出するステップと、
前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出するステップと、
前記付加データを前記少なくとも1つの実行デバイスに送信するステップであって、該送信するステップは、該送信された付加データを処理する動作の、前記実行デバイスの前記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
前記マルチメディア要素をレンダリングするステップと、
を含むことを特徴とする、方法。
請求項2:
前記マルチメディアストリームは、HBBTVタイプのストリームであり、前記宛先情報は、前記HBBTVストリームのAIT(アプリケーション情報テーブル)シグナリングテーブルに存在するディスクリプタに含まれることを特徴とする、請求項1に記載の方法。
請求項3:
前記付加データは、前記実行デバイスにおいて実行されるインタラクティブアプリケーションに対応し、前記付加データを処理する前記動作は、前記インタラクティブアプリケーションの前記実行をトリガすることを含むことを特徴とする、請求項1又は2に記載の方法。
請求項4:
以下のステップ、すなわち、
前記付加データと関連付けられるとともに前記少なくとも1つの実行デバイスを対象とする少なくとも1つのデータパケットを前記マルチメディアストリーム内で検出するステップと、
前記データパケットを前記マルチメディアストリームから抽出するステップと、
前記付加データと関連付けられた前記データパケットを前記少なくとも1つの実行デバイスに送信するステップであって、該送信は、前記送信されたデータパケットを処理する動作の、前記実行デバイスの前記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
を更に含むことを特徴とする、請求項1に記載の方法。
請求項5:
以下のステップ、すなわち、
前記付加データと関連付けられるとともに前記少なくとも1つの実行デバイスを対象とする少なくとも1つのデータパケットを前記マルチメディアストリーム内で検出するステップと、
前記データパケットを前記マルチメディアストリームから抽出するステップと、
前記付加データと関連付けられた前記データパケットを前記少なくとも1つの実行デバイスに送信するステップであって、該送信は、前記送信されたデータパケットを処理する動作の、前記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
を更に含むことを特徴とする、請求項3に記載の方法。
請求項6:
前記付加データと関連付けられた前記データパケットは、HBBTVの「イベントストリーム」タイプのイベントに対応することを特徴とする、請求項4又は5に記載の方法。
請求項7:
前記抽出するステップは、前記付加データ及び/又は該付加データと関連付けられた前記データパケットをデマルチプレックスすることに対応することを特徴とする、請求項1及び4に記載の方法。
請求項8:
前記実行デバイスに以前に送信された前記付加データを処理する前記動作の、前記実行デバイスの前記ソフトウェアアプリケーションによる前記実行の終了を示す少なくとも1つのインジケータを前記マルチメディアストリーム内で検出するステップを更に含むことを特徴とする、請求項1に記載の方法。
請求項9:
マルチメディアストリームを生成する方法であって、以下のステップ、すなわち、
付加データを前記マルチメディアストリーム内に挿入するステップと、
前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異なる少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内に挿入するステップと、
前記宛先情報の検出後における受信側の実行デバイスへの前記付加データの送信用に設計された前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに前記マルチメディアストリームを送信するステップと、
を含むことを特徴とする、方法。
請求項10:
コンピュータプログラムであって、該プログラムがコンピュータにおいて実行されると、請求項1〜9の少なくとも1項に記載の方法を実施するプログラムコード命令を含む、コンピュータプログラム。
請求項11:
コンピュータ又はプロセッサによって実行されて、請求項1〜9の少なくとも1項に記載の方法を実施することができる一組の命令を含むコンピュータプログラムを記憶する、コンピュータ可読記憶媒体。
請求項12:
ローカルエリア通信ネットワーク内に存在する、マルチメディアストリームをレンダリングするデバイスであって、以下の手段、すなわち、
前記マルチメディアストリームを受信するモジュールであって、前記マルチメディアストリームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加データを含む、受信するモジュールと、
前記付加データが該レンダリングデバイスと異なる少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内で検出するモジュールと、
前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出するモジュールと、
前記付加データを前記少なくとも1つの実行デバイスに送信するモジュールであって、該送信は、該送信された付加データを処理する動作の、前記実行デバイスの前記ソフトウェアアプリケーションによる実行をトリガする、送信するモジュールと、
前記マルチメディア要素をレンダリングするモジュールと、
を備える、デバイス。
請求項13:
ローカルエリア通信ネットワーク内に存在する、付加データを実行するデバイスであって、以下の手段、すなわち、
前記ローカルエリアネットワーク内でアナウンスされた少なくとも1つのレンダリングデバイスを発見するモジュールと、
前記レンダリングデバイスから到来する付加データを受信するモジュールと、
受信された付加データを処理する動作の、該実行デバイスのソフトウェアアプリケーションによる前記実行のためのモジュールと、
を備える、デバイス。
請求項14:
マルチメディアストリームを生成するデバイスであって、以下の手段、すなわち、
付加データを前記マルチメディアストリーム内に挿入する手段と、
前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異なる少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内に挿入する手段であって、これらのデバイスは、ローカルエリア通信ネットワーク内に存在する、挿入する手段と、
前記宛先情報の検出後における受信側の実行デバイスへの前記付加データの送信用に設計された前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに前記マルチメディアストリームを送信する手段と、
を備える、デバイス。

Claims (14)

  1. レンダリングデバイスによるマルチメディアストリームのレンダリングと少なくとも1
    つの実行デバイスによるソフトウェアアプリケーションによる動作の実行との間の同期の
    方法であって、前記レンダリングデバイス及び前記実行デバイスは、ローカルエリア通信
    ネットワーク内に存在し、該方法は、前記レンダリングデバイスにおいて、以下のステッ
    プ、すなわち、
    前記マルチメディアストリームを受信するステップであって、前記マルチメディアスト
    リームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加デ
    ータを含む、受信するステップと、
    前記付加データが前記レンダリングデバイスと異なる少なくとも1つの実行デバイスを
    対象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内
    で検出するステップと、
    前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出
    するステップと、
    前記付加データを前記少なくとも1つの実行デバイスに送信するステップであって、該
    送信するステップは、該送信された付加データを処理する動作の、前記実行デバイスの前
    記ソフトウェアアプリケーションによる実行をトリガする、送信するステップと、
    前記マルチメディア要素をレンダリングするステップと、
    を含むことを特徴とする、方法。
  2. 前記マルチメディアストリームは、HBBTVタイプのストリームであり、前記宛先情
    報は、前記HBBTVストリームのAIT(アプリケーション情報テーブル)シグナリン
    グテーブルに存在するディスクリプタに含まれることを特徴とする、請求項1に記載の方
    法。
  3. 前記付加データは、前記実行デバイスにおいて実行されるインタラクティブアプリケー
    ションに対応し、前記付加データを処理する前記動作は、前記インタラクティブアプリケ
    ーションの前記実行をトリガすることを含むことを特徴とする、請求項1又は2に記載の
    方法。
  4. 以下のステップ、すなわち、
    前記付加データと関連付けられるとともに前記少なくとも1つの実行デバイスを対象と
    する少なくとも1つのデータパケットを前記マルチメディアストリーム内で検出するステ
    ップと、
    前記データパケットを前記マルチメディアストリームから抽出するステップと、
    前記付加データと関連付けられた前記データパケットを前記少なくとも1つの実行デバ
    イスに送信するステップであって、該送信は、前記送信されたデータパケットを処理する
    動作の、前記実行デバイスの前記ソフトウェアアプリケーションによる実行をトリガする
    、送信するステップと、
    を更に含むことを特徴とする、請求項1に記載の方法。
  5. 以下のステップ、すなわち、
    前記付加データと関連付けられるとともに前記少なくとも1つの実行デバイスを対象と
    する少なくとも1つのデータパケットを前記マルチメディアストリーム内で検出するステ
    ップと、
    前記データパケットを前記マルチメディアストリームから抽出するステップと、
    前記付加データと関連付けられた前記データパケットを前記少なくとも1つの実行デバ
    イスに送信するステップであって、該送信は、前記送信されたデータパケットを処理する
    動作の、前記ソフトウェアアプリケーションによる実行をトリガする、送信するステップ
    と、
    を更に含むことを特徴とする、請求項3に記載の方法。
  6. 前記付加データと関連付けられた前記データパケットは、HBBTVの「イベントスト
    リーム」タイプのイベントに対応することを特徴とする、請求項4又は5に記載の方法。
  7. 前記抽出するステップは、前記付加データ及び/又は該付加データと関連付けられた前
    記データパケットをデマルチプレックスすることに対応することを特徴とする、請求項1
    及び4に記載の方法。
  8. 前記実行デバイスに以前に送信された前記付加データを処理する前記動作の、前記実行
    デバイスの前記ソフトウェアアプリケーションによる前記実行の終了を示す少なくとも1
    つのインジケータを前記マルチメディアストリーム内で検出するステップを更に含むこと
    を特徴とする、請求項1に記載の方法。
  9. マルチメディアストリームを生成する方法であって、以下のステップ、すなわち、
    付加データを前記マルチメディアストリーム内に挿入するステップと、
    前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異な
    る少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報
    を前記マルチメディアストリーム内に挿入するステップと、
    前記宛先情報の検出後における受信側の実行デバイスへの前記付加データの送信用に設
    計された前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに
    前記マルチメディアストリームを送信するステップと、
    を含むことを特徴とする、方法。
  10. コンピュータプログラムであって、該プログラムがコンピュータにおいて実行されると
    、請求項1〜9の少なくとも1項に記載の方法を実施するプログラムコード命令を含む、
    コンピュータプログラム。
  11. コンピュータ又はプロセッサによって実行されて、請求項1〜9の少なくとも1項に記
    載の方法を実施することができる一組の命令を含むコンピュータプログラムを記憶する、
    コンピュータ可読記憶媒体。
  12. ローカルエリア通信ネットワーク内に存在する、マルチメディアストリームをレンダリ
    ングするデバイスであって、以下の手段、すなわち、
    前記マルチメディアストリームを受信するモジュールであって、前記マルチメディアス
    トリームは、該マルチメディアストリームに含まれるマルチメディア要素と同期した付加
    データを含む、受信するモジュールと、
    前記付加データが該レンダリングデバイスと異なる少なくとも1つの実行デバイスを対
    象としていることを示す少なくとも1つの宛先情報を前記マルチメディアストリーム内で
    検出するモジュールと、
    前記マルチメディア要素及び前記付加データを前記マルチメディアストリームから抽出
    するモジュールと、
    前記付加データを前記少なくとも1つの実行デバイスに送信するモジュールであって、
    該送信は、該送信された付加データを処理する動作の、前記実行デバイスの前記ソフトウ
    ェアアプリケーションによる実行をトリガする、送信するモジュールと、
    前記マルチメディア要素をレンダリングするモジュールと、
    を備える、デバイス。
  13. ローカルエリア通信ネットワーク内に存在する、付加データを実行するデバイスであっ
    て、以下の手段、すなわち、
    前記ローカルエリアネットワーク内でアナウンスされた少なくとも1つのレンダリング
    デバイスを発見するモジュールと、
    前記レンダリングデバイスから到来する付加データを受信するモジュールと、
    受信された付加データを処理する動作の、該実行デバイスのソフトウェアアプリケーシ
    ョンによる前記実行のためのモジュールと、
    を備える、デバイス。
  14. マルチメディアストリームを生成するデバイスであって、以下の手段、すなわち、
    付加データを前記マルチメディアストリーム内に挿入する手段と、
    前記付加データが、前記マルチメディアストリームをレンダリングするデバイスと異な
    る少なくとも1つの実行デバイスを対象としていることを示す少なくとも1つの宛先情報
    を前記マルチメディアストリーム内に挿入する手段であって、これらのデバイスは、ロー
    カルエリア通信ネットワーク内に存在する、挿入する手段と、
    前記宛先情報の検出後における受信側の実行デバイスへの前記付加データの送信用に設
    計された前記マルチメディアストリームをレンダリングする少なくとも1つのデバイスに
    前記マルチメディアストリームを送信する手段と、
    を備える、デバイス。
JP2019171040A 2013-09-26 2019-09-20 ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びにレンダリングデバイス、実行デバイス、及び生成デバイス Active JP7253477B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1359311 2013-09-26
FR1359311A FR3011155A1 (fr) 2013-09-26 2013-09-26 Procedes de synchronisation, de generation d'un flux, programmes d'ordinateur, media de stockage, dispositifs de restitution, d'execution et de generation correspondants.

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2016516843A Division JP2016536826A (ja) 2013-09-26 2014-09-26 ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びに再生デバイス、実行デバイス、及び生成デバイス

Publications (2)

Publication Number Publication Date
JP2020017983A true JP2020017983A (ja) 2020-01-30
JP7253477B2 JP7253477B2 (ja) 2023-04-06

Family

ID=49578498

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016516843A Pending JP2016536826A (ja) 2013-09-26 2014-09-26 ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びに再生デバイス、実行デバイス、及び生成デバイス
JP2019171040A Active JP7253477B2 (ja) 2013-09-26 2019-09-20 ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びにレンダリングデバイス、実行デバイス、及び生成デバイス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2016516843A Pending JP2016536826A (ja) 2013-09-26 2014-09-26 ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びに再生デバイス、実行デバイス、及び生成デバイス

Country Status (6)

Country Link
US (1) US10244282B2 (ja)
EP (2) EP4224868A3 (ja)
JP (2) JP2016536826A (ja)
KR (1) KR102205932B1 (ja)
FR (1) FR3011155A1 (ja)
WO (1) WO2015044607A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10567821B2 (en) 2016-12-30 2020-02-18 Turner Broadcasting System, Inc. Creation of channel to support legacy video-on-demand systems
US10085045B2 (en) * 2016-12-30 2018-09-25 Turner Broadcasting System, Inc. Dynamic generation of video-on-demand assets for multichannel video programming distributors

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2343881A2 (en) * 2010-01-07 2011-07-13 LG Electronics Inc. Method of processing application in digital broadcast receiver connected with interactive network, and digital broadcast receiver
JP2013098859A (ja) * 2011-11-02 2013-05-20 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP2013176105A (ja) * 2013-04-09 2013-09-05 Sharp Corp 表示装置、受信装置、表示方法、テレビジョン受像機、表示システム、プログラムおよび記録媒体

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000032403A (ja) * 1998-07-14 2000-01-28 Sony Corp データ伝送方法、データ送信装置及び受信装置
US7962938B2 (en) * 2004-04-27 2011-06-14 Microsoft Corporation Specialized media presentation via an electronic program guide (EPG)
EP1751956B1 (en) * 2004-05-13 2011-05-04 Qualcomm, Incorporated Delivery of information over a communication channel
US8090241B2 (en) * 2007-05-15 2012-01-03 Broadcom Corporation System and method for simultaneous network recording and playback of digital television programs
KR101479890B1 (ko) * 2010-12-26 2015-01-06 엘지전자 주식회사 미디어 콘텐트 송수신 방법 및 그를 이용한 송수신 장치
CA2834046C (en) * 2011-05-24 2017-10-24 Lg Electronics Inc. Method for transmitting a broadcast service, apparatus for receiving same, and method for processing an additional service using the apparatus for receiving same
US9060151B2 (en) * 2011-06-16 2015-06-16 Lg Electronics Inc. Method for transmitting a broadcast service, method for receiving a broadcast service, and apparatus for receiving a broadcast service
EP2750309A4 (en) 2011-08-26 2015-07-15 Japan Broadcasting Corp RECEIVERS AND RECEIVER PROCEDURES
JP2013046386A (ja) 2011-08-26 2013-03-04 Sharp Corp 表示装置、受信装置、表示方法、テレビジョン受像機、表示システム、プログラムおよび記録媒体
EP2584800B1 (en) * 2011-09-20 2014-11-05 LG Electronics Inc. Digital system and method of processing service data thereof
WO2013042902A1 (ko) * 2011-09-23 2013-03-28 엘지전자 주식회사 방송 서비스 수신 방법 및 그 수신 장치
US9589296B1 (en) * 2012-12-11 2017-03-07 Amazon Technologies, Inc. Managing information for items referenced in media content

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2343881A2 (en) * 2010-01-07 2011-07-13 LG Electronics Inc. Method of processing application in digital broadcast receiver connected with interactive network, and digital broadcast receiver
JP2013098859A (ja) * 2011-11-02 2013-05-20 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP2013176105A (ja) * 2013-04-09 2013-09-05 Sharp Corp 表示装置、受信装置、表示方法、テレビジョン受像機、表示システム、プログラムおよび記録媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"Hybrid Broadcast Broadband TV", ETSI TS 102 796, vol. V1.2.1, JPN6020045528, November 2012 (2012-11-01), pages 15 - 22, ISSN: 0004857698 *

Also Published As

Publication number Publication date
EP4224868A2 (fr) 2023-08-09
JP2016536826A (ja) 2016-11-24
EP3050311A1 (fr) 2016-08-03
FR3011155A1 (fr) 2015-03-27
WO2015044607A1 (fr) 2015-04-02
KR20160058870A (ko) 2016-05-25
JP7253477B2 (ja) 2023-04-06
US20160249094A1 (en) 2016-08-25
EP4224868A3 (fr) 2023-08-30
KR102205932B1 (ko) 2021-01-21
US10244282B2 (en) 2019-03-26

Similar Documents

Publication Publication Date Title
US10462496B2 (en) Information processor, information processing method and program
EP2910030B1 (en) Apparatus and method for processing an interactive service
KR102024600B1 (ko) 양방향 서비스를 처리하는 장치 및 방법
CN104584574B (zh) 处理交互服务的设备和方法
KR101939296B1 (ko) 양방향 서비스를 처리하는 장치 및 방법
EP1942674A1 (en) Method of transmitting preview content and method and apparatus for receiving preview content
KR20150090049A (ko) 양방향 서비스를 처리하는 장치 및 방법
US20080307457A1 (en) Channel switching method and method and apparatus for implementing the method
US9712855B2 (en) Method and apparatus for transmitting and receiving additional information in a broadcast communication system
US20140130112A1 (en) Method for accessing a service, in particular a web portal, by means of a terminal for replaying a multimedia stream
JP7253477B2 (ja) ストリームを同期させる方法及び生成する方法、並びに対応するコンピュータプログラム、記憶媒体、並びにレンダリングデバイス、実行デバイス、及び生成デバイス
US8250615B2 (en) Head-end system for providing two-way VOD service and service method thereof
van Brandenburg et al. Immersive second-screen experiences using hybrid media synchronization
US11606528B2 (en) Advanced television systems committee (ATSC) 3.0 latency-free display of content attribute
KR20220091423A (ko) 지상파 uhd 방송 브로드캐스터 어플리케이션 재전송 시스템 및 그 방법
JP2022183550A (ja) 受信装置、クライアント端末装置、およびプログラム
KR20090030293A (ko) 프리뷰 컨텐츠의 전송 시스템 및 방법과, 그의 수신장치 및방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191010

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191010

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201201

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210225

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210430

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211104

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220404

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220826

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20221128

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230303

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230327

R150 Certificate of patent or registration of utility model

Ref document number: 7253477

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150