JP6352191B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP6352191B2
JP6352191B2 JP2014546937A JP2014546937A JP6352191B2 JP 6352191 B2 JP6352191 B2 JP 6352191B2 JP 2014546937 A JP2014546937 A JP 2014546937A JP 2014546937 A JP2014546937 A JP 2014546937A JP 6352191 B2 JP6352191 B2 JP 6352191B2
Authority
JP
Japan
Prior art keywords
content
response
command
acr
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014546937A
Other languages
English (en)
Other versions
JPWO2014077141A1 (ja
Inventor
山岸　靖明
靖明 山岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Saturn Licensing LLC
Original Assignee
Saturn Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Saturn Licensing LLC filed Critical Saturn Licensing LLC
Publication of JPWO2014077141A1 publication Critical patent/JPWO2014077141A1/ja
Application granted granted Critical
Publication of JP6352191B2 publication Critical patent/JP6352191B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/214—Specialised server platform, e.g. server located in an airplane, hotel, hospital
    • H04N21/2143—Specialised server platform, e.g. server located in an airplane, hotel, hospital located in a single building, e.g. hotel, hospital or museum
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2807—Exchanging configuration information on appliance services in a home automation network
    • H04L12/2812—Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4367—Establishing a secure communication between the client and a peripheral device or smart card
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/2849—Audio/video appliances

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関し、特に、ホームネットワークを構成する電子装置間で、実装されているACR(Automatic Content Recognition)クライアントに関する情報を通知する場合に用いて好適な情報処理装置、情報処理方法、およびプログラムに関する。
例えば、ＴＶ（テレビジョン）番組の視聴者に対し、放送中のＴＶ番組（以下、単に番組と称する）に関連する情報（出演者、あらすじ、次回の予告など）や、番組には直接関係しないが視聴者にとって有益な情報（ニュース、天気予報、交通情報など）などを画面上に表示することを考える。
これを実現するためには、専用のアプリケーションプログラム（以下、アプリケーションと略記する）を取得、起動させるためのコマンドを番組の進行に連動してＴＶ受像機などに対して送信すればよい。実際、既に日本や欧州などにおいては、ＴＶ放送信号におけるデータ放送用の帯域を利用して当該コマンドやアプリケーションを送信することにより、これが実現されている（例えば、特許文献１参照）。
一方、米国では、ＴＶ放送信号にデータ放送用の帯域が設けられておらず、それに代わる方法が確立していないので、番組の進行に連動してアプリケーションを実行させることが実現されていない。
なお、米国では、ＴＶ受像機にてＴＶ放送波を直接受信して番組を視聴する世帯よりも、CATVやIPTVなどを介して番組を視聴する世帯の方が多い。CATVやIPTVではＴＶ放送信号から番組の映像および音声の信号だけを抽出して配信することがあるので、仮に米国におけるＴＶ放送信号にデータ放送用の帯域が設けられたとしても、アプリケーションに関するデータを含めたデータ放送信号が受信装置まで伝送される保証はない。
さらに昨今、放送中の番組だけでなく、録画した番組、DVD，ＢＤなどのパッケージメディアから再生した映像、インターネット上からダウンロードした動画、楽曲など（以下、これらをコンテンツと称する）を視聴している場合においても、その進行に連動してアプリケーションを実行させたいという要求がある。
この要求を実現するためは、視聴されているコンテンツを識別する必要があり、その一手法として、ACR(Automatic Content Recognition)サービスと称する技術が存在する（例えば、特許文献２参照）。
ACRサービスは、ACRクライアントとACRサーバとにより実現される。ＴＶ受像機などのコンテンツ再生装置に実装されるACRクライアントは、視聴されているコンテンツからシグニチャデータ（例えば、ウォータマーク、フィンガプリントなど）を抽出してACRサーバに通知してコンテンツの識別を依頼する。ACRサーバは、通知されたシグニチャデータと予めデータベースに登録されているコンテンツのシグニチャデータとを比較することにより、コンテンツ再生装置で視聴されているコンテンツを識別する。さらに、識別したコンテンツに関するメタデータや連動して実行すべきアプリケーション（以下、連動アプリと略称する）をACRレスポンスとしてACRクライアントに応答する。
そして、この応答を受けたACRクライアントが実装されたコンテンツ再生装置では、所定のサーバから連動アプリを取得して実行することになる。
特開２００６−５０２３７号公報 特開２０１２−１６８８０１号公報
ところで、上述したように米国においてはCATVやIPTVなどの普及により、ＴＶ受像機がCATVやIPTVなどのセットトップボックス等の外部装置の表示出力デバイスとして位置づけられている。これにより、ユーザはＴＶ受像機のリモートコントローラ（以下、リモコンと略称する）を操作する機会がほとんどなく、該外部装置のリモコンを操作することが多い。よって、ＴＶ用のリモコンによって操作することになる、コンテンツ再生装置としてのＴＶ受像機における連動アプリの実行は、ユーザにとって使い勝手がよいものとはならない可能性がある。
したがって、ACRクライアントが実装されたコンテンツ再生装置（ＴＶ受像機など）とは異なるセカンドスクリーンデバイスにて、コンテンツ再生装置で視聴中のコンテンツに関するメタデータを表示したり、連動アプリを実行させたりしたいという要求が発生してきている。ここで、セカンドスクリーンデバイスとしては、例えばタブレット型端末、スレートＰＣ、スマートフォン等を挙げることができる。
また、昨今においては、セカンドスクリーンデバイスにて起動した所定のアプリケーションプログラムにより該外部装置を操作できるもの、すなわち、セカンドスクリーンデバイスを該外部装置のリモコンとして利用できるものが存在する。よって、ユーザインタフェースをセカンドスクリーンデバイスに集約するという観点においても上記要求の実現が望まれる。
なお、この実現には、ACRクライアントを実装するＴＶ受像機等のコンテンツ再生装置とセカンドスクリーンデバイスとの連携が必要だが、コンテンツ再生装置とセカンドスクリーンデバイスはそれぞれ多くのベンダにより製造、販売されている。よって、異なるベンダのコンテンツ再生装置とセカンドスクリーンデバイスとを組み合わせて使用することも考慮すべきである。この場合、該連携を実現するためのプロトコルやAPI(Application Program Interface)の標準化が急務である。
本開示はこのような状況に鑑みてなされたものであり、コンテンツ再生装置やセカンドスクリーンデバイスなどがACRサービスを利用する上で連携するための標準プロトコルを提案するものである。
本開示の第１の側面である情報処理装置は、端末装置とともにホームネットワークシステムを構成する情報処理装置において、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部と、前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開部と、前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行部とを備える。
前記公開部は、前記コマンドのURLを直接記述したデバイスディスクリプションを前記端末装置に公開することができる。
前記公開部は、UPnPの規定を拡張した前記デバイスディスクリプションに、前記コマンドのURLを直接記述して前記端末装置に公開することができる。
前記コマンドは、WebAPIまたはWebSocketとすることができる。
前記公開部は、前記ホームネットワーク上にNotifyメッセージをマルチキャスト配信し、前記Notifyメッセージに基づく前記端末装置からのアクセスに応じて前記デバイスディスクリプションを前記端末装置に公開することができる。
前記公開部は、前記端末装置からのM-Searchに応じて前記デバイスディスクリプションを前記端末装置に公開することができる。
前記レスポンスは、識別された前記コンテンツに対応する関連メタデータを含むことができる。
本開示の第１の側面である情報処理方法は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備え、端末装置とともにホームネットワークシステムを構成する情報処理装置の情報処理において、前記情報処理装置による、前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開ステップと、前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行ステップとを含む。
本開示の第１の側面であるプログラムは、端末装置とともにホームネットワークシステムを構成するコンピュータを、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部と、前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開部と、前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行部として機能させる。
本開示の第１の側面においては、端末装置から識別依頼処理部を動作させるためのコマンドが前記端末装置に公開され、前記端末装置からの前記コマンドに応じて前記識別依頼処理部が動作され、レスポンスが前記端末装置に転送される。
本開示の第２の側面である情報処理装置は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成する情報処理装置において、前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信するコマンド取得部と、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部とを備える。
前記コマンド取得部は、前記コンテンツ再生装置が公開したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得することができる。
前記コマンド取得部は、前記コンテンツ再生装置が公開した、UPnPの規定を拡張したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得することができる。
前記コマンドは、WebAPIまたはWebSocketとすることができる。
前記コマンド取得部は、前記コンテンツ再生装置が前記ホームネットワーク上にマルチキャスト配信したNotifyメッセージに基づき、前記コンテンツ再生装置から前記デバイスディスクリプションを取得することができる。
前記コマンド取得部は、M-Searchにより検索した前記コンテンツ再生装置から供給される前記デバイスディスクリプションを取得することができる。
前記連動アプリケーション実行部は、さらに、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツのメタデータをユーザに提示することができる。
本開示の第２の側面である情報処理方法は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、前記情報処理装置による、前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得する取得ステップと、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信する受信ステップと、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップとを含む。
本開示の第２の側面であるプログラムは、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成するコンピュータを、前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信するコマンド取得部と、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部として機能させる。
本開示の第２の側面においては、コンテンツ再生装置の識別依頼処理部を動作させるためのコマンドが前記コンテンツ再生装置から取得され、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送されるレスポンスが受信され、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションが取得されて実行される。
本開示の第３の側面である情報処理方法は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置と端末装置とによるホームネットワークシステムの情報処理方法において、前記コンテンツ再生装置による、前記端末装置から前記識別依頼処理部を動作させるためのコマンドを公開する公開ステップと、前記端末装置による、前記コンテンツ再生装置が公開する前記コマンドを取得して呼び出す取得呼び出しステップと、前記コンテンツ再生装置による、前記端末装置の前記コマンドの呼び出しに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送する転送ステップと、前記端末装置による、転送された前記レスポンスを受信し、前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップとを含む。
本開示の第３の側面においては、コンテンツ再生装置により、端末装置から識別依頼処理部を動作させるためのコマンドが公開され、端末装置により、前記コンテンツ再生装置が公開する前記コマンドが取得されて呼び出され、前記コンテンツ再生装置により、前記端末装置の前記コマンドの呼び出しに応じて前記識別依頼処理部が動作されてレスポンスが前記端末装置に転送され、前記端末装置により、転送された前記レスポンスが受信されて、前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションが取得されて実行される。
本開示の第１の側面によれば、端末装置から識別依頼処理部を動作させるためのコマンドを公開することができる。
本開示の第２の側面によれば、公開されたコンテンツを呼び出すことによりコンテンツ再生装置の識別依頼処理部を動作させることができる。
本開示の第３の側面によれば、ホームネットワークを構成するコンテンツ再生装置と端末装置が連携することができる。
本開示の実施の形態であるACRサービス活用システムの構成例を示すブロック図である。 ACRサーバの構成例を示すブロック図である。 ACRクライアントの構成例を示すブロック図である。 ACRリファレンスデータのデータ構造を示す図である。 ACRクエリのデータ構造を示す図である。 ACRレスポンスのデータ構造を示す図である。 ホームネットワークシステムにおける事前処理を説明するフローチャートである。 ホームネットワークシステムにおける事前処理を説明するフローチャートである。 ACRサービス活用システムの動作を説明するフローチャートである。 コンピュータの構成例を示すブロック図である。
以下、本開示を実施するための最良の形態（以下、実施の形態と称する）について、図面を参照しながら詳細に説明する。
［ACRサービス活用システムの構成例］
図１は、本開示の実施の形態であるACRサービス活用システムの構成例を示している。
このACRサービス活用システム１０は、ＴＶ受像機などのコンテンツ再生装置４０の画面にてユーザが視聴しているコンテンツを識別し、該コンテンツに関するメタデータをセカンド(2nd)スクリーンデバイス５０にてユーザに提示したり、該コンテンツの進行に合わせて連動アプリケーションを実行したりするものである。
ここで、コンテンツとは、放送中の番組に限られない。例えば、コンテンツ再生装置４０に接続されたビデオレコーダなどの外部装置により録画、再生された番組、パッケージメディアから再生された映画等の映像、インターネットなどを介してダウンロードした動画、楽曲などのあらゆるＡＶコンテンツが含まれる。また、番組間や番組の途中などに挿入されるコマーシャルメッセージ（以下、ＣＭと称する）もコンテンツに含まれる。
コンテンツの識別には、視聴しているコンテンツから周期的に抽出する、該コンテンツの特徴を表すシグニチャデータ（例えば、ウォータマーク、フィンガプリントなど）と、予めデータベースに登録されているコンテンツのシグニチャデータとを比較することにより、コンテンツを識別するACR(Automatic Content Recognition)が用いられる。
ACRサービス活用システム１０は、コンテンツやそれに対応する連動アプリなどを供給する側のプロバイダシステム２０と、コンテンツを視聴したり連動アプリを利用したりするユーザ側のホームネットワークシステム３０とにより構成される。プロバイダシステム２０とホームネットワークシステム３０とは、放送網１１および双方向通信網１２を介して接続される。ここで、放送網１１には、ＴＶ放送網、CATV網、IPTV網などが含まれる。双方向通信網１２はインターネットに代表されるIP通信網を指す。
[プロバイダシステム２０の説明]
プロバイダシステム２０は、コンテンツサーバ２１、メタデータサーバ２２、アプリケーションサーバ２３、およびACRサーバ２４から構成される。
コンテンツサーバ２１は、番組やＣＭなどのコンテンツを、放送網１１を介して放送する。また、コンテンツサーバ２１は、放送するコンテンツをACRサーバ２４に供給する。なお、コンテンツを供給する代わりに、コンテンツ識別子と、該コンテンツから予め抽出したシグニチャデータをACRサーバ２４に供給するようにしてもよい。
メタデータサーバ２２は、コンテンツサーバ２１から放送されるコンテンツに対応するメタデータをACRサーバ２４に供給する。メタデータには、該コンテンツに関する各種の情報や該コンテンツの進行に合わせて実行させる連動アプリケーションを表す識別子、該連動アプリケーションにて用いるデータなどが含まれる。
アプリケーションサーバ２３は、ホームネットワークシステム３０のセカンドスクリーンデバイス５０からの要求に応じ、双方向通信網１２を介してアプリケーションや該アプリケーションにて利用するデータを供給する。
ACRサーバ２４は、ホームネットワークシステム３０のコンテンツ再生装置４０などで視聴され得る様々なコンテンツのそれぞれから所定のサンプリング周期で抽出されたシグニチャデータに、コンテンツ識別子、アプリケーション識別子などを対応付けたACRリファレンスデータを予めデータベース化して保持している。ACRサーバ２４は、ACRリファレンスデータのデータベースに基づいて、コンテンツ再生装置４０のACRクライアント４２から送信されるACRクエリに応じてACRレスポンスを生成、返信する。
なお、プロバイダシステム２００を構成するコンテンツサーバ２１、メタデータサーバ２２、アプリケーションサーバ２３、およびACRサーバ２４は、一箇所に集中して配置してもよいし、分散して配置してもよい。また、これらのうちのいくつかを適宜組み合わせて構成するようにしてもよい。さらに、これらはそれぞれ複数存在してもよい。
[ホームネットワークシステム３０の説明]
ホームネットワークシステム３０は、ＴＶ受像機などのコンテンツ再生装置４０と、タブレット型端末、スレートＰＣ、スマートフォンなどのセカンドスクリーンデバイス５０から成る。なお、これらはホームネットワークシステム３０内にそれぞれ複数存在してもよい。コンテンツ再生装置４０とセカンドスクリーンデバイス５０とは、例えば無線LANなどにより接続されているものとする。
コンテンツ再生装置４０は、主にコンテンツを視聴するためのものであり、コンテンツレンダラ４１、ACRクライアント４２、UPnP(Universal Plug and Play)サーバ４３、およびローカルWebサーバ４４を有する。
コンテンツレンダラ４１は、コンテンツ再生装置４０（ＴＶ受像機など）のディスプレイに表示される全てのコンテンツを取得、分岐してACRクライアント４２に供給する。すなわち、コンテンツレンダラ４１は、コンテンツサーバ２１から放送されるコンテンツのみならず、コンテンツ再生装置４０の各種入力端子(HDMI(登録商標)端子など)を介して入力されるコンテンツも取得、分岐してACRクライアント４２に供給する。
ACRクライアント４２は、コンテンツレンダラ４１より入力されるコンテンツから、当該コンテンツの特徴を表すシグニチャデータを所定のサンプリング周期で抽出する。ここで、シグニチャデータの抽出方式は、プロバイダシステム２０のACRサーバ２４と同じ抽出方式（後述）を用いることとする。
また、ACRクライアント４２は、抽出したシグニチャデータを含むACRクエリを生成し、双方向通信網１２を介してプロバイダシステム２０のACRサーバ２４に送信する。また、ACRクライアント４２は、送信したACRクエリに応じてACRサーバ２４から返信されるACRレスポンスを受信して保持する。
UPnPサーバ４３は、コンテンツ再生装置４０とともにホームネットワークシステム３０を構成している他のデバイス（いまの場合、セカンドスクリーンデバイス５０）に対して、自身が実装されているコンテンツ再生装置４０の機能（いまの場合、ACRクライアント４２によりACRサービスを利用すること）を呼び出すためのインターフェイスのWebAPI(Application Program Interface)の詳細を周知するものである。具体的には、一般的なUPnPサーバが提供する基本プロトコル上に新たにプロトコルを定義し、これを用いて周知を行なう（詳細後述）。
ローカルWebサーバ４４は、コンテンツ再生装置４０とともにホームネットワークシステム３０を構成している他のデバイス（いまの場合、セカンドスクリーンデバイス５０）に対して、自身が実装されているコンテンツ再生装置４０の機能（いまの場合、いまの場合、ACRクライアント４２によりACRサービスを利用すること）を利用させる。具体的には、UPnPサーバ４３が通知したAPIが呼び出されたことに応じてACRクライアント４２を制御し、ACRサービスを利用させ、ACRサーバ２４から返信されるACRレスポンスをセカンドスクリーンデバイス５０に転送する。
セカンドスクリーンデバイス５０は、本実施の形態おいては主にコンテンツ再生装置４０にて視聴されているコンテンツのメタデータをユーザに提示したり、該コンテンツの進行に合わせて連動アプリを実行したりするものであり、ACRアプリ５１と連動アプリマネージャ５２を有する。
ACRアプリ５１は、セカンドスクリーンデバイス５０に予めインストールされており、コンテンツ再生装置４０と連携してACRサービスを利用するときに起動される。ACRアプリ５１は、ACRサービスを利用する機能を読み出すためのAPIをUPnPサーバ４３から取得し、該APIを呼び出すことにより、ACRクライアント４２が受信したACRサーバ２４からのACRレスポンスを、ローカルWebサーバ４４を介して取得する。さらに、ACRアプリ５１は、取得したACRレスポンスを解析し、解析結果を連動アプリマネージャ５２に通知する。
連動アプリマネージャ５２は、ACRアプリ５１からの通知に従い、ACRレスポンスに含まれていたメタデータをユーザに提示したり、コンテンツ再生装置４０にて視聴中のコンテンツに対応する連動アプリを、双方向通信網１２を介してアプリケーションサーバ２３から取得して実行したりする。なお、連動アプリマネージャ５２には、Webブラウザを用いることができる。
［ACRサーバ２４の詳細な構成例］
図２は、プロバイダシステム２０に含まれるACRサーバ２４の詳細な構成例を示している。
ACRサーバ２４は、コンテンツ取得部６１、シグニチャ抽出部６２、ACRデータベース(DB)６３、ACRレスポンス生成部６４、および通信部６５から構成される。
コンテンツ取得部６１は、コンテンツサーバ２１が放送網１１を介して放送する予定のコンテンツやコンテンツ再生装置４０で視聴され得る様々なコンテンツを、コンテンツサーバ２１などから取得し、取得したコンテンツをシグニチャ抽出部６２に供給する。シグニチャ抽出部６２は、コンテンツ取得部６１から供給されるコンテンツから、その特徴を表すシグニチャデータを所定の抽出方式を用い、所定のサンプリング周期で抽出してACRデータベース６３に出力する。
シグニチャ抽出部６２におけるシグニチャデータの抽出方式は、既存の任意の手法を適用することができる。例えば、コンテンツに予め埋め込まれているウォータマークを抽出してシグニチャデータとしたり、フィンガプリントを算出し、それをシグニチャデータとしたりするようにしてもよい。
シグニチャデータとしてフィンガプリントを用いることにより、コンテンツの解像度、アスペクト比、ビットレート、符号化フォーマットなどが変換されたとしても、変換前と変換後とで同一のシグニチャデータを得ることができる。したがって、このシグニチャデータに基づいてコンテンツの識別を行った場合の識別精度を上げることができる。
なお、ACRサーバ２４が複数存在する場合、それぞれのシグニチャ抽出部６２におけるシグニチャデータの抽出方式は必ずしも統一する必要はなく、ACRサーバ２４ごとに任意の抽出方式を採用することができる。
ACRデータベース６３は、シグニチャ抽出部６２から入力される各シグニチャデータに対してその抽出元のコンテンツを表すコンテンツ識別子などを対応付けたACRリファレンスデータを生成して記憶する。これにより、コンテンツから抽出されたシグニチャデータがデータベース化される。ACRリファレンスデータのデータ構造については図４を参照して後述する。
ACRレスポンス生成部６４は、ACRデータベース６３を参照することにより、ACRクライアント４２から送信されるACRクエリに含まれるシグニチャデータの抽出元のコンテンツを識別する。さらに、ACRレスポンス生成部６４は、識別結果としてのコンテンツ識別子、関連メタデータなどを含むACRレスポンスを生成する。ACRレスポンスのデータ構造については図６を参照して後述する。通信部６５は、ACRクライアント４２から送信されたACRクエリを受信してACRレスポンス生成部６４に出力し、ACRレスポンス生成部６４で生成されたACRレスポンスをACRクライアント４２に送信する。
［ACRクライアント４２の詳細な構成例］
図３は、コンテンツ再生装置４０に搭載されたACRクライアント４２の詳細な構成例を示している。
ACRクライアント４２は、シグニチャ抽出部７１、ACRクエリ生成部７２、通信部７３、およびACRレスポンス保持部７４から構成される。
シグニチャ抽出部７１は、コンテンツレンダラ４１から分岐、供給されるコンテンツから、その特徴を表すシグニチャデータを所定のサンプリング周期で抽出してACRクエリ生成部７２に出力する。なお、シグニチャ抽出部７１におけるシグニチャデータの抽出方式は、利用するACRサーバ２４のシグニチャ抽出部６２におけるそれと共通である。
ACRクエリ生成部７２は、シグニチャ抽出部７１により抽出されたシグニチャデータを含む、ACRサーバ２４に対してコンテンツの識別を依頼するためのACRクエリを生成する。ACRクエリのデータ構造については図５を参照して後述する。
通信部７３は、ACRクエリ生成部７２で生成されたACRクエリをACRサーバ２４に送信し、ACRサーバ２４から返信されるACRレスポンスを受信してACRレスポンス保持部７４に出力する。ACRレスポンス保持部７４は、通信部７３で受信されたACRレスポンスを保持する。なお、保持されたACRレスポンスはローカルWebサーバ４４によりセカンドスクリーンデバイス５０に転送される。
[ACRリファレンスデータのデータ構造]
図４は、ACRサーバ２４のACRデータベース６３にデータベース化されているACRリファレンスデータのデータ構造を示している。
ACRリファレンスデータ１００においては、コンテンツから所定の周期で抽出された各シグニチャデータ１０１に対して、コンテンツ識別子１０２、再生時刻１０３、および関連メタデータ１０４が対応付けられている。
シグニチャデータ１０１は、シグニチャ抽出部６２にてコンテンツから抽出されたものである。コンテンツ識別子１０２は、シグニチャデータ１０１の抽出元のコンテンツを表す情報である。再生時刻１０３は、コンテンツ識別子１０２が表すコンテンツから該シグニチャデータ１０１が抽出されたときのコンテンツの進行タイミングを示すものであり、該コンテンツの先頭からの経過時間によって表される。
関連メタデータ１０４には、コンテンツ識別子１０２が表すコンテンツのメタデータや、該コンテンツの、再生時刻１０３が示すコンテンツの進行タイミングに合わせて実行すべき連動アプリを表すアプリケーション識別子、実行された該連動アプリにより利用される各種データが含まれる。
なお、関連メタデータ１０４は、再生時刻１０３が示すコンテンツの進行タイミングに応じて異なる内容にしてもよい。
[ACRクエリのデータ構造]
図５は、ACRクライアント４２のACRクエリ生成部７２にて生成されるACRクエリのデータ構造を示している。
ACRクエリ１１０には、ACRクエリ識別子１１１、シグニチャ方式識別子１１２、サービス識別子１１３、シグニチャデータ１１４、ローカルタイムスタンプ１１５、発信元アドレス１１６、および署名１１７が含まれる。
ACRクエリ識別子１１１は、該ACRクエリ１１０を一意に特定するための情報である。シグニチャ方式識別子１１２は、シグニチャデータ１１４を抽出する際に用いられた抽出方式を特定するための情報である。サービス識別子１１３は、ACRサーバ２４が複数存在する場合において、該ACRクエリ１１０を送信してACRレスポンスを得るACRサーバ２４を選択するための情報である。
シグニチャデータ１１４は、ACRクライアント４２のシグニチャ抽出部７１にてコンテンツから抽出されたものである。ローカルタイムスタンプ１１５は、コンテンツからシグニチャデータ１１４が抽出されたタイミングを示すものであり、コンテンツ再生装置４０のローカルシステムクロックが示す時刻により表される。
発信元アドレス１１６は、該ACRクエリ１１０を発信するACRクライアント４２の双方向通信網１２におけるアドレスであり、該ACRクエリ１１０に応じてACRサーバ２４にて生成されるACRレスポンスの返信先を表す情報として利用される。署名１１７は、該ACRクエリ１１０の改ざんを抑止するためのものである。なお、ACRクエリ１１０の全体を暗号化して送信するようにしてもよい。
[ACRレスポンスのデータ構造]
図６は、ACRサーバ２４のACRレスポンス生成部６４にて生成されるACRレスポンスのデータ構造を示している。
ACRレスポンス１２０は、同図Ａまたは同図Ｂに示すデータ構造を有する。同図Ａは、ACRクエリ１１０に含まれるシグニチャデータ１１４の抽出元のコンテンツが識別できた場合、すなわち、コンテンツ再生装置４０にて視聴中のコンテンツを識別できた場合のACRレスポンス１２０のデータ構造である。同図Ｂはコンテンツが識別できなかった場合のACRレスポンス１２０のデータ構造である。
コンテンツ再生装置４０にて視聴中のコンテンツが識別できた場合のACRレスポンス１２０（同図Ａ）には、ACRクエリ識別子１２１、シグニチャ方式識別子１２２、サービス識別子１２３、コンテンツ識別子１２４、再生時刻１２５、ローカルタイムスタンプ１２６、関連メタデータ１２７、発信元アドレス１２８、および署名１２９が含まれる。
一方、コンテンツ再生装置４０にて視聴中のコンテンツが識別できなかった場合のACRレスポンス１２０（同図Ｂ）には、ACRクエリ識別子１２１、サービス識別子１２２、発信元アドレス１２８、署名１２９、および識別失敗フラグ１３０が含まれる。
ACRクエリ識別子１２１、シグニチャ方式識別子１２２、サービス識別子１２３、ローカルタイムスタンプ１２６は、該ACRレスポンス１２０の返信を要求したACRクエリ１１０を特定するためのものであり、該ACRクエリ１１０のACRクエリ識別子１１１、シグニチャ方式識別子１１２、サービス識別子１１３、およびローカルタイムスタンプ１１５が引用されて記述される。
コンテンツ識別子１２４、再生時刻１２５、および関連メタデータ１２７は、コンテンツの識別結果を表すものであり、対応するACRリファレンスデータ１００のコンテンツ識別子１０２、再生時刻１０３、および関連メタデータ１０４が引用されて記述される。
発信元アドレス１２８は、該ACRレスポンス１２０を送信するACRサーバ２４の双方向通信網１２上のアドレスである。署名１２９は、該ACRレスポンス１２０の改ざんを抑止するためのものである。なお、ACRレスポンス１２０の全体を暗号化して送信することにより、その改ざんを防止するようにしてもよい。
識別失敗フラグ１３０は、ACRサーバ２４にて、ACRクライアント４２からのACRクエリ１１０に含まれるシグニチャデータ１１４の抽出元のコンテンツ、すなわち、コンテンツ再生装置４０で視聴中のコンテンツを識別することができなかったことを表すフラグである。
［ACRサービス活用システム１０のホームネットワークシステム３０の処理］
次に、ホームネットワークシステム３０を成すセカンドスクリーンデバイス５０が、コンテンツ再生装置４０が利用できる機能（本実施の形態ではACRサービスのこと）に関する情報であるデバイスディスクリプションを取得する処理について説明する。
図７は、既にセカンドスクリーンデバイス５０にてACRアプリ５１が起動されている状態において、コンテンツ再生装置４０がネットワークシステム３０に接続された場合（コンテンツ再生装置４０の起動時も含む）の処理を説明するフローチャートである。
ステップＳ１において、コンテンツ再生装置４０のUPnPサーバ４３は、ホームネットワークシステム３０に対して、UPnPで規定されている以下に示されるようなNotifyメッセージをマルチキャスト配信する。該Notifyメッセージは、UDP/IPにより転送され、いまの場合、セカンドスクリーンデバイス５０のACRアプリ５１に受信される。
NOTIFY ＊ HTTP/1.1
…
LOCATION “http://192.168.0.4:55500”
…
NotifyメッセージのLOCATIONヘッダにはコンテンツ再生装置４０のデバイスディスクリプションの取得先アドレスが記載されている。そこで、ステップＳ１１において、セカンドスクリーンデバイス５０にてACRアプリ５１は、HTTP GETにより、該取得先アドレスからデバイスディスクリプションを取得する。
次に、図８は、先にコンテンツ再生装置４０がネットワークシステム３０に接続され、起動されている状態において、後からセカンドスクリーンデバイス５０にてACRアプリ５１が起動された場合の処理を説明するフローチャートである。
この場合、既にコンテンツ再生装置４０のUPnPサーバ４３によるNotifyメッセージのマルチキャスト配信が行なわれた後であるので、セカンドスクリーンデバイス５０のACRアプリ５１はNotifyメッセージを受信することができない。そこで、ステップＳ２１において、ACRアプリ５１は、UPnPで規定されているM-Searchにより利用可能なACRクライアントを検索する。
該M-Searchに対して、ステップＳ３１において、コンテンツ再生装置４０のUPnPサーバ４３は、デバイスディスクリプションを応答する。ACRアプリ５１は、ステップＳ２２において、該デバイスディスクリプションを受信する。
［デバイスディスクリプションの例］
ここで、デバイスディスクリプションの例について説明する。デバイスディスクリプションの記述には、例えばXMLファイルが用いられる。
以下にデバイスディスクリプションの第１の例を示す。
デバイスディスクリプションの第１の例
<root xmlns=”urn:schemas-upnp-org:device-1-0”>
…
<serviceList>
<service>
<serviceType>”urn:abc:service:ACRClient.v1”</serviceType>(ACRクライアントサービスを意味する)
<serviceId>”urn:UPnP:serviceId:1234”</serviceId>(ACRクライアントサービスのサービスIDを意味する)
<SCPDURL></SCPDURL>
<controlURL>” http://192.168.0.4:55500/getACRResponse”</controlURL>
…
</service>
</serviceList>
…
</root>
なお、既存の一般的なUPnPに規定されたデバイスディスクリプションの<SCPDURL>要素には、ACRクライアント４２が利用できるACRサービスに関して記述されているサービスディスクリプションの取得先アドレスが記述されており、ACRアプリ５１がHTTP GETにより該取得先アドレスからサービスディスクリプションを取得することになる。さらに、ACRアプリ５１が、UPnPで規定されているSOAPにより、<controlURL>要素に記述されているURLに対してアクションのメッセージを送付することによりアクション（いまの場合、ACRクエリの送信と、ACRレスポンスの転送）を呼び出すことになる。
しかしながら、本実施の形態においては、より少ない手順でアクションを呼び出せるように、上述したようなUPnPに規定されたデバイスディスクリプションを拡張し、該アクションを呼び出すためのWebAPIをデバイスディスクリプションに直接記述するようにする。
具体的には、上に示された第１の例のように、例えば、<SCPDURL>要素に何も記述せず空にするか、または所定のダミーの文字列を記述するようにし、<controlURL>要素にWebAPIのサーバサイドスクリプトURL（第１の例の場合、http://192.168.0.4:55500/getACRResponse）を直接記述するようにする。
または、以下に示す第２の例のように、UPnPには規定されていない<WebAPIURL>要素を新たに設け、該<WebAPIURL>要素にWebAPIのサーバサイドスクリプトURLを直接記述するようにしてもよい。
デバイスディスクリプションの第２の例
<root xmlns=”urn:schemas-upnp-org:device-1-0”>
…
<serviceList>
<service>
<serviceType>”urn:abc:service:ACRClient.v1”</serviceType>(ACRクライアントサービスを意味する)
<serviceId>”urn:UPnP:serviceId:1234”</serviceId>(ACRクライアントサービスのサービスIDを意味する)
<SCPDURL></SCPDURL>
<controlURL></controlURL>
<WebAPIURL>” http://192.168.0.4:55500/getACRResponse”</controlURL>
…
</service>
</serviceList>
第１または第２の例のデバイスディスクリプションを取得したセカンドスクリーンデバイス５０のACRアプリ５１では、デバイスディスクリプションの<controlURL>要素または<WebAPIURL>要素に記述されているWebAPIのサーバサイドスクリプトurlであるgetACRResponseをHTTP GETにより呼び出すことにより、アクションを実行させることができる。具体的には、コンテンツ再生装置４０のACRクライアント４２に対して起動していなければ起動させた上で、ACRクリエ１１０を送信させ、それに応じて返信されたACRレスポンス１２０を転送させることができる。なお、ACRレスポンス１２０の転送は、WebAPIに応じて戻されるHTTPレスポンスのボディに、例えば以下のようにJSONにより記述された状態で行なわれる。
HTTP/1.1 200 OK
Content-Type: application/json; charset=utf-8
…
“JSONによりエンコードされたACRレスポンスの内容”
該WebAPIを用いたトランザクションはコンテンツが視聴されている間、繰り返しポーリングにより行われる。そして、コンテンツの進行に応じてその時々に変換するACRレスポンス１２０の中の関連メタデータ１２７などがセカンドスクリーンデバイス５０にてユーザに提示される。
上述したように、デバイスディスクリプションを拡張し、これを標準化すれば、異なるベンダにより製造、販売されるコンテンツ再生装置４０とセカンドスクリーンデバイス５０とが速やかに連携動作することが可能となる。
なお、WebAPIを用いる代わりに、IETF(Internet Engineering Task Force)などが標準化を策定しているWebSocketを用いるようにしてもよい。WebSocketを用いる場合、ローカルWebサーバ４４（またはACRクライアント４２あるいはセカンドスクリーンデバイス５０）内にWebSocketサーバを設け、該WebSocketサーバを介して、ACRアプリ５１とACRクライアント４２の双方からセッション(TCPコネクション)確立リクエストを発行してセッションを確立し、該セッション上で上記JSON等によりACRレスポンス１２０を転送するようにする。
この場合、ACRクライアント４２が新たなACRレスポンス１２０をACRサーバ２４から受信すると直ちに、確立された該セッションを介してACRアプリ５１に転送される。したがって、WebAPIを用いた時には必要であったポーリングが不要となり、ポーリングの周期に依存しないACRレスポンス１２０の即時転送が可能となる。
［ACRサービス活用システム１０による動作］
次に、ACRサービス活用システム１０の動作について説明する。
なお、以下に説明する動作の前提として、ホームネットワークシステム３０においては、セカンドスクリーンデバイス５０のACRアプリ５１が、既にコンテンツ再生装置４０のUPnPサーバ４３からデバイスディスクリプションを取得しているものとする。
また、プロバイダシステム２０のACRサーバ２４においては、コンテンツ再生装置４０にて視聴され得る様々なコンテンツに対応するACRリファレンスデータ１００が生成されてACRデータベース６３に登録されているものとする。
図９は、ACRサービス活用システム１０の動作を説明するフローチャートである。
ステップＳ４１において、プロバイダシステム２０のコンテンツサーバ２１は、放送網１１を介したコンテンツの送信を開始する。
一方、ホームネットワークシステム３０においては、ステップＳ５１として、コンテンツ再生装置４０がコンテンツの受信、再生を開始する。ここで、ステップＳ６１として、セカンドスクリーンデバイス５０のACRアプリ５１が、WebAPIを呼び出すことによりACRクライアント４２のアクションを要求すると、これに応じたローカルWebサーバ４４からの制御により、ACRクライアント４２等が動作を開始する。
すなわち、ステップＳ５２において、コンテンツレンダラ４１は、視聴中のコンテンツを取得、分岐してACRクライアント４２に出力する。ACRクライアント４２のシグニチャ抽出部７１は、該コンテンツからシグニチャデータ１１４を抽出してACRクエリ生成部７２に出力する。ステップＳ５３において、ACRクエリ生成部７２は、該シグニチャデータ１１４を含むACRクエリ１１０を生成し、通信部７３が生成されたACRクエリ１１０をACRサーバ２４に送信する。
ACRクライアント４２からのACRクエリ１１０を受信したACRサーバ２４では、ステップＳ４２において、ACRレスポンス生成部６４が、ACRデータベース６３を参照し、受信したACRクエリ１１０に含まれるシグニチャデータ１１４に対応するコンテンツを識別する。さらに、ACRレスポンス生成部６４は、ステップＳ４３において、コンテンツの識別結果に応じたACRレスポンス１２０を生成し、通信部６５は、生成されたACRレスポンス１２０をACRクライアント４２に返信する。
ACRサーバ２４からのACRレスポンス１２０を受信したACRクライアント４２は、ステップＳ５４において、受信したACRレスポンス１２０をローカルWebサーバ４４に供給する。ローカルWebサーバ４４は、該ACRレスポンス１２０をセカンドスクリーンデバイス５０のACRアプリ５１に転送する。転送されたACRレスポンス１２０を受信したACRアプリ５１は、ステップＳ６２において、該ACRレスポンス１２０に含まれる関連メタデータ１２７を解析し、視聴中のコンテンツの進行に合わせて実行すべき連動アプリを連動アプリマネージャ５２に取得させる。
ステップＳ６３において、連動アプリマネージャ５２は、アプリケーションサーバ２３がステップＳ４４の処理として供給する該連動アプリを取得して実行する。なお、該連動アプリが既に取得済みである場合にはその取得を省略できる。また、該連動アプリが既に起動済みである場合にはその起動を省略できる。さらに、該連動アプリの実行を伴わずに、関連メタデータ１２７に含まれる情報をユーザに提示することもある。
以上に説明したステップＳ４１乃至Ｓ４４の処理、ステップＳ５１乃至Ｓ５４の処理、およびステップＳ６１乃６３の処理は、コンテンツが視聴されている間、繰り返し実行される。これにより、視聴中のコンテンツの進行に合わせて連動アプリを動作させることが可能となる。
ところで、上述した一連の処理を実行するプロバイダシステム２０のコンテンツサーバ２１乃至ACRサーバ２４、並びにホームネットワークシステム３０のコンテンツ再生装置４０およびセカンドスクリーンデバイス３０は、それぞれをハードウェアにより構成する他、コンピュータがソフトウェアを実行することにより実現することもできる。このコンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
図１０は、上述したコンピュータのハードウェアの構成例を示すブロック図である。
このコンピュータ２００において、CPU（Central Processing Unit）２０１，ROM（Read Only Memory）２０２，RAM（Random Access Memory）２０３は、バス２０４により相互に接続されている。
バス２０４には、さらに、入出力インターフェイス２０５が接続されている。入出力インターフェイス２０５には、入力部２０６、出力部２０７、記憶部２０８、通信部２０９、およびドライブ２２０が接続されている。
入力部２０６は、キーボード、マウス、マイクロフォンなどよりなる。出力部２０７は、ディスプレイ、スピーカなどよりなる。記憶部２０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部２０９は、ネットワークインタフェースなどよりなる。ドライブ２２０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア２１１を駆動する。
以上のように構成されるコンピュータ２００では、CPU２０１が、例えば、記憶部２０８に記憶されているプログラムを、入出力インターフェイス２０５およびバス２０４を介して、RAM２０３にロードして実行することにより、上述した一連の処理が行われる。
コンピュータ２００（CPU２０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア２１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
コンピュータ２００では、プログラムは、リムーバブルメディア２１１をドライブ２２０に装着することにより、入出力インターフェイス２０５を介して、記憶部２０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部２０９で受信し、記憶部２０８にインストールすることができる。その他、プログラムは、ROM２０２や記憶部２０８に、あらかじめインストールしておくことができる。
なお、コンピュータ２００が実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。
なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
１０ ACRサービス活用システム， １１ 放送網， １２ 双方向通信網， ２０ プロバイダシステム， ２１ コンテンツサーバ， ２２ メタデータサーバ， ２３ アプリケーションサーバ， ２４ ACRサーバ， ３０ ホームシステムサーバ， ４０ コンテンツ再生装置， ４１ コンテンツレンダラ， ４２ ACRクライアント， ４３ UPnPサーバ， ４４ ローカルWebサーバ， ５０ セカンドスクリーンデバイス， ５１ ACRアプリ， ５２ 連動アプリマネージャ， ６１ コンテンツ取得部， ６２ シグニチャ抽出部， ６３ ACRデータベース， ６４ ACRレスポンス生成部， ６５ 通信部， ７１ シグニチャ抽出部， ７２ ACRクエリ生成部， ７３ 通信部， ７４ ACRレスポンス保持部， １００ ACRリファレンスデータ， １１０ ACRクエリ， １２０ ACRレスポンス， ２００ コンピュータ， ２０１ CPU

Claims (19)

  1. 端末装置とともにホームネットワークシステムを構成する情報処理装置において、
    再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部と、
    前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開部と、
    前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行部と
    を備える情報処理装置。
  2. 前記公開部は、前記コマンドのURLを直接記述したデバイスディスクリプションを前記端末装置に公開する
    請求項１に記載の情報処理装置。
  3. 前記公開部は、UPnPの規定を拡張した前記デバイスディスクリプションに、前記コマンドのURLを直接記述して前記端末装置に公開する
    請求項２に記載の情報処理装置。
  4. 前記コマンドは、WebAPIまたはWebSocketである
    請求項２に記載の情報処理装置。
  5. 前記公開部は、前記ホームネットワーク上にNotifyメッセージをマルチキャスト配信し、前記Notifyメッセージに基づく前記端末装置からのアクセスに応じて前記デバイスディスクリプションを前記端末装置に公開する
    請求項２に記載の情報処理装置。
  6. 前記公開部は、前記端末装置からのM-Searchに応じて前記デバイスディスクリプションを前記端末装置に公開する
    請求項２に記載の情報処理装置。
  7. 前記レスポンスは、識別された前記コンテンツに対応する関連メタデータを含む
    請求項２に記載の情報処理装置。
  8. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備え、
    端末装置とともにホームネットワークシステムを構成する情報処理装置の情報処理において、
    前記情報処理装置による、
    前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開ステップと、
    前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行ステップと
    を含む情報処理方法。
  9. 端末装置とともにホームネットワークシステムを構成するコンピュータを、
    再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部と、
    前記端末装置から前記識別依頼処理部を動作させるためのコマンドを前記端末装置に公開する公開部と、
    前記端末装置からの前記コマンドに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送するコマンド実行部と
    して機能させるプログラム。
  10. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成する情報処理装置において、
    前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信するコマンド取得部と、
    受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と
    を備える情報処理装置。
  11. 前記コマンド取得部は、前記コンテンツ再生装置が公開したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得する
    請求項１０に記載の情報処理装置。
  12. 前記コマンド取得部は、前記コンテンツ再生装置が公開した、UPnPの規定を拡張したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得する
    請求項１１に記載の情報処理装置。
  13. 前記コマンドは、WebAPIまたはWebSocketである
    請求項１１に記載の情報処理装置。
  14. 前記コマンド取得部は、前記コンテンツ再生装置が前記ホームネットワーク上にマルチキャスト配信したNotifyメッセージに基づき、前記コンテンツ再生装置から前記デバイスディスクリプションを取得する
    請求項１１に記載の情報処理装置。
  15. 前記コマンド取得部は、M-Searchにより検索した前記コンテンツ再生装置から供給される前記デバイスディスクリプションを取得する
    請求項１１に記載の情報処理装置。
  16. 前記連動アプリケーション実行部は、さらに、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツのメタデータをユーザに提示する
    請求項１１に記載の情報処理装置。
  17. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、
    前記情報処理装置による、
    前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得する取得ステップと、
    前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信する受信ステップと、
    受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと
    を含む情報処理方法。
  18. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置とともにホームネットワークシステムを構成するコンピュータを、
    前記コンテンツ再生装置の前記識別依頼処理部を動作させるためのコマンドを前記コンテンツ再生装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ再生装置から転送される前記レスポンスを受信するコマンド取得部と、
    受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と
    して機能させるプログラム。
  19. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備えるコンテンツ再生装置と端末装置とによるホームネットワークシステムの情報処理方法において、
    前記コンテンツ再生装置による、前記端末装置から前記識別依頼処理部を動作させるためのコマンドを公開する公開ステップと、
    前記端末装置による、前記コンテンツ再生装置が公開する前記コマンドを取得して呼び出す取得呼び出しステップと、
    前記コンテンツ再生装置による、前記端末装置の前記コマンドの呼び出しに応じて前記識別依頼処理部を動作させ、前記レスポンスを前記端末装置に転送する転送ステップと、
    前記端末装置による、転送された前記レスポンスを受信し、前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと
    を含む情報処理方法。
JP2014546937A 2012-11-14 2013-11-01 情報処理装置、情報処理方法、およびプログラム Active JP6352191B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261726416P 2012-11-14 2012-11-14
US61/726416 2012-11-14
PCT/JP2013/079734 WO2014077141A1 (ja) 2012-11-14 2013-11-01 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2014077141A1 JPWO2014077141A1 (ja) 2017-01-05
JP6352191B2 true JP6352191B2 (ja) 2018-07-04

Family

ID=50683063

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014546937A Active JP6352191B2 (ja) 2012-11-14 2013-11-01 情報処理装置、情報処理方法、およびプログラム

Country Status (9)

Country Link
US (2) US9769503B2 (ja)
EP (1) EP2922304A4 (ja)
JP (1) JP6352191B2 (ja)
KR (1) KR102233783B1 (ja)
CN (1) CN104769956B (ja)
AU (1) AU2013346022B2 (ja)
CA (1) CA2890317C (ja)
MX (1) MX355117B (ja)
WO (1) WO2014077141A1 (ja)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
JP6210684B2 (ja) 2010-10-01 2017-10-11 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 情報処理装置、情報処理方法、及びプログラム
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
KR102060449B1 (ko) 2011-08-05 2019-12-30 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
KR102222166B1 (ko) 2012-06-19 2021-03-04 소니 주식회사 대화형 텔레비전을 위한 트리거 파라미터 테이블의 확장
MY177736A (en) 2012-07-12 2020-09-23 Sony Corp Parameterized services descriptor for advanced television services
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
US9326295B1 (en) 2014-12-10 2016-04-26 Sony Corporation Method and apparatus for transmitting a-priori information in a communication system
US20160204804A1 (en) 2015-01-13 2016-07-14 Sony Corporation Data processing apparatus and method
US9762354B2 (en) 2015-01-27 2017-09-12 Sony Corporation Signaling methods and apparatus
US10637595B2 (en) * 2015-03-01 2020-04-28 Lg Electronics Inc. Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, method for transmitting broadcast signal and method for receiving broadcast signal
US9912986B2 (en) 2015-03-19 2018-03-06 Sony Corporation System for distributing metadata embedded in video
US9756401B2 (en) 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
CA3166548A1 (en) * 2015-05-26 2016-12-01 Lg Electronics Inc. Broadcasting signal transmitting apparatus, broadcasting signal receiving apparatus, broadcasting signal transmitting method, and broadcasting signal receiving method
US9590782B2 (en) 2015-06-22 2017-03-07 Sony Corporation Signaling methods and apparatus
US10205991B2 (en) 2015-07-27 2019-02-12 Sony Corporation Hidden replaceable media slots
KR101757878B1 (ko) 2015-12-10 2017-07-14 삼성전자주식회사 컨텐츠 처리장치, 그의 컨텐츠 처리방법, 서버, 서버의 정보 제공방법 및 정보제공 시스템
CN106899882B (zh) * 2015-12-21 2019-11-01 北京奇虎科技有限公司 视频进度更新方法及终端
CA3143588A1 (en) * 2020-05-05 2021-11-11 Rovi Guides, Inc. Systems and methods for recommending content using progress bars

Family Cites Families (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6097441A (en) * 1997-12-31 2000-08-01 Eremote, Inc. System for dual-display interaction with integrated television and internet content
WO2005091637A1 (en) * 2004-03-19 2005-09-29 Koninklijke Philips Electronics N.V. Application controlled remote storage.
JP4655534B2 (ja) 2004-08-04 2011-03-23 ソニー株式会社 端末装置およびデータ処理方法、プログラム並びに記録媒体
US8577411B2 (en) * 2005-07-01 2013-11-05 Access Co., Ltd. Broadcast program scene report system and method, mobile terminal device, and computer program
US20070143446A1 (en) * 2005-12-21 2007-06-21 Morris Robert P Methods, systems, and computer program products for installing an application from one peer to another including application configuration settings and data
KR100765791B1 (ko) 2006-07-13 2007-10-12 삼성전자주식회사 콘텐트 관리 방법 및 장치
US7882356B2 (en) 2006-10-13 2011-02-01 Microsoft Corporation UPnP authentication and authorization
JP5167714B2 (ja) * 2007-07-30 2013-03-21 ソニー株式会社 データ送受信システム、データ中継装置、データ受信装置、データ中継方法、データ受信方法
US8875212B2 (en) * 2008-04-15 2014-10-28 Shlomo Selim Rakib Systems and methods for remote control of interactive video
EP3534606A1 (en) * 2007-11-30 2019-09-04 Samsung Electronics Co., Ltd. Method and apparatus for searching for iptv service relay devices and method and apparatus for interacting with devices
CN101656645B (zh) * 2008-08-20 2013-06-05 华为技术有限公司 外部设备与家庭网络内部设备通讯的方法、设备及系统
WO2010058354A1 (en) * 2008-11-24 2010-05-27 Koninklijke Philips Electronics N.V. 3d video reproduction matching the output format to the 3d processing ability of a display
US8453185B2 (en) * 2008-12-08 2013-05-28 Echostar Global B.V. Data transmission from a set-top box
KR101862351B1 (ko) * 2009-01-21 2018-05-29 삼성전자주식회사 콘텐트 정보 제공 및 재생 방법 및 장치
DE202010018557U1 (de) * 2009-03-20 2017-08-24 Google Inc. Verknüpfen von gerenderten Werbeanzeigen mit digitalen Inhalten
US20110060998A1 (en) * 2009-09-04 2011-03-10 Rick Schwartz System and method for managing internet media content
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US20120233651A1 (en) * 2009-10-07 2012-09-13 Hyeon Jae Lee Iptv receiver and method for providing content
US9277183B2 (en) 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
EP2343881B1 (en) * 2010-01-07 2019-11-20 LG Electronics Inc. Method of processing application in digital broadcast receiver connected with interactive network, and digital broadcast receiver
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
US9185458B2 (en) * 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
US20110252443A1 (en) * 2010-04-11 2011-10-13 Mark Tiddens Method and Apparatus for Interfacing Broadcast Television and Video Display with Computer Network
US20110302599A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer TV-Centric Actions in Triggered Declarative Objects
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
JP2012015980A (ja) 2010-07-05 2012-01-19 Fujitsu Toshiba Mobile Communications Ltd 情報処理端末および情報システム
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
KR101878511B1 (ko) 2010-08-30 2018-07-13 소니 주식회사 수신 장치, 수신 방법 및 프로그램
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
JP5175908B2 (ja) 2010-09-14 2013-04-03 株式会社東芝 情報処理装置及びプログラム
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
JP6210684B2 (ja) 2010-10-01 2017-10-11 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 情報処理装置、情報処理方法、及びプログラム
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
WO2012051539A2 (en) * 2010-10-14 2012-04-19 Cyandia, Inc. Methods, apparatus, and systems for presenting television programming and related information
KR101960314B1 (ko) * 2010-11-24 2019-03-20 엘지전자 주식회사 영상 표시 장치 및 그 제어 방법
KR101763887B1 (ko) * 2011-01-07 2017-08-02 삼성전자주식회사 디바이스간 동기화된 인터랙션을 제공하는 콘텐츠 동기화 장치 및 방법
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US20120324495A1 (en) * 2011-06-17 2012-12-20 Microsoft Corporation Detecting and distributing video content identities
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
KR102060449B1 (ko) * 2011-08-05 2019-12-30 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
US8737813B2 (en) * 2011-09-16 2014-05-27 Nbcuniversal Media, Llc Automatic content recognition system and method for providing supplementary content
US9060206B2 (en) * 2011-09-16 2015-06-16 Nbcuniversal Media, Llc Sampled digital content based syncronization of supplementary digital content
JP5948773B2 (ja) * 2011-09-22 2016-07-06 ソニー株式会社 受信装置、受信方法、プログラム、及び情報処理システム
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) * 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
WO2013103273A1 (en) * 2012-01-05 2013-07-11 Lg Electronics Inc. Video display apparatus and operating method thereof
WO2013133601A1 (en) * 2012-03-05 2013-09-12 Lg Electronics Inc. Video display apparatus and operating method thereof
JP5896222B2 (ja) * 2012-03-21 2016-03-30 ソニー株式会社 端末装置、中継装置、情報処理方法、プログラム、およびコンテンツ識別システム
US10931735B2 (en) * 2012-06-28 2021-02-23 Netflix, Inc. Application discovery
JP6050625B2 (ja) * 2012-06-28 2016-12-21 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 情報処理装置及び情報処理方法、コンピューター・プログラム、並びに情報通信システム
CA2875467C (en) * 2012-08-22 2017-03-14 Lg Electronics Inc. Apparatus and method for processing an interactive service
US8914832B2 (en) * 2012-12-14 2014-12-16 Sony Corporation Information processing apparatus, information processing method, and program

Also Published As

Publication number Publication date
EP2922304A1 (en) 2015-09-23
AU2013346022B2 (en) 2018-03-15
US20140137165A1 (en) 2014-05-15
JPWO2014077141A1 (ja) 2017-01-05
AU2013346022A1 (en) 2015-04-23
KR20150084798A (ko) 2015-07-22
CN104769956A (zh) 2015-07-08
US9769503B2 (en) 2017-09-19
EP2922304A4 (en) 2016-08-10
MX2015005760A (es) 2015-08-12
KR102233783B1 (ko) 2021-04-08
US20180103275A1 (en) 2018-04-12
CN104769956B (zh) 2019-07-09
MX355117B (es) 2018-04-06
CA2890317C (en) 2021-09-14
US10462496B2 (en) 2019-10-29
CA2890317A1 (en) 2014-05-22
WO2014077141A1 (ja) 2014-05-22

Similar Documents

Publication Publication Date Title
JP6352191B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6383658B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6219275B2 (ja) 端末装置、情報処理方法、プログラム、および連動アプリケーション供給システム
JP6219269B2 (ja) 端末装置、情報処理方法、プログラム、および連動アプリケーション供給システム
KR102110623B1 (ko) 송신 장치, 정보 처리 방법, 프로그램, 수신 장치 및 애플리케이션 연동 시스템
JP5896222B2 (ja) 端末装置、中継装置、情報処理方法、プログラム、およびコンテンツ識別システム
US20150150034A1 (en) Information processing device, information processing method, and program
WO2014010469A1 (ja) 受信装置、情報処理方法、プログラム、送信装置、およびアプリケーション連動システム
JP6023518B2 (ja) 情報処理装置、情報処理方法、プログラム、およびコンテンツ共有システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171226

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180227

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180427

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180528

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180531

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180606

R150 Certificate of patent or registration of utility model

Ref document number: 6352191

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250