JP6383658B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP6383658B2
JP6383658B2 JP2014531798A JP2014531798A JP6383658B2 JP 6383658 B2 JP6383658 B2 JP 6383658B2 JP 2014531798 A JP2014531798 A JP 2014531798A JP 2014531798 A JP2014531798 A JP 2014531798A JP 6383658 B2 JP6383658 B2 JP 6383658B2
Authority
JP
Japan
Prior art keywords
content
window
command
acr
visual attribute
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014531798A
Other languages
English (en)
Other versions
JPWO2014091942A1 (ja
Inventor
山岸　靖明
靖明 山岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Saturn Licensing LLC
Original Assignee
Saturn Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Saturn Licensing LLC filed Critical Saturn Licensing LLC
Publication of JPWO2014091942A1 publication Critical patent/JPWO2014091942A1/ja
Application granted granted Critical
Publication of JP6383658B2 publication Critical patent/JP6383658B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Computer And Data Communications (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関し、特に、ホームネットワークを構成するあるスクリーンデバイスにて表示されているコンテンツをACR(Automatic Content Recognition)サービスにより識別し、他のスクリーンデバイスにより該コンテンツに対応するメタデータを表示したり、該コンテンツの進行に合わせてアプリケーションを実行したりする場合に用いて好適な情報処理装置、情報処理方法、およびプログラムに関する。
例えば、ＴＶ（テレビジョン）番組の視聴者に対し、放送中のＴＶ番組（以下、単に番組と称する）に関連する情報（出演者、あらすじ、次回の予告等）や、番組には直接関係しないが視聴者にとって有益な情報（ニュース、天気予報、交通情報等）等を画面上に表示することを考える。
これを実現するためには、専用のアプリケーションプログラム（以下、アプリケーションと略記する）を取得、起動させるためのコマンドを番組の進行に連動してＴＶ受像機等に対して送信すればよい。実際、既に日本や欧州等においては、ＴＶ放送信号におけるデータ放送用の帯域を利用して当該コマンドやアプリケーションを送信することにより、これが実現されている（例えば、特許文献１参照）。
一方、米国では、ＴＶ放送信号にデータ放送用の帯域が設けられておらず、それに代わる方法が確立していないので、番組の進行に連動してアプリケーションを実行させることが実現されていない。
なお、米国では、ＴＶ受像機にてＴＶ放送波を直接受信して番組を視聴する世帯よりも、CATVやIPTV等を介して番組を視聴する世帯の方が多い。CATVやIPTVではＴＶ放送信号から番組の映像および音声の信号だけを抽出して配信することがあるので、仮に米国におけるＴＶ放送信号にデータ放送用の帯域が設けられたとしても、アプリケーションやそれに関するデータを含めたデータ放送信号が受信装置まで伝送される保証はない。
さらに昨今、放送中の番組だけでなく、録画した番組、DVD，ＢＤ等のパッケージメディアから再生した映像、インターネット上からダウンロードした動画、楽曲等（以下、これらをコンテンツと称する）を視聴している場合においても、その進行に連動してアプリケーションを実行させたいという要求がある。
この要求を実現するためは、視聴されているコンテンツを識別する必要があり、その一手法として、ACR(Automatic Content Recognition)サービスと称する技術が存在する（例えば、特許文献２参照）。
ACRサービスは、ACRクライアントとACRサーバとにより実現される。ＴＶ受像機等のコンテンツ再生装置に搭載されるACRクライアントは、視聴されているコンテンツからその特徴を表すシグニチャデータを抽出してACRサーバに通知してコンテンツの識別を依頼する。ACRサーバは、通知されたシグニチャデータと予めデータベースに登録されているコンテンツのシグニチャデータとを比較することにより、コンテンツ再生装置で視聴されているコンテンツを識別する。さらに、識別したコンテンツに関するメタデータやそれに連動して実行すべきアプリケーション（以下、連動アプリと略称する）を表す情報を含むACRレスポンスをACRクライアントに応答する。
この応答を受信したACRクライアントが実装されたコンテンツ再生装置では、所定のサーバから連動アプリを取得して実行することになる。
特開２００６−５０２３７号公報 特開２０１２−１６８８０１号公報
ところで、上述したように米国においてはCATVやIPTV等の普及により、ＴＶ受像機がCATVやIPTV等のセットトップボックス等の外部装置の表示出力デバイスとして位置づけられている。
このため、ユーザはＴＶ受像機のリモートコントローラ（以下、リモコンと略称する）を操作する機会がほとんどなく、該外部装置のリモコンを操作することが多い。よって、ＴＶ受像機のリモコンによって操作することになる、コンテンツ再生装置としてのＴＶ受像機において起動された連動アプリに対する操作は、ユーザにとって使い勝手がよいものとはならない可能性がある。
したがって、ユーザの利便性を考慮し、ACRクライアントが搭載されたコンテンツ再生装置（ＴＶ受像機等）とは異なるセカンドスクリーンデバイスにて、コンテンツ再生装置で視聴中のコンテンツに関するメタデータを表示したり、連動アプリを実行させたりしたいという要求が発生してきている。
ここで、セカンドスクリーンデバイスとしては、例えばタブレット型端末、スレートＰＣ、スマートフォン等を挙げることができる。
また、昨今においては、セカンドスクリーンデバイスにて起動した所定のアプリケーションプログラムにより該外部装置を操作できるもの、すなわち、セカンドスクリーンデバイスを該外部装置のリモコンとして利用できるものが存在する。よって、コンテンツ再生装置やその外部装置に対する操作入力デバイスをセカンドスクリーンデバイスに集約するという観点においても上記要求の実現が望まれる。
またさらに、主に米国においては、コンテンツ再生装置としてのＴＶ受像機等の画面が５０乃至６０インチよりも大型化される傾向にあり、該大型化された画面に同時に異なる複数のコンテンツを表示させて視聴する利用形態が徐々に一般化し始めている。したがって、そのような大型画面を有するＴＶ受像機等にACRクライアントを内蔵させ、セカンドスクリーンデバイスと連携させる利用形態についても考慮する必要がある。以下、大型画面を有し、同時に異なる複数のコンテンツを表示できるＴＶ受像機等を、マルチウィンドウスクリーンデバイスと称する。
図１は、ACRクライアントを内蔵させたマルチウィンドウスクリーンデバイスとセカンド(2nd)スクリーンデバイスとを連携させてACRサービスを利用する想定し、それらをユーザ宅等に配置した場合の空間概略図である。
同図においては、ユーザの正面にマルチウィンドウスクリーンデバイス１−１が設置され、左側壁にマルチスクリーンデバイス１−２が設置されている。ユーザの傍には、セカンドスクリーンデバイス３が配置されている。
マルチウィンドウスクリーンデバイス１−１には、画面上に複数（図１の場合、３）のウィンドウを設けることができ、各ウィンドウには同時にそれぞれ異なるコンテンツ（同一のものも可能）を表示させることができる。以下、例えば、ウィンドウＡに表示されているコンテンツをコンテンツＡと称する。他のウィンドウに表示されているコンテンツについても同様とする。
また、マルチウィンドウスクリーンデバイス１−１は、ACRサービスを利用することにより、各ウィンドウに表示されているコンテンツの識別結果等を含むACRレスポンスをセカンドスクリーンデバイス３に転送できる。
マルチウィンドウスクリーンデバイス１−２についても、マルチウィンドウスクリーンデバイス１−１と同様である。ただし、図１においてマルチウィンドウスクリーンデバイス１−２は、その画面上にウィンドウＸだけを設けてコンテンツＸを表示している状態である。
セカンドスクリーンデバイス３では、マルチウィンドウスクリーンデバイス１−１やマルチウィンドウスクリーンデバイス１−２の各ウィンドウに表示されているコンテンツに対応するメタデータや、該コンテンツの進行に合わせた連動アプリを起動して同時に表示することができる。
図１の場合、セカンドスクリーンデバイス３は、ウィンドウＡのコンテンツＡに対する連動アプリＡと、ウィンドウＣのコンテンツＣに対する連動アプリＣと、ウィンドウＸのコンテンツＸに対するメタデータＸとが同時に表示されている状態である。
図１に示された利用形態を想定した場合、ユーザはセカンドスクリーンデバイス３の画面に表示されている各情報（連動アプリの映像やメタデータ）が、マルチウィンドウスクリーンデバイス１−１，１−２のいずれのウィンドウに表示されているコンテンツに対応するものであるのかを速やかに把握できない可能性がある。
したがって、マルチウィンドウスクリーンデバイス１−１，１−２の各ウィンドウに同時に表示され得る複数のコンテンツと、セカンドスクリーンデバイス３に表示され得る複数の情報（連動アプリの映像やメタデータ）との対応関係を、ユーザが速やかに把握できる仕組みが必要である。
本開示はこのような状況に鑑みてなされたものであり、同時に表示され得る複数のコンテンツと、別途表示される情報との対応関係を、ユーザが速やかに把握できるようにするものである。
本開示の第１の側面である情報処理装置は、端末装置とともにホームネットワークシステムを構成する情報処理装置において、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定部と、前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開部と、前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知部とを備える。
前記枠視覚属性設定部は、画面上に設けた複数の前記ウィンドウであって、異なる複数の前記コンテンツをそれぞれ表示させるための前記複数のウィンドウに対して、それぞれ異なる前記枠視覚属性を設定し、前記公開部は、複数の前記ウィンドウぞれぞれの枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開することができる。
前記枠視覚属性設定部は、前記端末装置からの前記コマンドを利用したリクエストに応じて、前記ウィンドウの前記枠視覚属性を変更することができる。
前記公開部は、UPnPの規定を拡張したデバイスディスクリプションに、前記コマンドのURLを直接記述して前記端末装置に公開することができる。
前記コマンドは、WebAPIとすることができる。
前記公開部は、ホームネットワーク上にNotifyメッセージをマルチキャスト配信し、前記Notifyメッセージに基づく前記端末装置からのアクセスに応じてデバイスディスクリプションを前記端末装置に公開することができる。
前記公開部は、前記端末装置からのM-Searchに応じてデバイスディスクリプションを前記端末装置に公開することができる。
本開示の第１の側面である情報処理装置は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部をさらに備えることができ、前記公開部は、前記端末装置から前記識別依頼処理部を動作させるためのコマンドも前記端末装置に公開することができる。
本開示の第１の側面である情報処理方法は、端末装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、前記情報処理装置による、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定ステップと、前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開ステップと、前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知ステップとを含む。
本開示の第１の側面であるプログラムは、端末装置とともにホームネットワークシステムを構成するコンピュータを、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定部と、前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開部と、前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知部として機能させる。
本開示の第１の側面においては、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性が設定され、前記ウィンドウに対して設定されている前記枠視覚属性の通知を端末装置から要求するためのコマンドが前記端末装置に公開され、前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性が前記端末装置に通知される。
本開示の第２の側面である情報処理装置は、画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成する情報処理装置において、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信するコマンド取得部と、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御部とを備える。
前記コマンド取得部は、前記コンテンツ表示装置が公開した、UPnPの規定を拡張したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得することができる。
前記コマンドは、WebAPIとすることができる。
前記コマンド取得部は、前記コンテンツ表示装置がホームネットワーク上にマルチキャスト配信したNotifyメッセージに基づき、前記コンテンツ表示装置からデバイスディスクリプションを取得することができる。
前記コマンド取得部は、M-Searchにより検索した前記コンテンツ表示装置から供給されるデバイスディスクリプションを取得することができる。
前記コンテンツ表示装置は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備え、前記コマンド取得部は、前記コンテンツ表示装置の前記識別依頼処理部を動作させるためのコマンドも前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ表示装置から転送される前記レスポンスを受信し、前記連動アプリケーション実行部は、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記連動アプリケーションを取得して実行することができる。
本開示の第２の側面である情報処理方法は、画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、前記情報処理装置による、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得する取得ステップと、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信する受信ステップと、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御ステップとを含む。
本開示の第２の側面であるプログラムは、画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成するコンピュータを、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信するコマンド取得部と、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御部として機能させる。
本開示の第２の側面においては、コンテンツ表示装置の画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドが前記コンテンツ表示装置から取得され、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信し、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションが取得されて実行される。その際、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定が行われる。
本開示の第３の側面である情報処理方法は、コンテンツ表示装置と端末装置とを有するホームネットワークシステムの情報処理方法において、前記コンテンツ表示装置による、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定ステップと、前記コンテンツ表示装置による、前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開ステップと、前記端末装置による、公開された前記コマンドを取得する取得ステップと、前記コンテンツ表示装置による、前記端末装置による前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知ステップと、前記端末装置による、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと、前記端末装置による、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御ステップとを含む。
本開示の第３の側面においては、コンテンツ表示装置により、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性が設定され、ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドが前記端末装置に公開される。一方、前記端末装置により、公開された前記コマンドが取得される。さらに、前記コンテンツ表示装置により、前記端末装置による前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性が前記端末装置に通知され、前記端末装置により、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションが取得されて実行され、その際、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定が行われる。
本開示の第１の側面によれば、コンテンツを表示させるウィンドウに対して設定した枠視覚属性を端末装置に通知することができる。
本開示の第２の側面によれば、コンテンツの進行に合わせて実行すべき連動アプリケーションによる画像を表示させる枠に対して、コンテンツ表示装置にてコンテンツを表示させるウィンドウに対して設定された枠視覚属性と同じ設定を行なうことができる。
本開示の第３の側面によれば、コンテンツ表示装置においてコンテンツを表示させるウィンドウと、端末装置において該コンテンツの進行に合わせて実行すべき連動アプリケーションによる画像を表示させる枠とに対して、共通の枠視覚属性を設定できる。
マルチウィンドウスクリーンデバイスとセカンドスクリーンデバイスとを連携させてACRサービスを利用する場合の空間概略図である。 本開示の概要を説明するための空間概略図である。 本開示の実施の形態であるACRサービス活用システムの構成例を示すブロック図である。 ACRサーバの構成例を示すブロック図である。 ACRクライアントの構成例を示すブロック図である。 ACRリファレンスデータのデータ構造を示す図である。 ACRクエリのデータ構造を示す図である。 ACRレスポンスのデータ構造を示す図である。 ホームネットワークシステムにおける事前処理を説明するフローチャートである。 ホームネットワークシステムにおける事前処理を説明するフローチャートである。 ACRサービス活用システムの動作を説明するフローチャートである。 コンピュータの構成例を示すブロック図である。
以下、本開示を実施するための最良の形態（以下、実施の形態と称する）について、図面を参照しながら詳細に説明する。
［ACRサービス活用システムの概要］
図２は、本開示の実施の形態であるACRサービス活用システムの概要を示している。該ACRサービス活用システムは、ACRクライアントを内蔵させたマルチウィンドウスクリーンデバイス４０−１，４０−２とセカンドスクリーンデバイス５０とを有し、これらを連携させてACRサービスを利用するものである。
同図においては、ユーザの正面にマルチウィンドウスクリーンデバイス４０−１が設置され、左側壁にマルチスクリーンデバイス４０−２が設置されている。ユーザの傍には、セカンドスクリーンデバイス５０が配置されている。
マルチウィンドウスクリーンデバイス４０−１には、画面上に複数（図２の場合、３）のウィンドウを設けることができ、各ウィンドウには同時にそれぞれ異なるコンテンツ（同一のものも可能）を表示させることができる。以下、例えば、ウィンドウＡに表示されているコンテンツをコンテンツＡと称する。他のウィンドウに表示されているコンテンツについても同様とする。
また、マルチウィンドウスクリーンデバイス４０−１は、ACRサービスを利用することにより、各ウィンドウに表示されているコンテンツの識別結果等を含むACRレスポンスをセカンドスクリーンデバイス５０に転送できる。
さらに、マルチウィンドウスクリーンデバイス４０−１は、各ウィンドウの枠に、他のウィンドウ（マルチウィンドウスクリーンデバイス４０−２のウィンドウも含む）の枠と視覚的に区別可能な属性（以下、枠視覚属性と称する）を持たせることができる。
枠視覚属性としては、CSS(Cascading Style Sheets）にて設定、変更が可能な枠線の色、太さ、線種、３Ｄ表示の深度等を挙げることができる。図２の場合では、各ウィンドウの枠の線種を他のウィンドウの枠と異なるものに設定しており、ウィンドウＡの枠は一点鎖線、ウィンドウＢの枠は実線、ウィンドウＣの枠は点線に設定されている。
マルチウィンドウスクリーンデバイス４０−２についても、マルチウィンドウスクリーンデバイス４０−１と同様である。ただし、図２においてマルチウィンドウスクリーンデバイス４０−２は、その画面上にウィンドウＸだけを設け、その枠は二点鎖線とされてコンテンツＸを表示している状態である。
セカンドスクリーンデバイス５０では、マルチウィンドウスクリーンデバイス４０−１，４０−２の各ウィンドウに表示されているコンテンツに対応するメタデータや、該コンテンツの進行に合わせた連動アプリを起動して表示することができる。
さらに、セカンドスクリーンデバイス５０では、表示する各情報（コンテンツに対応するメタデータ、連動アプリの画面）に枠を設け、該枠に対して、対応するコンテンツを表示しているウィンドウの枠と同様の枠視覚属性を設定することができる。
すなわち、図２の場合、セカンドスクリーンデバイス５０は、ウィンドウＡのコンテンツＡに対する連動アプリＡを一点鎖線の枠内に、ウィンドウＣのコンテンツＣに対する連動アプリＣを点線の枠内に、ウィンドウＸのコンテンツＸに対するメタデータＸを二点鎖線の枠内に同時に表示されている状態である。なお、これらの情報を同時に表示するものではなく、切替えて表示する場合においても、その枠に対して、対応するコンテンツを表示しているウィンドウの枠と同様の枠視覚属性を設定することができる。
［ACRサービス活用システムの構成例］
図３は、本開示の実施の形態であるACRサービス活用システムの構成例を示している。
このACRサービス活用システム１０は、大型画面を有するＴＶ受像機等のマルチウィンドウスクリーンデバイス４０−１，４０−２の画面に同時に表示されている１以上のコンテンツをそれぞれ識別し、各コンテンツに関するメタデータをセカンド(2nd)スクリーンデバイス５０にてユーザに提示したり、該コンテンツの進行に合わせて連動アプリケーションを実行したりするものである。以下、マルチウィンドウスクリーンデバイス４０−１，４０−２を個々に区別する必要がない場合、単にマルチウィンドウスクリーンデバイス４０と称する。
ここで、コンテンツとは、放送中の番組に限られない。例えば、マルチウィンドウスクリーンデバイス４０に接続されたビデオレコーダ等の外部装置により録画、再生された番組、パッケージメディアから再生された映画等の映像、インターネット等を介してダウンロードした動画、楽曲等のあらゆるＡＶコンテンツが含まれる。また、番組間や番組の途中等に挿入されるコマーシャルメッセージ（以下、ＣＭと称する）もコンテンツに含まれる。
コンテンツの識別には、視聴しているコンテンツから周期的に抽出する、該コンテンツの特徴を表すシグニチャデータ（例えば、ウォータマーク、フィンガプリント等）と、予めデータベースに登録されているコンテンツのシグニチャデータとを比較することにより、コンテンツを識別するACRサービスが利用される。
ACRサービス活用システム１０は、コンテンツやそれに対応する連動アプリ等を供給する側のプロバイダシステム２０と、コンテンツを視聴したり連動アプリを利用したりするユーザ側のホームネットワークシステム３０とにより構成される。
プロバイダシステム２０とホームネットワークシステム３０とは、放送網１１および双方向通信網１２を介して接続される。ここで、放送網１１には、ＴＶ放送網、CATV網、IPTV網等が含まれる。双方向通信網１２はインターネットに代表されるIP通信網を指す。
なお、図３において、ホームネットワークシステム３０に属するマルチウィンドウスクリーンデバイス４０−２とプロバイダシステム２０との放送網１１および双方向通信網１２を介するラインは省略されている。
[プロバイダシステム２０の説明]
プロバイダシステム２０は、コンテンツサーバ２１、メタデータサーバ２２、アプリケーションサーバ２３、およびACRサーバ２４から構成される。
コンテンツサーバ２１は、番組やＣＭ等のコンテンツを、放送網１１を介して放送する。また、コンテンツサーバ２１は、放送するコンテンツをACRサーバ２４に供給する。なお、コンテンツを供給する代わりに、コンテンツ識別子と、該コンテンツから予め抽出したシグニチャデータをACRサーバ２４に供給するようにしてもよい。
メタデータサーバ２２は、コンテンツサーバ２１から放送されるコンテンツに対応するメタデータをACRサーバ２４に供給する。メタデータには、該コンテンツに関する各種の情報や該コンテンツの進行に合わせて実行させる連動アプリケーションを表す識別子、該連動アプリケーションにて用いるデータ等が含まれる。
アプリケーションサーバ２３は、ホームネットワークシステム３０のセカンドスクリーンデバイス５０からの要求に応じ、双方向通信網１２を介してアプリケーションや該アプリケーションにて利用するデータを供給する。
ACRサーバ２４は、ホームネットワークシステム３０のマルチウィンドウスクリーンデバイス４０で視聴され得る様々なコンテンツのそれぞれから所定のサンプリング周期で抽出されたシグニチャデータに、コンテンツ識別子、アプリケーション識別子等を対応付けたACRリファレンスデータを予め生成し、データベース化して保持している。ACRサーバ２４は、ACRリファレンスデータのデータベースに基づいて、マルチウィンドウスクリーンデバイス４０のACRクライアント４２Ａ乃至４２Ｃから送信されるACRクエリに応じてACRレスポンスを生成、返信する。
なお、プロバイダシステム２０を構成するコンテンツサーバ２１、メタデータサーバ２２、アプリケーションサーバ２３、およびACRサーバ２４は、一箇所に集中して配置してもよいし、分散して配置してもよい。また、これらのうちのいくつかを適宜組み合わせて構成するようにしてもよい。さらに、これらはそれぞれ複数存在してもよい。
[ホームネットワークシステム３０の説明]
ホームネットワークシステム３０は、大型画面を有するＴＶ受像機等のマルチウィンドウスクリーンデバイス４０と、タブレット型端末、スレートＰＣ、スマートフォン等のセカンドスクリーンデバイス５０から成る。マルチウィンドウスクリーンデバイス４０とセカンドスクリーンデバイス５０とは、例えば無線LAN等により接続されているものとする。
なお、マルチウィンドウスクリーンデバイス４０およびセカンドスクリーンデバイス５０は、ホームネットワークシステム３０内にそれぞれ複数存在してもよい。
マルチウィンドウスクリーンデバイス４０は、その画面に複数のウィンドウを設け、各ウィンドウに同時に異なるコンテンツを表示して、ユーザに視聴させるためのものであり、コンテンツレンダラ４１、ACRクライアント４２、UPnP(Universal Plug and Play)サーバ４３、ローカルWebサーバ４４、およびウィドウマネージャ４５を有する。コンテンツレンダラ４１およびACRクライアント４２のそれぞれは、該マルチウィンドウスクリーンデバイス４０が設定可能なウィンドウの数と同数だけ搭載されている。
本実施の形態において、マルチウィンドウスクリーンデバイス４０は、その画面に３つウィンドウＡ，Ｂ，Ｃを設けることができるものとする。この場合、それに対応して３つのコンテンツレンダラ４１Ａ，４１Ｂ，４１Ｃと、３つのACRクライアント４２Ａ，４２Ｂ，４２Ｃが搭載されているものとする。設定可能なウィンドウなどの数は３に限定されるものではない。以下、コンテンツレンダラ４１Ａ，４１Ｂ，４１Ｃを個々に区別する必要がない場合、単にコンテンツレンダラ４１と称する。ACRクライアント４２Ａ，４２Ｂ，４２Ｃについても同様とする。
コンテンツレンダラ４１Ａは、マルチウィンドウスクリーンデバイス４０の画面上のウィンドウＡに表示される全てのコンテンツを取得、分岐してACRクライアント４２Ａに供給する。すなわち、コンテンツレンダラ４１Ａは、コンテンツサーバ２１から放送されるコンテンツのみならず、マルチウィンドウスクリーンデバイス４０の各種入力端子(HDMI（登録商標）端子等)を介して入力されるコンテンツも取得、分岐してACRクライアント４２Ａに供給する。コンテンツレンダラ４１Ｂ，４１Ｃについても同様である。
ACRクライアント４２Ａは、コンテンツレンダラ４１Ａより入力されるコンテンツから、当該コンテンツの特徴を表すシグニチャデータを所定のサンプリング周期で抽出する。ここで、シグニチャデータの抽出方式は、プロバイダシステム２０のACRサーバ２４と同じ抽出方式（後述）を用いることとする。
また、ACRクライアント４２Ａは、抽出したシグニチャデータを含むACRクエリを生成し、双方向通信網１２を介してプロバイダシステム２０のACRサーバ２４に送信する。また、ACRクライアント４２Ａは、送信したACRクエリに応じてACRサーバ２４から返信されるACRレスポンスを受信して保持する。ACRクライアント４２Ｂ，４２Ｃについても同様である。
UPnPサーバ４３は、マルチウィンドウスクリーンデバイス４０とともにホームネットワークシステム３０を構成している他のデバイス（いまの場合、セカンドスクリーンデバイス５０）に対して、自身が実装されているマルチウィンドウスクリーンデバイス４０の機能（いまの場合、ACRクライアント４２によりACRサービスを利用すること）を呼び出すためのWebAPI(Application Program Interface)の詳細を周知するものである。具体的には、一般的なUPnPサーバが提供する基本プロトコル上に新たにプロトコルを定義し、これを用いて周知を行なう（詳細後述）。
ローカルWebサーバ４４は、マルチウィンドウスクリーンデバイス４０とともにホームネットワークシステム３０を構成している他のデバイス（いまの場合、セカンドスクリーンデバイス５０）に対して、自身が実装されているマルチウィンドウスクリーンデバイス４０の機能（いまの場合、いまの場合、ACRクライアント４２によりACRサービスを利用すること）を利用させる。具体的には、UPnPサーバ４３が通知したWebAPIが呼び出されたことに応じてACRクライアント４２を制御し、ACRサービスを利用させ、ACRサーバ２４から返信されるACRレスポンスをセカンドスクリーンデバイス５０に転送する。
ウィドウマネージャ４５は、マルチウィンドウスクリーンデバイス４０の画面上に設けられたウィンドウの枠の表示を制御する。
セカンドスクリーンデバイス５０は、本実施の形態おいては主にマルチウィンドウスクリーンデバイス４０にて視聴されているコンテンツのメタデータをユーザに提示したり、該コンテンツの進行に合わせて連動アプリを実行したりするものであり、複数のACRアプリ５１、それと同数の連動アプリマネージャ５２、およびウィンドウマネージャ５３を有する。
本実施の形態においては、セカンドスクリーンデバイス５０は、３つのACRアプリ５１ａ，５１ｂ，５１ｃと３つの連動アプリマネージャ５２ａ，５２ｂ，５２ｃを有するものとする。ただし、これらの数は３に限定されるものではない。以下、ACRアプリ５１ａ，５１ｂ，５１ｃを個々に区別する必要がない場合、単にACRアプリ５１と称する。連動アプリマネージャ５２ａ，５２ｂ，５２ｃについても同様とする。
ACRアプリ５１は、セカンドスクリーンデバイス５０に予めインストールされており、マルチウィンドウスクリーンデバイス４０と連携してACRサービスを利用するときに起動される。ACRアプリ５１は、ACRサービスを利用する機能を読み出すためのWebAPIをUPnPサーバ４３から取得し、該WebAPIを呼び出すことにより、ACRクライアント４２が受信したACRサーバ２４からのACRレスポンスを、ローカルWebサーバ４４を介して取得する。さらに、ACRアプリ５１は、取得したACRレスポンスを解析し、解析結果を連動アプリマネージャ５２に通知する。
連動アプリマネージャ５２は、ACRアプリ５１からの通知に従い、ACRレスポンスに含まれていたメタデータをユーザに提示したり、マルチウィンドウィンドウスクリーンデバイス４０にて視聴中のコンテンツに対応する連動アプリを、双方向通信網１２を介してアプリケーションサーバ２３から取得して実行したりする。なお、連動アプリマネージャ５２には、Webブラウザを用いることができる。
ウィンドウマネージャ５３は、各連動アプリマネージャ５２により表示される情報（メタデータや連動アプリの画面）を表示する枠に対して、対応するコンテンツを表示しているマルチウィンドウスクリーンデバイス４０のウィンドウの枠視覚属性と同じ設定を行なう。
［ACRサーバ２４の詳細な構成例］
図４は、プロバイダシステム２０に含まれるACRサーバ２４の詳細な構成例を示している。
ACRサーバ２４は、コンテンツ取得部６１、シグニチャ抽出部６２、ACRデータベース(DB)６３、ACRレスポンス生成部６４、および通信部６５から構成される。
コンテンツ取得部６１は、コンテンツサーバ２１が放送網１１を介して放送する予定のコンテンツやマルチウィンドウスクリーンデバイス４０で視聴され得る様々なコンテンツを、コンテンツサーバ２１等から取得し、取得したコンテンツをシグニチャ抽出部６２に供給する。シグニチャ抽出部６２は、コンテンツ取得部６１から供給されるコンテンツから、その特徴を表すシグニチャデータを所定の抽出方式を用い、所定のサンプリング周期で抽出してACRデータベース６３に出力する。
シグニチャ抽出部６２におけるシグニチャデータの抽出方式は、既存の任意の手法を適用することができる。例えば、コンテンツに予め埋め込まれているウォータマークを抽出してシグニチャデータとしたり、フィンガプリントを算出し、それをシグニチャデータとしたりするようにしてもよい。
シグニチャデータとしてフィンガプリントを用いることにより、コンテンツの解像度、アスペクト比、ビットレート、符号化フォーマット等が変換されたとしても、変換前と変換後とで同一のシグニチャデータを得ることができる。したがって、このシグニチャデータに基づいてコンテンツの識別を行った場合の識別精度を上げることができる。
なお、ACRサーバ２４が複数存在する場合、それぞれのシグニチャ抽出部６２におけるシグニチャデータの抽出方式は必ずしも統一する必要はなく、ACRサーバ２４ごとに任意の抽出方式を採用することができる。
ACRデータベース６３は、シグニチャ抽出部６２から入力される各シグニチャデータに対してその抽出元のコンテンツを表すコンテンツ識別子等を対応付けたACRリファレンスデータを生成して記憶する。これにより、コンテンツから抽出されたシグニチャデータがデータベース化される。ACRリファレンスデータのデータ構造については図４を参照して後述する。
ACRレスポンス生成部６４は、ACRデータベース６３を参照することにより、ACRクライアント４２から送信されるACRクエリに含まれるシグニチャデータの抽出元のコンテンツを識別する。さらに、ACRレスポンス生成部６４は、識別結果としてのコンテンツ識別子、関連メタデータ等を含むACRレスポンスを生成する。ACRレスポンスのデータ構造については図８を参照して後述する。通信部６５は、ACRクライアント４２から送信されたACRクエリを受信してACRレスポンス生成部６４に出力し、ACRレスポンス生成部６４で生成されたACRレスポンスをACRクライアント４２に送信する。
［ACRクライアント４２の詳細な構成例］
図５は、マルチウィンドウスクリーンデバイス４０に搭載されたACRクライアント４２の詳細な構成例を示している。
ACRクライアント４２は、シグニチャ抽出部７１、ACRクエリ生成部７２、通信部７３、およびACRレスポンス保持部７４から構成される。
シグニチャ抽出部７１は、コンテンツレダラ４１から分岐、供給されるコンテンツから、その特徴を表すシグニチャデータを所定のサンプリング周期で抽出してACRクエリ生成部７２に出力する。なお、シグニチャ抽出部７１におけるシグニチャデータの抽出方式は、利用するACRサーバ２４のシグニチャ抽出部６２におけるそれと共通である。
ACRクエリ生成部７２は、シグニチャ抽出部７１により抽出されたシグニチャデータを含むACRクエリであって、ACRサーバ２４に対してコンテンツの識別を依頼するためのACRクエリを生成する。ACRクエリのデータ構造については図７を参照して後述する。
通信部７３は、ACRクエリ生成部７２で生成されたACRクエリをACRサーバ２４に送信し、ACRサーバ２４から返信されるACRレスポンスを受信してACRレスポンス保持部７４に出力する。ACRレスポンス保持部７４は、通信部７３で受信されたACRレスポンスを保持する。なお、保持されたACRレスポンスはローカルWebサーバ４４によりセカンドスクリーンデバイス５０に転送される。
[ACRリファレンスデータのデータ構造]
図６は、ACRサーバ２４のACRデータベース６３にデータベース化されているACRリファレンスデータのデータ構造を示している。
ACRリファレンスデータ１００においては、コンテンツから所定の周期で抽出された各シグニチャデータ１０１に対して、コンテンツ識別子１０２、再生時刻１０３、および関連メタデータ１０４が対応付けられている。
シグニチャデータ１０１は、シグニチャ抽出部６２にてコンテンツから抽出されたものである。コンテンツ識別子１０２は、シグニチャデータ１０１の抽出元のコンテンツを表す情報である。再生時刻１０３は、コンテンツ識別子１０２が表すコンテンツから該シグニチャデータ１０１が抽出されたときのコンテンツの進行タイミングを示すものであり、例えば、該コンテンツの先頭からの経過時間によって表される。
関連メタデータ１０４には、コンテンツ識別子１０２が表すコンテンツのメタデータや、連動アプリ識別子（該コンテンツの、再生時刻１０３が示すコンテンツの進行タイミングに合わせて実行すべき連動アプリを一意に表す情報）、実行された該連動アプリにより利用される各種データが含まれる。
なお、関連メタデータ１０４は、再生時刻１０３が示すコンテンツの進行タイミングに応じて異なる内容にしてもよい。
[ACRクエリのデータ構造]
図７は、ACRクライアント４２のACRクエリ生成部７２にて生成されるACRクエリのデータ構造を示している。
ACRクエリ１１０には、ACRクエリ識別子１１１、シグニチャ方式識別子１１２、サービス識別子１１３、シグニチャデータ１１４、ローカルタイムスタンプ１１５、発信元アドレス１１６、および署名１１７が含まれる。
ACRクエリ識別子１１１は、該ACRクエリ１１０を一意に特定するための情報である。シグニチャ方式識別子１１２は、シグニチャデータ１１４を抽出する際に用いられた抽出方式を特定するための情報である。サービス識別子１１３は、ACRサーバ２４が複数存在する場合において、該ACRクエリ１１０を送信してACRレスポンスを得るACRサーバ２４を選択するための情報である。
シグニチャデータ１１４は、ACRクライアント４２のシグニチャ抽出部７１にてコンテンツから抽出されたものである。ローカルタイムスタンプ１１５は、コンテンツからシグニチャデータ１１４が抽出されたタイミングを示すものであり、マルチウィンドウスクリーンデバイス４０のローカルシステムクロックが示す時刻により表される。
発信元アドレス１１６は、該ACRクエリ１１０を発信するACRクライアント４２の双方向通信網１２におけるアドレスであり、該ACRクエリ１１０に応じてACRサーバ２４にて生成されるACRレスポンスの返信先を表す情報として利用される。署名１１７は、該ACRクエリ１１０の改ざんを抑止するためのものである。なお、ACRクエリ１１０の全体を暗号化して送信するようにしてもよい。
[ACRレスポンスのデータ構造]
図８は、ACRサーバ２４のACRレスポンス生成部６４にて生成されるACRレスポンスのデータ構造を示している。
ACRレスポンス１２０は、同図Ａまたは同図Ｂに示すデータ構造を有する。同図Ａは、ACRクエリ１１０に含まれるシグニチャデータ１１４の抽出元のコンテンツが識別できた場合、すなわち、マルチウィンドウスクリーンデバイス４０のユーザが視聴中のコンテンツを識別できた場合のACRレスポンス１２０のデータ構造である。同図Ｂはコンテンツを識別できなかった場合のACRレスポンス１２０のデータ構造である。
マルチウィンドウスクリーンデバイス４０のユーザが視聴中のコンテンツを識別できた場合のACRレスポンス１２０（同図Ａ）には、ACRクエリ識別子１２１、シグニチャ方式識別子１２２、サービス識別子１２３、コンテンツ識別子１２４、再生時刻１２５、ローカルタイムスタンプ１２６、関連メタデータ１２７、発信元アドレス１２８、および署名１２９が含まれる。
一方、マルチウィンドウスクリーンデバイス４０のユーザが視聴中のコンテンツを識別できなかった場合のACRレスポンス１２０（同図Ｂ）には、ACRクエリ識別子１２１、サービス識別子１２２、発信元アドレス１２８、署名１２９、および識別失敗フラグ１３０が含まれる。
ACRクエリ識別子１２１、シグニチャ方式識別子１２２、サービス識別子１２３、ローカルタイムスタンプ１２６は、該ACRレスポンス１２０の返信を要求したACRクエリ１１０を特定するためのものであり、該ACRクエリ１１０のACRクエリ識別子１１１、シグニチャ方式識別子１１２、サービス識別子１１３、およびローカルタイムスタンプ１１５が引用されて記述される。
コンテンツ識別子１２４、再生時刻１２５、および関連メタデータ１２７は、コンテンツの識別結果を表すものであり、対応するACRリファレンスデータ１００のコンテンツ識別子１０２、再生時刻１０３、および関連メタデータ１０４が引用されて記述される。
発信元アドレス１２８は、該ACRレスポンス１２０を送信するACRサーバ２４の双方向通信網１２におけるアドレスである。署名１２９は、該ACRレスポンス１２０の改ざんを抑止するためのものである。なお、ACRレスポンス１２０の全体を暗号化して送信することにより、その改ざんを防止するようにしてもよい。
識別失敗フラグ１３０は、ACRサーバ２４にて、ACRクライアント４２からのACRクエリ１１０に含まれるシグニチャデータ１１４の抽出元のコンテンツ、すなわち、マルチウィンドウスクリーンデバイス４０のユーザが視聴中のコンテンツを識別することができなかったことを表すフラグである。
［ACRサービス活用システム１０のホームネットワークシステム３０の処理］
次に、ホームネットワークシステム３０において、セカンドスクリーンデバイス５０が、マルチウィンドウスクリーンデバイス４０が利用できる機能に関する情報であるデバイスディスクリプションを取得するときの２通りの処理について説明する。
なお、本実施の形態におけるマルチウィンドウスクリーンデバイス４０が利用できる機能とは、ACRクライアント４２によるACRサービスの利用と、ウィンドウマネージャ４５による画面上の各ウィンドウに対する枠視覚属性の付与とを指す。
図９は、既にセカンドスクリーンデバイス５０にてACRアプリ５１が起動されている状態において、マルチウィンドウスクリーンデバイス４０がネットワークシステム３０に接続された場合（マルチウィンドウスクリーンデバイス４０の起動時も含む）の処理を説明するフローチャートである。
ステップＳ１において、マルチウィンドウスクリーンデバイス４０のUPnPサーバ４３は、ホームネットワークシステム３０に対して、以下に示されるUPnPで規定されたNotifyメッセージをマルチキャスト配信する。該Notifyメッセージは、UDP/IPによりホームネットワークシステム３０に転送され、いまの場合、セカンドスクリーンデバイス５０のACRアプリ５１に受信される。
NOTIFY * HTTP/1.1
…
LOCATION “http://192.168.0.4:55500”
…
NotifyメッセージのLOCATIONヘッダにはマルチウィンドウスクリーンデバイス４０のデバイスディスクリプションの取得先アドレスが記載されている。そこで、ステップＳ１１において、セカンドスクリーンデバイス５０にてACRアプリ５１は、HTTP GETにより、該取得先アドレスからデバイスディスクリプションを取得する。
以上の処理により、セカンドスクリーンデバイス５０のACRアプリ５１は、マルチウィンドウスクリーンデバイス４０のデバイスディスクリプションを取得することができる。
次に、図１０は、先にマルチウィンドウスクリーンデバイス４０がネットワークシステム３０に接続されて起動されている状態において、後からセカンドスクリーンデバイス５０にてACRアプリ５１が起動された場合の処理を説明するフローチャートである。
この場合、マルチウィンドウスクリーンデバイス４０のUPnPサーバ４３によるNotifyメッセージのマルチキャスト配信が既に行なわれてしまっているので、セカンドスクリーンデバイス５０のACRアプリ５１はNotifyメッセージを受信することができない。そこで、ステップＳ２１において、ACRアプリ５１は、UPnPで規定されているM-Searchにより利用可能なACRクライアントを検索する。
該M-Searchに応じたマルチウィンドウスクリーンデバイス４０のUPnPサーバ４３は、ステップＳ３１において、デバイスディスクリプションを応答する。ACRアプリ５１は、ステップＳ２２において、該デバイスディスクリプションを受信する。
以上の処理により、セカンドスクリーンデバイス５０のACRアプリ５１は、マルチウィンドウスクリーンデバイス４０のデバイスディスクリプションを取得することができる。
［デバイスディスクリプションの例］
ここで、デバイスディスクリプションの例について説明する。デバイスディスクリプションの記述には、例えばXMLファイルが用いられる。
以下にデバイスディスクリプションの第１の例を示す。
デバイスディスクリプションの第１の例
<root xmlns="urn:schemas-upnp-org:device-1-0">
…
<serviceList>
<service>
<serviceType>"urn:abc:service:ACRClient.v1"</serviceType>(ACRクライアントサービスを意味する)
<serviceId>"urn:UPnP:serviceId:1234"</serviceId>(ACRクライアントサービスのサービスIDを意味する)
<SCPDURL></SCPDURL>
<controlURL>" http://192.168.0.4:55500/getACRResponse"</controlURL>
<WindowStyle>"http://192.168.0.4:55500/windowStyle"</WindowStyle>
…
</service>
</serviceList>
…
</root>
なお、既存の一般的なUPnPに規定されたデバイスディスクリプションの<SCPDURL>要素には、ACRクライアント４２が利用できるACRサービスに関して記述されているサービスディスクリプションの取得先アドレスが記述されており、ACRアプリ５１がHTTP GETにより該取得先アドレスからサービスディスクリプションを取得することになる。さらに、ACRアプリ５１が、UPnPで規定されているSOAPにより、<controlURL>要素に記述されているURLに対してアクションのメッセージを送付することによりアクション（いまの場合、ACRクエリの送信と、ACRレスポンスの転送）を呼び出すことになる。
しかしながら、本実施の形態においては、より少ない手順でアクションを呼び出せるように、上述したようなUPnPに規定されたデバイスディスクリプションを拡張し、該アクションを呼び出すためのWebAPIをデバイスディスクリプションに直接記述するようにする。
具体的には、上に示された第１の例のように、例えば、<SCPDURL>要素に何も記述せず空にするか、または所定のダミーの文字列を記述するようにし、<controlURL>要素に、ACRクライアントを起動させるとともに、ACRレスポンス１２０の転送を要求するためのWebAPIのサーバサイドスクリプトURL（第１の例の場合、http://192.168.0.4:55500/getACRResponse）を直接記述するようにする。
さらに、UPnPには規定されていない<WindowStyle>要素を新たに設け、そこにウィンドウマネージャ４５に枠視覚属性を通知させたり、変更させたりするためのWebAPIのサーバサイドスクリプトURL（第１の例の場合、http://192.168.0.4:55500/widowStyle）を直接記述するようにする。
なお、<service>要素は、搭載されているACRクライアント４２毎に記述される。したがって、本実施の形態の場合、<serviceList>に３つの<service>要素が記述される。
または、以下に示す第２の例のように、UPnPには規定されていない<WebAPIURL>要素を新たに設け、該<WebAPIURL>要素にWebAPIのサーバサイドスクリプトURLを直接記述するようにしてもよい。
デバイスディスクリプションの第２の例
<root xmlns="urn:schemas-upnp-org:device-1-0">
…
<serviceList>
<service>
<serviceType>"urn:abc:service:ACRClient.v1"</serviceType>(ACRクライアントサービスを意味する)
<serviceId>"urn:UPnP:serviceId:1234"</serviceId>(ACRクライアントサービスのサービスIDを意味する)
<SCPDURL></SCPDURL>
<controlURL></controlURL>
<WebAPIURL>" http://192.168.0.4:55500/getACRResponse"</WebAPIURL>
<WindowStyle>"http://192.168.0.4:55500/windowStyle"</WindowStyle>
…
</service>
</serviceList>
第１または第２の例のデバイスディスクリプションを取得したセカンドスクリーンデバイス５０のACRアプリ５１では、デバイスディスクリプションの<controlURL>要素または<WebAPIURL>要素に記述されているWebAPIのサーバサイドスクリプトurlであるgetACRResponseをHTTP GETにより呼び出すことにより、アクションを実行させることができる。
具体的には、マルチウィンドウスクリーンデバイス４０のACRクライアント４２に対して起動していなければ起動させた上で、ACRクリエ１１０を送信させ、それに応じて返信されたACRレスポンス１２０を転送させることができる。なお、ACRレスポンス１２０の転送は、WebAPIに応じて戻されるHTTPレスポンスのボディに、例えば以下のようにJSONにより記述された状態で行なわれる。
HTTP/1.1 200 OK
Content-Type: application/json; charset=utf-8
…
“JSONによりエンコードされたACRレスポンスの内容”
該WebAPIを用いたトランザクションはコンテンツが視聴されている間、繰り返しポーリングにより行われる。そして、コンテンツの進行に応じてその時々に変換するACRレスポンス１２０の中の関連メタデータ１２７等がセカンドスクリーンデバイス５０にてユーザに提示される。
上述したように、デバイスディスクリプションを拡張し、これを標準化すれば、異なるベンダにより製造、販売されるマルチウィンドウスクリーンデバイス４０とセカンドスクリーンデバイス５０とが速やかに連携動作することが可能となる。
なお、WebAPIを用いる代わりに、IETF(Internet Engineering Task Force)等が標準化を策定しているWebSocketを用いるようにしてもよい。WebSocketを用いる場合、ローカルWebサーバ４４（またはACRクライアント４２あるいはセカンドスクリーンデバイス５０）内にWebSocketサーバを設け、該WebSocketサーバを介して、ACRアプリ５１とACRクライアント４２の双方からセッション(TCPコネクション)確立リクエストを発行してセッションを確立し、該セッション上で上記JSON等によりACRレスポンス１２０を転送するようにする。
この場合、ACRクライアント４２が新たなACRレスポンス１２０をACRサーバ２４から受信すると直ちに、確立された該セッションを介してACRアプリ５１に転送される。したがって、WebAPIを用いた時には必要であったポーリングが不要となり、ポーリングの周期に依存しないACRレスポンス１２０の即時転送が可能となる。
また、ACRアプリ５１では、デバイスディスクリプションの<WindowStyle>要素に記述されているWebAPIのサーバサイドスクリプトurlであるwindowStyleをHTTP GETにより呼び出すことにより、ローカルWebサーバ４４を介してウィンドウマネージャ４５からマルチウィンドウスクリーンデバイス４０の画面に設けたウィンドウの枠視覚属性を取得することができる。
具体的には、該WebAIPに応じて戻されるHTTPレスポンスのボディに枠視覚属性が記述される。例えば、枠視覚属性として色が設定されている場合には、
border-color:#ffa000 -> オレンジのボーダー色を指定する例
がHTTPレスポンスのボディに記述される。
なお、仮にマルチウィンドウスクリーンデバイス４０−１から戻された枠視覚属性と、マルチウィンドウスクリーンデバイス４０−２から戻された枠視覚属性とが重複している場合、マルチウィンドウスクリーンデバイス４０−１または４０−２の一方に枠視覚属性の変更を要求することができる。
具体的には、<WindowStyle>要素のWebAPIのURLに対して、HTTP POSTリクエストにて、リクエストのボディに変更させる枠視覚属性を記述すればよい。下の例は重複していた枠視覚属性を（border-color:#ffa001）に変更させる場合を示している。
POST /windowStyle HTTP/1.0
host: 192.168.0.4:55500
Content-Length: 20
border-color:#ffa001
［ACRサービス活用システム１０による動作］
次に、ACRサービス活用システム１０の動作について説明する。
なお、以下に説明する動作の前提として、ホームネットワークシステム３０においては、セカンドスクリーンデバイス５０のACRアプリ５１が、既にマルチウィンドウスクリーンデバイス４０のUPnPサーバ４３からデバイスディスクリプションを取得しているものとする。
また、プロバイダシステム２０のACRサーバ２４においては、マルチウィンドウスクリーンデバイス４０にて視聴され得る様々なコンテンツに対応するACRリファレンスデータ１００が生成されてACRデータベース６３に登録されているものとする。
図１１は、ACRサービス活用システム１０の動作を説明するフローチャートである。
ステップＳ４１において、プロバイダシステム２０のコンテンツサーバ２１は、放送網１１を介したコンテンツの送信を開始する。
一方、ホームネットワークシステム３０においては、ステップＳ５１として、マルチウィンドウスクリーンデバイス４０がコンテンツの受信、再生を開始する。ここで、ステップＳ６１として、セカンドスクリーンデバイス５０のACRアプリ５１が、ACRクライアント４２の起動とACRレスポンスの転送を要求するWebAPIを呼び出すと、これに応じたローカルWebサーバ４４からの制御により、ACRクライアント４２等が動作を開始する。
すなわち、ステップＳ５２において、マルチウィンドウスクリーンデバイス４０のACRクライアント４２は、コンテンツレンダラ４１から視聴中のコンテンツの供給を受けると、シグニチャ抽出部７１が該コンテンツからシグニチャデータ１１４を抽出してACRクエリ生成部７２に出力する。ステップＳ５３において、ACRクエリ生成部７２は、該シグニチャデータ１１４を含むACRクエリ１１０を生成し、生成されたACRクエリ１１０を通信部７３がACRサーバ２４に送信する。
ACRクライアント４２からのACRクエリ１１０を受信したACRサーバ２４では、ステップＳ４２において、ACRレスポンス生成部６４が、ACRデータベース６３を参照し、受信したACRクエリ１１０に含まれるシグニチャデータ１１４に対応するコンテンツを識別する。さらに、ACRレスポンス生成部６４は、ステップＳ４３において、コンテンツの識別結果に応じたACRレスポンス１２０を生成し、通信部６５は、生成されたACRレスポンス１２０をACRクライアント４２に返信する。
ACRサーバ２４からのACRレスポンス１２０を受信したACRクライアント４２は、ステップＳ５４において、受信したACRレスポンス１２０をローカルWebサーバ４４に供給する。ローカルWebサーバ４４は、該ACRレスポンス１２０をセカンドスクリーンデバイス５０のACRアプリ５１に転送する。
転送されたACRレスポンス１２０を受信したACRアプリ５１は、ステップＳ６２として、セカンドスクリーンデバイス５０のACRアプリ５１が、枠視覚属性の通知を要求するWebAPIを呼び出すと、これに応じたローカルWebサーバ４４は、ステップＳ５５において、ウィンドウマネージャ４５にて管理されている枠視覚属性をACRアプリ５１に通知する。
枠視覚属性が通知されたACRアプリ５１は、該枠視覚属性をウィンドウマネージャ５３に通知する。ウィンドウマネージャ５３は、他のマルチウィンドウスクリーンデバイス４０から既に通知されている枠視覚属性と重複していないか否かを確認する。重複している場合、ACRアプリ５１は、HTTP POSTリクエストにて、枠視覚属性の変更を要求する。該要求はステップＳ５６において、ローカルWebサーバ４４からウィンドウマネージャ４５に通知され、ウィンドウマネージャ４５が該要求に応じて変更すると、変更後の枠視覚属性がローカルWebサーバ４４からACRアプリ５１に通知される。変更後の枠視覚属性が通知されたACRアプリ５１は、ステップＳ６４において、変更後の枠視覚属性をウィンドウマネージャ５３に通知する。ウィンドウマネージャ５３は、変更後の枠視覚属性に基づき、これから表示する連動アプリの画面などの枠視覚属性を設定する。
なお、ステップＳ６２において、重複していないことが確認された場合、枠視覚属性の変更は要求されず、ステップＳ６４の処理が実行される。
また、ステップＳ６２乃至６４の処理を、ステップＳ５４の処理（ACRレスポンスの転送）を待つことなく、ステップＳ６１の直後に実行するようにしてもよい。
ステップＳ６５において、ACRアプリ５１は、転送されたACRレスポンス１２０に含まれる関連メタデータ１２７を解析し、視聴中のコンテンツの進行に合わせて実行すべき連動アプリを連動アプリマネージャ５２に取得させる。
ステップＳ６６において、連動アプリマネージャ５２は、アプリケーションサーバ２３がステップＳ４４の処理として供給する該連動アプリを取得して実行する。なお、該連動アプリが既に取得済みである場合にはその取得を省略できる。また、該連動アプリが既に起動済みである場合にはその起動を省略できる。さらに、該連動アプリの実行を伴わずに、関連メタデータ１２７に含まれる情報をユーザに提示することもある。
このとき、ユーザに提示される連動アプリの画面は、その枠がウィンドウマネージャ５３によって枠視覚属性が、マルチウィンドウスクリーンデバイス４０にて対応するコンテンツが表示されているウィンドウの枠の枠視覚属性と一致したものとなる。
以上に説明したステップＳ４１乃至Ｓ４４の処理、ステップＳ５１乃至Ｓ５６の処理、およびステップＳ６１乃６６の処理は、コンテンツが視聴されている間、繰り返し実行される。ただし、ステップＳ６１乃６６の処理とステップＳ５５およびＳ５６の処理はその繰り返しを省略したり、実行頻度を減少させたりすることができる。
これにより、マルチウィンドウスクリーンデバイス４０にてユーザが視聴中のコンテンツの進行に合わせ、セカンドスクリーンデバイス５０にて連動アプリを動作させることができる。
また、セカンドスクリーンデバイス５０にてユーザに提示されている画面が、マルチウィンドウスクリーンデバイス４０に表示されているどのコンテンツに対応するものであるのかを、ユーザに速やかに把握させることができる。
ところで、上述した一連の処理を実行するプロバイダシステム２０のコンテンツサーバ２１乃至ACRサーバ２４、並びにホームネットワークシステム３０のマルチウィンドウスクリーンデバイス４０およびセカンドスクリーンデバイス５０は、それぞれをハードウェアにより構成する他、コンピュータがソフトウェアを実行することにより実現することもできる。このコンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ等が含まれる。
図１２は、上述したコンピュータのハードウェアの構成例を示すブロック図である。
このコンピュータ２００において、CPU（Central Processing Unit）２０１，ROM（Read Only Memory）２０２，RAM（Random Access Memory）２０３は、バス２０４により相互に接続されている。
バス２０４には、さらに、入出力インターフェイス２０５が接続されている。入出力インターフェイス２０５には、入力部２０６、出力部２０７、記憶部２０８、通信部２０９、およびドライブ２２０が接続されている。
入力部２０６は、キーボード、マウス、マイクロフォン等よりなる。出力部２０７は、ディスプレイ、スピーカ等よりなる。記憶部２０８は、ハードディスクや不揮発性のメモリ等よりなる。通信部２０９は、ネットワークインタフェース等よりなる。ドライブ２２０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブルメディア２１１を駆動する。
以上のように構成されるコンピュータ２００では、CPU２０１が、例えば、記憶部２０８に記憶されているプログラムを、入出力インターフェイス２０５およびバス２０４を介して、RAM２０３にロードして実行することにより、上述した一連の処理が行われる。
コンピュータ２００（CPU２０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア２１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
コンピュータ２００では、プログラムは、リムーバブルメディア２１１をドライブ２２０に装着することにより、入出力インターフェイス２０５を介して、記憶部２０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部２０９で受信し、記憶部２０８にインストールすることができる。その他、プログラムは、ROM２０２や記憶部２０８に、あらかじめインストールしておくことができる。
なお、コンピュータ２００が実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。
なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
１０ ACRサービス活用システム， １１ 放送網， １２ 双方向通信網， ２０ プロバイダシステム， ２１ コンテンツサーバ， ２２ メタデータサーバ， ２３ アプリケーションサーバ， ２４ ACRサーバ， ３０ ホームネットワークシステム， ４０ マルチウィンドウスクリーンデバイス， ４１ コンテンツレンダラ， ４２ ACRクライアント， ４３ UPnPサーバ， ４４ ローカルWebサーバ， ５０ セカンドスクリーンデバイス， ５１ ACRアプリ， ５２ 連動アプリマネージャ， ６１ コンテンツ取得部， ６２ シグニチャ抽出部， ６３ ACRデータベース， ６４ ACRレスポンス生成部， ６５ 通信部， ７１ シグニチャ抽出部， ７２ ACRクエリ生成部， ７３ 通信部， ７４ ACRレスポンス保持部， １００ ACRリファレンスデータ， １１０ ACRクエリ， １２０ ACRレスポンス， ２００ コンピュータ， ２０１ CPU

Claims (19)

  1. 端末装置とともにホームネットワークシステムを構成する情報処理装置において、
    画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定部と、
    前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開部と、
    前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知部と
    を備える情報処理装置。
  2. 前記枠視覚属性設定部は、画面上に設けた複数の前記ウィンドウであって、異なる複数の前記コンテンツをそれぞれ表示させるための前記複数のウィンドウに対して、それぞれ異なる前記枠視覚属性を設定し、
    前記公開部は、複数の前記ウィンドウぞれぞれの枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する
    請求項１に記載の情報処理装置。
  3. 前記枠視覚属性設定部は、前記端末装置からの前記コマンドを利用したリクエストに応じて、前記ウィンドウの前記枠視覚属性を変更する
    請求項２に記載の情報処理装置。
  4. 前記公開部は、UPnPの規定を拡張したデバイスディスクリプションに、前記コマンドのURLを直接記述して前記端末装置に公開する
    請求項２に記載の情報処理装置。
  5. 前記コマンドは、WebAPIである
    請求項２に記載の情報処理装置。
  6. 前記公開部は、ホームネットワーク上にNotifyメッセージをマルチキャスト配信し、前記Notifyメッセージに基づく前記端末装置からのアクセスに応じてデバイスディスクリプションを前記端末装置に公開する
    請求項２に記載の情報処理装置。
  7. 前記公開部は、前記端末装置からのM-Searchに応じてデバイスディスクリプションを前記端末装置に公開する
    請求項２に記載の情報処理装置。
  8. 再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を
    さらに備え、
    前記公開部は、前記端末装置から前記識別依頼処理部を動作させるためのコマンドも前記端末装置に公開する
    請求項２に記載の情報処理装置。
  9. 端末装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、
    前記情報処理装置による、
    画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定ステップと、
    前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開ステップと、
    前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知ステップと
    を含む情報処理方法。
  10. 端末装置とともにホームネットワークシステムを構成するコンピュータを、
    画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定部と、
    前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開部と、
    前記端末装置からの前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知部と
    して機能させるプログラム。
  11. 画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成する情報処理装置において、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信するコマンド取得部と、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と、
    前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御部と
    を備える情報処理装置。
  12. 前記コマンド取得部は、前記コンテンツ表示装置が公開した、UPnPの規定を拡張したデバイスディスクリプションに直接記述されている前記コマンドのURLを取得する
    請求項１１に記載の情報処理装置。
  13. 前記コマンドは、WebAPIである
    請求項１１に記載の情報処理装置。
  14. 前記コマンド取得部は、前記コンテンツ表示装置がホームネットワーク上にマルチキャスト配信したNotifyメッセージに基づき、前記コンテンツ表示装置からデバイスディスクリプションを取得する
    請求項１１に記載の情報処理装置。
  15. 前記コマンド取得部は、M-Searchにより検索した前記コンテンツ表示装置から供給されるデバイスディスクリプションを取得する
    請求項１１に記載の情報処理装置。
  16. 前記コンテンツ表示装置は、再生されたコンテンツから前記コンテンツの特徴を表すシグニチャデータを抽出し、抽出した前記シグニチャデータを少なくとも含むクエリを生成して識別サーバに送信し、前記クエリに応じて前記識別サーバから返信された、前記再生されたコンテンツの識別結果を表すレスポンスを受信する識別依頼処理部を備え、
    前記コマンド取得部は、前記コンテンツ表示装置の前記識別依頼処理部を動作させるためのコマンドも前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記コンテンツ表示装置から転送される前記レスポンスを受信し、
    前記連動アプリケーション実行部は、受信された前記レスポンスに含まれる、識別された前記コンテンツに対応する関連メタデータに基づいて、前記連動アプリケーションを取得して実行する
    請求項１１に記載の情報処理装置。
  17. 画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成する情報処理装置の情報処理方法において、
    前記情報処理装置による、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得する取得ステップと、
    前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信する受信ステップと、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと、
    前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御ステップと
    を含む情報処理方法。
  18. 画面上に設けられたウィンドウにコンテンツを表示させるコンテンツ表示装置とともにホームネットワークシステムを構成するコンピュータを、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して設定されている枠視覚属性の通知を要求するためのコマンドを前記コンテンツ表示装置から取得し、前記コマンドを呼び出すことにより前記枠視覚属性の通知を受信するコマンド取得部と、
    前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行部と、
    前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御部と
    して機能させるプログラム。
  19. コンテンツ表示装置と端末装置とを有するホームネットワークシステムの情報処理方法において、
    前記コンテンツ表示装置による、画面上に設けられたウィンドウであって、再生されたコンテンツを表示させるための前記ウィンドウに対して枠視覚属性を設定する枠視覚属性設定ステップと、
    前記コンテンツ表示装置による、前記ウィンドウに対して設定されている前記枠視覚属性の通知を前記端末装置から要求するためのコマンドを前記端末装置に公開する公開ステップと、
    前記端末装置による、公開された前記コマンドを取得する取得ステップと、
    前記コンテンツ表示装置による、前記端末装置による前記コマンドの呼び出しに応じて、前記ウィンドウの前記枠視覚属性を前記端末装置に通知する通知ステップと、
    前記端末装置による、前記コンテンツ表示装置の画面上に設けられた前記ウィンドウに表示されている前記コンテンツの進行に合わせて実行すべき連動アプリケーションを取得して実行する連動アプリケーション実行ステップと、
    前記端末装置による、前記連動アプリケーションによる画像を表示させる枠に対して、通知された前記枠視覚属性と同じ設定を行う枠表示制御ステップと
    を含む情報処理方法。
JP2014531798A 2012-12-14 2013-11-29 情報処理装置、情報処理方法、およびプログラム Active JP6383658B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261737469P 2012-12-14 2012-12-14
US61/737,469 2012-12-14
US13/934,473 2013-07-03
US13/934,473 US8914832B2 (en) 2012-12-14 2013-07-03 Information processing apparatus, information processing method, and program
PCT/JP2013/082131 WO2014091942A1 (ja) 2012-12-14 2013-11-29 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2014091942A1 JPWO2014091942A1 (ja) 2017-01-05
JP6383658B2 true JP6383658B2 (ja) 2018-08-29

Family

ID=50932594

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014531798A Active JP6383658B2 (ja) 2012-12-14 2013-11-29 情報処理装置、情報処理方法、およびプログラム

Country Status (11)

Country Link
US (4) US8914832B2 (ja)
EP (1) EP2934020A4 (ja)
JP (1) JP6383658B2 (ja)
KR (1) KR102190278B1 (ja)
CN (1) CN104094610B (ja)
AU (2) AU2013358297A1 (ja)
BR (1) BR112014019595B1 (ja)
CA (1) CA2862837A1 (ja)
MX (1) MX2014009525A (ja)
WO (1) WO2014091942A1 (ja)
ZA (1) ZA201405449B (ja)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
WO2012043355A1 (ja) 2010-10-01 2012-04-05 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
EP2741497A4 (en) 2011-08-05 2015-03-11 Sony Corp RECEIVING DEVICE, RECEIVING METHOD, PROGRAM, AND INFORMATION PROCESSING SYSTEM
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
US8832723B2 (en) 2012-02-07 2014-09-09 Turner Broadcasting System, Inc. Method and system for a synchronous event manager for automatic content recognition
CN103650525B (zh) 2012-06-19 2017-10-17 索尼公司 用于交互式电视的触发参数表的扩展的方法、系统以及设备
CN104272724B (zh) 2012-07-12 2018-07-03 索尼公司 用于高级电视服务的参数化服务描述符
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9769503B2 (en) * 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US9282346B2 (en) * 2012-12-28 2016-03-08 Turner Broadcasting System, Inc. Method and system for automatic content recognition (ACR) integration for smartTVs and mobile communication devices
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
KR102121472B1 (ko) 2013-09-23 2020-06-17 삼성전자주식회사 기기 별 응용 프로그램간 통신을 위한 장치 및 방법
US10325591B1 (en) * 2014-09-05 2019-06-18 Amazon Technologies, Inc. Identifying and suppressing interfering audio content
US9326295B1 (en) 2014-12-10 2016-04-26 Sony Corporation Method and apparatus for transmitting a-priori information in a communication system
KR20160085076A (ko) * 2015-01-07 2016-07-15 삼성전자주식회사 콘텐츠를 제공하는 방송 서버를 판단하는 방법 및 이를 제공하는 전자 장치
US20160204804A1 (en) 2015-01-13 2016-07-14 Sony Corporation Data processing apparatus and method
US9762354B2 (en) 2015-01-27 2017-09-12 Sony Corporation Signaling methods and apparatus
US9912986B2 (en) 2015-03-19 2018-03-06 Sony Corporation System for distributing metadata embedded in video
CN104796743B (zh) * 2015-04-03 2020-04-24 腾讯科技（北京）有限公司 内容项显示系统、方法及设备
US9756401B2 (en) 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
US9590782B2 (en) 2015-06-22 2017-03-07 Sony Corporation Signaling methods and apparatus
US10205991B2 (en) 2015-07-27 2019-02-12 Sony Corporation Hidden replaceable media slots
US10551988B2 (en) * 2016-02-29 2020-02-04 Dell Products L.P. Multi-input display
JP6745198B2 (ja) * 2016-11-07 2020-08-26 日本放送協会 端末装置、受信装置及びプログラム
CN106959858B (zh) * 2017-03-29 2021-06-15 联想(北京)有限公司 信息处理方法及装置

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7028327B1 (en) * 2000-02-02 2006-04-11 Wink Communication Using the electronic program guide to synchronize interactivity with broadcast programs
US20020162120A1 (en) * 2001-04-25 2002-10-31 Slade Mitchell Apparatus and method to provide supplemental content from an interactive television system to a remote device
JP2003299051A (ja) 2002-03-29 2003-10-17 Matsushita Electric Ind Co Ltd 情報出力装置および情報出力方法
WO2003096669A2 (en) * 2002-05-10 2003-11-20 Reisman Richard R Method and apparatus for browsing using multiple coordinated device
JP4655534B2 (ja) 2004-08-04 2011-03-23 ソニー株式会社 端末装置およびデータ処理方法、プログラム並びに記録媒体
JP2006270634A (ja) * 2005-03-24 2006-10-05 Victor Co Of Japan Ltd デジタル放送同期再生装置、ストリーム同期再生装置及びストリーム同期再生システム
JP2008191929A (ja) 2007-02-05 2008-08-21 Mitsubishi Electric Corp コンテンツ利用システム、コンテンツ表示装置、端末装置及び利用待ち状況表示方法並びにプログラム
KR101386882B1 (ko) * 2007-06-08 2014-04-18 삼성전자주식회사 디지털 방송 채널 정보 표시 방법 및 장치
JP5056359B2 (ja) * 2007-11-02 2012-10-24 ソニー株式会社 情報表示装置、情報表示方法および撮像装置
EP3223518A1 (en) * 2007-11-30 2017-09-27 Samsung Electronics Co., Ltd Method and apparatus for searching for iptv service relay devices and method and apparatus for interacting with devices
KR101601040B1 (ko) * 2009-05-19 2016-03-09 삼성전자주식회사 휴대 단말기의 화면 표시 방법 및 이를 지원하는 휴대 단말기
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US9277183B2 (en) 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US20110302611A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer Scripted Interactivity for Non-Real-Time Services
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
EP2613528B1 (en) 2010-08-30 2022-10-05 Saturn Licensing LLC Receiving device, receiving method and program
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
US8908103B2 (en) * 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
WO2012043355A1 (ja) 2010-10-01 2012-04-05 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
US20120233646A1 (en) * 2011-03-11 2012-09-13 Coniglio Straker J Synchronous multi-platform content consumption
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
KR101893151B1 (ko) * 2011-08-21 2018-08-30 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system

Also Published As

Publication number Publication date
MX2014009525A (es) 2014-09-12
US20170374410A1 (en) 2017-12-28
US8914832B2 (en) 2014-12-16
KR102190278B1 (ko) 2020-12-11
BR112014019595A2 (ja) 2017-06-20
AU2013358297A1 (en) 2014-07-31
KR20150095554A (ko) 2015-08-21
US20160366469A1 (en) 2016-12-15
BR112014019595A8 (pt) 2017-07-11
CN104094610B (zh) 2018-11-09
WO2014091942A1 (ja) 2014-06-19
EP2934020A4 (en) 2016-09-07
JPWO2014091942A1 (ja) 2017-01-05
US20150067713A1 (en) 2015-03-05
CA2862837A1 (en) 2014-06-19
BR112014019595B1 (pt) 2023-04-18
US20140173661A1 (en) 2014-06-19
AU2018201580A1 (en) 2018-03-29
CN104094610A (zh) 2014-10-08
EP2934020A1 (en) 2015-10-21
ZA201405449B (en) 2015-05-27

Similar Documents

Publication Publication Date Title
JP6383658B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6352191B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6219269B2 (ja) 端末装置、情報処理方法、プログラム、および連動アプリケーション供給システム
JP6219275B2 (ja) 端末装置、情報処理方法、プログラム、および連動アプリケーション供給システム
US20160286279A1 (en) Method and apparatus for managing connection between broadcast receiving device and another device connected by network
JPWO2014010470A1 (ja) 送信装置、情報処理方法、プログラム、受信装置、およびアプリケーション連動システム
JP5896222B2 (ja) 端末装置、中継装置、情報処理方法、プログラム、およびコンテンツ識別システム
KR100736094B1 (ko) 디지털 기기의 상태 정보 제공 방법 및 장치
WO2014010469A1 (ja) 受信装置、情報処理方法、プログラム、送信装置、およびアプリケーション連動システム
KR100678902B1 (ko) Ａ/ｖ 홈 네트워킹을 위한 디지털 ｔｖ 프록시 장치 및상기 장치를 포함하는 네트워크 시스템
JP6023518B2 (ja) 情報処理装置、情報処理方法、プログラム、およびコンテンツ共有システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171212

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180215

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180413

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180424

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180710

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180806

R150 Certificate of patent or registration of utility model

Ref document number: 6383658

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250