JP6023518B2 - Information processing apparatus, information processing method, program, and content sharing system - Google Patents
Information processing apparatus, information processing method, program, and content sharing system Download PDFInfo
- Publication number
- JP6023518B2 JP6023518B2 JP2012195765A JP2012195765A JP6023518B2 JP 6023518 B2 JP6023518 B2 JP 6023518B2 JP 2012195765 A JP2012195765 A JP 2012195765A JP 2012195765 A JP2012195765 A JP 2012195765A JP 6023518 B2 JP6023518 B2 JP 6023518B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- signature data
- acr
- response
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000010365 information processing Effects 0.000 title claims description 93
- 238000003672 processing method Methods 0.000 title claims description 10
- 230000004044 response Effects 0.000 claims description 184
- 238000006243 chemical reaction Methods 0.000 claims description 98
- 238000000034 method Methods 0.000 claims description 31
- 238000003780 insertion Methods 0.000 claims description 14
- 230000037431 insertion Effects 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 11
- 230000007175 bidirectional communication Effects 0.000 description 19
- 239000000284 extract Substances 0.000 description 16
- 238000004458 analytical method Methods 0.000 description 15
- 230000006854 communication Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8166—Monomedia components thereof involving executable data, e.g. software
- H04N21/8173—End-user applications, e.g. Web browser, game
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/835—Generation of protective data, e.g. certificates
- H04N21/8358—Generation of protective data, e.g. certificates involving watermark
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
- Storage Device Security (AREA)
Description
本開示は、情報処理装置、情報処理方法、プログラム、およびコンテンツ共有システムに関し、特に、端末側にて視聴しているコンテンツを識別する場合に用いて好適な情報処理装置、情報処理方法、プログラム、およびコンテンツ共有システムに関する。 The present disclosure relates to an information processing device, an information processing method, a program, and a content sharing system, and in particular, an information processing device, an information processing method, a program, And a content sharing system.
例えば、TV(テレビジョン)番組が視聴されているときに、そのTV番組(以下、単に番組と称する)に関連する情報(出演者、あらすじ、次回の予告など)や、番組には直接関係しないが視聴者にとって有益な情報(ニュース、天気予報、交通情報など)などを画面上に表示することを考える。 For example, when a TV (television) program is being watched, information related to the TV program (hereinafter simply referred to as a program) (performers, synopsis, next notice, etc.) and the program are not directly related. Consider displaying useful information (news, weather forecast, traffic information, etc.) on the screen.
これを実現するためには、専用のアプリケーションプログラム(以下、アプリケーションと略記する)を取得、起動させるためのコマンドを番組の進行に連動してTV受像機などに対して送信すればよい。実際、既に日本や欧州などにおいては、TV放送信号におけるデータ放送用の帯域を利用して当該コマンドやアプリケーションを送信することにより、これが実現されている(例えば、特許文献1参照)。 In order to realize this, a command for acquiring and starting a dedicated application program (hereinafter abbreviated as application) may be transmitted to a TV receiver or the like in conjunction with the progress of the program. In fact, in Japan, Europe, and the like, this is realized by transmitting the command and application using a data broadcast band in a TV broadcast signal (see, for example, Patent Document 1).
一方、米国では、TV放送信号にデータ放送用の帯域が設けられておらず、それに代わる方法が確立していないので、番組の進行に連動してアプリケーションを実行させることが実現されていない。 On the other hand, in the United States, a data broadcast band is not provided for a TV broadcast signal, and an alternative method has not been established. Therefore, it is not realized that an application is executed in conjunction with the progress of a program.
なお、米国では、TV受像機にてTV放送波を直接受信して番組を視聴する世帯数よりも、CATVやIPTVなどを介して番組を視聴する世帯数のほうが多く、CATVやIPTVではTV放送信号から番組の映像および音声の信号だけを抽出して配信することがある。したがって、仮に米国におけるTV放送信号にデータ放送用の帯域が設けられたとしても、アプリケーションに関するデータを含めたデータ放送信号がCATVやIPTVの通信網を介して受信装置まで伝送される保証はない。 In the United States, the number of households viewing a program via CATV or IPTV is larger than the number of households viewing a TV broadcast wave directly received by a TV receiver. In some cases, only video and audio signals of a program are extracted from the signal and distributed. Therefore, even if a data broadcasting band is provided for a TV broadcast signal in the United States, there is no guarantee that a data broadcast signal including data related to an application will be transmitted to a receiving device via a CATV or IPTV communication network.
さらに昨今、リアルタイムで放送中の番組のみならず、録画した番組、DVD,BDなどのパッケージメディアから再生した映像、インターネット上からダウンロードした動画などの任意のコンテンツを視聴している場合においても、その進行に連動してアプリケーションを実行させたいという要求がある。 Furthermore, in the case of viewing arbitrary content such as a recorded program, a video played from a package media such as a DVD or a BD, a video downloaded from the Internet, as well as a program currently being broadcast in real time. There is a request to run an application in conjunction with the progress.
視聴している任意のコンテンツの進行に対応してアプリケーションを実行させるためには、まず視聴しているコンテンツを識別する必要がある。その一手法としては、コンテンツ自動認識技術(以下、ACR(Automatic Content Recognition)と称する)の適用が想定されている。 In order to execute an application corresponding to the progress of arbitrary content being viewed, it is first necessary to identify the content being viewed. As one of the methods, application of automatic content recognition technology (hereinafter referred to as ACR (Automatic Content Recognition)) is assumed.
ACRでは、視聴される番組などのコンテンツにシグニチャデータを挿入して視聴者側に供給するとともに、コンテンツとシグニチャデータとを対応付けてデータベース化する。そして、視聴者側では、視聴しているコンテンツからシグニチャデータを抽出し、それをデータベースに照らし合わせることによって視聴中のコンテンツを識別する。 In ACR, signature data is inserted into content such as a program to be viewed and supplied to the viewer side, and the content and signature data are associated with each other and made into a database. On the viewer side, the signature data is extracted from the content being viewed, and the content being viewed is identified by comparing it with the database.
コンテンツに挿入されて視聴者側に供給され、視聴時に抽出されるシグニチャデータの種類としては、例えば、電子指紋(以下、FP(finger print)と称する)、電子透かし(以下、WM(water mark)と称する)などが用いられる。 The types of signature data inserted into the content, supplied to the viewer, and extracted at the time of viewing include, for example, electronic fingerprint (hereinafter referred to as FP (finger print)), digital watermark (hereinafter referred to as WM (water mark)). And the like are used.
なお、ACRサービスを提供する業者は放送局などに限らず、様々な事業者の参入が考えられ、結果として複数のACRサービスの出現が予想される。複数のACRサービスが出現することにより、データベースに登録されるコンテンツの数が増加するので、コンテンツの識別精度の向上が期待できる。ただし、複数のACRサービスそれぞれで採用されるシグニチャデータの種類は必ずしも統一されていない。 The providers that provide ACR services are not limited to broadcasting stations and the like, and various operators may be involved. As a result, the appearance of multiple ACR services is expected. The appearance of a plurality of ACR services increases the number of contents registered in the database, so that the identification accuracy of contents can be expected to improve. However, the types of signature data adopted by each of the plurality of ACR services are not necessarily unified.
一方、視聴側においては、複数のACRサービスそれぞれで採用されているシグニチャデータの種類に応じた抽出方法により、視聴しているコンテンツから複数のシグニチャデータを抽出し、複数のACRサービスを利用するようにすれば、コンテンツの識別精度を上げることができる。 On the other hand, on the viewing side, multiple signature data are extracted from the content being viewed using an extraction method corresponding to the type of signature data adopted by each of the multiple ACR services, and multiple ACR services are used. By doing so, the content identification accuracy can be increased.
ところで昨今、一般家庭内においてAV(audio visual)装置を相互に接続したホームネットワークを構築し、ホームネットワークに接続されているAV装置間でコンテンツを共有できるシステムが存在する。該ホームネットワークによれば、例えばリビングに設置されているTV受像機で受信、視聴しているコンテンツや録画したコンテンツを、可搬式のタブレット型コンピュータや寝室のTV受像機に転送して視聴したりするように、コンテンツを共有することができる。 Nowadays, there is a system in which a home network in which AV (audio visual) devices are connected to each other in a general home can be constructed, and contents can be shared between AV devices connected to the home network. According to the home network, for example, content received and viewed by a TV receiver installed in a living room or recorded content can be transferred to a portable tablet computer or a TV receiver in a bedroom for viewing. So that you can share content.
上述したように、ホームネットワークにてコンテンツを共有し、さらにACRサービスを利用することを考えると、各AV装置が共通のコンテンツを視聴しているにも拘わらず、それぞれが独自にACRサーバにアクセスすることになり、ACRサーバの負荷が増加する。さらに、各AV装置が複数のACRサービスを利用する場合には、シグニチャデータを抽出する処理の負荷の増加、識別結果を得るまでの時間遅延の発生などにより、コンテンツの進行に対応させるべきアプリケーションを、所定のタイミングで実行できないことが発生し得る。 As mentioned above, considering sharing content on the home network and using the ACR service, each AV device independently accesses the ACR server even though it is viewing common content. As a result, the load on the ACR server increases. In addition, when each AV device uses a plurality of ACR services, an application that should respond to the progress of the content due to an increase in processing load for extracting signature data, a time delay until obtaining an identification result, and the like. , It may occur that it cannot be executed at a predetermined timing.
本開示はこのような状況に鑑みてなされたものであり、コンテンツを共有する場合において効率的にACRサービスを利用できるようにするものである。 The present disclosure has been made in view of such a situation, and makes it possible to efficiently use the ACR service when sharing content.
本開示の第1の側面である情報処理装置は、ネットワークを介して他の情報処理装置とコンテンツを共有する情報処理装置において、コンテンツを取得する取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給部とを備える。 An information processing apparatus according to a first aspect of the present disclosure is an information processing apparatus that shares content with another information processing apparatus via a network. An identification request for extracting signature data, transmitting a query including the first signature data to a content identification server, and obtaining a response including a result of identification of the content returned from the content identification server in response to the query. And the second response data that can be extracted by the other information processing apparatus in a state in which the response conversion data is included and the response conversion data is included, and the acquired content includes the second signature data. A signature data insertion unit for inserting the second signature data, and the second signature data There and a supply unit for supplying the content that is inserted in the other information processing apparatus.
前記レスポンスは、前記コンテンツの進行に連動して実行させるアプリケーションを表す情報が包含された関連メタデータをさらに含み、前記シグニチャデータ挿入部は、前記レスポンスに含まれる前記関連メタデータを少なくとも含む前記レスポンス変換データを生成し、前記レスポンス変換データを包含させた状態で前記第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入することができる。 The response further includes related metadata including information representing an application to be executed in conjunction with the progress of the content, and the signature data insertion unit includes at least the related metadata included in the response. It is possible to generate conversion data, generate the second signature data with the response conversion data included, and insert the second signature data into the acquired content.
本開示の第1の側面である情報処理装置は、前記他の情報処理装置が抽出可能なシグニチャデータの種類を管理する管理部をさらに備えることができる。 The information processing apparatus according to the first aspect of the present disclosure may further include a management unit that manages types of signature data that can be extracted by the other information processing apparatus.
本開示の第1の側面である情報処理装置は、前記レスポンスに含まれる前記関連メタデータに基づき、前記コンテンツの進行に連動して実行させる前記アプリケーションを取得して実行する実行部をさらに備えることができる。 The information processing apparatus according to the first aspect of the present disclosure further includes an execution unit that acquires and executes the application to be executed in conjunction with the progress of the content based on the related metadata included in the response. Can do.
前記第1のシグニチャデータはFPとし、前記第2のシグニチャデータはWMとすることができる。 The first signature data may be FP, and the second signature data may be WM.
前記第1および第2のシグニチャデータはWMとすることができる。 The first and second signature data may be WM.
本開示の第1の側面である情報処理方法は、ネットワークを介して他の情報処理装置とコンテンツを共有する情報処理装置の情報処理方法において、前記情報処理装置による、コンテンツを取得する取得ステップと、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼ステップと、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入ステップと、前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給ステップとを含む。 An information processing method according to a first aspect of the present disclosure is an information processing method of an information processing apparatus that shares content with another information processing apparatus via a network, and an acquisition step of acquiring content by the information processing apparatus; Extracting the first signature data from the acquired content, transmitting a query including the first signature data to a content identification server, and returning the query from the content identification server in response to the query. An identification requesting step for obtaining a response including an identification result, and converting the response into response conversion data, and generating second signature data that can be extracted by the other information processing apparatus in a state in which the response conversion data is included And inserting the second signature data into the acquired content Gunichadeta comprising inserting a step, a supply step of supplying the content to the second signature data is inserted into the other information processing apparatus.
本開示の第1の側面であるプログラムは、ネットワークを介して他の情報処理装置とコンテンツを共有するコンピュータを、コンテンツを取得する取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給部として機能させる。 A program according to a first aspect of the present disclosure includes a computer that shares content with another information processing apparatus via a network, an acquisition unit that acquires content, and extracts first signature data from the acquired content An identification requesting unit that transmits a query including the first signature data to a content identification server and obtains a response including a result of identification of the content that is returned from the content identification server in response to the query; A response is converted into response conversion data, second signature data that can be extracted by the other information processing apparatus in a state including the response conversion data is generated, and the second signature data is generated in the acquired content. And the signature data insertion unit for inserting the second signature data The content to function as a supply unit for supplying to said another information processing apparatus.
本開示の第1の側面においては、コンテンツが取得され、取得された前記コンテンツから第1のシグニチャデータが抽出され、前記第1のシグニチャデータを含むクエリがコンテンツ識別サーバに送信され、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスが取得される。さらに、前記レスポンスがレスポンス変換データに変換され、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータが生成される。そして、取得された前記コンテンツに前記第2のシグニチャデータが挿入され、前記第2のシグニチャデータが挿入された前記コンテンツが前記他の情報処理装置に供給される。 In the first aspect of the present disclosure, content is acquired, first signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the query is transmitted to the query. In response, a response including the result of identifying the content is returned from the content identification server. Further, the response is converted into response conversion data, and second signature data that can be extracted by the other information processing apparatus in a state including the response conversion data is generated. Then, the second signature data is inserted into the acquired content, and the content into which the second signature data is inserted is supplied to the other information processing apparatus.
本開示の第2の側面である情報処理装置は、コンテンツを取得する取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生する情報処理装置において、前記コンテンツ供給装置から供給されるコンテンツを取得する取得部と、取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行部とを備える。 An information processing apparatus according to a second aspect of the present disclosure includes an acquisition unit that acquires content, a first signature data extracted from the acquired content, and a query including the first signature data as a content identification server An identification request unit that obtains a response including a result of identification of the content that is transmitted from the content identification server in response to the query, converts the response into response conversion data, and includes the response conversion data In this state, the second signature data that can be extracted by the information processing apparatus is generated, and the signature data insertion unit that inserts the second signature data into the acquired content, and the second signature data are inserted. A content supply device including a supply unit configured to supply the content to the information processing apparatus. An information processing apparatus for reproducing content supplied from the acquisition unit for acquiring content supplied from the content supplying device, an extraction unit that extracts the second signature data from the acquired the content, extracted based on said second signature data included has been that the response converted data, and a execution unit for executing a predetermined process.
前記レスポンス変換データは、前記コンテンツの進行に連動して実行させるアプリケーションを表す情報を含む関連メタデータを含み、前記実行部は、前記関連メタデータに基づいて前記アプリケーションを取得して実行することができる。 The response conversion data includes related metadata including information representing an application to be executed in conjunction with the progress of the content, and the execution unit acquires and executes the application based on the related metadata. it can.
前記第2のシグニチャデータはWMとすることができる。 The second signature data may be WM.
本開示の第2の側面である情報処理方法は、コンテンツを取得する取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生する情報処理装置の情報処理方法において、前記情報処理装置による、前記コンテンツ供給装置から供給されるコンテンツを取得する取得ステップと、取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出ステップと、抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行ステップとを含む。 An information processing method according to a second aspect of the present disclosure includes an acquisition unit that acquires content, first signature data extracted from the acquired content, and a query including the first signature data as a content identification server An identification request unit that obtains a response including a result of identification of the content that is transmitted from the content identification server in response to the query, converts the response into response conversion data, and includes the response conversion data In this state, the second signature data that can be extracted by the information processing apparatus is generated, and the signature data insertion unit that inserts the second signature data into the acquired content, and the second signature data are inserted. A content supply device including a supply unit configured to supply the content to the information processing apparatus. An information processing method for an information processing apparatus for reproducing content supplied from the by the information processing apparatus, an acquisition step of acquiring a content supplied from the content supplying device, the second signature from the acquired the content an extraction step of extracting data, based on the response conversion data contained in the extracted second signature data, and an execution step of executing a predetermined process.
本開示の第2の側面であるプログラムは、コンテンツを取得する取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生するコンピュータを、前記コンテンツ供給装置から供給されるコンテンツを取得する取得部と、取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行部として機能させる。 A program according to a second aspect of the present disclosure includes an acquisition unit that acquires content, and extracts first signature data from the acquired content, and transmits a query including the first signature data to a content identification server And an identification requesting unit that obtains a response including a result of identifying the content, which is returned from the content identification server in response to the query, and converts the response into response conversion data and includes the response conversion data A second signature data that can be extracted by the information processing apparatus in a state, and a signature data insertion unit that inserts the second signature data into the acquired content; and the second signature data is inserted. A content supply device comprising a supply unit for supplying content to the information processing device A computer for reproducing a content that is al provided, an acquisition unit for acquiring content supplied from the content supplying device, an extraction unit that extracts the second signature data from the acquired the content, extracted the based on the response conversion data contained in the second signature data, and functions as an execution unit for executing a predetermined process.
本開示の第2の側面においては、コンテンツ供給装置から供給されるコンテンツが取得され、取得された前記コンテンツから第2のシグニチャデータが抽出され、抽出された前記第2のシグニチャデータに包含されているレスポンス変換データに基づき、所定の処理が実行される。 In the second aspect of the present disclosure, content supplied from a content supply device is acquired, second signature data is extracted from the acquired content, and is included in the extracted second signature data. Predetermined processing is executed based on the response conversion data.
本開示の第3の側面であるコンテンツ共有システムは、第1の情報処理装置および第2の情報処理装置を含むコンテンツ共有システムにおいて、前記第1の情報処理装置が、コンテンツを取得する第1の取得部と、取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記第2の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、前記第2のシグニチャデータが挿入された前記コンテンツを前記第2の情報処理装置に供給する供給部とを備える。また、前記第2の情報処理装置が、前記第1の情報処理装置から供給されるコンテンツを取得する第2の取得部と、取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、抽出された前記第2のシグニチャデータに包含されているレスポンス変換データに基づき、所定の処理を実行する実行部とを備える。 A content sharing system according to a third aspect of the present disclosure is a content sharing system including a first information processing device and a second information processing device, wherein the first information processing device acquires content. An acquisition unit, extracting first signature data from the acquired content, transmitting a query including the first signature data to a content identification server, and returning from the content identification server in response to the query; An identification requesting unit that obtains a response including a result of identifying the content; and a second information that can be extracted by the second information processing apparatus by converting the response to response conversion data and including the response conversion data Signature that generates signature data and inserts the second signature data into the acquired content Comprising a Yadeta inserting portion, and a supply unit for supplying to said second information processing apparatus the content which the second signature data is inserted. In addition, the second information processing apparatus acquires a second acquisition unit that acquires content supplied from the first information processing apparatus, and an extraction unit that extracts the second signature data from the acquired content And an execution unit that executes predetermined processing based on the response conversion data included in the extracted second signature data.
本開示の第3の側面においては、前記第1の情報処理装置により、コンテンツが取得され、取得された前記コンテンツから第1のシグニチャデータが抽出され、前記第1のシグニチャデータを含むクエリがコンテンツ識別サーバに送信され、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスが取得される。さらに、前記レスポンスがレスポンス変換データに変換され、前記レスポンス変換データを包含させた状態で第2の情報処理装置が抽出可能な第2のシグニチャデータが生成される。そして、取得された前記コンテンツに前記第2のシグニチャデータが挿入され、前記第2のシグニチャデータが挿入された前記コンテンツが前記第2の情報処理装置に供給される。一方、第2の情報処理装置により、第1の情報処理装置から供給されるコンテンツが取得され、取得された前記コンテンツから第2のシグニチャデータが抽出され、抽出された前記第2のシグニチャデータに包含されているレスポンス変換データに基づき、所定の処理が実行される。 In the third aspect of the present disclosure, content is acquired by the first information processing apparatus, first signature data is extracted from the acquired content, and a query including the first signature data is a content. A response including the identification result of the content that is transmitted to the identification server and is returned from the content identification server in response to the query is acquired. Further, the response is converted into response conversion data, and second signature data that can be extracted by the second information processing apparatus in a state including the response conversion data is generated. Then, the second signature data is inserted into the acquired content, and the content into which the second signature data is inserted is supplied to the second information processing apparatus. On the other hand, the content supplied from the first information processing device is acquired by the second information processing device, the second signature data is extracted from the acquired content, and the extracted second signature data is added to the extracted second signature data. Predetermined processing is executed based on the included response conversion data.
本開示の第1の側面によれば、レスポンス変換データを包含させたシグニチャデータが挿入されているコンテンツを他の情報処理装置に供給することができる。 According to the first aspect of the present disclosure, content in which signature data including response conversion data is inserted can be supplied to another information processing apparatus.
本開示の第2の側面によれば、レスポンス変換データが包含されたシグニチャデータをコンテンツから抽出することができる。 According to the second aspect of the present disclosure, signature data including response conversion data can be extracted from content.
本開示の第3の側面によれば、第2の情報処理装置によるコンテンツ識別サーバの利用を抑制することができる。 According to the third aspect of the present disclosure, the use of the content identification server by the second information processing apparatus can be suppressed.
以下、本開示を実施するための最良の形態(以下、実施の形態と称する)について、図面を参照しながら詳細に説明する。 Hereinafter, the best mode for carrying out the present disclosure (hereinafter referred to as an embodiment) will be described in detail with reference to the drawings.
[ACRシステムの構成例]
図1は、本開示の実施の形態であるACRシステムの構成例を示している。
[ACR system configuration example]
FIG. 1 illustrates a configuration example of an ACR system that is an embodiment of the present disclosure.
このACRシステム10は、ユーザがTV受像機などの画面をモニタとして視聴しているコンテンツを、ACRサービスを利用して識別し、識別したコンテンツの進行に連動してアプリケーションを実行するものである。 The ACR system 10 identifies content that a user is viewing using a TV receiver screen or the like as a monitor by using an ACR service, and executes an application in conjunction with the progress of the identified content.
ここで、コンテンツとは、TV放送によりリアルタイムで放送されている番組に限られない。例えば、ビデオレコーダにより録画・再生された番組、マルチメディアプレーヤによりパッケージメディアから再生された映画等の映像、インターネットを介してダウンロードした動画、楽曲などのあらゆるビデオデータ、およびオーディオデータを含むものとする。また、番組間や番組途中などに挿入されるコマーシャルメッセージもコンテンツに含まれる。 Here, the content is not limited to a program broadcast in real time by TV broadcasting. For example, it includes a program recorded and reproduced by a video recorder, a video such as a movie reproduced from a package medium by a multimedia player, a video downloaded via the Internet, all video data such as music, and audio data. The content also includes commercial messages inserted between programs or during programs.
ACRシステム10は、放送側の放送装置20と、放送網11および双方向通信網12を介して放送装置20と接続される受信側のACR親端末装置30と、ACR親端末装置30とともにホームネットワーク40を構成するACR子端末装置50から構成される。なお、ACR子端末装置50もACR親端末装置30と同様、放送網11および双方向通信網12を介して放送装置20と接続することができる。
The ACR system 10 includes a
放送網11は、コンテンツを視聴者側に供給可能なTV放送網、CATV網、IPTV網などを指す。双方向通信網12は、各種の電子データを通信可能なインターネットなどのIP通信網を指す。
The broadcast network 11 refers to a TV broadcast network, a CATV network, an IPTV network, or the like that can supply content to viewers. The
[放送装置20の説明]
放送装置20は、コンテンツサーバ21、ACRサーバ22−1乃至22−N、アプリケーションサーバ23、およびメタデータサーバ24から構成される。これらのサーバは、放送局など一箇所に集中して配置してもよいし、分散して配置してもよい。また、これらのサーバを適宜組み合わせて構成するようにしてもよい。
[Description of Broadcasting Device 20]
The
コンテンツサーバ21は、放送網11を介し、コンテンツを視聴者側(ACR親端末装置30など)に供給する。なお、コンテンツサーバ21から供給されるコンテンツには、予めシグニチャデータ(所定の方式により生成されたFP,WMなど)が挿入されているものとする。
The
ACRサーバ22−1乃至22−Nは、コンテンツとそれに挿入されているシグニチャデータとが対応付けて登録されているデータベースを有している。なお、ACRサーバ22−1乃至22−Nの各データベースに登録されているシグニチャデータは、その種類は必ずしも統一されていない。シグニチャデータとしては、例えばFP,WMなどが想定される。 The ACR servers 22-1 to 22-N have a database in which contents and signature data inserted therein are registered in association with each other. Note that the types of signature data registered in the databases of the ACR servers 22-1 to 22-N are not necessarily unified. As signature data, FP, WM, etc. are assumed, for example.
FPは、コンテンツの解像度、アスペクト比、ビットレート、符号化フォーマットなどが変換されたとしても、変換前と変換後とで同一のものを抽出することができる。したがって、シグニチャデータとしてフィンガプリントを用いれば、コンテンツの識別精度を上げることができる。 Even if the resolution, aspect ratio, bit rate, encoding format, etc. of the content are converted, the same FP can be extracted before and after conversion. Therefore, if a fingerprint is used as signature data, the content identification accuracy can be increased.
WMは、FPに比較してコンテンツからの抽出時間が多く要するが、より多くのデジタルデータを包含させることができる。 WM requires more time to extract from content than FP, but can include more digital data.
該データベースには、さらに、コンテンツの進行に対応して実行すべきアプリケーションの識別情報や該アプリケーションが処理するメタデータの取得先情報なども登録されている。 In the database, application identification information to be executed in accordance with the progress of content, acquisition destination information of metadata processed by the application, and the like are also registered.
ACRサーバ22−i(i=1,・・・,N)は、ACR親端末装置30のACRクライアント32−1乃至32−Mのうちの対応するACRクライアント32−iから送信される、視聴されているコンテンツから抽出したシグニチャデータを含むACRクエリに応じて該コンテンツを識別する。さらに、そのコンテンツの進行に連動して実行させるアプリケーションの情報などを含むACRレスポンスを生成して、ACRクライアント32−iに返信する。ACRクエリおよびACRレスポンスについては後述する。
The ACR server 22-i (i = 1,..., N) is viewed and transmitted from the corresponding ACR client 32-i among the ACR clients 32-1 to 32-M of the ACR
アプリケーションサーバ23は、受信側にてコンテンツの進行に連動して実行されるアプリケーションを保持しており、ACR親端末装置30のアプリケーション実行部33からの要求に応じ、双方向通信網12を介してアプリケーションを供給する。
The
メタデータサーバ24は、受信側にて実行されたアプリケーションが処理するメタデータを保持しており、ACR親端末装置30のアプリケーション実行部33からの要求に応じ、双方向通信網12を介してメタデータを供給する。
The
[ACR親端末装置30の説明]
ACR親端末装置30は、ホームネットワーク40を構成するTV受像機やビデオレコーダなどのAV装置に内蔵された状態で視聴者宅などに配置される。
[Description of ACR parent terminal device 30]
The ACR
ACR親端末装置30は、コンテンツ取得部31、複数のACRクライアント32−1乃至32−M、アプリケーション実行部33、ACR変換部34、ローカルコンテンツ保持部35、およびローカルACR構成管理部36を有する。
The ACR
コンテンツ取得部31は、ACR親端末装置30が内蔵されたTV受像機などの画面に表示される全てのコンテンツ、あるいはACR親端末装置30が内蔵されたビデオレコーダに録画されるデコードされた状態の全てのコンテンツを取得、分岐してACRクライアント32−1乃至32−M、およびACR変換部34に供給する。すなわち、コンテンツ取得部31は、放送装置20のコンテンツサーバ21から放送網11を介して供給されたコンテンツのみならず、TV受像機やビデオレコーダなどの各種入力端子(HDMI端子など)を介して入力されるコンテンツも取得、分岐する。
The
ACRクライアント32−i(i=1,2,・・・,M(M≦N))は、放送装置20のACRサーバ22−1乃至22−NのうちのACRサーバ22−iに対応するものである。すなわち、複数MのACRクライアント32−1乃至32−Mを有するACR親端末装置30は、複数のNだけ存在するACRサーバ22−1乃至22−NのうちのM個を利用できることになる。以下、ACRクライアント32−1乃至32−Mを個々に区別する必要がない場合、単にACRクライアント32と称する。ACRサーバ22−1乃至22−Nについても同様とする。
The ACR client 32-i (i = 1, 2,..., M (M ≦ N)) corresponds to the ACR server 22-i among the ACR servers 22-1 to 22-N of the
ACRクライアント32は、対応するACRサーバ22にて採用されているACR方式(シグニチャデータの種類、その抽出方式などを表す)に従い、コンテンツ取得部31より入力されるコンテンツからシグニチャデータを所定のサンプリング周期で抽出する。また、ACRクライアント32は、抽出したシグニチャデータを含む、コンテンツの識別を依頼するためのACRクエリを生成し、双方向通信網12を介して対応するACRサーバ22に送信する。
In accordance with the ACR method (representing the type of signature data, its extraction method, etc.) adopted by the corresponding
また、ACRクライアント32は、送信したACRクエリに応じてACRサーバ22から返信されるACRレスポンスを受信、解析し、解析結果をアプリケーション実行部33に通知する。また、ACRクライアント32は、受信したACRレスポンスをACR変換部34に供給する。
Further, the
アプリケーション実行部33は、ACRレスポンスの解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23から取得して実行する。また、アプリケーション実行部33は、実行中のアプリケーションにて処理するメタデータをACRクライアント32またはメタデータサーバ24から取得する。
Based on the analysis result of the ACR response, the
ACR変換部34は、ACRクライアント32から入力されたACRレスポンスを要約してACRレスポンス変換データを生成する。また、ACR変換部34は、生成したACRレスポンス変換データを包含させた状態で、ACR子端末装置50のACRクライアント52が抽出可能なシグニチャデータを生成する。
The
ACR子端末装置50のACRクライアント52が抽出可能なシグニチャデータは、ACRレスポンス変換データを包含させることができるWMを想定する。ただし、ACRレスポンス変換データ(デジタルデータ)を包含可能であれば、ACRクライアント52が抽出可能なシグニチャデータの種類は任意であってWMに限定されない。
The signature data that can be extracted by the
さらに、ACR変換部34は、コンテンツ取得部31により分岐、供給されるコンテンツに、ACR変換部34からのACRレスポンス変換データが包含されたシグニチャデータ(WM)を挿入してローカルコンテンツ保持部35に出力する。
Further, the
なお、ACR子端末装置50が複数のACRクライアント52を搭載していたり、ホームネットワーク40にACR子端末装置50を内蔵する複数のAV装置が接続されていたりして、それらのACRクライアント52がそれぞれ異なるACR方式に対応しているような場合もあり得る。この場合、各ACR方式に対応したシグニチャデータにACRレスポンス変換データを包含させるようにし、コンテンツに複数のシグニチャデータを挿入するようにしてもよい。
The ACR
ローカルコンテンツ保持部35は、ACR変換部34からのACRレスポンス変換データが包含されたシグニチャデータ(WM)を保持し、ACR子端末装置50からの要求に応じ、それを供給する。なお、ACRレスポンス変換データが包含されたシグニチャデータ(WM)が挿入したコンテンツを、ホームネットワーク40に属するローカルコンテンツサーバ41などに蓄積するようにしてもよい。
The local
ローカルACR構成管理部36には、ホームネットワーク40に接続されたACR子端末装置50が利用可能なACRサーバ22を表す情報、換言すれば、ACR子端末装置50のACRクライアント52が抽出可能なACR方式を表す情報が登録されている。この情報は、例えばACR親端末装置30に対してACR子端末装置50が初めて接続された時に、ACR子端末装置50からACR親端末装置30に通知され、ローカルACR構成管理部36に登録される。この情報の通信には、例えばサービスディスカバリプロトコルを利用することができる。
The local ACR
[ACR子端末装置50の説明]
ACR子端末装置50は、ホームネットワーク40に接続可能なタブレット型コンピュータ、スマートフォン、TV受像機などのAV装置に内蔵される。
[Description of ACR child terminal device 50]
The ACR
ACR子端末装置50は、コンテンツ取得部51、ACRクライアント52、およびアプリケーション実行部53を有する。
The ACR
コンテンツ取得部51は、ACR子端末装置50が内蔵されたAV装置にて再生、表示される全てのコンテンツを取得、分岐してACRクライアント52に供給する。ACR子端末装置50が内蔵されたAV装置にて再生、表示されるコンテンツとは、放送装置20のコンテンツサーバ21から放送網11を介して供給されたり、ACR親端末装置30から共有されたり、ローカルコンテンツサーバ41から取得したりするものを含む。ただし、以降においては、ACR親端末装置30から共有されるコンテンツについて言及する。
The
ACRクライアント52は、放送装置20のACRサーバ22−1乃至22−Nのうちの1台に対応する、換言すれば、ACRサーバ22−1乃至22−Nにて採用されているACR方式の1方式に対応するものである。ACRクライアント52は、ACR子端末装置50がACR親端末装置30に初めて接続された時、自己が対応可能なACR方式を表す情報を、ACR親端末装置30に通知する。該情報はローカルACR構成管理部36に登録される。
The
ACRクライアント52は、対応するACRサーバ22にて採用されているACR方式(いまの場合、シグニチャデータの種類はWMとする)に従い、コンテンツ取得部31より入力される、ACR親端末装置30から共有されるコンテンツからシグニチャデータを所定のサンプリング周期で抽出する。また、ACRクライアント32は、抽出したシグニチャデータに包含されているACRレスポンス変換データを解析し、解析結果をアプリケーション実行部53に通知する。
The
また、ACRクライアント52は、コンテンツ取得部31より入力されるコンテンツがACR親端末装置30から共有されるものではない場合、ACR親端末装置30のACRクライアント32と同様の処理を実行できる。すなわち、コンテンツからシグニチャデータを抽出してそれを含むACRクエリをACRサーバ22に送信してコンテンツの識別を依頼し、ACRレスポンスを得ることができる。
In addition, when the content input from the
なお、ACR親端末装置30のように、対応するACRサーバ22が異なる複数のACRクライアント52をACR子端末装置50に搭載するようにしてもよい。
A plurality of
アプリケーション実行部53は、ACRレスポンス変換データの解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23から取得して実行する。また、アプリケーション実行部53は、実行中のアプリケーションにて処理するメタデータをACRクライアント32またはメタデータサーバ24から取得する。
Based on the analysis result of the ACR response conversion data, the
[通信される情報のデータ項目について]
次に、放送装置20、ACR親端末装置30、およびACR子端末装置50の間で通信される各種情報のデータ項目について説明する。
[Data items of information to be communicated]
Next, data items of various information communicated between the
図2は、ACR親端末装置30のACRクライアント32−i(またはACR子端末装置50のACRクライアント52)から放送装置20のACRサーバ22−iに対して、コンテンツの識別を依頼する時に送信されるACRクエリのデータ項目を示している。
FIG. 2 is transmitted when the ACR client 32-i of the ACR parent terminal device 30 (or the
ACRクエリ60には、ACRクエリ識別子61、抽出方式識別子62、サービス識別子63、シグニチャデータ64、ローカルタイムスタンプ65、発信元アドレス66、および署名67が含まれる。
The ACR query 60 includes an
ACRクエリ識別子61は、当該ACRクエリ60を一意に特定する情報である。抽出方式識別子62は、シグニチャデータ64を抽出する際に用いられた抽出方式を特定する情報である。サービス識別子63は、当該ACRクエリ60を送信してACRレスポンスを得るACRサーバ22を特定するための情報である。
The
シグニチャデータ64は、ACRクライアント32−i(またはACRクライアント52)にてコンテンツから抽出されたものである。ローカルタイムスタンプ65は、コンテンツからシグニチャデータ64が抽出されたタイミングを示すものであり、ACR親端末装置30(またはACR子端末装置50)のローカルシステムクロックが示す時刻により表される。
The
発信元アドレス66は、該ACRクエリ60を発信するACRクライアント32−i(またはACRクライアント52)の双方向通信網12におけるアドレスであり、該ACRクエリ60に応じてACRサーバ22−iにて生成されるACRレスポンスの返信先として利用される。署名67は、該ACRクエリ60の改ざんを抑止するためのものである。なお、ACRクエリ60の全体を暗号化して送信するようにしてもよい。
The
図3は、ACRサーバ22−iからACRクライアント32−i(またはACRクライアント52)に返信されるACRレスポンスのデータ項目を示している。 FIG. 3 shows data items of an ACR response returned from the ACR server 22-i to the ACR client 32-i (or ACR client 52).
なお、同図Aは、ACRクエリ60に含まれるシグニチャデータ64の抽出元のコンテンツが識別できた場合、すなわち、ACR親端末装置30が搭載されているAV装置にて視聴中のコンテンツを識別できた場合のACRレスポンス70のデータ項目である。同図Bはコンテンツが識別できなかった場合のACRレスポンス70のデータ項目である。
In FIG. 7A, when the content from which the
コンテンツを識別できた場合のACRレスポンス70(同図A)には、ACRクエリ識別子71、抽出方式識別子72、サービス識別子73、コンテンツ識別子74、再生時刻75、ローカルタイムスタンプ76、関連メタデータ77、発信元アドレス78、および署名79が含まれる。
The ACR response 70 (A in the figure) when the content can be identified includes an
一方、コンテンツを識別できなかった場合のACRレスポンス70(同図B)には、ACRクエリ識別子71、サービス識別子73、発信元アドレス78、署名79、および識別失敗フラグ81が含まれる。
On the other hand, the ACR response 70 (B in the same figure) when the content cannot be identified includes an
ACRクエリ識別子71、抽出方式識別子72、サービス識別子73、ローカルタイムスタンプ76は、該ACRレスポンス70が生成されるトリガとなったACRクエリ60を特定するためのものであり、対応するACRクエリ60のACRクエリ識別子61、抽出方式識別子62、サービス識別子63、およびローカルタイムスタンプ65が引用される。
The
コンテンツ識別子74、および再生時刻75は、識別結果を表すものである。すなわち、コンテンツ識別子74は、ACRクエリ60のシグニチャデータ64の抽出元のコンテンツを識別する情報である。再生時刻75は、該コンテンツからシグニチャデータ64が抽出されたタイミングをコンテンツの先頭からの経過時間により表す情報である。
The
関連メタデータ77は、識別されたコンテンツの進行に対応付けて実行されるアプリケーションを表すとともにその取得先(アプリケーションサーバ23)を表すアプリケーション識別子と、該アプリケーションにより処理されるメタデータからなる。メタデータの代わりに、該メタデータを識別するとともにその取得先を表すメタデータ識別子を格納してもよい。なお、コンテンツが視聴されているAV装置に応じて実行するアプリケーションを変化させるようにしてもよい。その場合、関連メタデータ77には、複数のアプリケーション識別子を格納するようにする。
The
発信元アドレス78は、該ACRレスポンス70を送信するACRサーバ22の双方向通信網12上のアドレスである。署名79は、該ACRレスポンス70の改ざんを抑止するためのものである。なお、ACRレスポンス70の全体を暗号化して送信することにより、その改ざんを防止するようにしてもよい。
The
識別失敗フラグ81は、ACRサーバ22にて、ACRクエリ60に含まれるシグニチャデータ84の抽出元のコンテンツを識別することができなかったことを表すフラグである。
The
図4は、ACR親端末装置30のACR変換部34が、ACRサーバ22から返信されたACRレスポンス70を要約して生成するACRレスポンス変換データのデータ項目を示している。
FIG. 4 shows data items of ACR response conversion data that the
ACRレスポンス変換データ90には、コンテンツ識別子91、再生時刻92、および関連メタデータ93が含まれており、これらは、ACRレスポンス70のコンテンツ識別子74、再生時刻75、および関連メタデータ77が引用されたものである。
The ACR response conversion data 90 includes a
[ACRシステム10による動作]
次に、ACRシステム10の動作について説明する。
[Operation by ACR system 10]
Next, the operation of the ACR system 10 will be described.
図5は、ACR変換部34の処理の概要を示している。コンテンツには、シグニチャデータとして例えばFPが挿入されており、該FPがACRクライアント32により抽出されてACRクエリ60が生成され、それに応じてACRレスポンス70が返信される。ACR変換部34では、ACRレスポンス変換データが包含されたシグニチャデータとしてWMをコンテンツ取得部31から順次入力されるコンテンツの所定単位毎に挿入し、後段のローカルコンテンツ保持部35またはローカルコンテンツサーバ41に出力する。
FIG. 5 shows an outline of the processing of the
ローカルコンテンツ保持部35またはローカルコンテンツサーバ41からコンテンツを取得するACR子端末装置50では、ACRクライアント52が対応するACR方式でシグニチャデータを抽出することにより、そこに包含されたACRレスポンス変換データ90を取得することができる。
In the ACR
図6は、ACR親端末装置30を内蔵するAV装置(例えば、TV受像機)が受信、再生するコンテンツを、ACR子端末装置50を内蔵するAV装置(例えば、タブレット型PC)とリアルタイムで共用する場合の動作(以下、第1の動作例と称する)を説明するフローチャートである。
FIG. 6 shows real-time sharing of content received and played back by an AV device (for example, a TV receiver) incorporating the ACR
ステップS1において、ACR子端末装置50のACRクライアント52は、自己が対応可能なACR方式を表す情報をACR親端末装置30に通知する。該通知を受けてACR親端末装置30のローカルACR構成管理部36は、ステップS11において、ACR子端末装置50のACRクライアント52が対応可能なACR方式を登録する。なお、該情報の登録は、一度行えばよいので、既に実行済みである場合には、ステップS1およびS11の処理を省略することができる。
In step S <b> 1, the
ステップS21において、放送装置20のコンテンツサーバ21が放送網11を介してコンテンツを放送し、ACR親端末装置30を内蔵するAV装置がそれを受信してユーザが視聴を始めると、ステップS12において、コンテンツ取得部31は、そのコンテンツを取得、分岐してACRクライアント32−1乃至32−M、およびACR変換部34に供給する。
In step S21, when the
ステップS13において、ACRクライアント32は、対応するACRサーバ22にて採用されているACR方式に従い、コンテンツ取得部31より入力されたコンテンツからシグニチャデータ64を抽出する。ステップS14において、ACRクライアント32は、抽出したシグニチャデータ64を含むACRクエリ60を生成し、双方向通信網12を介して対応するACRサーバ22に送信する。
In step S <b> 13, the
このACRクエリ60を受信したACRサーバ22は、ステップS22において、ACRクエリ60に含まれるシグニチャデータ64に基づいて、ACR親端末装置30を内蔵するAV装置にて視聴されているコンテンツを識別する。そして、ステップS23において、その識別結果を含むACRレスポンス70を生成して、対応するACRクライアント32に返信する。なお、ここではコンテンツを識別することができて、図3Aに示されたACRレスポンス70が返信されたものとする。
In step S22, the
このACRレスポンス70を受信したACRクライアント32は、ステップS15において、ACRレスポンス70を解析し、解析結果をアプリケーション実行部33に通知する。また、ACRクライアント32は、受信したACRレスポンス70をACR変換部34に供給する。
In step S15, the
ステップS16において、アプリケーション実行部33は、ACRレスポンス70の解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23に要求する。そして、アプリケーションサーバ23がステップS24として供給するコンテンツを取得、実行する。
In step S <b> 16, the
ステップS17において、ACR変換部34は、ACRクライアント32から入力されたACRレスポンス70を要約してACRレスポンス変換データ90を生成する。そして、ステップS18において、生成したACRレスポンス変換データを包含させた状態の、ACR子端末装置50のACRクライアント52が抽出可能なシグニチャデータとしてのWMを生成する。さらに、コンテンツ取得部31から供給されているコンテンツに該WMを挿入してローカルコンテンツ保持部35に出力、保持させる。
In step S <b> 17, the
一方、ステップS2として、ACR子端末装置50を内蔵するAV装置がリアルタイムで共用するコンテンツを要求すると、この要求に応じ、ステップS19において、ACR親端末装置30のローカルコンテンツ保持部35は、要求された、WMが挿入されているコンテンツを、ACR子端末装置50が内蔵されたAV装置に配信する。配信されたコンテンツは、ACR子端末装置50を内蔵するAV装置によって再生され、これに伴い、コンテンツ取得部51がコンテンツを分岐してACRクライアント52に供給する。
On the other hand, when the AV device incorporating the ACR
ステップS3において、ACR子端末装置50のACRクライアント52は、コンテンツ取得部51により分岐されたコンテンツからシグニチャデータ(いまの場合、WM)を抽出する。ステップS4において、ACRクライアント52は、抽出したWMに包含されているACRレスポンス変換データ90を解析し、解析結果をアプリケーション実行部53に通知する。
In step S <b> 3, the
ステップS5において、アプリケーション実行部53は、ACRレスポンス変換データ90の解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23に要求する。そして、アプリケーションサーバ23がステップS25として供給するコンテンツを取得、実行する。以上で第1の動作例の説明を終了する。
In step S <b> 5, the
以上説明したACRシステム10の第1の動作例によれば、ACR親端末装置30を内蔵するAV装置により視聴していたコンテンツを、リアルタイムでACR子端末装置50を内蔵するAV装置に転送して共有することができる。また、ACR子端末装置50は、共有したコンテンツの識別結果や対応して実行すべきアプリケーションなどの情報を、ACRサーバ22を利用することなく、該コンテンツからシグニチャデータ(WM)を抽出するだけで取得することができる。換言すれば、ACR親端末装置30のACRクライアント32と、ACR子端末装置50のACRクライアント52とが、共通のコンテンツについてACRサーバ22に識別を依頼することがないので、効率的にACRサービスを利用することができる。
According to the first operation example of the ACR system 10 described above, the content viewed by the AV device incorporating the ACR
次に、図7は、ACR親端末装置30を内蔵するAV装置(例えば、TV受像機)が受信、再生したコンテンツを、それ以降のタイミングにおいてACR子端末装置50を内蔵するAV装置(例えば、タブレット型PC)が共用する場合の動作(以下、第2の動作例と称する)を説明するフローチャートである。 Next, FIG. 7 shows an AV apparatus (for example, an AV apparatus (for example, a TV receiver) that incorporates the ACR parent terminal apparatus 30) that receives and reproduces content that is received by the AV apparatus (for example, a TV receiver). It is a flowchart explaining operation | movement (henceforth a 2nd operation example) in case a tablet type PC shares.
ステップS31において、ACR子端末装置50のACRクライアント52は、自己が対応可能なACR方式を表す情報をACR親端末装置30に通知する。該通知を受けてACR親端末装置30のローカルACR構成管理部36は、ステップS41において、ACR子端末装置50のACRクライアント52が対応可能なACR方式を登録する。なお、該情報の登録は、一度行えばよいので、既に実行済みである場合には、ステップS31およびS41の処理を省略することができる。
In step S <b> 31, the
ステップS51において、放送装置20のコンテンツサーバ21が放送網11を介してコンテンツを放送し、ACR親端末装置30を内蔵するAV装置がそれを受信してユーザが視聴を始めると、ステップS42において、コンテンツ取得部31は、そのコンテンツを取得、分岐してACRクライアント32−1乃至32−M、およびACR変換部34に供給する。
In step S51, when the
ステップS43において、ACRクライアント32は、対応するACRサーバ22にて採用されているACR方式に従い、コンテンツ取得部31より入力されたコンテンツからシグニチャデータ64を抽出する。ステップS44において、ACRクライアント32は、抽出したシグニチャデータ64を含むACRクエリ60を生成し、双方向通信網12を介して対応するACRサーバ22に送信する。
In step S43, the
このACRクエリ60を受信したACRサーバ22は、ステップS52において、ACRクエリ60に含まれるシグニチャデータ64に基づいて、ACR親端末装置30を内蔵するAV装置にて視聴されているコンテンツを識別する。そして、ステップS53において、その識別結果を含むACRレスポンス70を生成して、対応するACRクライアント32に返信する。なお、ここではコンテンツを識別することができて、図3Aに示されたACRレスポンス70が返信されたものとする。
In step S52, the
このACRレスポンス70を受信したACRクライアント32は、ステップS45において、ACRレスポンス70を解析し、解析結果をアプリケーション実行部33に通知する。また、ACRクライアント32は、受信したACRレスポンス70をACR変換部34に供給する。
In step S45, the
ステップS46において、アプリケーション実行部33は、ACRレスポンス70の解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23に要求する。そして、アプリケーションサーバ23がステップS54として供給するコンテンツを取得、実行する。
In step S <b> 46, the
ステップS47において、ACR変換部34は、ACRクライアント32から入力されたACRレスポンス70を要約してACRレスポンス変換データ90を生成する。そして、ステップS48において、生成したACRレスポンス変換データを包含させた状態の、ACR子端末装置50のACRクライアント52が抽出可能なシグニチャデータとしてのWMを生成する。さらに、コンテンツ取得部31から供給されているコンテンツに該WMを挿入してローカルコンテンツ保持部35に出力、蓄積させる。なお、このコンテンツはローカルコンテンツサーバ41に蓄積させるようにしてもよい。
In step S <b> 47, the
一方、ステップS32として、ACR子端末装置50を内蔵するAV装置がACR親端末装置30に蓄積されているコンテンツの共用を要求すると、この要求に応じ、ステップS49において、ACR親端末装置30のローカルコンテンツ保持部35は、要求された、WMが挿入されているコンテンツを、ACR子端末装置50が内蔵されたAV装置に配信する。配信されたコンテンツは、ACR子端末装置50を内蔵するAV装置によって再生され、これに伴い、コンテンツ取得部51がコンテンツを分岐してACRクライアント52に供給する。
On the other hand, when the AV device incorporating the ACR
ステップS33において、ACR子端末装置50のACRクライアント52は、コンテンツ取得部51により分岐されたコンテンツからシグニチャデータ(いまの場合、WM)を抽出する。ステップS34において、ACRクライアント52は、抽出したWMに包含されているACRレスポンス変換データ90を解析し、解析結果をアプリケーション実行部53に通知する。
In step S <b> 33, the
ステップS35において、アプリケーション実行部53は、ACRレスポンス変換データ90の解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23に要求する。そして、アプリケーションサーバ23がステップS55として供給するコンテンツを取得、実行する。以上で第2の動作例の説明を終了する。
In step S <b> 35, the
以上説明したACRシステム10の第2の動作例によれば、ACR親端末装置30を内蔵するAV装置により視聴していたコンテンツを、その以降のタイミングにおいてACR子端末装置50を内蔵するAV装置に転送して共有することができる。また、ACR子端末装置50は、共有したコンテンツの識別結果や対応して実行すべきアプリケーションなどの情報を、ACRサーバ22を利用することなく、該コンテンツからシグニチャデータ(WM)を抽出するだけで取得することができる。換言すれば、ACR親端末装置30のACRクライアント32と、ACR子端末装置50のACRクライアント52とが、共通のコンテンツについてACRサーバ22に識別を依頼することがないので、効率的にACRサービスを利用することができる
According to the second operation example of the ACR system 10 described above, the content viewed by the AV device incorporating the ACR
次に、図8は、ACR親端末装置30を内蔵するAV装置(例えば、ビデオレコーダ)が受信、録画したコンテンツを、それ以降のタイミングにおいてACR子端末装置50を内蔵するAV装置(例えば、タブレット型PC)が共用する場合の動作(以下、第3の動作例と称する)を説明するフローチャートである。
Next, FIG. 8 shows an AV device (for example, a tablet) in which the content received and recorded by the AV device (for example, a video recorder) incorporating the ACR
ステップS61において、ACR子端末装置50のACRクライアント52は、自己が対応可能なACR方式を表す情報をACR親端末装置30に通知する。該通知を受けてACR親端末装置30のローカルACR構成管理部36は、ステップS71において、ACR子端末装置50のACRクライアント52が対応可能なACR方式を登録する。なお、該情報の登録は、一度行えばよいので、既に実行済みである場合には、ステップS61およびS71の処理を省略することができる。
In step S <b> 61, the
ステップS81において、放送装置20のコンテンツサーバ21が放送網11を介してコンテンツを放送し、ACR親端末装置30を内蔵するAV装置がそれを受信して録画を始めると、ステップS72において、コンテンツ取得部31は、そのコンテンツを取得、分岐してACRクライアント32−1乃至32−M、およびACR変換部34に供給する。
In step S81, when the
ステップS73において、ACRクライアント32は、対応するACRサーバ22にて採用されているACR方式に従い、コンテンツ取得部31より入力されたコンテンツからシグニチャデータ64を抽出する。ステップS74において、ACRクライアント32は、抽出したシグニチャデータ64を含むACRクエリ60を生成し、双方向通信網12を介して対応するACRサーバ22に送信する。
In step S <b> 73, the
このACRクエリ60を受信したACRサーバ22は、ステップS82において、ACRクエリ60に含まれるシグニチャデータ64に基づいて、ACR親端末装置30を内蔵するAV装置にて録画されているコンテンツを識別する。そして、ステップS83において、その識別結果を含むACRレスポンス70を生成して、対応するACRクライアント32に返信する。なお、ここではコンテンツを識別することができて、図3Aに示されたACRレスポンス70が返信されたものとする。
In step S82, the
このACRレスポンス70を受信したACRクライアント32は、ステップS75において、ACRレスポンス70を解析し、解析結果をアプリケーション実行部33に通知する。また、ACRクライアント32は、受信したACRレスポンス70をACR変換部34に供給する。
In step S75, the
ステップS76において、ACR変換部34は、ACRクライアント32から入力されたACRレスポンス70を要約してACRレスポンス変換データ90を生成する。そして、ステップS77において、生成したACRレスポンス変換データを包含させた状態の、ACR子端末装置50のACRクライアント52が抽出可能なシグニチャデータとしてのWMを生成する。さらに、コンテンツ取得部31から供給されているコンテンツに該WMを挿入してローカルコンテンツ保持部35に出力、蓄積させる。なお、このコンテンツはローカルコンテンツサーバ41に蓄積させるようにしてもよい。また、本実施の形態では、ACR親端末装置30を内蔵するAV装置(例えば、ビデオレコーダ)が録画する分とは別途、WMを挿入したコンテンツを蓄積するようにしたが、録画するコンテンツにWMを挿入するようにしてもよい。
In step S <b> 76, the
一方、ステップS62として、ACR子端末装置50を内蔵するAV装置がACR親端末装置30に蓄積されているコンテンツの共用を要求すると、この要求に応じ、ステップS78において、ACR親端末装置30のローカルコンテンツ保持部35は、要求された、WMが挿入されているコンテンツを、ACR子端末装置50が内蔵されたAV装置に配信する。配信されたコンテンツは、ACR子端末装置50を内蔵するAV装置によって再生され、これに伴い、コンテンツ取得部51がコンテンツを分岐してACRクライアント52に供給する。
On the other hand, when the AV device incorporating the ACR
ステップS63において、ACR子端末装置50のACRクライアント52は、コンテンツ取得部51により分岐されたコンテンツからシグニチャデータ(いまの場合、WM)を抽出する。ステップS64において、ACRクライアント52は、抽出したWMに包含されているACRレスポンス変換データ90を解析し、解析結果をアプリケーション実行部53に通知する。
In step S <b> 63, the
ステップS65において、アプリケーション実行部53は、ACRレスポンス変換データ90の解析結果に基づき、視聴中のコンテンツに対応するアプリケーションを、双方向通信網12を介してアプリケーションサーバ23に要求する。そして、アプリケーションサーバ23がステップS84として供給するコンテンツを取得、実行する。以上で第3の動作例の説明を終了する。
In step S <b> 65, the
以上説明したACRシステム10の第3の動作例によれば、ACR親端末装置30を内蔵するAV装置により録画されたコンテンツを、その以降のタイミングにおいてACR子端末装置50を内蔵するAV装置に転送して共有することができる。また、ACR子端末装置50は、共有したコンテンツの識別結果や対応して実行すべきアプリケーションなどの情報を、ACRサーバ22を利用することなく、該コンテンツからシグニチャデータ(WM)を抽出するだけで取得することができる。換言すれば、ACR親端末装置30のACRクライアント32と、ACR子端末装置50のACRクライアント52とが、共通のコンテンツについてACRサーバ22に識別を依頼することがないので、効率的にACRサービスを利用することができる
According to the third operation example of the ACR system 10 described above, the content recorded by the AV device incorporating the ACR
ところで、上述した一連の処理を実行する放送装置20、ACR親端末装置30、およびACR子端末装置50は、それぞれをハードウェアにより構成する他、コンピュータがソフトウェアを実行することにより実現することもできる。このコンピュータには、専用のハードウェアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
By the way, the
図9は、上述したコンピュータのハードウェアの構成例を示すブロック図である。 FIG. 9 is a block diagram illustrating an exemplary hardware configuration of the computer described above.
このコンピュータ100において、CPU(Central Processing Unit)101,ROM(Read Only Memory)102,RAM(Random Access Memory)103は、バス104により相互に接続されている。
In this computer 100, a CPU (Central Processing Unit) 101, a ROM (Read Only Memory) 102, and a RAM (Random Access Memory) 103 are connected to each other by a
バス104には、さらに、入出力インタフェース105が接続されている。入出力インタフェース105には、入力部106、出力部107、記憶部108、通信部109、およびドライブ110が接続されている。
An input /
入力部106は、キーボード、マウス、マイクロフォンなどよりなる。出力部107は、ディスプレイ、スピーカなどよりなる。記憶部108は、ハードディスクや不揮発性のメモリなどよりなる。通信部109は、ネットワークインタフェースなどよりなる。ドライブ110は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア111を駆動する。
The
以上のように構成されるコンピュータ100では、CPU101が、例えば、記憶部108に記憶されているプログラムを、入出力インタフェース105およびバス104を介して、RAM103にロードして実行することにより、上述した一連の処理が行われる。
In the computer 100 configured as described above, for example, the
コンピュータ100(CPU101)が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア111に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
The program executed by the computer 100 (CPU 101) can be provided by being recorded on the
コンピュータ100では、プログラムは、リムーバブルメディア111をドライブ110に装着することにより、入出力インタフェース105を介して、記憶部108にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部109で受信し、記憶部108にインストールすることができる。その他、プログラムは、ROM102や記憶部108に、あらかじめインストールしておくことができる。
In the computer 100, the program can be installed in the
なお、コンピュータ100が実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであってもよい。 Note that the program executed by the computer 100 may be a program that is processed in time series in the order described in this specification, or a necessary timing such as when a call is made in parallel. It may be a program in which processing is performed.
なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。 The embodiment of the present disclosure is not limited to the above-described embodiment, and various modifications can be made without departing from the gist of the present disclosure.
10 ACRシステム, 11 放送網, 12 双方向通信網, 20 送信装置, 21 コンテンツサーバ, 22 ACRサーバ, 23 アプリケーションサーバ, 24 メタデータサーバ, 30 ACR親端末装置, 31 コンテンツ取得部, 32 ACRクライアント, 33 アプリケーション実行部, 34 ACR変換部, 35 ローカルコンテンツ保持部, ローカルACR構成管理部, 40 ホームネットワーク, 41 ローカルコンテンツサーバ, 50 ACR子端末装置, 51 コンテンツ取得部, 52 ACRクライアント, 53 アプリケーション実行部, 60 ACRクエリ, 70 ACRレスポンス, 90 ACRレスポンス変換データ, 100 コンピュータ, 101 CPU 10 ACR system, 11 broadcast network, 12 bidirectional communication network, 20 transmission device, 21 content server, 22 ACR server, 23 application server, 24 metadata server, 30 ACR parent terminal device, 31 content acquisition unit, 32 ACR client, 33 application execution unit, 34 ACR conversion unit, 35 local content holding unit, local ACR configuration management unit, 40 home network, 41 local content server, 50 ACR slave terminal device, 51 content acquisition unit, 52 ACR client, 53 application execution unit , 60 ACR query, 70 ACR response, 90 ACR response conversion data, 100 computer, 101 CPU
Claims (14)
コンテンツを取得する取得部と、
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給部と
を備える情報処理装置。 In an information processing apparatus that shares content with other information processing apparatuses via a network,
An acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
The response is converted into response conversion data, second signature data that can be extracted by the other information processing apparatus in a state including the response conversion data is generated, and the second signature data is generated in the acquired content. A signature data insertion section for inserting data;
An information processing apparatus comprising: a supply unit configured to supply the content in which the second signature data is inserted to the other information processing apparatus.
前記シグニチャデータ挿入部は、前記レスポンスに含まれる前記関連メタデータを少なくとも含む前記レスポンス変換データを生成し、前記レスポンス変換データを包含させた状態で前記第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入する
請求項1に記載の情報処理装置。 The response further includes related metadata including information representing an application to be executed in conjunction with the progress of the content,
The signature data insertion unit generates the response conversion data including at least the related metadata included in the response, and generates and acquires the second signature data in a state including the response conversion data. The information processing apparatus according to claim 1, wherein the second signature data is inserted into the content.
さらに備える請求項2に記載の情報処理装置。 The information processing apparatus according to claim 2, further comprising a management unit that manages types of signature data that can be extracted by the other information processing apparatus.
さらに備える請求項2に記載の情報処理装置。 The information processing apparatus according to claim 2, further comprising: an execution unit that acquires and executes the application to be executed in conjunction with the progress of the content based on the related metadata included in the response.
前記第2のシグニチャデータはWMである
請求項2に記載の情報処理装置。 The first signature data is FP;
The information processing apparatus according to claim 2, wherein the second signature data is a WM.
請求項2に記載の情報処理装置。 The information processing apparatus according to claim 2, wherein the first and second signature data are WM.
前記情報処理装置による、
コンテンツを取得する取得ステップと、
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼ステップと、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入ステップと、
前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給ステップと
を含む情報処理方法。 In an information processing method of an information processing apparatus that shares content with other information processing apparatuses via a network,
According to the information processing apparatus,
An acquisition step of acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification request step for obtaining a response including the result;
The response is converted into response conversion data, second signature data that can be extracted by the other information processing apparatus in a state including the response conversion data is generated, and the second signature data is generated in the acquired content. A signature data insertion step for inserting data;
And a supplying step of supplying the content into which the second signature data is inserted to the other information processing apparatus.
コンテンツを取得する取得部と、
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記他の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記他の情報処理装置に供給する供給部と
して機能させるプログラム。 A computer that shares content with other information processing devices via a network
An acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
The response is converted into response conversion data, second signature data that can be extracted by the other information processing apparatus in a state including the response conversion data is generated, and the second signature data is generated in the acquired content. A signature data insertion section for inserting data;
A program causing the content into which the second signature data has been inserted to function as a supply unit that supplies the content to the other information processing apparatus.
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生する情報処理装置において、
前記コンテンツ供給装置から供給されるコンテンツを取得する取得部と、
取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、
抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行部と
を備える情報処理装置。 An acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
Converting the response into response conversion data, generating second signature data that can be extracted by the information processing apparatus in a state including the response conversion data, and inserting the second signature data into the acquired content Signature data insertion part to
In an information processing apparatus for playing back content supplied from a content supply device comprising: a supply unit that supplies the content into which the second signature data has been inserted to the information processing device;
An acquisition unit for acquiring content supplied from the content supply device;
An extractor for extracting the second signature data from the acquired content;
Based on the response conversion data contained in the extracted second signature data, the information processing apparatus comprising an execution unit for executing a predetermined process.
前記実行部は、前記関連メタデータに基づいて前記アプリケーションを取得して実行する
請求項9に記載の情報処理装置。 The response conversion data includes related metadata including information representing an application to be executed in conjunction with the progress of the content,
The information processing apparatus according to claim 9, wherein the execution unit acquires and executes the application based on the related metadata.
請求項10に記載の情報処理装置。 The information processing apparatus according to claim 10, wherein the second signature data is a WM.
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生する情報処理装置の情報処理方法において、
前記情報処理装置による、
前記コンテンツ供給装置から供給されるコンテンツを取得する取得ステップと、
取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出ステップと、
抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行ステップと
を含む情報処理方法。 An acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
Converting the response into response conversion data, generating second signature data that can be extracted by the information processing apparatus in a state including the response conversion data, and inserting the second signature data into the acquired content Signature data insertion part to
In an information processing method of an information processing apparatus for playing back content supplied from a content supply device comprising: a supply unit that supplies the content into which the second signature data is inserted to the information processing device;
According to the information processing apparatus,
An acquisition step of acquiring content supplied from the content supply device;
An extraction step of extracting the second signature data from the acquired content;
Based on the response conversion data contained in the extracted second signature data, information processing method and an execution step of executing a predetermined process.
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記情報処理装置に供給する供給部とを備えるコンテンツ供給装置から供給されるコンテンツを再生するコンピュータを、
前記コンテンツ供給装置から供給されるコンテンツを取得する取得部と、
取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、
抽出された前記第2のシグニチャデータに包含されている前記レスポンス変換データに基づき、所定の処理を実行する実行部と
して機能させるプログラム。 An acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
Converting the response into response conversion data, generating second signature data that can be extracted by the information processing apparatus in a state including the response conversion data, and inserting the second signature data into the acquired content Signature data insertion part to
A computer that reproduces content supplied from a content supply device comprising: a supply unit that supplies the content with the second signature data inserted to the information processing device ;
An acquisition unit for acquiring content supplied from the content supply device;
An extractor for extracting the second signature data from the acquired content;
Based on the response conversion data contained in the extracted second signature data, a program to function as the execution unit for executing a predetermined process.
前記第1の情報処理装置は、
コンテンツを取得する第1の取得部と、
取得された前記コンテンツから第1のシグニチャデータを抽出し、前記第1のシグニチャデータを含むクエリをコンテンツ識別サーバに送信し、前記クエリに応じて前記コンテンツ識別サーバから返信される、前記コンテンツの識別結果を含むレスポンスを取得する識別依頼部と、
前記レスポンスをレスポンス変換データに変換し、前記レスポンス変換データを包含させた状態で前記第2の情報処理装置が抽出可能な第2のシグニチャデータを生成し、取得された前記コンテンツに前記第2のシグニチャデータを挿入するシグニチャデータ挿入部と、
前記第2のシグニチャデータが挿入された前記コンテンツを前記第2の情報処理装置に供給する供給部と
を備え、
前記第2の情報処理装置は、
前記第1の情報処理装置から供給されるコンテンツを取得する第2の取得部と、
取得された前記コンテンツから前記第2のシグニチャデータを抽出する抽出部と、
抽出された前記第2のシグニチャデータに包含されているレスポンス変換データに基づき、所定の処理を実行する実行部と
を備える
コンテンツ共有システム。 In a content sharing system including a first information processing device and a second information processing device,
The first information processing apparatus includes:
A first acquisition unit for acquiring content;
First signature data is extracted from the acquired content, a query including the first signature data is transmitted to a content identification server, and the content identification server is returned in response to the query. An identification requesting unit for obtaining a response including the result;
The response is converted into response conversion data, second signature data that can be extracted by the second information processing apparatus is generated in a state in which the response conversion data is included, and the second content data is generated in the acquired content. A signature data insertion unit for inserting signature data;
A supply unit configured to supply the content in which the second signature data is inserted to the second information processing apparatus;
The second information processing apparatus
A second acquisition unit for acquiring content supplied from the first information processing apparatus;
An extractor for extracting the second signature data from the acquired content;
A content sharing system comprising: an execution unit that executes predetermined processing based on response conversion data included in the extracted second signature data.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012195765A JP6023518B2 (en) | 2012-09-06 | 2012-09-06 | Information processing apparatus, information processing method, program, and content sharing system |
BR112015004388A BR112015004388A2 (en) | 2012-09-06 | 2013-08-26 | apparatus and method of processing information, program, and content sharing system. |
EP13835708.2A EP2894868B1 (en) | 2012-09-06 | 2013-08-26 | Information processing device, information processing method, program, and content sharing system |
US14/424,666 US10073901B2 (en) | 2012-09-06 | 2013-08-26 | Information processing apparatus, information processing method, program, and content sharing system |
PCT/JP2013/072642 WO2014038413A1 (en) | 2012-09-06 | 2013-08-26 | Information processing device, information processing method, program, and content sharing system |
RU2015106888A RU2628773C2 (en) | 2012-09-06 | 2013-08-26 | Information processing device, method of information processing, program and system of joint use of content |
CN201380044789.4A CN104604244B (en) | 2012-09-06 | 2013-08-26 | Information processing equipment, information processing method, program and content share system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012195765A JP6023518B2 (en) | 2012-09-06 | 2012-09-06 | Information processing apparatus, information processing method, program, and content sharing system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014053711A JP2014053711A (en) | 2014-03-20 |
JP6023518B2 true JP6023518B2 (en) | 2016-11-09 |
Family
ID=50237025
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012195765A Expired - Fee Related JP6023518B2 (en) | 2012-09-06 | 2012-09-06 | Information processing apparatus, information processing method, program, and content sharing system |
Country Status (7)
Country | Link |
---|---|
US (1) | US10073901B2 (en) |
EP (1) | EP2894868B1 (en) |
JP (1) | JP6023518B2 (en) |
CN (1) | CN104604244B (en) |
BR (1) | BR112015004388A2 (en) |
RU (1) | RU2628773C2 (en) |
WO (1) | WO2014038413A1 (en) |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL139412A0 (en) * | 1998-05-08 | 2001-11-25 | Qualcomm Inc | Apparatus and method for distribution of high quality image and audio programs to remote locations |
WO2002062009A1 (en) | 2001-01-30 | 2002-08-08 | Digimarc Corporation | Efficient interactive tv |
JP4305004B2 (en) * | 2003-02-28 | 2009-07-29 | ソニー株式会社 | Information processing apparatus, content information processing method, and computer program |
JP2006005897A (en) * | 2004-05-19 | 2006-01-05 | Dowango:Kk | Terminal device, content distribution system, information output method, information output program |
JP4655534B2 (en) | 2004-08-04 | 2011-03-23 | ソニー株式会社 | Terminal device, data processing method, program, and recording medium |
DE102005056551A1 (en) | 2004-11-25 | 2006-06-01 | Wittkötter, Erland, Dr. | Equipment for request, provision, management and transmission of additional data to video, consisting of multiple of video pictures, by which video users obtain content and concept related link data to further web information |
DE102005056550A1 (en) * | 2004-11-25 | 2006-06-01 | Wittkötter, Erland, Dr. | Appliance for requesting, transmitting, receiving and presenting by subscriber of data deposited by server by context, time index and/or identifier data, transmitted to server, for which additional data can be stored and recalled |
US20070124796A1 (en) | 2004-11-25 | 2007-05-31 | Erland Wittkotter | Appliance and method for client-sided requesting and receiving of information |
JP2006270634A (en) * | 2005-03-24 | 2006-10-05 | Victor Co Of Japan Ltd | Digital broadcast synchronizing reproducing apparatus, stream synchronization reproducing apparatus, and stream synchronization reproducing system |
US20060294383A1 (en) * | 2005-06-28 | 2006-12-28 | Paula Austel | Secure data communications in web services |
CN100485680C (en) * | 2006-03-03 | 2009-05-06 | 摩达网股份有限公司 | System and method for searching multi-medium content in Internet |
JP2008263502A (en) * | 2007-04-13 | 2008-10-30 | Victor Co Of Japan Ltd | Recording and reproducing device and recording and reproduction system |
US8229227B2 (en) * | 2007-06-18 | 2012-07-24 | Zeitera, Llc | Methods and apparatus for providing a scalable identification of digital video sequences |
US8195689B2 (en) * | 2009-06-10 | 2012-06-05 | Zeitera, Llc | Media fingerprinting and identification system |
JP4735700B2 (en) * | 2008-10-08 | 2011-07-27 | ソニー株式会社 | Receiving device, receiving method, server device |
JP4788790B2 (en) * | 2009-02-27 | 2011-10-05 | ソニー株式会社 | Content reproduction apparatus, content reproduction method, program, and content reproduction system |
JP5143776B2 (en) * | 2009-03-31 | 2013-02-13 | 株式会社ビデオリサーチ | Viewing channel determination method and system |
US20120113218A1 (en) * | 2010-10-01 | 2012-05-10 | Manabu Sasamoto | Receiving apparatus and receiving method |
CN103229513B (en) * | 2010-11-24 | 2017-06-06 | Lg电子株式会社 | Video display devices and its control method |
US20120167133A1 (en) * | 2010-12-23 | 2012-06-28 | Carroll John W | Dynamic content insertion using content signatures |
JP5668512B2 (en) * | 2011-02-15 | 2015-02-12 | ソニー株式会社 | Information processing apparatus and information processing method |
US9380356B2 (en) * | 2011-04-12 | 2016-06-28 | The Nielsen Company (Us), Llc | Methods and apparatus to generate a tag for media content |
KR101799443B1 (en) * | 2011-05-02 | 2017-11-20 | 삼성전자주식회사 | Method for surveying watching of video content, Broadcasting receiving apparatus and Server thereof |
-
2012
- 2012-09-06 JP JP2012195765A patent/JP6023518B2/en not_active Expired - Fee Related
-
2013
- 2013-08-26 BR BR112015004388A patent/BR112015004388A2/en not_active Application Discontinuation
- 2013-08-26 WO PCT/JP2013/072642 patent/WO2014038413A1/en active Application Filing
- 2013-08-26 CN CN201380044789.4A patent/CN104604244B/en active Active
- 2013-08-26 RU RU2015106888A patent/RU2628773C2/en not_active IP Right Cessation
- 2013-08-26 US US14/424,666 patent/US10073901B2/en active Active
- 2013-08-26 EP EP13835708.2A patent/EP2894868B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP2894868B1 (en) | 2019-08-14 |
EP2894868A1 (en) | 2015-07-15 |
US20150254317A1 (en) | 2015-09-10 |
RU2015106888A (en) | 2016-09-20 |
RU2628773C2 (en) | 2017-08-22 |
CN104604244A (en) | 2015-05-06 |
CN104604244B (en) | 2019-01-18 |
WO2014038413A1 (en) | 2014-03-13 |
EP2894868A4 (en) | 2016-03-30 |
JP2014053711A (en) | 2014-03-20 |
US10073901B2 (en) | 2018-09-11 |
BR112015004388A2 (en) | 2017-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6219269B2 (en) | Terminal device, information processing method, program, and linked application supply system | |
JP6219275B2 (en) | Terminal device, information processing method, program, and linked application supply system | |
KR102233783B1 (en) | Information processing device, information processing method, and program | |
JP6383658B2 (en) | Information processing apparatus, information processing method, and program | |
KR102110623B1 (en) | Transmission device, information processing method, program, reception device, and application linking system | |
KR102019286B1 (en) | Terminal device, server device, information processing method, program, and collaborative application supply system | |
US20170286409A1 (en) | Terminal device, relay device, information processing method, program, and content identification system | |
WO2014010469A1 (en) | Reception device, information processing method, program, transmission device and application linking system | |
JP6023518B2 (en) | Information processing apparatus, information processing method, program, and content sharing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150804 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160628 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20160726 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160802 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160915 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161007 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6023518 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |