WO2013021824A1 - 受信装置、受信方法、プログラム、及び情報処理システム - Google Patents

受信装置、受信方法、プログラム、及び情報処理システム Download PDF

Info

Publication number
WO2013021824A1
WO2013021824A1 PCT/JP2012/068872 JP2012068872W WO2013021824A1 WO 2013021824 A1 WO2013021824 A1 WO 2013021824A1 JP 2012068872 W JP2012068872 W JP 2012068872W WO 2013021824 A1 WO2013021824 A1 WO 2013021824A1
Authority
WO
WIPO (PCT)
Prior art keywords
command
content
receiving device
application
information processing
Prior art date
Application number
PCT/JP2012/068872
Other languages
English (en)
French (fr)
Inventor
北里 直久
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to EP12822427.6A priority Critical patent/EP2741497A4/en
Priority to RU2014103001/07A priority patent/RU2594000C2/ru
Priority to MX2014001202A priority patent/MX2014001202A/es
Priority to CA2843382A priority patent/CA2843382C/en
Priority to JP2013527954A priority patent/JP6208012B2/ja
Priority to KR1020147001991A priority patent/KR102060449B1/ko
Priority to CN201280038061.6A priority patent/CN103718564B/zh
Publication of WO2013021824A1 publication Critical patent/WO2013021824A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/56Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/654Transmission by server directed to the client
    • H04N21/6543Transmission by server directed to the client for forcing some client operations, e.g. recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6582Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/30Aspects of broadcast communication characterised by the use of a return channel, e.g. for collecting users' opinions, for returning broadcast space/time information or for requesting data
    • H04H2201/37Aspects of broadcast communication characterised by the use of a return channel, e.g. for collecting users' opinions, for returning broadcast space/time information or for requesting data via a different channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/37Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying segments of broadcast information, e.g. scenes or extracting programme ID
    • H04H60/372Programme
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback

Definitions

  • the present technology relates to a receiving device, a receiving method, a program, and an information processing system, and in particular, a receiving device, a receiving method, and a program that can provide an application program linked to a digital television program using the ACR technology. And an information processing system.
  • a hybrid broadcast / communication service is realized by transmitting a control signal synchronized with the digital television broadcast signal.
  • the current situation is that it is difficult to realize the service unless the CATV network and satellite broadcasting network facilities and dedicated terminals are updated.
  • ACR Automatic Content Recognition
  • a digital television program can be identified using ACR technology and an application program corresponding to the identified program can be provided, a hybrid service of broadcasting and communication can be realized.
  • a technical method for providing an application program linked to a digital television program using the ACR technology has not been established.
  • This technology has been made in view of such a situation, and is intended to provide an application program linked to a digital television program using the ACR technology.
  • a receiving apparatus includes a receiving unit that receives AV content, a feature amount extracting unit that extracts feature amounts from the received AV content data, and an ACR (Automatic Content) from the extracted feature amounts
  • a recognition result acquisition unit that acquires the identification result of the AV content that is identified using a recognition technology, and controls the operation of an application program that is executed in conjunction with the AV content according to the acquired identification result.
  • a command acquisition unit that acquires a command for the control, and a control unit that controls the operation of the application program according to the acquired command.
  • the command indicates any one of acquisition or registration, acquisition or activation, event firing, interruption, or termination of the application program, and the control unit acquires or registers the application program according to each command. Controls event firing, suspension, or termination of the application program being registered, acquired, or started, or being executed.
  • the command includes time information indicating the time at which the command is executed, and the control unit executes the command according to the time information.
  • the time information is information for executing the command when a predetermined time is reached regardless of the progress of the AV content, or a specific time determined in conjunction with the progress of the AV content. This is information for executing the command when time elapses.
  • the control unit acquires the application program when the command execution time comes after the application program is acquired. Start up.
  • the feature amount extraction unit extracts the feature amount from one or both of a video signal and an audio signal of the AV content.
  • the receiving device may be an independent device or an internal block constituting one device.
  • the reception method or program according to the first aspect of the present technology is a reception method or program corresponding to the reception device according to the first aspect described above.
  • AV content is received, feature amounts are extracted from the data of the received AV content, and ACR technology is used from the extracted feature amounts.
  • An identification result of the AV content to be identified is acquired, and a command for controlling the operation of the application program executed in conjunction with the AV content is acquired according to the acquired identification result, and according to the acquired command Thus, the operation of the application program is controlled.
  • An information processing system is an information processing system including a reception device, a first information processing device, a second information processing device, and a third information processing device.
  • a reception unit that receives AV content, a feature amount extraction unit that extracts a feature amount from the received AV content data, and transmits the extracted feature amount to the first information processing apparatus.
  • An identification result acquisition unit that acquires an identification result of the AV content identified from the feature amount by using an ACR technique in the information processing apparatus; and the identification result acquired from the first information processing apparatus 2 to control the operation of the application program executed in conjunction with the AV content according to the identification result from the second information processing device.
  • the first information processing apparatus includes a content identification unit that identifies the AV content from the feature amount using an ACR technique in response to an inquiry from the reception apparatus, and the second information processing apparatus
  • the third information processing device includes a command providing unit that provides the command according to the identification result, and the third information processing device responds to the command from the receiving device.
  • An application providing unit that provides the application program is provided.
  • the reception device receives the AV content, extracts the feature amount from the data of the received AV content, and uses the extracted feature amount as the first information processing device. And the identification result of the AV content identified by the first information processing apparatus using the ACR technology is acquired from the feature amount, and the identification result acquired from the first information processing apparatus is used as the second information processing. A command for controlling the operation of the application program executed in conjunction with the AV content according to the identification result is acquired from the second information processing apparatus.
  • the operation of the application program acquired from the third information processing apparatus is controlled according to the acquired command, and the first information processing apparatus
  • the AV content is identified from the feature amount using the ACR technology
  • the second information processing apparatus provides a command according to the identification result in response to the inquiry from the receiving apparatus.
  • the information processing apparatus provides an application program corresponding to the command in response to an inquiry from the receiving apparatus.
  • an application program linked to a digital television program can be provided using the ACR technology.
  • FIG. 1 shows a broadcast system 1 according to this embodiment.
  • the broadcasting system 1 includes a broadcasting device 11, a receiving device 12, an ACR server 13, a command server 14, and an application server 15.
  • the receiving device 12, the ACR server 13, the command server 14, and the application server 15 are connected to each other via the Internet 16.
  • the broadcasting device 11 is configured to transmit (broadcast) a digital television broadcast signal of AV content corresponding to a digital television program.
  • the receiving device 12 receives the digital television broadcast signal transmitted from the broadcasting device 11 and acquires video and audio of the digital television program.
  • the receiving device 12 outputs the acquired video to a monitor and outputs sound to a speaker.
  • the receiving device 12 may exist as a single unit, or may be incorporated in, for example, a television receiver or a video recorder. The detailed configuration of the receiving device 12 will be described later with reference to FIG.
  • the receiving device 12 periodically accesses the ACR server 13 via the Internet 16 and inquires about the identification result of the digital television program. At this time, a feature amount extracted from the video signal and audio signal of the digital television program (hereinafter also referred to as “fingerprint information”) is transmitted to the ACR server 13.
  • the ACR server 13 has a database in which feature amounts extracted from video signals and audio signals of arbitrary AV content are registered, and in response to an inquiry from an arbitrary terminal device connected to the Internet 16, AV content is identified using ACR (Automatic Content Recognition) technology.
  • the ACR server 13 compares the fingerprint information from the receiving device 12 with the database to identify the digital television program, and transmits the identification result to the receiving device 12 via the Internet 16.
  • the receiving device 12 accesses the command server 14 via the Internet 16 in accordance with the identification result received from the ACR server 13 and executes a data broadcast application that is executed in conjunction with the digital television program (AV content).
  • AV content digital television program
  • a command for controlling the operation of a program (hereinafter referred to as a data broadcasting application) is acquired.
  • the command server 14 manages a command for controlling the operation of the data broadcasting application, and transmits the command to the receiving device 12 via the Internet 16 in response to an inquiry from the receiving device 12.
  • the receiving device 12 controls the operation of the data broadcasting application according to the command received from the command server 14. In addition, the receiving device 12 accesses the application server 15 via the Internet 16 according to the command received from the command server 14, and acquires the data broadcasting application.
  • the application server 15 manages a data broadcasting application that is executed in conjunction with a digital television program (AV content) broadcast by the broadcasting device 11, and for data broadcasting in response to an inquiry from the receiving device 12.
  • the application is transmitted to the receiving device 12 via the Internet 16.
  • Broadcast system 1 is configured as described above.
  • FIG. 2 shows a configuration example of the receiving device 12 of FIG.
  • the receiving device 12 includes a tuner 51, a demultiplexing unit 52, an audio decoder 53, an audio output unit 54, a video decoder 55, a video output unit 56, a fingerprint extraction unit 57, a communication I / F 58, a clock synchronization unit 59, and a command analysis unit. 60, a control unit 61, a memory 62, an operation unit 63, a cache memory 65, and an application memory 66.
  • the tuner 51 receives and demodulates a digital television broadcast signal corresponding to the channel selected by the user, and outputs the resulting transport stream (Transport Stream, hereinafter referred to as TS) to the demultiplexing unit 52. .
  • the demultiplexing unit 52 separates the TS input from the tuner 51 into an audio encoded signal and a video encoded signal, and outputs them to the audio decoder 53 and the video decoder 55, respectively. Further, the demultiplexing unit 52 extracts PCR (Program Clock Reference) from the TS packets constituting the TS and supplies the extracted PCR to the clock synchronization unit 59.
  • PCR Program Clock Reference
  • the audio decoder 53 decodes the input audio encoded signal and outputs the resulting audio signal to the audio output unit 54 and the fingerprint extraction unit 57.
  • the audio output unit 54 outputs the input audio signal to a subsequent speaker.
  • the video decoder 55 decodes the input video encoded signal and outputs the resulting video signal to the video output unit 56 and the fingerprint extraction unit 57.
  • the video output unit 56 outputs the video signal input from the video decoder 55 to a subsequent monitor.
  • the fingerprint extraction unit 57 is supplied with the audio signal from the audio decoder 53 and the video signal from the video decoder 55.
  • the fingerprint extraction unit 57 extracts a feature amount from one or both of an audio signal and a video signal, and supplies the extracted feature amount to the communication I / F 58 as fingerprint information.
  • the communication I / F 58 transmits the fingerprint information from the fingerprint extraction unit 57 to the ACR server 13 via the Internet 16. Also, the communication I / F 58 receives the identification result of the digital television program transmitted from the ACR server 13 and supplies it to the control unit 61.
  • the control unit 61 controls the operation of each unit of the receiving device 12 by executing a control program stored in the memory 62 in advance.
  • the memory 62 stores in advance a control program executed by the control unit 61.
  • This control program can be updated based on digital television broadcast signals or update data acquired via the Internet 16.
  • the operation unit 63 receives various operations from the user and notifies the control unit 61 of operation signals corresponding thereto.
  • control unit 61 controls the communication I / F 58 according to the identification result from the communication I / F 58, accesses the command server 14 via the Internet 16, and inquires about the command.
  • the communication I / F 58 receives a command transmitted from the command server 14 and supplies it to the command analysis unit 60.
  • the command analysis unit 60 analyzes the command from the communication I / F 58 and supplies the analysis result to the control unit 61.
  • the clock synchronization unit 59 is configured by, for example, a PLL (Phase Locked Loop), and the system clock corresponding to the PCR from the demultiplexing unit 52 is transmitted to each unit of the receiving device 12 such as the audio decoder 53, the video decoder 55, and the control unit 61. To supply. Thereby, since the receiving device 12 can obtain a system clock synchronized with the broadcasting device 11, it can reproduce an audio signal and a video signal.
  • PLL Phase Locked Loop
  • control unit 61 Based on the analysis result from the command analysis unit 60, the control unit 61 acquires or registers, acquires or activates (executes), broadcasts, interrupts, or ends the data broadcasting application linked to the digital television program (AV content). Control etc.
  • the control unit 61 controls the execution timing of the command based on the analysis result from the command analysis unit 60 based on the system clock from the clock synchronization unit 59.
  • the application engine 64 controls the communication I / F 58 according to the control from the control unit 61, accesses the application server 15 via the Internet 16, and requests a data broadcast application.
  • the communication I / F 58 receives the data broadcast application transmitted from the application server 15 and causes the cache memory 65 to hold it.
  • the application engine 64 reads out and executes the data broadcasting application held in the cache memory 65 in accordance with the control from the control unit 61.
  • the video signal of the data broadcasting application being executed is supplied to the video output unit 56.
  • the video output unit 56 synthesizes the video signal input from the application engine 64 and the video signal input from the video decoder 55, and outputs the synthesized video signal to a subsequent monitor.
  • the application memory 66 includes a work memory 66A and a save memory 66B.
  • the application engine 64 records data relating to the data broadcasting application being executed (specifically, including the hierarchy of the displayed information) in the work memory 66A. Further, when the application for data broadcasting that is being executed is suspended, the application engine 64 moves the data in the work memory 66A of the application memory 66 to the save memory 66B. When the suspended data broadcasting application is resumed, the data in the save memory 66B is moved to the work memory 66A to restore the state before the suspension.
  • the receiving device 12 is configured as described above.
  • FIG. 3 is a sequence diagram illustrating data broadcast application activation processing as an example of cooperation processing between the reception device 12 and each server.
  • a digital television broadcast signal is received from the broadcasting device 11, and the video of the corresponding digital television program is displayed on the monitor (S11). Further, the receiving device 12 periodically extracts feature amounts from the video signal and audio signal corresponding to the digital television program (S12), and these feature amounts are transmitted to the ACR server 13 as fingerprint information. (S13).
  • the ACR server 13 performs an ACR identification process and collates the fingerprint information from the receiving device 12 with the database, thereby identifying the digital television program being selected by the receiving device 12 (S14). Specifically, as shown in FIG. 4, when the ACR server 13 receives an inquiry about the fingerprint information from the receiving device 12, the ACR identification processing unit 13A obtains the fingerprint information from the FP database 13B prepared in advance. The digital television program being selected is identified by the receiving device 12 by comparison.
  • the fingerprint information is, for example, specific information of all or part of the AV content, and a large number of specific information of the AV content is registered in the FP database 13B in advance.
  • the degree of similarity or coincidence of the unique information is determined.
  • a known technique disclosed by various documents can be used as a method for determining the degree of similarity or the degree of coincidence.
  • the AV content can be identified from the feature amount of the video signal and the audio signal without depending on the information such as the resolution, aspect ratio, bit rate, or format of the AV content.
  • information indicating the channel number of the digital television program (hereinafter referred to as channel program information) and fingerprint information when the time from the start to the end of the digital television program is represented on the time axis are extracted.
  • Information indicating the time position (hereinafter referred to as time position information) is obtained.
  • information indicating the acquisition destination of a command for controlling the operation of the data broadcasting application executed in conjunction with the program in correspondence with the channel number information (hereinafter, command providing destination information). Is stored).
  • command providing destination information for example, a URL (Uniform ⁇ ⁇ ⁇ Resource Locator) of the command server 14 is described.
  • the ACR identification processing unit 13A acquires command providing destination information corresponding to the identified channel number from the FP database 13B. Then, the ACR identification processing unit 13A transmits the channel program information, the time position information, and the command providing destination information as the identification result of the identification processing to the inquiry source receiving device 12 (S15).
  • the receiving device 12 acquires the identification result from the ACR server 13 and analyzes the identification result (S16). Further, the receiving device 12 accesses the command server 14 of the URL described in the command providing destination information according to the analysis result of the identification result, and transmits the channel number information and the time position information. The command which can be executed is inquired (S17).
  • the command server 14 transmits a command corresponding to the channel number information and the time position information to the receiving device 12 in response to the inquiry from the receiving device 12 (S19).
  • the receiving device 12 acquires a command from the command server 14 and analyzes the command (S20). Further, the receiving device 12 accesses the application server 15 according to the analysis result of the command, and requests a data broadcasting application to be executed in conjunction with the selected digital television program (S21).
  • the application server 15 transmits a data broadcasting application to the receiving device 12 in response to the application request from the receiving device 12 (S23).
  • the receiving device 12 acquires the data broadcast application from the application server 15 and executes (activates) the data broadcast application (S24).
  • the receiving device 12, the ACR server 13, the command server 14, and the application server 15 cooperate with each other, so that the receiving device 12 activates the data broadcasting application linked to the selected digital television program. Is done.
  • FIG. 5 shows an example of information items included in the command.
  • Communication ID is information for identifying the command.
  • the command ID of each command is the same.
  • the “command effective time” is specified by any one of “absolute date”, “relative time”, and “PTS” indicating the time when the command is executed.
  • “Absolute date and time” is designated when a command is executed when a predetermined date and time is reached regardless of the progress of the digital television program.
  • the “relative time” is specified when a command is executed when a specific time has elapsed from a reference time in a digital television program. For example, as the relative time, a relative time from the start time of the digital television program is designated.
  • PTS Presentation Time Stamp
  • the “command target device type” designates a device that is subject to data broadcast application control by the command.
  • the external device is designated as the target device of the command.
  • Command action means that the commands are “app acquisition” (Register), “app start” (Execute), “app end” (Terminate), “event firing” (Inject_event), “app suspend” (Suspend) Indicates whether it is either.
  • the register command is a command for instructing the receiving device 12 to acquire or register a data broadcasting application.
  • the registration of the data broadcasting application means that the priority and the expiration date are stored in association with the acquired data broadcasting application.
  • the data broadcasting application is managed by the control unit 61 according to the priority and the retention period.
  • the execute (Execute) command is a command for instructing the receiving device 12 to acquire or start a data broadcasting application.
  • Terminate command is a command for causing the receiving device 12 to terminate the data broadcasting application being executed.
  • the inject event (Inject_event) command is a command for causing the receiving device 12 to fire an event in the data broadcasting application being executed.
  • the suspend command is a command for causing the receiving device 12 to pause the data broadcasting application being executed.
  • the “command application distribution parameter” is a parameter for stochastically distributing the timing of applying the command in the target device such as the receiving device 12. Since the timing for accessing the command server 14 and the application server 15 is adjusted by this parameter, it is possible to reduce the load by distributing access to the server.
  • Application ID is identification information of the data broadcasting application corresponding to the command.
  • application type is information indicating the type of data broadcasting application corresponding to the command.
  • operator ID is identification information of an operator (for example, a broadcasting station) that performs an execution service of a data broadcasting application corresponding to the command.
  • App URL is information indicating the URL of the acquisition destination of the data broadcasting application when the command action is “app acquisition” or “app activation”.
  • App expiration date is information indicating the expiration date of the data broadcasting application.
  • the “application holding priority” is information indicating a priority when acquiring and holding a data broadcasting application corresponding to the command. When a data broadcast application is registered, the application expiration date and the data broadcast application retention priority are stored, and the data broadcast application is managed according to the expiration date and priority.
  • Event ID is identification information of an event to be fired in the data broadcasting application designated by the application ID when the command action is “event firing”.
  • event additional data describes data that is referred to when an event is fired when the command action is “event firing”.
  • the command element mainly includes a timing element, a diffusion element, an application element, and an event element in addition to a destination attribute and an action attribute.
  • the destination attribute corresponds to the “command target device type” in FIG.
  • “receiver” is specified when the target device of the command is the receiving device 12
  • “external_1” or “external_2” is specified when the target device of the command is the external device.
  • the action attribute corresponds to the “command action” in FIG.
  • “execute” is designated when instructing acquisition or activation of the data broadcasting application
  • “register” is designated when instructing acquisition or registration of the data broadcasting application.
  • “suspend” is specified.
  • “terminate” is designated when instructing the end of the data broadcasting application
  • “event” is designated when the event is ignited in the data broadcasting application being executed.
  • the “timing” element corresponds to the “command effective time” in FIG.
  • the diffusion element corresponds to the “command application distribution parameter” in FIG.
  • attributes of the diffusion element there are a rate attribute, a range attribute, and a period attribute, which specify the number of distributions, the maximum delay time, and the command application diffusion period, respectively.
  • the application element corresponds to “application ID”, “application type”, “application URL”, “application retention priority”, and “application expiration date” in FIG. 5, and includes an id attribute, a type attribute, a url An attribute, a priority attribute, and an expire_date attribute are specified.
  • the url attribute and expire_date attribute are indispensable items when the action attribute is “execute” or “register”.
  • “0” is normally designated as the priority attribute
  • “1” is designated when the priority is to be increased.
  • the event element corresponds to the “event ID” and “event additional data” in FIG. 5, and an id attribute and a data attribute are designated.
  • the event element is an indispensable item when the action attribute is “event”.
  • FIG. 8 is a diagram illustrating a description example of a command.
  • “receiver” is specified as the destination attribute and “execute” is specified as the action attribute in the command element. That is, the command is an execute command addressed to the receiving device 12.
  • the timing element and application element are described between the start tag and end tag of the command element.
  • timing element “pts” is specified as the unit attribute, and “1286743” is specified as the value. That is, the command is executed when the clock “1286743” has elapsed.
  • “1” is specified as the id attribute
  • “html” is specified as the type attribute
  • “xxx.com/yyy” is specified as the url attribute
  • “2011-01-21” is specified as the expire_date attribute. Yes. That is, it means that the data broadcasting application described in HTML (Hyper Text Markup Language) can be acquired from the application server 15 specified by the URL “xxx.com/yyy”.
  • the command description method is arbitrary and is not limited to that shown in FIG.
  • FIG. 9 is a state transition diagram of the data broadcasting application that operates in the receiving device 12 in response to the register, execute, inject event, suspend, and terminate commands. As shown in the figure, the state of the data broadcasting application transitions to one of four types of a released state (Released), a ready state (Ready), a running state (Active), and a suspended state (Suspended). Is defined as
  • the release state indicates a state in which the data broadcasting application is not acquired by the receiving device 12.
  • the ready state indicates a state in which the data broadcasting application has been registered in the receiving device 12 and has not been activated.
  • the executing state indicates a state in which the data broadcasting application is activated and is being executed.
  • the dormant state refers to a state in which execution of the data broadcasting application is interrupted and information indicating the state at the time of the interruption is held in the save memory 66B.
  • the register command is received, and when the data broadcasting application is acquired (registered) according to the register command, the data broadcasting application is in the ready state. Transition.
  • the data broadcasting application When the data broadcasting application is transitioning to the running state or the paused state, a termination command is received, and when the data broadcasting application being executed is terminated according to the termination command, the data broadcasting application transitions to the ready state (in the figure). "A"). The transition to the ready state occurs not only based on the terminate command but also when another data broadcasting application is executed.
  • the transition to the release state is made when the application expiration date of the command has elapsed (“B” in the figure).
  • FIG. 10 shows the relationship between each command and state transition.
  • the receiving apparatus 12 transmits fingerprint information extracted from AV content data such as a digital television program to the ACR server 13, various commands are acquired from the command server 14 and the application server 15 It schematically shows how a data broadcasting application is acquired from the above.
  • the data broadcasting application when the data broadcasting application is in the release state (when the data broadcasting application is not acquired in the receiving device 12), the data broadcasting application is acquired, held, and registered according to the register command. Transition to the ready state.
  • the data broadcasting application when the data broadcasting application is in the ready state, the data broadcasting application is activated in response to the execute command.
  • the data broadcasting application when the data broadcasting application is in the release state (when not acquired by another device) in another device other than the receiving device 12, the data broadcasting application is acquired according to the execute command. When activated, transition to the running state.
  • the state is the running state. Will remain.
  • the receiving apparatus 12 when the data broadcasting application is transitioning to the running state, the data broadcasting application is transitioned to the dormant state when the running data broadcasting application is interrupted in response to the suspend command. In the receiving device 12, when the data broadcasting application is transitioning to the dormant state, when the suspended data broadcasting application is resumed in response to the execute command, the receiving apparatus 12 transitions to the running state.
  • the data broadcasting application when the data broadcasting application is transitioning to the running state in the receiving device 12, the data broadcasting application is transitioned to the ready state when the running data broadcasting application is terminated in response to the terminate command.
  • the data broadcasting application when the data broadcasting application has transitioned to a ready state, a running state, or a dormant state, the data broadcasting application is deleted from the cache memory 65 when the application expiration date of the data broadcasting application has elapsed, The registration is deleted and a transition is made to the release state.
  • FIG. 11 is a flowchart for explaining command response processing. This command corresponding processing is repeatedly executed when the user is viewing a digital television program, that is, while the receiving device 12 is receiving a digital television broadcast signal.
  • step S11 the fingerprint extractor 57 determines whether or not a predetermined time has elapsed, waits for the predetermined time to elapse, and then performs fingerprint printing from the video signal and audio signal corresponding to the digital television program.
  • Information is extracted (step S12). That is, the fingerprint extractor 57 periodically extracts fingerprint information at a predetermined interval such as several seconds.
  • step S13 the fingerprint extraction unit 57 controls the communication I / F 58 to transmit the extracted fingerprint information to the ACR server 13 via the Internet 16, and the digital television program being selected is selected. Queries the identification result.
  • the ACR server 13 performs ACR identification processing based on the fingerprint information, and transmits the identification result to the receiving device 12. When the ACR server 13 cannot obtain the identification result of the digital television program, the identification result is not transmitted.
  • step S14 the control unit 61 controls the communication I / F 58 to determine whether or not the identification result has been received from the ACR server 13 that is the inquiry result of the identification result.
  • step S14 If it is determined in step S14 that the identification result has not been received, the process returns to step S11, and the subsequent processes are repeated. For example, when the fingerprint information is extracted when the receiving device 12 selects a channel that is not broadcasting, the ACR server 13 cannot identify the program and transmits the identification result. (The identification result is transmitted, but it may be indicated as not applicable).
  • step S14 determines whether the identification result has been received. If it is determined in step S14 that the identification result has been received, the process proceeds to step S15.
  • step S ⁇ b> 15 the control unit 61 analyzes the identification result of the selected digital television program received by the communication I / F 58.
  • the identification result channel number information, time position information, and command providing destination information of the digital television program being selected are obtained.
  • step S16 the control unit 61 controls the communication I / F 58, accesses the command server 14 corresponding to the URL indicated by the command providing destination information, and transmits the channel number information and the time position information, thereby receiving the receiving device. 12 inquires about commands that can be executed.
  • the command server 14 acquires a command that can be executed in the time zone corresponding to the time position information in the digital television program corresponding to the channel number information, and transmits the command to the receiving device 12.
  • step S17 the control unit 61 controls the communication I / F 58 to determine whether or not a command has been received from the command server 14 as a command inquiry destination.
  • step S17 If it is determined in step S17 that no command has been received, the process returns to step S11, and the subsequent processes are repeated.
  • the command server 14 when there is no command that matches the condition determined by the channel number information and the time position information, the command is not transmitted (the command is transmitted but indicates that processing is not required). It may be)
  • step S17 if it is determined in step S17 that a command has been received, the process proceeds to step S18.
  • the command analysis unit 60 reads the command ID included in the command, and determines whether or not the processing from step S19 has already been performed on the command. If it is determined that the processing after step S19 has already been executed, the processing returns to step S11, and the subsequent processing is repeated. On the other hand, if it is determined that the process after step S19 is not executed for the command, the process proceeds to step S19.
  • step S19 the command analysis unit 60 reads the command action included in the command, and determines whether the command is a register, execute, terminate, inject event, or suspend.
  • step S20 the command analysis unit 60 determines whether or not the determination result in step S19 is a register. If it is determined that the register is a register, the process proceeds to step S21.
  • step S21 the control unit 61 controls the communication I / F 58 to access the application server 15 corresponding to the application URL of the command to acquire the data broadcasting application specified by the application ID.
  • the data broadcast application acquired by the communication I / F 58 is held in the cache memory 65.
  • the control unit 61 stores the application expiration date and the application holding priority in the memory 62 in association with the acquired data broadcasting application. Thereby, the data broadcasting application held in the cache memory 65 is managed by the control unit 61 according to the expiration date and the holding priority.
  • step S20 If it is determined in step S20 that the determination result in step S19 is not a register, the process proceeds to step S22.
  • step S22 the control unit 61 determines whether or not the determination result in step S19 is execute. If it is determined to be execute, the process proceeds to step S23.
  • step S23 the application engine 64 determines whether the data broadcasting application specified by the command ID of the command is in a suspended state (suspended state) according to the control from the control unit 61. Specifically, when data indicating a dormant state is saved in the data broadcasting application specified by the command ID in the save memory 66B, it is determined that the data is being paused.
  • step S23 If it is determined in step S23 that the data broadcasting application specified by the command ID is not paused, the process proceeds to step S24.
  • step S ⁇ b> 24 the application engine 64 acquires the data broadcasting application specified by the command ID if it has not been acquired (does not exist in the cache memory 65) according to the control from the control unit 61.
  • step S25 the control unit 61 performs a synchronization control process.
  • the details of the synchronization control processing will be described with reference to the flowchart of FIG.
  • step S51 the control unit 61 determines whether or not a command effective time included in the command is set.
  • step S51 If it is determined in step S51 that the command effective time is set, the process proceeds to step S52.
  • step S52 the control unit 61 determines whether it is time to execute the command.
  • This command effective time is specified by, for example, “absolute date”, “relative time”, or “PTS”.
  • absolute date when “absolute date” is designated, it is determined whether or not a specific date and time set in advance has been reached. If “relative time” is designated, for example, it is determined whether or not a predetermined time has elapsed from the start time of the digital television program. Further, when “PTS” is designated, it is determined based on the clock from the clock synchronization unit 59 whether or not it is time to execute the command.
  • step S52 the determination process is repeated until it is determined that it is time to execute the command. That is, the execution of the command is waited until the time for executing the command is reached.
  • step S52 If it is determined in step S52 that it is time to execute the command, the process returns to step S25 in FIG. 11, and the subsequent processes are executed.
  • step S26 the application engine 64 terminates the currently-executed data broadcasting application according to the control from the control unit 61, if any.
  • step S27 the application engine 64 activates the data broadcasting application specified by the command ID in accordance with the control from the control unit 61.
  • the data broadcasting application is started after the time for executing the command has elapsed, so, for example, in accordance with the progress of the digital television program.
  • the data broadcasting application can be activated, or the data broadcasting application can be activated at a specific time zone.
  • step S52 in FIG. 12 is skipped, and steps S26 and S27 are executed immediately after the acquisition process in step S24 is completed. Is done. In this case, immediately after an unacquired data broadcast application is acquired, the data broadcast application is activated.
  • step S23 If it is determined in step S23 that the data broadcasting application specified by the command ID is in a suspended state (suspended state), the process proceeds to step S28.
  • step S28 the control unit 61 performs the synchronization control process of FIG. That is, when the command effective time is set, the process of step S29 is performed when the command execution time is reached, and when the command effective time is not set, the process of step S29 is immediately performed. Is done.
  • step S29 the application engine 64 moves the data in the save memory 66B to the work memory 66A according to the control from the control unit 61, and activates the data broadcasting application specified by the command ID. As a result, the suspended data broadcasting application specified by the command ID is resumed from the suspended state. Thereafter, the process returns to step S11, and the subsequent steps are repeated.
  • step S22 when it is determined that the determination result in step S19 is not execute, the process proceeds to step S30.
  • step S30 the control unit 61 determines whether or not the determination result in step S19 is an injection event. If it is determined that the determination is an injection event, the process proceeds to step S31.
  • step S31 the control unit 61 performs the synchronization control process of FIG. That is, when the command effective time is set, the process of step S32 is performed when the command execution time comes, and when the command effective time is not set, the process of step S32 is immediately performed. Is done.
  • step S32 the control unit 61 controls the application engine 64 only when the command ID of the command matches the command ID of the active data broadcasting application, and the command in the operating data broadcast application Fire (execute) the event corresponding to the event ID. Thereafter, the process returns to step S11, and the subsequent steps are repeated.
  • step S30 If it is determined in step S30 that the determination result in step S19 is not an injection event, the process proceeds to step S33.
  • step S33 the control unit 61 determines whether or not the determination result in step S19 is suspend. If it is determined that it is suspend, the process proceeds to step S34.
  • step S34 the control unit 61 performs the synchronization control process of FIG. That is, when the command effective time is set, the process of step S35 is performed when the command execution time comes, and when the command effective time is not set, the process of step S35 is immediately performed. Is done.
  • step S35 the application engine 64, in accordance with control from the control unit 61, indicates the data broadcasting application currently being executed (that is, data currently written in the work memory 66A.
  • the display information has a hierarchical structure. If there is, the information indicating the hierarchy of the displayed information is saved in the save memory 66B. Thereafter, the process returns to step S11, and the subsequent steps are repeated.
  • step S33 If it is determined in step S33 that the determination result in step S19 is not suspended, the determination result in step S19 is termination, and the process proceeds to step S36.
  • step S36 the control unit 61 performs the synchronization control process of FIG. That is, when the command effective time is set, the process of step S37 is performed when the command execution time is reached, and when the command effective time is not set, the process of step S37 is immediately performed. Is done.
  • step S37 the application engine 64 terminates the data broadcasting application specified by the command ID if it is being executed in accordance with the control from the control unit 61.
  • step S38 the application engine 64 deletes the data related to the data broadcasting application specified by the command ID from the work memory 66A and the save memory 66B according to the control from the control unit 61, and also stores the data broadcasting application in the cache memory. Erase from 65. Thereafter, the process returns to step S11, and the subsequent steps are repeated.
  • a data broadcasting application can be started in conjunction with an AV content (for example, a digital television program or CM) of a television broadcast, an event can be fired, or ended. it can. Furthermore, the data broadcasting application can be paused while the data broadcasting application is being executed, the other data information applications can be executed and terminated, and then the paused data broadcasting application can be resumed from the paused state.
  • AV content for example, a digital television program or CM
  • FIG. 13 is a diagram showing an example of an operation scenario when the command effective time is not set.
  • the receiving device 12 When the digital television program corresponding to the digital television broadcast signal from the broadcasting device 11 is displayed on the monitor, the receiving device 12 periodically extracts fingerprint information from the video signal of the selected channel. Then, the data is transmitted to the ACR server 13. The ACR server 13 that has received the fingerprint information performs ACR identification processing, and the identification result is transmitted to the receiving device 12.
  • the receiving device 12 inquires of the command server 14 about the command according to the identification result from the ACR server 13, but if there is no command that can be executed by the receiving device 12, a response from the command server 14. Is not done.
  • the receiving device 12 periodically extracts fingerprint information, and in response thereto, inquiries to the ACR server 13 and the command server 14 are continuously performed.
  • the receiving device 12 accesses the application server 15 corresponding to the application URL, acquires the data broadcasting application, and executes it.
  • program related information (“Video Synchronized application” in the figure) corresponding to the data broadcasting application is superimposed and displayed.
  • the receiving device 12 ignores the execute command because the data broadcasting application has already been activated. Thereafter, the fingerprint information is continuously extracted, and when the terminate command is received from the command server 14, the receiving device 12 ends the data broadcasting application being executed. Thereby, on the monitor, the program related information superimposed on the program is erased, and only the digital television program is displayed.
  • the execute command and the terminate command have been described as the commands received from the command server 14 in the receiving device 12, but other commands may be received. For example, if an inject event command is received during the execution of the data broadcasting application, the event is ignited in the data broadcasting application being executed, and if the suspend command is received, the data being executed Broadcast application is suspended.
  • the receiving device 12 since the command effective time is not set for the command transmitted by the command server 14, the receiving device 12 immediately executes the command received from the command server 14. become.
  • FIG. 14 is a diagram showing an example of an operation scenario when the command effective time is set.
  • the receiving device 12 periodically extracts fingerprint information, and when receiving an execute command from the ACR server 13, the receiving device 12 accesses the application server 15 corresponding to the application URL and selects a data broadcasting application. get.
  • the command effective time is set for the execute command
  • execution of the execute command is waited until the time for executing the command is reached after acquiring the data broadcasting application (in the figure). "Waiting for sync").
  • the time for synchronization with that specific scene is described in the command effective time.
  • the data broadcasting application is started after waiting for the time to execute the command.
  • a specific scene of the digital television program and the program related information (“Video ⁇ ⁇ Synchronized ⁇ application ”in the figure) can be synchronized.
  • fingerprint information is continuously extracted, and when a termination command is received from the command server 14, the receiving device 12 waits for the time to execute the command and terminates the data broadcasting application being executed. Thereby, on the monitor, the program related information superimposed on the digital television program is deleted, and only the program is displayed.
  • the execute command and the terminate command have been described as the commands received from the command server 14 in the receiving device 12, but other commands may be received.
  • the event is ignited in the data broadcasting application being executed after the time for executing the command.
  • a suspend command is received during execution of the data broadcasting application, the data broadcasting application being executed is suspended after waiting for the time to execute the command.
  • the receiving device 12 since the command effective time is set for the command transmitted by the command server 14, the receiving device 12 waits for the time to execute the command and waits for the command server 14. The command received from will be executed. As a result, the receiving device 12 can execute a command at an arbitrary timing, not the resolution of fingerprint information extraction.
  • FIG. 16 shows an example of operation in which three data broadcasting applications app0, app1, and app2 are activated in cooperation.
  • an execute command for the data broadcasting application app0, a register command for the data broadcasting application app1, and a register command for the data broadcasting application app2 are broadcast.
  • the data broadcasting application app0 is acquired, registered, and activated. Icons corresponding to the data broadcasting applications app1 and app2 are displayed on the screen of the executed data broadcasting application app0.
  • data broadcasting applications app1 and app2 are acquired and registered.
  • the running data broadcasting application app0 is terminated and the data broadcasting application app1 is started . Thereafter, the data broadcasting application app1 is fired, paused, resumed, and terminated in response to the inject event command, suspend command, execute command, and terminate command for the data broadcasting application app1 that is being executed. .
  • the data broadcasting application app0 that is being executed is terminated and the data broadcasting application app2 is activated. . Thereafter, event firing and termination of the data broadcasting application app2 are performed in response to the injection event command and the termination command for the data broadcasting application app2 being executed.
  • FIG. 17 is a diagram illustrating a specific example of a broadcasting system to which the present technology is applied.
  • the AV content provided from the content provider is provided with metadata relating to the digital television program, and the digital television broadcast signal from the ASP (Authorized Service Provider) is directly received.
  • a receiving device (“TV1” in the figure) that receives the data can acquire metadata transmitted together with the AV content. Therefore, the receiving device can acquire and execute a data broadcasting application by accessing an application server ("Server" in the figure) managed by a broadcasting station or the like based on the metadata. It becomes.
  • the signal converted by the set-top box (“STB (Set Top Box)” in the figure) It is received by the receiving device (“TV2” in the figure) via (High Definition Multimedia Interface).
  • the output from the set top box is only AV content, and metadata cannot be used. Therefore, the receiving apparatus transmits the fingerprint information (“Fingerprint” in the figure) extracted from the AV content to the ACR server (“ACR System” in the figure), thereby causing the application server (“ It is possible to acquire and execute data broadcasting applications from “Server”).
  • the receiving device 12 directly receives a digital television broadcast signal from the broadcasting device 11 has been described. It is more effective when applied to a case where metadata transmitted together with AV content cannot be sent to a receiving device by using a set top box or the like such as a network.
  • FIG. 18 shows a communication system 81 according to the present embodiment.
  • a distribution server 91 connected to the Internet 16 is provided instead of the broadcasting device 11 as compared with FIG. 1.
  • the distribution server 91 distributes AV content to the receiving device 12 via the Internet 16 in response to a request from the receiving device 12.
  • the receiving device 12 extracts fingerprint information from the video signal and audio signal of the AV content from the distribution server 91 and transmits the fingerprint information to the ACR server 13.
  • the ACR server 13 performs ACR identification processing.
  • content identification information, time position information, and command provision destination information are transmitted as identification results. That is, when the AV content from the broadcasting apparatus 11 is acquired, the channel number information is obtained as an identification result. However, when the AV content from the distribution server 91 is acquired, the content identification information such as the content ID is identified. As a result.
  • the receiving apparatus 12 accesses the command server 14 corresponding to the URL described in the command providing destination information, and transmits the content identification information and the time position information, thereby inquiring about a command that can be executed by the receiving apparatus 12. . Then, the receiving device 12 controls the operation of the data broadcast application in accordance with the command from the command server 14.
  • the receiving device 12 can receive the AV content not only via the broadcast network but also via the communication network. Since AV content received from either the broadcast network or the communication network is identified by the ACR server 13, the receiving device 12 can acquire a command according to the identification result from the command server 14. it can.
  • the ACR server 13 may transmit the identification result directly to the command server 14 without transmitting it to the receiving device 12.
  • the receiving device 12 transmits the fingerprint information to the ACR server 13
  • the ACR server 13 performs ACR identification processing and transmits the identification result to the command server 14.
  • the command server 14 sends the command to the receiving device 12 according to the identification result from the ACR server 13.
  • the receiving device 12 can perform an operation such as acquiring a command from the command server 14 only by transmitting the fingerprint information to the ACR server 13.
  • the command server 14 transmits the data broadcast application acquisition command directly to the application server 15 without transmitting it to the reception apparatus 12.
  • the fingerprint information is sent to the ACR server 13.
  • an operation such as acquiring a data broadcasting application from the application server 15 becomes possible.
  • FIG. 19 shows a configuration example of an embodiment of a computer in which a program for executing the series of processes described above is installed.
  • the program can be recorded in advance in a recording unit 108 such as a hard disk or a ROM (Read Only Memory) 102 built in the computer 100.
  • a recording unit 108 such as a hard disk or a ROM (Read Only Memory) 102 built in the computer 100.
  • the program is temporarily or permanently stored on a removable medium 111 such as a flexible disk, CD-ROM (Compact Disc Read Only Memory), MO (Magneto Optical) disc, DVD (Digital Versatile Disc), magnetic disk, or semiconductor memory. Can be stored (recorded).
  • a removable medium 111 can be provided as so-called package software.
  • the program is installed in the computer 100 from the removable medium 111 as described above, or transferred from a download site to the computer 100 via a digital satellite broadcasting artificial satellite, or a LAN (Local Area Network).
  • the program can be transferred to the computer 100 via a network such as the Internet, and the computer 100 can receive the program transferred in this way and install it in the recording unit 108.
  • the computer 100 has a CPU (Central Processing Unit) 101 built-in.
  • An input / output interface 105 is connected to the CPU 101 via the bus 104.
  • the CPU 101 operates the input unit 106 including a keyboard, a mouse, a microphone, and the like by the user via the input / output interface 105.
  • the program stored in the ROM 102 is executed accordingly.
  • the CPU 101 can also be a program stored in the recording unit 108, a program transferred from a satellite or a network, received by the communication unit 109, installed in the recording unit 108, or a removable medium 111 attached to the drive 110.
  • the program read from the program and installed in the recording unit 108 is loaded into a RAM (Random Access Memory) 103 and executed.
  • the CPU 101 performs processing according to the flowchart described above or processing performed by the configuration of the block diagram described above.
  • the CPU 101 outputs the processing result from the output unit 107 configured with an LCD (Liquid Crystal Display), a speaker, or the like, for example, via the input / output interface 105, or from the communication unit 109 as necessary. Transmission, and further recording in the recording unit 108.
  • processing steps for describing a program for causing the computer 100 to perform various processes do not necessarily have to be processed in time series in the order described in the flowchart, and may be performed in parallel or individually. (For example, parallel processing or object processing).
  • the program may be processed by one computer, or may be processed in a distributed manner by a plurality of computers. Furthermore, the program may be transferred to a remote computer and executed.
  • a system represents the whole apparatus comprised by a some apparatus.
  • the present technology can be configured as follows.
  • a receiving unit for receiving AV content A feature amount extraction unit that extracts a feature amount from the received AV content data; An identification result acquisition unit that acquires an identification result of the AV content identified by using ACR (Automatic Content Recognition) technology from the extracted feature amount; A command acquisition unit for acquiring a command for controlling an operation of an application program executed in conjunction with the AV content according to the acquired identification result; And a control unit that controls operation of the application program in accordance with the acquired command.
  • a feature amount extraction unit that extracts a feature amount from the received AV content data
  • An identification result acquisition unit that acquires an identification result of the AV content identified by using ACR (Automatic Content Recognition) technology from the extracted feature amount
  • a command acquisition unit for acquiring a command for controlling an operation of an application program executed in conjunction with the AV content according to the acquired identification result
  • And a control unit that controls operation of the application program in accordance with the acquired command.
  • the command indicates one of acquisition or registration, acquisition or activation, event firing, interruption, or termination of the application program, The receiving device according to [1], wherein the control unit controls acquisition, registration, acquisition, or activation of the application program, or event firing, suspension, or termination of the application program being executed according to each command. .
  • the command includes time information indicating the time to execute the command, The receiving device according to [1] or [2], wherein the control unit executes the command according to the time information.
  • the time information is information for executing the command when a predetermined time is reached regardless of the progress of the AV content, or a specific time determined in conjunction with the progress of the AV content.
  • the receiving device which is information for executing the command when time elapses.
  • the control unit acquires the application program when the command execution time comes after the application program is acquired.
  • the receiving device according to [3] or [4].
  • [6] The receiving device any one of [1] to [5], wherein the feature amount extraction unit extracts the feature amount from one or both of a video signal and an audio signal of the AV content.
  • the receiving device Receive AV content, Extracting feature values from the received AV content data; Obtaining an identification result of the AV content identified using the ACR technique from the extracted feature amount; According to the acquired identification result, a command for controlling the operation of an application program executed in conjunction with the AV content is acquired, A receiving method including a step of controlling an operation of the application program according to the acquired command.
  • the receiving device is: A receiving unit for receiving AV content; A feature amount extraction unit that extracts a feature amount from the received AV content data; Identification that transmits the extracted feature quantity to the first information processing apparatus, and acquires the identification result of the AV content identified by using the ACR technique from the feature quantity in the first information processing apparatus A result acquisition unit; The identification result acquired from the first information processing apparatus is transmitted to the second information processing apparatus, and is executed in conjunction with the AV content according to the identification result from the second information processing apparatus.
  • a command acquisition unit for acquiring a command for controlling the operation of the application program to be executed;
  • a control unit that controls the operation of the application program acquired from the third information processing apparatus in response to the command acquired from the second information processing apparatus;
  • the first information processing apparatus includes: In response to an inquiry from the receiving device, the content identification unit for identifying the AV content from the feature amount using ACR technology,
  • the second information processing apparatus In response to an inquiry from the receiving device, a command providing unit that provides the command according to the identification result,
  • the third information processing apparatus An information processing system comprising: an application providing unit that provides the application program according to the command in response to an inquiry from the receiving device.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Television Systems (AREA)

Abstract

本技術は、ACR技術を用いてデジタルテレビジョン番組に連動するアプリケーションプログラムを提供することができるようにする受信装置、受信方法、プログラム、及び情報処理システムに関する。受信装置は、AVコンテンツを受信し、受信したAVコンテンツのデータから特徴量を抽出し、抽出した特徴量からACR技術を用いて識別されるAVコンテンツの識別結果を取得し、取得した識別結果に応じて、AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得し、取得したコマンドに応じて、アプリケーションプログラムの動作を制御する。本技術は、例えば、デジタルテレビジョン放送信号を受信するテレビジョン受像機に適用することができる。

Description

受信装置、受信方法、プログラム、及び情報処理システム
 本技術は、受信装置、受信方法、プログラム、及び情報処理システムに関し、特に、ACR技術を用いてデジタルテレビジョン番組に連動するアプリケーションプログラムを提供することができるようにした受信装置、受信方法、プログラム、及び情報処理システムに関する。
 デジタルテレビジョン放送信号を受信する受信装置において、デジタルテレビジョン番組と連動したアプリケーションプログラムをインターネットから取得して実行するサービスが普及することが予想され、このような放送と通信のハイブリッドサービスを実現するための技術の検討が行われている(例えば、特許文献1参照)。
 また、地上波放送を直接受信しないで、CATV網や衛星通信網を介して受信する場合、デジタルテレビジョン放送信号と同期した制御信号を送信することで、放送と通信のハイブリッドサービスを実現することが検討されているが、CATV網や衛星放送網の設備、専用端末の更新を行わなければ、サービスを実現することが難しいというのが現状である。
特開2006-245653号公報
 ところで、ACR(Automatic Content Recognition)と称される、番組等のAVコンテンツを識別する技術が知られている。ACR技術では、識別対象となるAVコンテンツのビデオ信号及びオーディオ信号から抽出された特徴量を、あらかじめ多数のAVコンテンツのビデオ信号及びオーディオ信号から抽出された特徴量が登録されているデータベースと照合することで、AVコンテンツの識別が行われる。
 ACR技術を用いてデジタルテレビジョン番組を識別して、さらに、識別された番組に対応するアプリケーションプログラムを提供することができれば、放送と通信のハイブリッドサービスを実現することができる。しかしながら、現状では、ACR技術を用いて、デジタルテレビジョン番組に連動するアプリケーションプログラムを提供するための技術方式は確立されていない。
 本技術はこのような状況に鑑みてなされたものであり、ACR技術を用いてデジタルテレビジョン番組に連動するアプリケーションプログラムを提供することができるようにするものである。
 本技術の第1の側面の受信装置は、AVコンテンツを受信する受信部と、受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、抽出した前記特徴量からACR(Automatic Content Recognition)技術を用いて識別される前記AVコンテンツの識別結果を取得する識別結果取得部と、取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する制御部とを備える。
 前記コマンドは、前記アプリケーションプログラムの取得若しくは登録、取得若しくは起動、イベント発火、中断、又は終了のうちのいずれかを示しており、前記制御部は、各コマンドに応じて、前記アプリケーションプログラムの取得若しくは登録、若しくは取得若しくは起動、又は実行中の前記アプリケーションプログラムのイベント発火、休止、若しくは終了を制御する。
 前記コマンドには、前記コマンドを実行する時刻を示す時刻情報が含まれており、前記制御部は、前記時刻情報に応じて、前記コマンドを実行する。
 前記時刻情報は、前記AVコンテンツの進行と関係なくあらかじめ定められた特定の時刻となったときに前記コマンドを実行させるための情報、又は前記AVコンテンツの進行と連動してあらかじめ定められた特定の時間が経過したときに前記コマンドを実行させるための情報である。
 前記制御部は、前記コマンドが取得若しくは起動を示し、かつ、前記アプリケーションプログラムを取得していない場合、前記アプリケーションプログラムを取得した後、前記コマンドを実行する時刻となったとき、取得した前記アプリケーションプログラムを起動する。
 前記特徴量抽出部は、前記AVコンテンツのビデオ信号及びオーディオ信号のいずれか一方又は双方から前記特徴量を抽出する。
 受信装置は、独立した装置であってもよいし、1つの装置を構成している内部ブロックであってもよい。
 本技術の第1の側面の受信方法又はプログラムは、前述した第1の側面の受信装置に対応する受信方法又はプログラムである。
 本技術の第1の側面の受信装置、受信方法、及びプログラムにおいては、AVコンテンツが受信され、受信されたAVコンテンツのデータから特徴量が抽出され、抽出された特徴量からACR技術を用いて識別されるAVコンテンツの識別結果が取得され、取得された識別結果に応じて、AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドが取得され、取得されたコマンドに応じて、アプリケーションプログラムの動作が制御される。
 本技術の第2の側面の情報処理システムは、受信装置、第1の情報処理装置、第2の情報処理装置、及び第3の情報処理装置から構成される情報処理システムにおいて、前記受信装置は、AVコンテンツを受信する受信部と、受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、抽出した前記特徴量を前記第1の情報処理装置に送信して、前記第1の情報処理装置にて前記特徴量からACR技術を用いて識別された前記前記AVコンテンツの識別結果を取得する識別結果取得部と、前記第1の情報処理装置から取得した前記識別結果を前記第2の情報処理装置に送信して、前記第2の情報処理装置から、前記識別結果に応じた、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、前記第2の情報処理装置から取得した前記コマンドに応じて、前記第3の情報処理装置から取得した前記アプリケーションプログラムの動作を制御する制御部とを備え、前記第1の情報処理装置は、前記受信装置からの問い合わせに応じて、ACR技術を用いて前記特徴量から前記AVコンテンツを識別するコンテンツ識別部を備え、前記第2の情報処理装置は、前記受信装置からの問い合わせに応じて、前記識別結果に応じた前記コマンドを提供するコマンド提供部を備え、前記第3の情報処理装置は、前記受信装置からの問い合わせに応じて、前記コマンドに応じた前記アプリケーションプログラムを提供するアプリケーション提供部を備える。
 本技術の第2の側面の情報処理システムにおいては、受信装置によって、AVコンテンツが受信され、受信されたAVコンテンツのデータから特徴量が抽出され、抽出された特徴量を第1の情報処理装置に送信して、第1の情報処理装置にて特徴量からACR技術を用いて識別されたAVコンテンツの識別結果が取得され、第1の情報処理装置から取得した識別結果を第2の情報処理装置に送信して、第2の情報処理装置から、識別結果に応じた、AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドが取得され、第2の情報処理装置から取得したコマンドに応じて、第3の情報処理装置から取得したアプリケーションプログラムの動作が制御され、第1の情報処理装置によって、受信装置からの問い合わせに応じて、ACR技術を用いて特徴量からAVコンテンツが識別され、第2の情報処理装置によって、受信装置からの問い合わせに応じて、識別結果に応じたコマンドが提供され、第3の情報処理装置によって、受信装置からの問い合わせに応じて、コマンドに応じたアプリケーションプログラムが提供される。
 本技術によれば、ACR技術を用いてデジタルテレビジョン番組に連動するアプリケーションプログラムを提供することができる。
放送システムの構成例を示す図である。 受信装置の構成例を示す図である。 受信装置と各サーバの連携処理を説明するシーケンス図である。 ACR技術の概念を説明する図である。 コマンドに含まれる情報の項目の一例を示す図である。 コマンドの詳細仕様を示す図である。 コマンドの詳細仕様を示す図である。 コマンドの記述例を示す図である。 アプリケーションの状態遷移を示す図である。 各コマンドと状態遷移の関係を示す図である。 コマンド対応処理を示すフローチャートである。 同期制御処理を示すフローチャートである。 動作シナリオの例を示す図である。 動作シナリオの例を示す図である。 マルチアプリケーションの関係を示す図である。 マルチアプリケーションの運用例を示す図である。 本技術を適用した放送システムの具体例を示す図である。 通信システムの構成例を示す図である。 コンピュータの構成例を示す図である。
 以下、図面を参照しながら本技術の実施の形態について説明する。
<第1の実施の形態>
[放送システムの構成例]
 図1は、本実施の形態である放送システム1を示している。この放送システム1は、放送装置11、受信装置12、ACRサーバ13、コマンドサーバ14、及びアプリサーバ15から構成される。また、受信装置12、ACRサーバ13、コマンドサーバ14、及びアプリサーバ15は、インターネット16を介して、相互に接続されている。
 放送装置11は、デジタルテレビジョン番組に相当するAVコンテンツのデジタルテレビジョン放送信号を送信(放送)するようになされている。
 受信装置12は、放送装置11から送信されたデジタルテレビジョン放送信号を受信して、デジタルテレビジョン番組の映像及び音声を取得する。受信装置12は、取得した映像をモニタに出力するとともに、音声をスピーカに出力する。
 なお、受信装置12は、単体として存在してもよいし、例えば、テレビジョン受像機やビデオレコーダ等に内蔵されているようにしてもよい。また、受信装置12の詳細な構成は、図2を参照して後述する。
 また、受信装置12は、定期的に、インターネット16を介してACRサーバ13にアクセスして、デジタルテレビジョン番組の識別結果を問い合わせる。その際、デジタルテレビジョン番組のビデオ信号及びオーディオ信号から抽出される特徴量(以下、フィンガプリント情報(Finger Print)ともいう)が、ACRサーバ13に送信される。
 ACRサーバ13は、任意のAVコンテンツのビデオ信号及びオーディオ信号から抽出された特徴量が登録されているデータベースを有しており、インターネット16に接続された任意の端末装置からの問い合わせに応じて、ACR(Automatic Content Recognition)技術を用いたAVコンテンツの識別を行う。ACRサーバ13は、受信装置12からのフィンガプリント情報を、データベースと照合することで、デジタルテレビジョン番組を識別し、その識別結果を、インターネット16を介して受信装置12に送信する。
 受信装置12は、ACRサーバ13から受信した識別結果に応じて、インターネット16を介してコマンドサーバ14にアクセスして、デジタルテレビジョン番組(AVコンテンツ)に連動して実行されるデータ放送用のアプリケーションプログラム(以下、データ放送用アプリという)の動作を制御するためのコマンドを取得する。
 コマンドサーバ14は、データ放送用アプリの動作を制御するためのコマンドを管理しており、受信装置12からの問い合わせに応じて、コマンドを、インターネット16を介して受信装置12に送信する。
 受信装置12は、コマンドサーバ14から受信したコマンドに応じて、データ放送用アプリの動作を制御する。また、受信装置12は、コマンドサーバ14から受信したコマンドに応じて、インターネット16を介してアプリサーバ15にアクセスし、データ放送用アプリを取得する。
 アプリサーバ15は、放送装置11により放送されるデジタルテレビジョン番組(AVコンテンツ)に連動して実行されるデータ放送用アプリを管理しており、受信装置12からの問い合わせに応じて、データ放送用アプリを、インターネット16を介して受信装置12に送信する。
 放送システム1は、以上のように構成される。
[受信装置の構成例]
 図2は、図1の受信装置12の構成例を示している。
 受信装置12は、チューナ51、多重分離部52、オーディオデコーダ53、オーディオ出力部54、ビデオデコーダ55、ビデオ出力部56、フィンガプリント抽出部57、通信I/F58、クロック同期部59、コマンド解析部60、制御部61、メモリ62、操作部63、キャッシュメモリ65、及びアプリ用メモリ66から構成される。
 チューナ51は、ユーザによって選局されたチャンネルに対応するデジタルテレビジョン放送信号を受信して復調し、その結果得られるトランスポートストリーム(Transport Stream、以下、TSという)を多重分離部52に出力する。
 多重分離部52は、チューナ51から入力されるTSをオーディオ符号化信号と、ビデオ符号化信号に分離し、それぞれをオーディオデコーダ53と、ビデオデコーダ55に出力する。また、多重分離部52は、TSを構成するTSパケットからPCR(Program Clock Reference)を抽出して、クロック同期部59に供給する。
 オーディオデコーダ53は、入力されたオーディオ符号化信号をデコードし、その結果得られるオーディオ信号をオーディオ出力部54及びフィンガプリント抽出部57に出力する。オーディオ出力部54は、入力されたオーディオ信号を、後段のスピーカに出力する。
 ビデオデコーダ55は、入力されたビデオ符号化信号をデコードし、その結果得られるビデオ信号をビデオ出力部56及びフィンガプリント抽出部57に出力する。ビデオ出力部56は、ビデオデコーダ55から入力されたビデオ信号を、後段のモニタに出力する。
 フィンガプリント抽出部57には、オーディオデコーダ53からのオーディオ信号と、ビデオデコーダ55からのビデオ信号が供給される。フィンガプリント抽出部57は、オーディオ信号及びビデオ信号のいずれか一方又は双方から特徴量を抽出し、フィンガプリント情報として、通信I/F58に供給する。
 通信I/F58は、フィンガプリント抽出部57からのフィンガプリント情報を、インターネット16を介してACRサーバ13に送信する。また、通信I/F58は、ACRサーバ13から送信されるデジタルテレビジョン番組の識別結果を受信し、制御部61に供給する。
 制御部61は、メモリ62にあらかじめ記憶されている制御用プログラムを実行することにより受信装置12の各部の動作を制御する。メモリ62には、制御部61によって実行される制御用プログラムがあらかじめ記憶されている。この制御用プログラムは、デジタルテレビジョン放送信号、又はインターネット16を介して取得する更新データに基づいて更新することができる。操作部63は、ユーザからの各種の操作を受け付けて、それに対応する操作信号を制御部61に通知する。
 また、制御部61は、通信I/F58からの識別結果に応じて、通信I/F58を制御して、インターネット16を介してコマンドサーバ14にアクセスし、コマンドを問い合わせる。通信I/F58は、コマンドサーバ14から送信されるコマンドを受信し、コマンド解析部60に供給する。
 コマンド解析部60は、通信I/F58からのコマンドを解析し、その解析結果を制御部61に供給する。
 クロック同期部59は、例えばPLL(Phase Locked Loop)によって構成され、多重分離部52からのPCRに応じたシステムクロックを、オーディオデコーダ53、ビデオデコーダ55、及び制御部61など、受信装置12の各部に供給する。これにより、受信装置12では、放送装置11と同期したシステムクロックを得ることができるため、オーディオ信号及びビデオ信号を再生することができる。
 制御部61は、コマンド解析部60からの解析結果に基づき、デジタルテレビジョン番組(AVコンテンツ)に連動したデータ放送用アプリの取得若しくは登録、取得若しくは起動(実行)、イベント発火、中断、又は終了等を制御する。また、制御部61は、コマンド解析部60からの解析結果に基づき、クロック同期部59からのシステムクロックを基準に、コマンドの実行のタイミングを制御する。
 アプリエンジン64は、制御部61からの制御に従い、通信I/F58を制御して、インターネット16を介してアプリサーバ15にアクセスし、データ放送用アプリを要求する。通信I/F58は、アプリサーバ15から送信されるデータ放送用アプリを受信し、キャッシュメモリ65に保持させる。
 アプリエンジン64は、制御部61からの制御に従い、キャッシュメモリ65に保持されているデータ放送用アプリを読み出して実行する。実行中のデータ放送用アプリのビデオ信号は、ビデオ出力部56に供給される。
 ビデオ出力部56は、アプリエンジン64から入力されるビデオ信号と、ビデオデコーダ55から入力されたビデオ信号を合成して、後段のモニタに出力する。
 アプリ用メモリ66は、ワークメモリ66A及び退避メモリ66Bとからなる。アプリエンジン64は、実行中のデータ放送用アプリに関するデータ(具体的には、表示されている情報の階層などを含む)をワークメモリ66Aに記録する。また、アプリエンジン64は、実行中のデータ放送用アプリを休止する場合、アプリ用メモリ66のワークメモリ66Aのデータを退避メモリ66Bに移動させる。そして、休止したデータ放送用アプリを再開する場合、退避メモリ66Bのデータをワークメモリ66Aに移動させて休止前の状態を復活させる。
 受信装置12は、以上のように構成される。
[受信装置と各サーバの連携]
 図3は、受信装置12と各サーバの連携処理の一例として、データ放送用アプリ起動処理を説明するシーケンス図である。
 受信装置12において、ユーザにより所望のチャンネルが選局されると、放送装置11からデジタルテレビジョン放送信号が受信され、対応するデジタルテレビジョン番組の映像がモニタに表示される(S11)。また、受信装置12では、定期的に、デジタルテレビジョン番組に対応するビデオ信号及びオーディオ信号から特徴量が抽出され(S12)、それらの特徴量が、フィンガプリント情報として、ACRサーバ13に送信される(S13)。
 ACRサーバ13は、ACR識別処理を行い、受信装置12からのフィンガプリント情報を、データベースと照合することで、受信装置12にて選局中のデジタルテレビジョン番組を識別する(S14)。具体的には、図4に示すように、ACRサーバ13では、受信装置12からフィンガプリント情報による問い合わせを受けると、ACR識別処理部13Aによって、フィンガプリント情報が、あらかじめ用意されたFPデータベース13Bと照合され、受信装置12にて選局中のデジタルテレビジョン番組が識別される。
 なお、フィンガプリント情報(特徴量)は、例えば、AVコンテンツの全体又は一部構成要素の固有情報であって、FPデータベース13Bには、あらかじめ多数のAVコンテンツの固有情報が登録されている。ACR識別処理では、例えば、それらの固有情報の類似度又は一致度が判定される。なお、この類似度又は一致度の判定方法としては、各種の文献などによって開示されている、公知の技術を用いることができる。ACR技術を用いることで、AVコンテンツの解像度、アスペクト比、ビットレート、又はフォーマットなどの情報に依存せずに、ビデオ信号及びオーディオ信号の特徴量からAVコンテンツを識別することができる。
 このACR識別処理によって、デジタルテレビジョン番組のチャンネル番号を示す情報(以下、チャンネル番組情報という)と、デジタルテレビジョン番組の開始から終了までを時間軸で表したときのフィンガプリント情報が抽出された時間位置を示す情報(以下、時間位置情報という)が得られる。また、FPデータベース13Bには、チャンネル番号情報と対応して、その番組に連動して実行されるデータ放送用アプリの動作を制御するためのコマンドの取得先を示す情報(以下、コマンド提供先情報という)が格納されている。コマンド提供先情報としては、例えば、コマンドサーバ14のURL(Uniform Resource Locator)が記述される。
 ACR識別処理部13Aは、FPデータベース13Bから、識別されたチャンネル番号に対応するコマンド提供先情報を取得する。そして、ACR識別処理部13Aは、識別処理の識別結果として、チャンネル番組情報、時間位置情報、及びコマンド提供先情報を、問い合わせ元の受信装置12に送信する(S15)。
 受信装置12は、ACRサーバ13からの識別結果を取得して、その識別結果を解析する(S16)。また、受信装置12は、識別結果の解析結果に従って、コマンド提供先情報に記述されたURLのコマンドサーバ14にアクセスして、チャンネル番号情報及び時間位置情報を送信することで、受信装置12にて実行可能となるコマンドを問い合わせる(S17)。
 コマンドサーバ14は、受信装置12からの問い合わせに応じて、チャンネル番号情報及び時間位置情報に応じたコマンドを、受信装置12に送信する(S19)。
 受信装置12は、コマンドサーバ14からのコマンドを取得して、そのコマンドを解析する(S20)。また、受信装置12は、コマンドの解析結果に従って、アプリサーバ15にアクセスし、選局中のデジタルテレビジョン番組に連動して実行されるデータ放送用アプリを要求する(S21)。
 アプリサーバ15は、受信装置12からのアプリ要求に応じて、データ放送用アプリを、受信装置12に送信する(S23)。
 受信装置12は、アプリサーバ15からのデータ放送用アプリを取得して、そのデータ放送用アプリを実行(起動)する(S24)。
 以上のように、受信装置12と、ACRサーバ13、コマンドサーバ14、及びアプリサーバ15が連携することで、受信装置12では、選局中のデジタルテレビジョン番組に連動したデータ放送用アプリが起動される。
[コマンドの詳細]
 図5は、コマンドに含まれる情報の項目の一例を示している。
 「コマンドID」は、当該コマンドを識別するための情報である。同一内容のコマンドが複数回送信される場合、各コマンドのコマンドIDは同一のものとなる。
 「コマンド発効時刻」は、当該コマンドを実行する時刻を示す「絶対日時」、「相対時間」、又は「PTS」のいずれかにより指定される。「絶対日時」は、デジタルテレビジョン番組の進行とは無関係に、あらかじめ設定された特定の日時となったときにコマンドを実行させる場合に指定される。また、「相対時間」は、デジタルテレビジョン番組中の基準となる時刻から特定の時間が経過したときにコマンドを実行させる場合に指定される。例えば、相対時間としては、デジタルテレビジョン番組の開始時刻からの相対的な時間が指定される。また、「PTS」は、同期再生を行うための時間情報であるPTS(Presentation Time Stamp)を用いて、コマンドを実行させる場合に指定される。すなわち、コマンド発効時刻としては、時分秒で指定する方式のほか、TSのSTC(System Time Clock)値で指定する方式を採用することが可能である。
 なお、コマンド発効時刻が既に経過している場合、当該コマンドは、受信された時点で即時に実行される。
 「コマンド対象機器タイプ」は、当該コマンドによるデータ放送用アプリ制御の対象となる機器が指定される。ここでは、受信装置本体(受信装置12)の他、受信装置12に外部装置が接続される場合には、その外部装置が、コマンドの対象機器として指定される。
 「コマンドアクション」は、当該コマンドが、「アプリ取得」(Register)、「アプリ起動」(Execute)、「アプリ終了」(Terminate)、「イベント発火」(Inject_event)、「アプリ中断」(Suspend)のいずれかであるかを示す。
 レジスタ(Register)コマンドは、受信装置12に対して、データ放送用アプリの取得若しくは登録を指示するためのコマンドである。ここで、データ放送用アプリの登録とは、取得したデータ放送用アプリに対応付けて、その優先度と有効期限を記憶することを意味する。データ放送用アプリは、制御部61により、優先度と保持期限に従って管理される。
 エクスキュート(Execute)コマンドは、受信装置12に対して、データ放送用アプリの取得若しくは起動を指示するためのコマンドである。
 ターミネート(Terminate)コマンドは、受信装置12に対して、実行中のデータ放送用アプリを終了させるためのコマンドである。
 インジェクトイベント(Inject_event)コマンドは、受信装置12に対して、実行中のデータ放送用アプリにおいてイベントを発火させるためのコマンドである。
 サスペンド(Suspend)コマンドは、受信装置12に対して、実行中のデータ放送用アプリを休止させるためのコマンドである。
 「コマンド適用分散化パラメータ」は、受信装置12などの対象機器において、当該コマンドを適用するタイミングを確率的に分散させるためのパラメータである。このパラメータにより、コマンドサーバ14やアプリサーバ15にアクセスするタイミングが調整されるため、サーバに対するアクセスを分散して、負荷を軽減することが可能となる。
 「アプリID」は、当該コマンドに対応するデータ放送用アプリの識別情報である。「アプリタイプ」は、当該コマンドに対応するデータ放送用アプリのタイプを示す情報である。「事業者ID」は、当該コマンドに対応するデータ放送用アプリの実行サービスを行う事業者(例えば、放送局など)の識別情報である。
 「アプリURL」は、コマンドアクションが、「アプリ取得」又は「アプリ起動」である場合において、データ放送用アプリの取得先のURLを示す情報である。「アプリ有効期限」は、データ放送用アプリの有効期限を示す情報である。また、「アプリ保持優先度」は、当該コマンドに対応するデータ放送用アプリを取得、保持するときの優先度を示す情報である。データ放送用アプリが登録される場合、アプリ有効期限とデータ放送用アプリ保持優先度が記憶され、データ放送用アプリは、それらの有効期限と優先度に従って管理される。
 「イベントID」は、コマンドアクションが、「イベント発火」である場合において、アプリIDにて指定されたデータ放送用アプリにおいて発火すべきイベントの識別情報である。また、「イベント付加データ」は、コマンドアクションが、「イベント発火」である場合において、イベントを発火する際に参照されるデータが記載される。
 ここで、コマンドの詳細仕様について、図6及び図7に示す。
 コマンド要素は、destination属性、action属性のほか、timing要素、diffusion要素、application要素、event要素を主に含む。
 destination属性は、図5の「コマンド対象機器タイプ」に対応するものである。例えば、destination属性には、コマンドの対象機器が受信装置12となる場合、“receiver”が指定され、コマンドの対象機器が外部装置となる場合、“external_1”や“external_2”が指定される。
 action属性は、図5の「コマンドアクション」に対応するものである。例えば、action属性には、データ放送用アプリの取得若しくは起動を指示する場合、“execute”が指定され、データ放送用アプリの取得若しくは登録を指示する場合、“register”が指定され、データ放送用アプリの中断を指示する場合、“suspend”が指定される。また、action属性には、データ放送用アプリの終了を指示する場合、“terminate”が指定され、実行中のデータ放送用アプリにおいてイベントを引火させる場合、“event”が指定される。
 timing要素は、図5の「コマンド発効時刻」に対応するものである。timing要素の属性としては、unit属性がある。例えば、unit属性には、「絶対日時」を用いる場合、“utc”が指定され、「相対時間」を用いる場合、“smpte”が指定され、「PTS」を用いる場合、“pts”が指定される。
 diffusion要素は、図5の「コマンド適用分散化パラメータ」に対応するものである。diffusion要素の属性としては、rate属性、range属性、period属性があり、それぞれ、分配数、最大遅延時間、コマンド適用拡散期間が指定される。
 application要素は、図5の「アプリID」、「アプリタイプ」、「アプリURL」、「アプリ保持優先度」、及び「アプリ有効期限」に対応するものであって、id属性、type属性、url属性、priority属性、及びexpire_date属性が指定される。url属性及びexpire_date属性は、action属性が、“execute”又は“register”となる場合には必須の項目となる。また、priority属性は、通常は“0”が指定され、優先度を高くする場合には、“1”が指定される。
 event要素は、図5の「イベントID」及び「イベント付加データ」に対応するものであって、id属性、data属性が指定される。event要素は、action属性が、“event”となる場合には必須の項目となる。
[コマンドの記述例]
 図8は、コマンドの記述例を示す図である。
 図8の例では、command要素には、destination属性として“receiver”が指定され、action属性として“execute”が指定されている。すなわち、当該コマンドは、受信装置12宛てのエクスキュートコマンドとなる。
 command要素の開始タグと終了タグの間には、timing要素とapplication要素が記述される。
 timing要素には、unit属性として“pts”が指定され、その値として“1286743”が指定されている。すなわち、当該コマンドは、“1286743”であるクロックが経過したときに実行される。
 application要素には、id属性として“1”が指定され、type属性として“html”、url属性として“xxx.com/yyy”が指定され、expire_date属性として“2011-01-21”が指定されている。すなわち、HTML(Hyper Text Markup Language)により記述されたデータ放送用アプリが、“xxx.com/yyy”であるURLにより指定されるアプリサーバ15から取得できることを意味する。
 なお、コマンドの記述方法は任意であって、図8に限定されるものではない。
[データ放送用アプリの状態遷移]
 図9は、レジスタ、エクスキュート、インジェクトイベント、サスペンド、及びターミネートの各コマンドに応じて受信装置12にて動作するデータ放送用アプリの状態遷移図である。同図に示すように、データ放送用アプリの状態は、解放状態(Released)、準備状態(Ready)、実行中状態(Active)、又は休止状態(Suspended)の4種類のうちのいずれかに遷移していると定義される。
 解放状態は、データ放送用アプリが受信装置12に未取得である状態を指す。準備状態は、そのデータ放送用アプリが受信装置12に登録済みであって起動されていない状態を指す。実行中状態は、データ放送用アプリが起動されて実行中である状態を指す。休止状態は、データ放送用アプリの実行が中断され、その中断したときの状態を示す情報が退避メモリ66Bに保持されている状態を指す。
 データ放送用アプリが解放状態に遷移しているとき(受信装置12に未取得のとき)、レジスタコマンドが受信され、レジスタコマンドに従ってそのデータ放送用アプリが取得(登録)されると、準備状態に遷移する。
 データ放送用アプリが準備状態であるとき、エクスキュートコマンドが受信され、エクスキュートコマンドに従ってそのデータ放送用アプリが起動されると、実行中状態に遷移する。
 また、データ放送用アプリが解放状態に遷移しているとき(受信装置12に未取得のとき)、エクスキュートコマンドが受信され、エクスキュートコマンドに従ってそのデータ放送用アプリが取得されて起動されると、実行中状態に遷移する。
 データ放送用アプリが実行中状態に遷移しているとき、サスペンドコマンドが受信され、サスペンドコマンドに従って実行中のデータ放送用アプリが中断されると休止状態に遷移する。
 データ放送用アプリが休止状態に遷移しているとき、エクスキュートコマンドが受信され、エクスキュートコマンドに従って、中断されていたデータ放送用アプリが再開されると、実行中状態に遷移する。
 データ放送用アプリが、実行中状態又は休止状態に遷移しているとき、ターミネートコマンドが受信され、ターミネートコマンドに従って、実行中のデータ放送用アプリが終了されると、準備状態に遷移する(図中の「A」)。なお、準備状態への遷移は、ターミネートコマンドに基づくもののほか、他のデータ放送用アプリが実行されたときなどにも発生する。
 また、データ放送用アプリが、準備状態、実行中状態、又は休止状態に遷移しているとき、コマンドのアプリ有効期限が経過したとき、解放状態に遷移する(図中の「B」)。
 図10は、各コマンドと状態遷移の関係を示している。
 図10は、受信装置12において、デジタルテレビジョン番組等のAVコンテンツのデータから抽出されたフィンガプリント情報をACRサーバ13に送信すると、コマンドサーバ14から各種のコマンドが取得されるとともに、アプリサーバ15からデータ放送用アプリが取得される様子を模式的に表している。
 受信装置12において、データ放送用アプリが解放状態に遷移しているとき(受信装置12に未取得のとき)、レジスタコマンドに応じて、そのデータ放送用アプリが取得、保持され、登録されると準備状態に遷移する。
 受信装置12において、データ放送用アプリが準備状態にあるとき、エクスキュートコマンドに応じて、そのデータ放送用アプリが起動されると実行中状態に遷移する。
 また、受信装置12以外の他の装置において、データ放送用アプリが解放状態に遷移しているとき(他の装置に未取得のとき)、エクスキュートコマンドに応じて、そのデータ放送用アプリが取得、起動されると実行中状態に遷移する。
 受信装置12において、データ放送用アプリが実行中状態に遷移しているとき、インジェクトイベントコマンドに応じて、実行中のデータ放送用アプリにてイベントが発火された場合、状態は実行中状態のままとなる。
 受信装置12において、データ放送用アプリが実行中状態に遷移しているとき、サスペンドコマンドに応じて、実行中のデータ放送用アプリが中断されると休止状態に遷移する。また、受信装置12において、データ放送用アプリが休止状態に遷移しているとき、エクスキュートコマンドに応じて、中断されていたデータ放送用アプリが再開されると、実行中状態に遷移する。
 また、受信装置12において、データ放送用アプリが実行中状態に遷移しているとき、ターミネートコマンドに応じて、実行中のデータ放送用アプリが終了されると準備状態に遷移する。なお、データ放送用アプリが準備状態、実行中状態、又は休止状態に遷移しているとき、当該データ放送用アプリのアプリ有効期限が経過すると、当該データ放送用アプリがキャッシュメモリ65から消去され、登録が抹消されて解放状態に遷移する。
[コマンド対応処理]
 次に、受信装置12がコマンドを受信したときのコマンド対応処理について、図11を参照して説明する。
 図11は、コマンド対応処理を説明するフローチャートである。このコマンド対応処理は、ユーザがデジタルテレビジョン番組を視聴しているとき、すなわち、受信装置12がデジタルテレビジョン放送信号を受信している間、繰り返して実行される。
 フィンガプリント抽出部57は、ステップS11において、所定の時間を経過したか否かを判定し、所定の時間を経過するのを待って、デジタルテレビジョン番組に対応するビデオ信号及びオーディオ信号からフィンガプリント情報を抽出する(ステップS12)。すなわち、フィンガプリント抽出部57は、例えば数秒などの所定の間隔で、定期的にフィンガプリント情報の抽出を行う。
 ステップS13において、フィンガプリント抽出部57は、通信I/F58を制御して、抽出されたフィンガプリント情報を、インターネット16を介してACRサーバ13に送信して、選局中のデジタルテレビジョン番組の識別結果を問い合わせる。ACRサーバ13では、フィンガプリント情報に基づいて、ACR識別処理が行われ、その識別結果が受信装置12に送信される。なお、ACRサーバ13において、デジタルテレビジョン番組の識別結果を得られない場合には、識別結果の送信は行われない。
 ステップS14において、制御部61は、通信I/F58を制御して、識別結果の問い合わせ先のACRサーバ13から、識別結果を受信したか否かを判定する。
 ステップS14において、識別結果を受信していないと判定された場合、処理は、ステップS11に戻り、それ以降の処理が繰り返される。例えば、受信装置12において、放送休止中のチャンネルが選択されている場合に、フィンガプリント情報が抽出されると、ACRサーバ13側では、番組を識別することができず、識別結果の送信が行われないことになる(識別結果は送信されるが、該当なしを示すことにしてもよい)。
 一方、ステップS14において、識別結果を受信したと判定された場合、処理は、ステップS15に進められる。ステップS15において、制御部61は、通信I/F58により受信された選局中のデジタルテレビジョン番組の識別結果の解析を行う。ここでは、識別結果として、選局中のデジタルテレビジョン番組のチャンネル番号情報、時間位置情報、及びコマンド提供先情報が得られる。
 ステップS16において、制御部61は、通信I/F58を制御して、コマンド提供先情報が示すURLに対応するコマンドサーバ14にアクセスし、チャンネル番号情報及び時間位置情報を送信することで、受信装置12にて実行可能となるコマンドを問い合わせる。コマンドサーバ14では、チャンネル番号情報に対応するデジタルテレビジョン番組において、時間位置情報に対応する時間帯に実行可能となるコマンドが取得され、受信装置12に送信される。
 ステップS17において、制御部61は、通信I/F58を制御して、コマンドの問い合わせ先のコマンドサーバ14から、コマンドを受信したか否かを判定する。
 ステップS17において、コマンドを受信していないと判定された場合、処理は、ステップS11に戻り、それ以降の処理が繰り返される。例えば、コマンドサーバ14では、チャンネル番号情報及び時間位置情報により定められる条件に一致するコマンドが存在しない場合、コマンドの送信は行われないことになる(コマンドは送信されるが、処理不要を示すことにしてもよい)。
 一方、ステップS17において、コマンドを受信したと判定された場合、処理は、ステップS18に進められる。ステップS18において、コマンド解析部60は、コマンドに含まれるコマンドIDを読み出し、当該コマンドに対してステップS19以降の処理を既に実行済みであるか否かを判定する。既に、ステップS19以降の処理を実行済みであると判定された場合、処理は、ステップS11に戻り、それ以降の処理が繰り返される。一方、当該コマンドに対して、ステップS19以降の処理を実行していないと判定された場合、処理はステップS19に進められる。
 ステップS19において、コマンド解析部60は、コマンドに含まれるコマンドアクションを読み出し、当該コマンドが、レジスタ、エクスキュート、ターミネート、インジェクトイベント、又はサスペンドのいずれかであるかを判別する。
 ステップS20において、コマンド解析部60は、ステップS19の判別結果がレジスタであるか否かを判定し、レジスタであると判定された場合、処理はステップS21に進められる。
 ステップS21において、制御部61は、通信I/F58を制御して、当該コマンドのアプリURLに対応するアプリサーバ15にアクセスして、アプリIDにより特定されるデータ放送用アプリを取得させる。通信I/F58により取得されたデータ放送用アプリは、キャッシュメモリ65に保持される。また、制御部61は、取得されたデータ放送用アプリに対応付けて、そのアプリ有効期限とアプリ保持優先度を、メモリ62に記憶する。これにより、キャッシュメモリ65に保持されたデータ放送用アプリは、制御部61により、有効期限と保持優先度に従って管理される。
 この後、処理は、ステップS11に戻り、それ以降の処理が繰り返される。
 ステップS20において、ステップS19の判定結果がレジスタでないと判定された場合、処理は、ステップS22に進められる。ステップS22において、制御部61は、ステップS19の判定結果がエクスキュートであるか否かを判定し、エクスキュートであると判定された場合、処理は、ステップS23に進められる。
 ステップS23において、アプリエンジン64は、制御部61からの制御に従い、当該コマンドのコマンドIDにより特定されるデータ放送用アプリが休止中(サスペンド状態)であるか否かを判定する。具体的には、退避メモリ66Bに、コマンドIDにより特定されるデータ放送用アプリに、休止の状態を示すデータが退避されている場合に休止中であると判定する。
 ステップS23において、コマンドIDにより特定されるデータ放送用アプリが休止中ではないと判定された場合、処理はステップS24に進められる。ステップS24において、アプリエンジン64は、制御部61からの制御に従い、コマンドIDにより特定されるデータ放送用アプリが未取得(キャッシュメモリ65に存在しない)の場合にそれを取得する。
 ステップS25において、制御部61は、同期制御処理を行う。ここで、同期制御処理の詳細について、図12のフローチャートを参照して説明する。
 ステップS51において、制御部61は、当該コマンドに含まれるコマンド発効時刻が設定されているか否かを判定する。
 ステップS51において、コマンド発効時刻が設定されていると判定された場合、処理は、ステップS52に進められる。ステップS52において、制御部61は、コマンドを実行する時刻になったか否かを判定する。
 このコマンド発効時刻は、例えば、「絶対日時」、「相対時間」、又は「PTS」により指定される。ステップS52の判定処理では、「絶対日時」が指定されている場合、あらかじめ設定された特定の日時となった否かが判定される。また、「相対時間」が指定されている場合、例えば、デジタルテレビジョン番組の開始時刻から、あらかじめ設定された特定の時間が経過したか否かが判定される。さらに、「PTS」が指定された場合、クロック同期部59からのクロックに基づいて、コマンドを実行する時刻になったか否かが判定される。
 ステップS52の判定処理では、コマンドを実行する時刻になったと判定されるまで、判定処理が繰り返される。すなわち、コマンドを実行する時刻になるまで、当該コマンドの実行を待つことになる。
 そして、ステップS52において、コマンドを実行する時刻になったと判定された場合、処理は、図11のステップS25に戻され、それ以降の処理が実行される。
 ステップS26において、アプリエンジン64は、制御部61からの制御に従い、現在実行中のデータ放送用アプリがあるならば、それを終了させる。そして、ステップS27において、アプリエンジン64は、制御部61からの制御に従い、コマンドIDにより特定されるデータ放送用アプリを起動する。
 すなわち、ステップS25の同期制御処理(図12)を行うことで、当該コマンドを実行する時刻が経過してから、データ放送用アプリが起動されるので、例えば、デジタルテレビジョン番組の進行にあわせて、データ放送用アプリを起動させたり、あるいは、ある特定の時間帯にデータ放送用アプリを起動させたりすることが可能となる。
 また、コマンド発効時刻が設定されていない場合(図12のステップS51の「No」)、図12のステップS52はスキップされ、ステップS24の取得処理が終了した後、直ちに、ステップS26,S27が実行される。この場合、未取得のデータ放送用アプリが取得された後、直ちに、そのデータ放送用アプリが起動されることになる。
 この後、処理はステップS11に戻り、それ以降が繰り返される。
 また、ステップS23において、コマンドIDにより特定されるデータ放送用アプリが休止中(サスペンド状態)であると判定された場合、処理はステップS28に進められる。
 ステップS28において、制御部61は、図12の同期制御処理を行う。すなわち、コマンド発効時刻が設定されている場合には、コマンドを実行する時刻になったとき、ステップS29の処理が行われ、コマンド発効時刻が設定されていない場合には、直ちに、ステップS29の処理が行われる。
 ステップS29において、アプリエンジン64は、制御部61からの制御に従い、退避メモリ66Bのデータをワークメモリ66Aに移して、コマンドIDにより特定されるデータ放送用アプリを起動する。これにより、コマンドIDにより特定される、休止中のデータ放送用アプリが休止された状態から再開されることになる。この後、処理はステップS11に戻り、それ以降が繰り返される。
 ステップS22において、ステップS19の判別結果がエクスキュートではないと判定された場合、処理はステップS30に進められる。ステップS30において、制御部61は、ステップS19の判別結果がインジェクトイベントであるか否かを判定し、インジェクトイベントであると判定された場合、処理はステップS31に進められる。
 ステップS31において、制御部61は、図12の同期制御処理を行う。すなわち、コマンド発効時刻が設定されている場合には、コマンドを実行する時刻になったとき、ステップS32の処理が行われ、コマンド発効時刻が設定されていない場合には、直ちに、ステップS32の処理が行われる。
 ステップS32において、制御部61は、当該コマンドのコマンドIDと、動作中のデータ放送用アプリのコマンドIDが一致する場合のみ、アプリエンジン64を制御して、動作中のデータ放送用アプリにおいて、コマンドのイベントIDに対応するイベントを発火(実行)させる。この後、処理はステップS11に戻り、それ以降が繰り返される。
 ステップS30において、ステップS19の判別結果がインジェクトイベントではないと判定された場合、処理はステップS33に進められる。ステップS33において、制御部61は、ステップS19の判別結果がサスペンドであるか否かを判定し、サスペンドであると判定された場合、処理はステップS34に進められる。
 ステップS34において、制御部61は、図12の同期制御処理を行う。すなわち、コマンド発効時刻が設定されている場合には、コマンドを実行する時刻になったとき、ステップS35の処理が行われ、コマンド発効時刻が設定されていない場合には、直ちに、ステップS35の処理が行われる。
 ステップS35において、アプリエンジン64は、制御部61からの制御に従い、現在実行中のデータ放送用アプリの状態を示すデータ(すなわち、現在ワークメモリ66Aに書き込まれているデータ。表示する情報に階層構造がある場合、表示されている情報の階層を示す情報を含む)を退避メモリ66Bに退避させる。この後、処理はステップS11に戻り、それ以降が繰り返される。
 ステップS33において、ステップS19の判別結果がサスペンドではないと判定された場合、ステップS19の判別結果はターミネートであるので、処理はステップS36に進められる。
 ステップS36において、制御部61は、図12の同期制御処理を行う。すなわち、コマンド発効時刻が設定されている場合には、コマンドを実行する時刻になったとき、ステップS37の処理が行われ、コマンド発効時刻が設定されていない場合には、直ちに、ステップS37の処理が行われる。
 ステップS37において、アプリエンジン64は、制御部61からの制御に従い、コマンドIDにより特定されるデータ放送用アプリが実行中であればそれを終了させる。ステップS38において、アプリエンジン64は、制御部61からの制御に従い、コマンドIDにより特定されるデータ放送用アプリに関するデータを、ワークメモリ66Aおよび退避メモリ66Bから消去するとともに、データ放送用アプリをキャッシュメモリ65から消去させる。この後、処理はステップS11に戻り、それ以降が繰り返される。
 以上でコマンド対応処理の説明を終了する。前述したコマンド対応処理によれば、テレビジョン放送のAVコンテンツ(例えばデジタルテレビジョン番組やCMなど)に連動してデータ放送用アプリを起動したり、イベントを発火させたり、終了したりすることができる。さらに、データ放送用アプリを実行中の状態を保持したままで休止させて、他のデータ情報用アプリを実行、終了し、その後、休止したデータ放送用アプリを休止状態から再開することができる。
 また、コマンド対応処理を行うことで、ACR技術を用いて、デジタルテレビジョン番組に連動するデータ放送用アプリを提供することが可能となる。
 なお、図11の例では、ステップS24乃至S27において、未取得のデータ放送用アプリを取得した後(S24)、コマンドを実行する時刻となったとき(S25)、取得されたデータ放送用アプリを起動するとして説明したが、ステップS24とS25の処理の順番を逆にしてもよい。すなわち、この場合、コマンドを実行する時刻となるまでは、未取得のデータ放送用アプリの取得は行われず、コマンドを実行する時刻となったときに、未取得のデータ放送用アプリが取得され、起動されることになる。
[動作シナリオ]
 受信装置12において、前述したコマンド対応処理を行うことで、例えば、図13及び図14に示すようなデータ放送用アプリの運用が可能となる。
 図13は、コマンド発効時刻が設定されていない場合の動作シナリオの例を示す図である。
 受信装置12は、放送装置11からのデジタルテレビジョン放送信号に対応するデジタルテレビジョン番組がモニタに表示されているとき、定期的に、選局中の番組のビデオ信号などからフィンガプリント情報を抽出して、ACRサーバ13に送信する。フィンガプリント情報を受信したACRサーバ13では、ACR識別処理が行われ、その識別結果が、受信装置12に送信される。
 受信装置12は、ACRサーバ13からの識別結果に応じて、コマンドサーバ14に対してコマンドを問い合わせるが、受信装置12にて実行可能となるコマンドが存在しない場合には、コマンドサーバ14からの応答は行われない。
 その後、受信装置12では、フィンガプリント情報の抽出が定期的に行われ、それに対応してACRサーバ13とコマンドサーバ14に対する問い合わせも継続的に行われる。そして、受信装置12は、コマンドサーバ14からエクスキュートコマンドを受信した場合、アプリURLに対応するアプリサーバ15にアクセスし、データ放送用アプリを取得して、実行する。これにより、モニタに表示されたデジタルテレビジョン番組には、データ放送用アプリに対応する番組関連情報(図中の「Video Synchronized application」)などが重畳表示される。
 また、この状態で、コマンドサーバ14からエクスキュートコマンドを受信した場合、受信装置12は、既に、データ放送用アプリが起動されているため、このエクスキュートコマンドを無視する。その後もフィンガプリント情報の抽出が継続して行われ、コマンドサーバ14からターミネートコマンドを受信した場合、受信装置12は、実行中のデータ放送用アプリを終了する。これにより、モニタでは、番組に重畳表示されていた番組関連情報が消されて、デジタルテレビジョン番組のみが表示される。
 なお、図13の例では、受信装置12において、コマンドサーバ14から受信されるコマンドとして、エクスキュートコマンドとターミネートコマンドを説明したが、それ以外のコマンドが受信されるようにしてもよい。例えば、データ放送用アプリの実行中に、インジェクトイベントコマンドが受信された場合には、実行中のデータ放送用アプリにおいてイベントが引火され、サスペンドコマンドが受信された場合には、実行中のデータ放送用アプリが休止される。
 以上のように、図13の動作シナリオでは、コマンドサーバ14により送信されるコマンドには、コマンド発効時刻が設定されていないため、受信装置12では、コマンドサーバ14から受信したコマンドを直ちに実行することになる。
 図14は、コマンド発効時刻が設定された場合の動作シナリオの例を示す図である。
 図14において、受信装置12は、フィンガプリント情報の抽出を定期的に行い、ACRサーバ13からエクスキュートコマンドを受信した場合、アプリURLに対応するアプリサーバ15にアクセスして、データ放送用アプリを取得する。また、当該エクスキュートコマンドには、コマンド発効時刻が設定されているため、データ放送用アプリを取得した後、コマンドを実行する時刻になるまで、エクスキュートコマンドの実行を待つことになる(図中の「同期待ち」)。例えば、デジタルテレビジョン番組の特定のシーンに同期させて、データ放送用アプリに対応する番組関連情報を表示させる場合、その特定のシーンと同期するための時刻がコマンド発効時刻に記述されているので、コマンドを実行する時刻になるのを待って、データ放送用アプリを起動することになる。これにより、デジタルテレビジョン番組の特定のシーンと番組関連情報(図中の「Video Synchronized application」)を同期させることができる。
 その後もフィンガプリント情報の抽出が継続して行われ、コマンドサーバ14からターミネートコマンドを受信した場合、受信装置12は、コマンドを実行する時刻を待って、実行中のデータ放送用アプリを終了させる。これにより、モニタでは、デジタルテレビジョン番組に重畳表示されていた番組関連情報が消されて、番組のみが表示される。
 図14の例では、受信装置12において、コマンドサーバ14から受信されるコマンドとして、エクスキュートコマンドとターミネートコマンドを説明したが、それ以外のコマンドが受信されるようにしてもよい。例えば、データ放送用アプリの実行中に、インジェクトイベントコマンドが受信された場合、コマンドを実行する時刻を待って、実行中のデータ放送用アプリにおいてイベントが引火される。また、データ放送用アプリの実行中に、サスペンドコマンドが受信された場合には、コマンドを実行する時刻を待って、実行中のデータ放送用アプリが休止される。
 以上のように、図14の動作シナリオでは、コマンドサーバ14により送信されるコマンドには、コマンド発効時刻が設定されているため、受信装置12では、コマンドを実行する時刻を待って、コマンドサーバ14から受信したコマンドを実行することになる。これにより、受信装置12では、フィンガプリント情報の抽出の分解能ではなく、任意のタイミングで、コマンドを実行することが可能となる。
[複数のデータ放送用アプリの運用]
 以上においては、データ放送用アプリがエクスキュートコマンドに応じて起動される場合のみを説明したが、エクスキュートコマンドを用いることなくデータ放送用アプリを起動させることが可能である。
 具体的には、図15に示されるように、エクスキュートコマンドに応じて起動されるデータ放送用アプリApp0の内部に、他のデータ放送用アプリApp1,App2などを起動させるための関数を記述しておけばよい。これにより、データ放送用アプリApp0の進行状況やデータ放送用アプリApp0に対するユーザの操作などに応じて、データ放送用アプリApp1などを起動させることができる。
 図16は、3つのデータ放送用アプリapp0,app1,app2を連携して起動させる運用の例を示している。
 はじめに、データ放送用アプリapp0に対するエクスキュートコマンド、データ放送用アプリapp1に対するレジスタコマンド、及びデータ放送用アプリapp2に対するレジスタコマンドが放送される。これらを受信した受信装置12では、データ放送用アプリapp0が取得、登録されて起動される。実行されたデータ放送用アプリapp0の画面には、データ放送用アプリapp1,app2にそれぞれ対応するアイコンが表示される。これと同時に、データ放送用アプリapp1,app2が取得、登録される。
 ユーザがデータ放送用アプリapp0の画面に表示されたデータ放送用アプリapp1に対応するアイコンを選択した場合、実行中のデータ放送用アプリapp0が終了されるとともに、データ放送用アプリapp1が起動される。この後は、実行中のデータ放送用アプリapp1に対するインジェクトイベントコマンド、サスペンドコマンド、エクスキュートコマンド、ターミネートコマンドにそれぞれ対応して、データ放送用アプリapp1のイベント発火、休止、再開、終了が行われる。
 ユーザがデータ放送用アプリapp0の画面に表示されたデータ放送用アプリapp2に対応するアイコンを選択した場合、実行中のデータ放送用アプリapp0が終了されるとともに、データ放送用アプリapp2が起動される。この後は、実行中のデータ放送用アプリapp2に対するインジェクトイベントコマンド、ターミネートコマンドにそれぞれ対応して、データ放送用アプリapp2のイベント発火、終了が行われる。
 上記運用によれば、エクスキュートコマンドを用いることなく複数のデータ放送用アプリを連携させて起動させることが可能である。
[具体的な運用例]
 また、本技術によれば、AVコンテンツに対応したメタデータがなくても、ACRサーバ13によりAVコンテンツの識別が行われるため、例えば、以下のような運用が可能となる。
 図17は、本技術を適用した放送システムの具体例を示す図である。
 図17に示すように、コンテンツプロバイダ(Content Provider)から提供されるAVコンテンツには、デジタルテレビジョン番組に関するメタデータが付与されており、ASP(Authorized Service Provider)からのデジタルテレビジョン放送信号を直接受信する受信装置(図中の「TV1」)は、AVコンテンツとともに送信されるメタデータを取得できる。したがって、当該受信装置は、メタデータに基づいて、放送局などにより管理されるアプリサーバ(図中の「Server」)にアクセスすることで、データ放送用アプリを取得して、実行することが可能となる。
 一方、CATV網や衛星通信網などを介して、ASPからのデジタルテレビジョン放送信号を受信する場合、セットトップボックス(図中の「STB(Set Top Box)」)による変換後の信号が、HDMI(High Definition Multimedia Interface)経由で、受信装置(図中の「TV2」)により受信される。この場合、セットトップボックスからの出力は、AVコンテンツのみとなり、メタデータを利用することはできない。したがって、当該受信装置は、AVコンテンツから抽出されたフィンガプリント情報(図中の「Fingerprint」)を、ACRサーバ(図中の「ACR System」)に送信することで、アプリサーバ(図中の「Server」)からデータ放送用アプリを取得して、実行することが可能となる。
 以上のように、デジタルテレビジョン番組がCATV網や衛星通信網などを介して再送信される場合においても、番組に連動し得るデータ放送用コンテンツのサービスを実現することができる。
 すなわち、前述した説明では、例えば、図1に示すように、放送装置11からのデジタルテレビジョン放送信号を直接、受信装置12が受信する例を示したが、本技術は、CATV網や衛星通信網などのように、セットトップボックス等を使用することにより、AVコンテンツとともに送信されるメタデータを受信装置に送ることができない場合に適用すると、より効果的である。
<第2の実施の形態>
[通信システムの構成例]
 前述した説明では、受信装置12が、放送装置11から送信(放送)されたAVコンテンツのデジタルテレビジョン放送信号を受信する例を説明したが、AVコンテンツは、インターネット16を介して配信されるようにしてもよい。
 図18は、本実施の形態である通信システム81を示している。
 図18において、図1と対応する箇所には同一の符号が付してあり、その説明は適宜省略する。
 すなわち、図18では、図1と比較すると、放送装置11の代わりに、インターネット16に接続された配信サーバ91が設けられている。配信サーバ91は、受信装置12からの要求に応じて、AVコンテンツを、インターネット16を介して、受信装置12に配信する。
 受信装置12は、配信サーバ91からのAVコンテンツのビデオ信号及びオーディオ信号から、フィンガプリント情報を抽出して、ACRサーバ13に送信する。ACRサーバ13では、ACR識別処理が行われるが、ここでは、識別結果として、コンテンツ識別情報、時間位置情報、コマンド提供先情報が送信される。すなわち、放送装置11からのAVコンテンツを取得した場合には、チャンネル番号情報が識別結果として得られるが、配信サーバ91からのAVコンテンツを取得した場合には、コンテンツIDなどのコンテンツ識別情報が識別結果として得られる。
 受信装置12は、コマンド提供先情報に記述されたURLに対応するコマンドサーバ14にアクセスして、コンテンツ識別情報及び時間位置情報を送信することで、受信装置12にて実行可能となるコマンドを問い合わせる。そして、受信装置12は、コマンドサーバ14からのコマンドに応じて、データ放送用アプリの動作を制御することになる。
 このように、受信装置12は、AVコンテンツを、放送網を介して受信するのみならず、通信網を介して受信することができる。そして、放送網と通信網のどちらから受信されたAVコンテンツであっても、ACRサーバ13により識別されるので、受信装置12は、コマンドサーバ14から、識別結果に応じたコマンドを取得することができる。
 なお、前述の説明では、ACRサーバ13、コマンドサーバ14、及びアプリサーバ15など、提供する機能ごとにサーバを複数設ける例を説明したが、それらの機能の全部又は一部をまとめて、1又は複数のサーバにより提供されるようにしてもよい。
 また、ACRサーバ13は、識別結果を受信装置12に送信せずに、コマンドサーバ14に直接送信するようにしてもよい。例えば、受信装置12が、フィンガプリント情報をACRサーバ13に送信すると、ACRサーバ13は、ACR識別処理を行い、その識別結果を、コマンドサーバ14に送信する。そして、コマンドサーバ14は、ACRサーバ13からの識別結果に応じて、コマンドを受信装置12する。これにより、受信装置12は、フィンガプリント情報をACRサーバ13に送信するだけで、コマンドサーバ14からコマンドを取得する、といった運用が可能となる。さらに、コマンドサーバ14が、データ放送用アプリの取得コマンドを、受信装置12に送信せずに、アプリサーバ15に直接送信することで、例えば、受信装置12では、フィンガプリント情報をACRサーバ13に送信すると、アプリサーバ15からデータ放送用アプリを取得する、といった運用が可能となる。
[本技術を適用したコンピュータの説明]
 前述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
 そこで、図19は、前述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
 プログラムは、コンピュータ100に内蔵されているハードディスク等の記録部108やROM(Read Only Memory)102にあらかじめ記録しておくことができる。
 あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory),MO(Magneto Optical)ディスク,DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブルメディア111に、一時的あるいは永続的に格納(記録)しておくことができる。このようなリムーバブルメディア111は、いわゆるパッケージソフトウエアとして提供することができる。
 なお、プログラムは、前述したようなリムーバブルメディア111からコンピュータ100にインストールする他、ダウンロードサイトから、デジタル衛星放送用の人工衛星を介して、コンピュータ100に無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータ100に有線で転送し、コンピュータ100では、そのようにして転送されてくるプログラムを、通信部109で受信し、記録部108にインストールすることができる。
 コンピュータ100は、CPU(Central Processing Unit)101を内蔵している。CPU101には、バス104を介して、入出力インタフェース105が接続されており、CPU101は、入出力インタフェース105を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部106が操作等されることにより指令が入力されると、それに従って、ROM102に格納されているプログラムを実行する。あるいは、また、CPU101は、記録部108に格納されているプログラム、衛星若しくはネットワークから転送され、通信部109で受信されて記録部108にインストールされたプログラム、又はドライブ110に装着されたリムーバブルメディア111から読み出されて記録部108にインストールされたプログラムを、RAM(Random Access Memory)103にロードして実行する。これにより、CPU101は、前述したフローチャートにしたがった処理、あるいは前述したブロック図の構成により行われる処理を行う。そして、CPU101は、その処理結果を、必要に応じて、例えば、入出力インタフェース105を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部107から出力、あるいは、通信部109から送信、さらには、記録部108に記録等させる。
 ここで、本明細書において、コンピュータ100に各種の処理を行わせるためのプログラムを記述する処理ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理(例えば、並列処理あるいはオブジェクトによる処理)も含むものである。
 また、プログラムは、1のコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
 なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
 また、本技術の実施の形態は、前述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
 さらに、本技術は、以下の構成とすることも可能である。
[1]
 AVコンテンツを受信する受信部と、
 受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
 抽出した前記特徴量からACR(Automatic Content Recognition)技術を用いて識別される前記AVコンテンツの識別結果を取得する識別結果取得部と、
 取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
 取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する制御部と
 を備える受信装置。
[2]
 前記コマンドは、前記アプリケーションプログラムの取得若しくは登録、取得若しくは起動、イベント発火、中断、又は終了のうちのいずれかを示しており、
 前記制御部は、各コマンドに応じて、前記アプリケーションプログラムの取得若しくは登録、若しくは取得若しくは起動、又は実行中の前記アプリケーションプログラムのイベント発火、休止、若しくは終了を制御する
 [1]に記載の受信装置。
[3]
 前記コマンドには、前記コマンドを実行する時刻を示す時刻情報が含まれており、
 前記制御部は、前記時刻情報に応じて、前記コマンドを実行する
 [1]又は[2]に記載の受信装置。
[4]
 前記時刻情報は、前記AVコンテンツの進行と関係なくあらかじめ定められた特定の時刻となったときに前記コマンドを実行させるための情報、又は前記AVコンテンツの進行と連動してあらかじめ定められた特定の時間が経過したときに前記コマンドを実行させるための情報である
 [3]に記載の受信装置。
[5]
 前記制御部は、前記コマンドが取得若しくは起動を示し、かつ、前記アプリケーションプログラムを取得していない場合、前記アプリケーションプログラムを取得した後、前記コマンドを実行する時刻となったとき、取得した前記アプリケーションプログラムを起動する
 [3]又は[4]に記載の受信装置。
[6]
 前記特徴量抽出部は、前記AVコンテンツのビデオ信号及びオーディオ信号のいずれか一方又は双方から前記特徴量を抽出する
 [1]乃至[5]のいずれかに記載の受信装置。
[7]
 受信装置が、
 AVコンテンツを受信し、
 受信した前記AVコンテンツのデータから特徴量を抽出し、
 抽出した前記特徴量からACR技術を用いて識別される前記AVコンテンツの識別結果を取得し、
 取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得し、
 取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する
 ステップを含む受信方法。
[8]
 AVコンテンツを受信する受信部と、
 受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
 抽出した前記特徴量からACR技術を用いて識別される前記AVコンテンツの識別結果を取得する識別結果取得部と、
 取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
 取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する制御部と
 して、コンピュータを機能させるためのプログラム。
[9]
 受信装置、第1の情報処理装置、第2の情報処理装置、及び第3の情報処理装置から構成される情報処理システムにおいて、
 前記受信装置は、
  AVコンテンツを受信する受信部と、
  受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
  抽出した前記特徴量を前記第1の情報処理装置に送信して、前記第1の情報処理装置にて前記特徴量からACR技術を用いて識別された前記前記AVコンテンツの識別結果を取得する識別結果取得部と、
  前記第1の情報処理装置から取得した前記識別結果を前記第2の情報処理装置に送信して、前記第2の情報処理装置から、前記識別結果に応じた、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
  前記第2の情報処理装置から取得した前記コマンドに応じて、前記第3の情報処理装置から取得した前記アプリケーションプログラムの動作を制御する制御部と
 を備え、
 前記第1の情報処理装置は、
  前記受信装置からの問い合わせに応じて、ACR技術を用いて前記特徴量から前記AVコンテンツを識別するコンテンツ識別部を備え、
 前記第2の情報処理装置は、
  前記受信装置からの問い合わせに応じて、前記識別結果に応じた前記コマンドを提供するコマンド提供部を備え、
 前記第3の情報処理装置は、
  前記受信装置からの問い合わせに応じて、前記コマンドに応じた前記アプリケーションプログラムを提供するアプリケーション提供部を備える
 情報処理システム。
 1 放送システム, 11 放送装置, 12 受信装置, 13 ACRサーバ, 14 コマンドサーバ, 15 アプリサーバ, 51 チューナ, 57 フィンガプリント抽出部, 58 通信I/F, 60 コマンド解析部, 61 制御部, 64 アプリエンジン, 81 通信システム, 91 配信サーバ, 100 コンピュータ, 101 CPU

Claims (9)

  1.  AVコンテンツを受信する受信部と、
     受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
     抽出した前記特徴量からACR(Automatic Content Recognition)技術を用いて識別される前記AVコンテンツの識別結果を取得する識別結果取得部と、
     取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
     取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する制御部と
     を備える受信装置。
  2.  前記コマンドは、前記アプリケーションプログラムの取得若しくは登録、取得若しくは起動、イベント発火、中断、又は終了のうちのいずれかを示しており、
     前記制御部は、各コマンドに応じて、前記アプリケーションプログラムの取得若しくは登録、若しくは取得若しくは起動、又は実行中の前記アプリケーションプログラムのイベント発火、休止、若しくは終了を制御する
     請求項1に記載の受信装置。
  3.  前記コマンドには、前記コマンドを実行する時刻を示す時刻情報が含まれており、
     前記制御部は、前記時刻情報に応じて、前記コマンドを実行する
     請求項2に記載の受信装置。
  4.  前記時刻情報は、前記AVコンテンツの進行と関係なくあらかじめ定められた特定の時刻となったときに前記コマンドを実行させるための情報、又は前記AVコンテンツの進行と連動してあらかじめ定められた特定の時間が経過したときに前記コマンドを実行させるための情報である
     請求項3に記載の受信装置。
  5.  前記制御部は、前記コマンドが取得若しくは起動を示し、かつ、前記アプリケーションプログラムを取得していない場合、前記アプリケーションプログラムを取得した後、前記コマンドを実行する時刻となったとき、取得した前記アプリケーションプログラムを起動する
     請求項3に記載の受信装置。
  6.  前記特徴量抽出部は、前記AVコンテンツのビデオ信号及びオーディオ信号のいずれか一方又は双方から前記特徴量を抽出する
     請求項1に記載の受信装置。
  7.  受信装置が、
     AVコンテンツを受信し、
     受信した前記AVコンテンツのデータから特徴量を抽出し、
     抽出した前記特徴量からACR技術を用いて識別される前記AVコンテンツの識別結果を取得し、
     取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得し、
     取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する
     ステップを含む受信方法。
  8.  AVコンテンツを受信する受信部と、
     受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
     抽出した前記特徴量からACR技術を用いて識別される前記AVコンテンツの識別結果を取得する識別結果取得部と、
     取得した前記識別結果に応じて、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
     取得した前記コマンドに応じて、前記アプリケーションプログラムの動作を制御する制御部と
     して、コンピュータを機能させるためのプログラム。
  9.  受信装置、第1の情報処理装置、第2の情報処理装置、及び第3の情報処理装置から構成される情報処理システムにおいて、
     前記受信装置は、
      AVコンテンツを受信する受信部と、
      受信した前記AVコンテンツのデータから特徴量を抽出する特徴量抽出部と、
      抽出した前記特徴量を前記第1の情報処理装置に送信して、前記第1の情報処理装置にて前記特徴量からACR技術を用いて識別された前記前記AVコンテンツの識別結果を取得する識別結果取得部と、
      前記第1の情報処理装置から取得した前記識別結果を前記第2の情報処理装置に送信して、前記第2の情報処理装置から、前記識別結果に応じた、前記AVコンテンツに連動して実行されるアプリケーションプログラムの動作を制御するためのコマンドを取得するコマンド取得部と、
      前記第2の情報処理装置から取得した前記コマンドに応じて、前記第3の情報処理装置から取得した前記アプリケーションプログラムの動作を制御する制御部と
     を備え、
     前記第1の情報処理装置は、
      前記受信装置からの問い合わせに応じて、ACR技術を用いて前記特徴量から前記AVコンテンツを識別するコンテンツ識別部を備え、
     前記第2の情報処理装置は、
      前記受信装置からの問い合わせに応じて、前記識別結果に応じた前記コマンドを提供するコマンド提供部を備え、
     前記第3の情報処理装置は、
      前記受信装置からの問い合わせに応じて、前記コマンドに応じた前記アプリケーションプログラムを提供するアプリケーション提供部を備える
     情報処理システム。
PCT/JP2012/068872 2011-08-05 2012-07-25 受信装置、受信方法、プログラム、及び情報処理システム WO2013021824A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
EP12822427.6A EP2741497A4 (en) 2011-08-05 2012-07-25 RECEIVING DEVICE, RECEIVING METHOD, PROGRAM, AND INFORMATION PROCESSING SYSTEM
RU2014103001/07A RU2594000C2 (ru) 2011-08-05 2012-07-25 Приемное устройство, способ приема, носитель записи и система обработки информации
MX2014001202A MX2014001202A (es) 2011-08-05 2012-07-25 Dispositivo de recepcion, metodo de recepcion, programa y sistema de procesamiento de informacion.
CA2843382A CA2843382C (en) 2011-08-05 2012-07-25 Receiving device, receiving method, program, and information processing system
JP2013527954A JP6208012B2 (ja) 2011-08-05 2012-07-25 受信装置、受信方法、プログラム、及び情報処理システム
KR1020147001991A KR102060449B1 (ko) 2011-08-05 2012-07-25 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
CN201280038061.6A CN103718564B (zh) 2011-08-05 2012-07-25 接收装置、接收方法以及信息处理系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201161515560P 2011-08-05 2011-08-05
US61/515560 2011-08-05

Publications (1)

Publication Number Publication Date
WO2013021824A1 true WO2013021824A1 (ja) 2013-02-14

Family

ID=47668339

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/068872 WO2013021824A1 (ja) 2011-08-05 2012-07-25 受信装置、受信方法、プログラム、及び情報処理システム

Country Status (10)

Country Link
US (3) US8938756B2 (ja)
EP (1) EP2741497A4 (ja)
JP (1) JP6208012B2 (ja)
KR (1) KR102060449B1 (ja)
CN (1) CN103718564B (ja)
CA (1) CA2843382C (ja)
MX (1) MX2014001202A (ja)
RU (1) RU2594000C2 (ja)
TW (1) TWI528822B (ja)
WO (1) WO2013021824A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2656619A1 (en) * 2010-12-23 2013-10-30 Yahoo! Inc. Signal-driven interactive television
JP2014531798A (ja) * 2011-09-12 2014-11-27 インテル・コーポレーション マルチメディア検索を用いて視聴者がテレビで視聴しているものを特定すること
JP2015512198A (ja) * 2012-02-10 2015-04-23 エルジー エレクトロニクス インコーポレイティド 映像表示装置及びその動作方法
JP2016516321A (ja) * 2013-02-21 2016-06-02 エルジー エレクトロニクス インコーポレイティド 映像表示装置及びその動作方法
US9491502B2 (en) 2010-04-02 2016-11-08 Yahoo! Inc. Methods and systems for application rendering and management on internet television enabled displays
JP2020521376A (ja) * 2017-05-17 2020-07-16 グーグル エルエルシー イメージデータに少なくとも部分的に基づく、アクションを実行するためのエージェントの決定

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9449090B2 (en) 2009-05-29 2016-09-20 Vizio Inscape Technologies, Llc Systems and methods for addressing a media database using distance associative hashing
US9094714B2 (en) 2009-05-29 2015-07-28 Cognitive Networks, Inc. Systems and methods for on-screen graphics detection
US10949458B2 (en) 2009-05-29 2021-03-16 Inscape Data, Inc. System and method for improving work load management in ACR television monitoring system
US8769584B2 (en) 2009-05-29 2014-07-01 TVI Interactive Systems, Inc. Methods for displaying contextually targeted content on a connected television
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US8730301B2 (en) 2010-03-12 2014-05-20 Sony Corporation Service linkage to caption disparity data transport
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
WO2012043355A1 (ja) 2010-10-01 2012-04-05 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
JP5783402B2 (ja) 2011-01-25 2015-09-24 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
KR102060449B1 (ko) * 2011-08-05 2019-12-30 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
KR101893151B1 (ko) 2011-08-21 2018-08-30 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
JP6071184B2 (ja) 2011-10-26 2017-02-01 サターン ライセンシング エルエルシーSaturn Licensing LLC 受信装置、受信方法、プログラム、及び情報処理システム
JP5982791B2 (ja) * 2011-11-16 2016-08-31 ソニー株式会社 情報処理装置及び情報処理方法、情報提供装置、並びに、情報提供システム
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US9204199B2 (en) * 2011-12-06 2015-12-01 Lg Electronics Inc. Image display apparatus and methods for operating the same
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
US9015745B2 (en) * 2012-02-07 2015-04-21 Turner Broadcasting System, Inc. Method and system for detection of user-initiated events utilizing automatic content recognition
KR102267861B1 (ko) 2012-06-19 2021-06-23 소니그룹주식회사 대화형 텔레비전을 위한 트리거 파라미터 테이블의 확장
MX337934B (es) 2012-07-12 2016-03-28 Sony Corp Descriptor de servicio parametrizado para servicios de television avanzados.
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9883247B2 (en) 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9769503B2 (en) * 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US9288509B2 (en) 2012-12-28 2016-03-15 Turner Broadcasting System, Inc. Method and system for providing synchronized advertisements and services
US9942601B2 (en) 2013-01-24 2018-04-10 Saturn Licensing Llc Storing non-real time content
US10257564B2 (en) 2013-01-24 2019-04-09 Saturn Licensing Llc Distributed non-real-time content
US9161074B2 (en) * 2013-04-30 2015-10-13 Ensequence, Inc. Methods and systems for distributing interactive content
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
US9955192B2 (en) 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
WO2015100070A1 (en) * 2013-12-27 2015-07-02 Alibaba Group Holding Limited Presenting information based on a video
JP2017506389A (ja) * 2014-02-07 2017-03-02 ヴィジブル ワールド インコーポレイテッド コンテンツ配信情報及び検証を提供するためのシステム及び方法
KR101902426B1 (ko) * 2014-03-11 2018-09-28 주식회사 사운들리 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
EP3171609B1 (en) * 2014-07-17 2021-09-01 Panasonic Intellectual Property Management Co., Ltd. Recognition data generation device, image recognition device, and recognition data generation method
KR102459246B1 (ko) 2014-08-01 2022-10-27 소니그룹주식회사 수신 장치, 수신 방법, 송신 장치 및 송신 방법
US9769417B1 (en) * 2014-11-05 2017-09-19 Lattice Semiconductor Corporation Metadata transfer in audio video systems
US9326295B1 (en) 2014-12-10 2016-04-26 Sony Corporation Method and apparatus for transmitting a-priori information in a communication system
US20160204804A1 (en) 2015-01-13 2016-07-14 Sony Corporation Data processing apparatus and method
US9762354B2 (en) 2015-01-27 2017-09-12 Sony Corporation Signaling methods and apparatus
AU2016211254B2 (en) 2015-01-30 2019-09-19 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
US9912986B2 (en) 2015-03-19 2018-03-06 Sony Corporation System for distributing metadata embedded in video
US9756401B2 (en) 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
EP3284017B1 (en) 2015-04-17 2024-03-27 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
US9590782B2 (en) 2015-06-22 2017-03-07 Sony Corporation Signaling methods and apparatus
CA3229617A1 (en) 2015-07-16 2017-01-19 Inscape Data, Inc. Systems and methods for partitioning search indexes for improved efficiency in identifying media segments
US10080062B2 (en) 2015-07-16 2018-09-18 Inscape Data, Inc. Optimizing media fingerprint retention to improve system resource utilization
CN108293140B (zh) 2015-07-16 2020-10-02 构造数据有限责任公司 公共媒体段的检测
US10205991B2 (en) 2015-07-27 2019-02-12 Sony Corporation Hidden replaceable media slots
US9723347B2 (en) * 2015-10-01 2017-08-01 Sorenson Media, Inc Frequency capping for media content
KR20170083795A (ko) * 2016-01-11 2017-07-19 삼성전자주식회사 디스플레이 장치 및 그의 동작 방법
US10678294B2 (en) 2016-10-14 2020-06-09 Sound Devices, LLC Clock for recording devices
US10701438B2 (en) 2016-12-31 2020-06-30 Turner Broadcasting System, Inc. Automatic content recognition and verification in a broadcast chain
JP7026449B2 (ja) 2017-04-21 2022-02-28 ソニーグループ株式会社 情報処理装置、受信装置、及び情報処理方法
US10574373B2 (en) * 2017-08-08 2020-02-25 Ibiquity Digital Corporation ACR-based radio metadata in the cloud

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002300544A (ja) * 2001-04-02 2002-10-11 Nippon Hoso Kyokai <Nhk> 蓄積型マルチチャンネル放送方式及び受信機並びに同期再生制御プログラム
JP2007534217A (ja) * 2004-04-21 2007-11-22 松下電器産業株式会社 デジタル放送再生装置、デジタル放送再生方法、コンピュータプログラム、及び記録媒体
JP2009521169A (ja) * 2005-12-23 2009-05-28 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コンテンツストリームから決定されたフィンガープリントを使用したスクリプト同期
JP2010154523A (ja) * 2008-11-30 2010-07-08 Softbank Bb Corp コンテンツ放送システム及びコンテンツ放送方法
JP2010532943A (ja) * 2007-07-06 2010-10-14 エーエムビーエックス ユーケー リミテッド マルチメディア・システムにおいてコンテンツ・ストリームと一つまたは複数の感覚効果を出力するためのスクリプトを同期させる方法

Family Cites Families (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5583563A (en) * 1995-01-12 1996-12-10 Us West Marketing Resources Group, Inc. Method and system for delivering an application in an interactive television network
US7222155B1 (en) * 1999-06-15 2007-05-22 Wink Communications, Inc. Synchronous updating of dynamic interactive applications
US7584491B2 (en) * 2001-04-25 2009-09-01 Sony Corporation System and method for managing interactive programming and advertisements in interactive broadcast systems
US20020183059A1 (en) * 2002-06-08 2002-12-05 Noreen Gary Keith Interactive system and method for use with broadcast media
US7082394B2 (en) * 2002-06-25 2006-07-25 Microsoft Corporation Noise-robust feature extraction using multi-layer principal component analysis
US20040187090A1 (en) * 2003-03-21 2004-09-23 Meacham Randal P. Method and system for creating interactive software
TWI221741B (en) 2003-04-08 2004-10-01 Silicon Integrated Sys Corp Method and apparatus for rate control in moving picture video compression
US8010986B2 (en) * 2004-02-04 2011-08-30 Ericsson Television, Inc. Synchronization and automation in an ITV environment
JP4691216B2 (ja) 2005-02-28 2011-06-01 株式会社日立国際電気 デジタル放送受信機
US20060218618A1 (en) * 2005-03-22 2006-09-28 Lorkovic Joseph E Dual display interactive video
US20070022437A1 (en) * 2005-07-19 2007-01-25 David Gerken Methods and apparatus for providing content and services coordinated with television content
JP2007048212A (ja) * 2005-08-12 2007-02-22 Dainippon Printing Co Ltd 情報提供システム及び情報提供装置
US9002342B2 (en) * 2005-12-02 2015-04-07 Nokia Corporation System, apparatus, and method for dynamically customizing and configuring applications
KR101253546B1 (ko) * 2006-11-20 2013-04-11 에스케이플래닛 주식회사 방송 컨텐츠와 부가 정보의 동기화 시스템 및 그 방법
EP2103129A4 (en) * 2006-11-20 2014-07-23 Sk Planet Co Ltd SYSTEM, SERVER AND METHOD FOR PROVIDING A SUPPLEMENTARY INFORMATION SERVICE RELATED TO EQUIPPED CONTENT
US7640272B2 (en) 2006-12-07 2009-12-29 Microsoft Corporation Using automated content analysis for audio/video content consumption
US8490143B2 (en) * 2008-05-02 2013-07-16 Telefonaktiebolaget L M Ericsson (Publ) IPTV session management
WO2010022000A2 (en) 2008-08-18 2010-02-25 Ipharro Media Gmbh Supplemental information delivery
US20110066944A1 (en) * 2009-09-14 2011-03-17 Barton James M Multifunction Multimedia Device
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US8677400B2 (en) * 2009-09-30 2014-03-18 United Video Properties, Inc. Systems and methods for identifying audio content using an interactive media guidance application
US9277183B2 (en) 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
JP5720095B2 (ja) * 2009-12-18 2015-05-20 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US9485535B2 (en) * 2010-01-13 2016-11-01 Qualcomm Incorporated Notification of interactivity event asset delivery sources in a mobile broadcast communication system
US20110177774A1 (en) * 2010-01-13 2011-07-21 Qualcomm Incorporated Dynamic generation, delivery, and execution of interactive applications over a mobile broadcast network
US8401370B2 (en) * 2010-03-09 2013-03-19 Dolby Laboratories Licensing Corporation Application tracks in audio/video containers
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8730301B2 (en) 2010-03-12 2014-05-20 Sony Corporation Service linkage to caption disparity data transport
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US9185458B2 (en) * 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
US20110302611A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer Scripted Interactivity for Non-Real-Time Services
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
BR112013004087A2 (pt) 2010-08-30 2016-06-14 Sony Corp aparelho de recepção, método de recepção, e programa.
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
WO2012043355A1 (ja) 2010-10-01 2012-04-05 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
WO2012070902A2 (ko) * 2010-11-24 2012-05-31 엘지전자 주식회사 영상 표시 장치 및 그 제어 방법
DE112011103903B4 (de) * 2010-11-24 2016-06-23 Lg Electronics Inc. Methode zum Empfang eines bestimmten Services und Videowiedergabegerät dazu
JP5583563B2 (ja) * 2010-12-06 2014-09-03 オリンパス株式会社 データ処理装置
EP2658248A4 (en) * 2010-12-26 2014-07-09 Lg Electronics Inc AUDIOVISUAL SERVICE TRANSMISSION METHOD, AUDIOVISUAL SERVICE RECEIVING METHOD, AND AUDIOVISUAL SERVICE RECEIVING APPARATUS
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5793871B2 (ja) 2011-01-25 2015-10-14 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5783402B2 (ja) 2011-01-25 2015-09-24 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
CA2837638C (en) * 2011-06-07 2017-01-31 Lg Electronics Inc. Method for transmitting and receiving broadcast service and receiving device thereof
KR101703866B1 (ko) * 2011-06-16 2017-02-07 엘지전자 주식회사 방송 서비스 전송 방법, 그 수신 방법 및 방송 서비스 수신 장치
US20120324495A1 (en) * 2011-06-17 2012-12-20 Microsoft Corporation Detecting and distributing video content identities
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
KR102060449B1 (ko) * 2011-08-05 2019-12-30 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
CA2842152C (en) 2011-08-24 2020-03-10 Sony Corporation Reception apparatus, reception method, program and information processing system
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
JP5948773B2 (ja) * 2011-09-22 2016-07-06 ソニー株式会社 受信装置、受信方法、プログラム、及び情報処理システム
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
KR102057107B1 (ko) 2012-01-24 2019-12-18 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
CA2859115C (en) 2012-02-07 2020-01-21 Sony Corporation Receiving apparatus, receiving method, and program
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
US20130282870A1 (en) 2012-04-18 2013-10-24 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, and program
KR102267861B1 (ko) 2012-06-19 2021-06-23 소니그룹주식회사 대화형 텔레비전을 위한 트리거 파라미터 테이블의 확장
US9456245B2 (en) 2012-07-05 2016-09-27 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method for controlling applications
MX337934B (es) 2012-07-12 2016-03-28 Sony Corp Descriptor de servicio parametrizado para servicios de television avanzados.
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9432744B2 (en) 2012-07-31 2016-08-30 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US9883247B2 (en) 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
EP2885698B1 (en) 2012-08-15 2021-10-06 Saturn Licensing LLC Broadband delivery of personalization information for advanced tv services
US9264648B2 (en) 2012-10-09 2016-02-16 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US10002206B2 (en) 2012-10-26 2018-06-19 Saturn Licensing Llc Information processing device and information processing method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9769503B2 (en) 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US9936256B2 (en) 2012-11-28 2018-04-03 Saturn Licensing Llc Receiver, reception method, transmitter and transmission method
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US8914832B2 (en) 2012-12-14 2014-12-16 Sony Corporation Information processing apparatus, information processing method, and program
US10257564B2 (en) 2013-01-24 2019-04-09 Saturn Licensing Llc Distributed non-real-time content
US9942601B2 (en) 2013-01-24 2018-04-10 Saturn Licensing Llc Storing non-real time content
US20140229580A1 (en) 2013-02-12 2014-08-14 Sony Corporation Information processing device, information processing method, and information processing system
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002300544A (ja) * 2001-04-02 2002-10-11 Nippon Hoso Kyokai <Nhk> 蓄積型マルチチャンネル放送方式及び受信機並びに同期再生制御プログラム
JP2007534217A (ja) * 2004-04-21 2007-11-22 松下電器産業株式会社 デジタル放送再生装置、デジタル放送再生方法、コンピュータプログラム、及び記録媒体
JP2009521169A (ja) * 2005-12-23 2009-05-28 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コンテンツストリームから決定されたフィンガープリントを使用したスクリプト同期
JP2010532943A (ja) * 2007-07-06 2010-10-14 エーエムビーエックス ユーケー リミテッド マルチメディア・システムにおいてコンテンツ・ストリームと一つまたは複数の感覚効果を出力するためのスクリプトを同期させる方法
JP2010154523A (ja) * 2008-11-30 2010-07-08 Softbank Bb Corp コンテンツ放送システム及びコンテンツ放送方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2741497A4 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9185458B2 (en) 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
US9491502B2 (en) 2010-04-02 2016-11-08 Yahoo! Inc. Methods and systems for application rendering and management on internet television enabled displays
EP2656619A1 (en) * 2010-12-23 2013-10-30 Yahoo! Inc. Signal-driven interactive television
EP2656619A4 (en) * 2010-12-23 2014-05-14 Yahoo Inc INTERACTIVE TELEVISION CONTROLLED BY A SIGNAL
JP2014531798A (ja) * 2011-09-12 2014-11-27 インテル・コーポレーション マルチメディア検索を用いて視聴者がテレビで視聴しているものを特定すること
JP2015512198A (ja) * 2012-02-10 2015-04-23 エルジー エレクトロニクス インコーポレイティド 映像表示装置及びその動作方法
JP2016516321A (ja) * 2013-02-21 2016-06-02 エルジー エレクトロニクス インコーポレイティド 映像表示装置及びその動作方法
US9848230B2 (en) 2013-02-21 2017-12-19 Lg Electronics Inc. Video display apparatus and operating method thereof
US9992527B2 (en) 2013-02-21 2018-06-05 Lg Electronics Inc. Video display apparatus and operating method thereof
JP2020521376A (ja) * 2017-05-17 2020-07-16 グーグル エルエルシー イメージデータに少なくとも部分的に基づく、アクションを実行するためのエージェントの決定
JP7121052B2 (ja) 2017-05-17 2022-08-17 グーグル エルエルシー イメージデータに少なくとも部分的に基づく、アクションを実行するためのエージェントの決定

Also Published As

Publication number Publication date
EP2741497A4 (en) 2015-03-11
CA2843382C (en) 2020-10-27
RU2014103001A (ru) 2015-08-10
JPWO2013021824A1 (ja) 2015-03-05
US9998801B2 (en) 2018-06-12
US11019406B2 (en) 2021-05-25
CN103718564A (zh) 2014-04-09
US20190007751A1 (en) 2019-01-03
CN103718564B (zh) 2018-01-09
CA2843382A1 (en) 2013-02-14
KR102060449B1 (ko) 2019-12-30
KR20140053984A (ko) 2014-05-08
JP6208012B2 (ja) 2017-10-04
TWI528822B (zh) 2016-04-01
US20150074704A1 (en) 2015-03-12
RU2594000C2 (ru) 2016-08-10
US8938756B2 (en) 2015-01-20
MX2014001202A (es) 2014-03-21
TW201309007A (zh) 2013-02-16
US20130198768A1 (en) 2013-08-01
EP2741497A1 (en) 2014-06-11

Similar Documents

Publication Publication Date Title
JP6208012B2 (ja) 受信装置、受信方法、プログラム、及び情報処理システム
JP6040154B2 (ja) 受信装置、受信方法、プログラム、及び情報処理システム
JP5948773B2 (ja) 受信装置、受信方法、プログラム、及び情報処理システム
JP6097692B2 (ja) 受信装置、受信方法、プログラム、及び情報処理システム
JP6250402B2 (ja) 受信装置、受信方法、プログラム、及び情報処理システム
JP5950820B2 (ja) 受信装置、受信方法、及びプログラム
JP6104811B2 (ja) 再生装置、及び再生方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12822427

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013527954

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 20147001991

Country of ref document: KR

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2843382

Country of ref document: CA

ENP Entry into the national phase

Ref document number: 2014103001

Country of ref document: RU

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: MX/A/2014/001202

Country of ref document: MX

NENP Non-entry into the national phase

Ref country code: DE