WO2013047948A1 - 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법 - Google Patents

방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법 Download PDF

Info

Publication number
WO2013047948A1
WO2013047948A1 PCT/KR2011/008564 KR2011008564W WO2013047948A1 WO 2013047948 A1 WO2013047948 A1 WO 2013047948A1 KR 2011008564 W KR2011008564 W KR 2011008564W WO 2013047948 A1 WO2013047948 A1 WO 2013047948A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
content
broadcast
client terminal
related information
Prior art date
Application number
PCT/KR2011/008564
Other languages
English (en)
French (fr)
Inventor
이재형
이준표
Original Assignee
(주)엔써즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)엔써즈 filed Critical (주)엔써즈
Priority to JP2013536544A priority Critical patent/JP5768134B2/ja
Priority to CN201180056919.7A priority patent/CN103229515B/zh
Priority to SG2013035654A priority patent/SG190219A1/en
Priority to EP11872894.8A priority patent/EP2763427B1/en
Priority to HK13107653.8A priority patent/HK1182896A2/xx
Publication of WO2013047948A1 publication Critical patent/WO2013047948A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4408—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video stream encryption, e.g. re-encrypting a decrypted video stream for redistribution in a home network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet

Definitions

  • the present invention relates to a system and a method for providing content related information associated with broadcast content, and more particularly, to a client terminal watching a broadcast, various related information related to the broadcast content to a client terminal through a network such as the Internet in real time. It relates to a system and method to provide.
  • a device such as a smart TV (Smart TV) has recently been proposed to include a network connection function, such as a conventional TV for receiving a broadcast to receive the Internet service.
  • Devices such as smart TVs are not limited to receiving broadcasts, but can provide Internet services and allow applications to be downloaded and executed, which can be viewed as a combination of a TV and a computer.
  • a device having a broadcast receiving function and an internet service providing function may include not only a smart TV but also a mobile communication terminal having a DMB receiving function, a computer performing an internet streaming broadcast service, and the like.
  • Korean Patent Publication No. 10-2011-0010084 (published Jan. 31, 2011) filed by the applicant of the present application discloses a method of providing a service related to content using fingerprint information.
  • a content related information request signal including partial fingerprint information of at least one or more sections of content being played in a client terminal is received from a client terminal, and the corresponding content is received from the content database based on the received partial fingerprint information.
  • Disclosed is a method and apparatus for retrieving content related information of a and transmitting the content related service information generated based on the content related information of the found content to the client terminal.
  • this method has a limitation in that related content information can be provided only when fingerprint information is first received from a client terminal.
  • Korean Patent Application No. 10-2011-0038353 filed by the present applicant discloses a method of providing advertisement related information to a client terminal in real time using fingerprint information.
  • the above-mentioned technique often changes the channel while the client terminal is watching a broadcast.
  • the terminal must check the broadcast channel very shortly in order to reflect the channel change in real time. It has the limitation of causing a heavy load on the server.
  • the present invention has been made in view of the above-described problems, and with respect to a client terminal having a broadcast receiving means and a network connection means, in view of the broadcast in real time, various related information associated with the broadcast content is actually watched.
  • the present invention provides a system and a method for providing a client terminal side, but a long period of checking channel information of a broadcast being viewed on the client terminal side, thereby significantly reducing the load of the channel information identification server. do.
  • the present invention provides a method and system that can provide content related information according to the situation at that time to a client terminal watching the broadcast in real time by a command input signal of a manager while a broadcast is being provided. For another purpose.
  • the present invention can extend the secondary consumer connection activities, such as product purchases, information acquisition by allowing the user receiving the information associated with the broadcast content to perform additional operations, thereby improving the user's interactive participation It is another object of the present invention to provide a more efficient information providing method and system since it can increase the providing efficiency and accurately recognize in real time whether broadcast content is reproduced using fingerprint information.
  • the present invention provides a client terminal having a display unit, a broadcast receiving means, and a network connection means, which provides content related information associated with broadcast content provided through a broadcast channel.
  • a content association information manager for storing content association information to be provided to the user;
  • a fingerprint extractor extracting fingerprint information on broadcast content provided through a broadcast channel;
  • a content association information provision determination unit for determining content association information to be provided to the client terminal;
  • a content association information sending unit for transmitting the content association information determined by the content association information providing determination unit and the fingerprint information extracted for the broadcast content corresponding to the determined content association information to a client terminal through a network.
  • the terminal includes a content related information providing system comprising a content related information display unit for controlling to display the transmitted content related information on the display unit based on the fingerprint information transmitted from the content related information sending unit. to provide.
  • the content related information of the content related information management unit is stored to correspond to a predetermined broadcast content, and the content related information providing determination unit, when the designated broadcast content is played during a broadcast provided through a broadcast channel,
  • the content related information stored corresponding to the designated broadcast content may be determined as the content related information to be provided to the client terminal.
  • the content association information determiner may determine content association information to be provided to the client terminal according to a user input signal.
  • the fingerprint information transmitted from the content related information sending unit to the client terminal may be fingerprint information of at least a part of broadcast content corresponding to the content related information determined by the content related information providing determining unit.
  • the fingerprint information may be fingerprint information for up to a predetermined time range from the front of the broadcast content corresponding to the content related information determined by the content related information providing determination unit.
  • the client terminal may further include a fingerprint extractor configured to extract fingerprint information for the broadcast content received by the client terminal, wherein the content association information display unit includes fingerprint information transmitted from the content association information sender; The fingerprint information extracted by the fingerprint extractor may be compared and matched to control the display to display the transmitted content related information through the display unit.
  • a fingerprint extractor configured to extract fingerprint information for the broadcast content received by the client terminal, wherein the content association information display unit includes fingerprint information transmitted from the content association information sender; The fingerprint information extracted by the fingerprint extractor may be compared and matched to control the display to display the transmitted content related information through the display unit.
  • the content related information display unit may store fingerprint information of a client terminal for a predetermined time range, and a portion of the fingerprint information transmitted from the content related information sending unit corresponding to the stored fingerprint information may be stored. If present, the transmitted content related information may be controlled to be displayed on the display unit.
  • the client terminal may be configured to further include a broadcast channel confirmation unit for obtaining the broadcast channel identification information that is received by the broadcast receiving means.
  • the broadcast channel checking unit of the client terminal may extract fingerprint information of a broadcast received through a broadcast receiving unit and transmit the extracted fingerprint information to a channel information identification server, and the channel information identification server may be configured to include the client terminal. Checks the channel information of the broadcast currently being received by the client terminal based on the fingerprint information received from the broadcast channel confirmation unit of the terminal, and transmits the confirmed channel information to the client terminal, and the broadcast channel confirmation unit of the client terminal It may be configured to obtain the broadcast channel identification information that is received by the channel information of the broadcast received from the information identification server.
  • the content related information sending unit transmits the broadcast channel identification information for the broadcast content corresponding to the content related information determined by the content related information providing determination unit together with the content related information and fingerprint information to the client terminal side, and the client The content related information display unit of the terminal is transmitted based on the fingerprint information transmitted from the content related information sender when the received broadcast channel identification information and the broadcast channel identification information acquired by the broadcast channel identification unit match.
  • the on content related information may be controlled to be displayed through the display unit.
  • the broadcast channel identification unit of the client terminal may transmit broadcast channel identification information to the content association information sending unit, and the association information sending unit of the content association information providing system may be configured based on the broadcast channel identification information received from the client terminal.
  • the client may be playing the broadcast content corresponding to the content association information determined by the content association information providing determination unit, and may transmit the determined content association information and the fingerprint information to the client terminal side.
  • the content association information sending unit of the system transmits a broadcast channel confirmation request signal for confirming whether the broadcast content corresponding to the determined content association information is being played to a connected client terminal, and broadcasts the client terminal.
  • the channel confirmation unit may be configured to transmit broadcast channel identification information to the content related information sending unit according to the broadcast channel confirmation request signal.
  • the channel information identification server may be included in the content related information providing system.
  • the content association information manager may store fingerprint information regarding the predetermined broadcast content together with content association information corresponding to each of the designated broadcast contents, and the content association information provision determiner may be provided through a broadcast channel.
  • the fingerprint information of the content may be configured to identify whether the broadcast content stored in the content association information management unit is reproduced by comparing fingerprint information corresponding to the broadcast content previously stored in the content association information management unit.
  • the client terminal may further include a user information processor configured to receive a user input signal based on the displayed content related information and to transmit a post operation request signal based on the received input signal to the system or an external separate device. Can be.
  • a user information processor configured to receive a user input signal based on the displayed content related information and to transmit a post operation request signal based on the received input signal to the system or an external separate device. Can be.
  • the broadcast channel confirmation unit of the client terminal may transmit time information together while transmitting fingerprint information to a channel information identification server, and the channel information identification server may include absolute time information of the content association information providing system and the client terminal.
  • the time information transmitted from the client terminal may be obtained by comparing time offset information of a broadcast screen of the client terminal and the content association information providing system and transmitting the time offset information to the client terminal.
  • the content related information sending unit may transmit absolute time information together with content related information to the client terminal, and the client terminal may display content related information based on the received absolute time information and time offset information of a broadcast screen. Can be.
  • a method for providing content association information to a client terminal having a display unit, broadcast receiving means and network connection means, Extracting fingerprint information for broadcast content provided through a broadcast channel; Determining content related information to be provided to a client terminal during a broadcast provided through a broadcast channel; And transmitting a fingerprint information extracted for the broadcast content corresponding to the determined content association information and the determined content association information to a client terminal, wherein the client terminal is based on the received fingerprint information.
  • the method may further include providing content related information by displaying the received content related information through a display unit.
  • the content related information is stored so as to correspond to a predetermined broadcast content, and wherein the second step is stored in response to the designated broadcast content when the designated broadcast content is played during a broadcast provided through a broadcast channel. And determine the content association information as content association information to be provided to the client terminal side.
  • the second step may be to determine the content-related information to be provided to the client terminal by the user's input signal.
  • the fingerprint information transmitted to the client terminal may be fingerprint information of at least a part of broadcast content corresponding to the determined content related information.
  • the fingerprint information may be fingerprint information for up to a predetermined time range from the front of the broadcast content corresponding to the determined content related information.
  • the client terminal may further include a fingerprint extractor configured to extract fingerprint information from the broadcast content received by the client terminal.
  • the client terminal may include the fingerprint information and the fingerprint extracted from the fingerprint extractor.
  • the print information may be compared and matched to display the content related information that has been transmitted.
  • the client terminal stores the fingerprint information on the client terminal for a predetermined time range, and when the transmitted fingerprint information matches the stored fingerprint information, the transmitted content is present.
  • the related information may be configured to be displayed through the display unit.
  • the client terminal may be configured to obtain broadcast channel identification information that the client terminal receives through the broadcast receiving means.
  • the client terminal may extract fingerprint information of a broadcast received through a broadcast receiving means and transmit the extracted fingerprint information to a channel information identification server, and the channel information identification server may identify a broadcast channel of the client terminal.
  • the client terminal checks the channel information of the broadcast currently being received, and transmits the confirmed channel information to the client terminal, wherein the client terminal receives the broadcast received from the channel information identification server. It may be configured to obtain the broadcast channel identification information that is being received by the channel information of the.
  • the broadcast channel identification information for the broadcast content corresponding to the determined content association information is transmitted to the client terminal side together with the content association information and fingerprint information, and the client terminal receives the received information.
  • the broadcast channel identification information and the acquired broadcast channel identification information match, the transmitted fingerprint information and the stored fingerprint information may be compared and matched. have.
  • the client terminal transmits broadcast channel identification information to the system, and the third step is determined in the second step based on the broadcast channel identification information received from the client terminal. Identify a client terminal that is playing broadcast content corresponding to the content association information, and transmit the determined content association information and fingerprint information to the confirmed client terminal side to the client terminal side, wherein the client terminal transmits the transmitted fingerprint information; And compare the stored fingerprint information with each other to match the transmitted content related information through a display unit.
  • the third step transmitting the broadcast channel identification information to the system by the client terminal, reproduces the broadcast content corresponding to the content association information determined in the second step to the client terminal to which the system is connected. And transmitting the broadcast channel confirmation request signal for confirming whether the information is being made, and transmitting the broadcast channel identification information to the system according to the broadcast channel confirmation request signal.
  • the content association information, the fingerprint information for the predetermined broadcast content is stored together to correspond to each of the designated broadcast content, and the second step, the fingerprint information of the broadcast content provided through the broadcast channel and the The fingerprint information may be configured to identify whether the stored broadcast content is reproduced by comparing fingerprint information corresponding to the previously stored broadcast content.
  • the client terminal may further include receiving an input signal of the user based on the displayed content related information and transmitting an additional operation request signal based on the received input signal to the system or an external separate device. It may be.
  • a client terminal having a broadcast receiving means and a network connection means can provide various related information related to the broadcast content to the client terminal that is actually watching the broadcast while watching the broadcast in real time. Since the period for checking the channel information of the broadcast being viewed on the client terminal side can be lengthened, a system and method can be provided that can significantly reduce the load of the channel information identification server.
  • the present invention can provide the content related information according to the situation at that time to the client terminal watching the broadcast in real time by the command input signal of the manager while the broadcast is being provided.
  • the present invention by allowing the user receiving the information related to the broadcast content to perform additional operations, secondary consumer connection activities such as product purchase and information acquisition can be expanded, thereby enhancing the interactive participation of the user.
  • secondary consumer connection activities such as product purchase and information acquisition
  • FIG. 1 illustrates a system for providing content related information associated with broadcast content according to the present invention and an overall environment in which the present invention can be implemented.
  • FIG. 2 is a view showing the internal configuration of the content association information providing system 100 and the client terminal 200 according to an embodiment of the present invention.
  • 3 is a diagram illustrating an example of content association information and fingerprint information for each broadcast content stored in the content association information management unit 110.
  • FIG. 4 is a flowchart illustrating an embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 according to the present invention.
  • FIG. 5 is a flowchart illustrating still another embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 according to the present invention.
  • FIG. 6 is a flowchart illustrating still another embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 according to the present invention.
  • FIG. 1 illustrates a system for providing content related information associated with broadcast content according to the present invention and an overall environment in which the present invention can be implemented.
  • a system for providing content related information associated with broadcast content is coupled to a client terminal 200 through a network and is provided with a broadcaster ( 300 receives a broadcast.
  • the network includes a concept such as an internet network, a public telephone network (PSTN), or a mobile communication network.
  • the content association information providing system 100 is associated with the content to be provided to the client terminal 200 when a predetermined broadcast content is played during broadcast or a signal is input from a user (manager) while receiving a broadcast from the broadcaster 300. Determine information and provide it over the network.
  • the broadcaster 300 may broadcast all kinds of broadcasts generally called broadcasting in the current environment, such as an over-the-air broadcaster such as a general broadcasting station, a cable TV service provider, a DMB broadcast service provider, and an Internet TV service provider. Means providing providers.
  • an over-the-air broadcaster such as a general broadcasting station, a cable TV service provider, a DMB broadcast service provider, and an Internet TV service provider. Means providing providers.
  • the broadcaster 300 is shown as one for convenience of description but may exist in plural.
  • the client terminal 200 receives a broadcast provided from the broadcaster 300 and receives content related information related to the broadcast content received by the client terminal 200 through the network and the content related information providing system 100.
  • the client terminal 200 since the client terminal 200 is connected to the content related information providing system 100 through a network while receiving a broadcast, the client terminal 200 includes broadcast receiving means and network connection means capable of receiving a broadcast.
  • the client terminal 200 includes a display unit such as, for example, an LCD device capable of displaying a received broadcast.
  • the client terminal 200 may be, for example, a smart TV that is widely sold recently.
  • a smart TV is a program such as a web browser and a network connection means such as a wireless LAN module.
  • the client terminal 200 may be, for example, a mobile communication terminal having a DMB receiving function. Since the recent mobile communication terminal has a wireless LAN access function, the wireless LAN access function and the DMB receiving function may be respectively broadcasted by the network access means and the broadcast access means. This can be seen as a receiving means.
  • the client terminal 200 may be composed of a plurality of devices, not physically one device, for example, a set-top box for implementing a function such as a smart TV as described above by connecting to a conventional conventional TV and such a TV ( set-top box).
  • the set-top box is an auxiliary device that enables the smart TV to be implemented using a conventional TV without purchasing a smart TV.
  • devices such as Apple's Apple TV and Google's Google TV are commercially available.
  • the set top box may also be a conventionally known set top box for receiving cable TV.
  • the client terminal 200 according to the present invention can be used in the present invention in any form as long as it includes the broadcast receiving means and the network connection means.
  • the client terminal 200 receives a broadcast from the broadcaster 300 through a broadcast receiving means.
  • the content related information providing system 100 also receives a broadcast from the broadcaster 300.
  • the content related information providing system 100 is configured to receive a broadcast of pre-stored content related information when a predetermined broadcast content is played while receiving a broadcast or when a command from an administrator is received during a broadcast. ) And the client terminal 200 receives it and displays it on the display unit.
  • FIG. 2 is a view showing the internal configuration of the content association information providing system 100 and the client terminal 200 according to an embodiment of the present invention.
  • the content related information providing system 100 includes a content related information management unit 110, a fingerprint extractor 120, a content related information providing determination unit 130, and a content related information sending unit 140. Include. As described with reference to FIG. 1, the content related information providing system 100 includes a broadcast receiving means because it receives a broadcast from the broadcaster 300. However, since it is obvious by the related art, the broadcast receiving means and related general components are omitted. It should be noted that this is indicated.
  • the content related information management unit 110 stores and manages content related information associated with broadcast content provided through a broadcast channel to be provided to the client terminal 200.
  • the broadcast channel may be at least one or more, and the content related information management unit 110 pre-sets content related information to correspond to the broadcast content provided from the broadcaster 300 through the plurality of broadcast channels. Save it.
  • the broadcast content here is sufficient as long as it is predetermined. For example, it may be a specific scene of a specific drama. In addition, it may be a predetermined advertisement screen.
  • the content-related information is a variety of forms related to the product, such as discount coupon information of the advertisement product, various information related to the purchase, website information to view the product, event information, etc., if the broadcasting content is an advertisement. It may be information of.
  • the broadcast content when the broadcast content is a specific scene of a specific drama, it may be the same as purchase information of a product appearing in the corresponding scene.
  • Content related information is preferably related to the broadcast content, but does not necessarily have any relationship. Such content related information may be input and edited by a separate management server such as an advertiser or an advertisement service provider (not shown).
  • the content related information manager 110 may further include other additional data such as description information about each piece of related information or an identifier uniquely assigned for identification of the related information so as to manage the related information.
  • the content related information management unit 110 extracts fingerprint information by at least one of audio, video, or a combination thereof for each corresponding broadcast content, and uses the extracted fingerprint information to correspond to each of the corresponding broadcast content. Can be stored with
  • the fingerprint information is extracted by the fingerprint extractor 120.
  • the fingerprint information refers to feature data representing characteristics of data such as audio data or video data, and may include fingerprint data, DNA data, or the like. Also called genetic data.
  • various methods have been proposed by the prior art, and since the fingerprint information can be easily determined whether the data is identical, it is widely used in the field of copyright management (DRM).
  • DRM copyright management
  • fingerprint information is generated using various characteristic data (eg, frequency, amplitude, etc.) representing the characteristics of the audio data
  • characteristic data eg, motion of a frame
  • the present invention is not intended for the method of generating the fingerprint information itself, and any form of fingerprint generation / extraction method according to the prior art may be used as it is, and thus the detailed description thereof will be omitted.
  • Korean Patent Application No. 10-2007-0044251 filed by the present applicant Method and Apparatus for Generating Audio Fingerprint Data and Method and Apparatus for Comparing Audio Data Using the Same), No.
  • 10-2007-0054601 Determining Sameness of Video Data
  • 10-2007-0060978 method and system for clustering video data with the same video data
  • 10-2007-0071633 video data using video data cluster
  • Search service providing method and apparatus Search service providing method and apparatus
  • 10-2007-0091587 method and apparatus for setting and providing advertisement data using video data cluster
  • 10-2008-0051688 video processing method and apparatus
  • Applicant's fingerprint generation and extraction method may be used in the present invention, of course.
  • the present invention can use a conventionally known fingerprint generation / extraction technique as it is regardless of how the fingerprint information is extracted.
  • the content related information management unit 110 stores the fingerprint information for each broadcast content, so that the broadcast content stored in the content related information management unit 110 during the broadcast in the content association providing determination unit 120 to be described later will be described. Used to determine if it is playing.
  • the fingerprint information is transmitted to the client terminal 200 as described below and used to determine whether to display the content related information on the client terminal 200.
  • the content related information providing determiner 130 continuously monitors broadcasts provided through a plurality of broadcast channels in real time and provides fingerprint information by at least one of audio, video, or a combination thereof.
  • Any one of the broadcast contents stored in the content related information management unit 110 is broadcasted by extracting it continuously in real time, for example, by a predetermined time unit, and comparing it with the fingerprint information stored as described above in the content related information management unit 110. Can be determined. Of course, other information besides fingerprint information may be used to determine whether an advertisement is being played during broadcast. However, as described above, fingerprint information clearly indicates unique characteristics of audio or video data. desirable.
  • 3 is a diagram illustrating an example of content association information and fingerprint information for each broadcast content stored in the content association information management unit 110.
  • the broadcast content field includes a brief description of each broadcast content
  • the content identifier field includes an identifier uniquely assigned to each broadcast content.
  • the content related information includes information such as "providing a 5% discount coupon", "link to www.ccc.com”, and "playing G video”.
  • the contents of the contents related information are shown for convenience of description rather than the actual contents related information.
  • the contents of the contents related information can be provided to the user of the client terminal. It is desirable to.
  • "offer 5% discount coupon” it is configured to include a web page made by a combination of text, audio, video data, etc., which enables the actual user to receive such contents.
  • the content association information can be configured to include such a web page.
  • a web page including a hyperlink may be stored as content related information in order to perform a corresponding operation.
  • the content related information may be configured in a form in which the text data is provided to the client terminal as simple text data.
  • the client terminal 200 since the client terminal 200 receives the content related information transmitted by the content related information providing system 100 and displays it on the display, the content related information is data defined to perform such processing. desirable.
  • fingerprint information for each broadcast content is represented as a binary number.
  • the content association providing determiner 130 may determine whether the broadcast content included in the content association information management unit 110 is broadcast using the fingerprint information.
  • the fingerprint information may include, for example, information about the entire frame of the video data when the broadcast content is the video data.
  • the content related information provision determining unit 130 should determine in real time that the broadcast content is starting. Therefore, it may be configured to include fingerprint information for the frame from the first frame of the broadcast content to a frame within a certain time range.
  • the fingerprint extractor 120 of the content association information providing system 100 will be described with reference to FIG. 2 again.
  • the fingerprint extractor 120 refers to feature data representing characteristics of data such as audio data or video data, and for all possible broadcast channels provided using a suitable method known in the art.
  • the fingerprint information is continuously extracted in real time.
  • the extracted fingerprint information is transmitted to the content related information providing determiner 130 and used to identify whether the broadcast content stored in the related information management unit 110 is reproduced as described above.
  • it is transmitted to the client terminal through the content related information sending unit 140 to be used to determine whether to display the content related information based on the fingerprint information when displaying the relevant information in the client terminal 200.
  • the content related information providing determination unit 130 may firstly identify whether the broadcast content stored in the content related information management unit 110 is reproduced as described above during a broadcast provided through a broadcast channel, or second, by a user input signal. A function of determining content related information to be provided to the client terminal 200 is performed.
  • the fingerprint extractor 120 continuously extracts and extracts fingerprint information by at least one of audio, video, or a combination of broadcasts provided through a broadcast channel in real time.
  • the fingerprint information may be compared with the fingerprint information for each of the broadcast contents previously stored in the content related information management unit 110 to identify whether the broadcast content stored in the content related information management unit 110 is reproduced.
  • the content related information providing determination unit 120 should determine whether the corresponding content is played within a short time from when the broadcast content is played.
  • the content related information provision determiner 130 preferably extracts fingerprint information of audio or video data of a broadcast screen on a relatively short interval basis.
  • the content related information providing determination unit 130 determines that the predetermined broadcast content is played on the screen broadcasted in this manner, the content related information providing decision unit 130 notifies the content related information sending unit 140 together with the information of the corresponding channel.
  • the second method determines content related information to be provided to the client terminal by an input signal of a user (administrator), and this method provides content related information when the administrator thinks that it is necessary at a specific time while watching broadcast content. It can be made by a method of transmitting an input signal to the system 100 to provide.
  • the content association information can also be specified. For example, when a specific scene of a specific drama is broadcasted, the manager may determine to provide content related information that is considered to be related to the scene and provide it as the related information.
  • an event related to a home run may be previously designated as related information, and when the batter hits a home run, the designated event may be provided to the client terminal 200 as related information.
  • the content related information sending unit 140 performs the function of transmitting to the client terminal 200 side.
  • the fingerprint information transmitted from the content related information sending unit 140 to the client terminal 200 is a broadcast corresponding to the content related information determined to provide the content related information by the content related information providing determining unit 130. Fingerprint information on at least a portion of the content.
  • the broadcast content may correspond to a predetermined time range (for example, a time frame of 1 second) from the beginning of the broadcast content corresponding to the determined association information.
  • the client terminal 200 includes a fingerprint extractor 250 that continuously extracts broadcast content provided in a broadcast channel currently received by the client terminal 200 in real time.
  • the extracted fingerprint information and the fingerprint information transmitted from the content association information sending unit 140 may be compared and matched to display the transmitted content association information through the display unit. This process may be performed in parallel with the process of determining whether the channels match using the channel identification information described below.
  • the channel identification information described below is used to determine which channel of the broadcast currently being viewed by the client terminal 200 so that content related information is displayed on the corresponding screen only when the channels are the same. In the case where the channel is switched after the channel identification is made in the client terminal 200, the content related information may be reproduced in a broadcast channel other than the corresponding broadcast channel.
  • the channel identification process must be continuously performed in a very short cycle on the client terminal 200 side, which acts as a very heavy load in the client terminal 200 and / or the channel information identification server described later. Therefore, the content related information sending unit 140 transmits at least a portion of the fingerprint information while transmitting the content related information, and the broadcast channel that is being reproduced in the step before the client terminal 200 plays the corresponding content related information, that is, By comparing the fingerprint information to determine what the broadcast content is, the client terminal 200 can make a period of checking the channel information that they are watching very long, so that the client terminal 200 and the channel information identification server ( There is an advantage that can significantly reduce the load of 400).
  • the channel information identification server 400 may not be necessary, thereby saving the load of the entire network and resources of the system.
  • the broadcast content may be a time difference between the broadcast content provided by the client terminal 200 and the system 100. After receiving the fingerprint information because the broadcast content is played later than the system 100 on the client terminal 200 side, the broadcast content is reproduced. There is no particular problem as long as it is possible to determine whether the broadcast content including the fingerprint information is played. However, if broadcast content is played before the system 100 or at about the same time, the client terminal 200 may receive broadcast information including the fingerprint information after receiving the fingerprint information. In order to prepare for this, the content related information display unit 260 of the client terminal 200 stores the fingerprint information of the client terminal 200 for a predetermined time range (for example, 15 seconds) and sends the content related information sending unit.
  • a predetermined time range for example, 15 seconds
  • a method may be used in which the broadcast played by the actual client terminal 200 is always delayed, for example, about 10 seconds later than the system 100 side.
  • the content association information may be obtained only from the client terminal 200 that is watching a broadcast including broadcast content corresponding to the content association information determined among the client terminals 200 using the channel identification information.
  • the display method the following method can be used.
  • Such a channel identification process may be used in parallel with the above-described process of using the fingerprint information. For example, the channel identification process may be performed first and then the process of using the above-described fingerprint information may be performed.
  • the client terminal 200 is provided with a broadcast channel confirming unit 240 for acquiring broadcast channel identification information received by the client terminal 200 through the broadcast receiving unit 220, and confirmed by the broadcast channel confirming unit 240. It may be determined whether to display the content related information by using the broadcast channel identification information.
  • the content association information sending unit 140 of the content association information providing system 100 transmits broadcast channel identification information indicating a broadcast channel of the corresponding broadcast content while sending the content association information, and the content association of the client terminal 200.
  • the information display unit 250 compares the broadcast channel identification information checked by the broadcast channel identification unit 240 with the broadcast channel identification information from the content related information providing system 100 and displays the related information if they match. ) Can be displayed. If it does not match, the content related information display unit 250 ignores the received related information. In this case, if it matches, the fingerprint comparison process as described above may be performed.
  • the broadcast channel checker 240 may provide the client terminal 200 with such channel information through a digital broadcast signal.
  • the broadcast channel confirmation unit 240 may obtain broadcast channel identification information therefrom.
  • the broadcast channel checker 240 preferably updates the broadcast channel identification information whenever the channel changes or periodically.
  • broadcast channel identification information may be obtained using fingerprint information. That is, the fingerprint extractor 250 as described above provided on the client terminal 200 continuously extracts fingerprint information of the broadcast being viewed in real time, and the channel information identification server 400 (FIG. 4) and the broadcast channel identification information of the client terminal 200 can be obtained from the channel information identification server and transmitted to the client terminal 200 to obtain broadcast channel identification information.
  • the channel information identification server 400 extracts fingerprint information in the same manner as described above for all broadcasts provided by the broadcaster 300 in real time and transmits the fingerprint information from the broadcast channel checker 240 of the client terminal 200. By comparing the fingerprint information, the client terminal 200 checks the channel information of the broadcast currently being received and transmits it to the client terminal 200. Since the channel information identification server 400 recognizes fingerprint information about all broadcast channels in real time and knows channel information about all broadcast channels, the fingerprint from the broadcast channel checker 240 of the client terminal 200 is detected. When the information is received, the client terminal 200 can accurately determine which broadcasting channel the client terminal 200 is watching.
  • the channel information identification server 400 when the channel information of the broadcast being received by the client terminal 200 is confirmed by the channel information identification server 400, the confirmed channel information of the broadcast is transmitted to the client terminal 200 and the broadcast channel of the client terminal 200 is confirmed.
  • the unit 240 may obtain broadcast channel identification information that the user is watching.
  • the channel information identification server 400 may be implemented as a separate device physically separated from the content related information providing system 100, but may be configured to be included in the content related information providing system 100. to be.
  • the content related information providing system 100 first receives the broadcast channel identification information from the client terminal 200 and checks and confirms the client terminal 200 playing the broadcast content corresponding to the determined content related information.
  • the content association information is transmitted only to the client terminal 200.
  • the client terminal 200 may obtain identification information of the broadcast channel currently received and reproduced by the broadcast channel checker 240 as described above, and transmit the identification information to the content related information providing system 100.
  • the broadcast channel confirmation unit 240 automatically transmits the identification information of the broadcast channel currently being received to the content association information providing system 100 or the broadcast channel confirmation request signal from the content association information providing system 100. If received, the identification information of the broadcast channel currently being received may be transmitted to the content association information providing system 100 in response thereto.
  • the broadcast channel checker 240 of the client terminal 200 may transmit time information together with the fingerprint information to the channel information identification server 400. This is to handle the case where the time point at which the client terminal 200 and the content related information providing system 100 receive the same broadcast screen is different from each other in the process of transmitting the actual broadcast screen.
  • the broadcast channel confirmation unit 240 of the client terminal 200 transmits fingerprint information to the channel information identification server 400 as described above, and transmits the time information thereof (this is based on a clock generally embedded in the terminal).
  • the channel information identification server 400 identifies the channel information of the client terminal 200 based on the fingerprint information as described above, and provides the time information and the content association information system 100.
  • time difference that is, time offset information
  • time difference for the same screen between the client terminal 200 and the content association information providing system 100
  • the channel information identification server 400 exists as a separate device from the content association information providing system 100, they are preferably set to be synchronized with each other.
  • the channel information identification server 400 may be considered to be synchronized with the content association information providing system 100.
  • absolute time information such as Greenwich Mean Time (GMT) as the time information of the content related information providing system 100.
  • GTT Greenwich Mean Time
  • the channel information identification server 400 may grasp the time difference, that is, the time offset information, for the same screen by comparing the fingerprint information with the absolute time information and the time information transmitted from the client terminal 200.
  • the channel information identification server 400 transmits the time offset information to the client terminal 200 when the time offset information is obtained.
  • the time offset information may be transmitted together with the channel information.
  • the content related information sending unit 140 transmits the content related information managing unit 110 to the client terminal 200 that is playing the broadcast content corresponding to the related information determined by the content related information providing determining unit 130.
  • the absolute time information is transmitted together with the content related information stored in the client terminal 200, and the client terminal 200 receiving the absolute time information may display the related information on the display unit of the client terminal 200 based on the time offset information.
  • the client terminal 200 may include a display unit 210, a broadcast receiving unit 220, a network connection unit 230, a broadcast channel checking unit 240, a fingerprint extractor 250, a content related information display unit 260, and the like. And a user information processing unit 270.
  • the client terminal 200 has a function of receiving broadcasts provided in various forms and a function of accessing a network such as the Internet, and includes, for example, a smart TV and a DMB receiving function. May be a mobile communication terminal, an IPTV, or the like.
  • the display unit 210, the broadcast receiving unit 220, and the network connection unit 230 are self-explanatory in the related art, and thus detailed description thereof will be omitted.
  • the broadcast channel checking unit 240 is a means for obtaining broadcast channel identification information received through the broadcast receiving unit 220. Since this has been described in detail above, a detailed description thereof will be omitted.
  • the fingerprint extractor 250 continuously extracts, in real time, fingerprint information about broadcast content provided on a broadcast channel currently received by the client terminal 200.
  • the fingerprint information extracted by the fingerprint extractor 250 may be transmitted to the channel information identification server 400 and used to identify the channel information as described above. In addition, it may be used to control whether to display corresponding content related information as described above through comparison with fingerprint information transmitted from the system 100. Since this has been described in detail above, a detailed description thereof will be omitted.
  • the content related information display unit 260 displays the content related information transmitted from the system 100 based on the fingerprint information transmitted from the content related information sending unit 140 of the system 100 by the method described above. A function of controlling to display through 210 is performed.
  • the content association information display unit 260 receives broadcast channel identification information together with the association information and the fingerprint information from the content association information providing system 100, and is currently watching by the broadcast channel identification information. First, whether or not it is the same as the broadcast channel may be determined, and if it is the same, the fingerprint information may be compared to display corresponding content association information only when they match.
  • the fingerprint information is compared and matched.
  • the related information display unit 250 receives the corresponding content related information and displays it on the display unit 210. At this time, the content related information display unit 250 may be displayed based on the time offset information as described above.
  • the content related information display unit 250 may display various types of related information through the display unit 210.
  • a broadcast currently received through the display unit 210 may be received. It can be overlaid on the screen.
  • the content related information may be displayed while being overlapped on the broadcast screen appearing in the lower region of the display 210.
  • the content related information may be data that enables the content of the content related information as described in FIG. 3 to be actually performed.
  • the content related information may be performed.
  • a method of displaying a predetermined time with text data and providing a corresponding coupon to a user, for example, a hyperlink may be displayed continuously while overlapping the broadcasting screen with information for selecting the same.
  • the related information displayed on the broadcast screen may be provided in the form of, for example, flickering or roll.
  • the content related information display unit 260 may be configured to partially display the received content related information so that the content related information does not overlap with the broadcast screen currently being received through the display unit 210. It may be provided by a method for providing in the form, and to display the broadcast screen is reduced by the area provided with the content related information.
  • the user information processing unit 270 of the client terminal 200 receives a user input signal based on the content related information displayed as described above and transmits an additional operation request signal based on the received input signal to the content related information providing system ( 100) or transmits to a separate external device.
  • the user information processing unit 260 may be omitted, but the user may perform a specific operation among the content related information. For example, there may be a case where the user requires additional actions such as accessing a specific site or sending a text message to a specific phone number in order to receive a "5% discount coupon" as content-related information.
  • the user information processing unit 270 receives the user's additional request signal when the user of the client terminal 200 receives the additional operation request signal and transmits it to the content related information providing system 100 or an external device (for example, a specific website). Perform the function to send.
  • the client terminal 200 preferably includes input means (eg, a keyboard, a mouse, a remote controller) for allowing a user to input an input signal.
  • FIG. 4 is a flowchart illustrating an embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 as described above.
  • the client terminal 200 and the content related information providing system 100 receive the broadcast transmitted from the broadcaster 300 and continuously extract the fingerprint information with respect to the received broadcast content in real time ( S10, S20).
  • the content related information providing system 100 determines content related information to be provided to the client terminal (S11). Determining the content association information, as described above, the content association information providing system 100 and the content association information for each of the broadcast content included in the broadcast provided in advance through the broadcast channel to the content association information management unit 110 and Corresponding fingerprint information is stored, and is pre-specified and stored in the content related information management unit 110 during broadcasting while receiving a plurality of broadcasts through a plurality of broadcast channels from at least one or more broadcast providers 300. This can be done by determining whether the broadcast content is played. This may be done by comparing the fingerprint information extracted from the fingerprint extractor 120 with the stored fingerprint information. The identification of whether the stored broadcast content is played is as described above.
  • the fingerprint information of at least one of audio, video, or a combination thereof extracted in advance with respect to broadcast content included in a broadcast provided through a broadcast channel is stored in the broadcast content together with the content association information corresponding to each of the broadcast content,
  • the content information provision determination unit 130 extracts fingerprint information by at least one of audio, video, or a combination thereof of broadcasts provided through a broadcast channel, and extracts the extracted fingerprint information and the content association information management unit 110.
  • Fingerprint information for each broadcast content previously stored in The method may be used to identify whether the broadcast content stored in the content related information management unit 110 is to be reproduced, and when the previously stored stored broadcast content is played, the stored content related information corresponding to the corresponding broadcast content may be used.
  • the content related information to be provided to the client terminal 200 is determined.
  • step (S11), as described above, may be determined by the user's input signal.
  • the content related information sending unit 130 of the content related information providing system 100 determines the determined content related information and broadcast channel to all connected client terminals 100.
  • the fingerprint information is transmitted along with the information (S12).
  • the transmitted fingerprint information may be fingerprint information of at least a part of broadcast content corresponding to the determined content association information.
  • the fingerprint information may be fingerprint information for up to a predetermined time range from the front of the broadcast content corresponding to the determined content related information.
  • the client terminal 200 acquires the channel information through the channel information identification server 400, as in the previous step.
  • the channel identification information can be known through the information identification server 400.
  • the client terminal 200 extracts fingerprint information while receiving a broadcast (S20), and if the channel information of the broadcast received by the client terminal is unknown, the fingerprint information of the broadcast received by the channel information identification server 400 is received. (S21), the channel information identification server 400 compares the received fingerprint information with the fingerprint information he has (S40), checks the channel information, and transmits it to the client terminal 200 ( S41). If this process is performed in advance, the client terminal 200 may obtain channel information of the broadcast being received before step S12. Of course, if the client terminal 200 knows the broadcast channel information, step (S21, S40, S41) can be omitted. In addition, it is assumed that the channel information identification server 400 knows or can know all channel information for all possible broadcasts.
  • the client terminal 200 confirms the received broadcast channel identification information and the broadcast channel.
  • operation S22 it is determined whether the broadcast channel identification information acquired by the unit 240 is matched with each other. If it matches, the fingerprint information transmitted from the system 100 is compared with the fingerprint information extracted by the fingerprint extracting unit 250 of the client terminal 100 (S20) to determine whether it matches (S23).
  • the fingerprint information transmitted to the client terminal 200 may be fingerprint information for at least a part of broadcast content corresponding to the determined content related information, and the client terminal 200 may include a client terminal ( The fingerprint information on the 200 side is stored for a predetermined time range, and when there is a portion where the transmitted fingerprint information matches the stored fingerprint information, the transmitted content related information is displayed on the display unit. You can also do that.
  • the transmitted content related information is displayed on the display unit (S24). At this time, as described above, the content related information is displayed in such a manner as to overlap or not overlap the broadcast screen to be received and reproduced.
  • an additional operation request signal may be generated from the client terminal according to the related information.
  • an input signal is received from the user (S25).
  • the additional operation request signal based on the signal is transmitted to the content association information providing system 100 or an external separate device (S26).
  • the post operation request signal may be transmitted only to the content related information providing system 100, but may be transmitted to a separate external device.
  • step S22 instead of performing step S22, only step S24 may be performed to compare only fingerprint information. In this case, in step S12, there is no need to transmit broadcast channel identification information.
  • FIG. 4 Since the contents of FIG. 4 are the same as those described with reference to FIGS. 1 to 3, detailed descriptions of the overlapping portions are omitted, and it should be noted that only the operational features are schematically described in FIG. 4.
  • a very short period (for example, 10) may be used to check if a channel change is made in the client terminal 200. Since the period of processes (S21, S40, S41, etc.) that should check the channel information can be lengthened every second), the load of the channel information identification server 400 and the client terminal 200 for performing such an operation is remarkably increased. There is an advantage to reduce.
  • FIG. 5 is a flowchart illustrating another embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 according to the present invention. Compared to the case of FIG. This is a case where the content related information is transmitted only to the client terminal 200 watching the identified advertisement without transmitting the content related information to all the connected client terminals.
  • Steps S10, S11, S20, S21, S40, and S41 are the same as in Fig. 4, and thus detailed description thereof will be omitted.
  • the client terminal 200 acquires the broadcast channel information that the client terminal 200 is watching, and transmits the broadcast channel identification information to the content association information providing system 100 (S27).
  • the step S11 is shown for convenience of description, but the step S27 does not need to be performed at this time.
  • the client terminal 200 may transmit the information to the content association information providing system 100 as the broadcasting channel identification information, for example, a certain period of time. The method may be performed periodically every time or every time a channel is changed in the client terminal 200.
  • the content related information providing system 100 can know the channel information that each client terminal 100 connected to is currently receiving or watching, and thus the content determined by the content related providing information determining unit 130. It is possible to know the client terminal 100 playing the broadcast content corresponding to the related information, and the content related information sending unit 140 transmits the content related information and the fingerprint information determined to the corresponding client terminal 100 based on this. It is made (S12). At this time, the difference from step S12 of FIG. 4 is that broadcast channel identification information is not included.
  • the client terminal 200 having received the content related information performs steps S23 to S26, which is a step S22, that is, a process of determining whether the channel identification information is consistent with each other. Since it is the same as step S23 to step S26 of FIG. 4 except for omitting, detailed description thereof will be omitted.
  • FIG. 6 is a flowchart illustrating another embodiment of a method in which content related information is provided to the client terminal 200 through the content related information providing system 100 of the present invention.
  • the broadcast channel confirmation request signal for confirming whether or not the broadcast content corresponding to the content related information determined as is transmitted is transmitted (S13), and in response, the client terminal 100 transmits broadcast channel identification information (S27).
  • S13 The broadcast channel confirmation request signal for confirming whether or not the broadcast content corresponding to the content related information determined as is transmitted
  • the client terminal 100 transmits broadcast channel identification information (S27).
  • S27 broadcast channel identification information
  • the client terminal 200 does not first transmit the channel information of the broadcast that the client terminal 200 receives and reproduces to the content association information providing system 100, but instead transmits the broadcast channel confirmation request signal.
  • the broadcast channel identification information is transmitted only when received. Since other processes are the same as in the case of FIG. 5, detailed descriptions are omitted.
  • the client terminal 200 is a terminal of all kinds having a broadcast receiving means and a network connection means, and a computer that receives broadcasts provided by the Internet as well as a mobile TV having a smart TV and a DMB receiving function as described above. It may also include a tablet PC, a mobile communication terminal.
  • the concept of broadcasting may include not only a general broadcasting form, but also any type of real-time streaming service such as a soccer relay provided through the Internet, or even a video on demand (VOD).

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법에 관한 것으로서, 디스플레이부, 방송 수신 수단 및 네트워크 접속 수단을 구비하는 클라이언트 단말기측으로 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템으로서, 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 저장하는 콘텐츠 연관 정보 관리부; 방송 채널을 통해 제공되는 방송 콘텐츠에 대한 핑거프린트 정보를 추출하는 핑거프린트 추출부; 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 콘텐츠 연관 정보 제공 결정부; 및 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보와 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 네트워크를 통해 클라이언트 단말기측으로 전송하는 콘텐츠 연관 정보 발송부를 포함하고, 상기 클라이언트 단말기는, 상기 콘텐츠 연관 정보 발송부로부터 전송된 핑거프린트 정보에 기초하여 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 콘텐츠 연관 정보 표시부를 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템 및 이를 이용한 방법을 제공한다.

Description

방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법
본 발명은 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법에 관한 것으로서, 보다 상세하게는 방송을 시청하고 있는 클라이언트 단말기측으로 방송 콘텐츠와 관련된 다양한 연관 정보를 클라이언트 단말기측으로 인터넷 등과 같은 네트워크를 통해 실시간으로 제공하도록 하는 시스템 및 방법에 관한 것이다.
한편 최근 방송을 수신하는 종래의 TV 등과 같은 장치에 네트워크 접속 기능 등을 포함시켜서 인터넷 서비스를 제공받을 수 있도록 하는 소위 스마트 TV(smart TV)와 같은 장치가 제안되고 있다. 이러한 스마트 TV와 같은 장치는 방송을 수신하는 것에 그치는 것이 아니라 인터넷 서비스를 제공할 수 있고 어플리케이션을 다운로드받고 실행시킬 수 있도록 함으로써 실제로는 TV와 컴퓨터가 결합된 형태의 장치로 볼 수 있다. 이와 같이 방송 수신 기능과 인터넷 서비스 제공 기능을 구비하는 장치는 스마트 TV 뿐 아니라 DMB 수신기능을 구비하는 이동 통신 단말기, 인터넷 스트리밍 방송 서비스를 수행하는 컴퓨터 등도 포함시킬 수 있는데, 이와 같이 방송과 네트워크 서비스를 동시에 수행할 수 있는 장치를 이용하여 인터랙티브한 방식으로 방송되는 콘텐츠와 연관된 연관 정보를 제공할 수 있는 방법이 요망되고 있다. 그러나, 이러한 방법에 있어서 사용자 즉 클라이언트 단말기가 시청하고 있는 방송이 무엇인지를 실시간으로 파악하기가 어렵고 방송 도중 어떠한 방송 콘텐츠가 재생되는지를 실시간으로 짧은 시간내에 파악하기 어려워서 인터랙티브한 방식으로 사용자측으로 사용자가 시청하고 있는 방송에 연관된 정보를 제공하는 것은 매우 어려운 문제이다. 이러한 문제점과 관련하여 오디오 또는 비디오 신호에 기초한 핑거프린트 정보를 이용하면 사용자가 시청하는 방송이 어떠한 것인지를 쉽게 판별할 수 있으므로 핑거프린트 정보를 이용하는 방법이 요망되고 있다.
이와 관련하여 본 출원의 출원인이 출원한 대한민국 특허공개공보 제10-2011-0010084호(2011.01.31.공개)는 핑거프린트 정보를 이용하여 콘텐츠와 관련된 서비스를 제공하는 방법에 대하여 개시하고 있다. 이를 참조하면, 클라이언트 단말기로부터 클라이언트 단말기에서 재생중인 콘텐츠의 적어도 하나 이상의 구간에 대한 부분 핑거프린트 정보를 포함하는 콘텐츠 관련 정보 요청 신호를 수신하고, 수신한 부분 핑거프린트 정보에 기초하여 콘텐츠 데이터베이스로부터 해당 콘텐츠의 콘텐츠 관련 정보를 검색하여 검색된 해당 콘텐츠의 콘텐츠 관련 정보에 기초하여 생성되는 콘텐츠 관련 서비스 정보를 클라이언트 단말기로 전송하는 방법 및 장치가 개시되어 있다. 그러나 이러한 방법은 클라이언트 단말기로부터 먼저 핑거프린트 정보를 수신한 경우에만 관련 콘텐츠 정보를 제공할 수 있다는 한계점이 있다.
또한, 본 출원인이 출원한 대한민국 특허출원 출원번호 제10-2011-0038353호는 핑거프린트 정보를 이용하여 실시간으로 클라이언트 단말기측으로 광고 연관 정보를 제공하는 방법에 대하여 개시하고 있다. 그러나, 상기 기술은 클라이언트 단말기가 방송 시청 중에 채널을 변경하는 경우가 많은데 이러한 경우 채널 변경 여부를 실시간으로 반영하기 위해서는 단말기측에서 방송 채널을 확인하는 주기를 매우 짧게 해야 한다는 단점이 있는데 이는 결국 채널 인식 서버에 큰 부하를 야기한다는 한계점을 가지고 있다.
본 발명은 상기한 바와 같은 과제를 해결하기 위한 것으로서, 방송 수신 수단과 네트워크 접속 수단을 구비하는 클라이언트 단말기에 대하여, 실시간으로 방송을 시청하면서 방송 콘텐츠와 연관된 다양한 연관 정보를 실제 해당 방송을 시청하고 있는 클라이언트 단말기측으로 제공할 수 있도록 하되, 클라이언트 단말기측에서 시청하고 있는 방송의 채널 정보를 확인하는 주기를 길게 할 수 있으므로 채널 정보 식별 서버의 부하를 현저하게 줄일 수 있는 시스템 및 방법을 제공하는 것을 목적으로 한다.
또한, 본 발명은, 방송이 제공되는 도중 관리자의 명령 입력 신호에 의해 그때 그때마다의 사정에 따른 콘텐츠 연관 정보를 실시간으로 해당 방송을 시청하고 있는 클라이언트 단말기측으로 제공할 수 있는 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
또한, 본 발명은 방송 콘텐츠와 연관된 정보를 수신한 사용자가 추가적인 동작을 수행할 수 있도록 함으로써 제품 구매, 정보 획득 등 2차적인 소비자 연결 활동을 확대할 수 있으므로 사용자의 인터랙티브한 참여도를 증진시킴으로써 정보 제공 효율을 증대시키며, 핑거프린트 정보를 이용하여 방송 콘텐츠가 재생되는지 여부를 실시간으로 정확하게 파악할 수 있으므로, 보다 효율적인 정보 제공 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
상기한 바와 같은 과제를 해결하기 위하여 본 발명은, 디스플레이부, 방송 수신 수단 및 네트워크 접속 수단을 구비하는 클라이언트 단말기측으로 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템으로서, 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 저장하는 콘텐츠 연관 정보 관리부; 방송 채널을 통해 제공되는 방송 콘텐츠에 대한 핑거프린트 정보를 추출하는 핑거프린트 추출부; 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 콘텐츠 연관 정보 제공 결정부; 및 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보와 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 네트워크를 통해 클라이언트 단말기측으로 전송하는 콘텐츠 연관 정보 발송부를 포함하고, 상기 클라이언트 단말기는, 상기 콘텐츠 연관 정보 발송부로부터 전송된 핑거프린트 정보에 기초하여 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 콘텐츠 연관 정보 표시부를 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템을 제공한다.
여기에서, 상기 콘텐츠 연관 정보 관리부의 콘텐츠 연관 정보는, 미리 지정된 방송 콘텐츠에 대하여 대응되도록 저장되고, 상기 콘텐츠 연관 정보 제공 결정부는, 방송 채널을 통해 제공되는 방송 도중 상기 지정된 방송 콘텐츠가 재생되는 경우 상기 지정된 방송 콘텐츠에 대응하여 저장된 콘텐츠 연관 정보를 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보로서 결정할 수 있다.
또한, 상기 콘텐츠 연관 정보 결정부는, 사용자의 입력 신호에 의해 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정할 수 있다.
또한, 상기 콘텐츠 연관 정보 발송부에서 클라이언트 단말기측으로 전송되는 핑거프린트 정보는, 상기 콘텐츠 연관 정보 제공 결정부에서 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보일 수 있다.
또한, 상기 핑거프린트 정보는 상기 콘텐츠 연관 정보 제공 결정부에서 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 맨 앞쪽으로부터 소정의 시간 범위 이내까지에 대한 핑거프린트 정보일 수 있다.
또한, 상기 클라이언트 단말기는, 자신이 수신하는 방송 콘텐츠에 대해 핑거프린트 정보를 추출하는 핑거프린트 추출부를 더 포함하고, 상기 콘텐츠 연관 정보 표시부는, 상기 콘텐츠 연관 정보 발송부로부터 전송되어 오는 핑거프린트 정보와 상기 핑거프린트 추출부에서 추출된 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하도록 구성할 수도 있다.
또한, 상기 콘텐츠 연관 정보 표시부는, 클라이언트 단말기측의 핑거프린트 정보를 미리 정해진 시간 범위 동안 저장해 두고 상기 콘텐츠 연관 정보 발송부로부터 전송되어 오는 핑거프린트 정보가 상기 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어할 수 있다.
또한, 상기 클라이언트 단말기는, 방송 수신 수단을 통해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 방송 채널 확인부를 더 포함하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기의 방송 채널 확인부는, 방송 수신 수단을 통해 수신되는 방송의 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보를 채널 정보 식별 서버로 전송하고, 상기 채널 정보 식별 서버는, 상기 클라이언트 단말기의 방송 채널 확인부로부터 수신되는 핑거프린트 정보에 기초하여 클라이언트 단말기가 현재 수신하고 있는 방송의 채널 정보를 확인하고 확인된 채널 정보를 상기 클라이언트 단말기로 전송하고, 상기 클라이언트 단말기의 방송 채널 확인부는 상기 채널 정보 식별 서버로부터 수신한 방송의 채널 정보에 의해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하도록 구성할 수도 있다.
또한, 상기 콘텐츠 연관 정보 발송부는 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대한 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 및 핑거프린트 정보와 함께 클라이언트 단말기측으로 전송하고, 상기 클라이언트 단말기의 콘텐츠 연관 정보 표시부는 상기 수신한 방송 채널 식별 정보와 상기 방송 채널 확인부에 의해 획득된 방송 채널 식별 정보가 일치하는 경우 상기 콘텐츠 연관 정보 발송부로부터 전송된 핑거프린트 정보에 기초하여 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기의 방송 채널 확인부는, 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 발송부로 전송하고, 상기 콘텐츠 연관 정보 제공 시스템의 연관 정보 발송부는, 클라이언트 단말기로부터 수신되는 방송 채널 식별 정보에 기초하여 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기를 확인하고, 확인된 클라이언트 단말기측으로 상기 결정된 콘텐츠 연관 정보와 핑거프린트 정보를 클라이언트 단말기측으로 전송할 수 있다.
또한, 상기 시스템의 콘텐츠 연관 정보 발송부는 연결되어 있는 클라이언트 단말기로 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는지의 여부를 확인하기 위한 방송 채널 확인 요청 신호를 전송하고, 상기 클라이언트 단말기의 방송 채널 확인부는 상기 방송 채널 확인 요청 신호에 따라 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 발송부로 전송하도록 구성할 수도 있다.
또한, 상기 채널 정보 식별 서버는 상기 콘텐츠 연관 정보 제공 시스템 내에 포함될 수 있다.
또한, 상기 콘텐츠 연관 정보 관리부는, 상기 미리 지정된 방송 콘텐츠에 대한 핑거프린트 정보를 지정된 방송 콘텐츠 각각에 대응하여 콘텐츠 연관 정보와 함께 저장하고, 상기 콘텐츠 연관 정보 제공 결정부는, 방송 채널을 통해 제공되는 방송 콘텐츠의 핑거프린트 정보와 상기 콘텐츠 연관 정보 관리부에 미리 저장해 둔 방송 콘텐츠에 대응하는 대한 핑거프린트 정보를 비교함으로써 상기 콘텐츠 연관 정보 관리부에 저장된 방송 콘텐츠가 재생되는지를 식별하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기는, 상기 표시되는 콘텐츠 연관 정보에 기초한 사용자의 입력 신호를 수신하고 수신된 입력 신호에 기초한 추가 동작 요청 신호를 상기 시스템 또는 외부의 별도 장치로 전송하는 사용자 정보 처리부를 더 포함할 수 있다.
또한, 상기 클라이언트 단말기의 방송 채널 확인부는, 핑거프린트 정보를 채널 정보 식별 서버로 전송하면서 시간 정보를 함께 전송하고, 상기 채널 정보 식별 서버는, 상기 콘텐츠 연관 정보 제공 시스템의 절대 시간 정보와 상기 클라이언트 단말기로부터 전송되는 시간 정보를 비교하여 클라이언트 단말기와 콘텐츠 연관 정보 제공 시스템의 방송 화면의 시간 옵셋 정보를 획득하여 클라이언트 단말기로 전송할 수도 있다.
또한, 상기 콘텐츠 연관 정보 발송부는 상기 클라이언트 단말기측으로 콘텐츠 연관 정보와 함께 절대 시간 정보를 전송하고, 상기 클라이언트 단말기는 상기 수신한 절대 시간 정보와 방송 화면의 시간 옵셋 정보에 기초하여 콘텐츠 연관 정보를 표시할 수 있다.
본 발명의 다른 측면에 의하면, 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 정보를 제공하는 시스템에서 디스플레이부, 방송 수신 수단 및 네트워크 접속 수단을 구비하는 클라이언트 단말기측으로 콘텐츠 연관 정보를 제공하는 방법에 있어서, 방송 채널을 통해 제공되는 방송 콘텐츠에 대하여 핑거프린트 정보를 추출하는 제1 단계; 방송 채널을 통해 제공되는 방송 도중 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 제2 단계; 및 상기 결정된 콘텐츠 연관 정보와 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 클라이언트 단말기측으로 전송하는 제3 단계를 포함하고, 상기 클라이언트 단말기는, 상기 수신한 핑거프린트 정보에 기초하여 상기 수신한 콘텐츠 연관 정보를 디스플레이부를 통해 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법을 제공할 수 있다.
여기에서 상기 콘텐츠 연관 정보는, 미리 지정된 방송 콘텐츠에 대하여 대응되도록 저장되어 있고, 상기 제2 단계는, 방송 채널을 통해 제공되는 방송 도중 상기 지정된 방송 콘텐츠가 재생되는 경우 상기 지정된 방송 콘텐츠에 대응하여 저장된 콘텐츠 연관 정보를 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보로서 결정하도록 구성할 수 있다.
또한, 상기 제2 단계는, 사용자의 입력 신호에 의해 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하도록 할 수도 있다.
또한, 상기 제3 단계에서, 클라이언트 단말기측으로 전송되는 핑거프린트 정보는, 상기 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보일 수도 있다.
또한, 상기 핑거프린트 정보는 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 맨 앞쪽으로부터 소정의 시간 범위 이내까지에 대한 핑거프린트 정보일 수 있다.
또한, 상기 클라이언트 단말기는, 자신이 수신하는 방송 콘텐츠에 대해 핑거프린트 정보를 추출하는 핑거프린트 추출부를 포함하고, 상기 클라이언트 단말기는, 상기 전송되어 오는 핑거프린트 정보와 상기 핑거프린트 추출부에서 추출된 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 표시하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기는, 클라이언트 단말기측의 핑거프린트 정보를 미리 정해진 시간 범위 동안 저장해 두고 상기 전송되어 오는 핑거프린트 정보가 상기 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기는, 방송 수신 수단을 통해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기는, 방송 수신 수단을 통해 수신되는 방송의 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보를 채널 정보 식별 서버로 전송하고, 상기 채널 정보 식별 서버는, 상기 클라이언트 단말기의 방송 채널 확인부로부터 수신되는 핑거프린트 정보에 기초하여 클라이언트 단말기가 현재 수신하고 있는 방송의 채널 정보를 확인하고 확인된 채널 정보를 상기 클라이언트 단말기로 전송하고, 상기 클라이언트 단말기는, 상기 채널 정보 식별 서버로부터 수신한 방송의 채널 정보에 의해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하도록 구성할 수도 있다.
또한, 상기 제3 단계에 있어서, 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대한 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 및 핑거프린트 정보와 함께 클라이언트 단말기측으로 전송하고, 상기 클라이언트 단말기는, 상기 수신한 방송 채널 식별 정보와 상기 획득된 방송 채널 식별 정보가 일치하는 경우 상기 전송된 핑거프린트 정보와 저장해둔 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 구성할 수도 있다.
또한, 상기 제3 단계 이전에, 상기 클라이언트 단말기는, 방송 채널 식별 정보를 상기 시스템으로 전송하고, 상기 제3 단계는, 상기 클라이언트 단말기로부터 수신되는 방송 채널 식별 정보에 기초하여 상기 제2 단계에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기를 확인하고, 확인된 클라이언트 단말기측으로 상기 결정된 콘텐츠 연관 정보와 핑거프린트 정보를 클라이언트 단말기측으로 전송하고, 상기 클라이언트 단말기는, 상기 전송된 핑거프린트 정보와 저장해둔 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 구성할 수도 있다.
또한, 상기 제3 단계 이전에, 상기 클라이언트 단말기가 방송 채널 식별 정보를 상기 시스템으로 전송하는 것은, 상기 시스템이 연결되어 있는 클라이언트 단말기로 상기 제2 단계에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는지의 여부를 확인하기 위한 방송 채널 확인 요청 신호를 전송하고, 상기 클라이언트 단말기가 상기 방송 채널 확인 요청 신호에 따라 방송 채널 식별 정보를 상기 시스템으로 전송하도록 구성할 수도 있다.
또한, 상기 콘텐츠 연관 정보는, 상기 미리 지정된 방송 콘텐츠에 대한 핑거프린트 정보를 지정된 방송 콘텐츠 각각에 대응하도록 함께 저장하며, 상기 제2 단계는, 방송 채널을 통해 제공되는 방송 콘텐츠의 핑거프린트 정보와 상기 미리 저장해 둔 방송 콘텐츠에 대응하는 대한 핑거프린트 정보를 비교함으로써 상기 저장된 방송 콘텐츠가 재생되는지를 식별하도록 구성할 수도 있다.
또한, 상기 클라이언트 단말기는, 상기 표시되는 콘텐츠 연관 정보에 기초한 사용자의 입력 신호를 수신하고 수신된 입력 신호에 기초한 추가 동작 요청 신호를 상기 시스템 또는 외부의 별도 장치로 전송하는 단계를 더 포함하도록 구성할 수도 있다.
본 발명에 의하면, 방송 수신 수단과 네트워크 접속 수단을 구비하는 클라이언트 단말기에 대하여, 실시간으로 방송을 시청하면서 방송 콘텐츠와 연관된 다양한 연관 정보를 실제 해당 방송을 시청하고 있는 클라이언트 단말기측으로 제공할 수 있도록 하되, 클라이언트 단말기측에서 시청하고 있는 방송의 채널 정보를 확인하는 주기를 길게 할 수 있으므로 채널 정보 식별 서버의 부하를 현저하게 줄일 수 있는 시스템 및 방법을 제공할 수 있다.
또한, 본 발명은, 방송이 제공되는 도중 관리자의 명령 입력 신호에 의해 그때 그때마다의 사정에 따른 콘텐츠 연관 정보를 실시간으로 해당 방송을 시청하고 있는 클라이언트 단말기측으로 제공할 수 있다.
또한, 본 발명에 의하면, 방송 콘텐츠와 연관된 정보를 수신한 사용자가 추가적인 동작을 수행할 수 있도록 함으로써 제품 구매, 정보 획득 등 2차적인 소비자 연결 활동을 확대할 수 있으므로 사용자의 인터랙티브한 참여도를 증진시킴으로써 정보 제공 효율을 증대시키며, 핑거프린트 정보를 이용하여 방송 콘텐츠가 재생되는지 여부를 실시간으로 정확하게 파악할 수 있으므로, 보다 효율적인 정보 제공 방법 및 시스템을 제공할 수 있다.
도 1은 본 발명에 의한 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템과 본 발명이 구현될 수 있는 전체적인 환경을 나타낸 것이다.
도 2는 본 발명의 바람직한 일실시예에 의한 콘텐츠 연관 정보 제공 시스템(100)과 클라이언트 단말기(200)의 내부 구성을 나타낸 도면이다.
도 3은 콘텐츠 연관 정보 관리부(110)에 저장되는 방송 콘텐츠 각각에 대한 콘텐츠 연관 정보와 핑거프린트 정보의 일예를 나타낸 도면이다.
도 4는 본 발명에 의한 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 일실시예를 나타낸 흐름도이다.
도 5는 본 발명에 의한 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 또 다른 실시예를 나타낸 흐름도이다.
도 6은 본 발명에 의한 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 또 다른 실시예를 나타낸 흐름도이다.
이하, 첨부 도면을 참조하여 본 발명에 의한 실시예를 상세하게 설명하기로 한다.
도 1은 본 발명에 의한 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템과 본 발명이 구현될 수 있는 전체적인 환경을 나타낸 것이다.
도 1을 참조하면, 본 발명에 의한 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템(이하, 콘텐츠 연관 정보 제공 시스템이라 한다, 100)은 클라이언트 단말기(200)와 네트워크를 통해 결합되어 있으며 방송 사업자(300)로부터 방송을 수신한다. 여기서, 네트워크(network)라 함은 인터넷망(Internet), 공중전화망(PSTN) 또는 이동통신망 등과 같은 개념을 포함한다. 콘텐츠 연관 정보 제공 시스템(100)은 방송 사업자(300)로부터 방송을 수신하면서 방송 중에 미리 지정된 방송 콘텐츠가 재생되는 경우 또는 사용자(관리자)로부터 신호가 입력되는 경우 클라이언트 단말기(200)측으로 제공할 콘텐츠 연관 정보를 결정하고 이를 네트워크를 통해 제공한다.
방송 사업자(300)는 일반적인 방송국과 같은 공중파 방송 사업자, 케이블 TV 송출 서비스 사업자, DMB 방송 송출 서비스 사업자, 인터넷 TV 서비스 사업자 등과 같이 현재의 환경에서 일반적으로 방송(broadcasting)이라고 불리워지는 모든 종류의 방송을 제공하는 사업자를 의미한다. 도 1에서 방송 사업자(300)는 설명의 편의를 위하여 하나로 나타내었으나 복수개 존재할 수 있음은 물론이다.
클라이언트 단말기(200)는 방송 사업자(300)로부터 제공되는 방송을 수신하며, 콘텐츠 연관 정보 제공 시스템(100)과 네트워크를 통해 자신이 수신하고 있는 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공받는다. 또한, 클라이언트 단말기(200)는 방송을 수신하는 동시에 네트워크를 통해 콘텐츠 연관 정보 제공 시스템(100)과 연결되므로, 방송을 수신할 수 있는 방송 수신 수단과 네트워크 접속 수단을 구비한다. 또한, 클라이언트 단말기(200)는 수신되는 방송을 표시할 수 있는 예컨대 LCD 장치와 같은 디스플레이부를 포함한다. 이러한 클라이언트 단말기(200)는 예컨대 최근 널리 판매되고 있는 스마트 TV와 같은 것일 수 있는데, 스마트 TV(smart TV)라 함은 일반적인 TV에 무선 랜 모듈과 같은 네트워크 접속 수단을 구비하도록 하고 웹 브라우져와 같은 프로그램이 동작될 수 있도록 하여 사용자가 웹 서핑을 하거나 이른바 어플리케이션(application)을 다운로드받아서 실행할 수 있도록 하는 TV를 의미한다. 또한 클라이언트 단말기(200)는 예컨대 DMB 수신 기능을 구비한 이동 통신 단말기일 수도 있는데, 최근의 이동 통신 단말기는 무선 랜 접속 기능을 구비하므로 이러한 무선 랜 접속 기능과 DMB 수신 기능을 각각 네트워크 접속 수단과 방송 수신 수단으로 볼 수 있기 때문이다. 또한 클라이언트 단말기(200)는 물리적으로 하나의 장치가 아닌 복수개의 장치로 구성될 수도 있는데, 예컨대 일반적인 종래의 TV와 이러한 TV에 연결하여 전술한 바와 같은 스마트 TV와 같은 기능을 구현하도록 하는 셋탑박스(set-top box)에 의해 구성될 수도 있다. 이러한 셋탑박스는 스마트 TV를 별도로 구매하지 않고 기존의 일반적인 TV를 이용하여 스마트 TV의 기능을 구현할 수 있도록 하는 보조장치로서, 예컨대 애플사의 애플 TV, 구글사의 구글 TV와 같은 장치가 시중에 제공되고 있으며, 이외에도 최근 기타 다양한 형태로서 널리 판매되고 있다. 또한, 셋탑박스는 예컨대 케이블 TV를 수신하기 위한 종래 알려진 셋탑박스일 수도 있다. 이와 같이 본 발명에서의 클라이언트 단말기(200)는 방송 수신 수단과 네트워크 접속 수단을 구비하는 것이기만 하면 어떠한 형태라도 본 발명에 그대로 사용할 수 있다.
이와 같은 환경에서 이루어지는 본 발명의 전체적인 동작을 개략적으로 요약하여 설명하면 다음과 같다.
우선 클라이언트 단말기(200)는 방송 수신 수단을 통해 방송 사업자(300)로부터 방송을 수신한다. 콘텐츠 연관 정보 제공 시스템(100) 또한 방송 사업자(300)로부터 방송을 수신한다. 콘텐츠 연관 정보 제공 시스템(100)은 방송을 수신하는 도중 미리 지정된 방송 콘텐츠가 재생되는 경우 또는 방송 도중 관리자로부터의 명령이 수신되는 경우 미리 저장해둔 콘텐츠 연관 정보를 해당 방송을 제공받고 있는 클라이언트 단말기(200)측으로 전송하고 클라이언트 단말기(200)는 이를 수신하여 디스플레이부에 표시하게 된다.
본 발명의 구체적인 실시예에 대해서는 도 2 이하를 참조하여 상세하게 설명하도록 한다.
도 2는 본 발명의 바람직한 일실시예에 의한 콘텐츠 연관 정보 제공 시스템(100)과 클라이언트 단말기(200)의 내부 구성을 나타낸 도면이다.
도 2를 참조하면 우선 콘텐츠 연관 정보 제공 시스템(100)은 콘텐츠 연관 정보 관리부(110), 핑거프린트 추출부(120), 콘텐츠 연관 정보 제공 결정부(130), 콘텐츠 연관 정보 발송부(140)을 포함한다. 도 1에서 설명한 바와 같이 콘텐츠 연관 정보 제공 시스템(100)은 방송 사업자(300)로부터 방송을 수신하므로 방송 수신 수단을 포함하지만 이는 종래 기술에 의하여 자명한 것이므로 방송 수신 수단 및 이와 관련되는 일반적인 구성들은 생략하여 나타내었음을 유의하여야 한다.
콘텐츠 연관 정보 관리부(110)는 클라이언트 단말기(200)측으로 제공할 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 저장하고 관리하는 기능을 수행한다. 여기에서, 방송 채널이라 함은 적어도 하나 이상의 복수개일 수 있으며, 콘텐츠 연관 정보 관리부(110)는 이러한 복수개의 방송 채널을 통해 방송 사업자(300)로부터 제공되는 방송 콘텐츠에 대하여 대응되도록 콘텐츠 연관 정보를 미리 저장해 둔다. 여기에서 방송 콘텐츠라 함은, 미리 지정된 것이기만 하면 충분하다. 예컨대, 특정 드라마의 특정 장면일 수 있다. 또한, 미리 지정된 특정한 광고화면일 수도 있다. 또한, 콘텐츠 연관 정보라 함은 예컨대 해당 방송 콘텐츠가 광고인 경우 해당 광고 제품의 할인 쿠폰 정보, 구매와 관련된 각종 정보, 해당 제품을 볼 수 있는 웹 사이트 정보, 이벤트 정보 등과 같이 해당 제품과 관련된 다양한 형태의 정보일 수 있다. 또한, 방송 콘텐츠가 특정 드라마의 특정 장면인 경우 해당 장면에 나타나는 제품의 구매 정보와 같은 것일 수도 있다. 콘텐츠 연관 정보는 해당 방송 콘텐츠와 관련이 있도록 하는 것이 바람직하지만 반드시 어떠한 연관성이 있어야 하는 것은 아니다. 이러한 콘텐츠 연관 정보는 별도의 관리 서버 예컨대 광고주 또는 광고 서비스 제공 업체측(미도시)에 의해 입력, 편집될 수 있도록 할 수도 있다. 콘텐츠 연관 정보 관리부(110)는 연관 정보를 관리할 수 있도록 연관 정보 각각에 대한 설명 정보나 연관 정보의 식별을 위해 고유하게 부여되는 식별자(identifer) 등 기타 부수적인 데이터를 더 포함할 수 있다.
또한 콘텐츠 연관 정보 관리부(110)는 해당 방송 콘텐츠 각각에 대하여 오디오, 비디오 또는 이들의 결합 중의 적어도 어느 하나에 의한 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보를 해당 방송 콘텐츠 각각에 대응하여 콘텐츠 연관 정보와 함께 저장하도록 할 수 있다.
핑거프린트 정보는 핑거프린트 추출부(120)에서 추출되는데, 핑거프린트(fingerprint) 정보라 함은, 오디오 데이터나 비디오 데이터 등과 같은 데이터의 특징을 나타내는 특징 데이터를 의미하는 것으로서, 지문 데이터, DNA 데이터 또는 유전자 데이터라고도 한다. 이러한 핑거프린트 정보와 관련해서는, 종래 기술에 의하여 여러 가지 방식이 제안되어 있으며, 이러한 핑거프린트 정보를 활용하면 데이터의 동일성 여부를 쉽게 판별할 수 있으므로 저작권 관리(DRM) 분야 등에서 최근 폭넓게 사용되고 있다. 예컨대, 오디오 데이터인 경우 오디오 데이터의 특징을 나타내는 각종 특징 데이터(예컨대, 주파수, 진폭 등)를 이용하여 핑거프린트 정보를 생성하며, 비디오 데이터인 경우 비디오 데이터의 여러 가지 특징 데이터(예컨대, 프레임의 모션 벡터 정보, 색상 정보 등)를 이용하여 핑거프린트 정보를 생성할 수 있다. 본 발명은 이러한 핑거프린트 정보를 생성하는 방법 자체를 목적으로 하는 것은 아니며 종래의 기술에 의한 어떠한 형태의 핑거프린트 생성/추출 방법을 그대로 사용할 수 있으므로 이에 대해서는 상세한 설명은 생략한다. 본 출원인이 출원한 대한민국 특허출원 출원번호 제10-2007-0044251호(오디오 핑거프린트 데이터 생성 방법 및 장치 및 이를 이용한 오디오 데이터 비교 방법 및 장치), 제10-2007-0054601호(동영상 데이터의 동일성 판단 및 동일 구간 검출 방법 및 장치), 제10-2007-0060978호(동영상 데이터들을 서로 동일성이 있는 동영상 데이터들끼리 클러스터링하는 방법 및 시스템), 제10-2007-0071633호(동영상 데이터 클러스터를 이용한 동영상 데이터 검색 서비스 제공 방법 및 장치), 제10-2007-0091587호(동영상 데이터 클러스터를 이용한 광고 데이터 설정 및 제공 방법 및 장치), 및 제10-2008-0051688호(동영상 처리 방법 및 그 장치)에 의하면, 오디오 또는 비디오 데이터의 핑거프린트 데이터를 생성하는 방법과 이러한 핑거프린트 데이터를 이용하여 클러스터링하는 방법에 대해서 기재되어 있으며, 이러한 본 출원인의 핑거프린트 생성 및 추출 방법을 본 발명에 사용할 수도 있음은 물론이다. 요컨대, 본 발명은 핑거프린트 정보를 추출하는 방식이 어떠한 것인가에 관계 없이 종래 알려져 있는 핑거프린트 생성/추출 기술을 그대로 사용할 수 있다.
콘텐츠 연관 정보 관리부(110)가 각각의 방송 콘텐츠에 대하여 핑거프린트 정보를 저장하는 것은 추후에 설명하는 콘텐츠 연관 제공 결정부(120)에서 방송 중에 콘텐츠 연관 정보 관리부(110)에 저장되어 있는 방송 콘텐츠가 재생되고 있는지를 판별하는데 사용된다. 또한, 핑거프린트 정보는 후술하는 바와 같이 클라이언트 단말기(200)측으로 전송되어 클라이언트 단말기(200)에서 콘텐츠 연관 정보를 표시할지 여부를 결정하는데 사용된다. 추후에 설명하겠지만 콘텐츠 연관 정보 제공 결정부(130)는 복수개의 방송 채널을 통해 제공되는 방송을 실시간으로 연속적으로 모니터링하면서 해당 방송의 오디오, 비디오 또는 이들의 결합 중의 적어도 어느 하나에 의한 핑거프린트 정보를 실시간으로 예컨대 일정 시간 단위로 연속적으로 추출하고 이를 콘텐츠 연관 정보 관리부(110)에 전술한 바와 같이 저장되어 있는 핑거프린트 정보와 비교함으로써 콘텐츠 연관 정보 관리부(110)에 저장된 방송 콘텐츠 중 어느 하나가 방송되고 있는지를 판별할 수 있다. 물론, 핑거프린트 정보 이외에 다른 정보를 이용하여 방송 중에 광고가 재생되고 있는지를 판별할 수도 있으나 전술한 바와 같이 핑거프린트 정보는 오디오나 비디오 데이터의 고유한 특징을 명확하게 나타내 주므로 핑거프린트 정보를 이용하는 것이 바람직하다.
도 3은 콘텐츠 연관 정보 관리부(110)에 저장되는 방송 콘텐츠 각각에 대한 콘텐츠 연관 정보와 핑거프린트 정보의 일예를 나타낸 도면이다.
도 3을 참조하면, 방송 콘텐츠 필드에는 각각의 방송 콘텐츠의 간단한 설명이 포함되어 있으며, 콘텐츠 식별자 필드에는 각각의 방송 콘텐츠에 대해 고유하게 부여되는 식별자가 포함되어 있음을 알 수 있다. 콘텐츠 연관 정보로서는 각각 "5% 할인 쿠폰 제공", "www.ccc.com으로 링크", "G 동영상 재생" 등과 같은 정보가 포함되어 있다. 도 3에서는 실제 콘텐츠 연관 정보를 나타낸 것이 아니라 콘텐츠 연관 정보의 내용을 설명의 편의를 위하여 나타낸 것이지만, 실제 구현시에는 이러한 내용의 콘텐츠 연관 정보를 클라이언트 단말기측의 사용자가 제공받을 수 있도록 하는 데이터를 포함하는 것이 바람직하다. 예컨대, "5% 할인 쿠폰 제공"의 경우 이러한 내용을 실제 사용자가 제공받을 수 있도록 하는 텍스트, 오디오, 비디오 데이터 등의 결합에 의하여 이루어지는 웹 페이지를 포함하도록 구성하여 실제 콘텐츠 연관 정보로서는 이러한 웹 페이지가 클라이언트 단말기측으로 제공되도록 할 수 있으며 이러한 경우 콘텐츠 연관 정보는 이러한 웹 페이지를 포함하도록 구성할 수 있다. 예컨대 "www.ccc.com으로 링크"의 경우에는 해당 동작을 수행하기 위하여 하이퍼링크를 포함하는 웹 페이지가 콘텐츠 연관 정보로서 저장될 수 있다. 물론, 이외에도 콘텐츠 연관 정보는 단순한 텍스트 데이터로서 해당 텍스트 데이터를 클라이언트 단말기측으로 제공되는 형태로 구성할 수도 있음은 물론이다. 추후 설명하겠지만 클라이언트 단말기(200)는 콘텐츠 연관 정보 제공 시스템(100)에 의해 전송되는 콘텐츠 연관 정보를 수신하여 이를 디스플레이부에 표시하게 되므로 콘텐츠 연관 정보는 이러한 처리를 수행할 수 있도록 정의된 데이터인 것이 바람직하다.
도 3의 마지막 필드에는 각각의 방송 콘텐츠에 대한 핑거프린트 정보가 2진수로서 표현되어 있다. 전술한 바와 같이, 이러한 핑거프린트 정보를 이용하여 콘텐츠 연관 제공 결정부(130)가 콘텐츠 연관 정보 관리부(110)에 포함된 방송 콘텐츠가 방송되고 있는지를 판별할 수 있다. 핑거프린트 정보는 예컨대 해당 방송 콘텐츠가 동영상 데이터인 경우 해당 동영상 데이터의 전체 프레임에 대한 정보를 포함할 수 있는데, 콘텐츠 연관 정보 제공 결정부(130)는 해당 방송 콘텐츠가 시작되고 있음을 실시간으로 판별해야 하므로 해당 방송 콘텐츠의 맨 처음 프레임부터 일정 시간 범위 구간 내의 프레임까지에 대한 핑거프린트 정보를 포함하도록 구성할 수도 있다.
다시 도 2를 참조하여 콘텐츠 연관 정보 제공 시스템(100)의 핑거프린트 추출부(120)에 대하여 설명한다. 핑거프린트 추출부(120)는 전술한 바와 같이, 오디오 데이터나 비디오 데이터 등과 같은 데이터의 특징을 나타내는 특징 데이터를 의미하며, 종래 기술에 의하여 알려진 적절한 방법을 사용하여 제공되고 있는 가능한 모든 방송 채널에 대하여 핑거프린트 정보를 실시간으로 연속적으로 추출한다. 추출된 핑거프린트 정보는 전술한 바와 같이 콘텐츠 연관 정보 제공 결정부(130)로 전달되어 연관 정보 관리부(110)에 저장된 방송 콘텐츠가 재생되는지를 식별하는데 사용된다. 또한 콘텐츠 연관 정보 발송부(140)를 통해 클라이언트 단말기로 전송되어 클라이언트 단말기(200)에서 해당 연관 정보를 표시할 때 핑거프린트 정보에 기초하여 해당 콘텐츠 연관 정보를 표시할지 여부를 결정하는데 사용되도록 한다.
다음으로, 콘텐츠 연관 정보 제공 결정부(130)에 대해 설명한다. 콘텐츠 연관 정보 제공 결정부(130)는 첫째, 방송 채널을 통해 제공되는 방송 도중 전술한 바와 같이 콘텐츠 연관 정보 관리부(110)에 저장된 방송 콘텐츠가 재생되는지를 식별하거나, 둘째, 사용자의 입력 신호에 의해 클라이언트 단말기(200)측으로 제공할 콘텐츠 연관 정보를 결정하는 기능을 수행한다.
상기 첫째 방법은, 전술한 바와 같이 핑거프린트 추출부(120)에서 방송 채널을 통해 제공되는 방송의 오디오, 비디오 또는 이들의 결합 중의 적어도 어느 하나에 의한 핑거프린트 정보를 실시간으로 연속적으로 추출하고 추출된 핑거프린트 정보와 콘텐츠 연관 정보 관리부(110)에 미리 저장해 둔 방송 콘텐츠 각각에 대한 핑거프린트 정보를 비교함으로써 콘텐츠 연관 정보 관리부(110)에 저장된 방송 콘텐츠가 재생되는지를 식별하는 방법에 의하여 이루어질 수 있다. 여기에서 콘텐츠 연관 정보 제공 결정부(120)는 해당 방송 콘텐츠가 재생되는 시점으로부터 짧은 시간내에 해당 콘텐츠의 재생 여부를 판별해야 하는데 이는 예컨대 해당 콘텐츠가 광고인 경우, 광고는 통상 20초, 30초, 1분 등과 같이 비교적 짧은 시간 내에 완료되고 이 시간 동안에 후술하는 바와 같이 클라이언트 단말기(200)측으로 콘텐츠 연관 정보를 제공하고 클라이언트 단말기(200)측으로부터 콘텐츠 연관 정보에 기초한 추가 동작 요청이 있는 경우 이를 처리해야 하기 때문이다. 따라서, 콘텐츠 연관 정보 제공 결정부(130)는 비교적 짧은 구간 단위로 방송 화면의 오디오 또는 비디오 데이터의 핑거프린트 정보를 추출하는 것이 바람직하다. 콘텐츠 연관 정보 제공 결정부(130)는 이와 같은 방식에 의하여 방송되는 화면에 미리 지정된 방송 콘텐츠가 재생되는 것을 판별하면 이를 해당 채널의 정보와 함께 콘텐츠 연관 정보 발송부(140)로 알린다.
한편, 상기 두번째 방법은, 사용자(관리자)의 입력 신호에 의해 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는데, 이러한 방법은 관리자가 방송 콘텐츠를 시청하면서 특정한 시점에 필요하다고 생각되는 경우 콘텐츠 연관 정보를 제공하도록 시스템(100)에 입력 신호를 전송하는 방법에 의하여 이루어질 수 있다. 이 경우는, 콘텐츠 연관 정보 또한 함께 지정하도록 할 수 있다. 예컨대, 특정 드라마의 특정 장면이 방송되는 경우 관리자가 해당 장면과 관련된다고 생각되는 콘텐츠 연관 정보를 지정하여 연관 정보로서 제공하도록 결정할 수 있다. 또한, 야구 경기가 방송되는 경우 홈런과 관련된 이벤트를 연관 정보로서 미리 지정해 두고 타자가 홈런을 친 경우 지정해 둔 이벤트를 연관 정보로서 클라이언트 단말기(200)측으로 제공하도록 결정할 수 있다.
한편, 콘텐츠 연관 정보 발송부(140)는 상기한 바와 같이 콘텐츠 연관 정보 제공 결정부(130)에서 결정된 콘텐츠 연관 정보와 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 네트워크를 통해 클라이언트 단말기(200)측으로 전송하는 기능을 수행한다.
여기에서, 콘텐츠 연관 정보 발송부(140)에서 클라이언트 단말기(200)측으로 전송되는 핑거프린트 정보는, 콘텐츠 연관 정보 제공 결정부(130)에서 콘텐츠 연관 정보를 제공할 것으로 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보일 수 있다. 예컨대, 결정된 연관 정보에 상응하는 방송 콘텐츠의 맨 앞부분(시간 프레임 0초)부터 소정 시간 범위(예컨대 시간 프레임 1초)일 수 있다.
클라이언트 단말기(200)는 후술하는 바와 같이 자신이 현재 수신하고 있는 방송 채널에서 제공되고 있는 방송 콘텐츠를 실시간으로 연속적으로 추출하는 핑거프린트 추출부(250)를 포함하며, 핑거프린트 추출부(250)에서 추출되는 핑거프린트 정보와 콘텐츠 연관 정보 발송부(140)로부터 전송되어 오는 핑거프린트 정보를 비교하여 일치하는 경우 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 동작할 수 있다. 이러한 과정은 후술하는 채널 식별 정보를 이용하여 채널의 일치 여부를 판단하는 과정과 병행하여 이루어질 수 있다. 후술하는 채널 식별 정보를 이용하는 것은 클라이언트 단말기(200)에서 현재 시청하고 있는 방송의 채널이 어떤 것인가를 판단하여 채널이 동일한 경우에만 해당 화면에 콘텐츠 연관 정보를 표시하도록 하기 위함인데, 이러한 채널 식별 정보만을 이용하는 경우 클라이언트 단말기(200)에서 채널 식별이 이루어진 이후 채널이 전환된 경우에는 콘텐츠 연관 정보가 해당 방송 채널이 아닌 다른 방송 채널에서 재생되는 경우가 발생할 수 있다. 이를 방지하기 위해서는, 클라이언트 단말기(200)측에서 매우 짧은 주기로 연속적으로 채널 식별 과정을 수행해야 하는데 이는 클라이언트 단말기(200) 및/또는 후술하는 채널 정보 식별 서버에서 매우 큰 부하로 작용하게 된다. 따라서, 콘텐츠 연관 정보 발송부(140)에서 콘텐츠 연관 정보를 전송하면서 핑거프린트 정보의 적어도 일부를 전송하도록 하고 클라이언트 단말기(200)가 해당 콘텐츠 연관 정보를 재생하기 전 단계에서 재생되고 있는 방송 채널 즉, 방송 콘텐츠가 무엇인지를 핑거프린트 정보를 비교하여 판단하도록 하면, 클라이언트 단말기(200)에서 자신이 시청하고 있는 채널 정보를 확인하는 주기를 매우 길게 할 수 있어서 클라이언트 단말기(200) 및 채널 정보 식별 서버(400)의 부하를 현저히 줄일 수 있는 장점이 있다.
한편, 시스템의 조건에 따라서 가능한 경우는 후술하는 채널 정보 식별 과정을 사용하지 않고 상기와 같은 핑거프린트 정보만을 이용해서 클라이언트 단말기(200)에서 해당 콘텐츠 연관 정보를 표시할지 여부를 결정하도록 할 수도 있다. 이러한 경우는 채널 식별 과정이 불필요해지므로 채널 정보 식별 서버(400)가 필요없을 수 있으므로 네트워크 전체의 부하 및 시스템의 자원을 절약할 수 있는 장점이 있다.
한편, 클라이언트 단말기(200)와 시스템(100)에서 제공되는 방송 콘텐츠는 시간차가 존재할 수 있는데, 클라이언트 단말기(200)측에서 시스템(100)에 비하여 방송 콘텐츠가 늦게 재생되어 핑거프린트 정보를 수신한 이후 해당 핑거프린트 정보가 포함된 방송 콘텐츠가 재생되는지를 판단할 수 있다면 특별한 문제는 없다. 그러나, 클라이언트 단말기(200)측에서 방송 콘텐츠가 시스템(100)보다 먼저 재생되거나 거의 동일한 시간에 재생된다면 핑거프린트 정보를 수신한 이후 해당 핑거프린트 정보가 포함된 방송 콘텐츠가 이미 재생되어 있는 경우가 발생할 수 있으므로, 이를 대비하기 위하여 클라이언트 단말기(200)의 콘텐츠 연관 정보 표시부(260)는, 클라이언트 단말기(200)측의 핑거프린트 정보를 일정 시간 범위(예컨대, 15초)동안 저장해 두고 콘텐츠 연관 정보 발송부(140)로부터 전송되어 오는 핑거프린트 정보가 상기 15초 단위로 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는지를 판별하여, 15초 범위 내에 어느 한 부분에라도 존재하는 경우 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 동작하도록 하는 것이 바람직하다.
또한, 다른 방법으로서, 실제 클라이언트 단말기(200)에서 재생되는 방송이 시스템(100)측보다 예컨대 10초 정도 항상 늦어지도록 설정해 두는 방법을 사용할 수도 있다.
이러한 핑거프린트 정보를 이용하는 과정과 병행하여 채널 식별 정보를 이용하여 클라이언트 단말기(200) 중에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠가 포함된 방송을 시청하고 있는 클라이언트 단말기(200)측에서만 콘텐츠 연관 정보를 표시하는 방법은 다음과 같은 방법을 사용할 수 있다. 이러한 채널 식별 과정은 전술한 핑거프린트 정보를 이용하는 과정과 병행하여 사용할 수 있으며, 예컨대 채널 식별 과정을 먼저 수행하고 전술한 핑거프린트 정보를 이용하는 과정을 수행하도록 할 수 있다.
우선, 클라이언트 단말기(200)에 방송 수신 수단(220)을 통해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 방송 채널 확인부(240)를 구비하도록 하고, 방송 채널 확인부(240)에 의해 확인되는 방송 채널 식별 정보를 이용하여 콘텐츠 연관 정보를 표시할지의 여부를 결정할 수 있다. 이를 위해서 콘텐츠 연관 정보 제공 시스템(100)의 콘텐츠 연관 정보 발송부(140)는 콘텐츠 연관 정보를 발송하면서 해당 방송 콘텐츠의 방송 채널을 나타내는 방송 채널 식별 정보를 전송하고, 클라이언트 단말기(200)의 콘텐츠 연관 정보 표시부(250)는 방송 채널 확인부(240)에서 확인되는 방송 채널 식별 정보와 콘텐츠 연관 정보 제공 시스템(100)으로부터의 방송 채널 식별 정보를 비교하여 이들이 일치하는 경우 해당 연관 정보를 디스플레이부(210)를 통해 표시하도록 할 수 있다. 만약 일치하지 않는 경우 콘텐츠 연관 정보 표시부(250)는 수신되는 연관 정보를 무시한다. 이 때, 일치하는 경우 전술한 바와 같은 핑거프린트 비교 과정을 수행하도록 할 수 있다.
방송 채널 확인부(240)는 예컨대, 클라이언트 단말기(200)가 스마트 TV이고 공중파 디지털 방송 SBS를 시청하고 있는 경우 클라이언트 단말기(200)에는 이러한 채널 정보가 디지털 방송 신호를 통해 제공되고 있으므로 클라이언트 단말기(200)의 방송 채널 확인부(240)는 이로부터 방송 채널 식별 정보를 획득할 수 있다. 방송 채널 확인부(240)는 채널이 변경되는 때마다 또는 주기적으로 방송 채널 식별 정보를 업데이트하도록 하는 것이 바람직하다.
한편, 클라이언트 단말기(200)에서 자신이 수신하고 있는 방송 채널이 어떤 것인지를 알 수 없는 경우에는 핑거프린트 정보를 이용하여 방송 채널 식별 정보를 획득할 수 있다. 즉, 클라이언트 단말기(200)측에 구비된 전술한 바와 같은 핑거프린트 추출부(250)에 의해 자신이 시청하고 있는 방송의 핑거프린트 정보를 실시간으로 연속적으로 추출하고 이를 채널 정보 식별 서버(400, 도 4 이하 참조)로 전송하도록 하고 채널 정보 식별 서버에서 클라이언트 단말기(200)의 방송 채널 식별 정보를 파악하여 이를 클라이언트 단말기(200)로 전송함으로써 방송 채널 식별 정보를 획득하도록 할 수 있다.
채널 정보 식별 서버(400)는 방송 사업자(300)에서 제공되는 모든 방송에 대해 실시간으로 전술한 바와 같은 방법으로 핑거프린트 정보를 추출하고 이를 클라이언트 단말기(200)의 방송 채널 확인부(240)로부터 전송되어 오는 핑거프린트 정보를 비교하여 클라이언트 단말기(200)가 현재 수신하고 있는 방송의 채널 정보를 확인하여 이를 클라이언트 단말기(200)로 전송하는 기능을 수행한다. 이러한 채널 정보 식별 서버(400)는 모든 방송 채널에 대해 핑거프린트 정보를 실시간으로 파악하고 모든 방송 채널에 대한 채널 정보를 알고 있다고 전제하므로 클라이언트 단말기(200)의 방송 채널 확인부(240)로부터 핑거프린트 정보가 수신되는 경우 이들을 비교함으로써 클라이언트 단말기(200)가 어떠한 방송 채널을 시청하고 있는지를 정확하게 파악할 수 있게 된다. 이와 같이 채널 정보 식별 서버(400)에서 클라이언트 단말기(200)가 수신하고 있는 방송의 채널 정보가 확인되면 확인된 방송의 채널 정보를 클라이언트 단말기(200)로 전송하고 클라이언트 단말기(200)의 방송 채널 확인부(240)는 자신이 시청하고 있는 방송 채널 식별 정보를 획득할 수 있다.
한편, 채널 정보 식별 서버(400)는 콘텐츠 연관 정보 제공 시스템(100)과는 물리적으로 분리된 별도의 장치로 구현할 수 있으나, 콘텐츠 연관 정보 제공 시스템(100) 내부에 포함되도록 구성할 수도 있음은 물론이다.
다음으로, 콘텐츠 연관 정보 제공 시스템(100)에 연결되어 있는 클라이언트 단말기(200) 중에서 시스템(100)에서 제공할 것으로 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 시청하고 있는 클라이언트 단말기(200)측에서만 콘텐츠 연관 정보를 표시하도록 하는 두번째 방법에 대하여 설명한다.
두번째 방법은 콘텐츠 연관 정보 제공 시스템(100)에서 클라이언트 단말기(200)로부터 방송 채널 식별 정보를 먼저 전송받고 이에 의해 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기(200)를 확인하고 확인된 클라이언트 단말기(200)측으로만 콘텐츠 연관 정보를 전송하는 방식이다. 이를 위해서 클라이언트 단말기(200)는 전술한 바와 같은 방송 채널 확인부(240)에 의해 자신이 현재 수신하여 재생하고 있는 방송 채널의 식별 정보를 획득하고 이를 콘텐츠 연관 정보 제공 시스템(100)으로 전송할 수 있다. 이 경우, 방송 채널 확인부(240)가 현재 수신하고 있는 방송 채널의 식별 정보를 자동적으로 콘텐츠 연관 정보 제공 시스템(100)으로 전송하도록 하거나 콘텐츠 연관 정보 제공 시스템(100)으로부터 방송 채널 확인 요청 신호가 수신된 경우 이에 대응하여 현재 수신하고 있는 방송 채널의 식별 정보를 콘텐츠 연관 정보 제공 시스템(100)으로 전송하도록 할 수 있다.
한편, 클라이언트 단말기(200)의 방송 채널 확인부(240)는 핑거프린트 정보를 채널 정보 식별 서버(400)로 전송하면서 시간 정보를 함께 전송하도록 할 수 있다. 이는 실제 방송 화면이 송출되는 과정에서 클라이언트 단말기(200)와 콘텐츠 연관 정보 제공 시스템(100)이 동일한 방송 화면을 수신하는 시점이 서로 차이가 나는 경우를 처리하기 위한 것이다. 이를 위하여 클라이언트 단말기(200)의 방송 채널 확인부(240)는 전술한 바와 같이 핑거프린트 정보를 채널 정보 식별 서버(400)로 전송하면서 자신의 시간 정보(이는 단말기에 일반적으로 내장되어 있는 시계에 의해 획득될 수 있다)를 함께 전송하도록 하고, 채널 정보 식별 서버(400)는 전술한 바와 같이 핑거프린트 정보에 기초하여 클라이언트 단말기(200)의 채널 정보를 식별하면서 시간 정보와 콘텐츠 연관 정보 제공 시스템(100)의 시간 정보를 비교함으로써 클라이언트 단말기(200)와 콘텐츠 연관 정보 제공 시스템(100) 사이의 동일한 화면에 대한 시간 차 즉, 시간 옵셋(offset) 정보를 획득할 수 있다. 이 때, 채널 정보 식별 서버(400)가 콘텐츠 연관 정보 제공 시스템(100)과 별도의 장치로서 존재하는 경우라면 이들은 서로 동기화되어 있도록 설정되어 있는 것이 바람직하다. 콘텐츠 연관 정보 제공 시스템(100) 내부에 채널 정보 식별 서버(400)가 존재하는 경우 채널 정보 식별 서버(400)는 콘텐츠 연관 정보 제공 시스템(100)과 동기화되어 있다고 볼 수 있다. 한편, 콘텐츠 연관 정보 제공 시스템(100)의 시간 정보를 예컨대 GMT(Greenwich Mean Time) 등과 같이 절대 시간 정보를 사용하는 것이 바람직하다. 채널 정보 식별 서버(400)는 핑거프린트 정보를 비교하면서 이와 함께 절대 시간 정보와 클라이언트 단말기(200)로부터 전송되어 온 시간 정보를 비교함으로써 동일한 화면에 대한 시간 차 즉, 시간 옵셋 정보를 파악할 수 있다. 채널 정보 식별 서버(400)는 시간 옵셋 정보가 획득되면 클라이언트 단말기(200)측으로 시간 옵셋 정보를 전송하게 된다. 시간 옵셋 정보는 채널 정보와 함께 전송될 수 있다.
시간 옵셋 정보가 획득되면 콘텐츠 연관 정보 발송부(140)는 콘텐츠 연관 정보 제공 결정부(130)에서 결정된 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기(200)측으로 콘텐츠 연관 정보 관리부(110)에 저장되어 있는 콘텐츠 연관 정보와 함께 절대 시간 정보를 전송하고, 이를 수신한 클라이언트 단말기(200)는 시간 옵셋 정보에 기초하여 연관 정보를 클라이언트 단말기(200)의 디스플레이부에 표시하도록 할 수 있다.
다음으로, 클라이언트 단말기(200)에 대하여 설명한다.
클라이언트 단말기(200)는 디스플레이부(210), 방송 수신 수단(220), 네트워크 접속 수단(230), 방송 채널 확인부(240), 핑거프린트 추출부(250), 콘텐츠 연관 정보 표시부(260) 및 사용자 정보 처리부(270)을 포함한다. 도 1에서 설명한 바와 같이, 클라이언트 단말기(200)는 여러 가지 형태로 제공되는 방송을 수신할 수 있는 기능과 인터넷과 같은 네트워크에 접속할 수 있는 기능을 구비하는 것으로서, 예컨대 스마트 TV, DMB 수신기능을 구비하는 이동 통신 단말기, IPTV 등과 같은 것일 수 있다. 클라이언트 단말기(200)의 구성 중에서 디스플레이부(210), 방송 수신 수단(220), 네트워크 접속 수단(230)는 종래 기술에 의해 자명한 것이므로 상세 설명은 생략한다.
방송 채널 확인부(240)는 방송 수신 수단(220)을 통해 수신되는 방송 채널 식별 정보를 획득하는 수단으로써, 이에 대해서는 앞서 상세히 설명하였으므로 상세 설명은 생략한다.
핑거프린트 추출부(250)는 전술한 바와 같이 클라이언트 단말기(200)가 현재 수신하고 있는 방송 채널에서 제공되고 있는 방송 콘텐츠에 대한 핑거프린트 정보를 실시간으로 연속적으로 추출하는 기능을 수행한다. 핑거프린트 추출부(250)에서 추출되는 핑거프린트 정보는 전술한 바와 같이 채널 정보 식별 서버(400)로 전송되어 채널 정보를 식별하는데 사용될 수 있다. 또한, 시스템(100)으로부터 전송되어 오는 핑거프린트 정보와의 비교를 통해 전술한 바와 같이 해당 콘텐츠 연관 정보를 표시할지의 여부를 제어하도록 하는데 사용될 수 있다. 이에 대해서도 앞서 상세히 설명하였으므로 상세 설명은 생략한다.
콘텐츠 연관 정보 표시부(260)는 전술한 바와 같은 방법에 의하여 시스템(100)의 콘텐츠 연관 정보 발송부(140)로부터 전송된 핑거프린트 정보에 기초하여 시스템(100)으로부터 전송되는 콘텐츠 연관 정보를 디스플레이부(210)를 통해 표시하도록 제어하는 기능을 수행한다.
전술한 바와 같이, 콘텐츠 연관 정보 표시부(260)는 콘텐츠 연관 정보 제공 시스템(100)으로부터 연관 정보, 핑거프린트 정보와 함께 방송 채널 식별 정보를 수신하고, 방송 채널 식별 정보에 의해 자신이 현재 시청하고 있는 방송 채널과 동일한지의 여부를 우선 판별하여 동일한 경우, 핑거프린트 정보를 비교하여 일치하는 경우에만 해당 콘텐츠 연관 정보를 표시하도록 할 수 있다.
다른 방법으로서 전술한 바와 같이, 콘텐츠 연관 정보 제공 시스템(100)으로부터 해당 방송 콘텐츠를 시청하고 있는 클라이언트 단말기(200)만에 대해서 콘텐츠 연관 정보가 전송되는 경우 핑거프린트 정보를 비교하여 일치하는 경우에 콘텐츠 연관 정보 표시부(250)는 해당 콘텐츠 연관 정보를 수신하면서 디스플레이부(210)에 표시하게 된다. 이 때, 콘텐츠 연관 정보 표시부(250)는 전술한 바와 같이 시간 옵셋 정보에 기초하여 표시하도록 할 수 있다.
한편, 콘텐츠 연관 정보 표시부(250)가 연관 정보를 디스플레이부(210)를 통해 표시하는 방법은 여러 가지 형태를 사용할 수 있는데 우선 수신한 콘텐츠 연관 정보를 디스플레이부(210)를 통해 현재 수신하고 있는 방송 화면에 겹치도록(overlay) 표시하도록 할 수 있다. 예컨대 디스플레이부(210)의 하단 영역에 나타나는 방송 화면 위에 콘텐츠 연관 정보가 겹치면서 표시되도록 할 수 있다. 이 때의 콘텐츠 연관 정보는 도 3에 설명한 바와 같은 콘텐츠 연관 정보의 내용을 실제 수행할 수 있도록 하는 데이터일 수 있는데, 예컨대 "5% 할인 쿠폰 제공"인 경우 이러한 내용을 수행할 수 있도록 해당 내용을 텍스트 데이터로 일정 시간 표시하고 사용자에게 해당 쿠폰을 제공받을 수 있는 방법 예컨대 하이퍼링크를 제공하여 이를 선택하도록 하는 정보를 방송 화면과 겹치면서 연속적으로 표시할 수 있다. 또한 방송 화면에 표시되는 연관 정보는 예컨대 깜빡거림, 롤 방식 등과 같은 형태로 제공될 수도 있다.
한편, 콘텐츠 연관 정보 표시부(260)는 수신한 콘텐츠 연관 정보를 디스플레이부(210)를 통해 현재 수신하고 있는 방송 화면과 겹치지 않도록 부분적으로 표시하도록 구성할 수도 있는데, 이는 예컨대 콘텐츠 연관 정보를 하단에 막대 형태로 제공하도록 하고, 방송 화면을 콘텐츠 연관 정보가 제공되는 영역만큼 축소하여 표시되도록 하는 방법에 의하여 제공될 수 있다.
한편, 클라이언트 단말기(200)의 사용자 정보 처리부(270)는 전술한 바와 같이 표시되는 콘텐츠 연관 정보에 기초한 사용자의 입력 신호를 수신하고 수신된 입력 신호에 기초한 추가 동작 요청 신호를 콘텐츠 연관 정보 제공 시스템(100) 또는 외부의 별도 장치로 전송하는 기능을 수행한다. 전술한 바와 같이, 콘텐츠 연관 정보가 일방적으로 클라이언트 단말기(200)측으로 정보만을 제공하는 경우라면 사용자 정보 처리부(260)는 생략할 수 있으나 콘텐츠 연관 정보 중에서 사용자로 하여금 특정한 동작을 하도록 하는 경우가 있다. 예컨대, 콘텐츠 연관 정보로서 "5% 할인 쿠폰을 제공"받기 위해서는 특정한 사이트로 접속하라든지, 특정 전화 번호로 문자 메시지를 보내라고 한다든지 하는 등과 같이 사용자로 하여금 추가적인 동작을 요구하는 경우가 있을 수 있으며 사용자 정보 처리부(270)는 이에 따라 클라이언트 단말기(200)의 사용자가 추가적인 동작 요청 신호를 입력하는 경우 이를 수신하여 콘텐츠 연관 정보 제공 시스템(100)이나 외부의 기타 별도 장치(예컨대, 특정 웹 사이트)로 전송하도록 하는 기능을 수행한다. 이를 위하여 클라이언트 단말기(200)는 사용자가 입력 신호를 입력하도록 하는 입력 수단(예컨대, 키보드, 마우스, 리모콘)을 구비하는 것이 바람직하다.
도 4는 전술한 바와 같은 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 일실시예를 나타낸 흐름도이다.
우선, 클라이언트 단말기(200)와 콘텐츠 연관 정보 제공 시스템(100)은 앞서 설명한 바와 같이 방송 사업자(300)로부터 전송되는 방송을 수신하고 수신되는 방송 콘텐츠에 대해서 핑거프린트 정보를 실시간으로 연속적으로 추출한다(S10, S20).
방송을 수신하는 도중 콘텐츠 연관 정보 제공 시스템(100)은 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정한다(S11). 콘텐츠 연관 정보를 결정하는 것은, 전술한 바와 같이, 콘텐츠 연관 정보 제공 시스템(100)이 콘텐츠 연관 정보 관리부(110)에 미리 방송 채널을 통해 제공되는 방송에 포함되는 방송 콘텐츠 각각에 대하여 콘텐츠 연관 정보 및 대응되는 핑거프린트 정보를 저장해 두도록 하고, 적어도 하나 이상의 복수개의 방송 사업자(300)로부터의 복수개의 방송 채널을 통해 복수의 방송을 수신하면서 방송 중에 콘텐츠 연관 정보 관리부(110)에 미리 지정되어 저장되어 있는 방송 콘텐츠가 재생되는지를 판단함으로써 이루어질 수 있다. 이는 핑거프린트 추출부((120)에서 추출된 핑거프린트 정보와 저장해둔 핑거프린트 정보를 비교함으로써 이루어질 수 있는데, 저장해 둔 방송 콘텐츠가 재생되는지를 식별하는 것은 전술한 바와 같이 콘텐츠 연관 정보 관리부(110)에 방송 채널을 통해 제공되는 방송에 포함된 방송 콘텐츠에 대하여 미리 추출해둔 오디오, 비디오 또는 이들의 결합 중의 적어도 어느 하나에 의한 핑거프린트 정보를 상기 방송 콘텐츠 각각에 대응하여 콘텐츠 연관 정보와 함께 저장해 두고, 콘텐츠 정보 제공 결정부(130)가 방송 채널을 통해 제공되는 방송의 오디오, 비디오 또는 이들의 결합 중의 적어도 어느 하나에 의한 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보와 상기 콘텐츠 연관 정보 관리부(110)에 미리 저장해 둔 방송 콘텐츠 각각에 대한 핑거프린트 정보를 비교함으로써 상기 콘텐츠 연관 정보 관리부(110)에 저장된 방송 콘텐츠가 재생되는지를 식별하는 방법을 사용할 수 있다. 이와 같이 미리 지정해 둔 저장된 방송 콘텐츠가 재생되는 경우 해당 방송 콘텐츠에 대응하여 저장된 콘텐츠 연관 정보를 클라이언트 단말기(200)측으로 제공할 콘텐츠 연관 정보로 결정하게 된다.
한편, 상기 단계(S11)은, 전술한 바와 같이, 사용자의 입력 신호에 의해 결정될 수도 있다.
클라이언트 단말기(200)측으로 제공할 콘텐츠 연관 정보가 결정되면, 콘텐츠 연관 정보 제공 시스템(100)의 콘텐츠 연관 정보 발송부(130)는 연결된 모든 클라이언트 단말기(100)측으로 상기 결정된 콘텐츠 연관 정보, 방송 채널 식별 정보와 함께 핑거프린트 정보를 전송한다(S12).
여기에서, 전송되는 핑거프린트 정보는, 앞서 설명한 바와 같이, 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보일 수 있다. 예컨대, 핑거프린트 정보는 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 맨 앞쪽으로부터 소정의 시간 범위 이내까지에 대한 핑거프린트 정보일 수 있다.
콘텐츠 연관 정보 제공 시스템(100)은 방송 채널 식별 정보를 알고 있는 경우 이를 그대로 전송하고 알고 있지 못한 경우 앞서 클라이언트 단말기(200)가 채널 정보 식별 서버(400)를 통해 채널 정보를 획득하는 과정과 마찬가지로 채널 정보 식별 서버(400)를 통해 채널 식별 정보를 알 수 있다.
한편, 클라이언트 단말기(200)는 방송을 수신하면서 핑거프린트 정보를 추출하고(S20), 자신이 수신하는 방송의 채널 정보를 알 수 없는 경우 채널 정보 식별 서버(400)로 수신하는 방송의 핑거프린트 정보를 전송하고(S21), 채널 정보 식별 서버(400)는 수신되는 핑거프린트 정보와 자신이 가지고 있는 핑거프린트 정보를 비교하여(S40), 채널 정보를 확인하고 이를 클라이언트 단말기(200)측으로 전송한다(S41). 이런 과정을 미리 수행해 두면 단계(S12) 이전에 클라이언트 단말기(200)는 자신이 수신하고 있는 방송의 채널 정보를 획득해 둘 수 있다. 물론, 클라이언트 단말기(200)가 방송 채널 정보를 알고 있다면 단계(S21, S40, S41)는 생략할 수 있다. 또한, 채널 정보 식별 서버(400)는 모든 가능한 방송에 대한 채널 정보를 모두 알고 있거나 알 수 있는 것을 전제 조건으로 한다.
이러한 상태에서, 단계(S12)에서 콘텐츠 연관 정보, 방송채널 식별 정보와 함께 핑거프린트 정보가 클라이언트 단말기(200)로 전송되어 오면, 클라이언트 단말기(200)는 상기 수신한 방송 채널 식별 정보와 방송 채널 확인부(240)에 의해 획득된 방송 채널 식별 정보가 비교하여 일치하는지를 판단한다(S22). 일치하는 경우 상기 시스템(100)으로부터 전송되어 온 핑거프린트 정보와 클라이언트 단말기(100)의 핑거프린트 추출부(250)에서 추출(S20)해둔 핑거프린트 정보를 비교하여 일치하는지를 판단한다(S23).
전술한 바와 같이, 클라이언트 단말기(200)측으로 전송되는 핑거프린트 정보는, 상기 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보일 수 있으며, 클라이언트 단말기(200)는, 클라이언트 단말기(200)측의 핑거프린트 정보를 미리 정해진 시간 범위 동안 저장해 두고 상기 전송되어 오는 핑거프린트 정보가 상기 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 할 수도 있다.
이러한 과정을 통해 핑거프린트 정보가 일치하는 경우 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하게 된다(S24). 이 때 전술한 바와 같이 수신하여 재생되는 방송 화면과 겹치거나 또는 겹치지 않도록 하는 등의 방식으로 콘텐츠 연관 정보를 표시하게 된다.
콘텐츠 연관 정보가 표시된 경우 연관 정보에 따라 클라이언트 단말기로부터 추가적인 동작 요청 신호가 생성될 수 있는데, 클라이언트 단말기(200)에 표시되는 콘텐츠 연관 정보에 기초하여 사용자로부터 입력 신호를 수신하고(S25) 수신된 입력 신호에 기초한 추가 동작 요청 신호를 콘텐츠 연관 정보 제공 시스템(100) 또는 외부의 별도 장치로 전송하게 된다(S26). 도 4에서는 추가 동작 요청 신호는 콘텐츠 연관 정보 제공 시스템(100)으로만 전송되는 것으로 나타내었으나 별도의 외부 장치로 전송될 수도 있음은 물론이다.
한편, 상기 단계(S22)는 수행하지 않고 단계(S24)만을 수행하여 핑거프린트 정보만을 비교하도록 할 수도 있다. 이러한 경우 단계(S12)에서는 방송 채널 식별 정보를 전송할 필요가 없어지게 된다.
도 4의 내용은 도 1 내지 도 3에서 설명한 바와 동일하므로 중복되는 부분에 대해서는 상세 설명은 생략하였으며 도 4에서는 동작상의 특징에 대해서만 개략적으로 설명하였음을 유의하여야 한다.
도 4의 실시예에 의하면, 핑거프린트 정보를 고려하여 콘텐츠 연관 정보를 표시할지 여부를 최종적으로 판단할 수 있으므로, 클라이언트 단말기(200)에서 채널 변경이 이루어지는 경우 이를 확인하기 위하여 매우 짧은 주기(예컨대 10초 마다)마다 채널 정보를 확인해야 하는 과정(S21, S40, S41 등)들의 주기를 길게 할 수 있으므로 이러한 동작을 수행하기 위한 채널 정보 식별 서버(400) 및 클라이언트 단말기(200)의 부하를 현저하게 줄일 수 있는 장점이 있다.
도 5는 본 발명의 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 다른 실시예를 나타낸 흐름도로서, 도 4의 경우와 비교해 볼 때 콘텐츠 연관 정보 시스템(100)이 연결된 모든 클라이언트 단말기로 콘텐츠 연관 정보를 전송하지 않고 식별된 광고를 시청하고 있는 클라이언트 단말기(200)측으로만 콘텐츠 연관 정보를 전송하는 경우에 대한 것이다.
단계(S10,S11,S20,S21,S40,S41)은 도 4와 동일하므로 상세 설명은 생략한다. 단계(S11,S41) 이후, 클라이언트 단말기(200)는 자신이 시청하고 있는 방송 채널 정보를 획득하고 있으며, 이 방송 채널 식별 정보를 콘텐츠 연관 정보 제공 시스템(100)으로 전송한다(S27). 도 5에서는 설명의 편의를 위하여 단계(S11) 이후에 이루어지는 것으로 나타내었으나, 이 단계(S27)는 반드시 이 때 이루어질 필요는 없다. 전술한 바와 같이, 클라이언트 단말기(200)는 자신이 수신하여 재생하고 있는 방송 채널 정보를 알고 있는 경우, 이를 방송 채널 식별 정보로서 콘텐츠 연관 정보 제공 시스템(100)으로 전송할 수 있는데, 이는 예컨대 일정 시간 주기마다 주기적으로 이루어지거나 클라이언트 단말기(200)에서 채널 변경이 이루어질 때마다 이루어지는 방법을 사용할 수 있다.
이와 같은 과정에 의하여 콘텐츠 연관 정보 제공 시스템(100)은 연결되어 있는 각각의 클라이언트 단말기(100)가 현재 수신 즉 시청하고 있는 채널 정보를 알 수 있으며 따라서 콘텐츠 연관 제공 정보 결정부(130)에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠가 재생되고 있는 클라이언트 단말기(100)를 알 수 있으며, 콘텐츠 연관 정보 발송부(140)는 이에 기초하여 해당 클라이언트 단말기(100)측으로 결정된 콘텐츠 연관 정보와 핑거프린트 정보를 전송하게 된다(S12). 이 때, 도 4의 단계(S12)와는 방송 채널 식별 정보가 포함되어 있지 않다는 점에서 차이가 있다.
다음으로 콘텐츠 연관 정보를 수신한 클라이언트 단말기(200)는 단계(S23) 내지 단계(S26)을 수행하게 되는데 이는 도 4와 비교해 볼 때 단계(S22) 즉, 채널 식별 정보의 일치 여부를 판단하는 과정을 생략하는 점을 제외하고는 도 4의 단계(S23) 내지 단계(S26)과 동일하므로 상세 설명은 생략한다.
도 6은 본 발명의 콘텐츠 연관 정보 제공 시스템(100)을 통해 콘텐츠 연관 정보가 클라이언트 단말기(200)로 제공되는 방법의 또 다른 실시예를 나타낸 흐름도이다.
도 6은 도 5와 비교해 볼 때 콘텐츠 연관 정보 제공 시스템(100)에서 단계(S11) 이후, 콘텐츠 연관 정보 발송부(140)가 콘텐츠 연관 정보 제공 시스템(100)에 연결되어 있는 클라이언트 단말기(200)로 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는지의 여부를 확인하기 위한 방송 채널 확인 요청 신호를 전송하고(S13), 이에 응답하여 클라이언트 단말기(100)가 방송 채널 식별 정보를 전송(S27)한다는 점에서만 차이가 있다. 즉, 도 6의 경우에는 도 5의 경우에서처럼 클라이언트 단말기(200)가 먼저 자신이 수신하여 재생하고 있는 방송의 채널 정보를 콘텐츠 연관 정보 제공 시스템(100)으로 전송하는 것이 아니라 방송 채널 확인 요청 신호를 수신한 경우에만 방송 채널 식별 정보를 전송한다는 점에서 차이가 있다. 기타 과정은 도 5의 경우와 마찬가지이므로 상세 설명은 생략한다.
이상에서, 본 발명의 바람직한 실시예들을 참조하여 본 발명을 설명하였으나 본 발명이 상기 실시예들에 한정되는 것이 아니며 다양한 형태의 변형, 수정 실시가 가능함은 물론이다. 예컨대, 클라이언트 단말기(200)는 방송 수신 수단과 네트워크 접속 수단을 가진 모든 종류의 단말기로서, 전술한 바와 같은 스마트 TV, DMB 수신기능을 갖는 이동 통신 단말기 뿐만 아니라, 인터넷에서 제공되는 방송을 수신하는 컴퓨터, 태블릿 PC, 이동 통신 단말기도 포함될 수 있다. 또한, 방송의 개념은 일반적인 방송 형태 뿐 아니라, 예컨대 인터넷으로 제공되는 축구 중계 등과 같은 모든 형태의 실시간 스트리밍 서비스나 나아가 VOD(Video on demand)와 같은 형태도 포함할 수 있다.

Claims (31)

  1. 디스플레이부, 방송 수신 수단 및 네트워크 접속 수단을 구비하는 클라이언트 단말기측으로 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템으로서,
    클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 저장하는 콘텐츠 연관 정보 관리부;
    방송 채널을 통해 제공되는 방송 콘텐츠에 대한 핑거프린트 정보를 추출하는 핑거프린트 추출부;
    클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 콘텐츠 연관 정보 제공 결정부; 및
    상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보와 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 네트워크를 통해 클라이언트 단말기측으로 전송하는 콘텐츠 연관 정보 발송부
    를 포함하고,
    상기 클라이언트 단말기는, 상기 콘텐츠 연관 정보 발송부로부터 전송된 핑거프린트 정보에 기초하여 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 콘텐츠 연관 정보 표시부를 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  2. 제1항에 있어서,
    상기 콘텐츠 연관 정보 관리부의 콘텐츠 연관 정보는, 미리 지정된 방송 콘텐츠에 대하여 대응되도록 저장되고,
    상기 콘텐츠 연관 정보 제공 결정부는, 방송 채널을 통해 제공되는 방송 도중 상기 지정된 방송 콘텐츠가 재생되는 경우 상기 지정된 방송 콘텐츠에 대응하여 저장된 콘텐츠 연관 정보를 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보로서 결정하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  3. 제1항에 있어서,
    상기 콘텐츠 연관 정보 결정부는, 사용자의 입력 신호에 의해 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  4. 제1항에 있어서,
    상기 콘텐츠 연관 정보 발송부에서 클라이언트 단말기측으로 전송되는 핑거프린트 정보는, 상기 콘텐츠 연관 정보 제공 결정부에서 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보인 것으로 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  5. 제4항에 있어서,
    상기 핑거프린트 정보는 상기 콘텐츠 연관 정보 제공 결정부에서 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 맨 앞쪽으로부터 소정의 시간 범위 이내까지에 대한 핑거프린트 정보인 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  6. 제1항에 있어서,
    상기 클라이언트 단말기는, 자신이 수신하는 방송 콘텐츠에 대해 핑거프린트 정보를 추출하는 핑거프린트 추출부를 더 포함하고,
    상기 콘텐츠 연관 정보 표시부는, 상기 콘텐츠 연관 정보 발송부로부터 전송되어 오는 핑거프린트 정보와 상기 핑거프린트 추출부에서 추출된 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  7. 제6항에 있어서,
    상기 콘텐츠 연관 정보 표시부는, 클라이언트 단말기측의 핑거프린트 정보를 미리 정해진 시간 범위 동안 저장해 두고 상기 콘텐츠 연관 정보 발송부로부터 전송되어 오는 핑거프린트 정보가 상기 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  8. 제1항에 있어서,
    상기 클라이언트 단말기는, 방송 수신 수단을 통해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 방송 채널 확인부를 더 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  9. 제8항에 있어서,
    상기 클라이언트 단말기의 방송 채널 확인부는, 방송 수신 수단을 통해 수신되는 방송의 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보를 채널 정보 식별 서버로 전송하고,
    상기 채널 정보 식별 서버는, 상기 클라이언트 단말기의 방송 채널 확인부로부터 수신되는 핑거프린트 정보에 기초하여 클라이언트 단말기가 현재 수신하고 있는 방송의 채널 정보를 확인하고 확인된 채널 정보를 상기 클라이언트 단말기로 전송하고,
    상기 클라이언트 단말기의 방송 채널 확인부는 상기 채널 정보 식별 서버로부터 수신한 방송의 채널 정보에 의해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  10. 제8항 또는 제9항에 있어서,
    상기 콘텐츠 연관 정보 발송부는 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대한 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 및 핑거프린트 정보와 함께 클라이언트 단말기측으로 전송하고,
    상기 클라이언트 단말기의 콘텐츠 연관 정보 표시부는 상기 수신한 방송 채널 식별 정보와 상기 방송 채널 확인부에 의해 획득된 방송 채널 식별 정보가 일치하는 경우 상기 콘텐츠 연관 정보 발송부로부터 전송된 핑거프린트 정보에 기초하여 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하도록 제어하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  11. 제9항 또는 제10항에 있어서,
    상기 클라이언트 단말기의 방송 채널 확인부는, 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 발송부로 전송하고,
    상기 콘텐츠 연관 정보 제공 시스템의 연관 정보 발송부는, 클라이언트 단말기로부터 수신되는 방송 채널 식별 정보에 기초하여 상기 콘텐츠 연관 정보 제공 결정부에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기를 확인하고, 확인된 클라이언트 단말기측으로 상기 결정된 콘텐츠 연관 정보와 핑거프린트 정보를 클라이언트 단말기측으로 전송하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  12. 제11항에 있어서,
    상기 시스템의 콘텐츠 연관 정보 발송부는 연결되어 있는 클라이언트 단말기로 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는지의 여부를 확인하기 위한 방송 채널 확인 요청 신호를 전송하고,
    상기 클라이언트 단말기의 방송 채널 확인부는 상기 방송 채널 확인 요청 신호에 따라 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 발송부로 전송하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  13. 제9항에 있어서,
    상기 채널 정보 식별 서버는 상기 콘텐츠 연관 정보 제공 시스템 내에 포함된 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  14. 제2항에 있어서,
    상기 콘텐츠 연관 정보 관리부는, 상기 미리 지정된 방송 콘텐츠에 대한 핑거프린트 정보를 지정된 방송 콘텐츠 각각에 대응하여 콘텐츠 연관 정보와 함께 저장하고,
    상기 콘텐츠 연관 정보 제공 결정부는, 방송 채널을 통해 제공되는 방송 콘텐츠의 핑거프린트 정보와 상기 콘텐츠 연관 정보 관리부에 미리 저장해 둔 방송 콘텐츠에 대응하는 대한 핑거프린트 정보를 비교함으로써 상기 콘텐츠 연관 정보 관리부에 저장된 방송 콘텐츠가 재생되는지를 식별하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  15. 제1항에 있어서,
    상기 클라이언트 단말기는, 상기 표시되는 콘텐츠 연관 정보에 기초한 사용자의 입력 신호를 수신하고 수신된 입력 신호에 기초한 추가 동작 요청 신호를 상기 시스템 또는 외부의 별도 장치로 전송하는 사용자 정보 처리부를 더 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  16. 제9항에 있어서,
    상기 클라이언트 단말기의 방송 채널 확인부는, 핑거프린트 정보를 채널 정보 식별 서버로 전송하면서 시간 정보를 함께 전송하고,
    상기 채널 정보 식별 서버는, 상기 콘텐츠 연관 정보 제공 시스템의 절대 시간 정보와 상기 클라이언트 단말기로부터 전송되는 시간 정보를 비교하여 클라이언트 단말기와 콘텐츠 연관 정보 제공 시스템의 방송 화면의 시간 옵셋 정보를 획득하여 클라이언트 단말기로 전송하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  17. 제16항에 있어서,
    상기 콘텐츠 연관 정보 발송부는 상기 클라이언트 단말기측으로 콘텐츠 연관 정보와 함께 절대 시간 정보를 전송하고,
    상기 클라이언트 단말기는 상기 수신한 절대 시간 정보와 방송 화면의 시간 옵셋 정보에 기초하여 콘텐츠 연관 정보를 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 시스템.
  18. 방송 채널을 통해 제공되는 방송 콘텐츠와 연관된 정보를 제공하는 시스템에서 디스플레이부, 방송 수신 수단 및 네트워크 접속 수단을 구비하는 클라이언트 단말기측으로 콘텐츠 연관 정보를 제공하는 방법에 있어서,
    방송 채널을 통해 제공되는 방송 콘텐츠에 대하여 핑거프린트 정보를 추출하는 제1 단계;
    방송 채널을 통해 제공되는 방송 도중 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 제2 단계; 및
    상기 결정된 콘텐츠 연관 정보와 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대하여 추출된 핑거프린트 정보를 클라이언트 단말기측으로 전송하는 제3 단계
    를 포함하고,
    상기 클라이언트 단말기는, 상기 수신한 핑거프린트 정보에 기초하여 상기 수신한 콘텐츠 연관 정보를 디스플레이부를 통해 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  19. 제18항에 있어서,
    상기 콘텐츠 연관 정보는, 미리 지정된 방송 콘텐츠에 대하여 대응되도록 저장되어 있고,
    상기 제2 단계는, 방송 채널을 통해 제공되는 방송 도중 상기 지정된 방송 콘텐츠가 재생되는 경우 상기 지정된 방송 콘텐츠에 대응하여 저장된 콘텐츠 연관 정보를 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보로서 결정하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  20. 제18항에 있어서,
    상기 제2 단계는, 사용자의 입력 신호에 의해 클라이언트 단말기측으로 제공할 콘텐츠 연관 정보를 결정하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  21. 제18항에 있어서,
    상기 제3 단계에서, 클라이언트 단말기측으로 전송되는 핑거프린트 정보는, 상기 결정한 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 적어도 일부에 대한 핑거프린트 정보인 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  22. 제21항에 있어서,
    상기 핑거프린트 정보는 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠의 맨 앞쪽으로부터 소정의 시간 범위 이내까지에 대한 핑거프린트 정보인 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  23. 제18항에 있어서,
    상기 클라이언트 단말기는, 자신이 수신하는 방송 콘텐츠에 대해 핑거프린트 정보를 추출하는 핑거프린트 추출부를 포함하고,
    상기 클라이언트 단말기는, 상기 전송되어 오는 핑거프린트 정보와 상기 핑거프린트 추출부에서 추출된 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  24. 제23항에 있어서,
    상기 클라이언트 단말기는, 클라이언트 단말기측의 핑거프린트 정보를 미리 정해진 시간 범위 동안 저장해 두고 상기 전송되어 오는 핑거프린트 정보가 상기 저장해 둔 핑거프린트 정보들과 일치하는 부분이 존재하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  25. 제18항에 있어서,
    상기 클라이언트 단말기는, 방송 수신 수단을 통해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  26. 제25항에 있어서,
    상기 클라이언트 단말기는, 방송 수신 수단을 통해 수신되는 방송의 핑거프린트 정보를 추출하고 추출된 핑거프린트 정보를 채널 정보 식별 서버로 전송하고,
    상기 채널 정보 식별 서버는, 상기 클라이언트 단말기의 방송 채널 확인부로부터 수신되는 핑거프린트 정보에 기초하여 클라이언트 단말기가 현재 수신하고 있는 방송의 채널 정보를 확인하고 확인된 채널 정보를 상기 클라이언트 단말기로 전송하고,
    상기 클라이언트 단말기는, 상기 채널 정보 식별 서버로부터 수신한 방송의 채널 정보에 의해 자신이 수신하고 있는 방송 채널 식별 정보를 획득하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  27. 제25항 또는 제26항에 있어서,
    상기 제3 단계에 있어서, 상기 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠에 대한 방송 채널 식별 정보를 상기 콘텐츠 연관 정보 및 핑거프린트 정보와 함께 클라이언트 단말기측으로 전송하고,
    상기 클라이언트 단말기는, 상기 수신한 방송 채널 식별 정보와 상기 획득된 방송 채널 식별 정보가 일치하는 경우 상기 전송된 핑거프린트 정보와 저장해둔 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  28. 제25항 또는 제26항에 있어서,
    상기 제3 단계 이전에, 상기 클라이언트 단말기는, 방송 채널 식별 정보를 상기 시스템으로 전송하고,
    상기 제3 단계는, 상기 클라이언트 단말기로부터 수신되는 방송 채널 식별 정보에 기초하여 상기 제2 단계에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는 클라이언트 단말기를 확인하고, 확인된 클라이언트 단말기측으로 상기 결정된 콘텐츠 연관 정보와 핑거프린트 정보를 클라이언트 단말기측으로 전송하고,
    상기 클라이언트 단말기는, 상기 전송된 핑거프린트 정보와 저장해둔 핑거프린트 정보를 비교하여 일치하는 경우 상기 전송되어 온 콘텐츠 연관 정보를 디스플레이부를 통해 표시하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  29. 제28항에 있어서,
    상기 제3 단계 이전에, 상기 클라이언트 단말기가 방송 채널 식별 정보를 상기 시스템으로 전송하는 것은,
    상기 시스템이 연결되어 있는 클라이언트 단말기로 상기 제2 단계에서 결정된 콘텐츠 연관 정보에 상응하는 방송 콘텐츠를 재생하고 있는지의 여부를 확인하기 위한 방송 채널 확인 요청 신호를 전송하고, 상기 클라이언트 단말기가 상기 방송 채널 확인 요청 신호에 따라 방송 채널 식별 정보를 상기 시스템으로 전송하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  30. 제19항에 있어서,
    상기 콘텐츠 연관 정보는, 상기 미리 지정된 방송 콘텐츠에 대한 핑거프린트 정보를 지정된 방송 콘텐츠 각각에 대응하도록 함께 저장하며,
    상기 제2 단계는, 방송 채널을 통해 제공되는 방송 콘텐츠의 핑거프린트 정보와 상기 미리 저장해 둔 방송 콘텐츠에 대응하는 대한 핑거프린트 정보를 비교함으로써 상기 저장된 방송 콘텐츠가 재생되는지를 식별하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
  31. 제18항에 있어서,
    상기 클라이언트 단말기는, 상기 표시되는 콘텐츠 연관 정보에 기초한 사용자의 입력 신호를 수신하고 수신된 입력 신호에 기초한 추가 동작 요청 신호를 상기 시스템 또는 외부의 별도 장치로 전송하는 단계를 더 포함하는 것을 특징으로 하는 콘텐츠 연관 정보 제공 방법.
PCT/KR2011/008564 2011-09-26 2011-11-10 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법 WO2013047948A1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2013536544A JP5768134B2 (ja) 2011-09-26 2011-11-10 放送コンテンツに関連したコンテンツ関連情報を提供するシステム及び方法
CN201180056919.7A CN103229515B (zh) 2011-09-26 2011-11-10 提供与广播内容有关的内容相关信息的系统和方法
SG2013035654A SG190219A1 (en) 2011-09-26 2011-11-10 System and method for providing content-associated information associated with broadcast content
EP11872894.8A EP2763427B1 (en) 2011-09-26 2011-11-10 System and method for providing content-associated information associated with broadcast content
HK13107653.8A HK1182896A2 (en) 2011-09-26 2011-11-10 System and method for providing content-associated information associated with broadcast content

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110096955A KR101310943B1 (ko) 2011-09-26 2011-09-26 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법
KR10-2011-0096955 2011-09-26

Publications (1)

Publication Number Publication Date
WO2013047948A1 true WO2013047948A1 (ko) 2013-04-04

Family

ID=47995954

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/008564 WO2013047948A1 (ko) 2011-09-26 2011-11-10 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법

Country Status (7)

Country Link
EP (1) EP2763427B1 (ko)
JP (1) JP5768134B2 (ko)
KR (1) KR101310943B1 (ko)
CN (2) CN103229515B (ko)
HK (1) HK1182896A2 (ko)
SG (1) SG190219A1 (ko)
WO (1) WO2013047948A1 (ko)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3029944A4 (en) * 2013-07-30 2016-07-13 Panasonic Ip Man Co Ltd VIDEO RECEIVING DEVICE, ADDITIONAL INFORMATION DISPLAY METHOD, AND ADDED INFORMATION DISPLAY SYSTEM
EP3026922A4 (en) * 2013-07-26 2016-08-03 Panasonic Ip Man Co Ltd VIDEO RECEIVING DEVICE, ADDITIONAL INFORMATION DISPLAY PROCEDURE AND ADDITIONAL INFORMATION DISPLAY SYSTEM
JP2017504121A (ja) * 2013-10-04 2017-02-02 ヴェルト アナリティクス オーワイ 端末デバイスにおけるユーザインタフェースを用いたユーザ行動および関与の計測機
US9774924B2 (en) 2014-03-26 2017-09-26 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method and additional information display system
US9900650B2 (en) 2013-09-04 2018-02-20 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
US9906843B2 (en) 2013-09-04 2018-02-27 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and display system for providing additional information to be superimposed on displayed image
US10194216B2 (en) 2014-03-26 2019-01-29 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
US10200765B2 (en) 2014-08-21 2019-02-05 Panasonic Intellectual Property Management Co., Ltd. Content identification apparatus and content identification method
US10375440B2 (en) 2014-03-05 2019-08-06 Samsung Electronics Co., Ltd. Display device, server, and method of controlling the display device
US10616613B2 (en) 2014-07-17 2020-04-07 Panasonic Intellectual Property Management Co., Ltd. Recognition data generation device, image recognition device, and recognition data generation method
WO2020106056A1 (ko) * 2018-11-20 2020-05-28 삼성전자 주식회사 디스플레이 장치 및 그 동작 방법

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI389829B (zh) 2006-06-30 2013-03-21 Global Fresh Foods 用於運輸或貯存可氧化分解之食品的系統及方法
KR101211098B1 (ko) 2011-04-25 2012-12-11 (주)엔써즈 클라이언트 단말기측으로 네트워크를 통해 방송에 포함된 광고와 연관된 정보를 제공하는 시스템 및 방법
KR101902426B1 (ko) 2014-03-11 2018-09-28 주식회사 사운들리 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
CN104159136B (zh) * 2014-05-29 2016-01-13 腾讯科技（深圳）有限公司 互动信息的获取方法、终端、服务器及系统
KR20160044954A (ko) * 2014-10-16 2016-04-26 삼성전자주식회사 정보 제공 방법 및 이를 구현하는 전자 장치
US10750236B2 (en) * 2015-04-23 2020-08-18 The Nielsen Company (Us), Llc Automatic content recognition with local matching
US9848214B2 (en) 2015-10-01 2017-12-19 Sorenson Media, Inc. Sequentially overlaying media content
KR102424839B1 (ko) 2015-10-14 2022-07-25 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
CN108604252B (zh) * 2016-01-05 2022-12-16 六科股份有限公司 具有基于信道改变的触发特征的计算系统
US10063918B2 (en) 2016-02-29 2018-08-28 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on single-match
US9930406B2 (en) 2016-02-29 2018-03-27 Gracenote, Inc. Media channel identification with video multi-match detection and disambiguation based on audio fingerprint
US9924222B2 (en) 2016-02-29 2018-03-20 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on location
KR102498714B1 (ko) * 2016-05-10 2023-02-13 삼성전자주식회사 콘텐트 제공을 위한 전자 장치 및 방법
US10616631B2 (en) 2016-08-01 2020-04-07 Samsung Electronics Co., Ltd. Electronic apparatus and method of operating the same
KR102410473B1 (ko) * 2016-08-01 2022-06-17 삼성전자주식회사 전자 장치 및 전자 장치의 동작 방법
US10972203B2 (en) 2017-06-12 2021-04-06 Gracenote, Inc. Detecting and responding to rendering of interactive video content
US11418858B2 (en) 2017-09-01 2022-08-16 Roku, Inc. Interactive content when the secondary content is server stitched
US11234060B2 (en) 2017-09-01 2022-01-25 Roku, Inc. Weave streaming content into a linear viewing experience
US20190208236A1 (en) * 2018-01-02 2019-07-04 Source Digital, Inc. Coordinates as ancillary data
KR102546026B1 (ko) * 2018-05-21 2023-06-22 삼성전자주식회사 전자 장치 및 그의 컨텐츠 인식 정보 획득
KR102599951B1 (ko) 2018-06-25 2023-11-09 삼성전자주식회사 전자 장치 및 그의 제어방법
KR20200080387A (ko) 2018-12-18 2020-07-07 삼성전자주식회사 디스플레이 장치 및 그 제어 방법

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040108796A (ko) * 2002-05-10 2004-12-24 코닌클리케 필립스 일렉트로닉스 엔.브이. 워터마크 임베딩과 검색
KR20070044251A (ko) 2005-10-24 2007-04-27 삼성전자주식회사 금형장치와 금형용 히터 카트리지
KR20070054601A (ko) 2004-06-07 2007-05-29 캠브리지 엔터프라이즈 리미티드 홀로그래픽 센서를 이용한 분석물을 탐지하기 위한 방법
KR20070060978A (ko) 2005-12-09 2007-06-13 한국전자통신연구원 지상파 ｄｍｂ 비디오, 오디오, 부가 데이터의 제한수신부호화 장치 및 그 방법과 그를 이용한 제한수신 시스템
KR20070071633A (ko) 2005-12-30 2007-07-04 엠텍비젼 주식회사 컬러 필터 어레이 및 영상 보간 방법
KR20070091587A (ko) 2006-03-06 2007-09-11 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
KR20070104614A (ko) * 2005-01-20 2007-10-26 코닌클리케 필립스 일렉트로닉스 엔.브이. 간접 광고들을 포함하는 예고편들의 자동적인 생성
KR20080051688A (ko) 2006-12-06 2008-06-11 주식회사 에이디피엔지니어링 기판 테이블 및 이를 가진 기판 합착장치
KR20100039950A (ko) * 2008-10-09 2010-04-19 (주)올라웍스 핑거프린트를 이용한 동영상 구간별 복수의 광고 제공 방법및 광고 제공을 위한 광고 제공 시스템
KR20110010084A (ko) 2010-11-26 2011-01-31 (주)엔써즈 핑거프린트 정보를 이용한 콘텐츠 관련 서비스 제공 방법 및 시스템
KR20110038353A (ko) 2009-10-08 2011-04-14 조열 형상 제공 시스템 및 그 장치

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050097624A1 (en) * 2003-10-31 2005-05-05 Nokia Corporation System and associated terminal, method and computer program product for providing broadcast content
CA2967187C (en) * 2005-12-29 2019-07-09 Rovi Guides, Inc. Systems and methods for episode tracking in an interactive media environment
KR101370345B1 (ko) * 2007-07-04 2014-03-06 삼성전자 주식회사 신호처리장치와 이를 포함하는 신호처리시스템 및 그제어방법
US20090063277A1 (en) * 2007-08-31 2009-03-05 Dolby Laboratiories Licensing Corp. Associating information with a portion of media content
CN102084358A (zh) * 2008-02-05 2011-06-01 杜比实验室特许公司 将信息与媒体内容关联
JP2012500585A (ja) * 2008-08-18 2012-01-05 アイファロ メディア ゲーエムベーハー 補足情報配信
SG178266A1 (en) * 2009-08-05 2012-03-29 Ipharro Media Gmbh Supplemental media delivery
CN101998100B (zh) * 2009-08-25 2012-04-11 杨沁沁 加载电视频道识别信息的方法及电视机和遥控器
US9521453B2 (en) * 2009-09-14 2016-12-13 Tivo Inc. Multifunction multimedia device

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040108796A (ko) * 2002-05-10 2004-12-24 코닌클리케 필립스 일렉트로닉스 엔.브이. 워터마크 임베딩과 검색
KR20070054601A (ko) 2004-06-07 2007-05-29 캠브리지 엔터프라이즈 리미티드 홀로그래픽 센서를 이용한 분석물을 탐지하기 위한 방법
KR20070104614A (ko) * 2005-01-20 2007-10-26 코닌클리케 필립스 일렉트로닉스 엔.브이. 간접 광고들을 포함하는 예고편들의 자동적인 생성
KR20070044251A (ko) 2005-10-24 2007-04-27 삼성전자주식회사 금형장치와 금형용 히터 카트리지
KR20070060978A (ko) 2005-12-09 2007-06-13 한국전자통신연구원 지상파 ｄｍｂ 비디오, 오디오, 부가 데이터의 제한수신부호화 장치 및 그 방법과 그를 이용한 제한수신 시스템
KR20070071633A (ko) 2005-12-30 2007-07-04 엠텍비젼 주식회사 컬러 필터 어레이 및 영상 보간 방법
KR20070091587A (ko) 2006-03-06 2007-09-11 삼성전자주식회사 스테레오 신호 생성 방법 및 장치
KR20080051688A (ko) 2006-12-06 2008-06-11 주식회사 에이디피엔지니어링 기판 테이블 및 이를 가진 기판 합착장치
KR20100039950A (ko) * 2008-10-09 2010-04-19 (주)올라웍스 핑거프린트를 이용한 동영상 구간별 복수의 광고 제공 방법및 광고 제공을 위한 광고 제공 시스템
KR20110038353A (ko) 2009-10-08 2011-04-14 조열 형상 제공 시스템 및 그 장치
KR20110010084A (ko) 2010-11-26 2011-01-31 (주)엔써즈 핑거프린트 정보를 이용한 콘텐츠 관련 서비스 제공 방법 및 시스템

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9955103B2 (en) 2013-07-26 2018-04-24 Panasonic Intellectual Property Management Co., Ltd. Video receiving device, appended information display method, and appended information display system
EP3026922A4 (en) * 2013-07-26 2016-08-03 Panasonic Ip Man Co Ltd VIDEO RECEIVING DEVICE, ADDITIONAL INFORMATION DISPLAY PROCEDURE AND ADDITIONAL INFORMATION DISPLAY SYSTEM
US9762951B2 (en) 2013-07-30 2017-09-12 Panasonic Intellectual Property Management Co., Ltd. Video reception device, added-information display method, and added-information display system
EP3029944A4 (en) * 2013-07-30 2016-07-13 Panasonic Ip Man Co Ltd VIDEO RECEIVING DEVICE, ADDITIONAL INFORMATION DISPLAY METHOD, AND ADDED INFORMATION DISPLAY SYSTEM
US9900650B2 (en) 2013-09-04 2018-02-20 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
US9906843B2 (en) 2013-09-04 2018-02-27 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and display system for providing additional information to be superimposed on displayed image
JP2017504121A (ja) * 2013-10-04 2017-02-02 ヴェルト アナリティクス オーワイ 端末デバイスにおけるユーザインタフェースを用いたユーザ行動および関与の計測機
US10375440B2 (en) 2014-03-05 2019-08-06 Samsung Electronics Co., Ltd. Display device, server, and method of controlling the display device
US9906844B2 (en) 2014-03-26 2018-02-27 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method and additional information display system
US10194216B2 (en) 2014-03-26 2019-01-29 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and additional information display system
US9774924B2 (en) 2014-03-26 2017-09-26 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method and additional information display system
US10616613B2 (en) 2014-07-17 2020-04-07 Panasonic Intellectual Property Management Co., Ltd. Recognition data generation device, image recognition device, and recognition data generation method
US10200765B2 (en) 2014-08-21 2019-02-05 Panasonic Intellectual Property Management Co., Ltd. Content identification apparatus and content identification method
WO2020106056A1 (ko) * 2018-11-20 2020-05-28 삼성전자 주식회사 디스플레이 장치 및 그 동작 방법
US11722708B2 (en) 2018-11-20 2023-08-08 Samsung Electronics Co.. Ltd. Display device and operating method therefor

Also Published As

Publication number Publication date
KR20130033092A (ko) 2013-04-03
EP2763427A1 (en) 2014-08-06
CN106204296B (zh) 2020-03-13
CN106204296A (zh) 2016-12-07
JP5768134B2 (ja) 2015-08-26
CN103229515A (zh) 2013-07-31
HK1182896A2 (en) 2013-12-06
EP2763427B1 (en) 2018-01-10
KR101310943B1 (ko) 2013-09-23
SG190219A1 (en) 2013-06-28
JP2013545386A (ja) 2013-12-19
CN103229515B (zh) 2016-08-10
EP2763427A4 (en) 2015-04-01

Similar Documents

Publication Publication Date Title
WO2013047948A1 (ko) 방송 콘텐츠와 연관된 콘텐츠 연관 정보를 제공하는 시스템 및 방법
WO2012148055A1 (ko) 클라이언트 단말기측으로 네트워크를 통해 방송에 포함된 광고와 연관된 정보를 제공하는 시스템 및 방법
WO2011071309A2 (en) Method and apparatus for sharing comments regarding content
WO2014115910A1 (ko) 방송 시청률 조사 시스템 및 방법
WO2013073748A1 (en) Display device and method for providing content using the same
WO2015152532A1 (en) Display apparatus, method of controlling the same, server, method of controlling the same, system for detecting information on location of channel information, and method of controlling the same
WO2013165083A1 (ko) 이미지에 기반하여 동영상 서비스를 제공하는 시스템 및 방법
WO2018088784A1 (en) Electronic apparatus and operating method thereof
KR101426481B1 (ko) 컨텐츠 제공 장치 및 방법
WO2014189289A1 (ko) 연관 서비스 제공 방법 및 장치
WO2012070766A2 (ko) 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
WO2011083951A2 (ko) 단말장치를 이용한 재생 제어 시스템 및 재생 제어 방법
WO2017047848A1 (ko) 다중화 특성을 이용한 재핑 광고 시스템
WO2010114214A1 (ko) 이동식 셋탑 박스 및 멀티미디어 재생 장치
WO2015041418A1 (ko) 스크린 동기화 장치 및 방법
WO2011074855A2 (ko) 디지털 티브이의 뮤트시간을 이용한 콘텐츠 제공 시스템 및 그 방법
KR20100047591A (ko) 인터넷 연동형 객체정보 서비스 방법 및 시스템
WO2015088257A1 (en) System and method for providing a related content service using a still image or video clip, and cloud server applicable for the same
WO2016200160A1 (ko) 디스플레이장치, 사용자단말기 및 그 제어방법
EP3533231A1 (en) Electronic apparatus and operating method thereof
KR20110037501A (ko) 디지털 텔레비전 광고를 위한 전화 주문 처리 서버, 게이트웨이, 방송 단말 및 전화 주문 처리 방법

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2013536544

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2011872894

Country of ref document: EP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11872894

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE