KR20150120350A - 영상 표시 장치 및 그 동작 방법 - Google Patents
영상 표시 장치 및 그 동작 방법 Download PDFInfo
- Publication number
- KR20150120350A KR20150120350A KR1020157021375A KR20157021375A KR20150120350A KR 20150120350 A KR20150120350 A KR 20150120350A KR 1020157021375 A KR1020157021375 A KR 1020157021375A KR 20157021375 A KR20157021375 A KR 20157021375A KR 20150120350 A KR20150120350 A KR 20150120350A
- Authority
- KR
- South Korea
- Prior art keywords
- content
- information
- display device
- video display
- acr
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/222—Secondary servers, e.g. proxy server, cable television Head-end
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
- H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/254—Management at additional data server, e.g. shopping server, rights management server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/437—Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
- H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/835—Generation of protective data, e.g. certificates
- H04N21/8358—Generation of protective data, e.g. certificates involving watermark
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Abstract
디스플레이부를 포함하는 영상 표시 장치의 동작 방법이 개시된다. 수신부는 비압축 시청각 컨텐츠를 획득한다. 부가 서비스 관리부는 상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하고, 상기 비압축 시청각 컨텐츠에 대한 정보에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림을 예약하고, 상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시한다.
Description
본 발명은 영상 표시 장치 및 그 동작 방법에 관한 것이다.
디지털 방송이 활성화됨에 따라, 방송국은 메인 시청각 컨텐츠를 송출하면서, 이 메인 시청각 컨텐츠와 연계하여 이용할 수 있거나 이 메인 시청각 컨텐츠와는 독립적인 부가 서비스 데이터(enhanced service data)를 함께 송출한다.
그러나 현재의 방송 환경에서는 각 가정의 영상 표시 장치가 방송 신호를 공중파를 통해 직접 수신하는 경우가 적다. 오히려, 각 가정의 영상 표시 장치는 셋톱박스와 같은 방송 수신 장치에 연결되어 있어서, 이 방송 수신 장치가 제공하는 비압축 시청각 컨텐츠를 재생하는 경우가 많다.
한편, 방송 수신 장치는 멀티채널 비디오 분배자(multichannel video programming distributor, MVPD)라고 불리는 서버로부터 컨텐츠를 제공받는다. 이 멀티채널 비디오 분배자는 방송국으로부터 방송 신호를 수신하고 수신한 방송 신호로부터 컨텐츠를 추출한 후, 자신이 송출하기에 적합한 형태의 신호로 변환하여 변환된 신호를 방송 수신 장치에 제공한다. 이 과정에서, 멀티채널 비디오 분배자는 추출한 부가 서비스 데이터를 제외할 수도 있고, 또 다른 부가 서비스 데이터를 추가할 수도 있기 때문에, 방송 수신 장치는 MVPD에 종속된 부가 서비스를 제공받을 수 밖에 없다.
멀티채널 비디오 분배자는 컨텐츠 제공자들에 의해 제공되는 복수의 채널을 패키지로서 방송 수신 장치에 제공한다.
방송 수신 장치 또한 멀티채널 비디오 분배자로부터 수신한 신호로부터 메인 시청각 데이터를 추출하여 비압축 시청각 데이터만을 영상 표시 장치에게 제공하므로, 방송 수신 장치 통제하의 부가 서비스만이 이용가능할 뿐, 영상 표시 장치 통제하의 부가 서비스는 이루어 질 수 없다.
본 발명은 비압축 시청각 컨텐츠 형태로 입력되는 프로모션 컨텐츠를 인식하고, 프로모션 컨텐츠에 의하여 광고되는 컨텐츠에 대한 사용자의 시청 의사에 기초하여 컨텐츠 방송시 사용자에게 컨텐츠가 방송됨을 알리는 영상 표시 장치와 그 동작 방법을 제공하기 위한 것이다.
본 발명의 일 실시예에 따른 디스플레이부를 포함하는 영상 표시 장치의 동작 방법은 비압축 시청각 컨텐츠를 획득하는 단계; 상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하는 단계; 상기 비압축 시청각 컨텐츠에 대한 정보에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림을 예약하는 단계; 및 상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계를 포함한다.
이때, 상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하는 단계는 상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계를 포함하고, 상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계는 상기 영상 표시 장치 식별자에 기초하여 컨텐츠 알림 메시지를 수신하는 단계를 포함할 수 있다.
이때, 상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계는 상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 다운로드 받을 수 있는 프로모션 애플리케이션 URL과 상기 영상 표시 장치 식별자를 포함하는 URL에 기초하여 상기 영상 표시 장치 식별자를 수신하는 단계를 포함할 수 있다.
이때, 상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계는 상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 다운로드 받을 수 있는 프로모션 애플리케이션 URL과 상기 영상 표시 장치 식별자를 포함하는 URL을 토큰화(tokenize)하여 상기 영상 표시 장치 식별자를 수신하는 단계를 포함할 수 있다.
본 발명의 실시예는 MVPD에 종속하지 않는 부가 서비스를 가능하게 한다. 특히, 본 발명의 실시예는 방송국이나 컨텐츠 제공자가 부가 서비스를 제공하지 않더라도 방송국이나 컨텐츠 제공자에 종속하지 않는 제3자 서버에 의해 부가 서비스를 가능하게 한다.
또한, 본 발명의 다양한 실시예는 리모콘을 통한 불편한 텍스트 입력 없이도 메인 시청각 컨텐츠와 관련된 정보 검색, 채팅, 뉴스 검색, 디지털 미디어 다운로드, 제품 카탈로그 다운로드 및 제품 구입을 가능하게 한다.
뿐만 아니라, 본 발명의 실시예는 무선 채널의 대역폭의 한계를 넘는 부가 서비스를 가능하게 한다.
본 발명의 실시예에 따른 영상 표시 장치는 외부 입력을 통해 입력되는 비압축 시청각 데이터에 기초하여 채널맵을 획득할 수 있다.
본 발명의 실시예에 따른 제3자 서버는 린백 애플리케이션의 허용 여부에 대한 정보를 영상 표시 장치에 제공하여 린백 애플리케이션이 영상 표시 장치의 안정성에 심각한 영향을 주는 것을 방지할 수 있다.
본 발명의 실시예에 따른 영상 표시 장치와 지역적으로 가까운 ACR 서버의 URL 주소를 알려주어, 영상 표시 장치가 빠르게 컨텐츠 인식을 수행할 수 있고, 네트워크 레이턴시(network latency)를 줄일 수 있도록 한다.
본 발명의 실시예에 따른 제3자 서버는 ACR 온 타임 구간에 대한 정보를 영상 재생 장치에 제공하여 불필요한 리소스 소모를 방지할 수 있다.
본 발명의 실시예에 따른 영상 표시 장치는 외부 입력을 통해 입력되는 비압축 시청각 데이터에 기초하여 포로모션 컨텐츠를 인식하할 수 있다.
본 발명의 실시예에 따른 영상 표시 장치는 포로모션 컨텐츠에 의하여 광고되는 컨텐츠에 대한 사용자의 시청 의사를 저장할 수 있다.
본 발명의 실시예에 따른 영상 표시 장치는 포로모션 컨텐츠에 의하여 광고되는 컨텐츠에 대한 사용자의 시청 의사에 기초하여 컨텐츠 방송시 사용자에게 컨텐츠가 방송됨을 표시할 수 있다.
도 1은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 4는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 5는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 6은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 7은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 8은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 9은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 10은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 11는 본 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 흐름도이다.
도 12은 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 개념도이다.
도 13은 본 발명의 실시예에 따른 자동 재생 애플리케이션의 실행 화면을 보여준다.
도 14는 본 발명의 실시예에 따른 컨텐츠 제공자 애플리케이션의 실행 화면을 보여준다.
도 15은 본 발명의 실시예에 따른 ACR 기능의 제어를 위한 사용자 인터페이스를 보여준다.
도 16는 본 발명의 실시예에 따른 영상 표시 장치의 동작 방법의 흐름도이다.
도 17은 본 발명의 실시예에 따른 네트워크 토폴로지를 보여준다.
도 18는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 보여준다.
도 19는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 실행하는 방법을 보여준다.
도 20은 본 발명의 실시예에 따른 Live+ 애플리케이션의 탭의 기능을 보여준다.
도 21은 본 발명의 일 실시예에 따른 제3자 서버(90)의 아키텍처를 보여준다.
도 22은 본 발명의 실시예에 따른 자동 실행 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 23은 본 발명의 한 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 24는 본 발명의 또 다른 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 25은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 26는 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 27은 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
도 28은 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 29는 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
도 30은 본 발명의 실시예에 따른 위성 사업자인 Dish Network의 MVPD 로고가 노출되는 EPG 창을 보여준다
도 31은 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 EPG 창을 보여준다.
도 32는 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 메뉴 창을 보여준다.
도 33은 본 발명의 실시예에 따른 위성 사업자인 DirecTV의 MVPD 로고가 노출되는 메뉴 창을 보여준다.
도 34는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다.
도 35는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다.
도 36은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 37은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 38은 본 발명의 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 39는 본 발명의 일 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 40은 본 발명의 실시예에 따라 영상 표시 장치의 식별자가 전송되는 것을 보여주는 블락도이다.
도 41은 본 발명의 일 실시예에 따라 프로모션 애플리케이션을 실행하는 영상 표시 장치의 동작을 보여주는 흐름도이다.
도 42는 본 발명의 일 실시예에 따른 프로모션 애플리케이션의 컨텐츠 알림 예약 사용자 인터페이스를 보여준다.
도 43은 본 발명의 일 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 44는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 45는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 46은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 47은 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 48은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 49는 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 50는 본 발명의 실시예에 따른 컨텐츠 알림 애플리케이션을 실행하는 영상 표시 장치의 개념도를 보여준다.
도 51은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 52는 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 4는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 5는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 6은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 7은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 8은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 9은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 10은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 11는 본 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 흐름도이다.
도 12은 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 개념도이다.
도 13은 본 발명의 실시예에 따른 자동 재생 애플리케이션의 실행 화면을 보여준다.
도 14는 본 발명의 실시예에 따른 컨텐츠 제공자 애플리케이션의 실행 화면을 보여준다.
도 15은 본 발명의 실시예에 따른 ACR 기능의 제어를 위한 사용자 인터페이스를 보여준다.
도 16는 본 발명의 실시예에 따른 영상 표시 장치의 동작 방법의 흐름도이다.
도 17은 본 발명의 실시예에 따른 네트워크 토폴로지를 보여준다.
도 18는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 보여준다.
도 19는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 실행하는 방법을 보여준다.
도 20은 본 발명의 실시예에 따른 Live+ 애플리케이션의 탭의 기능을 보여준다.
도 21은 본 발명의 일 실시예에 따른 제3자 서버(90)의 아키텍처를 보여준다.
도 22은 본 발명의 실시예에 따른 자동 실행 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 23은 본 발명의 한 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 24는 본 발명의 또 다른 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 25은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 26는 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 27은 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
도 28은 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
도 29는 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
도 30은 본 발명의 실시예에 따른 위성 사업자인 Dish Network의 MVPD 로고가 노출되는 EPG 창을 보여준다
도 31은 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 EPG 창을 보여준다.
도 32는 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 메뉴 창을 보여준다.
도 33은 본 발명의 실시예에 따른 위성 사업자인 DirecTV의 MVPD 로고가 노출되는 메뉴 창을 보여준다.
도 34는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다.
도 35는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다.
도 36은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 37은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 38은 본 발명의 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 39는 본 발명의 일 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 40은 본 발명의 실시예에 따라 영상 표시 장치의 식별자가 전송되는 것을 보여주는 블락도이다.
도 41은 본 발명의 일 실시예에 따라 프로모션 애플리케이션을 실행하는 영상 표시 장치의 동작을 보여주는 흐름도이다.
도 42는 본 발명의 일 실시예에 따른 프로모션 애플리케이션의 컨텐츠 알림 예약 사용자 인터페이스를 보여준다.
도 43은 본 발명의 일 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 44는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 45는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
도 46은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 47은 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 48은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
도 49는 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
도 50는 본 발명의 실시예에 따른 컨텐츠 알림 애플리케이션을 실행하는 영상 표시 장치의 개념도를 보여준다.
도 51은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 52는 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "엔진", "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
다음은 도 1 내지 도 9를 참고하여 본 발명의 일 실시예에 따른 네트워크 토폴로지를 설명한다.
도 1은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50), 방송 수신 장치(60), 네트워크(70), 영상 표시 장치(100)를 포함한다.
컨텐츠 제공 서버(10)는 방송국 등에 해당할 수 있으며, 메인 시청각 컨텐츠(main audio-visual content)를 포함하는 방송 신호를 방송한다. 방송 신호는 부가 서비스를 더 포함할 수 있다. 부가 서비스는 메인 시청각 컨텐츠와 관련이 있을 수도 있고, 관련이 없을 수도 있다. 부가 서비스는 서비스 정보(service information), 메타데이터(metadata), 부가 데이터, 컴파일된 실행 파일, 웹 애플리케이션, HTML(Hypertext Markup Language) 문서, XML 문서, CSS(cascading style sheet) 문서, 오디오 파일, 비디오 파일, ATSC 2.0 컨텐츠, URL(Uniform Resource Locator)과 같은 주소 등의 형태를 가질 수 있다. 하나 이상의 컨텐츠 제공 서버가 존재할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)가 메인 시청각 컨텐츠에 기초하여 컨텐츠를 인식할 수 있게 하는 컨텐츠 인식 서비스를 제공한다. 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 수정을 가할 수도 있고 수정을 가하지 않을 수도 있다. 하나 이상의 컨텐츠 인식 서비스 제공 서버가 존재할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하는 워터마크 서버일 수 있다. 이 워터마크 서버는 메인 시청각 컨텐츠의 각 프레임의 왼쪽 상단 또는 오른쪽 상단에 컨텐츠 제공자의 로고를 워터마크할 수 있다.
또, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 컨텐츠 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하는 워터마크 서버일 수 있다.
또한, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠의 일부의 프레임 또는 일부의 오디오 샘플로부터 특징 정보를 추출하여 저장하는 핑거프린트 서버일 수 있다. 이 특징 정보는 시그너처라고도 불린다.
멀티채널 비디오 분배 서버(30)는 복수의 방송국으로부터 방송 신호를 수신하고 다중화하여 다중화된 신호를 방송 수신 장치(60)에 제공한다. 특히, 멀티채널 비디오 분배 서버(30)는 수신한 방송 신호에 대해 복조와 채널 복호화를 수행하여 메인 시청각 컨텐츠와 부가 서비스를 추출한 후, 추출된 메인 시청각 컨텐츠와 추출한 부가 서비스에 대해 채널 부호화를 수행하여 분배를 위한 다중화 신호를 생성할 수 있다. 이때, 멀티채널 비디오 분배 서버(30)는 추출한 부가 서비스를 제외할 수도 있고, 또 다른 부가 서비스를 추가할 수도 있기 때문에, 방송국은 방송국 주도의 서비스를 제공할 수 없다. 하나 이상의 멀티채널 비디오 분배 서버가 존재할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고, 튜팅한 채널의 신호를 수신하고, 수신한 신호에 대해 복조와 채널 복호를 수행하여 메인 시청각 컨텐츠를 추출한다. 그리고 방송 수신 장치(60)는 추출한 메인 시청각 컨텐츠를 H.264/MPEG-4 AVC(Moving Picture Experts Group-4 advanced video coding), Dolby AC-3, MPEG-2 AAC (Moving Picture Experts Group-2 Advanced Audio Coding) 알고리즘 등을 이용하여 복호하여 비압축 메인 시청각 컨텐츠(uncompressed main AV content)를 생성한다. 방송 수신 장치(60)는 생성한 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)의 외부 입력 포트 등을 통해 영상 표시 장치(100)에 제공한다.
부가 서비스 정보 제공 서버(40)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐츠와 관련된 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 제공한다. 하나 이상의 부가 서비스 주소 제공 서버가 존재할 수 있다. 부가 서비스 정보 제공 서버(40)는 복수의 이용가능한 부가 서비스 중에서 가장 우선순위가 높은 부가 서비스를 위한 부가 서비스 정보를 제공할 수도 있다.
부가 서비스 제공 서버(50)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공한다. 하나 이상의 부가 서비스 제공 서버가 존재할 수 있다.
영상 표시 장치(100)는 텔레비전, 노트북, 핸드폰, 스마트폰 등과 같이 디스플레이부를 장치일 수 있다. 영상 표시 장치(100)는 방송 수신 장치(60)로부터 비압축 메인 시청각 컨텐츠를 수신할 수도 있고, 컨텐츠 제공 서버(10) 또는 멀티채널 비디오 분배 서버(30)로부터 부호화된 메인 시청각 컨텐츠를 포함하는 방송 신호를 수신할 수 도 있다. 영상 표시 장치(100)는 네트워크(70)를 통해 컨텐츠 인식 서비스 제공 서버(20)로부터 컨텐츠 인식 서비스를 제공받을 수 있고, 네트워크(70)를 통해 부가 서비스 정보 제공 서버(40)로부터 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스의 주소를 받을 수 있으며, 부가 서비스 제공 서버(50)로부터 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공받을 수 있다.
컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50) 중 2 이상은 하나의 서버의 형태로 결합될 수도 있고, 한 사업자에 의해 운영될 수도 있다.
도 2는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)를 더 포함한다.
도 2에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 컨텐츠 정보를 삽입한다. 멀티채널 비디오 분배 서버(30)는 변형된 메인 시청각 컨텐츠를 포함하는 방송 신호를 수신하여 분배한다. 특히, 워터마크 서버는 이하에서 설명하는 바와 같은 디지털 워터마킹 기술을 이용할 수 있다.
디지털 워터마크는 삭제하기 어려운 방법으로 디지털 신호에 정보를 삽입하는 프로세스이다. 예를 들면, 디지털 신호는 오디오, 사진, 또는 비디오일 수 있다. 이 디지털 신호가 복사되면, 삽입된 정보 또한 복사본에 담아진다. 한 디지털 신호가 동시에 다른 여러 개의 워터마크를 운반할 수 있다.
보이는 워터마킹(visible watermarking)에서, 삽입되는 정보는 사진 또는 비디오에서 눈으로 식별가능하다. 전형적으로, 삽입된 정보는 미디어의 소유자를 식별하는 텍스트 또는 로고이다. 텔레비전 방송국이 자신의 로고를 전송되는 비디오의 코너에 추가하면, 이것이 눈으로 식별가능한 워터마크이다.
눈으로 식별 불가능한 워터마킹(invisible watermarking)에서, 정보는 디지털 데이터로서 오디오, 사진, 또는 비디오에 추가되지만, 일정 량의 정보가 숨겨져 있다는 사실은 감지할 수 있다하더라도 그러한 정보는 인지할 수는 없다. 이러한 눈으로 식별불가능한 워터마킹을 통해 비밀 메시지가 전달될 수도 있다.
워터마킹의 한 응용은 디지털 미디어의 불법 복제를 막기 위한 저작권 보호 시스템에 있다. 예컨데, 복제 장치는 디지털 미디어의 복제 전에 디지털 미디어로부터 워터마크를 얻고, 워터마크의 내용에 기초하여 복제를 할지 말지를 결정할 수 있다.
워터마킹의 또 다른 응용은 디지털 미디어의 출처 추적에 있다. 배포 경로 상의 각 지점에서 워터마크가 디지털 미디어에 임베딩된다. 나중에 이와 같은 디지털 미디어가 발견된다면, 이 디지털 미디어로부터 워터마크가 추출될 수 있고, 워터마크의 내용으로부터 배포의 출처를 파악할 수 있다.
디지털 미디어에 대한 설명이 눈으로 식별불가능한 워터마킹의 또 다른 응용이다.
디지털 미디어를 위한 파일 포멧이 메타데이터라고 불리는 추가적인 정보를 포함할 수 있는데, 디지털 워터마크는 디지털 미디어의 시청각 신호 자체로 전달된다는 점에서 메타데이터와는 구별된다.
워터마킹 방법으로 스프레드 스펙트럼, 양자화, 앰플리튜드 변조가 있다.
마킹되는 신호가 추가적인 수정에 의해 얻어진다면, 워터마킹 방법은 스프레드 스펙트럼에 해당한다. 스프레드 스펙트럼 워터마크는 꽤 강인하다고 알려져 있지만, 워터마크가 임베딩되는 호스트 신호에 간섭을 주기 때문에 많은 정보가 실리지는 않는다.
마킹되는 신호가 양자화에 의해 얻어진다면, 워터마킹 방법은 양자화 타입에 해당한다. 양자화 워터마크는 강인성은 낮지만, 꽤 많은 정보를 실을 수 있다.
마킹되는 신호가 공간 도메인에서 스프레드 스펙트럼과 유사한 추가 수정 방법으로 얻어진다면, 워터마킹 방법은 앰플리튜드 변조에 해당한다.
도 3은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S101).
워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐츠에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 MVPD(30)에 제공한다(S103).
보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 워터마크 용도, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 워터마크 용도는 무단 복제 방지, 시청률 조사, 부가 서비스 획득 중 하나를 나타낼 수 있다.
컨텐츠 정보는 메인 시청각 컨텐츠를 제공하는 컨텐츠 제공자의 식별 정보, 메인 시청각 컨텐츠 식별 정보, 메인 시청각 컨텐츠 등급 정보, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보, 메인 시청각 컨텐츠가 방송되는 채널의 이름, 메인 시청각 컨텐츠가 방송되는 채널의 로고, 메인 시청각 컨텐츠가 방송되는 채널의 설명, 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간, 메인 시청각 컨텐츠와 관련하여 이용가능한 부가 서비스 정보 중 하나 이상을 포함할 수 있다.
영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 워터마크를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 이용된 워터마크가 내삽(embedding)된 컨텐츠 구간의 시간 정보일 수 있다. 영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 핑거프린트를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 특징 정보가 추출된 컨텐츠 구간의 시간 정보일 수 있다. 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시작 시간, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 지속 시간(duration), 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 종료 시간 중 하나 이상을 포함할 수 있다.
이용 정보 보고 주소는 메인 시청각 컨텐츠 시청 정보 보고 주소, 부가 서비스 이용 정보 보고 주소 중 하나 이상을 포함할 수 있다. 이용 정보 보고 주기는 메인 시청각 컨텐츠 시청 정보 보고 주기, 부가 서비스 이용 정보 보고 주기 중 하나 이상을 포함할 수 있다. 이용 정보 획득을 위한 최소 이용 시간은 메인 시청각 컨텐츠 시청 정보 획득을 위한 최소 시청 시간, 부가 서비스 이용 정보 추출을 위한 최소 사용 시간 중 하나 이상을 포함할 수 있다.
메인 시청각 컨텐츠가 최소 시청 시간 이상 시청된 경우에 기초하여 영상 표시 장치(100)는 메인 시청각 컨텐츠의 시청 정보를 획득하고, 메인 시청각 컨텐츠 시청 정보 보고 주기에서 메인 시청각 컨텐츠 시청 정보 보고 주소로 추출한 시청 정보를 보고할 수 있다.
부가 서비스가 최소 사용 시간 이상 사용된 경우에 기초하여 영상 표시 장치(100)는 부가 서비스 이용 정보를 획득하고, 부가 서비스 이용 정보 보고 주기에서 부가 서비스 이용 정보 보고 주소로 추출한 이용 정보를 보고할 수 있다.
부가 서비스 정보는 부가 서비스가 존재하는지에 대한 정보, 부가 서비스 주소 제공 서버 주소, 각각의 이용가능한 부가 서비스의 획득 경로, 각각의 이용가능한 부가 서비스를 위한 주소, 각각의 이용가능한 부가 서비스의 시작 시간, 각각의 이용가능한 부가 서비스의 종료 시간, 각각의 이용가능한 부가 서비스의 수명 주기(lifetime), 각각의 이용가능한 부가 서비스의 획득 모드, 각각의 이용가능한 부가 서비스 위한 요청 주기, 각각의 이용가능한 부가 서비스의 우선 순위 정보, 각각의 이용가능한 부가 서비스의 설명, 각각의 이용가능한 부가 서비스의 항목(category), 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간 중 하나 이상을 포함할 수 있다.
이용가능한 부가 서비스의 획득 경로는 IP 또는 ATSC M/H(Advanced Television Systems Committee - Mobile/Handheld)를 나타낼 수 있다. 이용가능한 부가 서비스의 획득 경로가 ATSC M/H인 경우에, 부가 서비스 정보는 주파수 정보, 채널 정보를 더 포함할 수 있다. 각각의 이용가능한 부가 서비스의 획득 모드는 Push 또는 Pull을 나타낼 수 있다.
한편, 워터마크 서버(21)는 메인 시청각 컨텐츠의 로고에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입할 수 있다.
예컨데, 워터마크 서버(21)는 로고의 일정 위치에 바코드를 삽입할 수 있다. 이때 로고의 일정 위치는 로고가 디스플레이되는 구역의 하단 1 라인에 해당할 수 있다. 영상 표시 장치(100)는 이와 같이 바코드가 삽입된 로고를 포함하는 메인 시청각 컨텐츠를 수신하는 경우에, 바코드를 디스플레이하지 않을 수 있다.
또한, 워터마크 서버(21)는 로고의 메타데이터 형태로 워터마크 정보를 삽입할 수 있다. 이때 로고의 형상은 유지될 수 있다.
또한, 워터마크 서버(21)는 M개의 프레임의 로고의 각각에 N 비트의 워터마크 정보를 삽입할 수 있다. 즉, 워터마크 서버(21)는 M개의 프레임을 통해 M*N개의 워터마크 정보를 삽입할 수 있다.
MVPD(30)는 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S105). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S106).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S107).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 방송 신호를 전송할 수도 있다(S108).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐츠 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐츠를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S109).
워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S111). 이 제1 응답은 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.
워터마크 정보와 제1 응답이 부가 서비스 주소를 포함하고 있지 않다면, 영상 표시 장치(100)는 부가 서비스을 획득할 수 없다. 그러나 워터마크 정보와 제1 응답이 부가 서비스 주소 제공 서버 주소를 포함할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보와 제1 응답을 통해 부가 서비스 주소나 부가 서비스를 획득하지 못하였고 부가 서비스 주소 제공 서버 주소를 획득하였다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S119).
부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S121).
영상 표시 장치(100)는 워터마크 정보, 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S123), 부가 서비스를 획득한다(S125).
도 4는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 4에 도시된 바와 같이, 방송 수신 장치(60)가 턴온되고 채널을 튜닝하고, 영상 표시 장치(100)가 외부 입력 포트(111)를 통해 방송 수신 장치(60)로부터 튜팅된 채널의 메인 시청각 컨텐츠를 수신하면, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 워터마크로부터 컨텐츠 제공자 식별자(또는 방송국 식별자)를 감지할 수 있다. 이후, 영상 표시 장치(100)는 감지한 컨텐츠 제공자 식별자에 기초하여 메인 시청각 컨텐츠의 워터마크로부터 컨텐츠 정보를 감지할 수 있다.
이때, 도 4에 도시된 바와 같이, 컨텐츠 제공자 식별자의 감지가능 주기와 컨텐츠 정보의 감지가능 주기는 다를 수 있다. 특히, 컨텐츠 제공자 식별자의 감지가능 주기는 컨텐츠 정보의 감지가능 주기보다 짧을 수 있다. 이를 통해, 영상 표시 장치(100)는 필요한 정보만을 감지하기 위한 효율적인 구성을 가질 수 있다.
도 5는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 핑거프린트 서버(22)를 더 포함한다.
도 5에 도시된 바와 같은 핑거프린트 서버(22)는 메인 시청각 컨텐츠에 변형을 가하지는 않으며 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐츠의 식별자와 시간 정보를 제공한다.
도 6은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S201).
핑거프린트 서버(22)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠의 복수의 프레임 구간 또는 복수의 오디오 구간으로부터 복수의 특징 정보를 추출하며, 복수의 특징 정보에 각각 대응하는 복수의 질의 결과를 위한 데이터베이스를 구축한다(S203). 질의 결과는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.
MVPD(30)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S205). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S206).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S207).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 신호를 전송할 수도 있다(S208).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S213).
영상 표시 장치(100)는 미리 설정된 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송한다(S215).
핑거프린트 서버(22)는 제1 질의에 대한 제1 응답으로서 질의 결과를 제공한다(S217). 만약 제1 응답이 실패에 해당한다면, 영상 표시 장치(100)는 또 다른 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송할 수 있다.
핑거프린트 서버(22)는 질의 결과로서 XML (Extensible Markup Language) 문서를 제공할 수 있다. 질의 결과를 담는 XML 문서의 예를 도 7과 표 1을 참고하여 설명한다.
도 7은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 7에 도시된 바와 같이, 질의 결과를 담는 ACR-Resulttype은 ResultCode 속성과 ContentID, NTPTimestamp, SignalingChannelInformation, ServiceInformation 엘리먼트를 갖는다.
예컨데, ResultCode 속성이 200의 값을 가지면, 이는 질의 결과가 성공임을 의미할 수 있다. ResultCode 속성이 404의 값을 가지면, 이는 질의 결과가 실패임을 의미할 수 있다.
SignalingChannelInformation 엘리먼트는 SignalingChannelURL 엘리먼트를 갖고, SignalingChannelURL 엘리먼트는 UpdateMode, PollingCycle 속성을 갖는다. UpdateMode 속성은 Pull 값 또는 Push 값을 가질 수 있다.
ServiceInformation 엘리먼트는 ServiceName, ServiceLogo, ServiceDescription 엘리먼트를 갖는다.
표 1은 이와 같은 질의 결과를 담는 ACR-ResultType의 XML Schema를 보여준다.
ContentID 엘리먼트로서, 아래의 표 2에서 보여주는 바와 같은 ATSC 컨텐츠 식별자(ATSC content identifier)가 이용될 수 있다.
표 2에서 보여지는 바와 같이, ATSC content identifier는 TSID와 하우스 번호로 구성된 구조를 가진다.
16 비트 부호없는 정수 TSID는 트랜스포트 스트림 식별자(transport stream identifier)를 담는다(carry).
5 비트 부호 없는 정수 end_of_day는 방송이 끝나서 content_id 값이 재사용될 수 있는 날의 시(hour)로 셋팅된다.
9 비트 부호 없는 정수 unique_for는 content_id 값이 재사용될 수 없는 날의 수(the number of day)로 설정된다.
content_id는 컨텐츠 식별자를 나타낸다. 영상 표시 장치(100)는 매일 end_of_day에 해당하는 시간에서 unique_for를 1씩 감소시키고, unique_for가 0이 되지 않았다면 content_id가 유일한 것이라고 간주할 수 있다.
한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC-M/H service를 위한 글로벌 서비스 식별자(Global Service Identifier)가 이용될 수 있다.
글로벌 서비스 식별자는 다음과 같은 폼을 갖는다.
- urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>
여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 "0"이다. <serviceid> 는 <major>나 <minor>로 정의된다. <major> 는 메이저 채널 번호(Major Channel number)를 나타내고, <minor> 마이너 채널 번호(Minor Channel Number)를 나타낸다.
글로벌 서비스 식별자의 예는 아래와 같다.
- urn:oma:bcast:iauth:atsc:service:us:1234:5.1
- urn:oma:bcast:iauth:atsc:service:us:0:100.200
한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC 컨텐츠 식별자가 이용될 수 있다.
ATSC 컨텐츠 식별자는 다음과 같은 폼을 갖는다.
urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>
여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, "."<serviceid>가 뒤따를 수 있다. 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 <serviceid>이다. <content_id> 는 표 2에 정의되어 있는 content_id field의 base64 부호이고, <unique_for> 는 표 2에 정의되어 있는 unique_for field의 십진수 부호이며, <end_of_day> 는 표 2에 정의되어 있는 end_of_day field의 십진수 부호이다.
이하에서는 다시 도 6을 설명한다.
질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S219).
부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S221).
영상 표시 장치(100)는 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S223), 부가 서비스를 획득한다(S225).
UpdateMode 속성이 Pull 값을 가지는 경우, 영상 표시 장치(100)는 SignalingChannelURL을 통해 HTTP request를 부가서비스 제공 서버(50)에 전송하여 이에 대한 응답으로 PSIP 바이너리 스트림을 포함하는 HTTP response를 부가서비스 제공 서버(50)로부터 수신한다. 이 경우 영상 표시 장치(100)는 PollingCycle 속성으로 지정되는 Polling 주기에 따라 HTTP request를 전송할 수 있다. 또한, SignalingChannelURL 엘리먼트는 업데이트 시간 속성을 가질 수도 있다. 이 경우, 영상 표시 장치(100)는 업데이트 시간 속성으로 지정되는 업데이트 시간에서 HTTP request를 전송할 수 있다.
UpdateMode 속성이 Push 값을 가지는 경우, 영상 표시 장치(100)는 XMLHTTPRequest API 를 활용하여 비동기적으로 서버로부터 업데이트를 수신할 수 있다. 영상 표시 장치(100)가 서버로 XMLHTTPRequest object를 통해 비동기적인 request를 한 후에 서버가 시그널링 정보에 변경이 있을 경우에 이 채널을 통해 response로 시그널링 정보를 제공하는 방안이다. 세션의 대기 시간에 제한이 있을 경우에는 session timeout respond를 발생시키고, 바로 수신기는 이를 인지하여 재요청하여서 수신기와 서버간의 시그널링 채널을 항시 유지할 수 있다.
도 8은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)와 핑거프린트 서버(22)를 더 포함한다.
도 8에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐츠에 컨텐츠 제공자 식별 정보를 삽입한다. 워터마크 서버(21)는 로고와 같이 보이는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐츠에 삽입할 수도 있고, 보이지 않는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐츠에 삽입할 수도 있다.
핑거프린트 서버(22)는 메인 시청각 컨텐츠에 변형을 가하지는 않으며 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐츠의 식별자와 시간 정보를 제공한다.
도 9은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S301).
워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐츠에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 MVPD(30)에 제공한다(S303). 보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.
MVPD(30)는 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S305). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S306).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S307).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 신호를 전송할 수도 있다(S308).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐츠 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐츠를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S309).
워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S311). 이 제1 응답은 핑거프린트 서버 주소, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.
워터마크 정보와 제1 응답이 핑거프린트 서버 주소를 포함하고 있다면, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S313).
영상 표시 장치(100)는 제1 응답 내의 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제2 질의를 전송한다(S315).
핑거프린트 서버(22)는 제2 질의에 대한 제2 응답으로서 질의 결과를 제공한다(S317).
질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제3 질의를 전송한다(S319).
부가 서비스 정보 제공 서버(40)는 제3 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제3 질의에 대한 제3 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S321).
영상 표시 장치(100)는 제1 응답, 제2 응답, 또는 제3 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S323), 부가 서비스를 획득한다(S325).
다음은 도 10을 참고하여, 본 발명의 실시예에 따른 영상 표시 장치(100)를 설명한다.
도 10은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 10에 도시된 바와 같이, 본 발명의 실시예에 따른 영상 표시 장치(100)는 방송 신호 수신부(101), 복조부(103), 채널 복호부(105), 역다중화부(107), 시청각 복호부(109), 외부 입력 포트(111), 재생 제어부(113), 재생 장치(120), 부가 서비스 관리부(130), 데이터 송수신부(141), 메모리(150)를 포함한다.
방송 신호 수신부(101)는 컨텐츠 제공 서버(10) 또는 MVPD(30)로부터 방송 신호를 수신한다.
복조부(103)는 수신한 방송 신호를 복조하여 복조된 신호를 생성한다.
채널 복호부(105)는 복조된 신호를 채널 복호하여 채널 복호된 데이터를 생성한다.
역다중화부(107)는 채널 복호된 데이터로부터 메인 시청각 컨텐츠와 부가 서비스를 분리한다. 분리된 부가 서비스는 부가 서비스 저장부(152)에 저장된다.
시청각 복호부(109)는 분리된 메인 시청각 컨텐츠를 시청각 복호(AV decoding)하여 비압축 메인 시청각 컨텐츠를 생성한다.
한편, 외부 입력 포트(111)는 방송 수신 장치(60), 디브이디(digital versatile disk, DVD) 플레이어, 블루레이 디스크 (Blu-ray disc) 플레이어 등으로부터 비압축 메인 시청각 컨텐츠를 수신한다. 외부 입력 포트(111)는 DSUB 포트, HDMI (High Definition Multimedia Interface) 포트, DVI (Digital Visual Interface) 포트, 컴포지트(composite) 포트, 컴포넌트(component) 포트, S-Video 포트 중 하나 이상을 포함할 수 있다.
재생 제어부(113)는 시청각 복호부(109)가 생성하는 비압축 메인 시청각 컨텐츠 또는 외부 입력 포트(111)로부터 수신한 비압축 메인 시청각 컨텐츠 중 적어도 하나를 사용자 선택에 의해 재생 장치(120)에 재생한다.
재생 장치(120)는 디스플레이부(121)와 스피커(123)를 포함한다. 디스플레이부(121)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐츠의 컨텐츠 정보를 획득하고, 획득된 컨텐츠 정보에 기초하여 이용가능한 부가 서비스를 획득한다. 특히, 앞서 설명한 바와 같이 부가 서비스 관리부(130)는 비압축 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플에 기초하여 메인 시청각 컨텐츠의 식별 정보를 획득할 수 있는데, 본 명세서에서는 이를 자동 컨텐츠 인식(automatic contents recognition, ACR)이라 칭하기도 한다.
데이터 송수신부(141)는 ATSC-M/H (Advanced Television Systems Committee - Mobile/Handheld) 채널 송수신부(141a)와 IP 송수신부(141b)를 포함할 수 있다.
메모리(150)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상 표시 장치(100)는 인터넷(internet)상에서 상기 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
메모리(150)는 컨텐츠 정보 저장부(151), 부가 서비스 저장부(152), 로고 저장부(153), 설정 정보 저장부(154), 북마크 저장부(155), 사용자 정보 저장부(156), 이용 정보 저장부(157)를 포함할 수 있다.
컨텐츠 정보 저장부(151)는 복수의 특징 정보에 대응하는 복수의 컨텐츠 정보를 저장한다.
부가 서비스 저장부(152)는 복수의 특징 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있고, 복수의 컨텐츠 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있다.
로고 저장부(153)는 복수의 로고를 저장한다. 또, 로고 저장부는 이 복수의 로고에 대응하는 컨텐츠 제공자 식별자 또는 복수의 로고에 대응하는 워터마크 서버 주소를 더 저장할 수도 있다.
설정 정보 저장부(154)는 ACR을 위한 설정 정보를 저장한다.
북마크 저장부(155)는 북마크를 저장한다.
사용자 정보 저장부(156)는 사용자 정보를 저장한다. 사용자 정보는 하나 이상의 서비스를 위한 하나 이상의 계정 정보, 지역 정보, 가족 구성원 정보, 선호 장르 정보, 영상 표시 장치 정보, 이용 정보 제공 범위 중 하나 이상을 포함할 수 있다. 하나 이상의 계정 정보는 이용 정보 측정 서버를 위한 계정 정보, 트위터(twitter), 페이스북(facebook)과 같은 소셜 네트워크 서비스(social network service)의 계정 정보를 포함할 수 있다. 지역 정보는 주소 정보, 우편 번호를 포함할 수 있다. 가족 구성원 정보는 가족 구성원의 수, 각 구성원의 나이, 각 구성원의 성별, 각 구성원의 종교, 각 구성원의 직업 등을 포함할 수 있다. 선호 장르 정보는 스포츠, 영화, 드라마, 교육, 뉴스, 오락, 기타 장르 중에서 하나 이상으로 설정될 수 있다. 영상 표시 장치 정보는 영상 표시 장치의 종류, 제조사, 펌웨어 버전, 해상도, 모델명, OS, 브라우저, 저장 장치 유무, 저장 장치의 용량, 네트워크 속도에 대한 정보를 포함할 수 있다. 이용 정보 제공 범위가 설정되면, 영상 표시 장치(100)는 설정된 범위 내에서 메인 시청각 컨텐츠 시청 정보와 부가 서비스 이용 정보를 수집하고 보고할 수 있다. 이용 정보 제공 범위는 가상 채널 각각에 대해 설정될 수 있다. 또한, 이용 정보 측정 허용 범위는 물리 채널 전체에 대해 설정될 수도 있다.
이용 정보 저장부(157)는 영상 표시 장치(100)에 의해 수집되는 메인 시청각 컨텐츠 시청 정보와 부가 서비스 사용 정보를 저장한다. 또한, 영상 표시 장치(100)는 수집한 메인 시청각 컨텐츠 시청 정보와 수집한 부가 서비스 사용 정보에 기초하여 서비스 이용 패턴을 분석하고, 분석된 서비스 이용 패턴을 이용 정보 저장부(157)에 저장할 수 있다.
부가 서비스 관리부(130)는 핑거프린트 서버(22) 또는 컨텐츠 정보 저장부(151)로부터 메인 시청각 컨텐츠의 컨텐츠 정보를 획득할 수 있다. 컨텐츠 정보 저장부(151)에 추출한 특징 정보에 해당하는 컨텐츠 정보가 없거나 충분한 컨텐츠 정보가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 컨텐츠 정보를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 컨텐츠 정보를 업데이트할 수 있다.
부가 서비스 관리부(130)는 부가 서비스 제공 서버(50) 또는 부가 서비스 저장부(153)로부터 이용가능한 부가 서비스를 획득할 수 있다. 부가 서비스 저장부(153)에 부가 서비스가 없거나 충분한 부가 서비스가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 부가 서비스를 업데이트할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 부가 서비스를 업데이트할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐츠로부터 로고를 추출하고, 로고 저장부(155)에 질의하여 추출한 로고에 대응하는 컨텐츠 제공자 식별자 또는 워터마크 서버 주소를 획득할 수 있다. 로고 저장부(155)에 추출한 로고와 일치하는 로고가 없거나 충분한 로고가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 로고를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 로고를 업데이트할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐츠로부터 추출한 로고와 로고 저장부(155) 내의 복수의 로고와의 비교를 수행하는데 연산의 부담을 줄이기 위한 다양한 방법을 수행할 수 있다.
예컨데, 부가 서비스 관리부(130)는 색깔 특성에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 색깔 특성과 로고 저장부(155) 내의 로고의 색깔 특성을 비교하여 일치 여부를 판단할 수 있다.
또, 부가 서비스 관리부(130)는 문자 인식에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고로부터 인식되는 문자와 로고 저장부(155) 내의 로고로부터 인식되는 문자를 비교하여 일치 여부를 판단할 수 있다.
뿐만 아니라, 부가 서비스 관리부(130)는 로고의 윤곽에 대한 형상에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 윤곽 형상과 로고 저장부(155) 내의 로고의 윤곽 형상을 비교하여 일치 여부를 판단할 수 있다.
다음은 도 11와 도 12을 참고하여 본 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 설명한다.
도 11는 본 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 흐름도이다.
부가 서비스 정보는 부가 서비스의 시작 시간을 포함할 수 있다. 이때, 영상 표시 장치(100)는 이 시작 시간에서 부가 서비스를 시작할 필요가 있다. 그러나, 영상 표시 장치(100)는 타임 스탬프를 가지지 않는 비압축 메인 시청각 컨텐츠를 전송하는 신호를 수신하기 때문에, 메인 시청각 컨텐츠의 재생 시간의 기준과 부가 서비스의 시작 시간의 기준은 서로 다르다. 영상 표시 장치(100)가 시간 정보를 가지는 메인 시청각 컨텐츠를 수신하더라도, 재방송 등과 같이, 메인 시청각 컨텐츠의 재생 시간의 기준과 부가 서비스의 시작 시간의 기준은 서로 다를 수 있다. 따라서, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 기준 시간과 부가 서비스의 기준 시간을 동기화할 필요가 있다. 특히 영상 표시 장치(100)는 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 시작 시간을 동기화할 필요가 있다.
먼저, 부가 서비스 관리부(130)는 메인 시청각 컨텐츠의 일부 구간을 추출한다(S801). 메인 시청각 컨텐츠의 일부 구간은 메인 시청각 컨텐츠의 일부 비디오 프레임과 일부 오디오 구간 중 하나 이상을 포함할 수 있다. 부가 서비스 관리부(130)가 메인 시청각 컨텐츠의 일부 구간을 추출한 시간을 Tn이라 한다.
부가 서비스 관리부(130)는 추출된 구간에 기초하여 메인 시청각 컨텐츠의 컨텐츠 정보를 획득한다(S803). 구체적으로 부가 서비스 관리부(130)는 추출된 구간에 보이지 않는 워터마크(invisible watermark)로 부호화된 정보를 복호하여 컨텐츠 정보를 획득할 수 있다. 또한, 부가 서비스 관리부(130)는 추출된 구간의 특징 정보를 추출하고, 추출된 특징 정보에 기초하여 핑거프린트 서버(22) 또는 컨텐츠 정보 저장부(151)로부터 메인 시청각 컨텐츠의 컨텐츠 정보를 획득할 수 있다. 부가 서비스 관리부(130)가 컨텐츠 정보를 획득한 시간을 Tm이라 한다.
한편, 컨텐츠 정보는 추출된 구간의 시작 시간(Ts)을 포함한다. 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간(Tm) 이후부터는 시간(Ts), 시간(Tm), 시간(Tn)에 기초하여 메인 시청각 컨텐츠의 재생 시간을 부가 서비스의 시작 시간과 동기화한다(S805). 구체적으로, 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간(Tm)을 다음의 수학식 1에서 계산되는 시간(Tp)로 간주한다.
그리고, 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간부터 시간(Tx)가 경과한 시간을 Tp + Tx로 간주할 수 있다.
이후, 부가 서비스 관리부(130)는 획득한 컨텐츠 정보에 기초하여 부가 서비스와 부가 서비스의 시작 시간(Ta)을 획득한다(S807).
메인 시청각 컨텐츠의 동기화된 재생 시간이 부가 서비스의 시작 시간(Ta)와 일치하면, 부가 서비스 관리부(130)는 획득한 부가 서비스를 시작한다(S809). 구체적으로, 부가 서비스 관리부(130)는 다음의 수학식 2를 만족하는 경우에 부가 서비스를 시작할 수 있다.
도 12은 발명의 실시예에 따라 메인 시청각 컨텐츠의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 개념도이다.
도 12에 도시된 바와 같이, 영상 표시 장치(100)는 시스템 시간(Tn)에서 시청각 샘플을 추출한다.
영상 표시 장치(100)는 추출한 시청각 샘플로부터 특징 정보를 추출하고, 핑거프린트 서버(22)에 추출한 특징 정보를 포함하는 질의를 전송하여 질의 결과를 수신한다. 영상 표시 장치(100)는 질의 결과를 파싱하여 추출한 시청각 샘플의 시작 시간(Ts)가 11000ms에 해당함을 시간(Tm)에서 확인한다.
따라서, 영상 표시 장치는 수학식 1에 따라 추출한 시청각 샘플의 시작 시간을 확인한 시점을 Ts + (Tm - Tn)로 간주하여 이후부터 메인 시청각 컨텐츠의 재생 시간을 부가 서비스의 시작 시간과 동기화할 수 있다.
다음은 도 13 내지 도 14을 참고하여 본 발명의 다양한 실시예에 따른 ACR 애플리케이션을 설명한다.
본 발명의 다양한 실시예에 따른 ACR 애플리케이션으로, 자동 재생 애플리케이션, 컨텐츠 제공자 애플리케이션, 영상 표시 장치 제조사 애플리케이션 등을 들 수 있다.
도 13은 본 발명의 실시예에 따른 자동 재생 애플리케이션의 실행 화면을 보여준다.
자동 재생 애플리케이션은 사용자가 아무런 액션을 취하지 않더라도 부가 서비스를 자동적으로 재생한다. 이러한 의미에서, 본 명세서에서 자동 재생 애플리케이션을 린백 애플리케이션(lean back application)이라 부르기도 한다.
자동 재생 애플리케이션은 메인 시청각 컨텐츠의 재생 중에 컨텐츠 제공자 또는 방송사가 제공하는 장면 연관 정보와 같은 부가 서비스를 메인 시청각 컨텐츠의 재생 시간에 따라 사용자의 입력 없이 자동으로 재생한다. 즉, 컨텐츠 제공자 또는 방송사가 전적으로 자동 재생 애플리케이션을 통제한다. 예컨데, 자동 재생 애플리케이션이 특정 채널 또는 특정 컨텐츠에 관련되어 있는 경우, 영상 표시 장치(100)가 자동 재생 애플리케이션에 관련된 채널 또는 컨텐츠로 진입하면, 영상 표시 장치(100)는 해당 자동 재생 애플리케이션을 사용자의 입력 없이 자동으로 실행할 수 있다. 그리고, 영상 표시 장치(100)가 자동 재생 애플리케이션에 관련된 채널 또는 컨텐츠로부터 벗어나면, 영상 표시 장치(100)는 해당 자동 재생 애플리케이션을 사용자의 입력 없이 자동으로 종료할 수 있다. 이러한 의미에서, 본 명세서에서 자동 재생 애플리케이션을 채널-종속 애플리케이션 또는 컨텐츠-종속 애플리케이션이라 부르기도 한다.
도 13에 도시된 바와 같이, 자동 재생 애플리케이션이 재생되면, 화면(200)은 축소된 메인 시청각 컨텐츠가 재생되는 서브 화면(210)과 부가 정보가 디스플레이되는 서브 화면(220)을 포함할 수 있다. 부가 정보가 디스플레이되는 서브 화면(220)은 메인 시청각 컨텐츠가 재생되는 서브 화면(210)과 공간적으로 나뉘어 질 수 있다.
한편, 자동 재생 애플리케이션이 실행될 때, 부가 정보가 디스플레이되는 영역은 반투명할 수 있다. 이 경우, 부가 정보가 디스플레이되는 영역은 메인 시청각 컨텐츠가 재생되는 영역의 위에 overlay될 수 있다.
도 14는 본 발명의 실시예에 따른 컨텐츠 제공자 애플리케이션의 실행 화면을 보여준다.
본 명세서에서, 컨텐츠 제공자 애플리케이션을 풀 인터렉티브 애플리케이션(full interactive application)이라 부르기도 한다.
도 14의 (A)에 도시된 바와 같이, 영상 표시 장치(100)는 복수의 애플리케이션을 다운로드하여 저장할 수 있다. 도 14의 (A)는 복수의 애플리케이션의 아이콘(230)다. 이러한 애플리케이션 중에서 컨텐츠 제공자 애플리케이션은 컨텐츠 제공자에 의해 제작되고 배포되는 애플리케이션이어서, 컨텐츠 제공자의 통제 하에 있을 수 있다.
영상 표시 장치(100)의 사용자는 컨텐츠 제공자 애플리케이션을 애플리케이션 스토어에서 다운로드할 수 있고, 다운로드된 컨텐츠 제공자 애플리케이션의 실행을 결정할 수 있다.
도 14의 (B)는 컨텐츠 제공자 애플리케이션의 실행 화면을 보여준다. 도 14의 (B)에 도시된 바와 같이, 화면(200)은 축소된 메인 시청각 컨텐츠가 재생되는 서브 화면(210)과 부가 정보가 디스플레이되는 서브 화면(220), 메뉴가 디스플레이되는 서브 화면을 포함할 수 있다.
이하, 도 23 내지 도 50을 참조하여 본 발명의 일 실시 예에 따른 영상 표시 장치 제조사 애플리케이션을 설명한다.
영상 표시 장치 제조사 애플리케이션은 영상 표시 장치 제조사 에 의해 제작되고, 영상 표시 장치 제조사에 의해 제어되며, 영상 표시 장치(100)의 생산시에 미리 저장될 수 있다. 즉, 영상 표시 장치 제조사 애플리케이션은 컨텐츠 제공자나 컨텐츠에 상관없이 동일한 서비스를 제공할 수 있으며, 컨텐츠 제공자나 컨텐츠에 상관없이 동일한 유저 인터페이스를 제공할 수 있다.
영상 표시 장치 제조사 애플리케이션은 컨텐츠 제공자가 제공하는 부가 서비스가 표시되는 영역과 영상 표시 장치 제조사가 제공하는 부가 서비스가 표시되는 영역을 분리하여 가질 수 있다. 영상 표시 장치 제조사 애플리케이션은 영상 표시 장치(100)의 사용자에 의해 실행 여부가 결정될 수 있다.
영상 표시 장치 제조사 애플리케이션은 2가지 타입을 가질 수 있다.
첫번째 타입의 영상 표시 장치 제조사 애플리케이션은 크기 조절 사용자 인터페이스(resizing user interface)를 가진다. 크기 조절 사용자 인터페이스를 가지는 영상 표시 장치 제조사 애플리케이션은 메인 시청각 컨텐츠가 디스플레이되는 영역의 크기를 줄여 줄인 영역 내에서 메인 시청각 컨텐츠의 내용 전부가 디스플레이될 수 있도록 한다. 또한, 크기 조절 사용자 인터페이스를 가지는 영상 표시 장치 제조사 애플리케이션은 애플리케이션이 디스플레이되는 영역을 알파벳 L자나 Inverse-L 자 구조로 만든다.
두 번째 타입의 영상 표시 장치 제조사 애플리케이션은 오버레이 사용자 인터페이스(Overlay user interface)를 가진다. 오버레이 사용자 인터페이스(Overlay user interface)를 가지는 영상 표시 장치 제조사 애플리케이션은 메인 시청각 컨텐츠가 디스플레이되는 영역의 크기는 그대로 유지하면서 애플리케이션이 디스플레이되는 영역을 메인 시청각 컨텐츠 위에 겹친다. 애플리케이션이 디스플레이되는 영역이 메인 시청각 컨텐츠를 가리므로, 애플리케이션 영역은 반투명일 수 있다.
이처럼, 영상 표시 장치 제조사 애플리케이션은 어떠한 단일 컨텐츠 제공자나 어떠한 단일 채널에 종속하지 않는다. 이러한 애플리케이션은 영상 표시 장치 제조사에 의해 제작된다고 설명하였으나, 여기에 한정될 필요는 없다. 이러한 어떠한 단일 컨텐츠 제공자나 어떠한 단일 채널에 종속하지 않는 애플리케이션은 채널 변경에 의해서는 실행되지 않고,채널 변경에 의해서는 종료되지 않는다. 본 명세서에서는 설명의 편의를 위하여, 이러한 어떠한 단일 컨텐츠 제공자나 어떠한 단일 채널에 종속하지 않는 애플리케이션을 채널-독립 애플리케이션, 영상 표시 장치 제조사 애플리케이션 또는 Live+ app이라고 부르도록 한다.
다음은 도 15과 도 16를 참고하여 본 발명의 실시예에 따른 ACR 기능의 온오프 제어를 설명한다.
도 15은 본 발명의 실시예에 따른 ACR 기능의 제어를 위한 사용자 인터페이스를 보여준다.
도 15에 도시된 바와 같이, 재생 제어부(113)는 ACR 기능 설정 창을 디스플레이한다. 사용자는 ACR 기능 설정 창을 통해 ACR 기능을 활성화시킬 수도 있고, 비활성화시킬 수도 있다.
ACR 기능이 활성화된 경우, 사용자는 ACR 모드를 선택할 수도 있다. 본 발명의 실시예에 따른 ACR 모드는 자동 재생 애플리케이션 모드, 컨텐츠 제공자 애플리케이션 모드, 영상 표시 장치 제조사 애플리케이션 모드 중 하나로 설정될 수 있다.
이와 같이 ACR 기능의 모드가 설정되면, 재생 제어부(113)는 설정 정보를 설정 정보 저장부(154)에 저장한다.
도 16는 본 발명의 실시예에 따른 영상 표시 장치의 동작 방법의 흐름도이다.
부가 서비스 관리부(130)는 ACR 기능이 턴온되어 있는지를 확인한다(S1901).
ACR 기능이 비활성화되어 있다면, 부가 서비스 관리부(130)는 더 이상 컨텐츠 정보 획득 절차를 수행하지 않는다.
ACR 기능이 활성화되어 있다면 부가 서비스 관리부(130)는 메인 시청각 컨텐츠의 일부 구간을 추출한다(S1902).
부가 서비스 관리부(130)는 추출한 구간에 기초하여 메인 시청각 컨텐츠의 컨텐츠 정보를 획득한다(S1903).
부가 서비스 관리부(130)는 메인 시청각 컨텐츠의 기준 시간을 대체 광고의 기준 시간과 동기화한다(S1905).
부가 서비스 관리부(130)는 획득한 컨텐츠 정보에 기초하여 부가 서비스를 획득한다(S1907). 부가 서비스 관리부(130)는 획득한 컨텐츠 정보에 기초하여 부가 서비스 정보를 획득하고, 획득한 부가 서비스 정보에 기초하여 부가 서비스를 획득할 수도 있다.
이후, 부가 서비스 관리부(130)는 ACR 모드를 확인한다(S1909).
부가 서비스 관리부(130)는 ACR 모드에 따라 부가 서비스를 재생한다(S1911).
구체적으로, ACR 모드가 자동 재생 애플리케이션 모드이면, 부가 서비스 관리부(130)는 자동 재생 애플리케이션을 실행하고, 실행된 자동 재생 애플리케이션은 획득한 부가 서비스를 재생한다.
ACR 모드가 컨텐츠 제공자 애플리케이션 모드이면, 부가 서비스 관리부(130)는 획득한 컨텐츠 정보에 대응하는 컨텐츠 제공자 애플리케이션을 백그라운드에서 실행한다. 부가 서비스 관리부(130)는 부가 서비스 이용에 해당하는 사용자 입력을 수신하면, 컨텐츠 제공자 애플리케이션을 디스플레이한다. 이 컨텐츠 제공자 애플리케이션이 획득한 부가 서비스를 재생할 수 있다. 컨텐츠 제공자 애플리케이션이 자동으로 백그라운드에서 실행되는 대신에, 컨텐츠 제공자 애플리케이션은 사용자 입력에 의해 실행될 수 있다.
ACR 모드가 영상 표시 장치 제조사 애플리케이션 모드이면, 부가 서비스 관리부(130)는 부가 서비스 관리부(130)는 영상 표시 장치 제조사 애플리케이션을 백그라운드에서 실행한다. 부가 서비스 관리부(130)는 부가 서비스 이용에 해당하는 사용자 입력을 수신하면, 영상 표시 장치 제조사 애플리케이션을 디스플레이한다. 이 영상 표시 장치 제조사 애플리케이션이 획득한 부가 서비스를 재생할 수 있다. 영상 표시 장치 제조사 애플리케이션이 자동으로 백그라운드에서 실행되는 대신에, 영상 표시 장치 제조사 애플리케이션은 사용자 입력에 의해 실행될 수 있다.
다음은 도 17 내지 도 42를 참고하여 본 발명의 실시예에 따른 제3자 부가 서비스에 대하여 설명한다.
도 17은 본 발명의 실시예에 따른 네트워크 토폴로지를 보여준다.
도 17에서 보여지는 바와 같이, 본 발명의 실시예에 따른 네트워크 토폴로지는 Broadcaster/CP Backend 서버와 같은 컨텐츠 제공 서버(10), 부가 서비스 제공 서버(50)의 한 종류인 제3자 서버(90), ACR 서버와 같은 컨텐츠 인식 서비스 제공 서버(20), ACR Smart TV와 같은 영상 표시 장치(100)를 포함한다.
영상 표시 장치(100)는 채널-종속 애플리케이션 또는 컨텐츠-종속 애플리케이션인 Leanback 애플리케이션을 이용하여 컨텐츠 제공 서버(10)로부터 방송사 부가 서비스를 얻을 수 있고, 채널-독립 애플리케이션인 Live+ 애플리케이션을 이용하여 제3자 서버(90)로부터 제3자 부가 서비스를 얻을 수 있다.
채널 종속 애플리케이션인 Leanback app은 방송사나 CP(Content Owner)가 제공하는 애플리케이션으로서 프로그램 단위 또는 scene(장면) 단위의 동기화된 서비스를 제공한다. 방송사는 프로그램을 제작하는 주체이므로 프로그램 내에 어떤 장면이 있는지 잘 알기 때문에 특정 장면에 가장 적합한 내용을 보여줄 수 있다. 영상 표시 장치(100)가 프로그램을 인식하면, 영상 표시 장치(100)는 해당 프로그램의 컨텐츠 제공 서버(10)로부터 leanback app을 다운로드 받은 후 다운로드된 Leanback app을 자동적으로 실행한다. 그러나 영상 표시 장치(100)가 실행된 Leanback app과 무관한 다른 채널로 이동하면, 영상 표시 장치(100)는 해당 leanback app을 자동적으로 종료하며, 이동된 채널의 leanback app이 있는 경우 해당 leanback app을 실행할 수 있다.
Live+ app은 제3자(예를 들어 제조사)가 제공하는 어플레케이션으로서 TV내에 사전 설치되어 있고 Leanback app과 달리 사용자가 시청 중인 채널 또는 프로그램에 상관없이 항상 실행될 수 있다. 본 특허에서 제안하는 ACR architecture는 Live+ app이 프로그램과 관련된 부가 정보 및 장면 단위의 동기화된 내용을 보여줄 수 있게 한다. Live+ app은 일관된 사용자 인터페이스를 갖고 프로그램에 상관없이 항상 실행될 수 있고 사용될 수 있는 애플리케이션이다. Live+ app은 방송사가 프로그램 관련 부가 정보를 주지 않아도, 프로그램과 관련된 메타데이터를 이용하여 다양한 서비스를 제공할 수 있다. 예를 들어 프로그램에 대한 기본 정보 및 프로그램 출연자가 등장한 영화 추천 등을 제공할 수 있다. Live+ app은 방송사/CP에 할당된 영역을 가지고 있어, 방송사가 프로그램과 관련된 부가 정보를 제공하는 경우에 Live+ app은 해당 프로그램 관련 Enhancement Data를 해당 영역에 보여줄 수 있다. 예를 들어 방송사가 제공하는 Enhancement Data로는 사용자가 시청 중인 프로그램의 지난 방송 다시보기, 장면 동기화된 내용(예를 들어, 상품 구매, 장소 예약, 음원 구매 및 다운로드, 상품 광고 등)이 있을 수 있다.
영상 표시 장치(100)는 ACR module을 탑재하여 비압축 시청각 컨텐츠로부터 시그니처를 추출하고, 추출한 시그니처를 통해 컨텐츠 인식 서비스 제공 서버(20)에 질의하여 프로그램을 인식한다. 그리고 영상 표시 장치(100)는 인식된 프로그램에 기반하여 프로그램과 관련된 애플리케이션을 구동한다. Leanback app은 프로그램의 인식 후에 다운로드되어 실행될 수 있다. Live+ app은 TV 출시 때 제조사에 의해 사전 설치될 수도 있고, 앱스토어에서 다운로드되어 설치될 수도 있다.
컨텐츠 인식 서비스 제공 서버(20)는 방송되는 프로그램의 오디오 및/ 또는 비디오의 시그너처를 저장하고 있다. 컨텐츠 인식 서비스 제공 서버(20)는 시그너처 capture 시스템을 이용하여 실시간 방송의 시그너처를 추출하여 저장할 수도 있고, 특정 프로그램에 해당되는 시그너처를 포함한 ACR DB를 방송사로부터 제공받아 저장할 수도 있다. 컨텐츠 인식 서비스 제공 서버(20)의 ACR DB에는 프로그램의 content ID, 시그너처, timestamp, URL 등이 저장되어 있다. 본 명세서에서 2가지 타입의 content ID가 이용될 수 있다.
첫 번째 타입의 content ID는 방송사가 직접 부여하는 ID로 방송사 내에서 프로그램을 유일하게 인식하기 위한 구분자이다. 방송사는 자신이 원하는 포맷으로 프로그램에 content ID를 부여할 수 있다. content ID는 컨텐츠 제공 서버(10)에 프로그램 관련 Enhancement Data를 요청할 때 사용될 수 있다.
두 번째 타입의 content ID는 global unique content ID로서, 전국적으로 또는 범세계적으로 프로그램을 유일하게 인식하기 위한 구분자이다. 프로그램은 전국 방송 채널, 지역 방송 채널, 케이블 방송 또는 위성 방송으로부터 송출되기 때문에, 이 모든 프로그램의 시그너처를 추출하기 위해 복수의 지역을 위하여 다수의 시그너처 capture 장비가 설치될 수 있다. 그리고 각 프로그램을 전국적으로 또는 범세계적으로 유일하게 인식하고 구분하기 위하여 프로그램에 global unique content ID가 할당될 수 있다. 각 프로그램과 global unique content ID를 매핑하기 위해서는 메타데이터 데이터베이스가 이용될 수 있다. 메타데이터 데이터베이스는 프로그램 관련 부가 정보인 메타데이터 뿐만 아니라 프로그램 스케쥴 정보를 포함하기 때문에, 이 메타데이터 데이터베이스를 이용하여 capture 시스템으로부터 전달받은 시그너처가 어떤 프로그램인지 매핑될 수 있다. capture 시스템은 추출한 시그너처가 어느 지역, 어느 채널, 어느 시간인지 알고 있기 때문에, 이 정보를 참고하여 메타데이터 데이터베이스를 검색하면 프로그램이 검색될 수 있다. 메타데이터 데이터베이스는 컨텐츠 인식 서비스 제공 서버(20)와 제3자 서버(90)에 함께 사용되며, 컨텐츠 인식 서비스 제공 서버(20)와 제3자 서버(90)는 메타데이터 데이터베이스를 이용하여 global unique content ID를 통해 프로그램을 인식할 수 있다. global unique content ID의 포맷은 서버를 운영하는 제3자가 지정하는 포맷일 수도 있고 메타데이터 데이터베이스가 제공하는 포맷일 수도 있다.
Live+ app이 제공하는 모든 서비스는 제3자 서버(90)로부터 제공된다. 제3자 서버(90)는 컨텐츠 인식 서비스 제공 서버(20)가 전달한 global unique content ID를 영상 표시 장치(100)로부터 수신할 수 있다. 제3자 서버(90)는 global unique content ID를 통해 메타데이터 데이터베이스로부터 global unique content ID에 해당하는 프로그램과 관련된 메타데이터를 추출하고, 추출한 메타데이터를 바탕으로 프로그램과 연계된 다양한 서비스를 영상 표시 장치(100)에 제공할 수 있다. 또한 인식된 프로그램에 대해 방송사가 제공하는 부가 정보가 있으면 제3자 서버(90)는 방송사 서버를 접근하여 프로그램과 관련된 Enhancement Data를 수신하고 이를 가공하여 영상 표시 장치(100)에 제공할 수 있다. Live+ app을 통해 방송사가 제공하는 프로그램 관련 Enhancement Data는 Leanback app이 제공하는 Enhancement Data와 내용은 같고 표현 형태(UI)는 다를 수 있다. 그러나 또 다른 실시예에서, 방송사에 따라 Live+ app을 통해 방송사가 제공하는 프로그램 관련 Enhancement Data의 내용은 Leanback app이 제공하는 Enhancement Data와 내용과 다를 수 있다.
복수의 방송사 또는 복수의 CP를 위하여 복수의 컨텐츠 제공 서버(10)가 존재할 수 있다. 컨텐츠 제공 서버(10)는 프로그램 타겟팅된 Leanback 애플리케이션과, 이 Leanback app이 출력하는 프로그램 관련 Enhancement Data를 가지고 있다.
도 18는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 보여준다.
Live+ app은 메인 시청각 미디어 컨텐츠를 resize하여 화면의 좌측 상단의 영역에서 보여주고, 화면의 오른쪽 영역에서 프로그램 관련 부가 정보를 보여주고, 화면의 하단의 영역에서 프로그램과 관련된 광고를 보여줄 수 있다. Live+ app은 오른쪽 영역인 컨텐츠 영역의 상단에는 복수의 탭을 보여줄 수 있다. 복수의 탭은 프로그램(Program) 탭, 추천(Recommends) 탭, 대와(Talk) 탭, 플러스(Plus)탭을 포함할 수 있다.
도 19는 본 발명의 다양한 실시예에 따른 Live+ 애플리케이션을 실행하는 방법을 보여준다.
영상 표시 장치(100)는 홈 화면 또는 My Apps 화면을 디스플레이할 수 있다. My Apps 화면은 영상 표시 장치(100) 내에 설치된 애플리케이션의 리스트를 보여주는 화면이다.
영상 표시 장치(100)는 홈 화면 또는 My Apps 화면에서 보여주는 복수의 애플리케이션 중에서 Live+ 애플리케이션을 선택하는 사용자 입력을 수신하면, Live+ 애플리케이션을 실행할 수 있다.
또한, 영상 표시 장치(100)는 방송을 재생하면서 Live+ app가 있음을 알려주는 그래픽을 타이머를 통해 일정 시간 간격으로 디스플레이하고, 이 그래픽과 연관된 사용자 입력을 받으면, Live+ 애플리케이션을 실행할 수도 있다.
도 20은 본 발명의 실시예에 따른 Live+ 애플리케이션의 탭의 기능을 보여준다.
프로그램 탭은 현재 시청자가 보고 있는 프로그램에 대한 기본 정보와, 프로그램의 다시 보기 서비스를 제공한다. 영상 표시 장치(100)는 프로그램 기본 정보를 제3자 서버(90)의 Meta DB로부터 가져올 수 있다. 영상 표시 장치(100)는 프로그램의 다시 보기 서비스에 대한 정보를 제3자 서버(90)를 거처 해당 프로그램을 제작하는 컨텐츠 제공 서버(10)로부터 가져올 수 있다.
Recommends tab은 현재 프로그램과 관련있는 또 다른 시청각 컨텐츠인 영화나 비디오(예를 들어 Youtube)를 추천해주거나 현재 프로그램과 관련된 앱을 추천해 줄 수 있다. 제3자 서버(90)는 현재 프로그램의 타이틀, 장르나 출연진에 기초하여 추천을 위한 영화나 비디오를 결정하고, 이에 대한 정보를 가공하여 영상 표시 장치(100)의 Live+ 애플리케이션의 추천 탭에 제공할 수 있다.
Talk tab은 현재의 프로그램과 관련된 대화 내용에 해당하는 트위터 기사를 제공한다. 3자 서버는 현재 프로그램의 타이틀, 장르나 출연진에 기초하여 현재의 프로그램과 관련된 트위터 기사를 검색한 후, 검색한 기사를 가공하여 영상 표시 장치(100)의 Live+ 애플리케이션의 대화 탭에 제공할 수 있다.
Plus tab은 방송사가 프로그램 연관된 데이터를 보여주는 영역으로 방송사 서버로부터 받은 정보를 그대로 제공하거나, 또는 제3자 서버(90)가 방송사 서버로부터 받은 정보를 가공한 정보를 제공한다. Plus tab에서 제공되는 데이터의 종류와 개수는 제한이 없다. 플러스 탭은 상품 구매, 장소 예약, 음원 구매, 상품 광고 등의 다양한 부가 데이터를 제공할 수 있다. 단 방송사 서버로부터 받은 정보가 그대로 플러스탭에 제공될 경우에는, 제3자 서버(90)는 방송사 서버로부터 받은 정보를 Live+ app의 컨텐츠 영역(즉, 화면 오른쪽 영역)의 위치 및 크기에 맞도록 정보를 가공한 후 영상 표시 장치(100)에 제공할 수 있다.
도 21은 본 발명의 일 실시예에 따른 제3자 서버(90)의 아키텍처를 보여준다.
도 21에 도시된 바와 같이, 본 발명의 일 실시예에 따른 제3자 서버(90)는 애플리케이션 계층(Application Layer), 서비스 컴포넌트 계층(Service Component Layer), 백-엔드 시스템 계층(Back-end System Layer), 데이터 컴포넌트 계층(Data Component Layer)을 포함한다.
애플리케이션 계층은 Delivery Interface를 통해 영상 표시 장치(100)를 포함한 다양한 디바이스와 통신할 수 있다. 애플리케이션 계층은 앱스토어 컴포넌트(AppStore component)를 포함할 수 있다. 앱스토어 컴포넌트는 개발자가 App을 등록할 수 있는 인터페이스를 지원할 뿐만 아니라 일반 사용자가 App을 검색, 다운로드 및 설치할 수 있는 인터페이스도 지원할 수 있다. 또한 Live+ 애플리케이션은 제3자 서버(90)에 있는 광고, 검색, 추천 등의 서비스를 앱스토어 컴포넌트를 통해 받을 수 있다.
서비스 컴포넌트 계층은 애플리케이션 계층과 서비스 통합 인터페이스(Service Integration Interface)를 통해 통신할 수 있다. 서비스 컴포넌트 계층은 광고 서비스 컴포넌트, 통합 검색 컴포넌트, 추천 컴포넌트, ACR 컴포넌트를 포함한다. 백-엔드 시스템 계층으로부터 가공된 데이터를 받아 이를 애플리케이션 계층으로 전달한다. ACR 컴포넌트는 영상 표시 장치(100)로부터 수신한 Content ID, Global Content ID, timestamp, 방송사 서버 URL을 가지고 백-엔드 시스템 계층의 메타데이터 컴포넌트를 통해 프로그램 관련 기본 부가 정보를 얻을 수 있다. 또한 ACR 컴포넌트는 메터데이터로부터 얻은 프로그램 title 및 배우에 대한 정보를 통합 검색 컴포넌트로 전달하여 프로그램 관련 검색 결과를 얻을 수 있다.
백-엔드 시스템 계층은 원본 데이터를 데이터 컴포넌트 계층으로부터 읽어 들여 이를 가공하여 서비스 컴포넌트 계층으로 전달한다. 백-엔드 시스템 계층은 검색 엔진, 보안(Security) 컴포넌트, DRM 컴포넌트, 메타데이터 컴포넌트, 광고 플랫폼 컴포넌트, ACR 컴포넌트를 포함할 수 있다.
데이터 컴포넌트 계층은 실제 데이터를 가지고 있다. 여기에는 데이터 컴포넌트 계층은 파일 저장소(File Repository), 통합 데이터베이스(Integrated DB), 사용자 프로파일(User Profile) 저장소, 메타데이터 저장소, 광고 데이터 저장소를 포함할 수 있다. 사용자 프로파일 저장소에는 시청자 또는 사용자의 성별, 나이, 지역, 소득, 가족 구성, 선호 장르, 선호 채널, 선호 프로그램 등의 정보가 저장되어 있다. 메타데이터 저장소에는 컨텐츠에 대한 title, episode, director, synopsis, casts, genre, channel, air time 등의 정보가 저장되어 있다. 제3자 서버(90)는 metadata provider 또는 실시간 방송의 가이드 정보(예를 들어, ATSC 지상파의 경우 PSIP)로부터 컨텐츠에 대한 정보를 수신하여 메타데이터 저장소에 저장할 수 있다.
도 22은 본 발명의 실시예에 따른 자동 실행 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
먼저, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하고, 추출한 특징 정보를 포함하는 ACR 질의 요청 메시지(ACR query request message)를 ACR 서버에 해당하는 핑거프린트 서버(22)에 전송한다(S2105).
핑거프린트 서버(22)는 ACR 질의 요청 메시지 내의 특징 정보를 ACR DB에서 조회하여 특징 정보에 해당하는 프로그램을 식별하고, 이 식별한 프로그램에 대한 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지(ACR query response message)를 영상 표시 장치(100)에 제공한다(S2107). 이때, ACR 질의 응답 메시지는 프로그램 인식 성공 여부에 대한 정보와, 컨텐츠 정보, 린백 애플리케이션의 URL을 포함할 수 있다. 앞서 설명한 바와 같이 컨텐츠 정보는 인식된 프로그램의 Content ID와 인식된 프로그램의 timestamp를 포함할 수 있다. 여기서의 Content ID의 포맷은 해당 방송사만 인식할 수 있는 포맷일 수 있으며, 특히, 이 경우는 방송사가 해당 프로그램의 ACR DB를 컨텐츠 인식 서비스 제공 서버(20)로 제공한 경우에 해당할 수 있다.
영상 표시 장치(100)가 ACR 질의를 통해 프로그램의 식별에 성공하고, leanback app URL이 유효할 경우, 영상 표시 장치(100)는 해당 leanback app URL에 leanback 애플리케이션을 요청한다(S2109).
컨텐츠 제공 서버(10)는 영상 표시 장치(100)가 요청하는 leanback 애플리케이션을 영상 표시 장치(100)에 제공하여(S2111), 영상 표시 장치(100)는 린백 애플리케이션을 다운로드할 수 있다.
영상 표시 장치(100)가 성공적으로 린백 애플리케이션의 다운로드를 완료하면, 영상 표시 장치(100)는 자동적으로 해당 린백 애플리케이션을 실행한다(S2113).
영상 표시 장치(100) 내에서 실행된 린백 애플리케이션은 영상 표시 장치(100) 내의 ACR 엔진로부터 주기적으로 content ID와 timestamp를 획득하고, 획득한 content ID와 timestamp를 포함하는 부가 데이터 요청 메시지를 컨텐츠 제공 서버(10)에 전송하여(S2115), content ID와 timestamp에 해당하는 장면과 연관된 부가 데이터 (Enhancement Data)를 요청한다.
컨텐츠 제공 서버(10)는 요청된 부가 데이터를 leanback app에 전달한다(S2117). leanback app은 방송사가 제공하는 애플리케이션이므로 한 방송사의 컨텐츠 제공 서버(10)의 인터페이스는 또 다른 방송사의 컨텐츠 제공 서버(10)의 인터페이스와 다를 수 있다. 장면 연관된 부가 정보가 있을 경우 leanback app은 단계(S2113)과 단계(S2117)를 반복 수행할 수 있다.
도 23은 본 발명의 한 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
영상 표시 장치(100)가 설치되어 있는 Live+ app의 실행을 위한 사용자 입력을 수신하면, 영상 표시 장치(100)는 설치되어 있는 Live+ app을 실행한다(S2201).
ACR 기능이 턴오프되어 있는 경우, 영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 ACR 모듈을 턴온시킨다(S2203).
영상 표시 장치(100)는 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하고, 추출한 특징 정보를 포함하는 ACR 질의 요청 메시지를 핑거프린트 서버(22)에 해당하는 ACR 서버에 전송한다(S2205).
핑거프린트 서버(22)는 ACR 질의 요청 메시지 내의 특징 정보를 ACR DB에서 조회하여 특징 정보에 해당하는 프로그램을 식별하고, 이 식별한 프로그램에 대한 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 영상 표시 장치(100)에 제공한다(S2207). 이때, ACR 질의 응답 메시지는 프로그램 인식 성공 여부에 대한 정보와, 컨텐츠 정보를 포함할 수 있다. 앞서 설명한 바와 같이 컨텐츠 정보는 인식된 프로그램의 글로벌 유니크 Content ID와 인식된 프로그램의 timestamp를 포함할 수 있다.
영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 서비스 타입의 선택을 위한 사용자 입력을 받는다(S2209). 이때, 서비스 타입은 프로그램 타입, 추천 타입, 대화 타입, 및 플러스 타입 중 적어도 하나에 해당할 수 있다. 예컨데, 선택된 서비스 타입에 해당하는 부가 데이터는 프로그램의 출연자와 관련된 실시간 뉴스 기사가 될 수 있고, 프로그램 출연자가 주연으로 등장하는 영화를 추천하는 서비스가 될 수 있다.
영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 영상 표시 장치(100) 내의 ACR 엔진로부터 현재 인식된 프로그램의 컨텐츠 정보를 획득하고, 프로그램 관련 컨텐츠 요청 메시지를 제3자 서버(90)에 전송하여(S2211), 선택된 서비스 타입에 해당하는 부가 데이터(enhancement data)를 요청한다. 이때, 프로그램 관련 컨텐츠 요청 메시지는 현재 인식된 프로그램의 컨텐츠 정보와 선택된 서비스 타입에 대한 정보를 포함할 수 있다.
Live+ app은 제3자 서버(90)에게 ajax call을 사용하여 HTTP 기반의 Request를 보낼 수 있다. 이때 전달하는 파라미터로는 서비스 타입, Content ID, Global Content ID, timestamp, 방송사 서버 URL 등이 있다. HTTP Request는 HTTP GET기반으로 다음과 같은 신택스(syntax)로 파리미터를 전달할 수 있다.
<service name>에는 Live+ app이 요청하는 서비스의 이름이 입력된다. 본 실시예는 다음과 같은 <service name>을 사용할 수 있다.
- "getProgram" : 프로그램 관련 기본 정보와 지난 episode를 수신하기 위한 service name이며 Live+ app의 program tab에 사용된다.
- "getRecommends" : 프로그램 관련 추천(VOD 추천, App 추천 등) 데이터를 수신하기 위한 service name이며 Live+ app의 recommends tab에 사용된다.
- "getTalk" : 프로그램 관련 실시간 기사/트윗을 수신하기 위한 service name이며 Live+ app의 talk tab에 사용된다.
- "getPlus" : 방송사가 제공하는 프로그램 관련 부가 데이터를 수신하기 위한 service name이며 Live+ app의 plus tab에 사용된다.
<Content ID>는 방송사가 컨텐츠 인식 서비스 제공 서버(20)로 전달한 값이며 방송사 내부적으로 프로그램을 유일하게 식별하기 위해 사용하는 Content ID이다.
<Global Content ID>는 방송사 구분없이 글로벌하게 프로그램을 유일하게 식별하기 위해 사용되며, 이를 위하여 컨텐츠 인식 서비스 제공 서버(20)와 제3자 서버(90)는 동일한 Meta DB를 사용할 필요가 있다. Global Content ID는 Meta DB의 content id 포맷을 따를 수도 있다.
<timestamp>는 인식된 프로그램의 현재 시청 시간을 알려주며 컨텐츠 인식 서비스 제공 서버(20)로부터 전달 받은 값이다.
<방송사 서버 URL>은 방송사가 프로그램 관련 부가 데이터를 제공하는 경우에 전달되며, 이 값으로 제3자 서버(90)는 방송사 서버에 접근할 수 있다.
제3자 서버(90)는 전달받은 Global Content ID에 해당하는 프로그램의 부가 데이터를 찾기 위해 메타데이터 저장소를 검색한다(S2213). 메타데이터 저장소는 Global Content ID에 해당하는 프로그램의 부가 데이터에 대한 검색 결과를 제3자 서버(90)에게 리턴한다.
제3자 서버(90)는 메타데이터 저장소로부터 수신한 프로그램 부가 데이터를 가공하여 가공된 부가 데이터를 영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션에 제공한다(S2221). 제3자 서버(90)는 ajax call을 사용하여 HTTP 기반의 response로 가공된 부가 데이터를 전달할 수 있다.
도 24는 본 발명의 또 다른 실시예에 따른 채널-독립 애플리케이션을 위한 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
영상 표시 장치(100)가 설치되어 있는 Live+ app의 실행을 위한 사용자 입력을 수신하면, 영상 표시 장치(100)는 설치되어 있는 Live+ app을 실행한다(S2301).
ACR 엔진이 턴오프되어 있는 경우, 영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 ACR 엔진을 턴온시킨다(S2303).
영상 표시 장치(100)의 ACR 엔진은 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하고, 추출한 특징 정보를 포함하는 ACR 질의 요청 메시지를 핑거프린트 서버(22)에 해당하는 ACR 서버에 전송한다(S2305).
핑거프린트 서버(22)는 ACR 질의 요청 메시지 내의 특징 정보를 ACR DB에서 조회하여 특징 정보에 해당하는 프로그램을 식별하고, 이 식별한 프로그램에 대한 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 영상 표시 장치(100)의 ACR 엔진에 제공한다(S2307). 이때, ACR 질의 응답 메시지는 프로그램 인식 성공 여부에 대한 정보와, 컨텐츠 정보, 및 컨텐츠 제공 서버(10)의 URL을 포함할 수 있다. 앞서 설명한 바와 같이 컨텐츠 정보는 인식된 프로그램의 글로벌 유니크 Content ID, 인식된 프로그램의 방송사가 식별할 수 있는 content ID와 인식된 프로그램의 timestamp를 포함할 수 있다. 또 다른 실시예에서, 영상 표시 장치(100)는 컨텐츠 제공 서버(10)의 URL을 ACR 질의 응답 메시지로부터 획득하는 것이 아니라, 미리 가지고 있을 수도 있다.
영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 서비스 타입의 선택을 위한 사용자 입력을 받는다(S2309). 이때, 서비스 타입은 프로그램 타입, 추천 타입, 대화 타입, 및 플러스 타입 중 적어도 하나에 해당할 수 있다. 예컨데, 선택된 서비스 타입에 해당하는 부가 데이터는 프로그램의 출연자와 관련된 실시간 뉴스 기사가 될 수 있고, 프로그램 출연자가 주연으로 등장하는 영화를 추천하는 서비스가 될 수 있다.
영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션은 영상 표시 장치(100) 내의 ACR 엔진로부터 현재 인식된 프로그램의 컨텐츠 정보를 획득하고, 프로그램 관련 컨텐츠 요청 메시지를 제3자 서버(90)에 전송하여(S2311), 선택된 서비스 타입에 해당하는 부가 데이터(enhancement data)를 요청한다. 이때, 프로그램 관련 컨텐츠 요청 메시지는 현재 인식된 프로그램의 컨텐츠 정보와 선택된 서비스 타입에 대한 정보 및 방송사 컨텐츠 제공 서버(10)의 URL을 포함할 수 있다.
제3자 서버(90)는 전달받은 Global Content ID에 해당하는 프로그램의 부가 데이터를 찾기 위해 메타데이터 저장소를 검색한다(S2313). 메타데이터 저장소는 Global Content ID에 해당하는 프로그램의 부가 데이터에 대한 검색 결과를 제3자 서버(90)에게 리턴한다.
제3자 서버(90)는 전달받은 방송사 컨텐츠 제공 서버(10)의 URL에 접속하고, 전달받은 방송사 content ID와 timestamp를 포함하는 메타데이터 요청 메시지를 컨텐츠 제공 서버(10)에 전송하여(S2317), 현재 장면과 관련된 부가 데이터를 컨텐츠 제공 서버(10)에 요청한다.
제3자 서버(90)는 컨텐츠 제공 서버(10)로부터 현재 장면과 관련된 부가 데이터를 수신한다(S2319).
제3자 서버(90)는 메타데이터 저장소로부터 수신한 프로그램 부가 데이터 및 컨텐츠 제공 서버(10)로부터 수신한 프로그램 부가 데이터 중 하나 또는 이둘의 결합을 가공하여 가공된 부가 데이터를 영상 표시 장치(100) 내에서 실행된 Live+ 애플리케이션에 제공한다(S2321).
도 25은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 25에 도시된 바와 같이, 본 발명의 실시예에 따른 개념도의 영상 표시 장치(100)는 오디오/비디오 드라이버(Audio/Video driver)(601), ACR 엔진(603), ACR 미들웨어(605), ACR 사용자 인터페이스(607), ACR 플러그인(Plugin)(609)을 포함한다.
오디오/비디오 드라이버(601)는 TV의 외부입력으로 들어오는 오디오/비디오 신호를 캡쳐하여 ACR 엔진(603)에게 전달한다. 오디오/비디오 드라이버(601)는 ACR 엔진(603)이 오디오/비디오 버퍼를 접근할 수 있도록 API를 제공할 수도 있다. 오디오/비디오 드라이버(601)는 HDMI와 같은 외부입력으로 들어오는 오디오/비디오의 특성 정보를 함께 제공할 수 있다. 예를 들어 오디오/비디오 드라이버(601)는 오디오의 경우 sample depth, sampling rate, channel 수(mono/stereo 등), sample 수, sample 시간 등의 정보를 제공할 수 있다. 비디오의 경우 오디오/비디오 드라이버(601)는 video format, input video의 width, height, stride, stream 시간, input type(HDMI1, HDMI2, composite, component 등), 초당 frame 수 등의 정보를 제공할 수 있다.
ACR 엔진(603)은 별도의 process로 실행될 수 있으며, 위에서 언급한 다양한 방식을 이용하여 프로그램을 인식한다. ACR 엔진(603)은 Audio/Video 샘플로부터 시그니처를 추출하고, 추출한 시그니처를 ACR 서버로 전달하여 컨텐츠를 인식할 수 있다. 앞서 설명한대로 ACR 엔진(603)은 플랫폼의 구현에 따라 Audio/Video 버퍼에 접근할 수 있는 API를 호출할 수도 있고, 오디오/비디오 드라이버(601)가 캡처(capture)한 오디오/비디오 스트림을 socket과 같은 방법을 통해 ACR process에 전달할 수도 있다. ACR 엔진(603)은 ACR 서버로 시그니처와 함께 acr 질의 요청을 보내고 content 인식 성공 여부, Content ID, Global Content ID, timestamp, leanback app URL, 방송사 서버 URL 등을 포함하는 acr query response를 ACR 서버로부터 수신한다. ACR 엔진(603)은 ACR 서버로부터 전달받은 결과를 ACR 미들웨어(605)로 전달할 수 있다.
ACR 미들웨어(605)는 DTV process의 미들웨어에 해당하는 모듈이며, ACR 제어를 처리하고, ACR 엔진(603)으로부터의 ACR 질의 응답을 처리한다. ACR 미들웨어(605)는 ACR 프로세스를 실행하거나, 종료하거나, ACR 엔진(603)을 시작하거나 중단함으로써 ACR을 제어한다. 또한 ACR 미들웨어(605)는 ACR 질의 응답을 파싱하여 Content ID, Global Content ID, timestamp 등의 값들도 저장하고 있다. ACR 미들웨어(605)는 이 저장된 값을 ACR UI로 보낼 수 있도록 API를 제공하거나 message queue, global 변수 등의 방법을 통해 ACR 사용자 인터페이스(607)로 전달 할 수 있다. 또한 ACR 미들웨어(605)는 Live+ 애플리케이션이나 린백 애플리케이션과 같은 ACR 애플리케이션에게 Content ID, Global Content ID, timestamp등과 같은 데이터를 전달하기 위해 shared memory, socket 등의 IPC(Inter-Process Communication)를 통해 Web 브라우저에게 전달 할 수 있다.
ACR 사용자 인터페이스(ACR user interface, ACR UI)(607)는 사용자에게 ACR On/Off와 같은 ACR 제어를 할 수 있는 UI를 표출하거나, 인식된 프로그램의 이름 및 시간과 같은 정보를 TV의 상태바 UI에서 사용자에게 보여줄 수 있다.
ACR 미들웨어(605)가 ACR 애플리케이션에 전달하기 위한 Content ID, Global Content ID, timestamp등과 같은 데이터를 브라우저로 전달하면 ACR 플러그인(609)은 이러한 값을 전달 받는다. ACR 플러그인(609)은 Plugin Object Interface를 통해 ACR 애플리케이션에게 해당 값을 전달할 수 있다. 아래는 ACR 플러그인(609)의 Interface의 한 실시예를 보여주고 있다.
위에서, metadata는 인식된 프로그램에 대한 기본적인 메타데이터를 제공한다.
backendURL은 방송사/CP 서버의 URL을 나타낸다.
getACRMetadata()는 인식된 프로그램에 대한 기본적인 메터데이터를 획득하기 위한 함수이며, metadata Property와 동일한 값을 리턴한다.
getBackendURL()는 방송사/CP 서버의 URL을 리턴하는 함수이다.
NotifyACRAppLaunched()는 이동 단말기와 같은 2nd Screen 및 TV가 pairing이 되었을 때 TV상에서의 ACR 애플리케이션이 특정 URL 또는 app을 실행할 경우 이를 2nd Screen의 애플리케이션에게 알려주기 위한 함수이다.
SetAppInfo()는 ACR 애플리케이션의 현재 상태와 해당 애플리케이션의 2nd Screen 버전의 app URL을 알려주는 함수이다.
onContentChanged()는 인식되는 프로그램이 변경되는 경우 호출되는 callback 함수이다.
onMediaTimeUpdated()는 ACR을 통해 timestamp가 변경될 때마다 호출되는 callback 함수이다.
onAppShow()는 TV와 2nd Screen간 pairing된 상태에서 2nd Screen에 있는 애플리케이션이 TV로 이동할 때 호출되는 callback 함수이다.
onAppHide()는 TV와 2nd Screen간 pairing된 상태에서 TV에 있는 애플리케이션이 2nd Screen으로 이동할 때 호출되는 callback 함수이다.
도 26는 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
먼저, 영상 표시 장치(100)가 턴온되면(S3101), 영상 표시 장치(100)는 ACR 설정 정보(ACR configuration information)를 요청하는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 전송한다(S3103). 제3자 서버(90)는 어떠한 단일 채널에도 종속하지 않는 부가 서비스 제공 서버일 수 있고, 복수의 채널을 위한 부가 서비스들을 마련하고 있을 수 있다. 또한, 제3자 서버(90)는 어떠한 단일 채널, 어떠한 컨텐츠 프로바이더, 어떠한 MVPD(서비스 제공자)에도 종속하지 않는 서버일 수 있다.
ACR 설정 정보 요청 메시지는 HTTP GET 기반의 요청 메시지일 수 있으며, 파라미터로서 영상 표시 장치(100)에 적용된 ACR 설정 정보의 버전에 대한 정보, 제품 종류에 대한 정보, 플랫폼 종류에 대한 정보를 포함할 수 있다. ACR 설정 정보 요청 메시지는 아래의 신택스를 가질 수 있다.
위의 신택스에서, <version>은 영상 표시 장치(100)에 적용된 ACR 설정 정보의 버전에 대한 정보를 나타낸다. 영상 표시 장치(100)에 아무런 ACR 설정 정보도 적용되지 않았다면, <version>은 0의 값을 가질 수 있다.
<productType>은 영상 표시 장치(100)의 제품 종류에 대한 정보를 나타낸다. 예컨데, 영상 표시 장치(100)가 스마트 티브이(Smart TV)이면, <productType>의 값은 "스마트 티브이(Smart TV)"가 될 수 있다. 또, 영상 표시 장치(100)가 "블루레이 디스크 플레이어(BDP)"이면, <productType>의 값은 "블루레이 디스크 플레이어(BDP)"가 될 수 있다. ACR 설정 정보 요청 메시지가 <productType>을 포함하지 않으면, ACR 설정 정보 요청 메시지는 모든 종류의 제품의 ACR 설정 정보를 요청함을 의미할 수 있다.
<platformVer>은 영상 표시 장치(100)의 플랫폼 종류에 대한 정보를 나타낸다. 예컨데, 영상 표시 장치(100)의 플랫폼 종류가 "스마트플랫폼(SmartPlatform)"이고, 그 버전이 "3.0"인 경우, <platformVer>의 값은 "SmartPlatform3.0"이 될 수 있다.
ACR 설정 정보 요청 메시지가 <platformVer>을 포함하지 않으면, ACR 설정 정보 요청 메시지는 모든 종류의 플랫폼의 ACR 설정 정보를 요청함을 의미할 수 있다.
소정의 조건이 만족되면, 영상 표시 장치(100)는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 전송할 수 있다. 예컨데, 영상 표시 장치(100)가 턴온되자마자 즉시 영상 표시 장치(100)는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 전송할 수 있다. 또, 영상 표시 장치(100)는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 주기적으로 전송할 수 있다. 또, 영상 표시 장치(100)는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 소정의 시점에서 전송할 수 있다.
ACR 설정 정보 요청 메시지에 대한 응답으로 제3자 서버(90)는 ACR 설정 정보를 포함하는 ACR 설정 정보 응답 메시지를 영상 표시 장치(100)에 전송한다(S3105).
특히, ACR 설정 정보 응답 메시지는 ACR 설정 정보 요청 메시지의 ACR 설정 정보 버전, 제품 종류, 및 플랫폼 종류에 맞는 하나 이상의 ACR 설정 정보 아이템 그룹을 포함할 수 있다.
제3자 서버(90)가 가진 ACR 설정 정보의 버전이 ACR 설정 정보 요청 메시지의 ACR 설정 정보 버전과 동일하면, ACR 설정 정보 응답 메시지는 ACR 설정 정보를 포함하지 않을 수도 있다.
ACR 설정 정보 요청 메시지 없이도 ACR 설정 정보가 변경되면 제3자 서버(90)는 ACR 설정 정보 응답 메시지를 영상 표시 장치(100)에 전송할 수도 있다.
다음은 도 27을 참고하여 본 발명의 일 실시예에 따른 ACR 설정 정보를 설명한다.
도 27은 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
특히, 표 3은 도 27의 실시예에 따른 ACR 설정 정보의 XML 스키마(Schema)를 보여준다.
도 27과 표 3에서 보여지는 바와 같이, 본 발명의 실시예에 따른 ACR 설정 정보는 하나의 XML 문서로서, 탑 엘리먼트(top element)인 ACR 설정(ACR_config) 엘리먼트를 포함한다.
ACR 설정 엘리먼트는 ACR 설정 버전을 알려주는 ACR 설정 버전(ACR_config_ver) 속성을 가지며, 하위 엘리먼트로서 국가 리스트(country_list) 엘리먼트, 측정(measurement) 엘리먼트를 포함한다.
국가 리스트(country_list) 엘리먼트는 하나 이상의 국가(country) 엘리먼트를 포함한다. 각 국가(country) 엘리먼트는 이 국가 엘리먼트에 해당하는 국가에 각각 적용되는 ACR 설정 정보 아이템 그룹을 포함한다. 국가 리스트 엘리먼트는 복수의 국가에 각각 적용되는 복수의 ACR 설정 정보 아이템 그룹을 포함한다.
각 국가 엘리먼트는 코드(code) 속성, 장치 제품 타입(device_product_type) 속성, 장치 플랫폼 타입(device_platform_type) 속성, 하나 이상의 ACR 서버 URL (ACR_server_url) 엘리먼트, 하나 이상의 방송국(broadcaster) 엘리먼트, 하나 이상의 ACR 온 타임(ACR_on_time) 엘리먼트를 포함한다.
코드 속성은 이 코드 속성을 포함하는 국가 엘리먼트의 ACR 설정 정보 아이템이 적용되는 국가를 인식하는 식별 코드를 담으며, 특히 이 식별 코드는 ISO 639 언어 코드에 따를 수 있다.
장치 제품 타입(device_product_type) 속성은 이 장치 제품 속성을 포함하는 국가 엘리먼트의 ACR 설정 정보 아이템이 적용되는 제품의 종류를 담는다. 예컨데, 장치 제품 타입(device_product_type) 속성의 값은 "스마트 티브이(Smart TV)" 또는 "블루레이 디스크 플레이어(BDP)" 등이 될 수 있다.
장치 플랫폼 타입(device_platform_type) 속성은 이 장치 플랫폼 속성을 포함하는 국가 엘리먼트의 ACR 설정 정보 아이템이 적용되는 제품의 플랫폼 종류 및/또는 버전을 담는다. 예컨데, ACR 설정 정보 아이템이 적용되는 제품의 플랫폼 종류가 "스마트플랫폼(SmartPlatform)"이고, 그 버전이 "3.0"인 경우, 장치 플랫폼 타입(device_platform_type) 속성의 값은 "SmartPlatform3.0"이 될 수 있다.
즉, 각 국가 엘리먼트는 국가 속성, 장치 제품 타입 속성 및 장치 플랫폼 타입 속성에 맞는 ACR 설정 정보 아이템 그룹을 포함한다. ACR 설정 정보 아이템 그룹은 국가 속성, 장치 제품 타입 속성 및 장치 플랫폼 타입 속성에 맞는 복수의 ACR 설정 정보 아이템을 포함한다.
후술하겠지만, 국가 속성, 장치 제품 타입 속성 및 장치 플랫폼 타입 속성에 맞는 복수의 ACR 설정 정보 아이템은 국가 속성의 국가 내의 하나 이상의 지역을 위한 하나 이상의 ACR 서버 주소, 린백 애플리케이션의 허용 여부에 대한 정보, 국가 속성의 국가 내의 하나 이상의 지역을 위한 ACR 기능의 턴온 시간 구간의 리스트를 포함할 수 있다.
린백 애플리케이션의 허용 여부에 대한 정보는 린백 애플리케이션의 구동 허용 정보, 린백 애플리케이션의 구동 제한 정보를 포함한다. 린백 애플리케이션의 구동 허용 정보는 린백 애플리케이션의 구동이 허용되는 방송국의 리스트, 린백 애플리케이션의 구동이 허용되는 채널의 리스트, 린백 애플리케이션의 구동이 허용되는 프로그램의 리스트를 포함할 수 있다. 린백 애플리케이션의 구동 제한 정보는 린백 애플리케이션의 구동이 제한되는 방송국의 리스트, 린백 애플리케이션의 구동이 제한되는 채널의 리스트, 린백 애플리케이션의 구동이 제한되는 프로그램의 리스트를 포함할 수 있다. 이와 같이, 제3자 서버(90)는 린백 애플리케이션의 허용 여부에 대한 정보를 영상 표시 장치(100)에 제공하여 린백 애플리케이션이 영상 표시 장치(100)의 안정성에 심각한 영향을 주는 것을 방지할 수 있다.
각 ACR 서버 URL (ACR_server_url) 엘리먼트는 지역(region) 속성을 포함하고, 각 ACR 서버 URL (ACR_server_url) 엘리먼트의 값은 지역 속성에 해당하는 지역에 적용되는 ACR 서버(예컨데 핑거프린터 서버)의 주소(예컨데 URL)를 나타낼 수 있다. 지역 속성을 가지지 않는 ACR 서버 URL 엘리먼트의 값은 이 ACR 서버 URL 엘리먼트에 해당하는 국가의 전 지역에 적용되는 ACR 서버의 주소(예컨데 URL)를 나타낼 수 있다. 이와 같이, 제3자 서버(90)는 영상 표시 장치(100)와 지역적으로 가까운 ACR 서버의 URL 주소를 알려주어, 영상 표시 장치(100)가 빠르게 컨텐츠 인식을 수행할 수 있고, 네트워크 레이턴시(network latency)를 줄일 수 있도록 한다.
각 방송국(broadcaster) 엘리먼트는 이름(name) 속성, 린백 인에이블(leanback_enable) 엘리먼트, 하나 이상의 채널(channel) 엘리먼트를 포함한다.
방송국(broadcaster) 엘리먼트의 이름(name) 속성의 값은 그 방송국 엘리먼트에 해당하는 방송국의 이름을 나타낸다. 좀 더 넓은 의미에서 방송국의 식별자가 사용될 수도 있다.
방송국 엘리먼트의 린백 인에이블 엘리먼트의 값은 그 방송국 엘리먼트에 해당하는 방송국을 위한 린백 애플리케이션을 구동할 지 여부를 나타낸다. 예컨데, 방송국 엘리먼트의 린백 인에이블 엘리먼트의 값이 "true"이면, 영상 표시 장치(100)는 그 방송국 엘리먼트에 해당하는 방송국을 위한 린백 애플리케이션을 다운로드하고 실행할 수 있다. 한편, 방송국 엘리먼트의 린백 인에이블 엘리먼트의 값이 "false"이면, 영상 표시 장치(100)는 그 방송국 엘리먼트에 해당하는 방송국을 위한 린백 애플리케이션을 다운로드하지도 않고 실행하지도 않는다. 방송국 엘리먼트가 린백 인에이블 엘리먼트를 가지지 않으면, 방송국 엘리먼트의 린백 인에이블 엘리먼트의 값은 디폴트로 "true" 또는 "false"로 간주될 수 있다.
각 채널 엘리먼트는 이름(name) 속성, 린백 인에이블(leanback_enable) 엘리먼트, 하나 이상의 프로그램(program) 엘리먼트를 포함한다.
채널 엘리먼트의 이름 속성의 값은 그 채널 엘리먼트에 해당하는 채널의 이름을 나타낸다. 좀더 넓은 범위에서 채널의 식별자가 사용될 수도 있다.
채널 엘리먼트의 린백 인에이블 엘리먼트의 값은 그 채널 엘리먼트에 해당하는 채널을 위한 린백 애플리케이션을 구동할 지 여부를 나타낸다. 예컨데, 채널 엘리먼트의 린백 인에이블 엘리먼트의 값이 "true"이면, 영상 표시 장치(100)는 그 채널 엘리먼트에 해당하는 채널을 위한 린백 애플리케이션을 다운로드하고 실행할 수 있다. 한편, 방송국 엘리먼트의 린백 인에이블 엘리먼트의 값이 "false"이면, 영상 표시 장치(100)는 그 채널 엘리먼트에 해당하는 채널을 위한 린백 애플리케이션을 다운로드하지도 않고 실행하지도 않는다. 채널 엘리먼트가 린백 인에이블 엘리먼트를 가지지 않으면, 채널 엘리먼트의 린백 인에이블 엘리먼트의 값은 디폴트로 "true" 또는 "false"로 간주될 수 있다.
채널 엘리먼트의 린백 인에이블 엘리먼트의 값이 방송국 엘리먼트의 린백 인에이블 엘리먼트의 값과 다르면, 채널 엘리먼트의 린백 인에이블 엘리먼트의 값이 우선 순위를 갖는다.
각 프로그램 엘리먼트는 이름(name) 속성, 린백 인에이블(leanback_enable) 엘리먼트, 하나 이상의 프로그램(program) 엘리먼트를 포함한다.
프로그램 엘리먼트의 이름 속성의 값은 그 프로그램 엘리먼트에 해당하는 프로그램의 이름을 나타낸다. 좀더 넓은 범위에서 프로그램의 식별자가 사용될 수도 있다.
프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값은 그 프로그램 엘리먼트에 해당하는 프로그램을 위한 린백 애플리케이션을 구동할 지 여부를 나타낸다. 예컨데, 프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값이 "true"이면, 영상 표시 장치(100)는 그 프로그램 엘리먼트에 해당하는 프로그램을 위한 린백 애플리케이션을 다운로드하고 실행할 수 있다. 한편, 프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값이 "false"이면, 영상 표시 장치(100)는 그 프로그램 엘리먼트에 해당하는 프로그램을 위한 린백 애플리케이션을 다운로드하지도 않고 실행하지도 않는다. 프로그램 엘리먼트가 린백 인에이블 엘리먼트를 가지지 않으면, 프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값은 디폴트로 "true" 또는 "false"로 간주될 수 있다.
프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값이 채널 엘리먼트의 린백 인에이블 엘리먼트의 값과 다르면, 프로그램 엘리먼트의 린백 인에이블 엘리먼트의 값이 우선 순위를 갖는다.
각 ACR 온 타임(ACR_on_time) 엘리먼트는 지역(region) 속성, 기일(day) 속성, 프롬(from) 속성, 투(to) 속성을 포함한다.
ACR 온 타임 엘리먼트의 지역 속성의 값은 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간이 적용되는 지역을 나타낸다. ACR 온 타임 엘리먼트가 지역 속성을 가지지 않으면, 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간은 그 ACR 온 타임 엘리먼트를 포함하는 국가 엘리먼트에 해당하는 국가의 전 지역에 적용될 수 있다.
ACR 온 타임 엘리먼트의 기일 속성의 값은 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 적용이 시작되는 기일을 나타낸다. 특히, ACR 온 타임 엘리먼트의 기일 속성의 값은 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 적용이 시작되는 요일을 나타낼 수 있다. 이 경우, ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 적용이 시작되는 요일이 일요일, 월요일, 화요일, 수요일, 목요일, 금요일, 토요일이면, ACR 온 타임 엘리먼트의 기일 속성의 값은 각각 "SUN", "MON", "TUE", "WED", "THU", "FRI", "SAT"이 될 수 있다.
ACR 온 타임 엘리먼트의 프롬 속성의 값은 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 시작 시간을 나타낸다.
ACR 온 타임 엘리먼트의 투 속성의 값은 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 종료 시간을 나타낸다.
만약, ACR 온 타임 엘리먼트의 투 속성의 값이 ACR 온 타임 엘리먼트의 프롬 속성의 값보다 작으면, 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 시작 시간은 기일 속성에 해당하는 날의 프롬 속성의 값이 되고, 그 ACR 온 타임 엘리먼트에 해당하는 ACR 온 타임 구간의 종료 시간은 기일 속성에 해당하는 날의 다음날의 투 속성의 값이 될 수 있다. 예를 들어, day 속성의 값이 "MON", from 속성의 값이 "18:00:00", to 속성의 값이 "02:00:00"이면, ACR 온 타임 구간의 시작 시간은 월요일 오후 6시(18시)가 되고, ACR 온 타임 구간의 종료 시간은 다음날인 화요일 오전 2시가 된다.
통상적으로 모든 시간대의 메인 시청각 컨텐츠에 부가 서비스가 제공되지는 않고, 인기있는 메인 시청각 컨텐츠에 부가 서비스가 제공되는 경우가 많다. 이와 같은 경우에도, 영상 재생 장치(100)가 지속적으로 ACR 질의를 ACR 서버에 전송하면, 영상 재생 장치(100)도 불필요한 리소스를 소모하게 되고, ACR 서버 또한 많은 ACR 질의를 처리하여야 하므로 서버의 증설이 요구된다. 제3자 서버(90)는 ACR 온 타임 구간에 대한 정보를 영상 재생 장치(100)에 제공하여 이러한 문제를 방지할 수 있다.
측정(measurement) 엘리먼트는 최대 로그 사이즈(max_log_size) 속성, 보고 간격(report_interval) 속성을 포함한다.
최대 로그 사이즈 속성은 영상 표시 장치(100)가 저장할 수 있는 시청 정보의 최대 사이즈를 나타낸다. 예컨데, 영상 표시 장치(100)가 저장하고 있는 시청 정보의 사이즈가 최대 로그 사이즈 속성의 최대 사이즈의 90%를 넘어서면, 영상 표시 장치(100)는 저장된 시청 정보의 일부 또는 전부를 제3자 서버(90)에 전송하고, 전송된 시청 정보를 삭제할 수 있다. max_log_size의 단위는 바이트(byte)일 수 있다.
보고 간격 속성은 영상 표시 장치(100)가 시청 정보를 제3자 서버(90)에 전송하는 시간 간격을 나타낸다. 예컨데, 영상 표시 장치(100)가 이전의 시청 정보를 제3자 서버(90)에 전송한 후 보고 간격 속성에 해당하는 보고 시간 간격이 경과하면, 영상 표시 장치(100)는 저장된 시청 정보의 일부 또는 전부를 제3자 서버(90)에 전송하고, 전송된 시청 정보를 삭제할 수 있다. report_interval의 단위는 초(sec)일 수 있다. 영상 표시 장치(100)가 보고하는 시청 정보는 메인 시청각 컨텐츠의 시청 시간, 메인 시청각 컨텐츠의 시청 횟수, 린백 애플리케이션에 대한 사용자 반응 횟수 등을 포함할 수 있다.
제3자 서버(90)는 복수의 영상 표시 장치로부터 시청 정보를 수집하여 축적할 수 있다. 영상 표시 장치(100)는 축적된 시청 정보를 제3자 서버(90)에 요청하여 그 응답으로서 축적된 시청 정보를 수신할 수 있다.
도 27과 표 3에서, 본 발명의 실시예에 따른 ACR 설정 정보는 다양한 정보 아이템들을 엘리먼트 또는 속성으로써 포함하지만, 이에 한정될 필요는 없다. 즉, 도 27과 표3과는 달리, ACR 설정 정보는 엘리먼트로써 포함된 정보 아이템을 속성으로써 포함할 수도 있고, 속성으로써 포함된 정보 아이템을 엘리먼트로써 포함할 수도 있다. 또한, 본 발명의 다양한 실시예에서, ACR 설정 정보 내의 다양한 정보 아이템들을 포함하는 엘리먼트 또는 속성들의 명칭은 변경될 수 있다.
표 4는 ACR 설정 정보의 한 실시예를 보여준다.
| <acr_config acr_config_ver= "0001.0000" > <country_list> <country code="US" device_product_type="DTV" device_pIatform_type= "SmartPlatform3.0"> <ACR_server_url>usa.acr.com</ACR_server_urI> <broadcaster name="NBCU"> <channel name="BRAVO"> <program name= "TOPCHEF" leanback_enable="true"/> </channel> <!-- All leanback application on USA network are enabled --> <channel name="USA" leanback_enable="true" /> </broadcaster> <broadcaster name="TURNER" > <channel name="TBS" leanback_enable="true" /> <channel name="TNT"> <program name="LEVERAGE" leanback_enable="true" /> <program name="FALLING SKIES SEASON 2" leanback_enable="true" /> <program name="DALLAS" leanback_enable="false" /> </channel> </broadcaster> <ACR_on_time day="MON" from="18:00:00Z" to="02:00:00Z" /> <ACR_on_time day="WED" from="18:00:OOZ" to="02:00:OOZ" /> <ACR_on_time day="FRI" from="18:00:00Z" to="02:00:00Z" /> </country> </country_list> </acr_config> |
표 4의 ACR 설정 정보를 통해, 영상 표시 장치(100)는 ACR 설정 정보가 제품 정류가 DTV이고 플랫폼 종류가 SmartPlatform3.0인 제품에 적용되고 미국에 적용되는 하나의 ACR 설정 정보 아이템 그룹을 가짐을 알 수 있다.
또한, 영상 표시 장치(100)는 미국 내의 전 지역에 대해서 제품 정류가 DTV이고 플랫폼 종류가 SmartPlatform3.0인 제품을 위한 ACR 서버의 주소가 usa.acr.com임을 알 수 있다.
또한, 영상 표시 장치(100)는 NBCU 방송국의 BRAVO 채널의 TOPCHEF 프로그램을 위한 린백 애플리케이션을 구동할 필요가 있음을 알 수 있다.
또한, 영상 표시 장치(100)는 TURNER 방송국의 TBS 채널의 모든 프로그램을 위한 린백 애플리케이션을 구동할 필요가 있음을 알 수 있다.
또한, 영상 표시 장치(100)는 TURNER 방송국의 TNT 채널의 LEVERAGE 프로그램과 "FALLING SKIES SEASON 2" 프로그램을 위한 린백 애플리케이션을 구동할 필요가 있고, TURNER 방송국의 TNT 채널의 DALLAS 프로그램을 위한 린백 애플리케이션을 구동하면 안됨을 알 수 있다.
또한, 영상 표시 장치(100)는 월요일 오후 6시부터 화요일 오전 2시까지, 수요일 오후 6시부터 목요일 오전 2시까지, 그리고 금요일 오후 6시부터 토요일 오전 2시까지 ACR 기능을 턴온할 필요가 있고, 그 이외의 시간에는 ACR 기능을 턴오프할 필요가 있음을 알 수 있다.
영상 표시 장치(100)는 ACR 설정 정보로부터 자신이 속한 국가, 자신의 제품 종류 및 플랫폼 종류에 맞는 ACR 설정 정보 아이템 그룹을 추출한다(S3107).
영상 표시 장치(100)는 추출한 ACR 설정 정보 아이템 그룹으로부터 복수의 ACR 설정 정보 아이템을 추출한다(S3109). 앞서 설명한 바와 같이, 복수의 ACR 설정 정보 아이템은 국가 속성의 국가 내의 하나 이상의 지역을 위한 하나 이상의 ACR 서버 주소, 린백 애플리케이션의 허용 여부에 대한 정보, 국가 속성의 국가 내의 하나 이상의 지역을 위한 ACR 기능의 턴온 시간 구간의 리스트를 포함할 수 있다. 특히, 영상 표시 장치(100)는 추출한 ACR 설정 정보 아이템 그룹으로부터 영상 표시 장치(100)에 속한 지역을 위한 복수의 ACR 설정 정보 아이템을 추출할 수 있다.
영상 표시 장치(100)는 복수의 추출한 ACR 설정 정보 아이템을 영상 표시 장치(100)내에 설정한다(S3111). 영상 표시 장치(100)는 복수의 추출한 ACR 설정 정보 아이템을 설정된 값과 비교하여 업데이트할 수 있다.
영상 표시 장치(100)는 설정된 ACR 기능 턴온 시간 구간 리스트에 기초하여 ACR 기능을 턴온한다(S3112).
ACR 기능이 턴온되는 때에, 영상 표시 장치(100)의 ACR 엔진은 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하고, 추출한 특징 정보를 포함하는 ACR 질의 요청 메시지를 핑거프린트 서버(22)에 해당하는 ACR 서버에 전송한다(S3113). 영상 표시 장치(100)의 ACR 엔진은 설정된 ACR 서버 주소에 해당하는 ACR 서버에 ACR 질의 요청 메시지를 전송할 수 있다.
ACR 기능이 턴오프되는 때에는, 영상 표시 장치(100)의 ACR 엔진은 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하는 동작을 중단하여 리소스 낭비를 줄일 수 있다.
핑거프린트 서버(22)는 ACR 질의 요청 메시지 내의 특징 정보를 ACR DB에서 조회하여 특징 정보에 해당하는 프로그램을 식별하고, 이 식별한 프로그램에 대한 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 영상 표시 장치(100)의 ACR 엔진에 제공한다(S3115). 이때, ACR 질의 응답 메시지는 프로그램 인식 성공 여부에 대한 정보와, 컨텐츠 정보, 린백 애플리케이션의 URL 주소, 및 컨텐츠 제공 서버(10)의 URL을 포함할 수 있다. 앞서 설명한 바와 같이 컨텐츠 정보는 인식된 프로그램의 글로벌 유니크 Content ID, 인식된 프로그램의 방송사가 식별할 수 있는 content ID와 인식된 프로그램의 timestamp, 인식된 프로그램을 제공하는 방송사의 식별자, 인식된 프로그램을 제공하는 채널의 식별자, 인식된 프로그램의 명칭을 포함할 수 있다. 방송사의 식별자는 방송사의 명칭일 수도 있다. 채널의 식별자는 채널의 명칭일 수도 있다. 또 다른 실시예에서, 영상 표시 장치(100)는 컨텐츠 제공 서버(10)의 URL을 ACR 질의 응답 메시지로부터 획득하는 것이 아니라, 미리 가지고 있을 수도 있다.
영상 표시 장치(100)는 린백 애플리케이션의 허용 여부에 대한 설정된 정보에 기초하여 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청한다(S3117).
구체적으로, ACR 질의 응답 메시지 내의 컨텐츠 정보가 린백 애플리케이션의 구동 허용 정보와 관련되면, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청할 수 있다. 또, ACR 질의 응답 메시지 내의 컨텐츠 정보가 린백 애플리케이션의 구동 제한 정보와 관련되면, 영상 표시 장치(100)는 린백 애플리케이션의 요청을 수행하지 않을 수 있다.
더욱 구체적으로, ACR 질의 응답 메시지를 통해 메인 시청각 컨텐츠를 제공하는 방송국이 식별되고, 식별된 방송국이 린백 애플리케이션의 구동이 허용되는 방송국의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청할 수 있다. 식별된 방송국이 린백 애플리케이션의 구동이 제한되는 방송국의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청하지 않을 수 있다. 또, ACR 질의 응답 메시지를 통해 메인 시청각 컨텐츠를 제공하는 채널이 식별되고, 식별된 채널이 린백 애플리케이션의 구동이 허용되는 채널의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청할 수 있다. 식별된 채널이 린백 애플리케이션의 구동이 제한되는 채널의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청하지 않을 수 있다. 또, ACR 질의 응답 메시지를 통해 메인 시청각 컨텐츠가 식별되고, 식별된 메인 시청각 컨텐츠가 린백 애플리케이션의 구동이 허용되는 프로그램의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청할 수 있다. 식별된 메인 시청각 컨텐츠가 린백 애플리케이션의 구동이 제한되는 프로그램의 리스트에 속하는 경우, 영상 표시 장치(100)는 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청하지 않을 수 있다.
영상 표시 장치(100)는 린백 애플리케이션의 URL 주소로부터 린백 애플리케이션을 수신하고(S3119), 수신된 린백 애플리케이션을 사용자 입력에 무관하게 자동으로 실행한다.
도 28은 본 발명의 또 다른 실시예에 따른 영상 표시 장치의 동작을 보여주는 래더 다이어그램이다.
영상 표시 장치(100)는 제3자 서버(90)로부터 ACR 설정 정보를 획득한다(S3305). 영상 표시 장치(100)가 제3자 서버(90)로부터 ACR 설정 정보를 획득하는 절차는 도 26을 따를 수 있다.
다음은 도 29를 참고하여 본 발명의 일 실시예에 따른 ACR 설정 정보를 설명한다.
도 29는 본 발명의 일 실시예에 따른 ACR 설정 정보의 XML 스키마 다이어그램이다.
특히, 표 5은 도 29의 실시예에 따른 ACR 설정 정보의 XML 스키마(Schema)를 보여준다.
| <?xml version="1.0" encoding="UTF-8"?> <xs:schema xmlns:xs="http://www.w3.org/2001/XMLSchema" elementFormDefault="qualified" attributeFormDefault="unqualified"> <xs:complexType name="acr_config"> <xs:sequence> <xs:element name="device" type="device_type" minOccurs="0" maxOccurs="unbounded"/> </xs:sequence> <xs:attribute name="country_code" type="xs:string" use="required"/> <xs:attribute name="acr_config_format_ver" type="xs:string" use="required"/> <xs:attribute name="version" type="xs:integer" use="required"/> </xs:complexType> <xs:complexType name="device_type"> <xs:sequence> <xs:element name="ACR_server_url" type="xs:string"/> <xs:element name="broadcaster" type="broadcaster_type" minOccurs="0" maxOccurs="unbounded"/> <xs:element name="MVPD" type="MVPD_type" minOccurs="0" maxOccurs="unbounded"/> </xs:sequence> <xs:attribute name="device_product_type" type="xs:string" use="required"/> <xs:attribute name="device_platform_type" type="xs:string" use="required"/> <xs:attribute name="ACR_On" type="xs:boolean" use="optional" default="true"/> <xs:attribute name="query_interval" type="xs:integer" use="optional"/> <xs:attribute name="user_query_interval" type="xs:integer" use="optional"/> </xs:complexType> <xs:complexType name="MVPD_type"> <xs:sequence> <xs:element name="MVPD_logo" type="MVPD_logo_type" minOccurs="0" maxOccurs="unbounded"/> </xs:sequence> <xs:attribute name="Id" type="xs:string" use="required"/> <xs:attribute name="type" type="xs:string" use="required"/> <xs:attribute name="DetectOn" type="xs:boolean" use="required"/> <xs:attribute name="detect_interval" type="xs:integer"/> </xs:complexType> <xs:complexType name="MVPD_logo_type"> <xs:attribute name="type" type="xs:string" use="required"/> <xs:attribute name="x" type="xs:integer" use="required"/> <xs:attribute name="y" type="xs:integer" use="required"/> <xs:attribute name="width" type="xs:integer" use="required"/> <xs:attribute name="height" type="xs:integer" use="required"/> </xs:complexType> <xs:complexType name="broadcaster_type"> <xs:sequence> <xs:element name="channel" type="channel_type" minOccurs="0" maxOccurs="unbounded"/> </xs:sequence> <xs:attribute name="name" type="xs:string" use="required"/> <xs:attribute name="query_interval" type="xs:integer" use="optional"/> </xs:complexType> <xs:complexType name="channel_type"> <xs:sequence> <xs:element name="program" type="program_type" minOccurs="0" maxOccurs="unbounded"/> </xs:sequence> <xs:attribute name="name" type="xs:string" use="required"/> <xs:attribute name="leanback_enable" type="xs:boolean" use="optional" default="true"/> <xs:attribute name="query_interval" type="xs:integer" use="optional"/> </xs:complexType> <xs:complexType name="program_type"> <xs:attribute name="name" type="xs:string" use="required"/> <xs:attribute name="leanback_enable" type="xs:boolean" use="optional" default="true"/> <xs:attribute name="query_interval" type="xs:integer" use="optional"/> <xs:attribute name="localCache_enable" type="xs:boolean" use="optional"/> </xs:complexType> </xs:schema> |
도 29와 표 5에서 보여지는 바와 같이, ACR 설정 정보는 하나의 XML 문서로서, 탑 엘리먼트(top element)인 ACR 설정(ACR_config) 엘리먼트를 포함한다.
ACR 설정 엘리먼트는 국가 코드(country_code) 속성, ACR 설정 포맷 버전(acr_config_format_ver) 속성, 버전(version) 속성을 가지고, 하나 이상의 장치(device) 엘리먼트를 포함한다.
각 장치 엘리먼트는 장치 제품 타입(device_product_type) 속성, 장치 플랫폼 타입(device_platform_type) 속성, ACR 온(ACR_On) 속성, 쿼리 간격(query_interval) 속성, 사용자 쿼리 간격(user_query_interval) 속성을 가지고, 하나 이상의 ACR 서버 URL (ACR_server_url) 엘리먼트, 하나 이상의 방송국(broadcaster) 엘리먼트, 하나 이상의 MVPD 엘리먼트를 포함한다. 각 장치 엘리먼트는 이 장치 엘리먼트의 장치 제품 타입 속성에 해당하는 제품 타입 및 장치 플랫폼 타입 속성에 해당하는 플랫폼 타입에 적용되는 ACR 설정 정보 아이템 그룹을 포함한다.
장치 제품 타입(device_product_type) 속성, 장치 플랫폼 타입(device_platform_type) 속성에 대해서는 표 3을 참고하여 설명하였으므로, 그 설명을 생략한다.
ACR 서버 URL 엘리먼트, 방송국 엘리먼트에 대해서는 표 3을 참고하여 설명하였으므로, 그 설명을 생략한다.
각 MVPD 엘리먼트는 식별자(Id) 속성, 타입(type) 속성, 감지 온(DetectOn) 속성 및 감지 간격(detect_interval) 속성을 가지고, 하나 이상의 MVPD 로고(MVPD_logo) 엘리먼트를 포함한다.
MVPD 엘리먼트의 식별자 속성의 값은 MVPD 엘리먼트에 해당하는 MVPD를 유일하게 식별하기 위한 식별자를 나타낸다. 예컨데, 북미의 경우, MVPD 엘리먼트의 식별자 속성의 값은 "TimeWarner", "Comcast" 등이 될 수 있다.
MVPD 엘리먼트의 타입 속성의 값은 MVPD 엘리먼트에 해당하는 MVPD의 종류를 나타낸다. 특히, MVPD 엘리먼트의 타입 속성의 값은 MVPD 엘리먼트에 해당하는 MVPD의 방송 네트워크의 종류를 나타낼 수 있다. 예컨데, MVPD 엘리먼트의 타입 속성의 값은 "Cable", "Satellite", "IPTV" 등이 될 수 있다.
MVPD 엘리먼트의 감지 온 속성의 값은 영상 표시 장치(100)가 MVPD의 로고를 인식할지 여부를 나타낸다. MVPD 엘리먼트의 감지 온 속성의 값이 "On" (또는 "true")에 해당하는 경우, 영상 표시 장치(100)는 방송 수신 장치(60)가 출력하는 비압축 시청각 컨텐츠에서 MVPD의 로고를 감지하고, 감지한 로고에 기초하여 MVPD를 식별한다. 이미 MVPD가 인식된 경우에는, 영상 표시 장치(100)의 리소스의 불필요한 낭비를 방지하기 위해 MVPD 엘리먼트의 감지 온 속성의 값은 Off로 설정될 수 있다. MVPD 엘리먼트의 감지 온 속성의 값이 "Off"에 해당하는 경우, 영상 표시 장치(100)는 비압축 시청각 컨텐츠에서 감지한 로고에 기초하여 MVPD를 식별하는 동작을 수행하지 않는다.
MVPD 엘리먼트의 감지 온 속성의 값이 "ON"일 때, MVPD 엘리먼트의 감지 간격 속성이 존재할 수 있다. MVPD 엘리먼트의 감지 간격 속성은 영상 표시 장치(100)가 비압축 시청각 컨텐츠에서 MVPD의 로고를 감지하는 시간 간격을 나타내며, 그 단위는 초(second)이다. 예를 들어 detect_interval이 300(5 x 60)이면 영상 표시 장치(100)는 비압축 시청각 컨텐츠에서 5분 마다 MVPD의 로고의 인식을 시도한다.
사용자는 대개 프로그램의 종료 후에 광고의 시청 중에 EPG를 통해 다른 채널의 프로그램을 확인하는 경향이 있으므로, 이러한 사용자가 STB 리모컨을 통해 가이드나 메뉴를 선택하는 성향을 고려하여 제3자 서버(90)는 MVPD의 로고를 감지하는 시간 간격을 결정할 수 있다. 또한 보통 프로그램이 매시간 또는 매30분경에 프로그램이 변경되는 경우가 많다면, 제3자 서버(90)는 이러한 상황을 고려하여 MVPD의 로고를 감지하는 시간 간격을 결정할 수 있다. 예컨데, 제3자 서버(90)는 매 55분에서 5분까지에만 로고 인식하도록 설정할 수 있다. 또한 제3자 서버(90)는 5분마다 한번씩 로고 인식하도록 설정할 수도 있다.
각 MVPD 로고(MVPD_logo) 엘리먼트는 MVPD 로고가 나타나는 화면의 타입에 대한 정보를 담는 타입(type) 속성, MVPD 로고가 나타나는 화면 영역에 대한 정보를 담는 로고 영역 속성을 포함한다. 로고 영역 속성은 MVPD 로고의 화면 위치에 대한 정보를 담는 로고 위치 속성, MVPD 로고의 크기에 대한 정보를 담는 로고 크기 속성을 포함한다. 로고 위치 속성은 x좌표(x) 속성, y 좌표(y) 속성을 포함한다. 로고 크기 속성은 폭(width) 속성, 높이(height) 속성을 포함한다.
MVPD 로고 엘리먼트의 타입 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 타입을 나타낸다. 구체적으로 MVPD 로고 엘리먼트의 타입 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고가 나타나는 화면의 타입을 나타낸다. 예컨데, 타입(type) 속성의 값은 "EPG", "Menu", "Banner" 등이 될 수 있다.
다음은 도 30 내지 도 33을 참고하여 본 발명의 다양한 실시예에 따른 MVPD 로고의 종류와 위치를 설명한다.
도 30은 본 발명의 실시예에 따른 위성 사업자인 Dish Network의 MVPD 로고가 노출되는 EPG 창을 보여주고, 도 31은 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 EPG 창을 보여준다.
도 30과 도 31에 도시된 바와 같이, MVPD 로고 엘리먼트의 타입 속성의 값이 "EPG"에 해당하는 경우, MVPD 로고는 EPG 화면에 표시된다. 따라서, MVPD 로고 엘리먼트의 타입 속성의 값이 "EPG"에 해당하는 경우, 비압축 시청각 컨텐츠에 EPG 화면이 나타날 때, 영상 표시 장치(100)는 EPG 화면으로부터 MVPD 로고를 추출할 수 있다.
도 32는 본 발명의 실시예에 따른 Cable 사업자인 Comcast의 MVPD 로고가 노출되는 메뉴 창을 보여주고, 도 33은 본 발명의 실시예에 따른 위성 사업자인 DirecTV의 MVPD 로고가 노출되는 메뉴 창을 보여준다.
도 32와 도 33에 도시된 바와 같이, MVPD 로고 엘리먼트의 타입 속성의 값이 "Menu"에 해당하는 경우, MVPD 로고는 메뉴 화면에 표시된다. MVPD 로고 엘리먼트의 타입 속성의 값이 "Menu"에 해당하는 경우, 비압축 시청각 컨텐츠에 Menu 화면이 나타날 때, 영상 표시 장치(100)는 Menu 화면으로부터 MVPD 로고를 추출할 수 있다.
MVPD 로고 엘리먼트의 타입 속성의 값이 "Banner"에 해당하는 경우, MVPD 로고는 배너 화면에 표시된다. MVPD 로고 엘리먼트의 타입 속성의 값이 "Banner"에 해당하는 경우, 비압축 시청각 컨텐츠에 Banner 화면이 나타날 때, 영상 표시 장치(100)는 Banner 화면으로부터 MVPD 로고를 추출할 수 있다.
MVPD 로고 엘리먼트의 x좌표(x) 속성의 값과 y 좌표(y) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 위치에 대한 정보를 나타낸다. MVPD 로고 엘리먼트의 x좌표(x) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 x 좌표의 위치값을 나타낸다. MVPD 로고 엘리먼트의 y 좌표(y) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 y 좌표의 위치값을 나타낸다.
MVPD 로고의 x 좌표와 y 좌표의 위치값은 해상도를 기준으로 결정될 수도 있다. 예컨데, 화면의 해상도가 1920x1080인 경우에, MVPD 로고의 x 좌표의 위치값은 0부터 1919 사이의 값 중 하나로 결정되고, MVPD 로고의 y 좌표의 위치값은 0부터 1079 사이의 값 중 하나로 결정될 수 있다.
한편, MVPD 로고의 x 좌표와 y 좌표의 위치값은 해상도와 상관없이 상대적인 위치 관계를 기준으로 결정될 수도 있다. 예컨데, 화면의 해상도가 1920x1080인 경우라 하더라도 화면의 크기를 100x100으로 정규화한 후 MVPD 로고의 x 좌표와 y 좌표의 위치값은 정규화된 범위 내의 값 중 하나로 결정될 수 있다. 이 경우, 영상 표시 장치(100)는 정규화된 범위 내의 값을 가지는 x 좌표와 y 좌표의 위치값을 실제 화면 해상도를 기준으로 스케일링하여, MVPD 로고의 위치를 획득할 수 있다.
MVPD 로고 엘리먼트의 폭(width) 속성의 값과 높이(height) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 크기에 대한 정보를 나타낸다. MVPD 로고 엘리먼트의 폭(width) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 폭을 나타낸다. MVPD 로고 엘리먼트의 높이(height) 속성의 값은 그 MVPD 로고 엘리먼트에 해당하는 MVPD 로고의 높이를 나타낸다.
MVPD 로고의 폭과 높이는 해상도를 기준으로 결정될 수도 있다. 예컨데, 화면의 해상도가 1920x1080인 경우에, MVPD 로고의 폭은 0부터 1919 사이의 값 중 하나로 결정되고, MVPD 로고의 높이는 0부터 1079 사이의 값 중 하나로 결정될 수 있다.
한편, MVPD 로고의 폭과 높이는 해상도와 상관없이 상대적인 크기를 기준으로 결정될 수도 있다. 예컨데, 화면의 해상도가 1920x1080인 경우라 하더라도 화면의 크기를 100x100으로 정규화한 후 MVPD 로고의 폭과 높이는 정규화된 범위 내의 값 중 하나로 결정될 수 있다. 이 경우, 영상 표시 장치(100)는 정규화된 범위 내의 값을 가지는 폭과 높이를 실제 화면 해상도를 기준으로 스케일링하여, MVPD 로고의 크기를 획득할 수 있다.
영상 표시 장치(100)는 ACR 설정 정보로부터 자신의 제품 종류 및 플랫폼 종류에 맞는 ACR 설정 정보 아이템 그룹을 추출한다(S3307).
영상 표시 장치(100)는 추출한 ACR 설정 정보 아이템 그룹으로부터 복수의 ACR 설정 정보 아이템을 추출한다(S3309). 앞서 설명한 바와 같이, 복수의 ACR 설정 정보 아이템은 하나 이상의 지역을 위한 하나 이상의 ACR 서버 주소, 하나 이상의 MVPD에 각각 대응하는 하나 이상의 MVPD 정보 아이템 그룹을 포함한다. 각 MVPD 정보 아이템 그룹은 MVPD 식별자, MVPD 타입, MVPD 로고 감지 여부, MVPD 로고 감지 시간 간격, MVPD 로고 화면 타입, MVPD 로고 화면 영역에 대한 정보를 포함한다. MVPD 로고 화면 영역에 대한 정보는 MVPD 로고 화면 위치, 및 MVPD 로고 크기에 대한 정보를 포함한다.
영상 표시 장치(100)는 복수의 추출한 ACR 설정 정보 아이템을 영상 표시 장치(100)내에 설정한다(S3311). 영상 표시 장치(100)는 복수의 추출한 ACR 설정 정보 아이템을 설정된 값과 비교하여 업데이트할 수 있다.
이후, 영상 표시 장치(100)는 하나 이상의 MVPD 정보 아이템 그룹에 기초하여 입력되는 비압축 시청각 컨텐츠에서 MVPD 로고로 추정되는 하나 이상의 이미지를 추출한다(S3313). 특히, MVPD 정보 아이템 그룹의 개수가 복수인 경우, 영상 표시 장치(100)는 복수의 MVPD 정보 아이템 그룹에 각각 대응하는 복수의 MVPD 로고 추정 이미지를 추출할 수 있다. 복수의 MVPD 로고 추정 이미지의 각각은 대응하는 감지 시간 간격에 기초하여 추출되므로, 복수의 MVPD 로고 추정 이미지는 반드시 동시에 추출될 필요는 없다. 복수의 MVPD 정보 아이템 그룹에 각각 속하는 복수의 MVPD 로고 감지 시간 간격이 서로 동일하다면, 복수의 MVPD 로고 추정 이미지는 동시에 추출될 수도 있다.
구체적으로, MVPD 엘리먼트의 감지 온 속성의 값이 "on"에 해당하면, 영상 표시 장치(100)는 입력되는 비압축 시청각 컨텐츠에서 MVPD 로고 엘리먼트의 타입 속성의 값에 해당하는 화면이 나타날 때, MVPD 엘리먼트의 감지 간격 속성의 값에 해당하는 시간 간격에 따라 MVPD 엘리먼트의 로고 영역 속성의 값에 해당하는 화면 영역에서 이미지를 MVPD 정보 아이템 그룹의 개수 만큼 추출하여, 복수의 MVPD 로고 추정 이미지를 획득할 수 있다.
이후, 영상 표시 장치(100)는 하나 이상의 추출한 MVPD 로고 추정 이미지에 기초하여 영상 표시 장치(100)가 가입한 가입 MVPD를 식별하여(S3315), 가입 MVPD의 식별자를 획득한다. 특히, MVPD 정보 아이템 그룹의 개수가 복수인 경우, 영상 표시 장치(100)는 복수의 추출한 MVPD 로고 추정 이미지에 기초하여 MVPD를 식별할 수 있다.
일 실시예에서, 영상 표시 장치(100)는 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지에 대한 요청 메시지를 제3자 서버(90)에 전송한다. 이후, 영상 표시 장치(100)는 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 제3자 서버(90)로부터 수신하여, 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 데이터베이스화할 수 있다. 영상 표시 장치(100)가 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 포함하는 데이터베이스를 가지고 있다면, 영상 표시 장치(100)는 복수의 MVPD 로고 이미지와 복수의 추출한 MVPD 로고 추정 이미지를 비교한다. 복수의 추출한 MVPD 로고 추정 이미지 중 적어도 하나가 복수의 MVPD 로고 이미지 중 하나와 일치하면, 영상 표시 장치(100)는 일치한 MVPD 로고 이미지에 해당하는 MVPD를 자신이 가입한 MVPD로 식별할 수 있다.
또 다른 실시예에서, 영상 표시 장치(100)는 복수의 추출한 MVPD 로고 추정 이미지를 제3자 서버(90) 또는 핑거프린트 서버(22)에 전송할 수 있다. 이 경우, 제3자 서버(90) 또는 핑거프린트 서버(22)는 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 포함하는 데이터베이스를 가지고 있다. 제3자 서버(90) 또는 핑거프린트 서버(22)는 복수의 MVPD 로고 이미지와 복수의 추출한 MVPD 로고 추정 이미지를 비교한다. 복수의 추출한 MVPD 로고 추정 이미지 중 적어도 하나가 복수의 MVPD 로고 이미지 중 하나와 일치하면, 제3자 서버(90) 또는 핑거프린트 서버(22)는 일치한 MVPD 로고 이미지에 해당하는 MVPD를 영상 표시 장치(100)가 가입한 MVPD로 식별할 수 있다. 이후 제3자 서버(90) 또는 핑거프린트 서버(22)는 영상 표시 장치(100)가 가입한 MVPD의 식별자를 영상 표시 장치(100)에 전송하여, 영상 표시 장치(100)가 가입 MVPD를 식별할 수 있도록 한다. 제3자 서버(90)가 가입 MVPD의 식별자를 영상 표시 장치(100)에 전송한 경우, 영상 표시 장치(100)는 더 이상 MVPD 로고 추출 및 MVPD 식별을 수행할 필요가 없으므로, 제3자 서버(90) 및 영상 표시 장치(100)의 불필요한 리소스 방지를 위해, 제3자 서버(90)는 영상 표시 장치(100)를 위한 ACR 설정 정보 내에서 MVPD 엘리먼트의 감지 온 속성의 값을 OFF 또는 false로 설정하고, 이후에는 MVPD 엘리먼트의 감지 온 속성의 값이 OFF인 ACR 설정 정보를 영상 표시 장치(100)에 제공할 수 있다. 한편, 영상 표시 장치(100)가 MVPD를 식별한 이후라 하더라도, 사용자가 MVPD를 변경할 수 있으므로, 일정 시간이 경과한 이후에는 제3자 서버(90)는 영상 표시 장치(100)를 위한 ACR 설정 정보 내에서 MVPD 엘리먼트의 감지 온 속성의 값을 ON으로 설정할 수 있다.
한편, 영상 표시 장치(100)는 가입 MVPD의 식별자에 기초하여, 하나 이상의 MVPD 정보 아이템 그룹으로부터 가입 MVPD의 타입을 확인한다(S3317). 즉, 복수의 MVPD 정보 아이템 그룹에서, 복수의 MVPD 식별자의 각각은 대응하는 MVPD 타입을 가지고 있으므로, 영상 표시 장치(100)는 가입 MVPD의 식별자에 기초하여, 하나 이상의 MVPD 정보 아이템 그룹으로부터 가입 MVPD의 타입을 확인할 수 있다.
가입 MVPD의 타입이 위성 사업자가 아닌 경우, 영상 표시 장치(100)는 지리적 가입자 위치를 확인한다(S3319). 가입 MVPD의 타입이 케이블 사업자 또는 IPTV 사업자인 경우, 영상 표시 장치(100)는 지리적 가입자 위치를 확인할 수 있다.
일 실시예에서, 영상 표시 장치(100)는 사용자 입력에 기초하여 지리적 가입자 위치를 확인할 수 있다. 이때, 북미의 경우 사용자 입력은 zip code일 수 있다.
또 다른 실시예에서, 영상 표시 장치(100)는 Geo-IP에 기반하여 영상 표시 장치(100)의 지리적 위치를 확인할 수 있다. Geo-IP란 단말기의 IP address로부터 단말의 지정학적 위치를 알아내는 방법이다.
영상 표시 장치(100)는 자신의 IP 주소를 제3자 서버(90) 또는 핑거프린트 서버(22) 또는 위치 확인 서버에 전송할 수 있다. 제3자 서버(90) 또는 핑거프린트 서버(22) 또는 위치 확인 서버는 IP 주소를 이용하여 영상 표시 장치(100)의 지리적 가입자 위치를 확인하고, 확인한 지리적 가입자 위치에 대한 정보를 영상 표시 장치(100)에 전송하여, 영상 표시 장치(100)는 지리적 가입자 위치를 확인할 수 있도록 한다. 이때, 북미의 경우 확인한 지리적 가입자 위치에 대한 정보는 zip code일 수 있다.
영상 표시 장치(100)는 패키지 정보 요청 메시지를 제3자 서버(90)에 전송한다(S3321). 이때, 패키지 정보 요청 메시지는 MVPD의 식별자, MVPD의 타입, 지리적 가입자 위치를 포함할 수 있다. 동일한 패키지이더라도 지역에 따라 채널맵이 달라질 수 있기 때문에, 패키지 정보 요청 메시지는 지리적 가입자 위치를 포함할 수 있다.
제3자 서버(90)는 MVPD 식별자 및 MVPD 타입에 해당하는 MVPD가 영상 표시 장치(100)의 지리적 가입자 위치를 위하여 제공하는 복수의 패키지에 대한 정보를 영상 표시 장치(100)에 전송한다. 이로써 영상 표시 장치(100)는 MVPD 식별자 및 MVPD 타입에 해당하는 MVPD가 영상 표시 장치(100)의 지리적 가입자 위치를 위하여 제공하는 복수의 패키지에 대한 정보를 제3자 서버(90)로부터 수신한다(S3323).
다음 표 6에서 보여지는 바와 같이, 복수의 패키지에 대한 정보는 복수의 패키지의 각각에서 제공하는 채널의 리스트에 대한 정보를 포함한다.
| Standard | TV Essentials | Premium | Sports Pass | |
| USA | O | O | X | X |
| HBO | X | X | O | X |
| ESPN | O | X | X | O |
| CNN | O | O | X | X |
특히, 표 6는 미국의 Time Warnaer Cable 사업자가 제공하는 복수의 패키지에 대한 정보를 보여준다.
표 6에서 보여지는 바와 같이, 미국의 Time Warnaer Cable 사업자는 Standard 패키지, TV Essentials 패키지, Premium 패키지, 및 Sports Pass 패키지를 제공한다. Standard 패키지는 USA 채널, ESPN 채널, CNN 채널을 제공하지만, HBO 채널은 제공하지 않는다. TV Essentials 패키지는 USA 채널 및 CNN 채널을 제공하지만, ESPN 채널 및 HBO 채널은 제공하지 않는다. Premium 패키지는 HBO 채널을 제공하지만, USA 채널, ESPN 채널, 및 CNN 채널을 제공하지는 않는다. Sports Pass 패키지는 ESPN 채널을 제공하지만, USA 채널, HBO 채널 및 CNN 채널을 제공하지는 않는다.
영상 표시 장치(100)는 입력되는 비압축 메인 시청각 컨텐츠로부터 하나 이상의 채널을 식별한다(S3325). 통상 사용자는 하루에도 여러 번 채널을 변경하므로, 영상 표시 장치(100)는 비압축 시청각 컨텐츠로부터 하나 이상의 채널을 식별할 수 있다. 특히, 도 3, 도 6, 도 9에 도시된 바와 같은 절차를 통해 영상 표시 장치(100)는 입력되는 비압축 시청각 컨텐츠의 컨텐츠 정보를 획득하여 채널을 식별할 수 있다. 구체적으로, 영상 표시 장치(100)는 보이는 워터마크인 방송사 로고를 비압축 시청각 컨텐츠에서 확인하여, 확인한 방송사 로고에 기초하여 비압축 시청각 컨텐츠를 제공하는 채널을 식별할 수 있다. 이 경우, 영상 표시 장치(100)는 복수의 방송사 로고를 포함하는 내부의 데이터베이스를 이용하여 채널을 식별할 수도 있고, 워터마크 서버를 통해 채널을 식별할 수도 있다. 또한, 영상 표시 장치(100)는 보이지 않는 워터마크로부터 컨텐츠 정보를 획득하여 채널을 식별할 수도 있다. 또한, 영상 표시 장치(100)는 비압축 시청각 컨텐츠로부터 시그너처를 추출하고, 이 시그너처를 핑거프린트 서버에 전송하여 채널을 식별할 수도 있다. 비압축 메인 시청각 컨텐츠가 재판매된 컨텐츠인 경우나 동일한 시청각 컨텐츠가 복수의 채널에서 방송되는 경우, 영상 표시 장치(100)는 방송사 로고에 기반안 채널 식별을 수행할 수 있다.
영상 표시 장치(100)는 하나 이상의 식별한 채널에 기초하여 가입 패키지를 확인한다(S3327).
표 6를 참고하면, HBO 채널이 식별되면, 영상 표시 장치(100)는 가입 패키지가 Premium 패키지임을 확인할 수 있다. USA 채널과 ESPN 채널이 식별되면, 영상 표시 장치(100)는 가입 패키지가 Standard 패키지임을 확인할 수 있다. CNN 채널이 식별되고, ESPN 채널이 소정의 기간 내에 식별이 되지 않으면, 영상 표시 장치(100)는 가입 패키지가 TV Essentials 패키지임을 확인할 수 있다.
하나 이상의 식별한 채널에 기초하여 가입 패키지가 유일하게 확인되지 않으면, 영상 표시 장치(100)는 추가 채널의 식별을 수행한다.
영상 표시 장치(100)는 확인한 가입 패키지에 해당하는 채널맵을 제3자 서버(90)에 요청한다(S3329). 채널맵 요청에 대응하여, 제3자 서버(90)는 영상 표시 장치(100)를 위한 ACR 설정 정보 내에서 MVPD 엘리먼트의 감지 온 속성의 값을 OFF 또는 false로 설정하고, 영상 표시 장치(100)의 가입 패키지에 해당하는 채널맵을 영상 표시 장치(100)에 제공한다.
영상 표시 장치(100)는 확인한 가입 패키지에 해당하는 채널맵을 제3자 서버(90)로부터 수신한다(S3331).
영상 표시 장치(100)는 수신한 채널맵을 처리한다(S3333).
도 34는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다. 도 34에 도시된 바와 같이, 영상 표시 장치(100)는 화면에 현재의 비압축 메인 시청각 컨텐츠의 채널 명 및 채널 번호를 화면에 디스플레이할 수 있다.
도 35는 본 발명의 실시예에 따른 채널맵 처리를 보여주는 화면이다. 도 35에 도시된 바와 같이, 영상 표시 장치(100)는 채널맵에 기초하여 EPG 정보를 획득하고, 획득한 EPG를 디스플레이할 수 있다.
다음은 도 36 내지 도 37를 참조하여 본 발명의 다양한 실시예에 따른 영상 표시 장치의 구조를 설명한다.
도 36은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 36에 도시된 바와 같이, 본 발명의 실시예에 따른 개념도의 영상 표시 장치(100)는 오디오/비디오 드라이버(Audio/Video driver)(601), ACR 엔진(603), ACR 미들웨어(605), ACR 사용자 인터페이스(607), ACR 플러그인(Plugin)(609), 부가 서비스 관리부(611), 채널맵 관리부(613), MVPD 로고 데이터베이스 관리부(615)를 포함한다.
ACR 엔진(603)은 컨텐츠 인식 설정 관리부(631), MVPD 패키지 정보 관리부(633), 및 MVPD 로고 매칭부(635)를 포함한다.
컨텐츠 인식 설정 관리부(631)는 ACR 설정 정보(ACR configuration information)를 요청하는 ACR 설정 정보 요청 메시지를 제3자 서버(90)에 전송하여, ACR 설정 정보를 포함하는 ACR 설정 정보 응답 메시지를 수신한다. 컨텐츠 인식 설정 관리부(631)는 ACR 설정 정보로부터 자신이 속한 국가, 자신의 제품 종류 및 플랫폼 종류에 맞는 ACR 설정 정보 아이템 그룹을 추출한다. 컨텐츠 인식 설정 관리부(631)는 추출한 ACR 설정 정보 아이템 그룹으로부터 복수의 ACR 설정 정보 아이템을 추출한다. 컨텐츠 인식 설정 관리부(631)는 복수의 추출한 ACR 설정 정보 아이템을 영상 표시 장치(100)내에 설정한다. 컨텐츠 인식 설정 관리부(631)는 설정된 ACR 기능 턴온 시간 구간 리스트에 기초하여 ACR 기능을 턴온한다.
ACR 기능이 턴온되는 때에, 영상 표시 장치(100)의 ACR 엔진(603)은 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하고, 추출한 특징 정보를 포함하는 ACR 질의 요청 메시지를 핑거프린트 서버(22)에 해당하는 ACR 서버에 전송하여, 식별한 프로그램에 대한 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 수신한다. 영상 표시 장치(100)의 ACR 엔진(603)은 입력되는 비압축 메인 시청각 컨텐츠로부터 하나 이상의 채널을 식별한다.
부가 서비스 관리부(611)는 린백 애플리케이션의 허용 여부에 대한 설정된 정보에 기초하여 린백 애플리케이션의 URL 주소에 린백 애플리케이션을 요청하여, 린백 애플리케이션을 수신하고, 수신된 린백 애플리케이션을 사용자 입력에 무관하게 자동으로 실행한다.
채널맵 관리부(613)는 가입 패키지에 해당하는 채널맵을 제3자 서버(90)에 요청하여, 확인한 가입 패키지에 해당하는 채널맵을 제3자 서버(90)로부터 수신하고, 처리한다.
MVPD 패키지 정보 관리부(633)는 하나 이상의 MVPD 정보 아이템 그룹에 기초하여 입력되는 비압축 시청각 컨텐츠에서 MVPD 로고로 추정되는 하나 이상의 이미지를 추출하고, 하나 이상의 추출한 MVPD 로고 추정 이미지에 기초하여 영상 표시 장치(100)가 가입한 가입 MVPD를 식별하여, 가입 MVPD의 식별자를 획득한다. MVPD 패키지 정보 관리부(633)는 가입 MVPD의 식별자에 기초하여, 하나 이상의 MVPD 정보 아이템 그룹으로부터 가입 MVPD의 타입을 확인하고, 가입 MVPD의 타입이 위성 사업자가 아닌 경우, 지리적 가입자 위치를 확인한다. MVPD 패키지 정보 관리부(633)는 패키지 정보 요청 메시지를 제3자 서버(90)에 전송하여, 가입 MVPD가 제공하는 복수의 패키지에 대한 정보를 제3자 서버(90)로부터 수신한다. MVPD 패키지 정보 관리부(633)는 하나 이상의 식별한 채널에 기초하여 가입 패키지를 확인한다.
MVPD 로고 데이터베이스 관리부(615)는 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지에 대한 요청 메시지를 제3자 서버(90)에 전송하여, 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 제3자 서버(90)로부터 수신하고, 복수의 MVPD에 각각 대응하는 복수의 MVPD 로고 이미지를 데이터베이스화한다.
MVPD 로고 매칭부(635)는 복수의 MVPD 로고 이미지와 복수의 추출한 MVPD 로고 추정 이미지를 비교한다. 복수의 추출한 MVPD 로고 추정 이미지 중 적어도 하나가 복수의 MVPD 로고 이미지 중 하나와 일치하면, MVPD 로고 매칭부(635)는 일치한 MVPD 로고 이미지에 해당하는 MVPD를 자신이 가입한 MVPD로 식별할 수 있다.
도 37은 본 발명의 실시예에 따른 영상 표시 장치의 개념도를 보여준다.
도 37에 도시된 바와 같이, 본 발명의 실시예에 따른 개념도의 영상 표시 장치(100)는 오디오/비디오 드라이버(Audio/Video driver)(601), ACR 엔진(603), ACR 미들웨어(605), ACR 사용자 인터페이스(607), ACR 플러그인(Plugin)(609), 부가 서비스 관리부(611), 채널맵 관리부(613)를 포함한다.
ACR 엔진(603)은 컨텐츠 인식 설정 관리부(631), 및 MVPD 패키지 정보 관리부(633)를 포함한다.
도 37의 실시예에서는, 로고 매칭이 영상 표시 장치(100) 대신에 제3자 서버(90) 또는 핑거프린트 서버(22)에서 수행된다. 이는 도 28과 관련하여 앞에서 설명하였으므로, 여기서는 그 설명을 생략한다.
EPG는 방송 컨텐츠가 방송되기 약 7일 내지 14일전부터 사용자에게 방송 컨텐츠를 표시한다. 다만, 각 방송사 또는 컨텐츠 제공자들은 방송 컨텐츠가 방송되기 1달여 전부터 방송 컨텐츠의 예고편 등의 프로모션 컨텐츠(promotional contents)를 방송하는 것이 보통이다. 따라서 사용자들은 프로모션 컨텐츠를 보고도 그 방송 컨텐츠에 대한 예약 시청이나 예약 녹화를 설정할 수 없는 경우가 발생한다.
또한 EPG의 경우 동일한 전송 방식을 통해서 전송 되는 방송 컨텐츠만을 안내하는 것이 보통이다. 예컨대 케이블 방송의 EPG는 동일한 케이블 네트워크를 통해 전송되는 방송 컨텐츠만을 표시하는 것이 보통이다. 또한 위성 방송의 EPG는 동일한 위성 또는 동일한 사업자에 의하여 제공되는 방송 컨텐츠만을 표시한는 것이 보통이다. 따라서 사용자가 자신이 시청하고자 하는 방송 컨텐츠가 다양한 형식으로 전송되는 것을 파악하기 힘든 문제가 있다. 이러한 문제점을 해결하기 위해서는 영상 표시 장치(100)가 ACR에 기반하여 현재 표시되고 있는 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림(content reminder) 애플리케이션을 실행하는 것이 필요하다.
도 38내지 도 49에서는 본 발명의 실시예에 따른 영상 표시 장치가 ACR에 기반하여 컨텐츠 알림 애플리케이션을 실행하는 것을 설명하도록 한다.
도 38은 본 발명의 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다.
영상 표시 장치(100)는 외부 입력으로부터 획득한 비압축 비디오 및 비압축 오디오 중 적어도 어느 하나를 포함하는 방송 컨텐츠로부터 특징 정보를 추출한다. 이때 방송 컨텐츠는 프로모션 컨텐츠일 수 있다. 영상 표시 장치(100)는 특징 정보에 기초하여 컨텐츠 인식 서비스 제공 서버(20)에 ACR 질의 요청 메시지를 전송한다. 영상 표시 장치(100)는 컨텐츠 인식 서비스 제공 서버(20)로부터 ACR 질의 요청 메시지에 대한 ACR 질의 응답 메시지를 수신한다. 특히 프로모션 컨텐츠의 특징 정보를 추출하여 ACR 질의 요청 메시지를 전송하는 경우, 영상 표시 장치(100)는 프로모션 애플리케이션의 URL을 ACR 질의 응답 메시지를 통하여 수신할 수 있다. 영상 표시 장치(100)는 프로모션 애플리케이션의 URL에 기초하여 프로모션 애플리케이션을 다운로드 받을 수 있다. 영상 표시 장치(100)는 애플리케이션의 플랫폼 역할을 하는 브라우저를 통하여 프로모션 애플리케이션을 실행할 수 있다. 영상 표시 장치(100)는 프로모션 애플리케이션을 실행하여 프로모션 애플리케이션을 제작한 애플리케이션 서비스 제공자의 애플리케이션 서비스 제공자 서버(300)에 영상 표시장치 식별자를 전송할 수 있다. 또한 영상 표시 장치(100)는 컨텐츠 인식 서비스 제공 서버(20)로부터 컨텐츠 알림 애플리케이션의 URL을 수신하고, 컨텐츠 알림 애플리케이션의 URL에 기초하여 컨텐츠 알림 애플리케이션을 다운로드받을 수 있다. 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 브라우저를 통하여 실행할 수 있다. 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 사용자에게 표시할 수 있다. 컨텐츠의 방송 정보는 컨텐츠의 제목, 컨텐츠의 시작 시간, 컨텐츠를 방송하는 방송사명 및 컨텐츠를 방송하는 채널의 정보 중 적어도 어느 하나를 포함할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)로부터 ACR 질의 요청 메시지를 수신한다. 컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)에게 ACR 질의 응답 메시지를 전송한다. 컨텐츠 인식 서비스 제공 서버(20)는 프로모션 컨텐츠로부터 추출한 특징 정보를 저장한다. 컨텐츠 인식 서비스 제공 서버는 ACR 질의 응답 메시지를 통하여 프로모션 애플리케이션의 URL을 전송할 수 있다. 구체적으로 컨텐츠 인식 서비스 제공 서버(20)는 ACR 질의 요청 메시지에 포함된 특징 정보에 해당하는 프로모션 컨텐츠를 식별할 수 있다. 이에 따라 컨텐츠 인식 서비스 제공 서버(20)는 프로모션 컨텐츠에 해당하는 프로모션 애플리케이션의 URL을 전송할 수 있다. 또한 컨텐츠 인식 서비스 제공 서버(20)는 애플리케이션 서비스 제공자 서버(300)로부터 영상 표시 장치를 식별하는 영상 표시 장치 식별자, 컨텐츠의 시작 시간 및 컨텐츠 알림 애플리케이션의 URL을 수신할 수 있다. 컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치 식별자, 컨텐츠의 시작 시간 및 컨텐츠 알림 애플리케이션의 URL에 기초하여 영상 표시 장치(100)에 컨텐츠 알림 애플리케이션의 URL을 전송할 수 있다. 구체적으로 컨텐츠 인식 서비스 제공 서버(20)는 컨텐츠의 시작 시간 또는 시작 시간으로부터 일정한 시간 전에 컨텐츠 알림 애플리케이션의 URL을 영상 표시 장치 식별자에 의하여 식별되는 영상 표시 장치(100)에 전송할 수 있다.
애플리케이션 서비스 제공자 서버(300)는 애플리케이션 서비스 제공자가 제작한 프로모션 애플리케이션을 통하여 영상 표시 장치(100)로부터 영상 표시 장치 식별자를 수신한다. 또한 애플리케이션 서비스 제공자 서버(300)는 프로모션 애플리케이션을 통하여 영상 표시 장치(100)로부터 컨텐츠 식별자를 수신할 수 있다. 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치 식별자, 컨텐츠 시작 시간 및 컨텐츠 알림 애플리케이션의 URL을 컨텐츠 인식 서비스 제공 서버(20)에 전송한다. 구체적으로 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)로부터 수신한 영상 표시 장치 식별자 및 컨텐츠 식별자에 기초하여 컨텐츠의 제목, 컨텐츠 시작 시간, 컨텐츠를 방송하는 방송사명 및 컨텐츠를 방송하는 채널의 정보 및 컨텐츠 알림 애플리케이션의 URL을 컨텐츠 인식 서비스 제공 서버(20)에 전송할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다.
영상 표시 장치(100), 컨텐츠 인식 서비스 제공 서버(20) 및 애플리케이션 서비스 제공자 서버(300)의 구체적인 동작은 도 39를 통하여 설명하도록 한다.
도 39는 본 발명의 일 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다.
먼저 영상 표시 장치(100)가 일반적인 린백 애플리케이션을 실행하는 동작을 설명하도록 한다.
영상 표시 장치(100)는 파워 온하여 동작을 시작한다(S2801). 영상 표시 장치(100)는 외부 입력 단자를 통하여 비압축 시청각 컨텐츠를 획들할 수 있다. 이때 비압축 시청각 컨텐츠는 비압축 오디오 및 비압축 비디오 중 적어도 어느 하나를 포함할 수 있다. 영상 표시 장치(100)는 비압축 시청각 컨텐츠를 디스플레이부(121)를 통해 표시할 수 있다.
영상 표시 장치(100)는 비압축 시청각 건텐츠의 특징 정보에 기초하여 비압축 시청각 컨텐츠에 대한 컨텐츠 정보를 수신한다.
영상 표시 장치(100)는 ACR 질의 요청 메시지를 컨텐츠 인식 서비스 제공 서버(20)에게 전송한다(S2803). 구체적으로 영상 표시 장치(100)는 외부 입력을 통하여 입력된 비압축 시청각 컨테츠로부터 특징 정보를 추출하고, 특징 정보에 기초한 ACR 질의 요청 메시지를 컨텐츠 인식 서비스 제공 서버(20)에게 전송할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 ACR 질의 요청 메시지에 대한 ACR 질의 응답 메시지를 영상 표시 장치(100)에게 전송한다(S2805). 구체적으로 컨텐츠 인식 서비스 제공 서버(20)는 특징 정보에 해당하는 컨텐츠를 식별한다. 컨텐츠 인식 서비스 제공 서버(20)는 컨테츠에 해당하는 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 영상 표시 장치(100)에게 전송할 수 있다. 컨텐츠 정보는 식별한 컨텐츠를 위한 린백 애플리케이션의 URL, 컨텐츠 식별자 및 컨텐츠의 타임스탬프(timestamp) 중 적어도 어느 하나를 포함할 수 있다.
영상 표시 장치(100)는 ACR 질의 응답 메시지를 컨텐츠 인식 서비스 제공 서버로부터 수신하고 ACR 설정 정보를 확인한다(S2807). 구체적으로 영상 표시 장치(100)는 ACR 질의 응답 메시지에 포함된 린백 애플리케이션 URL에 해당하는 린백 애플리케이션이 ACR 설정 정보에서 허용되어있거나 제한 되었는지 확인할 수 있다.
ACR 설정 정보에서 린백 애플리케이션이 허용되어 있다면, 영상 표시 장치(100)는 린백 애플리케이션의 URL에 기초하여 컨텐츠 제공 서버(10)에 린백 애플리케이션을 요청한다(S2809).
영상 표시 장치(100)는 컨텐츠 제공 서버로부터 린백 애플리케이션을 다운로드하여 린백 애플리케이션을 실행한다(S2811).
이하에서는 영상 표시 장치(100)가 린백 애플리케이션 중 하나로서 비압축 시청각 컨텐츠에 대한 정보에 기초하여 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림 애플리케이션을 실행하는 동작을 설명하도록 한다. 이때 비압축 시청각 컨텐츠는 영화의 예고편을 포함하는 프로모션 컨텐츠일 수 있고, 관련된 컨텐츠는 프로모션 컨텐츠의 본편 컨텐츠일 수 있다.
영상 표시 장치(100)는 비압축 시청각 건텐츠의 특징 정보에 기초하여 비압축 시청각 컨텐츠에 대한 컨텐츠 정보를 수신한다.
영상 표시 장치(100)는 비압축 시청각 컨테츠에 기초한 ACR 질의 요청 메시지를 컨텐츠 인식 서비스 제공 서버(20)에게 전송한다(S2813). 구체적으로 외부 입력을 통하여 입력된 비압축 시청각 컨텐츠로부터 특징 정보를 추출하고, 특징 정보에 기초한 ACR 질의 요청 메시지를 컨텐츠 인식 서비스 제공 서버(20)에게 전송할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 ACR 질의 요청 메시지에 대한 ACR 질의 응답 메시지를 영상 표시 장치(100)에게 전송한다(S2815). 구체적으로 컨텐츠 인식 서비스 제공 서버(20)는 ACR 질의 요청 메시지에 포함된 특징 정보에 해당하는 컨텐츠를 식별할 수 있다. 이때 식별된 컨텐츠가 프로모션 컨텐츠인 경우, 컨텐츠 인식 서비스 제공 서버(20)는 식별한 프로모션 컨텐츠에 해당하는 컨텐츠 정보를 포함하는 ACR 질의 응답 메시지를 영상 표시 장치(100)에게 전송할 수 있다. 컨텐츠 정보는 프로모션 애플리케이션의 URL. 영상 표시 장치 식별자, 컨텐츠 식별자, 컨텐츠의 타임스탬프(timestamp), 프로모션 컨텐츠의 본편 컨텐츠를 방송하는 방송사명, 본편 컨텐츠를 방송하는 채널의 정보 중 적어도 어느 하나를 포함할 수 있다. 본편 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 본편 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다. 영상 표시 장치 식별자는 영상 표시 장치를 식별할 수 있는 식별자이다. 이에대해서는 도 40을 참고하여 설명하도록 한다.
도 40은 본 발명의 실시예에 따라 영상 표시 장치의 식별자가 전송되는 것을 보여주는 블락도이다.
애플리케이션 제공자는 각각의 영상 표시 장치(100)에서 설정한 컨텐츠에 대하여 각각의 영상 표시 장치(100)에서 컨텐츠 알림 애플리케이션을 실행하도록 하여야 한다. 따라서 영상 표시 장치(100)를 식별할 수 있는 영상 표시 장치 식별자를 필요로 한다. 이때 컨텐츠 인식 서비스 제공 서버(20)는 각각의 영상 표시 장치(100)에 대하여 영상 표지 장치 식별자를 생성할 수 있다. 이때 영상 표시 장치(100)가 주로 사용되는 하나의 공유기를 통하여 여러 영상 표시 장치(100)들이 접속할 수 있으므로 컨텐츠 인식 서비스 제공 서버(20)는 인터넷 프로토콜 주소(Internet Protocol address, IP Address)를 영상 표시 장치 식별자로서 사용하기 어려운 문제가 있다. 또한 영상 표시 장치 식별자는 영상 표시 장치(100)들에 대한 호환성을 위하여 플랫폼, 시스템 및 다른 애플리케이션에 종속되지 않아야한다. 컨텐츠 인식 서비스 제공 서버(20)는 맥 주소(Mac address)를 해쉬(hash) 연산하여 영상 표시 장치 식별자로서 사용할 수 있다.
구체적인 실시예에서 컨텐츠 인식 서비스 제공 서버(20)는 프로모션 애플리케이션 URL과 영상 표시 장치 식별자 합성하여 영상 표시 장치 식별자를 전송할 수 있다. 구체적으로 컨텐츠 인식 서비스 제공 서버(20)는 프로모션 애플리케이션 URL에 영상 표시 장치 식별자를 파라미터로 붙여 전송할 수 있다. 이때 영상 표시 장치(100)는 프로모션 애플리케이션 URL를 토큰화(tokenize)하여 영상 표시 장치 식별자를 인식할 수 있다. 예컨대 가 프로모션 애플리케이션의 URL이고 YYY 영상 표시 장치 식별자라면, 컨텐츠 인식 서비스 제공 서버(20)는 URL인 을 영상 표시 장치(100)에 전송할 수 있다. 이후 애플리케이션 서비스 제공자 서버(300)는 컨텐츠 알림 애플리케이션의 URL을 전송할 때 컨텐츠 알림 애플리케이션의 URL과 영상 표시 장치 식별자를 합성하여 전송할 수 있다. 구체적으로 애플리케이션 서비스 제공자 서버(300)는 컨텐츠 알림 애플리케이션 URL에 영상 표시 장치 식별자를 파라미터로 붙여 전송할 수 있다. 예컨대 http://reminderservice.com?remindId=ZZZ가 컨텐츠 알림 애플리케이션의 URL이고 YYY 영상 표시 장치 식별자라면, 애플리케이션 서비스 제공자 서버(300)는 URL인 를 전송할 수 있다.
또 다른 구체적인 실시예에서 컨텐츠 인식 서비스 제공 서버(20)는 커며셜 식별자를 통하여 영상 표시 장치 식별자를 전송할 수 있다. 구체적으로 컨텐츠 인식 서비스 제공 서버(20)가 프로모션 컨텐츠에 해당하는 특징 정보를 포함하는 ACR 질의 요청 메시지를 수신하고 ACR 질의 응답 메시지를 전송하는 경우, 컨텐츠 인식 서비스 제공 서버(20)는 커머셜 식별자(commercial ID)를 포함하는 컨텐츠 식별자를 포함하여 ACR 질의 응답 메시지를 전송할 수 있다. 이때 커머셜 식별자는 영상 표시 장치 식별자를 포함한다. 이때 커머셜 식별자는 무작위로 생성될 수 있다. 영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 커머셜 식별자를 토큰화(tokenize)하여 영상 표시 장치 식별자를 인식한다.
영상 표시 장치(100)는 ACR 질의 응답 메시지를 컨텐츠 인식 서비스 제공 서버로부터 수신하고 ACR 설정 정보를 확인한다(S2817). 구체적으로 영상 표시 장치(100)는 ACR 질의 응답 메시지에 포함된 프로모션 애플리케이션의 URL에 해당하는 프로모션 애플리케이션이 ACR 설정 정보에서 허용되어있거나 제한 되었는지 확인할 수 있다.
ACR 설정 정보에서 프로모션 애플리케이션이 허용되어 있다면, 영상 표시 장치(100)는 프로모션 애플리케이션의 URL에 기초하여 애플리케이션 서비스 제공자 서버(300)에 프로모션 애플리케이션을 요청한다(S2819).
영상 표시 장치(100)는 컨텐츠 제공 서버로부터 프로모션 애플리케이션을 다운로드한다(S2811).
영상 표시 장치(100)는 프로모션 애플리케이션을 실행하여 컨텐츠 알림을 예한다(S2823, S2825). 이때 프로모션 애플리케이션의 동작에 대해서는 도 41 내지 도 42를 참고하여 설명하도록 한다.
도 41은 본 발명의 일 실시예에 따라 프로모션 애플리케이션을 실행하는 영상 표시 장치의 동작을 보여주는 흐름도이다. 도 42는 본 발명의 일 실시예에 따른 프로모션 애플리케이션의 컨텐츠 알림 예약 사용자 인터페이스를 보여준다.
영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 컨텐츠 알림 예약 사용자 인터페이스를 표시한다(S2851). 이때 사용자 인터페이스는 컨텐츠 알림 예약 동의 여부 선택 메뉴와 컨텐츠의 이름, 컨텐츠의 방송 날짜와 시간, 컨텐츠의 재생길이(duration), 컨텐츠의 장르 및 컨텐츠 내용 중 적어도 어느 하나를 포함하는 컨텐츠 정보를 함께 표시할 수 있다. 도 42의 실시예에서 사용자 인터페이스는 컨텐츠의 이름, 컨텐츠의 방송 날짜와 시간을 함께 표시한다.
영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 사용자 입력을 수신한다(S2853).
영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 사용자 입력이 컨텐츠 알림 예약 동의에 대한 입력인지 판단한다(S2855).
사용자 입력이 컨텐츠 알림 예약 동의에 대한 입력이라면, 영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 컨텐츠 알림을 예약한다(S2857). 이때 도 38 내지 도 39의 실시예에서 영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)에 전송하여 컨텐츠 알림을 예약한다. 애플리케이션 서비스 제공자 서버(300)는 컨텐츠 알림 메시지를 컨텐츠 알림 예약에 기초하여 컨텐츠 인식 서비스 제공 서버(20)에 전송하고 컨텐츠 인식 서비스 제공 서버(20)는 컨텐츠 알림 메시지를 컨텐츠 알림 예약에 기초하여 영상 표시 장치(100)에 전송한다. 다만 컨텐츠 알림 메시지를 영상 표시 장치(100)에 전송하는 주체는 실시예에 따라서 애플리케이션 서비스 제공자 서버(300)일 수 있다. 또한 실시예에 따라서 영상 표시 장치(100)는 영상 표시 장치(100) 내부에 컨텐츠 알림을 예약하고 컨텐츠 알림예약에따라 컨텐츠 알림 애플리케이션을 실행할 수 있다. 이에 대해서는 도 46 내지 도 49를 통하여 더 구체적으로 설명하도록 한다. 영상 표시 장치(100)는 컨텐츠 알림 예약시 컨텐츠 알림 예약 정보를 저장한다. 컨텐츠 알림 예약 정보는 컨텐츠 식별자, 영상 표시 장치 식별자, 영상 표시 장치의 IP 주소, MAC 주소, 컨텐츠를 방송하는 방송사명, 컨텐츠를 방송하는 채널의 정보. 컨텐츠의 시작 시간, 컨텐츠 알림 마진 시간 및 컨텐츠 알림 애플리케이션 URL 중 적어도 어느 하나를 포함할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다.
영상 표시 장치(100)는 프로모션 애플리케이션을 종료한다(S2827). 구체적인 실시예에서 프로모션 컨텐츠가 종료된 경우, 영상 표시 장치(100)는 프로모션 애플리케이션을 종료할 수 있다. 구체적으로 다른 채널로 전환되어 프로모션 컨텐츠가 종료되거나 프로모션 컨텐츠가 재생시간을 다하여 종료되는 경우 영상 표시 장치(100)는 프로모션 애플리케이션을 종료할 수 있다. 그러나 영상 표시 장치(100)가 프로모션 컨텐츠가 종료되었는지 여부를 파악하기 위해서는 ACR 질의 요청 메시지를 전송하고 ACR 질의 응답 메시지를 수신하여 현재 디스플레이부(121)에 표시되는 컨텐츠를 식별하여야한다. 따라서 영상 표시 장치(100)가 프로모션 애플리케이션을 종료하는데 지나치게 오랜 시간이 소요될 수 있다. 이 과정에서 프로모션 컨텐츠는 종료되고 프로모션 컨텐츠가 아닌 다른 컨텐츠가 디스플레이부(121)에 프로모션 애플리케이션과 함께 표시될 수 있다. 다른 컨텐츠가 디스플레이부(121)에 프로모션 애플리케이션과 함께 표시된다면 사용자의 혼란을 불러일으킬 우려가있다. 따라서 구체적인 실시예에서 영상 표시 장치(100)는 미리 설정된 시간동안 프로모션 애플리케이션을 실행하고 미리 설정된 시간이 경과된 경우 프로모션 애플리케이션을 종료할 수 있다. 이때 미리 설정된 시간은 프로모션 컨텐츠에 기초하여 결정될 수 있다. 이때 미리 설정된 시간의 길이는 프로모션 컨텐츠의 재생 시간의 길이보다 작을 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 비압축 시청각 컨텐츠의 페이드 아웃(fade out)에 기초하여 프로모션 애플리케이션을 종료할 수 있다. 구체적으로 비압축 시청각 컨텐츠의 페이드 아웃을 감지한 경우, 영상 표시 장치(100)는 프로모션 애플리케이션을 종료할 수 있다. 다른 컨텐츠로 전환되거나 채널 변경이 있는 경우, 비압축 시청각 컨텐츠에 포함된 비디오 또는 오디오 신호가 페이드 아웃되는 것이 보통이다. 따라서 비압축 시청각 컨텐츠의 페이드 아웃을 통하여 영상 표시 장치(100)는 프로모션 컨텐츠의 종료를 빠르고 쉽게 파악할 수 있다.
애플리케이션 서비스 제공자 서버(300)는 컨텐츠 알림 예약에 기초하여 컨텐츠 알림 메시지를 전송한다(S2829, S2831). 구체적으로 애플리케이션 서비스 제공자 서버(300)는 컨텐츠 인식 서비스 제공 서버(20)에 컨텐츠 알림 메시지를 전송하고, 컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)에 컨텐츠 알림 메시지를 전송할 수 있다.
구체적인 실시예에서 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)에 컨텐츠 시작 시간에 컨텐츠 알림 메시지를 전송할 수 있다. 또 다른 구체적인 실시예에서 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)에 컨텐츠 시작 시간으로부터 미리 설정된 컨텐츠 알림 마진 시간 전에 컨텐츠 알림 메시지를 전송할 수 있다. 이때 컨텐츠 알림 마진 시간은 컨텐츠 알림 예약시 예약된 시간일 수 있다. 컨텐츠 시작 시간시 컨텐츠 알림을 전송하게 되면 사용자가 컨텐츠의 처음부분을 미쳐 보지 못할 수 있다. 컨텐츠 알림 마진 시간만큼 컨텐츠 시작 시간 보다 일찍 컨텐츠 알림 메시지를 통지하는 것은 사용자가 컨텐츠의 시청을 미리 준비할 수 있도록 하여 사용자가 컨텐츠의 처음부분을 놓치는 것을 방지하기 위함이다.
이때 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치 식별자에 기초하여 컨텐츠 알림 메시지를 전송할 수 있다. 구체적으로 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치 식별자에 기초하여 컨텐츠 알림 메시지를 수신할 영상 표시 장치를 식별하여 컨텐츠 알림 메시지를 전송할 수 있다. 또한 구체적인 실시예에서 컨텐츠 알림 메시지는 컨텐츠 알림 애플리케이션 URL을 포함할 수 있다.
영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)에 컨텐츠 알림 애플리케이션을 요청한다(S2833). 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션 URL에 기초하여 컨텐츠 알림 애플리케이션을 요청할 수 있다.
영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 애플리케이션을 다운로드 한다(S2835).
영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 실행한다(S2837). 컨텐츠 알림 애플리케이션의 실행에 대해서는 도 43내지 도 45를 참조하여 설명하도록 한다.
도 43은 본 발명의 일 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다. 도 44는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다. 도 45는 본 발명의 또 다른 실시예에 따른 컨텐츠 알림 애플리케이션의 컨텐츠 알림 사용자 인터페이스를 보여준다.
영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 표시할 수 있다. 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 애플리케이션 서비스 제공자 서버(300)로부터 수신하여 컨텐츠의 방송 정보를 표시할 수 있다. 컨텐츠의 방송 정보는 컨텐츠의 제목, 컨텐츠의 시작 시간, 컨텐츠를 방송하는 방송사명 및 컨텐츠를 방송하는 채널의 정보 중 적어도 어느 하나를 포함할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다. 구체적으로 영상 표시 장치(100)는 도 44의 실시예와 같이 컨텐츠의 제목과 컨텐츠가 방송되는 채널의 채널번호를 표시하면서 사용자가 리모콘에 채널번호를 입력할 경우 컨텐츠를 시청할 수 있음을 표시할 수 있다. 또는 영상 표시 장치(100)는 도 45의 실시예와 같이 컨텐츠를 보기위하여 입력하여야 되는 특정 입력 버튼을 표시하여 사용자가 리모콘에 특정 입력 버튼을 입력한 경우 컨텐츠를 시청할 수 있음을 표시할 수 있다.
다만 컨텐츠는 동시에 여러 채널에서 방송될 수 있다. 이때 영상 표시 장치(100)가 사용자가 볼 수 없는 채널만을 표시하는 경우, 사용자는 결국 컨텐츠를 볼 수 없는 문제가있다. 이를방지하기위해 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠가 방송되는 모든 채널을 표시할 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 사용자가 볼 수 없는 채널을 표시하지 않고 사용자가 시청가능한 채널만을 표시할 수 있다. 이를위해 영상 표시 장치 식별자를 애플리케이션 서비스 제공자 서버(300)에 전송하는 경우, 영상 표시 장치(100)는 영상 표시 장치(100)의 사용자가 사용하고있는 MVPD 이름 및 서비스 패키지 정보를 같이 전송할 수 있다. 영상 표시 장치 식별자를 저장할때 애플리케이션 서비스 제공자 서버(300)는 해당 영상 표시 장치(100)의 사용자가 사용하하고 있는 MVPD 이름 및 서비스 패키지 정보를 같이 저장할 수 있다. 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)에게 컨텐츠의 방송 정보를 전송할 때 컨텐츠가 방송되는 채널중에서 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지에 포함되지 않은 채널을 전송하지 않고 서비스 패키지에 포함된 채널만을 전송할 수 있다. 또 다른 구체적인 실시예에서 채널 알림 정보에 포함된 컨테츠를 방송하는 채널의 정보 중에 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지에 포함되지 않은 채널이있는 경우, 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지에 포함되지 않은 채널의 정보를 표시하지 않고 서비스 패키지에 포함된 채널의 정보만을 표시할 수 있다. 또 다른 구체적인 실시예에서 컨텐츠가 방송되는 채널이 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지의 채널에 존재하지 않는 경우, 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠가 방송되는 채널을 포함하는 서비스 패키지에 대한 정보를 표시할 수 있다. 이를 위해 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠가 방송되는 채널을 포함하는 서비스 패키지에 대한 정보를 수신할 수 있다. 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠가 방송되는 채널이 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지에 포함되있지 않다는 메시지를 전송하고, 컨텐츠 알림 애플리케이션을 통하여 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠가 방송되는 채널을 포함하는 서비스 패키지에 대한 정보를 수신할 수 있다. 또 다른 구체적인 실시예에서 컨텐츠가 방송되는 채널이 영상 표시 장치(100)의 사용자가 가입한 서비스 패키지의 채널에 존재하지 않는 경우, 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 컨텐츠의 방송 정보를 표시하지않고 컨텐츠 알림 애플리케이션을 종료할수 있다.
영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 컨텐츠 알림 대상이 아닌 특정 컨텐츠의 종료시간에 표시할 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 광고 컨텐츠가 방송되는 때에 컨텐츠 정보를 표시할 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 컨텐츠의 시작 시간에 표시할 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 컨텐츠 시작 시간으로부터 컨텐츠 알림 마진 시간전에 표시할 수 있다.
영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 일정 시간뒤 다시 컨텐츠의 방송 정보를 표시하는 스누즈(snooze) 알림을 실행할 수 있다. 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 도 43의 실시예와 같이 일정 시간뒤에 다시 알림을 표시할 것인지 물어보는 선택 메뉴를 표시할 수 있다. 이때 영상 표시 장치(100)가 동의를 나타내는 사용자 입력을 수신한 경우, 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 일정 시간뒤 다시 컨텐츠의 방송 정보를 표시할 수 있다.
또한 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 사용자가 실제 컨텐츠를 시청하는지 판단할 수 있다. 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션이 컨텐츠의 방송 정보를 표시한 후, 수신부를 통하여 획득되는 비압축 시청각 컨텐츠가 컨텐츠 알림 예약의 대상이된 컨텐츠인지 판단할 수 있다. 구체적으로 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션이 컨텐츠의 방송 정보를 표시 한 후, 주기적으로 비압축 시청각 컨텐츠의 특징 정보를 추출할 수 있다. 영상 표시 장치(100)는 특징 정보를 포함하는 ACR 질의 요청 메시지를 컨텐츠 인식 서비스 제공 서버(20)에 전송하고 ACR 질의 응답 메시지를 컨텐츠 인식 서비스 제공 서버(20)로부터 수신할 수 있다. 이때 영상 표시 장치(100)는 ACR 질의 응답 메시지에 포함된 컨텐츠 식별자를 통하여 비압축 시청각 컨텐츠가 컨텐츠 알림 예약의 대상이된 컨텐츠인지 판단할 수 있다. 이를통하여 영상 표시 장치(100)는 사용자가 알림 예약이된 컨텐츠를 시청하는지 판단할 수 있다. 또한 영상 표시 장치(100)는 방송 사업자 또는 애플리케이션 서비스 제공자에게 프로모션 컨텐츠가 얼마나 효과적인지 판단할 수 있는 자료를 제공할 수 있다.
도 46 내지 도 47을 통하여 애플리케이션 서비스 제공자 서버(300)가 컨텐츠 알림 메시지를 전송하는 실시예에 대해서 설명하기로한다.
도 46은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다. 도 46의 실시예는 도 38의 실시예서 컨텐츠 인식 서비스 제공 서버(20)가 아닌 애플리케이션 서비스 제공자 서버(300)가 영상 표시 장치(100)에게 컨텐츠 알림 메시지를 전송하는 점에 차이를 보이고, 다른 구성과 동작은 모두 동일하다. 동일한 구성과 동작에 대해서는 앞서 설명한바 있으므로 생략하기로한다.
도 46의 실시예에서 영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 애플리케이션의 URL을 수신하고, 컨텐츠 알림 애플리케이션의 URL에 기초하여 컨텐츠 알림 애플리케이션을 다운로드받는다.
도 46의 실시예에서 애플리케이션 서비스 제공자 서버(300)는 애플리케이션 서비스 제공자가 제작한 프로모션 애플리케이션을 통하여 영상 표시 장치(100)로부터 영상 표시 장치 식별자를 수신한다. 또한 애플리케이션 서비스 제공자 서버(300)는 프로모션 애플리케이션을 통하여 영상 표시 장치(100)로부터 컨텐츠 식별자를 수신할 수 있다. 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치 식별자, 컨텐츠 시작 시간 및 컨텐츠 알림 애플리케이션의 URL을 컨텐츠 영상 표시 장치(100)에 전송한다. 구체적으로 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)로부터 수신한 영상 표시 장치 식별자 및 컨텐츠 식별자에 기초하여 컨텐츠의 제목, 컨텐츠 시작 시간, 컨텐츠를 방송하는 방송사명 및 컨텐츠를 방송하는 채널의 정보 및 컨텐츠 알림 애플리케이션의 URL을 영상 표시 장치(100)에 전송할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다.
영상 표시 장치(100), 컨텐츠 인식 서비스 제공 서버(20) 및 애플리케이션 서비스 제공자 서버(300)의 구체적인 동작은 도 47을 통하여 설명하도록 한다.
도 47은 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다. 도 47의 실시예는 도 39의 실시예서 컨텐츠 인식 서비스 제공 서버(20)가 아닌 애플리케이션 서비스 제공자 서버(300)가 영상 표시 장치(100)에게 컨텐츠 알림 메시지를 전송하는 점에 차이를 보이고, 다른 구성과 동작은 모두 동일하다. 동일한 구성과 동작에 대해서는 앞서 설명한바 있으므로 생략하기로한다.
애플리케이션 서비스 제공자 서버(300)는 컨텐츠 알림 메시지를 전송한다(S2929). 구체적으로 애플리케이션 서비스 제공자 서버(300)는 영상 표시 장치(100)에 컨텐츠 알림 메시지를 전송한다. 따라서 도 39의 실시예에서와 달리 영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 메시지를 수신한다. 그러므로 컨텐츠 알림 메시지 전송에 필요한 시간을 줄일 수 있다.
도 48 내지 도 49를 통하여 영상 표시 장치(100)가 영상 표시 장치(100) 내부에 컨텐츠 알림 예약하고 컨텐츠 알림예약에따라 컨텐츠 알림 애플리케이션을 실행하는 실시예에 대해서 설명하기로한다.
도 48은 본 발명의 또 다른 실시예에 따른 영상 컨텐츠 알림 애플리케이션 서비스를 위한 네트워크 토폴로지를 보여준다. 도 48의 실시예는 도 38의 실시예서 영상 표시 장치(100)가 영상 표시 장치(100) 내부에 컨텐츠 알림을 예약하고 컨텐츠 알림예약에따라 컨텐츠 알림 애플리케이션을 실행하는 점에 차이를 보이고, 다른 구성과 동작은 모두 동일하다. 동일한 구성과 동작에 대해서는 앞서 설명한바 있으므로 생략하기로한다.
도 48의 실시예에서 영상 표시 장치(100)는 프로모션 애플리케이션을 통하여 영상 표시 장치(100) 내부에 컨텐츠 알림을 예약한다. 또한 영상 표시 장치(100)는 컨텐츠 알림 예약에 기초하여 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 애플리케이션의 URL을 수신하고, 컨텐츠 알림 애플리케이션의 URL에 기초하여 컨텐츠 알림 애플리케이션을 다운로드받을 수 있다. 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 브라우저를 통하여 실행할 수 있다. 영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 통하여 컨텐츠의 방송 정보를 사용자에게 표시할 수 있다.
영상 표시 장치(100), 컨텐츠 인식 서비스 제공 서버(20) 및 애플리케이션 서비스 제공자 서버(300)의 구체적인 동작은 도 47을 통하여 설명하도록 한다.
도 49는 본 발명의 또 다른 실시예에 따라 영상 컨텐츠 알림 애플리케이션의 동작을 보여주는 래더 다이어그램이다. 도 49의 실시예는 도 39의 실시예서 영상 표시 장치(100)가 영상 표시 장치(100) 내부에 컨텐츠 알림을 예약하고 컨텐츠 알림 예약에따라 컨텐츠 알림 애플리케이션을 실행하는 점에 차이를 보이고, 다른 구성과 동작은 모두 동일하다. 동일한 구성과 동작에 대해서는 앞서 설명한바 있으므로 생략하기로한다.
영상 표시 장치(100)는 프로모션 애플리케이션을 실행하여 컨텐츠 알림을 예약한다(S3023, S3025). 도 48 내지 도 49의 실시예에서 영상 표시 장치(100)는 영상 표시 장치(100) 내부에 컨텐츠 알림 예약한다. 영상 표시 장치(100)는 컨텐츠 알림 예약시 컨텐츠 알림 예약 정보를 설정한다. 컨텐츠 알림 예약 정보는 컨텐츠 식별자, 영상 표시 장치 식별자, 영상 표시 장치의 IP 주소, MAC 주소, 컨텐츠를 방송하는 방송사명, 컨텐츠를 방송하는 채널의 정보. 컨텐츠의 시작 시간, 컨텐츠 알림 마진 시간 및 컨텐츠 알림 애플리케이션 URL 중 적어도 어느 하나를 포함할 수 있다. 컨텐츠를 방송하는 채널의 정보는 채널명, 컨텐츠를 방송하는 채널의 채널번호, 컨텐츠를 방송하는 채널을 포함하는 서비스 패키지 및 서비스 패키지를 제공하는 MVPD 중 적어도 어느 하나를 포함할 수 있다. 특히 컨텐츠 시작 시간전에 영상 표시 장치(100)가 컨텐츠 알림 애플리케이션을 다운로드받아 실행하여야하므로 컨텐츠의 방송 정보는 컨텐츠의 시작 시간 및 컨텐츠 알림 마진 시간을 포함해야할 필요가 있다. 영상 표시 장치(100)는 컨텐츠 알림 예약 정보를 설정하기 위해 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 예약 정보를 수신할 수 있다.
다만, 컨텐츠를 방송하는 방송사의 사정등으로 이후 컨텐츠 시작 시간 등이 변경될 수 있다. 따라서 영상 표시 장치(100)는 컨텐츠 알림 예약 이후에도 컨텐츠 시작 시간의 변경을 컨텐츠 예약 정보에 반영할 필요가 있다. 이를위해 영상 표시 장치(100)는 애플리케이션 서비스 제공자 서버(300)로부터 컨텐츠 알림 예약의 대상인 컨텐츠의 정보를 수신하여 기존에 예약된 컨텐츠 알림 예약 정보와의 불일치 여부를 확인할 수 있다.
구체적으로 영상 표시 장치(100)는 프로모션 애플리케이션을 실행할때마다 컨테츠의 정보와 기존에 설정된 컨텐츠 알림 예약 정보와의 불일치 여부를 확인할 수 있다. 단 이러한 경우에는 프로모션 애플리케이션이 한번도 실행되지 아니하거나 프로모션 애플리케이션이 실행되지 않도록 ACR 설정 정보가 변경된 경우 영상 표시 장치(100)가 컨텐츠 시작 시간의 변경을 확인할 수 없는 문제가 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 컨텐츠 알림 예약의 대상이된 컨텐츠에 대한 프로모션 컨텐츠를 인식할때마다 컨텐츠 정보와 기존에 설정된 컨텐츠 알림 예약 정보와의 불일치 여부를 확인할 수 있다. 단 이러한 경우에 컨텐츠 알림 예약의 대상이된 프로모션 컨텐츠를 인식하지 못하는 경우 영상 표시 장치(100)까 컨텐츠 시작 시간의 변경을 확인할 수 없는 문제가 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 영상 표시 장치가 켜질켜질 때마다 컨텐츠의 정보와 기존에 설정된 컨텐츠 알림 예약 정보와의 불일치 여부를 확인할 수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 미리 설정된 확인 주기에따라 컨텐츠의 정보와 기존에 설정된 컨텐츠 알림 예약 정보와의 불일치 여부를 확인할 수 있다. 이때 영상 표시 장치(100)는 사용자 입력에 기초하여 확인 주기를 결정할 수 있다. 이때 컨텐츠의 정보와 기존에 설정된 컨텐츠 알림 예약 정보가 불일 치하는 경우, 영상 표시 장치(100)는 컨텐츠 알림 예약 정보를 변경할 수 있다. 이를 통하여 컨텐츠 알림 예약이후 컨텐츠 시작 시간 등 컨텐츠의 정보가 변경되더라도 영상 표시 장치(100)는 정확하게 컨텐츠 알림 애플리케이션을 실행할 수 있다.
영상 표시 장치(100)는 프로모션 애플리케이션을 종료한다(S3027).
영상 표시 장치(100)는 컨텐츠 알림 예약에 기초하여 컨텐츠 알림 애플리케이션을 다운로드한다(S3029). 구체으로 영상 표시 장치(100)는 영상 표시 장치(100)에 컨텐츠 시작 시간에 컨텐츠 알림 애플리케이션을 다운로드할수 있다. 또 다른 구체적인 실시예에서 영상 표시 장치(100)는 컨텐츠 시작 시간으로부터 미리 설정된 컨텐츠 알림 마진 시간 전에 컨텐츠 알림 애플리케이션을 다운로드할수 있다. 이때 컨텐츠 알림 마진 시간은 컨텐츠 알림 예약시 설정된 시간일 수 있다. 컨텐츠 시작 시간시 컨텐츠 알림을 전송하게 되면 사용자가 컨텐츠의 처음부분을 미쳐 보지 못할 수 있다. 컨텐츠 알림 마진 시간만큼 컨텐츠 시작 시간 보다 일찍 컨텐츠 알림 메시지를 통지하는 것은 사용자가 컨텐츠의 시청을 미리 준비할 수 있도록 하여 사용자가 컨텐츠의 처음부분을 놓치는 것을 방지하기 위함이다.
영상 표시 장치(100)는 컨텐츠 알림 애플리케이션을 실행한다(S3031).
도 50는 본 발명의 실시예에 따른 컨텐츠 알림 애플리케이션을 실행하는 영상 표시 장치의 개념도를 보여준다.
도 50에 도시된 바와 같이, 본 발명의 실시예에 따른 개념도의 영상 표시 장치(100)는 오디오/비디오 드라이버(Audio/Video driver)(601), ACR 엔진(603), ACR 미들웨어(605), ACR 사용자 인터페이스(607), ACR 플러그인(Plugin)(609)을 포함한다.
오디오/비디오 드라이버(601)는 TV의 외부입력으로 들어오는 오디오/비디오 신호를 캡쳐하여 ACR 엔진(603)에게 전달한다. 오디오/비디오 드라이버(601)는 ACR 엔진(603)이 오디오/비디오 버퍼를 접근할 수 있도록 API를 제공할 수도 있다. 오디오/비디오 드라이버(601)는 HDMI와 같은 외부입력으로 들어오는 오디오/비디오의 특성 정보를 함께 제공할 수 있다. 예를 들어 오디오/비디오 드라이버(601)는 오디오의 경우 sample depth, sampling rate, channel 수(mono/stereo 등), sample 수, sample 시간 등의 정보를 제공할 수 있다. 비디오의 경우 오디오/비디오 드라이버(601)는 video format, input video의 width, height, stride, stream 시간, input type(HDMI1, HDMI2, composite, component 등), 초당 frame 수 등의 정보를 제공할 수 있다.
ACR 엔진(603)은 별도의 process로 실행될 수 있으며, 위에서 언급한 다양한 방식을 이용하여 프로그램을 인식한다. ACR 엔진(603)은 Audio/Video 샘플로부터 시그니처를 추출하고, 추출한 시그니처를 ACR 서버로 전달하여 컨텐츠를 인식할 수 있다. 앞서 설명한대로 ACR 엔진(603)은 플랫폼의 구현에 따라 Audio/Video 버퍼에 접근할 수 있는 API를 호출할 수도 있고, 오디오/비디오 드라이버(601)가 캡처(capture)한 오디오/비디오 스트림을 socket과 같은 방법을 통해 ACR process에 전달할 수도 있다. ACR 엔진(603)은 ACR 서버로 시그니처와 함께 ACR 질의 요청을 보내고 content 인식 성공 여부, Content ID, Global Content ID, timestamp, leanback app URL, 방송사 서버 URL 프로모션 애플리케이션 URL, 컨텐츠 알림 애플리케이션 URL 등을 포함하는 acr query response를 ACR 서버로부터 수신한다. ACR 엔진(603)은 ACR 서버로부터 전달받은 결과를 ACR 미들웨어(605)로 전달할 수 있다.
ACR 미들웨어(605)는 DTV process의 미들웨어에 해당하는 모듈이며, ACR 제어를 처리하고, ACR 엔진(603)으로부터의 ACR 질의 응답을 처리한다. ACR 미들웨어(605)는 ACR 프로세스를 실행하거나, 종료하거나, ACR 엔진(603)을 시작하거나 중단함으로써 ACR을 제어한다. 또한 ACR 미들웨어(605)는 ACR 질의 응답을 파싱하여 Content ID, Global Content ID, timestamp 등의 값들도 저장하고 있다. ACR 미들웨어(605)는 저장된 값을 ACR UI로 보낼 수 있도록 API를 제공하거나 message queue, global 변수 등의 방법을 통해 ACR 사용자 인터페이스(607)로 전달 할 수 있다. 또한 ACR 미들웨어(605)는 Live+ 애플리케이션이나 린백 애플리케이션과 같은 ACR 애플리케이션에게 Content ID, Global Content ID, timestamp등과 같은 데이터를 전달하기 위해 shared memory, socket 등의 IPC(Inter-Process Communication)를 통해 Web 브라우저에게 전달 할 수 있다.
ACR 사용자 인터페이스(ACR user interface, ACR UI)(607)는 사용자에게 ACR On/Off와 같은 ACR 제어를 할 수 있는 UI를 표출하거나, 인식된 프로그램의 이름 및 시간과 같은 정보를 TV의 상태바 UI에서 사용자에게 보여줄 수 있다.
ACR 미들웨어(605)가 ACR 애플리케이션에 전달하기 위한 Content ID, Global Content ID, timestamp등과 같은 데이터를 브라우저로 전달하면 ACR 플러그인(609)은 이러한 값을 전달 받는다. ACR 플러그인(609)은 Plugin Object Interface를 통해 ACR 애플리케이션에게 해당 값을 전달할 수 있다. 아래는 ACR 플러그인(609)의 Interface의 한 실시예를 보여주고 있다. 특히 도 48 내지 도 49에서와 같이 영상 표시 장치(100)가 영상 표시 장치(100) 내부에 컨텐츠 알림을 예약하고 컨텐츠 알림예약에따라 컨텐츠 알림 애플리케이션을 실행하는 ACR 플러그인(609)의 Interface의 한 실시예를 보여준다.
위에서, reminderURL은 컨텐츠 알림 애플리케이션 URL을 나타낸다.
reminderTimestamp는 컨텐츠 알림 애플리케이션을 실행하는 시간을 나타낸다.
SetACRReminderApp()는 컨텐츠 알림을 예약하기 위해 컨텐츠 알림 애플리케이션 URL과 컨텐츠 알림 애플리케이션을 실행하는 시간을 설정하기위한 함수이다.
다음은, 도 51 내지 도 52를 참고하여 본 발명의 일 실시 예에 따른 영상 표시 장치의 구조를 설명한다.
도 51은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 51에서, Tuner(501)는 air 채널을 통해 전송되는 8-VSB RF 신호로부터 Symbol을 추출한다.
8-VSB Demodulator(503)는 Tuner(501)가 추출한 8-VSB Symbol을 복조하여 의미 있는 디지털 데이터를 복원한다.
VSB Decoder(505)는 8-VSB Demodulator(503)가 복원한 디지털 데이터를 복호하여 ATSC 메인 서비스와 ATSC M/H 서비스를 복원한다.
MPEG-2 TP Demux(507)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet 또는 PVR Storage에 저장된 MPEG-2 Transport Packet 중에서 영상 표시 장치(100)가 처리하고자 하는 Transport Packet을 필터링하여 적절한 처리 모듈로 중계한다.
PES 디코더(539)는 MPEG-2 Transport Stream을 통하여 전송된 Packetized Elementary Stream을 Buffering하고 복원한다.
PSI/PSIP 디코더(541)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Section Data를 Buffering하고 분석한다. 분석된 PSI/PSIP 데이터는 Service Manager(미도시)에 의하여 수집되어, Service Map 및 Guide data 형태로 DB에 저장된다.
DSMCC Section Buffer/Handler (511)은 MPEG-2 TP를 통하여 전송되는 파일 전송 및 IP Datagram encapsulation 등을 위한 DSMCC Section Data를 버퍼링(Buffering)하고 처리한다.
IP/UDP Datagram Buffer/Header Parser(513)는 DSMCC Addressable section을 통해 encapsulate되어 MPEG-2 TP를 통하여 전송되는 IP Datagram을 버퍼링하고 복원하여 각 Datagram의 Header를 분석한다. 또한, IP/UDP Datagram Buffer/Header Parser(513)는 IP Datagram을 통하여 전송되는 UDP Datagram을 Buffering 및 복원하고, 복원된 UDP Header를 분석 및 처리한다.
Stream component handler(557)는 ES Buffer/Handler, PCR Handler, STC 모듈, Descrambler, CA Stream Buffer/Handler, Service Signaling Section Buffer/Handler를 포함할 수 있다.
ES Buffer/Handler는 PES 형태로 전송된 Video, Audio 데이터 등의 Elementary Stream을 Buffering 및 복원하여 적절한 A/V Decoder로 전달한다.
PCR Handler는 Audio 및 Video Stream의 Time synchronization 등을 위하여 사용되는 PCR (Program Clock Reference) Data를 처리한다.
STC 모듈은 PCR Handler를 통하여 전달받은 Reference Clock 값을 이용하여, A/V Decoder 들의 Clock 값을 보정하여 Time Synchronization를 수행한다.
수신된 IP Datagram의 Payload에 Scrambling이 적용된 경우, Descrambler는 CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.
CA Stream Buffer/Handler는 MPEG-2 TS또는 IP Stream을 통하여 전송되는 Conditional Access 기능을 위하여 전송되는 EMM, ECM 등의 Descrambling을 위한 Key 값 등의 Data를 Buffering 및 처리한다. CA Stream Buffer/Handler의 Output은 Descrambler로 전달되어, descrambler는 A/V Data 및 File Data등을 전송하는 MPEG-2 TP 또는 IP Datagram의 암호화 해제작업을 수행한다.
Service Signaling Section Buffer/Handler는 IP Datagram의 형태로 전송되는 NRT Service Signaling Channel Section Data를 Buffering 하고 복원하며 분석한다. Service Manager(미도시)는 분석된 NRT Service Signaling Channel Section 데이터를 수집하여, Service Map 및 Guide data 형태로 DB에 저장한다.
A/V Decoder(561)는 ES Handler를 통하여 전달받은 Audio/Video 데이터의 압축을 복호화하여, 사용자에게 Presentation한다.
MPEG-2 Service Demux(미도시)는 MPEG-2 TP Buffer/Parser, Descrambler, PVR Storage 모듈을 포함할 수 있다.
MPEG-2 TP Buffer/Parser (미도시)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet을 Buffering 및 복원하고, Transport Packet Header를 검출 및 처리한다.
Descrambler는 MPEG-2 TP 중, Scramble이 적용된 Packet payload에 대하여, CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.
PVR Storage 모듈은 사용자의 요구 등에 따라 8-VSB 신호를 이용하여 수신된 MPEG-2 TP를 저장하고, 또한 사용자의 요구에 의해 MPEG-2 TP를 출력한다. PVR Storage 모듈은 PVR Manager(미도시)에 의해 제어될 수 있다.
File Handler(551)는 ALC/LCT Buffer/Parser, FDT Handler, XML Parser, File Reconstruction Buffer, Decompressor, File Decoder, File Storage를 포함할 수 있다.
ALC/LCT Buffer/Parser는 UDP/IP Stream으로 전송되는 ALC/LCT 데이터를 Buffering 및 복원하고, ALC/LCT의 Header 및 Header extension을 분석한다. ALC/LCT Buffer/Parser는 NRT Service Manager(미도시)에 의해 제어될 수 있다.
FDT Handler는 ALC/LCT session을 통하여 전송되는 FLUTE protocol의 File Description Table을 분석 및 처리한다. FDT Handler는 NRT Service Manager(미도시)에 의해 제어될 수 있다.
XML Parser는 ALC/LCT session을 통하여 전송되는 XML Document를 분석하여, FDT Handler, SG Handler 등 적절한 모듈로 분석된 데이터를 전달한다.
File Reconstruction Buffer는 ALC/LCT, FLUTE session으로 전송되는 파일을 복원한다.
Decompressor는 ALC/LCT, FLUTE session으로 전송되는 파일이 압축되어 있는 경우, 그 압축을 해제하는 프로세스를 수행한다.
File Decoder는 File Reconstruction Buffer에서 복원된 File 또는 Decompressor에서 압축해제된 파일, 또는 File Storage에서 추출된 File을 Decoding한다.
File Storage는 복원된 파일을 필요에 의하여 저장하거나 추출한다.
M/W Engine(미도시)은 DSMCC Section, IP Datagram 등을 통하여 전송되는 A/V Stream이 아닌 파일 등의 Data를 처리한다. , M/W Engine은 처리된 데이터를 Presentation Manager 모듈로 전달한다.
SG Handler(미도시)는 XML Document 형태로 전송되는 Service Guide 데이터를 수집하고 분석하여 EPG Manager에게 전달하는 프로세스를 수행한다.
Service Manager(미도시)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Data, IP Stream으로 전송되는 Service Signaling Section Data를 수집하고 분석하여 Service Map을 제작한다. Service Manager(미도시)는 제작한 service map을 Service Map & Guide Database에 저장하며, 사용자가 원하는 Service에 대한 access를 제어한다. Operation Controller(미도시)에 의하여 제어되며, Tuner(501), MPEG-2 TP Demux(507), IP Datagram Buffer/Handler (513) 등에 대한 제어를 수행한다.
NRT Service Manager(미도시)는 IP layer 상에서 FLUTE session을 통하여 object/file 형태로 전송되는 NRT 서비스에 대한 전반적인 관리를 수행한다. NRT Service Manager(미도시)는 FDT Handler, File Storage등을 제어할 수 있다.
Application Manager(미도시)는 Object, file 등의 형태로 전송되는 Application 데이터의 처리에 관한 전반적인 관리를 수행한다.
UI Manager(미도시)는 User Interface를 통하여 사용자의 Input을 Operation Controller에 전달하고, 사용자가 요구하는 서비스를 위한 Process의 동작을 시작한다.
Operation Controller(미도시)는 UI Manager를 통하여 전달받은 사용자의 Command를 처리하고, 필요한 모듈의 Manager가 해당 Action을 수행하게 한다.
Fingerprint Extractor(565)는 Audio/Video 스트림으로 부터 fingerprint 특징 정보를 추출한다.
Fingerprint Comparator(567)는 Fingerprint Extractor가 추출한 특징 정보와 Reference fingerprint를 비교하여 일치하는 컨텐츠를 찾는다. Fingerprint Comparator(567)는 Local에 저장된 Reference fingerprint DB를 이용할 수도 있고, 인터넷 상의 Fingerprint 질의 서버에 질의하여 결과를 수신할 수도 있다. 비교 결과로 매칭된 결과 데이터는 Application에 전달되어 이용될 수 있다.
Application(569)은 ACR 기능을 관장하는 모듈 혹은 ACR에 기반하여 Enhanced 서비스를 제공하는 애플리케이션 모듈로서, 시청중인 방송 컨텐츠를 식별하여 이와 연계된 확장된 서비스를 제공한다.
도 52는 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 52에 도시된 워트마크 기반의 영상 표시 장치는 도 38에 도시된 핑거프린트 기반의 영상 표시 장치와 유사하나, 핑거프린트 기반의 영상 표시 장치의 Fingerprint Extractor(565)와 Fingerprint Comparator(567)를 포함하지 않으며, 대신 Watermark Extractor(566)를 더 포함한다.
Watermark Extractor(566)는 Audio/Video 스트림으로부터 watermark형태로 삽입된 데이터를 추출한다. 이렇게 추출된 데이터는 Application에 전달되어 이용될 수 있다.
본 발명의 일 실시 예에 따르면, MVPD에 의존하지 않고 부가 서비스를 이용할 수 있다. 특히, 방송사 또는 컨텐츠 제공자가 부가 서비스들을 제공하지 않더라도, 방송사 또는 컨텐츠 제공자에 의존하지 않는 제3 서버가 부가 서비스를 제공할 수 있다.
게다가, 일 실시 예에 따르면, 정보 검색, 채팅, 뉴스 검색, 디지털 미디어 다운로드, 상품 카탈로그 다운로드, 그리고 상품 구입을 리모트 컨트롤러를 이용한 불편한 텍스트 입력 없이 할 수 이용할 수 있다.
추가적으로, 일 실시 예에 따르면, 무선 채널의 대역폭을 초과하는 부가 서비스들도 이용가능하다.
본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 영상 표시 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
실시 예는 그 예시적인 실시 예 수를 참조하여 설명 하였지만, 그것은 많은 다른 수정 및 실시 예는 본 발명의 원리의 범위 및 정신 내에서 당업자가 고안할 수 있을 것으로 이해되어야한다. 보다 구체적으로는 다양한 변형 및 변경은 구성 부품 및 / 또는 공개, 도면 및 첨부 된 특허 청구 범위 내의 피사체의 조합 배치 배치 내에서 가능하다. 부품 및 / 또는 구성에서 변형 및 변경뿐만 아니라, 대체할 수 있는 용도는 당업자에게 명백 할 것이다.
Claims (20)
- 디스플레이부를 포함하는 영상 표시 장치의 동작 방법에 있어서,
비압축 시청각 컨텐츠를 획득하는 단계;
상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하는 단계;
상기 비압축 시청각 컨텐츠에 대한 정보에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림을 예약하는 단계; 및
상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제1항에 있어서,
상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하는 단계는
상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계를 포함하고,
상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계는
상기 영상 표시 장치 식별자에 기초하여 컨텐츠 알림 메시지를 수신하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제2항에 있어서,
상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 다운로드 받을 수 있는 프로모션 애플리케이션 URL과 상기 영상 표시 장치 식별자를 포함하는 URL에 기초하여 상기 영상 표시 장치 식별자를 수신하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제3항에 있어서,
상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하는 단계는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 다운로드 받을 수 있는 프로모션 애플리케이션 URL과 상기 영상 표시 장치 식별자를 포함하는 URL을 토큰화(tokenize)하여 상기 영상 표시 장치 식별자를 수신하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제1항에 있어서,
상기 컨텐츠 알림을 예약하는 단계는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 실행하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제5항에 있어서,
상기 컨텐츠 알림을 예약하는 단계는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 실행한 시간으로부터제1 미리 설정된 시간이 경과한 경우, 상기 프로모션 애플리케이션을 종료하는 단계를 더 포함하는
영상 표시 장치의 동작 방법. - 제6항에 있어서,
상기 프로모션 애플리케이션을 종료하는 단계는
상기 제1 미리 설정된 시간의 길이를 상기 비압축 컨텐츠의 재생 시간의 길이에 기초하여 결정하는 단계와
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 실행한 시간으로부터상기 제1 미리 설정된 시간이 경과한 경우, 상기 프로모션 애플리케이션을 종료하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제5항에 있어서,
상기 비압축 컨텐츠에 포함된 비디오 및 오디오 중 적어도 어느 하나의 페이드 아웃(fade out)을 감지한 경우, 상기 프로모션 애플리케이션을 종료하는 단계를 더 포함하는
영상 표시 장치의 동작 방법. - 제1항에 있어서,
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계는
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠를 방송하는 채널의 정보를 방송 정보로서 표시하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제9항에 있어서,
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠를 방송하는 채널의 정보를 표시하는 단계는
상기 영상 표시 장치의 사용자가 가입한 제1 서비스 패키지에 포함되지 않은 채널의 정보를 표시하지 않고 상기 제1 서비스 패키지에 포함된 채널의 정보를 표시하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제9항에 있어서,
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠를 방송하는 채널의 정보를 표시하는 단계는
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠를 방송하는 채널이 상기 영상 표시 장치의 사용자가 가입한 제1 서비스 패키지에 포함되지 않는 경우, 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠를 방송하는 채널을 포함하는 제2 서비스 패키지를 표시하는
영상 표시 장치의 동작 방법. - 제1항에 있어서,
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계는
상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 시작 시간으로부터 제2 미리 설정된 시간만큼 전에 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 단계를 포함하는
영상 표시 장치의 동작 방법. - 제1항에 있어서,
상기 비압축 시청각 컨텐츠는 프로모션 컨텐츠이고, 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠는 상기 프로모션 컨텐츠의 본편 컨텐츠인
영상 표시 장치의 동작 방법. - 영상 표시 장치에 있어서,
비압축 시청각 컨텐츠를 획득하는 수신부;
상기 비압축 시청각 컨텐츠를 표시하는 디스플레이부; 및
상기 비압축 시청각 건텐츠의 특징 정보에 기초하여 상기 비압축 시청각 컨텐츠에 대한 정보를 수신하고, 상기 비압축 시청각 컨텐츠에 대한 정보에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 알려주는 컨텐츠 알림을 예약하고, 상기 컨텐츠 알림의 예약에 기초하여 상기 비압축 시청각 컨텐츠와 관련된 컨텐츠의 방송 정보를 표시하는 부가 서비스 관리부를 포함하는
영상 표시 장치. - 제14항에 있어서,
상기 부가 서비스 관리부는
상기 영상 표시 장치를 식별하는 영상 표시 장치 식별자를 수신하고, 상기 영상 표시 장치 식별자에 기초하여 컨텐츠 알림 메시지를 수신하는
영상 표시 장치. - 제15항에 있어서,
상기 부가 서비스 관리부는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 다운로드 받을 수 있는 프로모션 애플리케이션 URL과 상기 영상 표시 장치 식별자를 포함하는 URL에 기초하여 상기 영상 표시 장치 식별자를 수신하는
영상 표시 장치. - 제14항에 있어서,
상기 부가 서비스 관리부는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 실행하는 단계를 포함하는
영상 표시 장치. - 제17항에 있어서,
상기 부가 서비스 관리부는
상기 컨텐츠 알림을 예약하는 프로모션 애플리케이션을 실행한 시간으로부터제1 미리 설정된 시간이 경과한 경우, 상기 프로모션 애플리케이션을 종료하는
영상 표시 장치. - 제18항에 있어서,
상기 부가 서비스 관리부는
상기 제1 미리 설정된 시간의 길이를 상기 비압축 컨텐츠의 재생 시간의 길이에 기초하여 결정하고, 상기 프로모션 애플리케이션을 실행한 시간으로부터 상기 제1 미리 설정된 시간이 경과한 경우 상기 프로모션 애플리케이션을 종료하는
영상 표시 장치. - 제17항에 있어서,
상기 부가 서비스 관리부는
상기 비압축 컨텐츠에 포함된 비디오 및 오디오 중 적어도 어느 하나의 페이드 아웃(fade out)을 감지한 경우, 상기 프로모션 애플리케이션을 종료하는
영상 표시 장치.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201361764545P | 2013-02-14 | 2013-02-14 | |
| US61/764,545 | 2013-02-14 | ||
| PCT/KR2014/001241 WO2014126422A1 (en) | 2013-02-14 | 2014-02-14 | Video display apparatus and operating method thereof |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20150120350A true KR20150120350A (ko) | 2015-10-27 |
Family
ID=51354363
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020157021375A KR20150120350A (ko) | 2013-02-14 | 2014-02-14 | 영상 표시 장치 및 그 동작 방법 |
Country Status (7)
| Country | Link |
|---|---|
| US (2) | US9357241B2 (ko) |
| EP (1) | EP2957106A4 (ko) |
| JP (1) | JP6151804B2 (ko) |
| KR (1) | KR20150120350A (ko) |
| CN (1) | CN105075280B (ko) |
| CA (1) | CA2899184C (ko) |
| WO (1) | WO2014126422A1 (ko) |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9271121B1 (en) * | 2014-08-12 | 2016-02-23 | Google Inc. | Associating requests for content with a confirmed location |
| JPWO2016035589A1 (ja) * | 2014-09-05 | 2017-06-15 | ソニー株式会社 | 受信装置、受信方法、送信装置、及び、送信方法 |
| US20160094868A1 (en) * | 2014-09-30 | 2016-03-31 | Samsung Electronics Co., Ltd. | Method and system for automatic selection of channel line up, set top box (stb) ir codes, and pay tv operator for televisions controlling an stb |
| US10750236B2 (en) | 2015-04-23 | 2020-08-18 | The Nielsen Company (Us), Llc | Automatic content recognition with local matching |
| KR102424839B1 (ko) | 2015-10-14 | 2022-07-25 | 삼성전자주식회사 | 디스플레이 장치 및 이의 제어 방법 |
| US20170171615A1 (en) * | 2015-12-15 | 2017-06-15 | Le Holdings (Beijing) Co., Ltd. | Method and Electronic Device for Controlling Video Playing |
| BR112019002410A2 (pt) * | 2016-08-12 | 2019-06-04 | Huawei Tech Co Ltd | método de transmissão de dados de serviço, dispositivo de rede, dispositivo terminal, sistema e meio legível por computador |
| CN106921728A (zh) | 2016-08-31 | 2017-07-04 | 阿里巴巴集团控股有限公司 | 一种定位用户的方法、信息推送方法及相关设备 |
| JP2017055410A (ja) * | 2016-10-03 | 2017-03-16 | 株式会社アステム | 番組出力装置、番組管理サーバ、補助情報管理サーバ、番組と補助情報の出力方法、及びプログラム |
| CN106961634B (zh) * | 2017-03-31 | 2020-01-17 | 青岛海信电器股份有限公司 | Vod视频结束播放后启动dtv信号的方法、装置和终端设备 |
| KR20210051048A (ko) * | 2019-10-29 | 2021-05-10 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
| KR20210054932A (ko) * | 2019-11-06 | 2021-05-14 | 삼성전자주식회사 | 전자장치와 그의 제어방법, 및 기록매체 |
| US11575963B2 (en) | 2020-04-08 | 2023-02-07 | Roku, Inc. | Content-modification system with feature for detecting and responding to a content modification by a tuner device |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20050160465A1 (en) | 2004-01-21 | 2005-07-21 | United Video Properties, Inc. | Interactive television system with automatic switching from broadcast media to streaming media |
| US20080092048A1 (en) * | 2004-12-27 | 2008-04-17 | Kenji Morimoto | Data Processor |
| US7929563B2 (en) | 2005-01-20 | 2011-04-19 | New Jersey Institute Of Technology | System and/or method for channel estimation in communication systems |
| US20070101370A1 (en) * | 2005-10-28 | 2007-05-03 | Stexar Corp. | Television program selection |
| EP1974484A1 (en) * | 2006-01-17 | 2008-10-01 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for broadcast content related notification |
| EP2475166A1 (en) | 2006-07-31 | 2012-07-11 | United Video Properties, Inc. | Systems and methods for providing media guidance planners |
| US8589973B2 (en) * | 2006-09-14 | 2013-11-19 | At&T Intellectual Property I, L.P. | Peer to peer media distribution system and method |
| US8079048B2 (en) | 2006-12-15 | 2011-12-13 | At&T Intellectual Property I, L.P. | System and method of scheduling an event related to an advertisement |
| US8266648B2 (en) * | 2007-04-20 | 2012-09-11 | United Video Properties, Inc. | Systems and methods for determining subscription data |
| US20090288131A1 (en) * | 2008-05-13 | 2009-11-19 | Porto Technology, Llc | Providing advance content alerts to a mobile device during playback of a media item |
| CN101615961B (zh) * | 2008-06-24 | 2011-05-18 | 华为技术有限公司 | 媒体内容推荐方法和装置 |
| JP5462200B2 (ja) * | 2010-02-19 | 2014-04-02 | パナソニック株式会社 | 番組表配信装置、番組配信装置、番組表受信端末、番組表送受信システム、番組表配信方法、番組表受信方法、プログラム、及び記録媒体 |
| JP5342478B2 (ja) * | 2010-03-11 | 2013-11-13 | 株式会社Ｗｏｗｏｗ | 有料デジタルテレビ放送局とこの視聴者間において行う放送予定番組のプロモーション及び視聴予約方法 |
| US8990876B2 (en) * | 2010-11-24 | 2015-03-24 | Lg Electronics Inc. | Method for receiving enhanced service and display apparatus thereof |
| US10491966B2 (en) | 2011-08-04 | 2019-11-26 | Saturn Licensing Llc | Reception apparatus, method, computer program, and information providing apparatus for providing an alert service |
| US20140181653A1 (en) | 2012-12-26 | 2014-06-26 | Johannes P. Schmidt | Content presentation with enhanced user experience |
-
2014
- 2014-02-14 EP EP14752170.2A patent/EP2957106A4/en not_active Withdrawn
- 2014-02-14 CA CA2899184A patent/CA2899184C/en not_active Expired - Fee Related
- 2014-02-14 US US14/362,861 patent/US9357241B2/en active Active
- 2014-02-14 WO PCT/KR2014/001241 patent/WO2014126422A1/en active Application Filing
- 2014-02-14 JP JP2015557944A patent/JP6151804B2/ja active Active
- 2014-02-14 KR KR1020157021375A patent/KR20150120350A/ko not_active Application Discontinuation
- 2014-02-14 CN CN201480008925.9A patent/CN105075280B/zh not_active Expired - Fee Related
- 2014-12-04 US US14/561,021 patent/US9888268B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CA2899184A1 (en) | 2014-08-21 |
| EP2957106A1 (en) | 2015-12-23 |
| US20150163528A1 (en) | 2015-06-11 |
| EP2957106A4 (en) | 2016-11-30 |
| CN105075280A (zh) | 2015-11-18 |
| WO2014126422A1 (en) | 2014-08-21 |
| US9357241B2 (en) | 2016-05-31 |
| CA2899184C (en) | 2018-01-23 |
| CN105075280B (zh) | 2019-01-01 |
| JP6151804B2 (ja) | 2017-06-21 |
| JP2016514391A (ja) | 2016-05-19 |
| US20150222940A1 (en) | 2015-08-06 |
| US9888268B2 (en) | 2018-02-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102116679B1 (ko) | 영상 표시 장치 및 그 동작 방법 | |
| CA2862575C (en) | Video display apparatus and operating method thereof | |
| JP6151804B2 (ja) | 映像表示装置及びその動作方法 | |
| US20190082212A1 (en) | Method for receiving enhanced service and display apparatus thereof | |
| JP6294238B2 (ja) | 映像表示装置及びその動作方法 | |
| CA2899188C (en) | Video display apparatus and operating method thereof | |
| EP3010241B1 (en) | Image display device and method for operating same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |