KR101599465B1 - 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법 - Google Patents

동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법 Download PDF

Info

Publication number
KR101599465B1
KR101599465B1 KR1020090018015A KR20090018015A KR101599465B1 KR 101599465 B1 KR101599465 B1 KR 101599465B1 KR 1020090018015 A KR1020090018015 A KR 1020090018015A KR 20090018015 A KR20090018015 A KR 20090018015A KR 101599465 B1 KR101599465 B1 KR 101599465B1
Authority
KR
South Korea
Prior art keywords
information
synchronization
broadcast program
image feature
broadcast
Prior art date
Application number
KR1020090018015A
Other languages
English (en)
Other versions
KR20100099491A (ko
Inventor
최창환
정태웅
박희선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090018015A priority Critical patent/KR101599465B1/ko
Priority to US12/706,254 priority patent/US8589995B2/en
Publication of KR20100099491A publication Critical patent/KR20100099491A/ko
Priority to US13/742,969 priority patent/US20130145397A1/en
Application granted granted Critical
Publication of KR101599465B1 publication Critical patent/KR101599465B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/237—Communication with additional data server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

제공되는 방송 프로그램의 방송 프레임에 연관된 부가 정보를 동기화하여 제공하기 위한 동기화 정보 제공 서버 및 동기화 정보 제공 방법과 동기화 정보 제공 서버로부터 수신되는 동기화 정보를 처리하는 클라이언트 기기 및 동기화 정보 처리 방법이 개시된다. 동기화 정보 제공 서버는 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 메타 정보와 연관된 부가 정보를 관리한다. 클라이언트 기기로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 클라이언트 기기에 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 제공한다.
방송, 부가 정보, 동기화, 서버, 클라이언트

Description

동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법{Server and method for providing synchronization information, client apparatus and method for synchronizing additional information with broadcast program}
하나 이상의 양상은 방송 서비스에 관한 것으로, 더욱 상세하게는 방송 콘텐츠와 함께 부가 정보를 제공하기 위한 장치 및 방법에 관한 것이다.
최근 공중파 TV, 케이블 TV, 위성 DMB, 지상파 DMB, IPTV 등 방송 컨텐츠가 증가함에 따라 현대인들은 보다 많은 방송 컨텐츠를 다양한 단말기를 통해 접할 수 있게 되었다. 특히, 상호간의 데이터를 주고받을 수 있는 양방향 데이터 방송 서비스의 증가로 단순히 프로그램을 시청할 뿐만 아니라, 프로그램 시청중에 출연자가 사용하는 상품에 대한 정보, 또는 출연자가 입고 있는 의상이나 프로그램이 촬영된 장소 등 프로그램 이외의 부가 정보에 대해 궁금해하고 요청하는 사용자가 늘어나고 있다. 프로그램에 대한 보다 자세한 정보를 요구하는 사용자의 요청이 증가함에 따라 방송 컨텐츠와 이에 맞는 부가 정보를 제공하는 서비스는 매우 중요하게 부각되고 있다.
방송 프로그램과 해당 방송 프로그램과 연관된 부가 정보를 동기화하여 제공할 때, 해당 방송 프로그램이 편집되어 전송되어 오는 경우에도, 편집된 방송 프로그램의 방송 프레임과 해당 방송 프레임에 연관된 부가 정보를 동기화하여 제공하기 위한 장치 및 방법이 제공된다.
일 양상에 따른 동기화 정보 제공 서버는 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 메타 정보와 연관된 부가 정보를 관리하는 부가 정보 관리부; 및 클라이언트 기기로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 동기화 요청 정보, 메타 정보 및 부가 정보를 이용하여, 클라이언트 기기에 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 제공하는 동기화 관리부를 포함한다.
부가 정보 관리부는 EPG 정보에 기초하여 방송 프로그램을 녹화하면서 방송 프로그램별 메타 정보를 생성할 수 있다. 부가 정보 관리부는 방송 프로그램별로 설정된 시간 간격마다 방송 프레임의 시간 정보 및 영상 특징 정보를 추출하여 메타 정보를 생성할 수 있다.
특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 동기화 관리부는 특정 방송 프로그램의 메타 정보 중에서 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보와 동기화 요청 정보에 포함된 영상 특징 정보를 각각 비교하고, 비교 결과 유사하다고 결정된 영상 특징 정보에 매핑된 부가 정보의 식별 정보를 동기화 정보로서 클라이언트 기기에 제공할 수 있다.
동기화 관리부는 클라이언트 기기에 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 식별자를 포함하는 부가 정보 리스트를 제공할 수 있다.
시간 정보는 PSIP의 STT의 정보일 수 있다. 영상 특징 정보는 MPEG-7의 색상 레이아웃 서술자 및 에지 히스토그램 서술자 중 적어도 하나일 수 있다. 동기화 관리부는 설정된 시간 간격마다 수신되는 동기화 요청 정보에 응답하여, 동기화 요청 정보가 수신될때마다 동기화 정보를 제공할 수 있다.
다른 양상에 따른 클라이언트 기기는 수신된 방송 신호로부터 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 추출하여 특정 방송 프로그램에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 생성하는 제어부; 및 동기화 요청 정보를 동기화 정보 제공 서버에 전송하고, 동기화 정보 제공 서버로부터 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 수신하는 통신부를 포함한다.
통신부는 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 부가 정보 식별자를 포함하는 부가 정보 리스트를 수신할 수 있다.
클라이언트 기기는 수신중인 방송 프레임과 연관된 부가 정보를 동기화하여 화면을 구성하는 동기화 화면 구성부를 더 포함하고, 동기화 화면 구성부는 부가 정보 리스트에 포함된 동기화 정보가 지시하는 부가 정보 식별자에 해당하는 부가 정보를 이용하여 동기화 화면을 구성할 수 있다.
또 다른 양상에 따른 동기화 정보 제공 방법은 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 메타 정보와 연관된 부가 정보를 관리하는 단계; 클라이언트 기기로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 수신하는 단계; 및 동기화 요청 정보, 메타 정보 및 부가 정보를 이용하여, 클라이언트 기기에 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 제공하는 단계를 포함한다.
또 다른 양상에 따른 방송 프로그램에 대한 부가 정보 동기화 방법은, 수신된 방송 신호로부터 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 추출하여 특정 방송 프로그램에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 생성하는 단계; 동기화 요청 정보를 동기화 정보 제공 서버에 전송하는 단 계; 동기화 정보 제공 서버로부터 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 수신하는 단계; 및 동기화 정보를 이용하여 방송 프레임에 대한 부가 정보를 연관된 방송 프레임과 동기화하는 단계를 포함한다.
일 실시예에 따르면, 방송 화면과 부가 정보 동기화시 시간 정보 외에 영상 특징 정보를 추가적으로 이용함으로써, 방송 프로그램이 편집되어 시간 정보가 변경되어도 방송 프레임의 영상 특징 정보와 유사한 영상 특징 정보를 찾음으로써, 해당 영상 특징 정보에 대한 부가 정보를 알려줄 수 있다. 따라서, 방송 프로그램별로 제작된 부가 정보 리스트를 이용하여 이후 해당 방송 프로그램이 편집되어 방송되는 경우에도, 방송 프로그램의 방송 프레임과 해당되는 부가 정보를 동기화하여 제공할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 일 실시예를 상세하게 설명한다. 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 일 실시예에 따른 클라이언트 기기가 방송 제공 장치 및 동기화 정보 제공 서버로부터 방송 프로그램을 제공받는 환경을 나타내는 도면이다.
방송 제공 장치(100)는 동기화 정보 제공 서버(200) 및 클라이언트 기기(300)로 AV 스트림과 같은 방송 프로그램 및 방송 프로그램에 대한 정보를 포함하는 방송 신호를 위성, 지상파, 인터넷 또는 케이블과 같은 방송매체를 이용하여 송출한다. 방송 프로그램에 대한 정보는 EPG(Electronic Program Guide) 정보, 개별 방송 프로그램에 관한 설명 정보를 포함한다.
클라이언트 기기(300)는 방송 프로그램을 제공하는 사용자 단말 장치로서, 위성, 지상파, 인터넷 또는 케이블과 같은 방송 채널을 통하여 방송 제공 장치(100)로부터 수신된 방송 프로그램을 제공할 수 있다. 클라이언트 기기(300)는 퍼스널 컴퓨터, 셋톱 박스, 디지털 텔레비전, 휴대폰, 또는 PDA(personal digital assistants) 등 일 수 있다.
프로그램 시청중에 출연자가 사용하는 상품에 대한 정보, 또는 출연자가 입고 있는 의상이나 프로그램이 촬영된 장소 등 방송 프로그램과 동기화하여 제공하기 위한 부가 정보가 방송 채널이나 양방향 통신 채널을 통해 클라이언트 기기(300)에 수신되면, 클라이언트 기기(300)는 부가 정보를 방송 프로그램과 동기화하여 제공한다. 이와 같은 부가 정보는 방송 제공 장치(100)에서 방송되는 방송 프로그램의 시간 정보를 이용하여 동기화될 수 있다.
예를 들어, 적어도 하나의 부가 정보는 관련 방송 프레임의 시간 정보와 각각 매핑된다. 여기에서, 방송 프레임은 오디오, 비디오를 포함하는 다양한 미디어로 구성되는 방송 프로그램 데이터에 대한 프레임 단위의 정보를 나타낸다. 클라 이언트 기기(300)는 방송 프레임과 부가 정보의 동기화를 위하여 방송 프로그램의 시작 시점을 정하고, 시작 시점으로부터 현재 시청중인 방송 프레임의 시간 위치를 계산하여 해당 시점에 매핑된 부가 정보를 제공할 수 있다.
방송 제공 장치(100)는 동일한 방송을 일부 편집하여 클라이언트 기기(300)에 다시 제공하기도 한다. 또한, 방송 제공 장치(100)는 방송 프로그램을 다른 방송 제공자 예를 들어, 다수의 케이블 방송사, IPTV 사업자 등에게 제공하는 경우, 다른 방송 제공자는 방송 제공 장치(100)와 다른 채널을 통하여 다른 방송 시간에 일부 방송의 내용만 편집하여 클라이언트 기기(300)에 제공하는 일이 보편화되고 있다.
이러한 경우, 부가 정보 제작시 이용한 방송 프로그램에 포함된 시간 정보를 기준으로 방송 프로그램과 부가 정보를 동기화하게 되면, 동일한 방송사 또는 다른 방송사로부터 동일한 방송 프로그램에 대하여 편집된 방송 프로그램이 수신되는 경우, 편집된 부분으로 인하여 동일한 방송 프레임이라도 다른 시간 정보를 가지게 된다. 즉, 동기화의 기준인 시간 정보가 변경되어, 부가 정보가 방송 프로그램을 구성하는 방송 프레임 중 관련된 방송 프레임과 함께 동기되어 출력되지 못하게 되므로, 편집된 방송 프로그램에 대해서는 부가 정보가 적절히 동기화되어 제공되지 못한다
일 실시예에 따르면, 동기화 정보 제공 서버(200)는 방송 프로그램의 방송 프레임과 관련된 부가 정보가 제공되도록 방송 프레임과 부가 정보를 동기화하기 위한 동기화 정보를 클라이언트 기기(300)에 제공한다. 또한, 클라이언트 기 기(330)는 동일한 방송 프로그램이라면 이후 편집된 방송 프로그램이 다른 시간 또는 채널로 수신되는 경우에도, 동기화 정보를 이용하여 이전에 제작된 부가 정보를 현재 수신되는 방송 프로그램과 동기화시켜 제공한다.
동기화 정보 제공 서버(200) 및 클라이언트 기기(300)는 인터넷과 같은 양방향 통신망으로 연결될 수 있다. 동기화 정보 제공 서버(200)는 방송 신호를 녹화하여 AV 스트림 및 방송 프로그램에 대한 정보를 포함하는 방송 프로그램을 저장하는 데이터베이스(도시되지 않음)를 포함할 수 있다. 동기화 정보 제공 서버(200)는 클라이언트 기기(300)가 방송 제공 장치(100)로부터 수신되는 방송 프로그램과 함께 해당 방송 프로그램에 대한 부가 정보를 제공할 수 있다. 부가 정보는 동기화 정보 제공 서버(200)에서 생성될 수 있으며, 다른 콘텐츠 제공 장치로부터 생성되어 제공될 수 있다.
이하에서는, 동기화 정보 제공 서버(200) 및 클라이언트 기기(300)의 구성 및 동작에 대하여 상세하게 설명한다.
도 2는 일 실시예에 따른 동기화 정보 제공 서버의 구성을 나타내는 도면이다.
동기화 정보 제공 서버(200)는 부가 정보 관리부(210), 저장부(220) 및 동기화 관리부(230)를 포함한다.
부가 정보 관리부(210)는 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 메타 정보와 연관된 부가 정보를 관리한다. 부가 정보 관리부(210)는 EPG 정보에 기초하여 방송 프로그램을 녹화하 면서 방송 프로그램별 메타 정보를 생성할 수 있다. 부가 정보 관리부(210)는 방송 프로그램별로 설정된 시간 간격마다 방송 프레임의 시간 정보 및 영상 특징 정보를 추출하여 메타 정보를 생성할 수 있다.
부가 정보 관리부(210)는 콘텐츠 녹화부(212), 시간 정보 추출부(214) 및 영상 특징 정보 추출부(216)를 포함할 수 있다.
콘텐츠 녹화부(212)는 저장부(220)에 저장된 EPG 정보 등 스케줄 테이블을 검사하여 현재 녹화할 프로그램이 있는지 여부를 확인한다. 콘텐츠 녹화부(212)는 녹화할 프로그램이 있는 경우, 프로그램 녹화를 시작한다. 시간 정보 추출부(214)는 녹화되는 방송 프로그램으로부터 일정 시간 간격으로 시간 정보를 추출한다.
영상 특징 정보 추출부(216)는 시간 정보가 일정 간격으로 추출될 때, 방송 프레임을 캡처하여 이미지를 저장하고 추출한 이미지로부터 색상 레이아웃 서술자, 에지 히스토그램 서술자와 같은 영상 특징 정보를 추출한다. 시간 정보 추출 및 영상 특징 정보 추출은 프로그램 녹화가 끝날 때까지 일정간격으로 반복되며, 녹화가 종료되면 시간 정보 및 영상 특징 정보 추출도 함께 종료될 수 있다.
시간 정보와 영상 특징 정보는 매우 다양할 수 있다. 일 실시예에 따르면, 시간 정보는 PSIP(Program and System Information Protocol)의 STT(System Time Table)이다. STT는 PSIP를 구성하는 테이블 중 하나로 현재의 날짜와 시간에 대한 정보를 표현한다.
일 실시예에 따르면, 영상 특징 정보는 MPEG-7의 색상 레이아웃 서술자(Color Layout Descriptor, CLD) 및 에지 히스토그램 서술자(Edge Histogram Descriptor, EHD) 중 적어도 하나를 포함한다.
색상 레이아웃 서술자는 입력 영상공간을 8×8 블록으로 나눈 후, 각 블록의 대표 컬러(Y, Cb, Cr)의 DCT 계수를 나타내는 서술자이다. 색상 레이아웃 서술자를 영상 검색에 활용하려면, 우선 DCT 변환된 상위 각 Y성분 6개, Cb성분 3개, Cr성분 3개의 주파수 영역의 저주파영역 값들만을 이용하여 비선형 역양자화한다. 그런 다음 8×8역 DCT(IDCT)를 취하여 공간 영역의 대표 컬러값을 얻은 후 대표 컬러값을 사용하여 영상 검색에 활용할 수 있다.
에지 히스토그램 서술자(Edge Histogram Descriptor, EHD)는 MPEG-7의 여러가지 특징들 중 영상의 에지정보를 효과적으로 표현하는 기술자이다. EHD는 기본적으로 5가지 종류의 에지 형태를 국부 영상(local image) 영역에서 공간적 분포로 표현한다. 이 5가지 에지는 4개의 방향성을 가진 에지와 방향성을 가지지 않은(non-directional) 1개의 에지로 구성된다. 4개의 방향성을 가진 에지는 수직(vertical), 수평(horizontal), 45도(45-degree diagonal) 및 135도(135-degree diagonal)이다. 이러한 에지들이 있는 각 국부 영역을 부 영상(sub-image)라고 한다.
영상으로부터 에지 히스토그램을 추출하기 위해서는 먼저 영상을 16(4×4)개의 부 영상으로 나누고, 에지 특징을 추출하기 위해서 에지 검출 필터 계수를 구한다. 에지 필터 계수를 구하기 위해서 한 개의 이미지 블록(즉, 부 영상)은 다시 한 번 4개의 블록(sub-block)으로 나뉘고, 부 블록에 대한 평균 휘도 값(luminance mean value)을 이용하여 에지 검출 필터 계수를 구한다. 에지 검출 필터 계수를 이용하여 한 개의 이미지 블록 내의 5가지 에지 강도를 구하고, 그 중에서 가장 큰 값을 가진 에지를 구한다. 그 값이 임계값보다 크다면 해당 블록은 그 에지 성분을 갖는다고 판단한다. 예를 들어, 수직 에지 강도가 다른 4개의 에지 강도보다 크고, 임계값보다 크면 이미지 블록은 수직 에지 성분을 갖는다고 판단한다.
생성된 메타 정보들은 방송 프로그램명등 프로그램 정보를 이용하여 생성한 고유 키 값을 참조하여 저장부(220) 또는 특정 영역에 파일로 저장될 수 있다. 즉, 각각의 방송 프로그램은 서로 다른 고유 키 값을 참조하여 저장된다. 이러한 정보를 클라이언트로부터 해당 프로그램에 대한 부가 정보 동기화 요청이 있을 때 비교의 대상으로 사용된다.
부가 정부 관리부(210)는 전술한 바와 같이 생성된 메타 정보를 참조하여 원하는 영상 프레임에 관련된 부가 정보를 생성할 수 있다. 또는, 부가 정보 관리부(210)는 생성된 메타 정보를 다른 부가 정보를 제작하는 콘텐츠 제공자에게 제공하여, 생성된 메타 정보를 기준으로 부가 정보들이 생성되도록 할 수 있다.
동기화 관리부(230)는 클라이언트 기기(300)로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 동기화 요청 정보, 메타 정보 및 부가 정보를 이용하여, 클라이언트 기기(300)에 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 제공한다. 즉, 동기화 관리부(230)는 시간 정보 외에 방송 프레임으로부터 추출한 영상 특징 정보를 이용하여 시간 정보가 변경되더라도 현재 방송의 영상과 비슷한 영상을 찾아내어 클라이언트 기기(300)가 현재 수신중인 방송의 영상에 맞는 부가 정보를 제공할 수 있도록 한다.
구체적으로는, 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 동기화 관리부(230)는 특정 방송 프로그램의 메타 정보 중에서 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보를 결정한다. 예를 들어, 클라이언트 기기(300)가 부가 정보를 이용하기 위하여 현재 수신중인 방송 프로그램에서 시간 정보 STT을 추출하여 동기화 요청 정보에 포함시켜 동기화 정보 제공 서버(200)에 전송한 경우, 동기화 관리부(230)는 시간 정보를 이용하여 동기화 요청 정보에 포함된 영상 특징 정보와 비교 대상이 되는 미리 저장된 일정 구간에 포함된 영상 특징 정보를 결정한다.
동기화 요청 정보에 포함된 영상 특징 정보와 비교 대상이 되는 영상 특징 정보는 동기화 요청 정보에 포함된 시간 정보를 기준으로 일정 구간에 속하는 다수의 영상 특징 정보일 수 있다. 예를 들어, 동기화 요청 정보에 포함된 시간 정보가 100일 경우, 시간 구간 50에서 150사이의 방송 프레임들에 대한 영상 특징 정보들을 비교 대상으로 결정할 수 있다. 이는 클라이언트 기기(300)로부터 얻은 영상 특징 정보를 동기화 정보 제공 서버(200)에 저장되어 있는 시간 구간 100인 영상 특징 정보와 비교하는 것이 아니라, 그 주변의 일정 구간에 속하는 다수의 영상 특징 정보와 비교함으로써 방송 프로그램이 편집되더라도 올바른 부가 정보를 찾아내기 위함이다. 이때, 비교 대상이 될 영상 특징 정보를 결정하게 되는 시간 구간의 범위는 가변적일 수 있다.
그런 다음, 동기화 관리부(230)는 비교될 영상 특징 정보들과 동기화 요청 정보에 포함된 영상 특징 정보를 각각 비교한다. 동기화 관리부(230)는 비교 결과 유사하다고 결정된 영상 특징 정보에 매핑된 부가 정보의 식별 정보를 동기화 정보로서 클라이언트 기기(300)에 통신망을 통해 제공할 수 있다. 동기화 관리부(230)는 설정된 시간 간격마다 수신되는 동기화 요청 정보에 응답하여, 동기화 요청 정보가 수신될때마다 동기화 정보를 제공할 수 있다.
또한, 동기화 관리부(230)는 클라이언트 기기(300)에 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보에 매핑된 적어도 하나의 부가 정보 및 적어도 하나의 부가 정보 각각을 식별하기 위한 식별자를 포함하는 부가 정보 리스트를 제공할 수 있다. 부가 정보 리스트는 클라이언트 기기(300)가 방송 프로그램 식별 정보를 포함하는 부가 정보 리스트 요청시 전달될 수 있다. 방송 프로그램 식별 정보는 예를 들어, 방송 채널, 방송 프로그램 타이틀, 방송 프로그램 회차 정보를 포함할 수 있다.
도 3은 일 실시예에 따른 클라이언트 기기의 구성을 나타내는 도면이다.
콘텐츠 제공 장치(300)는 방송 수신부(310), 제어부(320), 통신부(330) 및 동기화 화면 구성부(340)를 포함한다.
방송 수신부(310)는 지상파 또는 위성과 같은 방송 채널을 통해 수신되거나, 인터넷과 같은 양방향 채널을 통해 방송 프로그램을 수신할 수 있다. 방송 신호를 통해 방송 프로그램을 수신하는 경우, 방송 수신부(310)는 사용자가 선택한 특정 채널로 입력되는 방송신호를 튜닝 및 복조하여 전송 스트림을 출력하는 튜너부(도 시되지 않음) 및 튜너부를 통해 출력되는 다중화된 전송 스트림을 비디오 스트림 및 오디오 스트림으로 역다중화하는 디멀티플렉서(도시되지 않음)를 포함하여 구성될 수 있다.
제어부(320)는 클라이언트 기기(330) 전반의 동작을 제어할 수 있으며, 오디오 스트림 및 비디오 스트림을 디코딩하는 수단을 포함할 수 있다. 일 실시예에 따르면, 제어부(320)는 수신된 방송 신호로부터 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 추출하여 특정 방송 프로그램에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 생성한다. 통신부(330)는 양방향 통신 채널에 접속하여 동기화 정보 제공 서버(200)와 통신을 제어한다.
제어부(320)는 영상 특징 정보 추출부(322), 시간 정보 추출부(324), 및 동기화 처리부(326)를 포함한다.
제어부(320)는 특정 방송 프로그램이 시작했을 경우, 통신부(330)를 통하여 현재 시간과 프로그램 정보 등을 포함하는 방송 프로그램 식별 정보를 동기화 정보 제공 서버(200)에 요청하여 현재 수신중인 방송 프로그램에 해당하는 부가 정보를 포함하는 부가 정보 리스트를 요청하여 수신할 수 있다. 부가 정보 리스트는 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 적어도 하나의 부가 정보를 각각을 식별하기 위한 부가 정보 식별자를 포함할 수 있다.
동기화 처리부(326)는 방송 수신중인 방송 프로그램에 대응하는 부가 정보를 부가 정보 리스트를 이용하여 관련된 방송 프레임과 동기화하고, 동기화 화면 구성 부(340)는 수신된 방송 프로그램과 연관된 부가 정보를 함께 제공하는 동기화 화면을 구성할 수 있다. 그러나, 동일한 방송 프로그램이더라도 부가 정보 리스트 제작시의 방송 프로그램이 편집된 경우를 대비하여, 현재 방송 프레임에 맞는 부가 정보를 알기 위한 동작을 수행할 수 있다.
이를 위해, 시간 정보 추출부(322)는 수신중인 방송 프레임의 시간 정보를 추출하고, 영상 특징 정보 추출부(324)는 방송 프레임으로부터 영상을 캡처하고 캡처한 영상으로부터 색상 레이아웃 서술자, 에지 히스토그램 서술자와 같은 영상 특징 정보를 추출할 수 있다.
동기화 처리부(326)는 추출한 시간 정보와 영상 특징 정보를 포함하는 동기화 요청 정보를 생성하여, 동기화 요청 정보를 네트워크를 통하여 동기화 정보 제공 서버(200)에 전달한다. 동기화 요청 정보는 특정 방송 프로그램의 시간 정보 및 영상 특징 정보가 추출된 방송 프레임에 대한 동기화 정보를 요청하는 정보이다.
동기화 정보 제공 서버(200)는 클라이언트 기기(300)에서 보내준 동기화 요청 정보에 포함된 시간 정보 및 영상 특징 정보에 기초하여 동기화 정보를 알려준다. 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보는 부가 정보 리스트에서 적어도 하나의 부가 정보 각각을 식별하기 위한 부가 정보 식별자 중 하나를 나타내는 정보일 수 있다.
동기화 화면 구성부(340)는 부가 정보 리스트를 이용하여 방송 프레임에 대한 부가 정보를 연관된 방송 프레임과 동기화하여 화면을 구성할 수 있다. 동기화 정보 화면 구성부(340)는 서버(200)로부터 얻은 부가 정보 리스트로부터 동기화 정보가 지시하는 부가 정보 식별자에 해당하는 부가 정보를 검색하여, 검색된 부가 정보를 동기화 요청 정보에 포함된 영상 특징 정보가 추출된 방송 프레임과 동기화하여 화면을 구성할 수 있다.
따라서, 부가 정보 리스트에 포함된 방송 프레임들의 시간 정보와 수신중인 방송 프로그램의 방송 프레임에 포함된 시간 정보가 불일치는 경우에도, 동기화 정보를 이용하여 수신중인 방송 프로그램의 방송 프레임과 대응되는 부가 정보가 동기화된 화면이 제공될 수 있다.
클라이언트 기기(300)는 방송 프로그램 및 방송 프로그램 정보를 제공하기 위한 화면을 출력하는 출력부(도시되지 않음)를 더 포함할 수 있다. 출력부는 스피커와 같은 오디오 출력부 및 영상을 표시하기 위한 디스플레이부를 포함할 수 있다.
도 4는 일 실시예에 따른 동기화 정보 제공 서버가 관리하는 메타 정보 및 부가 정보를 나타내는 도면이다.
도 4에 도시된 바와 같이, 동기화 정보 제공 서버(200)는 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 일정 간격으로 추출하고, 시간 정보 및 영상 특징 정보에 매핑된 부가 정보를 관리할 수 있다. 시간 6 내지 9에 해당되는 방송 프레임이 편집된 경우를 가정하면, 동기화의 기준으로 시간 정보만 이용하는 경우에는, 시간 10에 해당하는 방송 프레임이 원래 시간 6이 출력될 시점에 제공되며, 부가 정보는 시간 6에 해당하는 노랑 부가 정보가 제공되어 부가 정보가 연관된 방송 프레임과 적절히 동기화되지 않는다.
그러나, 일 실시예에 따르면, 클라이언트 기기(300)는 시간 6 및 시간 6에 대한 영상 특징 정보로 '파랑'를 포함하는 동기화 요청 정보를 동기화 정보 제공 서버(200)에 전송할 수 있다. 동기화 정보 제공 서버(200)는 시간 6에 대한 영상 특징 정보가 '노랑'으로 저장되어 있음을 발견하고, 클라이언트 기기(300)가 편집된 방송 프로그램을 시청하고 있는 것으로 결정할 수 있다.
이에 따라, 동기화 정보 제공 서버(200)는 시간 6을 포함하는 소정의 시간 구간 예를 들어 시간 1 내지 10 구간의 영상 특징 정보와 동기와 요청 정보에 포함된 영상 특징 정보 '파랑'을 각각 비교할 수 있다. 동기화 정보 제공 서버(200)는 비교 결과 유사도가 높은 시간 10의 부가 정보 '파랑'을 가리키는 부가 정보 식별 정보를 클라이언트 기기(300)에 동기화 정보로서 제공할 수 있다. 클라이언트 기기(300)는 동기화 정보를 이용하여 원래 시간 6에 출력되는 시간 10에 해당하는 방송 프레임을 출력할 때 시간 10의 방송 프레임에 연관된 부가 정보 '파랑'을 함께 포함하는 동기화 화면을 구성할 수 있다.
도 5는 일 실시예에 따른 동기화 정보 제공 서버가 클라이언트 기기에 제공하는 부가 정보 리스트를 나타내는 도면이다.
동기화 정보 제공 서버(200)가 클라이언트 기기(300)에 제공하는 부가 정보 리스트는 도 5에 도시된 바와 같이, 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 식별자를 포함할 수 있다.
클라이언트 기기(300)는 부가 정보 리스트에 저장된 시간 정보가 방송 프로그램의 시작 시간부터 경과 시간을 나타내는 경우, 시간 정보를 이용하여 현재 수신중이 특정 방송 프로그램에 대한 부가 정보를 제공할 수 있다. 예를 들어, 부가 정보 식별자 1에 해당하는 부가 정보는 뮤직 비디오이고, 방송 프로그램의 시작 시간부터 13분 57초이 경과시 제공되며 영상 특징 정보가 '빨강'인 방송 프레임이 제공될 때 함께 제공된다.
이때, 클라이언트 기기(300)는 해당 방송 프로그램이 편집되어 전송될 경우를 고려하여 일정 간격으로 동기화 정보 제공 서버(200)에 동기화 요청을 하고, 동기화 정보 제공 서버(200)로부터 동기화 정보를 수신받아 방송 프로그램이 편집된 경우에도 현재 방송 프레임에 연관된 부가 정보를 제공할 수 있다.
도 6은 일 실시예에 따른 동기화 정보 제공 서버의 동기화 정보 제공 방법을 나타내는 도면이다.
동기화 정보 제공 서버(200)는 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 메타 정보와 연관된 부가 정보를 관리한다(S 610). 메타 정보는 방송 프로그램별로 설정된 시간 간격마다 방송 프레임의 시간 정보 및 영상 특징 정보를 추출하여 생성될 수 있다.
클라이언트 기기(300)로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 수신한다(S 620). 동기화 요청 정보 수신 이전에, 동기화 정보 제공 서버(200)는 클라이 언트 기기에 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 식별자를 포함하는 부가 정보 리스트를 제공할 수 있다.
동기화 정보 제공 서버(200)는 동기화 요청 정보, 메타 정보 및 부가 정보를 이용하여, 클라이언트 기기에 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 제공한다(S 630). 동기화 정보 제공 서버(200)는 동기화 정보를 제공하기 위하여 특정 방송 프로그램의 메타 정보를 검색하여 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보 중에서 동기화 요청 정보에 포함된 영상 특징 정보와 유사하다고 결정된 영상 특징 정보에 매핑된 부가 정보의 식별 정보를 동기화 정보로서 클라이언트 기기(300)에 제공할 수 있다. 동기화 정보 제공 서버(200)는 설정된 시간 간격마다 수신되는 동기화 요청 정보에 응답하여, 동기화 요청 정보가 수신될때마다 수행될 수 있다.
도 7은 일 실시예에 따른 클라이언트 기기의 방송 프로그램에 대한 부가 정보 동기화 방법을 나타내는 도면이다.
클라이언트 기기(300)는 소정의 방송 프로그램의 수신이 시작되면, 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 부가 정보 식별자를 포함하는 부가 정보 리스트를 수신하여 저장할 수 있다.
클라이언트 기기(300)는 수신된 방송 신호로부터 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 추출하여 특정 방송 프로그램에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 생성한다(S 710).
클라이언트 기기(300)는 동기화 요청 정보를 동기화 정보 제공 서버(200)에 전송한다(S 720). 클라이언트 기기(300)는 동기화 정보 제공 서버(200)로부터 특정 방송 프로그램과 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보를 수신한다(S 730). 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보는 부가 정보 리스트에서 각각의 적어도 하나의 부가 정보를 식별하기 위한 부가 정보 식별자 중 하나를 나타낼 수 있다.
클라이언트 기기(300)는 동기화 정보를 이용하여 방송 프레임에 대한 부가 정보를 연관된 방송 프레임과 동기화한다(S 740). 이때, 동기화 정보가 지시하는 부가 정보 식별자에 해당하는 부가 정보를 이용하여, 방송 프레임에 대한 부가 정보를 연관된 방송 프레임과 동기화하여 동기화 화면을 구성할 수 있다.
일 실시예에 따르면, 방송 화면과 부가 정보 동기화시 시간 정보 외에 영상 특징 정보를 추가적으로 이용함으로써, 프로그램이 편집되어 시간 정보가 변경되어도 방송화면의 영상 특징 정보와 유사한 영상 특징 정보를 찾고, 해당 영상 특징 정보에 대한 부가 정보를 알려줄 수 있다. 따라서, 방송 프로그램별로 제작된 부가 정보 리스트를 이용하여 이후 해당 방송 프로그램이 편집되어 방송되는 경우에도, 방송 프로그램의 방송 프레임과 해당되는 부가 정보를 동기화하여 제공할 수 있다.
본 발명의 일 양상은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있다. 상기의 프로그램을 구현하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 디스크 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드로 저장되고 실행될 수 있다.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구범위에 기재된 내용과 동등한 범위 내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.
도 1은 일 실시예에 따른 클라이언트 기기가 방송 제공 장치 및 동기화 정보 제공 서버로부터 방송 프로그램을 제공받는 환경을 나타내는 도면이다.
도 2는 일 실시예에 따른 동기화 정보 제공 서버의 구성을 나타내는 도면이다.
도 3은 일 실시예에 따른 클라이언트 기기의 구성을 나타내는 도면이다.
도 4는 일 실시예에 따른 동기화 정보 제공 서버가 관리하는 메타 정보 및 부가 정보를 나타내는 도면이다.
도 5는 일 실시예에 따른 동기화 정보 제공 서버가 클라이언트 기기에 제공하는 부가 정보 리스트를 나타내는 도면이다.
도 6은 일 실시예에 따른 동기화 정보 제공 서버의 동기화 정보 제공 방법을 나타내는 도면이다.
도 7은 일 실시예에 따른 클라이언트 기기의 방송 프로그램에 대한 부가 정보 동기화 방법을 나타내는 도면이다.

Claims (20)

  1. 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 상기 메타 정보와 연관된 부가 정보를 관리하는 부가 정보 관리부; 및
    클라이언트 기기로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보가 수신되면, 상기 동기화 요청 정보, 상기 메타 정보 및 상기 부가 정보를 이용하여, 특정 방송 프로그램의 메타 정보 중에서 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보를 결정하고, 상기 특정 방송 프로그램의 메타 정보 중에서 상기 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보와 상기 동기화 요청 정보에 포함된 영상 특징 정보를 각각 비교하고, 비교 결과 유사하다고 결정된 영상 특징 정보에 대응하는 부가 정보의 식별 정보를 상기 클라이언트 기기에 상기 특정 방송 프로그램과 상기 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보로 제공하는 동기화 관리부를 포함하는 동기화 정보 제공 서버.
  2. 제1항에 있어서,
    상기 부가 정보 관리부는 EPG 정보에 기초하여 방송 프로그램을 녹화하면서 방송 프로그램별 메타 정보를 생성하는 동기화 정보 제공 서버.
  3. 제1항에 있어서,
    상기 부가 정보 관리부는 방송 프로그램별로 설정된 시간 간격마다 방송 프레임의 시간 정보 및 영상 특징 정보를 추출하여 상기 메타 정보를 생성하는 동기화 정보 제공 서버.
  4. 삭제
  5. 제1항에 있어서,
    상기 동기화 관리부는 클라이언트 기기에 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 식별자를 포함하는 부가 정보 리스트를 제공하는 동기화 정보 제공 서버.
  6. 제1항에 있어서,
    상기 시간 정보는 PSIP의 STT의 정보인 동기화 정보 제공 서버.
  7. 제1항에 있어서,
    상기 영상 특징 정보는 MPEG-7의 색상 레이아웃 서술자 및 에지 히스토그램 서술자 중 적어도 하나인 동기화 정보 제공 서버.
  8. 제1항에 있어서,
    상기 동기화 관리부는 설정된 시간 간격마다 수신되는 동기화 요청 정보에 응답하여, 상기 동기화 요청 정보가 수신될때마다 상기 동기화 정보를 제공하는 동기화 정보 제공 서버.
  9. 삭제
  10. 삭제
  11. 삭제
  12. 방송 프로그램별로 방송 프로그램을 구성하는 방송 프레임의 시간 정보 및 영상 특징 정보를 포함하는 메타 정보 및 상기 메타 정보와 연관된 부가 정보를 관리하는 단계;
    클라이언트 기기로부터 특정 방송 프로그램의 적어도 하나의 방송 프레임에 대한 시간 정보 및 영상 특징 정보를 포함하는 동기화 요청 정보를 수신하는 단계;
    상기 동기화 요청 정보, 상기 메타 정보 및 상기 부가 정보를 이용하여, 특정 방송 프로그램의 메타 정보 중에서 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보를 결정하는 단계;
    상기 특정 방송 프로그램의 메타 정보 중에서 상기 동기화 요청 정보에 포함된 시간 정보를 포함하는 소정의 구간의 복수의 시간 정보에 연관된 복수의 영상 특징 정보와 상기 동기화 요청 정보에 포함된 영상 특징 정보를 각각 비교하는 단계; 및
    비교 결과 유사하다고 결정된 영상 특징 정보에 대응하는 부가 정보의 식별 정보를 상기 클라이언트 기기에 상기 특정 방송 프로그램과 상기 특정 방송 프로그램에 연관된 부가 정보를 동기화시키기 위한 동기화 정보로 제공하는 단계를 포함하는 동기화 정보 제공 방법.
  13. 제12항에 있어서,
    상기 부가 정보를 관리하는 단계는 EPG 정보에 기초하여 방송 프로그램을 녹화하면서 방송 프로그램별 메타 정보를 생성하는 단계를 포함하는 동기화 정보 제공 방법.
  14. 제12항에 있어서,
    상기 부가 정보를 관리하는 단계는 방송 프로그램별로 설정된 시간 간격마다 방송 프레임의 시간 정보 및 영상 특징 정보를 추출하여 메타 정보를 생성하는 단계를 포함하는 동기화 정보 제공 방법.
  15. 삭제
  16. 제12항에 있어서,
    상기 동기화 정보를 제공하는 단계 이전에,
    클라이언트 기기에 방송 프로그램 식별 정보, 동기화될 방송 프레임의 시간 정보 및 영상 특징 정보와 매핑된 적어도 하나의 부가 정보 및 각각의 적어도 하나의 부가 정보를 식별하기 위한 식별자를 포함하는 부가 정보 리스트를 제공하는 단계를 더 포함하는 동기화 정보 제공 방법.
  17. 제12항에 있어서,
    상기 동기화 정보를 제공하는 단계는, 설정된 시간 간격마다 수신되는 동기화 요청 정보에 응답하여, 상기 동기화 요청 정보가 수신될때마다 수행되는 동기화 정보 제공 방법.
  18. 삭제
  19. 삭제
  20. 삭제
KR1020090018015A 2009-03-03 2009-03-03 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법 KR101599465B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020090018015A KR101599465B1 (ko) 2009-03-03 2009-03-03 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법
US12/706,254 US8589995B2 (en) 2009-03-03 2010-02-16 Server and method for providing synchronization information, client apparatus and method for synchronizing additional information with broadcast program
US13/742,969 US20130145397A1 (en) 2009-03-03 2013-01-16 Server and method for providing synchronization information, client apparatus and method for synchronizing additional information with broadcast program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090018015A KR101599465B1 (ko) 2009-03-03 2009-03-03 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법

Publications (2)

Publication Number Publication Date
KR20100099491A KR20100099491A (ko) 2010-09-13
KR101599465B1 true KR101599465B1 (ko) 2016-03-04

Family

ID=42679400

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090018015A KR101599465B1 (ko) 2009-03-03 2009-03-03 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법

Country Status (2)

Country Link
US (2) US8589995B2 (ko)
KR (1) KR101599465B1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10699469B2 (en) 2009-02-03 2020-06-30 Calgary Scientific Inc. Configurable depth-of-field raycaster for medical imaging
CA2715769A1 (en) 2009-09-25 2011-03-25 Calgary Scientific Inc. Level set segmentation of volume data
KR101700365B1 (ko) * 2010-09-17 2017-02-14 삼성전자주식회사 미디어 컨텐츠 관련 정보 제공 방법, 이 방법을 수행할 수 있는 디바이스와 서버 및 저장 매체
CN102222227B (zh) * 2011-04-25 2013-07-31 中国华录集团有限公司 基于视频识别与提取影片图像的系统
US10721506B2 (en) * 2011-06-29 2020-07-21 Calgary Scientific Inc. Method for cataloguing and accessing digital cinema frame content
US20130097116A1 (en) * 2011-10-17 2013-04-18 Research In Motion Limited Synchronization method and associated apparatus
JP6071184B2 (ja) * 2011-10-26 2017-02-01 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 受信装置、受信方法、プログラム、及び情報処理システム
KR102116679B1 (ko) * 2012-03-05 2020-05-29 엘지전자 주식회사 영상 표시 장치 및 그 동작 방법
FR3010606A1 (fr) * 2013-12-27 2015-03-13 Thomson Licensing Procede de synchronisation de metadonnees avec un document audiovisuel en utilisant des parties de trames et dispositif de production de telles metadonnees
KR101868062B1 (ko) * 2014-08-22 2018-06-18 씨제이씨지브이 주식회사 다면 상영 환경에서 메인 컨텐츠의 컨텐츠 정보와 호환하여 보조 컨텐츠를 재생하는 컨텐츠 통합재생장치 및 통합재생방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004234613A (ja) * 2002-12-02 2004-08-19 Nec Corp 映像記述システムおよび方法、映像識別システムおよび方法
KR100864483B1 (ko) 2007-08-29 2008-10-20 에스케이 텔레콤주식회사 방송 컨텐츠와 부가 정보 동기화 시스템 및 그 방법
US20100162303A1 (en) 2008-12-23 2010-06-24 Cassanova Jeffrey P System and method for selecting an object in a video data stream

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002334092A (ja) 2001-05-11 2002-11-22 Hitachi Ltd 情報関連付け方法、情報閲覧装置、情報登録装置、情報検索装置、課金方法、およびプログラム
KR100429806B1 (ko) * 2002-01-07 2004-05-03 삼성전자주식회사 디지털 ｔｖ 프로그램에 연관된 부가 정보를 표시하는방법 및그 장치
US20050228849A1 (en) * 2004-03-24 2005-10-13 Tong Zhang Intelligent key-frame extraction from a video
US20070136773A1 (en) * 2005-12-14 2007-06-14 O'neil Douglas Systems and methods for providing television services using implicit content to indicate the availability of additional content
JP2007251743A (ja) 2006-03-17 2007-09-27 Daikin Ind Ltd 放送情報管理方法、放送情報管理システム及び放送情報管理プログラム
JP4224095B2 (ja) 2006-09-28 2009-02-12 株式会社東芝 情報処理装置、情報処理プログラムおよび情報処理システム
JP2008129884A (ja) 2006-11-22 2008-06-05 Nec Corp 情報検索システム及びその方法並びにそれに用いる放送受信機
US7962460B2 (en) * 2006-12-01 2011-06-14 Scenera Technologies, Llc Methods, systems, and computer program products for determining availability of presentable content via a subscription service
JP2008160337A (ja) 2006-12-22 2008-07-10 Hitachi Ltd コンテンツ連動型情報提示装置および提示方法
KR100879674B1 (ko) * 2007-01-08 2009-01-21 에스케이 텔레콤주식회사 방송통신 프로그램의 화면비교에 의한 동기화면 설정시스템 및 장치 및 방법
KR100958653B1 (ko) * 2007-08-07 2010-05-20 한국전자통신연구원 디지털 방송 송수신 장치 및 방법
JP2008135045A (ja) 2007-12-20 2008-06-12 Hitachi Ltd 情報関連付け方法
US20090276807A1 (en) * 2008-05-01 2009-11-05 Alcatel Lucent Facilitating indication of metadata availbility within user accessible content
US9049477B2 (en) * 2008-11-13 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for managing media content

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004234613A (ja) * 2002-12-02 2004-08-19 Nec Corp 映像記述システムおよび方法、映像識別システムおよび方法
KR100864483B1 (ko) 2007-08-29 2008-10-20 에스케이 텔레콤주식회사 방송 컨텐츠와 부가 정보 동기화 시스템 및 그 방법
US20100162303A1 (en) 2008-12-23 2010-06-24 Cassanova Jeffrey P System and method for selecting an object in a video data stream

Also Published As

Publication number Publication date
US8589995B2 (en) 2013-11-19
US20130145397A1 (en) 2013-06-06
US20100229201A1 (en) 2010-09-09
KR20100099491A (ko) 2010-09-13

Similar Documents

Publication Publication Date Title
KR101599465B1 (ko) 동기화 정보 제공 서버 및 방법과, 클라이언트 기기 및 방송 프로그램과 부가 정보의 동기화 방법
JP6294238B2 (ja) 映像表示装置及びその動作方法
JP6290935B2 (ja) 映像表示装置及びその動作方法
JP6193993B2 (ja) デジタルサービス信号処理方法及び装置
CN103975602B (zh) 广播服务接收方法和广播服务接收装置
US9967626B2 (en) Video display apparatus and operating method thereof
KR100972792B1 (ko) 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
KR101838084B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US9516086B2 (en) Transmitting device, receiving device, and transceiving method thereof
KR101769381B1 (ko) 방송 신호 송수신 방법 및 그를 이용한 방송 수신 장치
CA2970463C (en) Receiver, reception method, transmitter, and transmission method
KR20070043372A (ko) 홈단말에서 실시간 필터링된 방송 비디오 관리 시스템 및그 방법
JP2006270869A (ja) 関連情報取得システム、管理装置、関連情報取得方法、関連情報送信プログラム。
CN115766676A (zh) 促进与内容相关的动作的系统、方法和数据存储器
CN109327706A (zh) 基于dtmb的直播节目信号接收方法及系统
CN104012107B (zh) 处理与广播节目有关的双向服务的装置和方法
CN105812961B (zh) 自适应流媒体处理方法及装置
US8769562B2 (en) Digital broadcast method, data receiving device, and data transmitting device
CN103905838B (zh) 一种终端播放dvb业务的方法及其系统
KR20140132507A (ko) 선취득한 psi를 사용하는 채널 변경 방법 및 장치
US20140068650A1 (en) Display device, set-top box and method of determining stereoscopic video content
TWI513287B (zh) 媒體自動剪輯裝置、媒體自動剪輯方法、媒體播送方法與其播送系統
JP2010109487A (ja) デジタル放送受信装置及びデジタル放送受信方法
KR20140099146A (ko) 다중 영상 기반 방송 서비스를 위한 다중 영상의 기준 ｐｃｒ 결정 방법 및 그 장치
KR101473338B1 (ko) 녹화된 ｔｓ파일의 ｅｐｇ 인지 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190130

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200130

Year of fee payment: 5