KR101486545B1 - Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 - Google Patents

Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 Download PDF

Info

Publication number
KR101486545B1
KR101486545B1 KR20130004563A KR20130004563A KR101486545B1 KR 101486545 B1 KR101486545 B1 KR 101486545B1 KR 20130004563 A KR20130004563 A KR 20130004563A KR 20130004563 A KR20130004563 A KR 20130004563A KR 101486545 B1 KR101486545 B1 KR 101486545B1
Authority
KR
South Korea
Prior art keywords
image
analysis
search
broadcast
unit
Prior art date
Application number
KR20130004563A
Other languages
English (en)
Other versions
KR20140092152A (ko
Inventor
양병석
Original Assignee
네이버 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 네이버 주식회사 filed Critical 네이버 주식회사
Priority to KR20130004563A priority Critical patent/KR101486545B1/ko
Publication of KR20140092152A publication Critical patent/KR20140092152A/ko
Application granted granted Critical
Publication of KR101486545B1 publication Critical patent/KR101486545B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection

Abstract

본 발명은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상에 포함된 각종 정보를 다양한 방법으로 검색하기 위한 TV 애플리케이션을 이용한 방송 영상 검색 장치에 관한 것으로, 특히 TV를 통해 방송 중인 영상에 대한 검색 요청에 따라 캡처된 방송 영상을 수신하는 캡처 정보 수신부; 상기 캡처 정보 수신부를 통해 수신된 캡처된 방송 영상에 대해 적어도 하나의 분석 방법에 따라 이미지 분석을 수행하는 이미지 분석부; 상기 이미지 분석부의 분석 결과에 따라 방송 영상 관련 정보에 대한 검색을 수행하는 분석 결과 처리부; 및 상기 방송 영상 관련 정보에 대한 검색 결과를 화면상에 표시하도록 처리하는 분석 결과 표시부;를 포함한다.

Description

ＴＶ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체{APPARATUS, METHOD AND COMPUTER READABLE RECORDING MEDIUM FOR PROVIDING A SEARCH ABOUT A BROADCASTING IMAGE USING THE APPLICATION OF A TELEVISION}
본 발명은 TV를 통해 출력되는 방송 영상에 대한 검색을 제공하기 위한 장치 등에 관한 것으로, 보다 상세하게는 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상에 포함된 각종 정보를 다양한 방법으로 검색하기 위한 TV 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체에 관한 것이다.
최근 기술의 발전으로 TV는 과거 단순히 수신된 공중파 또는 케이블 방송 신호만을 디스플레이하는 기능에서 벗어나, 사용자와의 상호 통신(interactive) 기능 및 인터넷을 이용한 각종 부가서비스들을 제공하고 있다. 예컨대, 인터넷 연결을 통해 PC 또는 서버 등과 상호 연동되는 IPTV를 비롯하여, 최근에는 스마트폰과의 연동까지 지원하는 스마트 TV가 등장하였다. 상기 스마트 TV의 예로는 애플 TV, 구글 TV 등이 있으며, 기존의 전통적인 TV에 사용자와의 쌍방향 통신 기능 및 인터넷을 이용한 각종 부가 기능들이 추가된다.
또한, 디지털 방송 수신을 위해서는 단순히 TV 뿐만 아니라 셋톱박스(Set top box; STB)라는 장치가 추가로 필요하다. 셋톱박스라 함은, TV에 연결되어, 외부에서 들어오는 신호를 받아 적절히 변환하여 TV로 그 내용을 표시해 주는 장치를 말한다. 셋톱박스는 일반적으로 주문형 비디오(Video on demand; VOD), 홈 쇼핑, 네트워크 게임 등 차세대 쌍방향 멀티미디어 통신 서비스(이른바 대화형 TV)를 이용하는 데 필요한 가정용 통신 단말기로서 TV 세트 위에 놓고 이용하는 상자라는 뜻으로,‘가입자 신호 변환 장치’라고도 한다. 쌍방향 TV나 전화, 회사의 영상 전송 서비스 등의 망과 접속되며, 가정에서는 TV 등에 연결하여 이용한다.
셋톱박스는 전화 회사나 종합 유선 방송(CATV)국에 설치되어 있는 비디오 서버 등과 통신하는 외에, 기본 기능으로 영상 신호의 수신 및 변환 기능을 구비한다. 또한, 전화와 PC 통신 등 데이터 통신 서비스도 동시에 이용할 수 있도록 전화 인터페이스나 개인용 컴퓨터(PC)와의 접속 인터페이스를 갖는 것 등 다양한 규격이 검토되고 있다. 이에 따라, 대화형 TV 시장을 선점하기 위해 통신, 컴퓨터, 가전제품 제조업체들이 셋톱박스의 제품화 및 판매 경쟁을 벌이고 있다.
한편, 셋톱박스는 반드시 동조기(튜너)를 내장하고 있지 않아도 되며, 외부 신호를 주는 장치로는 이더넷(ethernet) 케이블, 위성파 수신 또는 지상파 수신 안테나, 동축 케이블, 전화선, 아날로그 VHF(Very High Frequency) 혹은 UHF(Ultra High Frequency) 안테나 등이 있다. 이를 통해 받을 수 있는 내용물로는 영상, 음성, 인터넷 웹 페이지, 게임 등이 될 수 있다.
이와 같이, 인터넷과 연동되는 셋톱박스를 통해 TV에서는 방송 정보뿐만 아니라 다양한 정보의 서비스가 제공될 수 있으며, 사용자와의 쌍방향 통신을 통해 서비스의 선택 및 제어가 가능해진다. 이러한, 사용자의 선택 신호 입력을 용이하게 하기 위해서는 리모콘(remote controller)의 기능이 다양하게 확장될 필요성이 있으며, 편리한 인터페이스를 갖추어야 될 필요성이 요구되고 있다.
또한, 이러한 셋톱박스의 기능이 내장된 스마트 TV는 지상파 방송시청은 물론 인터넷에 연결되어 VOD(Video- On-Demand), 게임, 영상통화, 앱 활용 등 컴퓨터 기능이 가능하다. 한편, 일반 TV로도 상술한 셋톱박스 연결을 통해 스마트 TV 기능을 활용할 수도 있으며, TV 교체 주기가 긴 점 등을 고려할 때 스마트 TV와 셋톱박스 시장은 공존하여 발전하고 있다.
한편, 최근에는 TV를 통해 현재 방송되는 영상에 대한 각종 정보들을 제공하기 위한 방법들이 제안되고 있다. 예컨대, 디스플레이되고 있는 방송 영상에서 화면의 특정 영역을 선택하면, 해당 영역과 링크된 미리 저장된 정보에 따라 선택된 영역의 이미지(예컨대, 상품, 캐릭터 등)와 관련된 정보를 표시해 주는 방법들이 개발되고 있다.
그러나, 이러한 방법은 각 영상에 대해 미리 설정된 정보들만을 제공해준다는 점에서 정보 제공의 한계가 있다. 또한, 각 영상에 대한 정보 매핑을 위해 복잡한 영상 처리를 필요로 하며, 모든 영상에 대한 부가 정보들이 삽입되어야 하기 때문에 제공될 정보의 양이 많아 네트워크 부하를 가중시키는 문제점이 있다.
또한, TV에서 출력되는 방송과 관련된 정보를 제공하는 방법으로서 대한민국공개특허공보 제2009-0073944호 "방송 컨텐츠 출력장치와 방송 컨텐츠 관련 검색어(또는 질문) 순위 정보 제공 방법 및 시스템과 이를 위한 기록매체(주식회사 비즈모델라인)"(문헌 1)에는 통신망 상의 서버로부터 현재 출력중인 방송 컨텐츠 관련 검색어 순위 정보를 수신하여 화면상의 일정 영역에 출력되도록 처리하는 방송 컨텐츠 관련 검색어 순위 정보 제공 방법을 개시한다.
그러나, 상기 방법은 단순히 방송과 관련된 검색어 순위만을 제공할 뿐 실제 방송과 관련된 검색 결과를 제공하지 못하고 있다. 뿐만 아니라, 방송과 관련된 검색어는 미리 설정된 단어들이기 때문에 사용자가 방송 시청 중 얻고자 하는 관련 정보와 직접적인 관련이 없을 수도 있다.
또한, 최근에는 TV에서 출력되는 광고 영상 등에 검색창(예컨대, 그린 윈도우) 형태로 검색어가 표시되거나, QR(Quick Response) 코드가 영상 내에 표시되는 경우가 많다. 그러나, 이를 통해 관련 정보를 얻고자 하는 경우, 별도의 단말에서 해당 검색어를 입력하거나, 별도의 단말(예컨대, 스마트폰)에서 방송 영상 내의 QR 코드를 직접 스캔하여야 하는 불편함이 있다.
따라서, TV를 통해 방송 중인 영상에 대해 별도의 단말을 통하지 않고서도 다각적으로 관련 정보를 실시간으로 검색할 수 있는 방법의 필요성이 요구되고 있는 실정이다.
[문헌 1] 대한민국공개특허공보 제2009-0073944호 방송 컨텐츠 출력장치와 방송 컨텐츠 관련 검색어(또는 질문) 순위 정보 제공 방법 및 시스템과 이를 위한 기록매체(주식회사 비즈모델라인) 2009.07.03
본 발명의 목적은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상을 캡처하고, 캡처한 영상에 대해 미리 설정된 복수의 검색 방법들 중 미리 설정된 순서에 따라 특정 검색 방법이 적용되는지 여부를 순차적으로 분석함으로써 효과적으로 방송 영상에 포함된 정보를 검색할 수 있는 TV 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체를 제공함에 있다.
또한, 본 발명의 다른 목적은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상을 캡처하고, 캡처한 영상에 대해 QR 코드가 포함되어 있는지 여부를 분석하고, QR 코드가 포함되어 있을 경우 QR 코드를 스캔 처리하는 TV 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체를 제공함에 있다.
또한, 본 발명의 또 다른 목적은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상을 캡처하고, 캡처한 영상에 대해 검색창 표시가 포함되어 있는지 여부를 분석하고, 검색창 표시가 포함되어 있을 경우 검색창 내의 검색어를 키워드로 하여 자동 검색 처리하는 TV 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체를 제공함에 있다.
또한, 본 발명의 또 다른 목적은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상을 캡처하고, 캡처한 영상에 포함된 얼굴을 인식하고, 인식한 얼굴에 대한 정보를 데이터베이스를 통해 검색하는 TV 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체를 제공함에 있다.
상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특유의 효과를 달성하기 위한, 본 발명의 특징적인 구성은 하기와 같다.
본 발명의 일 측면에 따르면, TV 애플리케이션을 이용한 방송 영상 검색 장치는, TV를 통해 방송 중인 영상에 대한 검색 요청에 따라 캡처된 방송 영상을 수신하는 캡처 정보 수신부; 상기 캡처 정보 수신부를 통해 수신된 캡처된 방송 영상에 대해 적어도 하나의 분석 방법에 따라 이미지 분석을 수행하는 이미지 분석부; 상기 이미지 분석부의 분석 결과에 따라 방송 영상 관련 정보에 대한 검색을 수행하는 분석 결과 처리부; 및 상기 방송 영상 관련 정보에 대한 검색 결과를 화면상에 표시하도록 처리하는 분석 결과 표시부;를 포함한다.
바람직하게는, 상기 이미지 분석부는, 상기 캡처된 방송 영상 내에 QR 코드가 포함되어 있는지를 분석하고, QR 코드가 포함되어 있을 경우, 상기 QR 코드를 스캔하는 QR 코드 분석부;를 포함한다.
바람직하게는, 상기 분석 결과 처리부는, 상기 QR 코드 분석부를 통해 스캔된 QR 코드 정보에 따라, 상기 QR 코드 내에 포함된 네트워크상의 주소로 접속을 요청하는 URL 접속 요청부;를 포함한다.
바람직하게는, 상기 이미지 분석부는, 상기 캡처된 방송 영상 내에 검색창 이미지가 포함되어 있는지를 분석하고, 검색창 이미지가 포함되어 있을 경우, 상기 검색창 이미지 내의 검색어를 키워드로 추출하는 검색창 분석부;를 포함한다.
바람직하게는, 상기 분석 결과 처리부는, 상기 검색창 분석부를 통해 추출된 키워드로 정보 검색을 수행하는 정보 검색부;를 포함한다.
바람직하게는, 상기 이미지 분석부는, 상기 캡처된 방송 영상 내에 얼굴 이미지가 포함되어 있는지를 분석하고, 얼굴 이미지가 포함되어 있을 경우, 상기 포함된 얼굴 이미지를 추출하는 얼굴 인식부;를 포함한다.
바람직하게는, 상기 분석 결과 처리부는, 상기 얼굴 인식부를 통해 추출된 얼굴 이미지로 해당하는 인물에 대한 정보 검색을 수행하는 이미지 검색부;를 포함한다.
바람직하게는, 상기 이미지 분석부는, 복수의 각 이미지 분석 방법에 따른 복수의 분석부들을 포함하며, 상기 복수의 분석부들이 미리 설정된 순서에 따라 순차적으로 이미지 분석을 수행한다.
바람직하게는, 상기 이미지 분석부는, 복수의 분석부들이 순차적으로 이미지 분석을 수행할 때, 현재 수행하는 이미지 분석 방법에 따른 분석 결과가 존재할 경우, 다음 분석부의 수행을 중단한다.
바람직하게는, 상기 분석 결과 처리부는, 통신 네트워크를 통해 상기 TV 외부의 서비스 장치로 분석 결과를 전송함으로써 검색을 요청하고, 상기 서비스 장치를 통해 검색 결과를 수신한다.
본 발명의 다른 측면에 따르면, TV 애플리케이션을 이용한 방송 영상 검색 방법은, TV 애플리케이션을 이용한 방송 영상 검색 방법으로서, 방송 영상 검색 장치에서 수행되는 각 단계가, TV를 통해 방송 중인 영상에 대한 검색 요청에 따라 캡처된 방송 영상을 수신하는 단계; 상기 수신된 캡처된 방송 영상에 대해 적어도 하나의 분석 방법에 따라 이미지 분석을 수행하는 단계; 상기 이미지 분석의 결과에 따라 방송 영상 관련 정보에 대한 검색을 수행하는 단계; 및 상기 방송 영상 관련 정보에 대한 검색 결과를 화면상에 표시하도록 처리하는 단계;를 포함한다.
바람직하게는, 상기 이미지 분석을 수행하는 단계는, 상기 캡처된 방송 영상 내에 QR 코드가 포함되어 있는지를 분석하는 단계; 및 상기 분석 결과 QR 코드가 포함되어 있을 경우, 상기 QR 코드를 스캔하는 단계;를 포함한다.
바람직하게는, 상기 검색을 수행하는 단계는, 상기 스캔된 QR 코드 정보에 따라, 상기 QR 코드 내에 포함된 네트워크상의 주소로 접속을 요청하는 단계;를 포함한다.
바람직하게는, 상기 이미지 분석을 수행하는 단계는, 상기 캡처된 방송 영상 내에 검색창 이미지가 포함되어 있는지를 분석하는 단계; 및 상기 분석 결과 검색창 이미지가 포함되어 있을 경우, 상기 검색창 이미지 내의 검색어를 키워드로 추출하는 단계;를 포함한다.
바람직하게는, 상기 검색을 수행하는 단계는, 상기 추출된 키워드로 정보 검색을 수행하는 단계;를 포함한다.
바람직하게는, 상기 이미지 분석을 수행하는 단계는, 상기 캡처된 방송 영상 내에 얼굴 이미지가 포함되어 있는지를 분석하는 단계; 및 상기 분석 결과 얼굴 이미지가 포함되어 있을 경우, 상기 포함된 얼굴 이미지를 추출하는 단계;를 포함한다.
바람직하게는, 상기 검색을 수행하는 단계는, 상기 추출된 얼굴 이미지로 해당하는 인물에 대한 정보 검색을 수행하는 단계;를 포함한다.
바람직하게는, 상기 이미지 분석을 수행하는 단계는, 복수의 각 이미지 분석 방법에 따른 복수의 분석 단계들을 포함하며, 상기 복수의 분석 단계들이 미리 설정된 순서에 따라 순차적으로 이미지 분석을 수행한다.
바람직하게는, 상기 이미지 분석을 수행하는 단계는, 복수의 분석 단계들을 순차적으로 수행할 때, 현재 수행하는 이미지 분석 방법에 따른 분석 결과가 존재할 경우, 다음 분석 단계의 수행을 중단한다.
바람직하게는, 상기 검색을 수행하는 단계는, 통신 네트워크를 통해 상기 TV 외부의 서비스 장치로 분석 결과를 전송함으로써 검색을 요청하는 단계; 및 상기 서비스 장치를 통해 검색 결과를 수신하는 단계;를 포함한다.
한편, 상기 TV 애플리케이션을 이용한 방송 영상 검색 방법을 제공받기 위한 정보는 서버 컴퓨터로 읽을 수 있는 기록 매체에 저장될 수 있다. 이러한 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있도록 프로그램 및 데이터가 저장되는 모든 종류의 기록매체를 포함한다. 그 예로는, 롬(Read Only Memory), 램(Random Access Memory), CD(Compact Disk), DVD(Digital Video Disk)-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 케리어 웨이브(예를 들면, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함된다. 또한, 이러한 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
상술한 바와 같이, 본 발명에 따르면 TV를 통해 방송 중인 영상에 대해 미리 설정된 영상 관련 정보가 없을 경우에도 영상 분석을 통해 영상과 관련된 정보를 효과적으로 제공할 수 있는 장점이 있다.
또한, 본 발명에 따르면, TV를 통해 방송 중인 영상에 검색창 이미지 및 검색어가 포함되어 있을 경우, 별도의 단말에서 검색을 수행하지 않더라도 TV에 설치된 애플리케이션을 통해 편리하게 실시간으로 검색할 수 있는 장점이 있다.
또한, 본 발명에 따르면, TV를 통해 방송 중인 영상에서 QR 코드 이미지가 포함되어 있을 경우, 별도의 단말에서 QR 코드를 스캔하지 않더라도 TV에 설치된 애플리케이션을 통해 편리하게 실시간으로 QR 코드 정보를 스캔하여 실행할 수 있는 장점이 있다.
또한, 본 발명에 따르면, TV를 통해 방송 중인 영상에서 사람 얼굴에 대한 이미지가 포함되어 있을 경우, 얼굴 인식을 통해 데이터베이스에 저장된 얼굴 이미지와 비교함으로써 인식된 이미지와 관련된 정보를 제공할 수 있는 장점이 있다.
도 1은 본 발명의 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 장치를 포함하는 전체 시스템을 나타내는 도면이다.
도 2는 본 발명의 다른 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 장치를 포함하는 전체 시스템을 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 애플리케이션이 설치된 스마트 TV의 세부 구성을 나타내는 블록도이다.
도 4는 본 발명의 실시예에 따른 응용 프로그램 처리부의 세부 구성을 나타내는 블록도이다.
도 5는 본 발명의 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 절차를 나타내는 흐름도이다.
도 6은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 QR 코드 분석 화면을 나타내는 도면이다.
도 7은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 검색창 분석 화면을 나타내는 도면이다.
도 8은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 얼굴 분석 화면을 나타내는 도면이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는 적절하게 설명된다면 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
본 발명은 스마트 TV와 같은 애플리케이션이 설치된 TV에서 출력되고 있는 방송 영상을 캡처하고, 캡처한 영상을 분석함으로써 방송 영상과 관련된 정보를 제공하는 TV 애플리케이션을 이용한 방송 영상 검색 장치를 개시한다.
이때, 본 발명의 실시예에 따라 방송 영상 검색을 위해 미리 설정된 복수의 검색 방법을 이용한다. 예컨대, 영상 내에 QR 코드가 포함되어 있는지 여부를 분석하고, QR 코드가 포함되어 있을 경우 해당 QR 코드를 스캔함으로써 해당 방송 영상과 관련된 정보들을 검색할 수 있다. 또한, 영상 내에 검색창이 포함되어 있는지 여부를 분석하고, 검색창이 포함되어 있을 경우 해당 검색창 내에 포함된 검색어로 검색을 수행함으로써 해당 방송 영상과 관련된 정보들을 검색할 수 있다. 또한, 영상 내에 사람의 얼굴이 포함되어 있는지 여부를 분석하고, 사람의 얼굴이 포함되어 있을 경우 데이터베이스에 저장된 얼굴과 유사도를 비교함으로써 해당 방송 영상과 관련된 정보들을 검색할 수 있다.
한편, 본 발명의 실시예에 따라 상기 예에 따른 검색 방법들을 순차적으로 수행하도록 구현할 수 있다. 예컨대, 먼저 영상 내에 QR 코드가 포함되어 있는지 여부를 분석하고, QR 코드가 포함되어 있지 않을 경우, 검색창이 포함되어 있는지 여부를 분석하고, 검색창이 포함되어 있지 않을 경우 사람 얼굴이 포함되어 있는지 여부를 분석하도록 구현할 수도 있다.
한편, 후술하는 설명에서의 'TV'는 어떠한 종류의 형태와 기능을 갖는 TV도 본 발명에 적용이 가능하며, 이하 설명에서는 소정의 애플리케이션이 설치되고 인터넷과의 통신 기능이 구비된 스마트 TV를 예를 들어 설명하기로 한다. 한편, 스마트 TV가 아닌 일반 TV에 셋톱박스가 연결된 형태의 시스템에도 본 발명의 적용이 가능하며, 본 발명에 따라 스마트 TV 내에서 구현되는 기능의 전부 또는 일부가 셋톱박스 내에서 기능하도록 구현될 수 있다. 또한, 후술하는 설명에서는 발명의 이해를 돕기 위해 TV를 스마트 TV로 설명하고 있으나, 본 발명이 스마트 TV에 한정되는 것은 아니며, 소정의 어플리케이션이 설치 가능한 어떠한 방식의 TV에도 적용이 가능하다.
또한, 본 발명의 명세서에서는 방송 영상 내에 포함되어 방송 관련 정보 검색을 위해 식별하는 코드로서 QR(Quick Response) 코드를 예로 들어 설명한다. 그러나, 본 발명이 QR 코드에 한정되는 것은 아니며, 바코드, QR코드, 컬러짚 코드, 스마트 태그, 데이터 매트릭스(Data Matrix) 등을 포함하여 유사 또는 동일한 기능을 수행할 수 있는 어떠한 코드에도 본 발명의 적용이 가능하다.
또한, 본 발명의 명세서에서, 용어 '애플리케이션(application)' 또는 '앱(App)'은 스마트폰 또는 스마트 TV에 설치되는 응용 프로그램을 의미하며, 상기 애플리케이션을 스마트 TV에 설치하고 실행함으로써 본 발명의 실시예에 따른 각 기능들이 수행된다. 한편, 본 발명은 본 발명의 실시예에 따른 각종 기능들을 제공하기 위해 전용으로 제작된 애플리케이션을 사용할 수도 있으며, 다른 특정 애플리케이션에 본 발명에 따른 기능을 포함하여 구현할 수도 있다. 또한, 상기 본 발명이 적용되는 애플리케이션은 스마트 TV 구동을 위한 애플리케이션이 될 수도 있으며, 상기 애플리케이션 실행 시 사용자 정보(예컨대, 아이디(ID))와 인증 정보(예컨대, 패스워드)를 입력함으로써 로그인한 후 서비스를 제공할 수도 있다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
먼저, 도 1 내지 도 4를 참조하여 본 발명의 실시예에 따른 시스템 및 장치의 구조를 설명하며, 다음으로 도 5를 참조하여 본 발명의 실시예에 따른 절차를 상세히 설명한다.
TV 애플리케이션을 이용한 방송 영상 검색 장치
도 1은 본 발명의 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 장치를 포함하는 전체 시스템을 나타내는 도면이다. 도 1을 참조하면, 본 발명에 따른 시스템은 스마트 TV(100), 통신 네트워크(110), 지상파 방송 서버(120), 케이블 방송 서버(130) 및 서비스 서버(140) 등을 포함하여 구성될 수 있다.
본 발명의 TV는 통신 네트워크(110)와의 연결이 가능하고, 애플리케이션이 설치되어 실행될 수 있는 스마트 TV(100)인 것이 바람직하며, 도 2에서와 같이 일반 TV에 셋톱박스가 연결된 형태로도 구현될 수 있다. 상기 스마트 TV(100)는 통신 네트워크(110)를 통해 지상파 방송 서버(120) 또는 케이블 방송 서버(130) 등으로부터 방송 정보를 수신하여 방송 화면을 디스플레이한다.
또한, 본 발명의 실시예에 따라, 스마트 TV(100)에 설치된 애플리케이션(예컨대, 방송 영상 검색 서비스 앱)을 실행시키면, 도 1에 도시된 바와 같이 TV 화면상에서 하프 모드 또는 반투명 모드 등의 형태로 방송 화면과 함께 애플리케이션 실행 화면(101)이 표시된다.
이때, 사용자는 도 6 내지 8에 도시된 바와 같이 방송 화면을 보면서 애플리케이션 실행 화면에서 현재 방송 중인 영상을 캡처하여 방송 영상과 관련된 정보를 검색할 수 있다. 또한, 다른 실시예로서 별도의 애플리케이션 실행 화면 없이 단축 실행 버튼 등을 통해 바로 검색 결과를 제공받도록 구현할 수도 있다.
상기 통신 네트워크(110)는 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 단거리 통신망(PAN; Personal Area Network), 근거리 통신망(LAN; Local Area Network), 도시권 통신망(MAN; Metropolitan Area Network), 광역 통신망(WAN; Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 또한, 상기 통신 네트워크(110)는 공지의 월드와이드웹(WWW; World Wide Web)일 수 있으며, 적외선(Infrared Data Association; IrDA) 또는 블루투스(Bluetooth)와 같이 단거리 통신에 이용되는 무선전송기술을 이용할 수도 있다. 또한, 상기 통신 네트워크(110)는 스마트 TV(100)에서 방송 신호를 수신하기 위한 케이블 방송 통신망, 지상파 방송 통신망, 위성 방송 통신망 등을 포함할 수 있다.
서비스 서버(140)는 본 발명의 다른 실시예에 따라 스마트 TV(100)로부터 검색 키워드를 수신하고, 수신된 검색 키워드에 따라 검색 결과를 제공하는 기능을 수행할 수 있다.
즉, 본 발명에서는 스마트 TV(100)에 설치된 애플리케이션에 의해 방송 중인 영상이 캡처되면, 캡처된 영상을 분석하여 애플리케이션 내에서 직접 검색 작업을 수행할 수도 있으며, 다른 방법으로서 영상 분석으로 추출된 검색어를 서비스 서버(140)로 전송하여 검색 결과를 제공받을 수도 있다.
예컨대, 스마트 TV(100)에 설치된 애플리케이션에 의해 방송 중인 영상이 캡처되고, 캡처된 영상을 분석하여 검색어가 추출될 경우, 추출된 검색어를 서비스 서버(140)로 전송함으로써 검색 결과를 제공받을 수 있다. 또한, 캡처된 영상을 분석하여 QR 코드가 추출될 경우, 추출된 QR 코드를 분석하여 QR 코드 내에 포함된 URL(Uniform resource locator)에 해당하는 서비스 서버(140)로 연결될 수 있다. 또한, 캡처된 영상을 분석하여 사람 얼굴 이미지가 추출될 경우, 추출된 이미지를 서비스 서버(140)로 전송하여 이미지에 해당하는 사람의 정보를 검색하도록 할 수 있다.
도 2는 본 발명의 다른 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 장치를 포함하는 전체 시스템을 나타내는 도면이다. 도 2를 참조하면, 본 발명의 다른 실시예에 따른 시스템은 TV(200), 셋톱박스(Set-top box; STB)(210), 통신 네트워크(110), 지상파 방송 서버(120), 케이블 방송 서버(130) 및 서비스 서버(140) 등을 포함하여 구성될 수 있다.
상술한 바와 같이 스마트 TV(100) 내에서 구현되는 동작을 TV(200)와 연결된 STB(210)를 통해 제공할 수 있다. 상기 STB(210)는 지상파 방송 서버(120) 또는 케이블 방송 서버(130)로부터 방송 신호를 수신하여 TV(200)로 제공하는 기능을 수행한다. 또한, 상기 STB(210)는 인터넷 연결 기능을 포함하여 통신 네트워크(110)와 연결함으로써 서비스 서버(140)와의 통신을 수행한다. 아울러, 상기 STB(210)에는 별도의 전용 애플리케이션의 설치를 통해 본 발명의 기능을 제공할 수 있게 된다.
본 발명의 다른 실시예에 따라, STB(210)에 설치된 애플리케이션(예컨대, 방송 영상 검색 서비스 앱)을 실행시키면, 도 2에 도시된 바와 같이 TV(200) 화면상에서 하프 모드 또는 반투명 모드 등의 형태로 방송 화면과 함께 애플리케이션 실행 화면(201)이 표시된다.
이때, 사용자는 도 6 내지 도 9에 도시된 바와 같이 애플리케이션 실행 화면에서 영상 검색을 선택함으로써 백그라운드에서 현재 방송 중인 영상을 캡처하여 관련 정보를 검색할 수 있다.
이하, 상술한 스마트 TV 또는 STB에 설치되는 애플리케이션의 각 구성 요소들에 대해 상세히 설명하기로 한다.
스마트 TV (애플리케이션)
도 3은 본 발명의 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 검색 장치의 세부 구성을 나타내는 블록도이다. 도 3을 참조하면, 본 발명의 실시예에 따른 스마트 TV(100)에 설치되는 방송 영상 검색 장치(300)는 방송 신호 수신부(310), 데이터 통신 I/F부(Interface)(320), 주 제어부(Main Controller)(330), 버퍼부(Buffer)(340), 방송 데이터 저장부(350), 응용 프로그램 처리부(360), 인터넷 접속 처리부(370), TV 영상 구성부(380), TV 제어 화면 생성부(390) 등을 포함하여 구성될 수 있다.
상기 방송 신호 수신부(310)는 외부로부터 전송된 각종 방송 데이터를 수신하며, 예컨대, 지상파 방송 신호 수신, 케이블 방송 신호 수신, IPTV 방송 신호 수신, 위성 방송 신호 수신 등의 기능을 수행한다. 따라서, 상기 방송 신호 수신부(310)는 케이블 TV 수신부, IPTV 수신부, 위성 방송 수신부 등을 포함할 수 있다.
예컨대, 방송 신호 수신부(310)에서 케이블 TV 수신부는 케이블 TV 신호에 대한 복조(demodulation)를 수행한다. 이때, 복조된 후의 데이터는 압축된 영상, 음성 및 부가 정보로 구성된다. 상기 압축된 영상은 MPEGx/H.264 표준에 따른 복원(decompression)을 수행하여 비디오 원본 데이터(video raw data)를 생성한다. 또한, 압축된 음성은 MPEGx/AC3/AAC 표준에 따른 복원(decompression)을 수행하여 오디오 원본 데이터(audio raw data)를 생성한다. 아울러, 부가 정보는 상기 주 제어부(330)로 전송된다. 상기 수신된 방송 신호는 버퍼부(340)를 거쳐 TV 영상 구성부(380)를 통해 디스플레이 패널(391)로 전송된다.
상기 방송 신호 수신부(310)에서 IPTV 수신부는, 인터넷(internet)을 통해 수신된 IPTV 데이터로서 압축된 영상, 음성 및 부가 정보로 구성된다. 이때, 상기 압축된 영상은 케이블 TV 수신부에서와 마찬가지로 MPEGx/H.264 표준에 따른 복원(decompression)을 수행하여 비디오 원본 데이터(video raw data)를 생성한다. 또한, 압축된 음성은 MPEGx/AC3/AAC 표준에 따른 복원(decompression)을 수행하여 오디오 원본 데이터(audio raw data)를 생성한다. 아울러, 부가 정보는 상기 주 제어부(330)로 전송된다.
데이터 통신 I/F부(320)는 상기 방송 신호 수신부(310)에서 수신되는 TV 방송 콘텐츠 수신과는 별도의 데이터 통신을 수행하는 데이터 통신 채널로서, 본 발명의 실시예에 따라 통신 네트워크(110)를 통해 서비스 서버(140)와의 데이터 통신을 수행한다.
주 제어부(330)는 본 발명의 실시예에 따라 방송 중인 영상에 대한 검색 명령을 수신할 경우, 현재 방송 중인 영상을 캡처하여 응용 프로그램 처리부(360)로 제공함으로써 방송 영상에 대한 검색을 수행하도록 제어한다. 또한, 상기 주 제어부(330)는 본 발명의 다른 실시예에 따라 상기 방송 신호 수신부(310)를 통해 수신되는 방송 영상을 캡처하여 캡처된 방송 영상을 분석하고, 분석된 검색어를 서비스 서버(140)로 전송하여 검색을 수행 위한 스마트 TV(100)의 주 제어 기능을 수행한다. 즉, 데이터 통신 I/F(320)부를 통해 서비스 서버(140)와 정보 교환함으로써 검색어를 전송하고, 검색된 결과를 서비스 서버(140)로부터 수신하여 스마트 TV(100)를 통해 제공하도록 제어한다.
또한, 상기 주제어부(330)는 애플리케이션 실행을 위한 선택 신호가 사용자로부터 입력되면(예컨대, 리모콘 등을 통해), 응용 프로그램 처리부(360)를 제어하여 해당 애플리케이션을 실행시킨다. 아울러, 상기 주 제어부(330)는 TV 채널 변경, 음성 조절 등과 같은 TV 설정 변경을 제어하며, 인터넷 접속을 제어하고, 스마트 TV(100)에 설치된 각종 애플리케이션(응용 프로그램)에 대한 제어를 수행한다.
버퍼부(340)는 방송 신호 수신부(310)를 통해 수신되는 방송 영상의 데이터를 임시 저장한 후, TV 영상 구성부(380)로 제공하는 역할을 수행한다. TV 영상 구성부(380)는 상기 방송 영상 데이터를 포함하여 TV 화면에 표시될 영상을 구성한 후, 디스플레이 패널(391)로 제공한다.
이때, 본 발명의 실시예에 따라 현재 수신되는 방송 영상에 대한 검색을 위해 방송 영상을 캡처하고자 할 경우, 상기 수신된 영상 중 검색 요청한 시점의 방송 영상을 캡처하여 버퍼부(340)에 임시 저장한 후, 상기 임시 저장된 방송 영상의 데이터를 주 제어부(330)를 통해 응용 프로그램 처리부(360)로 제공한다. 응용 프로그램 처리부(360)는 제공된 방송 영상 데이터를 분석하여 본 발명의 실시예에 따른 다양한 방법으로 검색을 수행한다.
한편, 상기 버퍼부(340)에 임시 저장되는 방송 영상 데이터는 사용자의 기능 설정 또는 디폴트된 기능으로서 일정 시간 동안의 방송 영상 데이터를 방송 데이터 저장부(350)에 저장할 수도 있다.
따라서, 응용 프로그램 처리부(360)에서 애플리케이션의 실행 후 영상 검색 실행에 따른 명령을 입력받으면, 버퍼부(340)를 통해 임시 저장된 방송 캡처 영상 데이터를 분석하여 영상과 관련된 정보를 검색하게 된다.
인터넷 접속 처리부(370)는 본 발명의 실시예에 따른 애플리케이션의 실행에 따라 서비스 서버(140)와의 인터넷 접속을 수행할 경우 이를 제어하는 기능을 수행한다. 상기 인터넷 접속 처리부(370)를 통해 TV(100) 화면상에서는 방송 화면 영역과는 별도로 인터넷 디스플레이 영역 또는 애플리케이션 실행 화면 등을 생성하여 각종 정보를 제공하게 된다.
응용 프로그램 처리부(360)는 상술한 바와 같이 본 발명의 실시예에 따라 설치된 애플리케이션의 실행에 따른 각종 기능들을 처리한다. 예컨대, 사용자가 애플리케이션 실행 화면에서 방송 영상 검색을 선택하면, 상술한 방법에 따라 주 제어부(330)를 통해 현재 출력 중인 방송 영상을 캡처하여 파일로 생성한다. 이때, 상기 캡처된 방송 영상을 후술하는 다양한 방법으로 분석하여 방송 관련 정보에 대한 검색을 수행한다.
TV 제어 화면 생성부(390)는 TV 채널 변경, 음량 조정, 설정 변경 등에 대한 별도의 제어 디스플레이 영역을 TV(100) 화면상에 생성할 수 있다.
TV 영상 구성부(380)는 상술한 방송 신호 수신부(310), 응용 프로그램 처리부(360), TV 제어 화면 생성부(390)를 통해 제공되는 각 디스플레이 영역을 사용자가 설정한 형태로 결합하여 TV 디스플레이 영역을 생성한다. 즉, 상기 TV 디스플레이 영역은 예컨대 TV 디스플레이 영역, 인터넷 디스플레이 영역, 애플리케이션 실행 디스플레이 영역, 제어 디스플레이 영역 등으로 구분되어 제공되거나, 각 영역들이 일부 오버랩되어 생성될 수도 있다. 이때, 상기 각 디스플레이 영역이 결합되는 형태로는 독립적으로 각 디스플레이 영역을 사용자의 선호에 따라 크기(scale)를 달리하여 TV 출력을 위한 디스플레이 화면을 생성하거나, 특정한 디스플레이 영역을 투명 또는 반투명하게 처리하여 TV 디스플레이 화면을 생성하게 된다.
이하, 도 4를 참조하여 상기 응용 프로그램 처리부(360)의 세부 구조를 설명하기로 한다.
응용 프로그램 처리부(스마트 TV 애플리케이션)
도 4는 본 발명의 실시예에 따른 응용 프로그램 처리부의 세부 구성을 나타내는 블록도이다. 도 4를 참조하면, 본 발명의 실시예에 따른 스마트 TV(100)에 설치되는 방송 영상 검색 애플리케이션은 이미지 캡처 요청부(410), 캡처 정보 수신부(420), 이미지 분석부(430), 분석 결과 처리부(440), 분석 결과 표시부(450) 등을 포함하여 구성될 수 있다.
이미지 캡처 요청부(410)는 TV를 통한 방송 시청 중 현재 방송 중인 화면에 관련된 정보를 얻고자 방송 검색 요청을 실행하면, 상기 애플리케이션의 실행에 따라 현재 방송 중인 영상의 화면 캡처를 요청한다.
상술한 바와 같이 주 제어부(330)를 통해 현재 방송 중인 영상이 캡처되고, 캡처 정보 수신부(420)에서는 상기 캡처된 방송 영상(예컨대, 이미지 파일)을 수신한다.
이미지 분석부(430)에서는 본 발명의 각 실시예에 따라 캡처된 방송 영상을 분석하고, 상기 이미지 분석부(430)의 분석 결과를 분석 결과 처리부(440)로 제공하여 각 분석 결과에 따른 정보 검색 처리를 수행하도록 한다. 예컨대, 방송 영상 내에 QR 코드가 포함되어 있는지를 분석할 수도 있으며, 방송 영상 내에 검색창이 포함되어 있는지를 분석할 수도 있으며, 방송 영상 내에 사람 얼굴 이미지가 포함되어 있는지를 분석할 수도 있다.
이에 따라, 상기 이미지 분석부(430)는 QR 코드 분석부(431), 검색창 분석부(432), 얼굴 인식부(433) 등을 포함할 수 있다. 이때, 상기 이미지 분석부(430)에 포함된 QR 코드 분석부(431), 검색창 분석부(432), 얼굴 인식부(433)는 도 4에 도시된 바와 같이 순차적으로 실행될 수도 있으며, 동시에 실행되도록 구현하는 것도 가능하다. 또한, 본 발명의 실시예에 따라 순차적으로 실행될 경우, 우선하여 실행되는 분석 방법에 의해 검색 결과가 도출될 경우 다음 분석 방법의 실행을 중단하도록 구현할 수도 있다. 예컨대, QR 코드 분석부(431)에 의해 영상 내에 QR 코드가 포함되는 것으로 분석되면, 해당 QR 코드를 식별하여 결과를 출력시키며, 이하 검색창 분석부(432) 및 얼굴 인식부(433)는 더 이상 실행을 하지 않도록 구현할 수도 있다.
먼저, QR 코드 분석부(431)는 도 6에 도시된 바와 같이 캡처된 방송 영상 내에 QR 코드가 포함되어 있는지를 분석한다. 상기 QR 코드는 미리 설정된 특정 패턴을 가지므로, 방송 영상을 이미지 프로세싱하여 캡처된 방송 영상의 특정 영역에 상기 QR 코드에 해당하는 패턴이 포함되어 있는지 여부를 검사함으로써 QR 코드 포함 여부를 분석할 수 있다.
검색창 분석부(432)는 도 7에 도시된 바와 같이 캡처된 방송 영상 내에 검색창(예컨대, 네이버 검색 서비스의 '그린 윈도우')이 포함되어 있는지를 분석한다. 상기 검색창은 통상적으로 사각형 형태를 가지며, 상기 사각형 내부에 텍스트를 포함하므로, 방송 영상을 이미지 프로세싱하여 캡처된 방송 영상의 특정 영역에 상기 검색창에 해당하는 형태가 포함되어 있는지 여부를 검사함으로써 검색창 포함 여부를 분석할 수 있다.
얼굴 인식부(433)는 도 8에 도시된 바와 같이 캡처된 방송 영상 내에 사람의 얼굴이 포함되어 있는지를 분석한다. 이미지 내에 사람의 얼굴을 식별하는 방법은 다양하게 구현 가능하며 공지된 방법들 중 하나를 이용할 수 있으므로 그 상세한 설명은 생략하기로 한다.
이와 같이 이미지 분석부(430) 내의 각 구성부에서 본 발명의 실시예에 따른 각종 방법들로 분석이 완료되면, 각 구성부의 분석 결과를 분석 결과 처리부(440) 내의 각 구성부로 제공함으로써 분석 결과에 따른 검색 처리를 수행한다.
한편, 상기 분석 결과 처리부(440)는 URL 접속 요청부(441), 정보 검색부(442), 이미지 검색부(443) 등을 포함할 수 있다. 이때, 상기 분석 결과 처리부(440)에 포함된 URL 접속 요청부(441), 정보 검색부(442), 이미지 검색부(443) 는 상기 이미지 분석부(430)의 각 매핑되는 구성부로부터 분석 결과를 제공받아 검색 처리를 수행한다.
보다 구체적으로 설명하면, URL 접속 요청부(441)는 상기 QR 코드 분석부(431)를 통해 분석된 QR 코드의 스캔 정보로부터 추출된 URL 정보를 제공받아, 인터넷 접속 처리부(370)를 통해 해당 주소지로 접속을 요청하는 기능을 수행한다. 상기 접속 요청에 따라 인터넷 접속 처리부(370)에서는 상기 URL에 해당하는 주소지로 접속 처리한다. 이때, 분석 결과 표시부(450)는 상기 접속 결과로 해당하는 웹페이지 등의 정보를 디스플레이 패널(391)로 제공하여 상기 웹페이지를 화면상의 특정 영역에 디스플레이하게 된다.
정보 검색부(442)는 상기 검색창 분석부(432)를 통해 분석된 검색창 내의 검색어를 수신하고, 상기 수신된 검색어를 키워드로 하여 검색 정보 데이터베이스(460)에 저장된 정보를 검색한다. 이때, 본 발명의 다른 실시예에 따라 상기 검색어를 인터넷 접속 처리부(370)를 통해 외부의 서비스 서버(140)로 전송하고, 서비스 서버(140)로부터 검색된 검색 결과를 제공받을 수도 있다. 이때, 분석 결과 표시부(450)에서는 상기 방법들에 따라 검색된 검색 결과를 디스플레이 패널(391)을 통해 화면상에 디스플레이하게 된다.
이미지 검색부(443)는 상기 얼굴 인식부(433)를 통해 분석된 얼굴 인식 결과를 수신하고, 상기 수신된 얼굴 이미지로 이미지 정보 데이터베이스(470)에 저장된 정보를 검색한다. 이때, 본 발명의 다른 실시예에 따라 상기 분석된 얼굴 이미지를 인터넷 접속 처리부(370)를 통해 외부의 서비스 서버(140)로 전송하고, 서비스 서버(140)로부터 검색된 얼굴 검색 결과를 제공받을 수도 있다. 이때, 분석 결과 표시부(450)에서는 상기 방법들에 따라 검색된 얼굴 이미지 검색 결과를 도 8에 도시된 바와 같이 디스플레이 패널(391)을 통해 화면상에 디스플레이하게 된다.
한편, 상기 응용 프로그램 처리부(360)의 각각의 구성요소들은 기능 및 논리적으로 분리될 수 있음을 나타나기 위해 별도로 도면에 표시한 것이며, 물리적으로 반드시 별도의 구성요소이거나 별도의 코드로 구현되는 것을 의미하는 것은 아니다.
그리고 본 명세서에서 각 기능부(또는 모듈)라 함은, 본 발명의 기술적 사상을 수행하기 위한 하드웨어 및 상기 하드웨어를 구동하기 위한 소프트웨어의 기능적, 구조적 결합을 의미할 수 있다. 예컨대, 상기 각 기능부는 소정의 코드와 상기 소정의 코드가 수행되기 위한 하드웨어 리소스의 논리적인 단위를 의미할 수 있으며, 반드시 물리적으로 연결된 코드를 의미하거나, 한 종류의 하드웨어를 의미하는 것은 아님은 본 발명의 기술분야의 평균적 전문가에게는 용이하게 추론될 수 있다.
또한, 본 명세서에서 데이터베이스라 함은, 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. 데이터베이스는 상기 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.
TV 애플리케이션을 이용한 방송 영상 검색 방법
도 5는 본 발명의 실시예에 따른 TV 애플리케이션을 이용한 방송 영상 캡처 절차를 나타내는 흐름도이다. 도 5를 참조하면, 먼저 TV에서 설치된 애플리케이션을 실행(S501)시킨다.
그런 다음, 상기 애플리케이션의 실행 화면에서 방송 화면 검색(또는 분석)을 실행(S502)한다. 이때, 본 발명의 실시예에 따라 애플리케이션이 실행되고, 현재 방송 중인 화면이 캡처(S503)된다.
상기 캡처된 화면은 상술한 바와 같이 복수의 방법들로 이미지 분석(S504)이 수행된다.
먼저, 상기 캡처된 이미지 내에 QR 코드가 존재하는지를 식별(S505)한다. 상기 식별 결과 이미지 내에 QR 코드가 존재할 경우 QR 코드를 스캔하여 분석(S506)한다. 이때, 상기 QR 코드 스캔 결과 URL 정보가 포함되어 있을 경우, 해당 URL로 리다이렉트(S507)하여 웹페이지 등을 제공받게 된다.
한편, 상기 식별 결과 이미지 내에 QR 코드가 존재하지 않을 경우 이미지 내에 검색창이 존재하는지를 식별(S508)한다. 상기 식별 결과 이미지 내에 검색창이 존재할 경우 검색창 내에 포함된 검색어를 키워드로 하여 검색을 수행(S509)한다.
또한, 상기 식별 결과 이미지 내에 검색창이 존재하지 않을 경우 이미지 내에 사람 얼굴이 포함되어 있는지를 분석하여 얼굴 영역을 인식(S510)한다. 상기 인식된 얼굴 영역의 이미지를 데이터베이스에 저장된 얼굴 이미지와 비교하여 유사도를 측정함으로써 해당 얼굴이 누구인지를 식별한다. 상기 식별된 얼굴에 대한 인물 정보가 데이터베이스에 존재할 경우(S511), 해당 인물에 대한 정보를 도 8에 도시된 바와 같이 화면상에 표시(S512)한다.
한편, 상기 도 5에서는 이미지 분석 절차로서 QR 코드 식별, 검색창 식별, 사람 얼굴 식별 등의 과정을 식별 여부에 따라 순차적으로 수행하였으나, 본 발명이 이에 한정되지는 않으며, 각 삭별 과정이 동시에 진행되거나, 이전 식별 결과 유무에 관계 없이 모든 식별 과정을 수행하도록 구현할 수도 있다.
본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
실시예
도 6은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 QR 코드 분석 화면을 나타내는 도면이다. 도 6을 참조하면, 방송 영상(600)을 시청하는 중 해당 방송 영상에 대한 정보를 얻고자 할 경우, 본 발명의 실시예에 따라 실행되고 있는 애플리케이션에서 방송 영상 검색을 실행하면, 상기 방송 영상(600)을 스캔하고, 스캔된 방송 영상 내에 QR 코드(610)가 존재하는지를 분석한다. 이때, 도 6에 도시된 바와 같이 방송 영상(600) 내에 QR 코드(610)가 존재할 경우, 식별된 QR 코드(610)를 스캔하여 스캔된 QR 코드 내의 정보에 따른 처리(예컨대, 특정 URL로의 접속)를 수행함으로써, 상기 방송 영상(600)과 관련된 정보를 얻을 수 있다.
한편, 이와 같이 본 발명의 실시예에 따라 TV에 설치된 애플리케이션을 통해 간단히 검색 요청을 함으로써 방송 중인 영상에 대한 검색 결과를 얻을 수 있으며, 별도의 단말기(예컨대, 스마트폰) 등을 통해 상기 방송 영상 내에 포함된 QR 코드(610)를 스캔하지 않고서도 QR 코드 스캔 결과를 얻을 수가 있게 된다.
도 7은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 검색창 분석 화면을 나타내는 도면이다. 도 7을 참조하면, 방송 영상(700)을 시청하는 중 해당 방송 영상에 대한 정보를 얻고자 할 경우, 본 발명의 실시예에 따라 실행되고 있는 애플리케이션에서 방송 영상 검색을 실행하면, 상기 방송 영상(700)을 스캔하고, 스캔된 방송 영상 내에 검색창(710)이 존재하는지를 분석한다. 이때, 도 7에 도시된 바와 같이 방송 영상(700) 내에 검색창(710)이 존재할 경우, 식별된 검색창(710) 내의 검색어를 추출하고, 추출된 검색어를 키워드로 하여 정보 검색을 수행함으로써, 상기 방송 영상(700)과 관련된 정보를 얻을 수 있다.
한편, 이와 같이 본 발명의 실시예에 따라 TV에 설치된 애플리케이션을 통해 간단히 검색 요청을 함으로써 방송 중인 영상에 대한 검색 결과를 얻을 수 있으며, 별도의 단말기(예컨대, 스마트폰 또는 PC) 등을 통해 상기 방송 영상 내에 포함된 검색어(710)를 일일이 입력하여 검색을 수행하지 않고서도 방송 영상 내에 포함된 검색어에 대한 검색 결과를 얻을 수가 있게 된다.
도 8은 본 발명의 실시예에 따른 TV에서 설치된 애플리케이션에서의 얼굴 분석 화면을 나타내는 도면이다. 도 8을 참조하면, 방송 영상(800)을 시청하는 중 해당 방송 영상에 대한 정보를 얻고자 할 경우, 본 발명의 실시예에 따라 실행되고 있는 애플리케이션에서 방송 영상 검색을 실행하면, 상기 방송 영상(800)을 스캔하고, 스캔된 방송 영상 내에 사람 얼굴(820)이 존재하는지를 분석한다. 이때, 도 8에 도시된 바와 같이 방송 영상(800) 내에 사람 얼굴(820)이 존재할 경우, 식별된 사람 얼굴(820)을 데이터베이스 내의 사람 얼굴과 비교하여 유사도를 측정하고, 해당 얼굴을 식별하며, 식별된 사람의 정보(810)를 검색하여 제공함으로써, 상기 방송 영상(800)과 관련된 정보를 얻을 수 있다.
한편, 이와 같이 본 발명의 실시예에 따라 TV에 설치된 애플리케이션을 통해 간단히 검색 요청을 함으로써 방송 중인 영상에 대한 검색 결과를 얻을 수가 있게 된다.
본 발명은 특정 기능들 및 그의 관계들의 성능을 나타내는 방법 단계들의 목적을 가지고 위에서 설명되었다. 이러한 기능적 구성 요소들 및 방법 단계들의 경계들 및 순서는 설명의 편의를 위해 여기에서 임의로 정의되었다. 상기 특정 기능들 및 관계들이 적절히 수행되는 한 대안적인 경계들 및 순서들이 정의될 수 있다. 임의의 그러한 대안적인 경계들 및 순서들은 그러므로 상기 청구된 발명의 범위 및 사상 내에 있다. 추가로, 이러한 기능적 구성 요소들의 경계들은 설명의 편의를 위해 임의로 정의되었다. 어떠한 중요한 기능들이 적절히 수행되는 한 대안적인 경계들이 정의될 수 있다. 마찬가지로, 흐름도 블록들은 또한 어떠한 중요한 기능성을 나타내기 위해 여기에서 임의로 정의되었을 수 있다. 확장된 사용을 위해, 상기 흐름도 블록 경계들 및 순서는 정의되었을 수 있으며 여전히 어떠한 중요한 기능을 수행한다. 기능적 구성 요소들 및 흐름도 블록들 및 순서들 둘 다의 대안적인 정의들은 그러므로 청구된 본 발명의 범위 및 사상 내에 있다.
본 발명은 또한 하나 이상의 실시예들의 용어로, 적어도 부분적으로 설명되었을 수 있다. 본 발명의 실시예는 본 발명, 그 측면, 그 특징, 그 개념, 및/또는 그 예를 나타내기 위해 여기에서 사용된다. 본 발명을 구현하는 장치, 제조의 물건, 머신, 및/또는 프로세스의 물리적인 실시예는 여기에 설명된 하나 이상의 실시예들을 참조하여 설명된 하나 이상의 측면들, 특징들, 개념들, 예들 등을 포함할 수 있다. 더구나, 전체 도면에서, 실시예들은 상기 동일한 또는 상이한 참조 번호들을 사용할 수 있는 상기 동일하게 또는 유사하게 명명된 기능들, 단계들, 모듈들 등을 통합할 수 있으며, 그와 같이, 상기 기능들, 단계들, 모듈들 등은 상기 동일한 또는 유사한 기능들, 단계들, 모듈들 등 또는 다른 것들일 수 있다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
100 : 스마트 TV 101, 201 : 애플리케이션 실행 화면
110 : 통신 네트워크 120 : 지상파 방송 서버
130 : 케이블 방송 서버 140 : 서비스 서버
200 : TV 210 : STB
300 : 방송 영상 검색 장치 310 : 방송 신호 수신부
320 : 데이터 통신 I/F부 330 : 주 제어부
340 : 버퍼부 350 : 방송 데이터 저장부
360 : 응용 프로그램 처리부 370 : 인터넷 접속 처리부
380 : TV 영상 구성부 390 : TV 제어화면 생성부
391 : 디스플레이 패널 410 : 이미지 캡처 요청부
420 : 캡처 정보 수신부 430 : 이미지 분석부
431 : QR 코드 분석부 432 : 검색창 분석부
433 : 얼굴 인식부 440 : 분석 결과 처리부
441 : URL 접속 요청부 442 : 정보 검색부
443 : 이미지 검색부 450 : 분석 결과 표시부
460 : 검색 정보 데이터베이스 470 : 이미지 정보 데이터베이스

Claims (21)

  1. 방송 중인 영상에 대한 검색 요청에 따라 캡처된 방송 영상을 수신하는 캡처 정보 수신부;
    상기 캡처 정보 수신부를 통해 수신된 캡처된 방송 영상에 대해 적어도 하나의 분석 방법에 따라 이미지 분석을 수행하는 이미지 분석부;
    상기 이미지 분석부의 분석 결과에 따라 방송 영상 관련 정보에 대한 검색을 수행하는 분석 결과 처리부; 및
    상기 방송 영상 관련 정보에 대한 검색 결과를 화면상에 표시하도록 처리하는 분석 결과 표시부;를 포함하고,
    상기 이미지 분석부는,
    복수의 각 이미지 분석 방법에 따른 복수의 분석부들을 포함하며, 상기 복수의 분석부들이 미리 설정된 순서에 따라 순차적으로 이미지 분석을 수행하는, 방송 영상 검색 장치.
  2. 청구항 1에 있어서, 상기 이미지 분석부는,
    상기 캡처된 방송 영상 내에 QR 코드가 포함되어 있는지를 분석하고, QR 코드가 포함되어 있을 경우, 상기 QR 코드를 스캔하는 QR 코드 분석부;를 포함하는, 방송 영상 검색 장치.
  3. 청구항 2에 있어서, 상기 분석 결과 처리부는,
    상기 QR 코드 분석부를 통해 스캔된 QR 코드 정보에 따라, 상기 QR 코드 내에 포함된 네트워크상의 주소로 접속을 요청하는 URL 접속 요청부;를 포함하는, 방송 영상 검색 장치.
  4. 청구항 1에 있어서, 상기 이미지 분석부는,
    상기 캡처된 방송 영상 내에 검색창 이미지가 포함되어 있는지를 분석하고, 검색창 이미지가 포함되어 있을 경우, 상기 검색창 이미지 내의 검색어를 키워드로 추출하는 검색창 분석부;를 포함하는, 방송 영상 검색 장치.
  5. 청구항 4에 있어서, 상기 분석 결과 처리부는,
    상기 검색창 분석부를 통해 추출된 키워드로 정보 검색을 수행하는 정보 검색부;를 포함하는, 방송 영상 검색 장치.
  6. 청구항 1에 있어서, 상기 이미지 분석부는,
    상기 캡처된 방송 영상 내에 얼굴 이미지가 포함되어 있는지를 분석하고, 얼굴 이미지가 포함되어 있을 경우, 상기 포함된 얼굴 이미지를 추출하는 얼굴 인식부;를 포함하는, 방송 영상 검색 장치.
  7. 청구항 6에 있어서, 상기 분석 결과 처리부는,
    상기 얼굴 인식부를 통해 추출된 얼굴 이미지로 해당하는 인물에 대한 정보 검색을 수행하는 이미지 검색부;를 포함하는, 방송 영상 검색 장치.
  8. 삭제
  9. 청구항 1에 있어서, 상기 이미지 분석부는,
    복수의 분석부들이 순차적으로 이미지 분석을 수행할 때, 현재 수행하는 이미지 분석 방법에 따른 분석 결과가 존재할 경우, 다음 분석부의 수행을 중단하는, 방송 영상 검색 장치.
  10. 청구항 1에 있어서, 상기 분석 결과 처리부는,
    통신 네트워크를 통해 외부의 서비스 장치로 분석 결과를 전송함으로써 검색을 요청하고, 상기 서비스 장치를 통해 검색 결과를 수신하는, 방송 영상 검색 장치.
  11. 방송 영상 검색 방법으로서, 방송 영상 검색 장치에서 수행되는 각 단계가.
    방송 중인 영상에 대한 검색 요청에 따라 캡처된 방송 영상을 수신하는 단계;
    상기 수신된 캡처된 방송 영상에 대해 적어도 하나의 분석 방법에 따라 이미지 분석을 수행하는 단계;
    상기 이미지 분석의 결과에 따라 방송 영상 관련 정보에 대한 검색을 수행하는 단계; 및
    상기 방송 영상 관련 정보에 대한 검색 결과를 화면상에 표시하도록 처리하는 단계;를 포함하고,
    상기 이미지 분석을 수행하는 단계는,
    복수의 각 이미지 분석 방법에 따른 복수의 분석 단계들을 포함하며, 상기 복수의 분석 단계들이 미리 설정된 순서에 따라 순차적으로 이미지 분석을 수행하는, 방송 영상 검색 방법.
  12. 청구항 11에 있어서, 상기 이미지 분석을 수행하는 단계는,
    상기 캡처된 방송 영상 내에 QR 코드가 포함되어 있는지를 분석하는 단계; 및
    상기 분석 결과 QR 코드가 포함되어 있을 경우, 상기 QR 코드를 스캔하는 단계;를 포함하는, 방송 영상 검색 방법.
  13. 청구항 12에 있어서, 상기 검색을 수행하는 단계는,
    상기 스캔된 QR 코드 정보에 따라, 상기 QR 코드 내에 포함된 네트워크상의 주소로 접속을 요청하는 단계;를 포함하는, 방송 영상 검색 방법.
  14. 청구항 11에 있어서, 상기 이미지 분석을 수행하는 단계는,
    상기 캡처된 방송 영상 내에 검색창 이미지가 포함되어 있는지를 분석하는 단계; 및
    상기 분석 결과 검색창 이미지가 포함되어 있을 경우, 상기 검색창 이미지 내의 검색어를 키워드로 추출하는 단계;를 포함하는, 방송 영상 검색 방법.
  15. 청구항 14에 있어서, 상기 검색을 수행하는 단계는,
    상기 추출된 키워드로 정보 검색을 수행하는 단계;를 포함하는, 방송 영상 검색 방법.
  16. 청구항 11에 있어서, 상기 이미지 분석을 수행하는 단계는,
    상기 캡처된 방송 영상 내에 얼굴 이미지가 포함되어 있는지를 분석하는 단계; 및
    상기 분석 결과 얼굴 이미지가 포함되어 있을 경우, 상기 포함된 얼굴 이미지를 추출하는 단계;를 포함하는, 방송 영상 검색 방법.
  17. 청구항 16에 있어서, 상기 검색을 수행하는 단계는,
    상기 추출된 얼굴 이미지로 해당하는 인물에 대한 정보 검색을 수행하는 단계;를 포함하는, 방송 영상 검색 방법.
  18. 삭제
  19. 청구항 11에 있어서, 상기 이미지 분석을 수행하는 단계는,
    복수의 분석 단계들을 순차적으로 수행할 때, 현재 수행하는 이미지 분석 방법에 따른 분석 결과가 존재할 경우, 다음 분석 단계의 수행을 중단하는, 방송 영상 검색 방법.
  20. 청구항 11에 있어서, 상기 검색을 수행하는 단계는,
    통신 네트워크를 통해 외부의 서비스 장치로 분석 결과를 전송함으로써 검색을 요청하는 단계; 및
    상기 서비스 장치를 통해 검색 결과를 수신하는 단계;를 포함하는, 방송 영상 검색 방법.
  21. 청구항 11 내지 청구항 17, 청구항 19 및 청구항 20 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터 판독 가능한 기록 매체.
KR20130004563A 2013-01-15 2013-01-15 Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 KR101486545B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130004563A KR101486545B1 (ko) 2013-01-15 2013-01-15 Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130004563A KR101486545B1 (ko) 2013-01-15 2013-01-15 Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체

Publications (2)

Publication Number Publication Date
KR20140092152A KR20140092152A (ko) 2014-07-23
KR101486545B1 true KR101486545B1 (ko) 2015-01-26

Family

ID=51738990

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130004563A KR101486545B1 (ko) 2013-01-15 2013-01-15 Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체

Country Status (1)

Country Link
KR (1) KR101486545B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200088019A (ko) * 2019-01-14 2020-07-22 주식회사 엘지유플러스 방송 영상 검색 방법 및 장치
KR20230016877A (ko) 2021-07-27 2023-02-03 마젤원 주식회사 영상 미디어 매체에 기반한 옥외 광고 분석-구축 방법 및 옥외 광고 분석-구축 시스템

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102300927B1 (ko) * 2014-11-05 2021-09-10 엘지전자 주식회사 화상출력장치, 이동 단말기 및 그것들의 제어 방법
KR102495702B1 (ko) * 2017-11-28 2023-02-06 삼성전자주식회사 서버 및 그 제어방법
KR102355927B1 (ko) * 2020-07-27 2022-02-07 에스케이스토아 주식회사 방송 영상 데이터에 대한 사용자 맞춤 검색 인터페이스를 제공하는 미디어 제공 서버, 미디어 제공 서버의 동작 방법 및 컴퓨터 프로그램

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070065608A (ko) * 2005-12-20 2007-06-25 엘지전자 주식회사 캡쳐된 영상 신호에서 목적 대상물 정보 취득 장치 및 그제어 방법
KR20110058164A (ko) * 2009-11-25 2011-06-01 에스케이텔레콤 주식회사 캡처 영상을 이용한 정보 획득 시스템 및 방법
KR20120035986A (ko) * 2010-10-07 2012-04-17 삼성전자주식회사 이미지 코드를 이용한 디스플레이 방법 및 장치
KR20120105346A (ko) * 2011-03-15 2012-09-25 엘지전자 주식회사 오브젝트 정보 검색 방법 및 그를 이용한 영상 표시 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070065608A (ko) * 2005-12-20 2007-06-25 엘지전자 주식회사 캡쳐된 영상 신호에서 목적 대상물 정보 취득 장치 및 그제어 방법
KR20110058164A (ko) * 2009-11-25 2011-06-01 에스케이텔레콤 주식회사 캡처 영상을 이용한 정보 획득 시스템 및 방법
KR20120035986A (ko) * 2010-10-07 2012-04-17 삼성전자주식회사 이미지 코드를 이용한 디스플레이 방법 및 장치
KR20120105346A (ko) * 2011-03-15 2012-09-25 엘지전자 주식회사 오브젝트 정보 검색 방법 및 그를 이용한 영상 표시 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200088019A (ko) * 2019-01-14 2020-07-22 주식회사 엘지유플러스 방송 영상 검색 방법 및 장치
KR102217490B1 (ko) * 2019-01-14 2021-02-18 주식회사 엘지유플러스 방송 영상 검색 방법 및 장치
KR20230016877A (ko) 2021-07-27 2023-02-03 마젤원 주식회사 영상 미디어 매체에 기반한 옥외 광고 분석-구축 방법 및 옥외 광고 분석-구축 시스템

Also Published As

Publication number Publication date
KR20140092152A (ko) 2014-07-23

Similar Documents

Publication Publication Date Title
KR100867005B1 (ko) 개인 맞춤형 멀티미디어 데이터 검색 서비스 방법 및 그의 장치들
US10070201B2 (en) Recognition of images within a video based on a stored representation
KR102166423B1 (ko) 디스플레이 장치, 서버 장치 및 디스플레이 장치의 이벤트 정보 제공 방법
US9230151B2 (en) Method, apparatus, and system for searching for image and image-related information using a fingerprint of a captured image
KR101495297B1 (ko) 스마트 티비 기반의 상황 인지를 통한 사용자 이력 분석 제공 시스템, 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
KR101486545B1 (ko) Ｔｖ 애플리케이션을 이용한 방송 영상 검색 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US9460202B2 (en) Apparatus, method and computer readable recording medium for providing music related information by recognition of music output through television
US8453179B2 (en) Linking real time media context to related applications and services
US20130332963A1 (en) Method and system for controlling a television control device, and television control device
CN103827859A (zh) 使用多媒体搜索以识别产品
KR102036384B1 (ko) 연관 서비스 제공 방법 및 장치
KR20150000649A (ko) 방송 영상과 관련된 정보를 제공하기 위한 방송 영상 표시 장치 및 방법
KR20140099983A (ko) 리다이렉트를 이용한 광고 제공 시스템, 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
KR20090073944A (ko) 방송 컨텐츠 출력장치와 방송 컨텐츠 관련 검색어(또는질문) 순위 정보 제공 방법 및 시스템과 이를 위한기록매체
CN113298589A (zh) 商品信息处理方法及装置、信息获取方法及装置
CN106165436B (zh) 使用光学字符识别对机顶盒进行双向控制
US20030181198A1 (en) Portable information terminal, information equipment and information equipment control system based on portable information terminal
US20150249870A1 (en) Image display apparatus, external information terminal and program to be executed thereby
KR101511311B1 (ko) 셋탑박스 제어 기록 및 콘텐츠 검색 기록을 이용한 사용자 맞춤형 광고 제공 시스템 및 방법
KR101770270B1 (ko) 영상표시장치 및 그 제어 방법
KR20150071147A (ko) 선택된 쿼리 이미지를 이용하는 연관 서비스 제공 시스템 및 방법
KR101462113B1 (ko) 방송의 멀티미디어 유전자를 통한 그룹핑 시스템, 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US10057616B1 (en) Systems and methods for accessing bookmarked content
KR101280804B1 (ko) 영상 콘텐츠의 영상을 분석하는 장치 및 방법
JP2019036837A (ja) オブジェクト特定装置、オブジェクト特定システム、オブジェクト特定方法及びプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180102

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190102

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200102

Year of fee payment: 6