KR20170011359A - 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법 - Google Patents

방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법 Download PDF

Info

Publication number
KR20170011359A
KR20170011359A KR1020150103871A KR20150103871A KR20170011359A KR 20170011359 A KR20170011359 A KR 20170011359A KR 1020150103871 A KR1020150103871 A KR 1020150103871A KR 20150103871 A KR20150103871 A KR 20150103871A KR 20170011359 A KR20170011359 A KR 20170011359A
Authority
KR
South Korea
Prior art keywords
search query
keyword
result information
search result
broadcast content
Prior art date
Application number
KR1020150103871A
Other languages
English (en)
Inventor
박경수
신용욱
김계현
유지원
최동현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150103871A priority Critical patent/KR20170011359A/ko
Priority to US15/175,604 priority patent/US20170026707A1/en
Publication of KR20170011359A publication Critical patent/KR20170011359A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/951—Indexing; Web crawling techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

방송 콘텐트와 관련된 정보를 제공하는 전자 장치에 있어서, 상기 방송 콘텐트를 수신하는 튜너부; 및 상기 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하고, 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출하고, 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택하며, 상기 선택된 키워드를 조합하여 검색 질의어를 생성하고, 상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공하는 제어부를 포함할 수 있다.

Description

방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법{ELECTRONIC DEVICE AND METHOD THEREOF FOR PROVIDING INFORMATION ASSOCIATED WITH BROADCAST CONTENT}
본 개시는 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법에 관한 것으로서, 보다 상세하게는, 방송 콘텐트를 분석하여 생성된 검색 질의어를 이용하여 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법에 관한 것이다.
디스플레이 장치는 사용자가 시청할 수 있는 영상을 표시하는 기능을 갖춘 장치이다. 사용자는 디스플레이 장치를 통하여 방송을 시청할 수 있다. 디스플레이 장치는 방송국에서 송출되는 방송신호 중 사용자가 선택한 방송을 디스플레이에 표시한다. 현재 방송은 전세계적으로 아날로그 방송에서 디지털 방송으로 전환하고 있는 추세이다.
디지털 방송은 디지털 영상 및 음성 신호를 송출하는 방송을 의미한다. 디지털 방송은 아날로그 방송에 비해, 외부 잡음에 강해 데이터 손실이 작으며, 에러 정정에 유리하며, 해상도가 높고, 선명한 화면을 제공한다. 또한, 디지털 방송은 아날로그 방송과 달리 양방향 서비스가 가능하다.
또한, 최근에는 디지털 방송 기능에 더하여 다양한 콘텐트를 제공하는 스마트 티브이가 제공되고 있다. 방송 콘텐트를 시청하는 사용자에게 방송 콘텐트의 제공뿐만 아니라, 보다 다양한 시청 환경을 제공하고자 하는 연구가 요구되고 있다.
본 개시는 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법을 제공한다.
본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
상기한 과제를 실현하기 위한 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 전자 장치는, 상기 방송 콘텐트를 수신하는 튜너부; 및 상기 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하고, 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출하고, 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택하며, 상기 선택된 키워드를 조합하여 검색 질의어를 생성하고, 상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공하는 제어부를 포함할 수 있다.
또한, 상기 제어부는, 상기 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 상기 적어도 하나의 오브젝트를 추출할 수 있다.
또한, 상기 제어부는, 상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출할 수 있다.
또한, 일 실시예에 따른 전자 장치는 통신부를 더 포함하고, 상기 제어부는, 상기 통신부를 통해, 외부 서버에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청하고, 상기 외부 서버로부터 수신한 상기 키워드 선택 기준에 관한 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 상기 제어부는, 사용자의 설정 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 상기 제어부는, 미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 상기 검색 질의어를 생성할 수 있다.
또한, 일 실시예에 따른 전자 장치는 외부 서버와 통신하는 통신부를 더 포함하고, 상기 제어부는, 상기 통신부를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하고, 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신할 수 있다.
또한, 일 실시예에 따른 전자 장치는 디스플레이부를 더 포함하고, 상기 제어부는, 상기 디스플레이부에 상기 검색 결과 정보를 표시할 수 있다.
또한, 일 실시예에 따른 전자 장치는 디스플레이부를 더 포함하고, 상기 제어부는, 상기 디스플레이부를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시할 수 있다.
또한, 상기 제어부는, 상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어할 수 있다.
또한, 상기 제어부는, 상기 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공할 수 있다.
또한, 상기 제어부는, 상기 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 상기 방송 콘텐트를 분석할 수 있다.
또한, 상기한 과제를 실현하기 위한 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 방법은, 튜너부를 통해 수신된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하는 단계; 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출하는 단계; 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택하는 단계; 상기 선택된 키워드를 조합하여 검색 질의어를 생성하는 단계; 및 상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공하는 단계를 포함할 수 있다.
또한, 상기 오브젝트를 추출하는 단계는, 상기 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 상기 적어도 하나의 오브젝트를 추출할 수 있다.
또한, 상기 오브젝트를 추출하는 단계는, 상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출할 수 있다.
또한, 상기 키워드를 선택하는 단계는, 외부 서버로부터 수신한 사용 빈도를 포함하는 통계적 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 상기 키워드를 선택하는 단계는, 사용자의 설정 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 상기 검색 질의어를 생성하는 단계는, 미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 상기 검색 질의어를 생성할 수 있다.
또한, 상기 검색 결과 정보를 사용자에게 제공하는 단계는, 통신부를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하는 단계; 및 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신하는 단계를 포함할 수 있다.
또한, 상기 검색 결과 정보를 사용자에게 제공하는 단계는, 디스플레이부에 상기 검색 결과 정보를 표시할 수 있다.
또한, 상기 검색 결과 정보를 사용자에게 제공하는 단계는, 디스플레이부를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시할 수 있다.
또한, 상기 검색 결과 정보를 사용자에게 제공하는 단계는, 상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어할 수 있다.
또한, 상기 검색 결과 정보를 사용자에게 제공하는 단계는, 상기 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공하는 단계를 포함할 수 있다.
또한, 상기 오브젝트를 추출하는 단계는, 상기 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 상기 방송 콘텐트를 분석하는 단계를 포함할 수 있다.
도 1은 일 실시예를 개략적으로 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 시스템을 도시한다.
도 3 및 도 4는 일 실시예와 관련된 전자 장치의 블록 구성도(block diagram)이다.
도 5는 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 방법의 흐름도이다.
도 6은 일 실시예에 따른 방송 콘텐트를 분석하는 예를 설명하기 위한 도면이다.
도 7은 일 실시예에 따른 오브젝트를 식별하는 키워드를 추출하는 예를 설명하기 위한 도면이다.
도 8은 일 실시예에 따른 검색 질의어를 생성하기 위한 키워드를 선택하는 예를 설명하기 위한 도면이다.
도 9는 일 실시예에 따른 키워드 선택 기준에 관한 정보의 예를 설명하기 위한 도면이다.
도 10은 일 실시예에 따른 키워드 선택 기준에 관한 정보를 획득하는 예를 설명하기 위한 도면이다.
도 11은 일 실시예에 따른 검색 질의어를 생성하는 예를 설명하기 위한 도면이다.
도 12는 일 실시예에 따른 외부 서버를 이용하여 검색 질의어를 이용한 검색 결과 정보를 제공하는 예를 설명하기 위한 흐름도이다.
도 13a 내지 도 13c는 일 실시예에 따른 서버를 이용하여 검색 질의어를 이용한 검색 결과 정보를 제공하는 예를 설명하기 위한 도면이다.
도 14는 일 실시예에 따른 검색 결과 정보를 다른 디스플레이 장치에 표시하는 예를 설명하기 위한 흐름도이다.
도 15는 일 실시예에 따른 검색 결과 정보를 다른 디스플레이 장치에 표시하는 예를 설명하기 위한 도면이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련된 다음의 상세한 설명을 통해 보다 분명해질 것이다. 다만, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예들을 가질 수 있는 바, 이하에서는 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 원칙적으로 동일한 구성요소들을 나타낸다. 또한, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제1, 제2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다.
이하, 본 발명과 관련된 전자 장치에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 명세서에서 설명되는 전자 장치에는 아날로그 TV, 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, 플라즈마 TV, 모니터 등이 포함될 수 있다. 또한, 본 발명의 전자 장치는 데스크탑 컴퓨터, 휴대폰, 스마트 폰(smart phone), 태블릿 PC, 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등일 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
이하 첨부된 도면을 참고하여 본 발명을 상세히 설명하기로 한다.
도 1은 일 실시예를 개략적으로 설명하기 위한 도면이다.
일 실시 예에 따른 전자 장치(100)는 방송 콘텐트와 관련된 정보를 사용자에게 제공할 수 있다. 예를 들어, 사용자는 TV를 시청하던 중 현재 방송되고 있는 콘텐트와 관련된 정보, 예컨대, 인터넷 포탈 사이트의 검색 결과를 제공받을 수 있다. 이 때, 일 실시 예에 따른 전자 장치(100)는 방송 콘텐트를 분석하여 방송 콘텐트와 관련된 정보를 적절하게 제공하기 위한 검색 질의어를 생성할 수 있다.
도 1의 (a)는 전자 장치(100)가 방송 콘텐트(c11)를 디스플레이부(115)에 표시하고 있는 예를 도시한다. 도 1의 (b)는 전자 장치(100)가 방송 콘텐트(c11)와 관련된 검색 결과 정보로서 인터넷 포탈 사이트의 검색 결과 화면(s11)을 디스플레이부(115)에 표시하고 있는 일 예를 도시한다.
도 2는 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 시스템을 도시한다.
도 2를 참조하면, 시스템은 네트워크를 통해 통신할 수 있는 전자 장치(100), 제1 서버(200), 제2 서버(300)를 포함할 수 있다. 또한, 일 실시예에 따르면, 시스템은 네트워크를 통해 통신할 수 있는 전자 장치(100)와, 제2 서버(300)를 포함할 수 있다.
네트워크는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다.
도 2에 도시된 시스템에서 전자 장치(100)는 아날로그 TV, 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, 플라즈마 TV, 모니터 등으로 구현될 수 있으나, 이에 한정되지 않는다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
전자 장치(100)는 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하고, 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다. 또한, 전자 장치(100)는 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다. 또한, 전자 장치(100)는 상기 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다. 전자 장치(100)는 검색 서비스를 제공하는 제2 서버(300)로 검색 질의어를 전송하고, 상기 검색 질의어를 이용한 검색 결과 정보를 제2 서버(300)로부터 수신할 수 있다.
또 다른 실시예에 따르면, 도 2에 도시되지는 않았지만, 시스템은 전자 장치(100)에 연결된 셋탑박스나 IP 셋탑박스를 더 포함할 수 있다. 셋탑박스나 IP 셋탑박스는 통신부와 프로세서를 구비하고, 외부의 네트워크망과 연결하여 멀티미디어 통신 서비스를 제공하는 단말이다.
일 실시예에 따라 전자 장치(100)에 연결된 셋탑박스나 IP 셋탑박스 또는 제1 서버(200)는, 전자 장치(100)에 표시된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하고, 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다. 또한, 셋탑박스나 IP 셋탑박스 또는 제1 서버(200)는, 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다. 또한, 셋탑박스나 IP 셋탑박스 또는 서버(200)는, 상기 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다. 또한, 셋탑박스나 IP 셋탑박스 또는 서버(200)는, 검색 서비스를 제공하는 제2 서버(300)로 검색 질의어를 전송하고, 상기 검색 질의어를 이용한 검색 결과 정보를 제2 서버(300)로부터 수신할 수 있다.
또 다른 예로, 셋탑박스나 IP 셋탑박스 또는 서버(200)는, 생성된 검색 질의어를 전자 장치(100)로 전송하고, 전자 장치(100)가 검색 서비스를 제공하는 제2 서버(300)로 검색 질의어를 전송할 수도 있다. 전자 장치(100)는 검색 질의어를 이용한 검색 결과 정보를 제2 서버(300)로부터 수신할 수 있다.
한편, 전자 장치(100)는 여러 가지 태스크를 동시에 수행하는 멀티 태스킹이 가능한 장치이다. 전자 장치(100)는 복수의 태스크를 동시에 수행할 수 있으며, 디스플레이부(115)에 복수의 윈도우를 구동할 수 있고, 각각의 윈도우에 복수의 태스크 각각의 수행 결과를 표시할 수 있다.
일 실시예에 따라, 전자 장치(100)는 디스플레이부(115)의 일부 영역에는 튜너부(135)를 통해 방송 콘텐트를 수신하여 표시하고, 디스플레이부(115)의 다른 일부 영역에는 통신부(150)를 통해 인터넷 포탈 사이트의 검색 결과 정보를 수신하여 표시할 수 있다(도 1의 (b) 참조).
도 3 및 도 4는 일 실시예와 관련된 전자 장치의 블록 구성도(block diagram)이다.
도 3을 참조하면, 전자 장치(100)는 디스플레이부(115) 및 제어부(180)를 포함할 수 있다. 그러나 도시된 구성요소 모두가 필수 구성 요소인 것은 아니다. 도시된 구성 요소보다 많은 구성 요소에 의해 전자 장치(100)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 전자 장치(100)는 구현될 수 있다.
예를 들어, 도 4에 도시된 바와 같이, 일 실시예에 따른 전자 장치(100)는, 비디오 처리부(110), 오디오 처리부(120), 오디오 출력부(125), 전원부(130), 튜너부(135), 센싱부(140), 통신부(150), 감지부(160), 입/출력부(170), 저장부(190)를 더 포함할 수 있다.
이하 상기 구성요소들에 대해 차례로 살펴본다.
비디오 처리부(110)는, 전자 장치(100)가 수신한 비디오 데이터에 대한 처리를 수행한다. 비디오 처리부(110)에서는 비디오 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다.
디스플레이부(115)는 제어부(180)의 제어에 의해 튜너부(135)를 통해 수신된 방송 신호에 포함된 비디오를 화면에 표시한다. 또한, 디스플레이부(115)는 통신부(150) 또는 입/출력부(170)를 통해 입력되는 컨텐츠(예를 들어, 동영상)를 표시할 수 있다. 디스플레이부(115)는 제어부(180)의 제어에 의해 저장부(190)에 저장된 영상을 출력할 수 있다. 또한, 디스플레이부(115)는 음성 인식에 대응되는 음성 인식 태스크를 수행하기 위한 음성 UI(User Interface: 예를 들어, 음성 명령어 가이드를 포함하는) 또는 모션 인식에 대응되는 모션 인식 태스크를 수행하기 위한 모션 UI(예를 들어, 모션 인식을 위한 사용자 모션 가이드를 포함)를 표시할 수 있다.
일 실시예에 따라 디스플레이부(115)는 튜너부(135)를 통해 수신된 방송 콘텐트를 제어부(180)의 제어에 따라 표시할 수 있다.
또한, 디스플레이부(115)는 외부 서버에 의해 검색 질의어를 이용하여 검색된 결과 정보를 표시할 수 있다.
또한, 디스플레이부(115)는 복수 개로 분할될 수 있고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시할 수 있다.
오디오 처리부(120)는 오디오 데이터에 대한 처리를 수행한다. 오디오 처리부(120)에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다. 한편, 오디오 처리부(120)는 복수의 컨텐츠에 대응되는 오디오를 처리하기 위해 복수의 오디오 처리 모듈을 구비할 수 있다.
오디오 출력부(125)는 제어부(180)의 제어에 의해 튜너부(135)를 통해 수신된 방송 신호에 포함된 오디오를 출력한다. 오디오 출력부(125)는 통신부(150) 또는 입/출력부(170)를 통해 입력되는 오디오(예를 들어, 음성, 사운드)를 출력할 수 있다. 또한, 오디오 출력부(125)는 제어부(180)의 제어에 의해 저장부(190)에 저장된 오디오를 출력할 수 있다. 오디오 출력부(125)는 스피커(126), 헤드폰 출력 단자(127) 또는 S/PDIF(Sony/Philips Digital Interface: 출력 단자(128) 중 적어도 하나를 포함할 수 있다. 오디오 출력부(125)는 스피커(126), 헤드폰 출력 단자(127) 및 S/PDIF 출력 단자(128)의 조합을 포함할 수 있다.
전원부(130)는 제어부(180)의 제어에 의해 전자 장치(100) 내부의 구성 요소들(110 내지 190)로 외부의 전원 소스에서부터 입력되는 전원을 공급한다. 또한, 전원부(130)는 제어부(180)의 제어에 의해 전자 장치(100) 내부에 위치하는 하나 또는 둘 이상의 배터리(도시되지 아니함)에서부터 출력되는 전원을 내부의 구성 요소들(110 내지 190)에게 공급할 수 있다.
튜너부(135)는 유선 또는 무선으로 수신되는 방송 신호를 증폭(amplification), 혼합(mixing), 공진(resonance)등을 통하여 많은 전파 성분 중에서 전자 장치(100)에서 수신하고자 하는 채널의 주파수만을 튜닝(tuning)시켜 선택할 수 있다. 방송 신호는 오디오(audio), 비디오(video) 및 부가 정보(예를 들어, EPG(Electronic Program Guide))를 포함한다.
튜너부(135)는 사용자 입력(예를 들어, 제어 장치로부터 수신되는 제어 신호, 예컨대, 채널 번호 입력, 채널의 업다운(up-down) 입력 및 EPG 화면에서 채널 입력)에 따라 채널 번호(예를 들어, 케이블 방송 506번)에 대응되는 주파수 대역에서 방송 신호를 수신할 수 있다.
튜너부(135)는 지상파 방송, 케이블 방송, 위성 방송, 인터넷 방송 등과 같이 다양한 소스로부터 방송 신호를 수신할 수 있다. 튜너부(135)는 아날로그 방송 또는 디지털 방송 등과 같은 소스로부터 방송 신호를 수신할 수도 있다. 튜너부(135)를 통해 수신된 방송 신호는 디코딩(decoding, 예를 들어, 오디오 디코딩, 비디오 디코딩 또는 부가 정보 디코딩)되어 오디오, 비디오 및/또는 부가 정보로 분리된다. 분리된 오디오, 비디오 및/또는 부가 정보는 제어부(180)의 제어에 의해 저장부(190)에 저장될 수 있다.
또한, 전자 장치(100)의 튜너부(135)는 하나이거나 복수일 수 있다. 튜너부(135)는 전자 장치(100)와 일체형(all-in-one)으로 구현되거나 또는 전자 장치(100)와 전기적으로 연결되는 튜너부를 가지는 별개의 장치(예를 들어, 셋탑박스(set-top box, 도시되지 아니함), 입/출력부(170)에 연결되는 튜너부(도시되지 아니함))로 구현될 수 있다.
일 실시예에 따른 튜너부(135)는 제어부(180)의 제어에 따라 방송 신호를 수신하여 디스플레이부(115)에 출력할 수 있다.
센싱부(140)는, 전자 장치(100)의 상태 또는 전자 장치(100) 주변의 상태를 감지하고, 감지된 정보를 제어부(130)로 전달할 수 있다. 센싱부(1400)는, 지자기 센서(Magnetic sensor)(141), 가속도 센서(Acceleration sensor)(142), 온/습도 센서(143), 적외선 센서(144), 자이로스코프 센서(145), 위치 센서(예컨대, GPS)(146), 기압 센서(147), 근접 센서(148), 및 RGB 센서(illuminance sensor)(149) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.
또한, 센싱부(140)는 입력 도구에 의한 터치 입력을 감지하기 위한 센서 및 사용자에 의한 터치 입력을 감지하기 위한 센서를 포함할 수 있다. 이 경우, 사용자에 의한 터치 입력을 감지하기 위한 센서는 터치 스크린 또는 터치 패드에 포함될 수 있다. 또한, 입력 도구에 의한 터치 입력을 감지하기 위한 센서는 터치 스크린 또는 터치 패드의 하부에 위치하거나, 터치 스크린 또는 터치 패드 내에 포함될 수 있다.
통신부(150)는 제어부(180)의 제어에 의해 전자 장치(100)를 외부 장치(예를 들어, 오디오 장치 등)와 연결할 수 있다. 제어부(180)는 통신부(150)를 통해 연결된 외부 장치로 컨텐츠를 송/수신, 외부 장치로부터 어플리케이션(application)을 다운로드 하거나 또는 웹 브라우징을 할 수 있다.
통신부(150)는 디스플레이 전자 장치(100)의 성능 및 구조에 대응하여 무선 랜(151), 블루투스(152), 및 유선 이더넷(Ethernet, 153) 중 적어도 하나를 포함할 수 있다. 통신부(150)는 무선랜(151), 블루투스(152), 및 유선 이더넷(Ethernet, 153)의 조합을 포함할 수도 있다.
또한, 통신부(150)는 BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(Near Field Communication unit), WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
또한, 통신부(150)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신할 수 있다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
또한, 통신부(150)는, 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신하는 방송 수신부를 포함할 수 있다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다.
또한, 통신부(150)는 제어부(180)의 제어에 의해, 외부 제어 장치의 제어 신호를 수신할 수 있다. 제어 신호는 블루투스 타입, RF 신호 타입 또는 와이파이 타입으로 구현될 수 있다.
감지부(160)는 사용자의 음성, 사용자의 영상 또는 사용자의 인터랙션을 감지한다.
마이크(161)는 사용자의 발화(utterance)된 음성을 수신한다. 마이크(161)는 수신된 음성을 전기 신호로 변환하여 제어부(180)로 출력할 수 있다. 사용자 음성은 예를 들어, 디스플레이 전자 장치(100)의 메뉴 또는 기능에 대응되는 음성을 포함할 수 있다. 마이크(161)의 인식 범위는 마이크(161)에서부터 사용자 위치까지 4 m 이내를 권장하며, 마이크(161)의 인식 범위는 사용자 목소리의 크기와 주변 환경(예를 들어, 스피커 소리, 주변 소음)에 대응하여 달라질 수 있다.
마이크(161)는 디스플레이 장치(100)와 일체형 또는 분리형으로 구현될 수 있다. 분리된 마이크(161)는 통신부(150) 또는 입/출력부(170)를 통해 디스플레이 전자 장치(100)와 전기적으로 연결될 수 있다.
전자 장치(100)의 성능 및 구조에 따라 마이크(161)가 제외될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
카메라부(162)는 렌즈(도시되지 아니함) 및 이미지 센서(도시되지 아니함)로 구성될 수 있다. 카메라부(162)는 복수의 렌즈와 이미지 프로세싱을 이용하여 광학 줌(optical zoom) 또는 디지털 줌(digital zoom)을 지원할 수 있다. 카메라부(162)의 인식 범위는 카메라의 각도 및 주변 환경 조건에 따라 다양하게 설정될 수 있다. 카메라부(162)가 복수개의 카메라로 구성되는 경우, 복수의 카메라를 이용하여 3차원 정지 이미지 또는 3차원 모션을 수신할 수 있다.
카메라부(162)는 전자 장치(100)와 일체형 또는 분리형으로 구현될 수 있다. 분리된 카메라부(152)를 포함하는 별도의 장치(도시되지 아니함)는 통신부(150) 또는 입/출력부(170)를 통해 전자 장치(100)와 전기적으로 연결될 수 있다.
전자 장치(100)의 성능 및 구조에 따라 카메라부(162)가 제외될 수 있다는 것은 당해 기술 분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
광 수신부(163)는 외부의 제어 장치에서부터 수신되는 광 신호(제어 신호를 포함)를 디스플레이부(115)의 베젤의 광창(도시되지 아니함) 등을 통해 수신한다. 광 수신부(163)는 외부의 제어 장치로부터 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 광 신호를 수신할 수 있다. 수신된 광 신호로부터 제어부(180)의 제어에 의해 제어 신호가 추출될 수 있다.
입/출력부(170)는 제어부(180)의 제어에 의해 전자 장치(100)의 외부로부터 비디오(예를 들어, 동영상 등), 오디오(예를 들어, 음성, 음악 등) 및 부가 정보(예를 들어, EPG 등) 등을 수신한다. 입/출력부(170)는 HDMI 포트(High-Definition Multimedia Interface port, 171), 컴포넌트 잭(component jack, 172), PC 포트(PC port, 173), 및 USB 포트(USB port, 174) 중 하나를 포함할 수 있다. 입/출력부(170)는 HDMI 포트(171), 컴포넌트 잭(172), PC 포트(173), 및 USB 포트(174)의 조합을 포함할 수 있다.
입/출력부(170)의 구성 및 동작은 실시예에 따라 다양하게 구현될 수 있다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
제어부(180)는 전자 장치(100)의 전반적인 동작 및 전자 장치(100)의 내부 구성요소들(110 내지 190)사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 제어부(180)는 사용자의 입력이 있거나 기 설정되어 저장된 조건을 만족하는 경우, 제어부(180)는 저장부(190)에 저장된 OS(Operation System) 및 다양한 애플리케이션을 실행할 수 있다.
제어부(180)는 전자 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 저장하거나, 전자 장치(100)에서 수행되는 다양한 작업에 대응되는 저장 영역으로 사용되는 램(RAM, 181), 전자 장치(100)의 제어를 위한 제어 프로그램이 저장된 롬(ROM, 182) 및 프로세서(Processor, 183)를 포함할 수 있다.
프로세서(183)는 비디오에 대응되는 그래픽 처리를 위한 그래픽 프로세서(Graphic Processing Unit, 도시되지 아니함)를 포함할 수 있다. 프로세서(183)는 코어(core, 도시되지 아니함)와 GPU(도시되지 아니함)를 통합한 SoC(System On Chip)로 구현될 수 있다. 프로세서(183)는 싱글 코어, 듀얼 코어, 트리플 코어, 쿼드 코어 및 그 배수의 코어를 포함할 수 있다.
또한, 프로세서(183)는 복수의 프로세서를 포함할 수 있다. 예를 들어, 프로세서(183)는 메인 프로세서(main processor, 도시되지 아니함) 및 슬립 모드(sleep mode)에서 동작하는 서브 프로세서(sub processor, 도시되지 아니함)로 구현될 수 있다.
그래픽 처리부(184)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부는 감지부(160)를 통해 감지된 사용자 인터랙션을 이용하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부에서 생성된 화면은 디스플레이부(115)의 디스플레이 영역 내에 표시된다.
제1 내지 n 인터페이스(185-1 내지 185-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
램(181), 롬(182), 프로세서(183), 그래픽 처리부(184), 제1 내지 n 인터페이스(185-1 내지 185-n)는 내부 버스(bus)(186)를 통해 상호 연결될 수 있다.
본 실시예에서 “제어부”라는 용어는 프로세서(183), 롬(182) 및 램(181)을 포함할 수 있다.
일 실시예에 따른 전자 장치(100)의 제어부(180)는 튜너부(135)를 통해 수신된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출할 수 있다.
또한, 제어부(180)는 상기 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 상기 적어도 하나의 오브젝트를 추출할 수 있다.
또한, 제어부(180)는 상기 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 상기 방송 콘텐트를 분석할 수 있다.
또한, 제어부(180)는 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다.
또한, 제어부(180)는 상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출할 수 있다.
또한, 제어부(180)는 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 제어부(180)는 통신부(150)를 통해, 외부 서버에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청하고, 상기 외부 서버로부터 수신한 상기 키워드 선택 기준에 관한 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 제어부(180)는 사용자의 설정 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
또한, 제어부(180)는 상기 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다.
또한, 제어부(180)는 미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 상기 검색 질의어를 생성할 수 있다.
또한, 제어부(180)는 상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공할 수 있다.
또한, 제어부(180)는 통신부(150)를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하고, 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신할 수 있다.
또한, 제어부(180)는 디스플레이부(115)에 상기 검색 결과 정보를 표시할 수 있다.
또한, 제어부(180)는 디스플레이부(115)를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시할 수 있다.
또한, 제어부(180)는 상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어할 수 있다.
또한, 제어부(180)는 상기 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공할 수 있다.
제어부(180)의 구성 및 동작은 발명의 실시예에 따라 다양하게 구현될 수 있다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
저장부(190)는 제어부(180)의 제어에 의해 전자 장치(100)를 구동하고 제어하기 위한 다양한 데이터, 프로그램 또는 어플리케이션을 저장할 수 있다. 저장부(190)는 비디오 처리부(110), 디스플레이부(115), 오디오 처리부(120), 오디오 출력부(125), 전원부(130), 튜너부(140), 통신부(150), 감지부(160), 입/출력부(170)의 구동에 대응되는 입력/출력되는 신호 또는 데이터를 저장할 수 있다. 저장부(190)는 디스플레이 전자 장치(100) 및 제어부의 제어를 위한 제어 프로그램, 제조사에서 최초 제공되거나 외부에서부터 다운로드 받은 어플리케이션, 어플리케이션과 관련된 GUI(graphical user interface), GUI를 제공하기 위한 오브젝트(예를 들어, 이미지 텍스트, 아이콘, 버튼 등), 사용자 정보, 문서, 데이터베이스들 또는 관련 데이터들을 저장할 수 있다.
일 실시예에서 “저장부” 라는 용어는 저장부(190), 제어부의 롬(182), 램(181) 또는 전자 장치(100)에 장착되는 메모리 카드(예를 들어, micro SD 카드, USB 메모리, 도시되지 아니함)를 포함한다. 또한, 저장부(190)는 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
저장부(190)는 도시되지 아니한 방송 수신 모듈, 채널 제어 모듈, 볼륨 제어 모듈, 통신 제어 모듈, 음성 인식 모듈, 모션 인식 모듈, 광 수신 모듈, 디스플레이 제어 모듈, 오디오 제어 모듈, 외부 입력 제어 모듈, 전원 제어 모듈, 무선(예를 들어, 블루투스)으로 연결되는 외부 장치의 전원 제어 모듈, 음성 데이터베이스(DB), 또는 모션 데이터베이스(DB)를 포함할 수 있다. 저장부(190)의 도시되지 아니한 모듈들 및 데이터 베이스는 전자 장치(100)에서 방송 수신의 제어 기능, 채널 제어 기능, 볼륨 제어 기능, 통신 제어 기능, 음성 인식 기능, 모션 인식 기능, 광 수신 제어 기능, 디스플레이 제어 기능, 오디오 제어 기능, 외부 입력 제어 기능, 전원 제어 기능 또는 무선(예를 들어, 블루투스)으로 연결되는 외부 장치의 전원 제어 기능을 수행하기 위하여 소프트웨어 형태로 구현될 수 있다. 제어부(180)는 저장부(190)에 저장된 이들 소프트웨어를 이용하여 각각의 기능을 수행할 수 있다.
또한, 디스플레이부(115)를 가지는 전자 장치(100)는 튜너부를 가지는 별도의 외부 장치(예를 들어, 셋탑 박스, 도시되지 아니함)와 전기적으로 연결될 수 있다. 예를 들어, 전자 장치(100)는 아날로그 TV, 디지털 TV, 3D-TV, 스마트 TV, LED TV, OLED TV, 플라즈마 TV, 모니터 등으로 구현될 수 있으나, 이에 한정되지 않는다는 것은 당해 기술 분야의 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
도 4의 전자 장치(100)에 도시된 구성 요소들(예를 들어, 110 내지 190)은 전자 장치(100)의 성능에 따라 적어도 하나의 구성요소가 추가되거나 삭제될 수 있다. 또한, 구성 요소들의 위치(예를 들어, 110 내지 190)는 전자 장치(100)의 성능 또는 구조에 따라 변경될 수 있다는 것은 당해 기술분야에서 통상의 지식을 가진 자에게 용이하게 이해될 것이다.
도 5는 일 실시예에 따른 방송 콘텐트와 관련된 정보를 제공하는 방법의 흐름도이다.
도 5의 단계 S501에서, 일 실시예에 따른 제어부(180)는 디스플레이부(115)에 표시된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출할 수 있다. 제어부(180)는 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 적어도 하나의 오브젝트를 추출할 수 있다.
일 실시예에 따라, 방송 콘텐트의 영상으로부터 개체 이미지를 분석하거나, ASR(Automatic Speech Recognition) 기술 등을 이용하여 방송 콘텐트의 음향을 분석하거나, OCR(Optical Character Reader) 기술 등을 이용하여 방송 콘텐트의 자막을 분석할 수 있다.
제어부(180)는 방송 콘텐트의 영상, 음향, 자막 등으로부터 인물, 사물 등의 개체를 인식하거나 상황 정보 등을 분석함으로써, 적어도 하나의 오브젝트를 추출할 수 있다. 예를 들어, 방송 콘텐트의 영상으로부터 한 명의 인물을 인식한 경우, 인식된 한 명의 인물이 하나의 오브젝트인 것으로 설명될 수 있다. 또한, 방송 콘텐트의 음향으로부터, ‘갤럭시 기어’라는 사물 명칭이 분석된 경우, 분석된 사물을 하나의 오브젝트인 것으로 설명될 수 있다.
한편, 일 실시예에 따라, 제어부(180)는 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 방송 콘텐트를 분석할 수 있다. 예를 들어, 전자 장치(100)는 미리 설정된 입력(예컨대, TV 리모컨의 특정 버튼의 입력 신호)을 수신하면, 입력 신호가 수신된 시점에 수신되는 방송 신호를 분석하여 오브젝트를 추출할 수 있다.
도 5의 단계 S502에서, 일 실시예에 따른 제어부(180)는 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다.
일 실시예에 따라, 제어부(180)는 상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출할 수 있다.
예를 들어, 단계 S501에서 추출된 오브젝트가 한 명의 인물인 경우, 제어부(180)는 인물의 본 명, 인물이 등장한 영화의 캐릭터 명 등을 오브젝트를 식별하는 키워드로 추출할 수 있다. 또한, 단계 S501에서 추출된 오브젝트가 사물 명칭인 경우, 제어부(180)는 사물의 명칭(예컨대, 스마트 손목시계), 고유 명사(예컨대, 갤럭시 기어), 약칭(예컨대, 기어) 등을 오브젝트를 식별하는 키워드로 추출할 수 있다.
도 5의 단계 S503에서, 일 실시예에 따른 제어부(180)는 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
제어부(180)는 통신부(150)를 통해 외부 서버에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청할 수 있다. 제어부(180)는 상기 외부 서버로부터 수신한 상기 키워드 선택 기준에 관한 정보에 기초하여, 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
키워드 선택 기준이란, 단계 S502에서 각 오브젝트로부터 추출된 키워드가 복수 개인 경우, 복수 개의 키워드 중 검색 질의어를 생성하기에 적합한 키워드를 선택하기 위한 기준을 의미할 수 있다.
일 실시예에 따라, 제어부(180)는 오브젝트를 식별하는 복수 개의 키워드 중 가장 고빈도로 사용된 단어를 검색 질의어를 생성하기 위한 키워드로 선택할 수 있다. 예컨대, 키워드 선택 기준은, 특정 단어가 SNS의 게시 글, 뉴스 기사 등에서 사용된 빈도에 관한 정보를 포함할 수 있다.
또한, 제어부(180)는, 사용자의 설정 정보에 기초하여, 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
제어부(180)는 복수의 키워드 선택 기준을 제공하고 사용자로부터 선택된 키워드 선택 기준을 설정할 수 있다. 키워드 선택 기준은 사용자의 입력에 의해 설정 또는 변경될 수 있음을 의미한다.
예를 들어, 제어부(180)는, 사용자의 선택 입력에 따라, 하나의 오브젝트를 식별하는 단어로서 사물 명칭과 고유 명사가 추출된 경우, 검색 질의어를 생성하기 위한 키워드로서 고유 명사가 우선적으로 선택되도록 설정할 수 있다.
도 5의 단계 S504에서, 일 실시예에 따른 제어부(180)는 상기 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다.
일 실시예에 따라 제어부(180)는 미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다.
일 실시예에 따라, 키워드의 배열 순서는, 소정의 검색 규칙을 의미할 수 있다. 예컨대, 복수의 키워드가, 인물 명, 음식 명, 서술어의 순서에 따라, 조합되도록 설정될 수 있다. 또한, 복수의 키워드가, 기기 명칭, 고유 명사의 순서에 따라, 조합되도록 설정될 수 있다. 또한, 복수의 키워드가, SNS 게시 글, 뉴스 기사 등에서 고빈도로 사용된 순서에 따라, 조합되도록 설정될 수도 있다.
도 5의 단계 S505에서, 일 실시예에 따른 제어부(180)는 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공할 수 있다.
제어부(180)는 통신부(150)를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하고, 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신할 수 있다. 또한, 제어부(180)는 디스플레이부(115)에 상기 검색 결과 정보를 표시할 수 있다.
일 실시예에 따라, 제어부(180)는 디스플레이부(115)를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시할 수 있다.
또 다른 예로, 제어부(180)는 상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어할 수 있다. 예를 들어, TV를 보고 있는 사용자는 TV에 방송되고 있는 방송 콘텐트와 관련된 정보를 사용자의 스마트 폰에서 확인할 수 있다.
한편, 일 실시예에 따른 제어부(180)는, 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공할 수 있다.
일 실시예에 따라, 제어부(180)는 단계 S504에서 복수 개의 검색 질의어 후보를 생성할 수 있다. 제어부(180)는 각 검색 질의어에 기초한 검색 결과 중 검색 결과 정보량이 가장 많은 검색 질의어를 결정할 수 있다. 제어부(180)는 결정된 검색 질의어를 이용한 검색 결과 정보를 디스플레이부(115)에 표시하거나, 다른 디스플레이 장치로 전송할 수 있다.
도 6은 일 실시예에 따른 방송 콘텐트를 분석하는 예를 설명하기 위한 도면이다.
도 6에 도시한 바와 같이, 일 실시 예에 따라, 제어부(180)는 방송 콘텐트에 포함된 영상(c11)으로부터 사물 인식을 통해 제1 오브젝트(o101)(예컨대, 스마트 폰 개체), 제2 오브젝트(o102)(예컨대, 소정의 캐릭터 이미지)를 추출할 수 있다.
도 6은 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 7은 일 실시예에 따른 오브젝트를 식별하는 키워드를 추출하는 예를 설명하기 위한 도면이다.
도 7에 도시한 바와 같이, 일 실시 예에 따라, 제어부(180)는 제1 오브젝트(o101)(예컨대, 스마트 폰 개체)를 식별하는 키워드 예컨대, A-1) 갤럭시 S6 엣지, A-2) 갤 6 엣지, A-3) SM-G925X, A-4) 스마트 폰 (k101)을 추출할 수 있다.
또한, 제어부(180)는 제2 오브젝트(o102)(예컨대, 소정의 캐릭터 이미지)를 식별하는 키워드 예컨대, B-1) 아이언맨, B-2) 토니 스타크, B-3) 마스크 (k102)를 추출할 수 있다.
도 7은 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 8은 일 실시예에 따른 검색 질의어를 생성하기 위한 키워드를 선택하는 예를 설명하기 위한 도면이다.
도 8에 도시한 바와 같이, 일 실시 예에 따라, 제어부(180)는 제1 오브젝트(o101)(예컨대, 스마트 폰 개체)를 식별하는 키워드(예컨대, A-1) 갤럭시 S6 엣지, A-2) 갤 6 엣지, A-3) SM-G925X, A-4) 스마트 폰)(k101)의 집합 중 하나인 (A-2) 갤 6 엣지)(q101)를 검색 질의어를 생성하기 위한 키워드로서 선택할 수 있다.
또한, 제어부(180)는 제2 오브젝트(o102)(예컨대, 소정의 캐릭터 이미지)를 식별하는 키워드(예컨대, B-1) 아이언맨, B-2) 토니 스타크, B-3) 마스크)(k102)의 집합 중 하나인 (B-1) 아이언맨)(q102)을 검색 질의어를 생성하기 위한 키워드로서 선택할 수 있다.
도 8은 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 9는 일 실시예에 따른 키워드 선택 기준에 관한 정보의 예를 설명하기 위한 도면이다.
도 8에서 설명한, 복수의 키워드 집합 중 검색 질의어를 생성하기 위한 키워드를 선택하는 기준은, 예컨대, 사용 빈도가 높은 단어, 캐릭터 명칭과 인물 명 중 캐릭터 명칭이 우선함, 고유명사와 사물명칭 중 고유 명사가 우선함, 기타 사용자가 정의하는 기준 등일 수 있다.
일 실시예에 따라, 전자 장치(100)는 사용자로부터 복수의 키워드 선택 기준 중 적어도 하나를 선택할 수 있도록 하는 인터페이스 화면(b10)을 디스플레이부(115)에 제공할 수 있다.
예를 들어, 키워드 선택 기준을 제공하는 인터페이스 화면(b10)은 전자 장치(100)의 환경 설정 등의 메뉴를 통해 제공될 수 있다.
또한, 키워드 선택 기준을 제공하는 인터페이스 화면(b10)은 사용자가 디스플레이부(115)에 표시된 방송 콘텐트를 분석하기 위해 선택하는 입력이 수신된 후, 방송 콘텐트의 화면 상에 팝업 창 등으로 제공될 수도 있다.
도 9는 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 10은 일 실시예에 따른 키워드 선택 기준에 관한 정보를 획득하는 예를 설명하기 위한 도면이다.
일 실시 예에 따라, 전자 장치(100)의 제어부(180)는 통신부(150)를 통해 외부 서버(300)에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청할 수 있다. 제어부(180)는 통신부(150)를 통해 외부 서버(300)로부터 키워드 선택 기준에 관한 정보를 수신할 수 있다.
예를 들어, 키워드 선택 기준은, 특정 단어가 SNS의 게시 글, 뉴스 기사 등에서 사용된 빈도에 관한 정보일 수 있다. 제어부(180)는 SNS의 게시 글 등에서 가장 고빈도로 사용된 단어에 관한 정보를 외부 서버(300)에 요청하여 수신할 수 있다.
일 실시 예에 따라, 제어부(180)는 외부 서버(300)로부터 수신한 상기 키워드 선택 기준에 관한 정보에 기초하여, 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다.
도 10은 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 11은 일 실시예에 따른 검색 질의어를 생성하는 예를 설명하기 위한 도면이다.
일 실시예에 따라, 전자 장치(100)의 제어부(180)는 미리 설정된 키워드의 배열 순서에 기초하여, 선택된 키워드(도 8 참조)를 조합하여 검색 질의어를 생성할 수 있다.
도 11에 도시한 바와 같이, 예를 들어, 제어부(180)는 검색 질의어를 생성하기 위해 선택된 키워드(도 8 참조)인 ‘갤 6 엣지’(q101)와 ‘아이언맨’(q102)을 조합한 ‘갤 6 엣지 아이언맨’(m10)을 검색 질의어로 생성할 수 있다.
도 11은 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 12는 일 실시예에 따른 외부 서버를 이용하여 검색 질의어를 이용한 검색 결과 정보를 제공하는 예를 설명하기 위한 흐름도이다.
도 12의 단계 S1201에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 디스플레이부(115)에 표시된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출할 수 있다. 단계 S1202에서, 전자 장치(100)의 제어부(180)는 단계 S1201에서 추출된 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다. 단계 S1203에서, 전자 장치(100)의 제어부(180)는 단계 S1202에서 추출된 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다. 단계 S1204에서, 전자 장치(100)의 제어부(180)는 단계 S1203에서 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다.
단계 S1201 내지 단계 S1204에 관해서는 도 5의 단계 S501 내지 도 S504에 관한 설명에서 전술한 바 있으므로, 상세한 설명을 생략하기로 한다.
도 12의 단계 S1205에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 단계 S1204에서 생성된 검색 질의어를 외부 서버로 전송할 수 있다. 단계 S1206에서, 전자 장치(100)의 제어부(180)는 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신할 수 있다.
일 실시예에 따라, 제어부(180)는 미리 설정된 검색 서버로 검색 질의어를 전송할 수 있다. 검색 질의어를 전송하는 외부 검색 서버는, 예컨대, 인터넷 포털 사이트의 서버일 수 있으며, 이에 한정되지 않는다.
일 실시예에 따라, 제어부(180)는 검색 질의어를 전송할 검색 서버를 전자 장치(100)의 제조 시에 디폴트로 설정할 수 있다. 또한, 제어부(180)는 사용자의 입력에 따라, 검색 서버를 설정 또는 변경할 수 있다.
도 12의 단계 S1207에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 디스플레이부(115)에 상기 검색 결과 정보를 표시할 수 있다.
일 실시예에 따라, 제어부(180)는 디스플레이부(115)에 표시 중인 방송 콘텐트 상의 일부 영역에 중첩하여 상기 검색 결과 정보를 표시할 수 있다. 또한, 제어부(180)는 디스플레이부(115)를 분할하고, 상기 분할된 일 면에 검색 결과 정보를 표시할 수도 있다.
도 13a 내지 도 13c는 일 실시예에 따른 서버를 이용하여 검색 질의어를 이용한 검색 결과 정보를 제공하는 예를 설명하기 위한 도면이다.
도 13a에 도시한 바와 같이, 일 실시예에 따라, 제어부(180)는 통신부(1500를 통해, 검색 서비스를 제공하는 외부 서버(300)에게 검색 질의어를 전송하고, 외부 서버(300)에 의한 검색 결과 정보를 수신할 수 있다.
일 실시예에 따라, 제어부(180)는 디스플레이부(115)를 복수 개로 분할하고, 상기 분할된 일 면에 방송 콘텐트(c11-1)를 표시하고, 상기 분할된 다른 일 면에, 외부 서버(300)로부터 수신한 검색 결과 정보(s11)를 표시할 수 있다.
예를 들어, 제어부(180)는 표시 중이던 방송 콘텐트를 디스플레이부(115)의 일부 영역에 표시(c11-1)하고, 인터넷 포탈 사이트에서 검색 질의어를 이용하여 검색된 결과 정보(예컨대, 검색 질의어를 포함하는 뉴스 게시 글)을 디스플레이부(115)의 다른 일부 영역에 표시(s11)할 수 있다.
도 13a를 참조하면, 디스플레이부(115)가 좌, 우 두 영역으로 분할되고, 표시 중이던 방송 콘텐트의 화면(도 1의 (a) 참조)의 수평 해상도가 감소되어 디스플레이부(115)의 좌측 영역에 표시되고(c11-1), 디스플레이부(115)의 우측 영역에는 검색 결과 정보가 표시(s11)될 수 있으며, 이에 한정되지 않는다.
또 다른 예로, 도 13b를 참조하면, 표시 중이던 방송 콘텐트의 화면(도 1의 (a) 참조)의 수직, 수평 해상도가 모두 감소되어 표시될 수 있고(c11-2), 방송 콘텐트가 표시된 영역을 제외한 디스플레이부(115)의 나머지 영역에 검색 결과 정보가 표시(s11-1)될 수 있다.
또 다른 예로, 디스플레이부(115)가 상, 하 두 영역으로 분할되고, 표시 중이던 방송 콘텐트의 화면(도 1의 (a) 참조)의 수직 해상도가 감소되어 디스플레이부(115)의 상측 영역에 표시되고, 디스플레이부(115)의 하측 영역에는 검색 결과 정보가 표시될 수도 있으며, 이에 한정되지 않는다.
또한, 도 13c를 참조하면, 표시 중이던 방송 콘텐트의 화면(도 1의 (a) 참조)이 표시(c11-3)된 상태에서, 방송 콘텐트의 화면 상에 검색 결과 정보가 중첩하여 표시(s11-2)될 수 있다.
도 13c에 도시한 바와 같이, 검색 결과 정보(s11-2)는 방송 콘텐트의 화면(c11-3) 상에 반투명하게 보이도록 중첩되어 표시될 수 있다.
또 다른 예로, 검색 결과 정보(s11-2)가 표시된 영역은, 방송 콘텐트가 가려지도록 불투명하게 표시될 수도 있다.
일 실시예에 따라, 제어부(180)는 검색 결과 정보가 표시되는 영역의 투명도를 조절할 수 있다. 전자 장치(100)는 검색 결과 정보가 표시되는 영역의 투명도를 디폴트로 설정하거나, 사용자 입력에 따라 설정 또는 변경할 수도 있다.
한편, 전자 장치(100)는 미리 설정된 입력(예컨대, TV 리모컨의 특정 버튼의 입력 신호)을 수신하면, 방송 콘텐트 분석 단계들을 수행하여 검색 결과 정보를 디스플레이부(115)에 표시할 수 있으며, 이에 제한되지 않는다.
예를 들어, 사용자는 TV 시청 중, 방송 중인 콘텐트와 관련된 정보를 획득하고자 할 때, TV 리모컨의 특정 버튼을 입력함으로써, 방송 콘텐트와 관련된 정보를 편리하게 확인할 수 있다.
또 다른 예로, 전자 장치(100)는 미리 설정된 입력(예컨대, TV 리모컨의 특정 버튼의 입력 신호)을 수신하면 방송 콘텐트 분석 단계들을 수행하여 검색 결과 정보를 저장부(190)에 저장하고, 검색 결과 표시를 위한 또 다른 사용자 입력 신호를 수신한 때에, 검색 결과 정보를 디스플레이부(115)에 표시할 수도 있다.
예를 들어, 사용자는 TV 시청 중, 방송 중인 콘텐트와 관련된 정보를 획득하고자 할 때 TV 리모컨의 특정 버튼을 입력함으로써 방송 콘텐트와 관련된 정보가 우선 검색되도록 하고, 후에 사용자가 원하는 시점에 검색 결과 정보를 확인할 수도 있다.
한편, 전자 장치(100)는 검색 결과 정보(s11, s11-1, s11-2)를 디스플레이부(115)에 표시한 후, 미리 설정된 시간이 경과하면, 검색 결과 정보(s11, s11-1, s11-2)의 화면이 사라지도록 제어하고 표시 중이던 방송 콘텐트를 디스플레이부(115)의 전체에 표시할 수 있으며, 이에 제한되지 않는다.
또 다른 예로, 전자 장치(100)는 검색 결과 정보(s11, s11-1, s11-2)를 디스플레이부(115)에 표시한 후, 미리 설정된 사용자 입력 신호를 수신한 경우에, 검색 결과 정보(s11, s11-1, s11-2)의 화면이 사라지도록 제어하고 표시 중이던 방송 콘텐트를 디스플레이부(115)의 전체에 표시할 수도 있다.
도 13a 내지 도 13c는 일 실시 예를 도시한 것으로서 이에 한정되지 않는다.
도 14는 일 실시예에 따른 검색 결과 정보를 다른 디스플레이 장치에 표시하는 예를 설명하기 위한 흐름도이다.
도 14의 단계 S1401에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 디스플레이부(115)에 표시된 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출할 수 있다. 단계 S1402에서, 전자 장치(100)의 제어부(180)는 단계 S1401에서 추출된 오브젝트를 식별하는 적어도 하나의 키워드를 추출할 수 있다. 단계 S1403에서, 전자 장치(100)의 제어부(180)는 단계 S1402에서 추출된 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택할 수 있다. 단계 S1404에서, 전자 장치(100)의 제어부(180)는 단계 S1403에서 선택된 키워드를 조합하여 검색 질의어를 생성할 수 있다.
단계 S1401 내지 단계 S1404에 관해서는 도 5의 단계 S501 내지 도 S504에 관한 설명에서 전술한 바 있으므로, 상세한 설명은 생략하기로 한다.
도 14의 단계 S1405에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 상기 생성된 검색 질의어를 외부 서버로 전송할 수 있다. 단계 S1405에 관해서는 도 12의 단계 S1205에 관한 설명에서 전술한 바 있으므로, 상세한 설명은 생략하기로 한다.
도 14의 단계 S1406에서, 일 실시예에 따른 전자 장치(100)의 제어부(180)는 상기 외부 서버에 의해 검색된 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어할 수 있다.
일 실시예에 따라, 전자 장치(100)는 사용자의 기기 중 블루투스 연결이 가능한 기기를 검색할 수 있고, 블루투스 연결된 기기로 검색 결과 정보를 전송할 수 있다.
또 다른 예로, 전자 장치(100)는 검색 질의어에 의한 검색 결과 정보를 수신할 다른 디스플레이 장치를 미리 설정하고, 외부 서버에게 상기 미리 설정된 디스플레이 장치로 검색 결과 정보를 전송하도록 요청할 수도 있다.
도 15는 일 실시예에 따른 검색 결과 정보를 다른 디스플레이 장치에 표시하는 예를 설명하기 위한 도면이다.
일 실시예에 따라, 전자 장치(100)의 제어부(180)는 검색 질의어를 이용한 검색 결과 정보를, 디스플레이 장치(400)로 전송하고, 디스플레이 장치(400)의 디스플레이부에 검색 결과 정보(s11)가 표시되도록 제어할 수 있다.
도 15에 도시한 바와 같이, 예를 들어, TV 를 시청하는 사용자는 TV에 방송되고 있는 방송 콘텐트와 관련된 뉴스 기사 글을 사용자의 스마트 폰(400)에서 확인할 수 있다.
전술한 실시예들은 예시적인 것이며, 한정적이 아닌 것으로 이해될 수 있다. 또한, 도 5, 12, 14의 흐름도에서 도시한 동작들의 순서에 한정되는 것이 아니며, 본 발명의 다양한 실시예에 따라, 일부 단계가 생략되거나 부가될 수 있음은 물론, 일부 단계의 순서가 변경될 수 있는 것으로 이해될 수 있다.
일부 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
또한, 본 명세서에서, “부”는 프로세서 또는 회로와 같은 하드웨어 구성(hardware component), 및/또는 프로세서와 같은 하드웨어 구성에 의해 실행되는 소프트웨어 구성(software component)일 수 있다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 전자 장치
115 : 디스플레이부
135 : 튜너부
150 : 통신부
180 : 제어부

Claims (24)

  1. 방송 콘텐트와 관련된 정보를 제공하는 전자 장치에 있어서,
    상기 방송 콘텐트를 수신하는 튜너부; 및
    상기 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하고, 상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출하고, 상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택하며, 상기 선택된 키워드를 조합하여 검색 질의어를 생성하고, 상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공하는 제어부를 포함하는, 전자 장치.
  2. 제1 항에 있어서,
    상기 제어부는,
    상기 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 상기 적어도 하나의 오브젝트를 추출하는, 전자 장치.
  3. 제1 항에 있어서,
    상기 제어부는,
    상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출하는, 전자 장치.
  4. 제1 항에 있어서,
    통신부를 더 포함하고,
    상기 제어부는,
    상기 통신부를 통해, 외부 서버에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청하고, 상기 외부 서버로부터 수신한 상기 키워드 선택 기준에 관한 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택하는, 전자 장치.
  5. 제1 항에 있어서,
    상기 제어부는,
    사용자의 설정 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택하는, 전자 장치.
  6. 제1 항에 있어서,
    상기 제어부는,
    미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 상기 검색 질의어를 생성하는, 전자 장치.
  7. 제1 항에 있어서,
    외부 서버와 통신하는 통신부를 더 포함하고,
    상기 제어부는,
    상기 통신부를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하고, 상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신하는, 전자 장치.
  8. 제1 항에 있어서,
    디스플레이부를 더 포함하고,
    상기 제어부는,
    상기 디스플레이부에 상기 검색 결과 정보를 표시하는, 전자 장치.
  9. 제1 항에 있어서,
    디스플레이부를 더 포함하고,
    상기 제어부는,
    상기 디스플레이부를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시하는, 전자 장치.
  10. 제1 항에 있어서,
    상기 제어부는,
    상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어하는, 전자 장치.
  11. 제1 항에 있어서,
    상기 제어부는,
    상기 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공하는, 전자 장치.
  12. 제1 항에 있어서,
    상기 제어부는,
    상기 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 상기 방송 콘텐트를 분석하는, 전자 장치.
  13. 방송 콘텐트와 관련된 정보를 제공하는 방법에 있어서,
    튜너부를 통해 수신된 상기 방송 콘텐트를 분석하여 적어도 하나의 오브젝트를 추출하는 단계;
    상기 오브젝트를 식별하는 적어도 하나의 키워드를 추출하는 단계;
    상기 적어도 하나의 키워드 중 검색 질의어를 생성하기 위한 키워드를 선택하는 단계;
    상기 선택된 키워드를 조합하여 검색 질의어를 생성하는 단계; 및
    상기 검색 질의어를 이용한 검색 결과 정보를 사용자에게 제공하는 단계를 포함하는, 방법.
  14. 제13 항에 있어서,
    상기 오브젝트를 추출하는 단계는,
    상기 방송 콘텐트에 포함된 영상, 음향, 자막 및 부가 정보 중 적어도 하나로부터 인물, 사물 및 상황 중 적어도 하나를 분석하여 상기 적어도 하나의 오브젝트를 추출하는, 방법.
  15. 제13 항에 있어서,
    상기 오브젝트를 추출하는 단계는,
    상기 오브젝트를 식별하는 명칭, 약칭, 별칭 및 기호 중 적어도 하나를 상기 키워드로 추출하는, 방법.
  16. 제13 항에 있어서,
    상기 키워드를 선택하는 단계는,
    통신부를 통해, 외부 서버에게 사용 빈도를 포함하는 키워드 선택 기준에 관한 정보를 요청하는 단계; 및
    상기 외부 서버로부터 수신한 상기 키워드 선택 기준에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택하는, 방법.
  17. 제13 항에 있어서,
    상기 키워드를 선택하는 단계는,
    사용자의 설정 정보에 기초하여, 상기 검색 질의어를 생성하기 위한 키워드를 선택하는, 방법.
  18. 제13 항에 있어서,
    상기 검색 질의어를 생성하는 단계는,
    미리 설정된 키워드의 배열 순서에 기초하여, 상기 선택된 키워드를 조합하여 상기 검색 질의어를 생성하는, 방법.
  19. 제13 항에 있어서,
    상기 검색 결과 정보를 사용자에게 제공하는 단계는,
    통신부를 통해, 상기 생성된 검색 질의어를 외부 서버로 전송하는 단계; 및
    상기 외부 서버에 의해 상기 검색 질의어를 이용하여 검색된 결과 정보를 수신하는 단계를 포함하는, 방법.
  20. 제13 항에 있어서,
    상기 검색 결과 정보를 사용자에게 제공하는 단계는,
    디스플레이부에 상기 검색 결과 정보를 표시하는, 방법.
  21. 제13 항에 있어서,
    상기 검색 결과 정보를 사용자에게 제공하는 단계는,
    디스플레이부를 복수 개로 분할하고, 상기 분할된 일 면에 상기 방송 콘텐트를 표시하고, 상기 분할된 다른 일 면에 상기 검색 결과 정보를 표시하는, 방법.
  22. 제13 항에 있어서,
    상기 검색 결과 정보를 사용자에게 제공하는 단계는,
    상기 검색 결과 정보를, 미리 설정된 디스플레이 장치로 전송하고, 상기 디스플레이 장치의 디스플레이부에 상기 검색 결과 정보가 표시되도록 제어하는, 방법.
  23. 제13 항에 있어서,
    상기 검색 결과 정보를 사용자에게 제공하는 단계는,
    상기 검색 질의어를 복수 개 생성하는 경우, 각각의 검색 질의어에 기초한 검색 결과에 따라 상기 복수 개의 검색 질의어 중 하나를 결정하고, 상기 결정된 검색 질의어를 이용한 검색 결과 정보를 제공하는 단계를 포함하는, 방법.
  24. 제13 항에 있어서,
    상기 오브젝트를 추출하는 단계는,
    상기 방송 콘텐트를 분석하기 위한 사용자의 선택 입력이 수신된 시점의 상기 방송 콘텐트를 분석하는 단계를 포함하는, 방법.
KR1020150103871A 2015-07-22 2015-07-22 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법 KR20170011359A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020150103871A KR20170011359A (ko) 2015-07-22 2015-07-22 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법
US15/175,604 US20170026707A1 (en) 2015-07-22 2016-06-07 Electronic device for providing information associated with broadcast content and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150103871A KR20170011359A (ko) 2015-07-22 2015-07-22 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20170011359A true KR20170011359A (ko) 2017-02-02

Family

ID=57836661

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150103871A KR20170011359A (ko) 2015-07-22 2015-07-22 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법

Country Status (2)

Country Link
US (1) US20170026707A1 (ko)
KR (1) KR20170011359A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020054882A1 (ko) * 2018-09-11 2020-03-19 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180024200A (ko) * 2016-08-29 2018-03-08 오드컨셉 주식회사 영상 검색 정보 제공 방법, 장치 및 컴퓨터 프로그램
US10511892B2 (en) * 2016-12-30 2019-12-17 DISH Technologies L.L.C. Systems and methods for facilitating content discovery based on augmented context
CN107241630A (zh) * 2017-08-04 2017-10-10 康佳集团股份有限公司 电视遥控装置、按键布局切换处理方法、及存储介质
CN110609957B (zh) * 2019-09-19 2023-11-03 青岛海信移动通信技术有限公司 一种进行全局搜索的方法、终端和服务器
CN110769382B (zh) * 2019-10-09 2021-10-22 Oppo广东移动通信有限公司 消息推送方法、装置、终端设备及存储介质
CN111510753B (zh) * 2019-11-04 2022-10-21 海信视像科技股份有限公司 显示设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020054882A1 (ko) * 2018-09-11 2020-03-19 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US11509967B2 (en) 2018-09-11 2022-11-22 Lg Electronics Inc. Display device and method for controlling same

Also Published As

Publication number Publication date
US20170026707A1 (en) 2017-01-26

Similar Documents

Publication Publication Date Title
US10536742B2 (en) Display apparatus and display method
KR20170011359A (ko) 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법
US10019224B2 (en) Electronic device and method of operating the same
US20180348984A1 (en) Image display device and method of operating the same
EP3324641A1 (en) Display apparatus and method of displaying content
KR102614697B1 (ko) 디스플레이 장치 및 디스플레이 장치의 채널 정보 획득 방법
EP3024220A2 (en) Display apparatus and display method
KR102499124B1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
CN107636749B (zh) 图像显示设备及其操作方法
KR20170006203A (ko) 뉴스 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법
US10701302B2 (en) Image display apparatus and operation method thereof
KR102659287B1 (ko) 영상 표시 장치 및 그 동작 방법
KR20180057473A (ko) 디스플레이 장치 및 컨텐츠를 디스플레이하는 방법
RU2693854C2 (ru) Устройство отображения изображений и способ отображения изображений
US20160191841A1 (en) Display device and display method
US11064150B2 (en) High resolution user interface
US10582257B2 (en) Server, image display apparatus, and method of operating the image display apparatus
US20170019710A1 (en) Image display apparatus and method of operating the same
US9558711B2 (en) Display apparatus, mobile apparatus, system and setting controlling method for connection thereof
US10310709B2 (en) Image display apparatus and method of displaying image for determining a candidate item to select
US9826278B2 (en) Electronic device and method for providing broadcast program
US20170185246A1 (en) Image display apparatus and method of displaying image
KR101891614B1 (ko) 휴대 단말기 및 영상표시장치의 동작 방법
KR20230024712A (ko) 발화 의도를 고려하여 검색하는 디스플레이 장치 및 방법
KR20170101077A (ko) 서버, 영상 표시 장치 및 그 동작 방법

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20150722

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20200617

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20150722

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20210924

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20220208

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20210924

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I