KR100970711B1 - Apparatus for searching the internet while watching TV and method threrefor - Google Patents
Apparatus for searching the internet while watching TV and method threrefor Download PDFInfo
- Publication number
- KR100970711B1 KR100970711B1 KR1020080019165A KR20080019165A KR100970711B1 KR 100970711 B1 KR100970711 B1 KR 100970711B1 KR 1020080019165 A KR1020080019165 A KR 1020080019165A KR 20080019165 A KR20080019165 A KR 20080019165A KR 100970711 B1 KR100970711 B1 KR 100970711B1
- Authority
- KR
- South Korea
- Prior art keywords
- search
- recognition
- module
- unit
- internet
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
본 발명은 인터넷 검색장치 및 그 방법에 관한 것으로, TV시청 중 TV화면 속의 인물, 장소, 사건, 물건 등에 관하여 직접 인터넷 검색을 수행하는 TV 시청중 인터넷을 검색하는 장치 및 그 방법에 관한 것이다.The present invention relates to an Internet search apparatus and a method thereof, and more particularly, to an apparatus and method for searching the Internet while watching TV, which performs an Internet search directly on a person, place, event, object, etc. on a TV screen during TV viewing.
본 발명은 TV 시청중 인터넷을 검색하는 장치에 있어서, TV방송신호를 입력받고, 외부로부터 검색요청을 입력받는 TV신호 입력부; 수신한 TV방송신호 중 음성 또는 영상을 인식하여 기설정된 데이터와 비교하고, 그 결과를 인식 신뢰도에 따라 텍스트 형태의 단어들로 추출하는 인식부; 검색 포탈 이력을 저장하고, 인식부로부터 추출되는 단어들과 유사한 단어를 추가하며, 검색 포탈 이력으로부터 적합도를 판단하고, 그 결과 검색어로 선택하여 추출하는 검색어 추출부; 추출된 검색어를 이용하여 인터넷 검색을 하여 관련 정보를 관련도에 따라 추출하는 인터넷 검색엔진부; 및, TV신호 입력부, 인식부, 검색어 추출부 및 인터넷 검색엔진부를 제어하는 제어부; 를 포함한다.The present invention provides a device for searching the Internet while watching TV, comprising: a TV signal input unit for receiving a TV broadcast signal and receiving a search request from the outside; A recognition unit for recognizing a voice or an image of the received TV broadcast signal, comparing the received data with preset data, and extracting the result into words in text form according to recognition reliability; A search word extracting unit which stores a search portal history, adds words similar to words extracted from the recognition unit, determines a goodness of fit from the search portal history, and selects and extracts a search term as a result; An internet search engine that searches the Internet using the extracted search terms and extracts related information according to relevance; And a control unit controlling a TV signal input unit, a recognition unit, a search word extracting unit, and an internet search engine unit. It includes.
상기와 같은 본 발명은 TV시청 중 TV화면의 영상, 소리, 프로그램 정보로부터 인터넷을 직접 검색하여 정보를 제공받을 수 있는 효과가 있다.The present invention as described above has the effect that can be provided by directly searching the Internet from the image, sound, program information of the TV screen during TV viewing.
TV방송신호, 인터넷, 검색 TV signal, Internet, Search
Description
본 발명은 인터넷 검색장치 및 그 방법에 관한 것으로, 보다 상세하게는 TV시청 중 TV화면 속의 인물, 장소, 사건, 물건 등에 관하여 직접 인터넷 검색을 수행하는 TV 시청중 인터넷을 검색하는 장치 및 그 방법에 관한 것이다.The present invention relates to an Internet search apparatus and a method thereof, and more particularly, to an apparatus and method for searching the Internet while watching TV, which performs an Internet search directly on a person, place, event, object, etc. on a TV screen during TV viewing. It is about.
종래, 인터넷 검색장치에 관한 기술은 대한민국 공개특허 제2000-0072482호 '이용자의 검색을 용이하게 하는 인터넷 검색 시스템' 이외에 다수 출원 및 공개된 상태이다.Conventionally, the technology related to the Internet search apparatus has been published and published in a large number in addition to the Republic of Korea Patent Publication No. 2000-0072482 'Internet search system to facilitate the user' search.
상기 종래기술은, 도 1에 도시된 바와 같이, 인터넷 통신망에 접속하고 다양한 웹사이트(30)를 검색하여 필요한 정보를 제공받고, 접근한 웹사이트(30)의 정보가 자동으로 저장되어 있는 쿠키(11)나 템포롤리 인터넷 파일(12)을 갖는 이용자의 인터넷 연결수단(10)과; 인터넷 통신망에 접속한 상기 이용자의 인터넷 연결수단(10)에 검색엔진을 제공하고, 이 검색엔진을 통하여 정보 검색이나 특정 웹사이트(30)의 검색을 요청할 경우, 상기 이용자의 인터넷 연결수단(10)에 자동으로 저장되어 있는 쿠키(11)나 템포롤리 인터넷 파일(Temporary internet file:12)의 특 성을 분석하고 분석된 웹사이트(30)의 특성에 따라 정보 또는 웹사이트(30)의 검색결과부터 알려주는 운영자 서버(20)로 구성되는 것을 특징으로 한다.The prior art, as shown in Figure 1, is connected to the Internet communication network to search for a variety of websites (30) is provided with the necessary information, the information of the accessed website (30) is automatically stored cookies ( 11) or a user's Internet connection means 10 having a temporally
그러나, 종래기술은 키보드를 이용하여 검색어를 입력하면 검색엔진이 검색하여 그 결과를 출력하나, TV영상이나 소리, 방송 프로그램의 정보를 직접 검색어로 사용할 수 없는 문제점이 있다. 한 예로 TV 드라마에 나오는 배경을 알고 싶으나 그 지역명을 모르면 정보를 얻지 못하는 것이 현실이다. 즉, 사용자가 해당 검색어를 직접 입력하여야 하는 불편함이 있고, 해당 검색어를 모르면 중요한 정보를 놓치게 되는 문제점이 있다.However, in the related art, when a search term is input using a keyboard, a search engine searches and outputs a result, but there is a problem in that information of a TV image, sound, or broadcast program cannot be directly used as a search term. For example, if you want to know the background of TV dramas, but you don't know the local name, you can't get the information. In other words, there is an inconvenience that the user must directly enter the search word, there is a problem that missing important information if you do not know the search word.
본 발명의 목적은, 상기와 같은 문제점을 해결하기 위한 것으로서, TV시청 중 TV화면의 영상, 소리, 프로그램 정보로부터 인터넷을 직접 검색하여 관련 정보를 제공받을 수 있도록 함에 있다.Disclosure of Invention An object of the present invention is to solve the above problems, and to provide related information by directly searching the Internet from video, sound, and program information of a TV screen during TV viewing.
그리고 본 발명의 다른 목적은, TV화면 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 해당 국어의 키보드 없이도 인터넷 검색하는 TV 시청중 인터넷을 검색하는 장치 및 그 방법을 제공함에도 있다.Another object of the present invention is to provide an apparatus and method for searching the Internet while watching TV for directly searching a word or logo on a TV screen to obtain related information and searching the Internet for foreign languages without a foreign language's keyboard.
본 발명은 TV방송신호를 입력받고, 외부로부터 검색요청을 입력받는 TV신호 입력부; 상기 TV신호 입력부에 의해 수신한 TV방송신호 중 음성 및 영상을 인식하여 기설정된 데이터와 비교하고, 그 결과를 인식 신뢰도에 따라 텍스트 형태의 단어들로 추출하는 인식부; 검색 포탈 이력을 저장하고, 상기 인식부로부터 추출되는 단어들과 유사한 단어를 추가하며, 상기 검색 포탈 이력으로부터 적합도를 판단하고, 그 결과 검색어로 선택하여 추출하는 검색어 추출부; 상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색을 하여 관련 정보를 관련도에 따라 추출하는 인터넷 검색엔진부; 및, 상기 TV신호 입력부, 인식부, 검색어 추출부 및 인터넷 검색엔진부를 제어하는 제어부; 를 포함한다.The present invention is a TV signal input unit for receiving a TV broadcast signal, and receives a search request from the outside; A recognition unit for recognizing audio and video among the TV broadcast signals received by the TV signal input unit, comparing the audio and video data with predetermined data, and extracting the result into words in text form according to recognition reliability; A search term extracting unit which stores a search portal history, adds words similar to words extracted from the recognition unit, determines a goodness of fit from the search portal history, and selects and extracts a search term as a result; An internet search engine that searches the Internet using the search word extracted by the search word extractor and extracts related information according to relevance; And a control unit controlling the TV signal input unit, recognition unit, search word extracting unit, and internet search engine unit. It includes.
한편, TV 시청중 인터넷을 검색하는 장치를 이용하는 검색 방법에 있어서, (a) 제어부가 TV신호 입력부를 통해 TV방송신호를 입력받는 단계; (b) 상기 제어부 가 입력받은 TV방송신호를 인식부의 인식DB모듈에 데이터베이스로 구축하는 단계; (c) 상기 제어부가 상기 TV신호 입력부의 외부신호 입력모듈을 통해 검색요청을 입력받는 단계; (d) 상기 제어부가 입력받은 TV방송신호 중 음성 또는 영상을 상기 인식부를 통해 인식하는 단계; (e) 상기 제어부가 상기 인식부를 통해 상기 인식DB모듈에 데이터베이스로 기설정한 데이터와 비교하여 텍스트 형태의 단어를 인식 신뢰도에 따라 검색어의 후보 단어로 추출하는 단계; (f) 상기 제어부가 상기 인식부의 인식결과인 후보 단어들을 검색어 추출부를 통해 인터넷 검색어로서의 적합도에 따라 검색어를 추출하는 단계; 및 (g) 상기 제어부가 상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색엔진부를 통해 인터넷 검색하고, 관련 정보를 관련도에 따라 추출하는 단계; 를 포함한다.On the other hand, a search method using a device for searching the Internet while watching TV, the method comprising the steps of: (a) the control unit receives a TV broadcast signal through the TV signal input unit; (b) the control unit constructing the input TV broadcast signal as a database in the recognition DB module of the recognition unit; (c) receiving, by the controller, a search request through an external signal input module of the TV signal input unit; (d) recognizing, by the controller, a voice or an image of the TV broadcast signal received by the controller; (e) the control unit extracting a word having a text form as a candidate word of a search word based on a recognition reliability by comparing the data preset in the database to the recognition DB module through the recognition unit; (f) the control unit extracting the search terms based on the goodness of fit of the candidate words, which are the recognition results of the recognition unit, as the Internet search term through the search term extracting unit; And (g) searching the Internet through an internet search engine using the search word extracted by the search word extracting unit, and extracting related information according to relevance; It includes.
상기와 같은 본 발명은 TV시청 중 TV화면의 영상, 소리, 프로그램 정보로부터 인터넷을 직접 검색하여 정보를 제공받을 수 있는 효과가 있다.The present invention as described above has the effect that can be provided by directly searching the Internet from the image, sound, program information of the TV screen during TV viewing.
그리고, 본 발명은 TV화면 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 해당 국어의 키보드 없이 인터넷 검색하는 효과가 있다.In addition, the present invention has the effect of directly searching for words or logos on the TV screen to obtain related information, and to search the Internet without knowing a foreign language without a keyboard of the corresponding language.
본 발명의 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명으로 더욱 명백해질 것이다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 발명자가 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미 와 개념으로 해석되어야 할 것이다. 또한, 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.The features and advantages of the present invention will become more apparent from the following detailed description based on the accompanying drawings. Prior to this, the terms or words used in the present specification and claims are defined in the technical spirit of the present invention on the basis of the principle that the inventor can appropriately define the concept of the term in order to explain his invention in the best way. It should be interpreted to mean meanings and concepts. It is to be noted that the detailed description of known functions and constructions related to the present invention is omitted when it is determined that the gist of the present invention may be unnecessarily blurred.
이하, 첨부된 도면을 참조하여 본 발명을 상세하게 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail the present invention.
본 발명의 일실시예에 따른 TV 시청중 인터넷을 검색하는 장치에 관하여 도 2를 참조하여 설명하면 다음과 같다.An apparatus for searching the Internet while watching TV according to an embodiment of the present invention will be described with reference to FIG. 2.
도 2는 본 발명의 일실시예에 따른 TV 시청중 인터넷을 검색하는 장치에 관한 개략적인 블록도이다.2 is a schematic block diagram of an apparatus for searching the Internet while watching TV according to an embodiment of the present invention.
본 발명의 일실시예에 따른 TV 시청중 인터넷을 검색하는 장치는 도 2에 도시된 바와 같이, TV신호 입력부(100), 인식부(200), 검색어 추출부(300), 인터넷 검색엔진부(400), 디스플레이부(500) 및 제어부(600)를 포함한다.As shown in FIG. 2, an apparatus for searching the Internet while watching TV according to an embodiment of the present invention includes a TV
우선, TV신호 입력부(100)는 공중파, 케이블, 비디오장치 등을 통하여 TV방송신호를 입력받고, 사용자로부터 검색요청을 입력받는 기능을 수행한다. 이러한 기능을 수행하는 TV신호 입력부(100)는, TV방송신호를 입력받는 TV신호 입력모듈(110), 외부로부터 검색요청을 입력받는 외부신호 입력모듈(120)을 포함한다. 여기서, 본 실시예에 따른 TV신호 입력부(100)는 외부로부터의 검색요청을 별도로 구비된 리모컨(미도시)으로부터 외부신호 입력모듈(120)를 통해 입력받는다.First, the TV
또한, 인식부(200)는 외부로부터 검색요청신호를 입력받은 경우, TV신호 입력부(100)에 의해 수신한 TV방송신호 중 음성, 얼굴사진, 장소, GPS정보, 문자, 물체 및 상표를 인식하고, 기설정된 데이터와 비교하여, 그 결과를 인식 신뢰 도(confidence)에 따라 텍스트 형태의 단어로 추출하는 기능을 수행한다. Also, when the
이러한 기능을 수행하는 인식부(200)는 음성인식모듈(210), 얼굴인식모듈(220), 장소인식모듈(230), 위치인식모듈(240), 문자인식모듈(250), 동식물 인식모듈(260), 물체인식모듈(270), 상표인식모듈(280) 및 인식DB모듈(290)을 포함한다. 이때, 기설정된 데이터는 음성, 얼굴사진, 장소, GPS정보, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭에 대한 정보 및 TV방송 프로그램 정보를 포함한다.
여기서, 음성인식모듈(210)은 수신한 TV방송신호 중 음성을 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 해당 텍스트 형태의 단어로 추출한다.Here, the
얼굴인식모듈(220)은 TV방송신호의 영상 중 얼굴영역을 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 해당자의 성명을 텍스트 형태의 단어로 추출한다.The
장소인식모듈(230)은 TV방송신호의 영상 중 배경영역을 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 해당 장소명을 텍스트 형태의 단어로 추출한다.The
위치인식모듈(240)은 TV방송신호 중 GPS정보가 포함된 신호를 인식하고, 인식DB모듈(290)에 GPS정보에 따라 기설정된 행정구역, 관광명소 명칭 등을 포함하는 지역명칭 정보를 텍스트 형태의 단어로 추출한다.The
문자인식모듈(250)은 TV방송신호의 영상 중 문자 영역을 인식하고, 인식DB모듈(290)에 기설정된 사전이나, 용어목록 등을 이용하여 그 해당하는 문자열을 텍스 트 형태의 단어로 추출한다. 이때, 문자인식모듈은 인식결과를 높이기 위하여 사전이나 자주 나타나는 용어 목록 등을 이용한다.The
동식물 인식모듈(260)은 TV방송신호 중 동물 및 식물의 모습과 소리 등을 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 해당 동식물의 명칭을 텍스트 형태의 단어로 추출한다.The flora and
물체인식모듈(270)은 TV방송신호의 영상 중 물체를 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 그 물체의 일반 명칭을 텍스트 형태의 단어로 추출한다. 즉, 자동차라는 일반 명칭과 함께 소나타라는 제품 명칭을 제공한다. The
상표인식모듈(280)은 TV방송신호의 영상 중 상표를 인식하고, 인식DB모듈(290)에 기설정된 데이터와 비교하여 해당 회사의 명칭을 텍스트 형태의 단어로 추출한다.The
인식DB모듈(290)은 음성인식모듈(210), 얼굴인식모듈(220), 장소인식모듈(230), 위치인식모듈(240), 문자인식모듈(250), 동식물 인식모듈(260), 물체인식모듈(270) 및 상표인식모듈(280)의 각 인식결과물에 대한 데이터를 비교하기 위하여, 수신한 TV방송신호 중, 음성, 얼굴사진, 장소, GPS정보, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭에 대한 정보 및 TV방송 프로그램 정보를 저장하여 미리 설정하는 기능을 수행한다.
본 실시예에 따른 인식부(200)는 TV방송신호의 영상에 다수의 얼굴, 물체 등이 존재하고, 또 다른 측면에서 동일한 영상을 서술할 수 있으므로, 한 영상에서 신뢰도(confidence)를 달리하는 다수의 인식 결과를 검색어의 후보로 도출한다.The
또한, 검색어 추출부(300)는 인식부(200)에서 추출하는 후보 단어들을 인터넷 검색어로서의 적합도에 따라 검색어로 선택하여 추출하는 기능을 수행한다. 이러한 기능을 수행하는 검색어 추출부(300)는 검색 포탈 이력을 저장하는 검색 이력 저장모듈(310), 다수의 단어를 데이터베이스로 구축하는 단어DB모듈(320), 단어DB모듈에 구축된 데이터베이스로부터 후보 단어들과 유사한 단어를 추가하는 단어추가모듈(330) 및 검색 이력으로부터 적합도를 판단하는 적합도 판단모듈(340)을 포함한다.In addition, the
여기서, 인터넷의 검색어로서의 가능성, 즉 적합도(suitability)는 단어의 의미, 단어의 언어적 기능 등을 감안하여 결정되며 고유 명사는 검색어로서의 적합도가 높은 반면 자주 나타나는 일반명사와 기능어는 검색어로 적합도가 떨어지는 것이 통상적이다. 사용자의 나이, 학력, 직업, 취미 등에 따라서 개인차가 있고 시류에 따라 기복이 있다. 따라서 검색어로서의 적합도는 검색 포탈의 이력으로부터 추출하는 것이 바람직하다. 또한 한 검색어가 여러 의미로도 쓰이기 때문에 추출된 검색어의 의미를 차별화할 수 있는 부가적인 검색어를 추가하기도 한다. 한 예로서 과일의 그림을 인식하여 'Apple'이라고 검색엔진에 넘겼더니 컴퓨터 회사에 관한 이야기가 대부분인 경우를 피하기 위하여 'fruit'이라는 검색어를 추가하면 컴퓨터 회사의 검색 결과는 피할 수 있다. 다수의 후보 단어가 각기 다른 신뢰도로 추출되기 때문에 이들을 통합하여 인터넷 검색어로 가능성, 즉 적합도가 높은 것들을 선택한다.Here, the possibility as a search term of the Internet, that is, suitability is determined in consideration of the meaning of a word and the linguistic function of the word, and proper nouns have high suitability as search terms, while common nouns and functional words are less suitable as search terms. Is common. There are individual differences according to the user's age, education, occupation, hobbies, etc., and there are ups and downs according to the current class. Therefore, the goodness of fit as the search word is preferably extracted from the history of the search portal. In addition, since a search term is used in several meanings, an additional search term may be added to differentiate the meaning of the extracted search term. As an example, after recognizing a picture of a fruit and handing it to a search engine called 'Apple', the search results of a computer company can be avoided by adding the term 'fruit' to avoid most cases about computer companies. Since a number of candidate words are extracted with different reliability, they are combined to select the most probable, that is, the good fit, as an Internet search term.
또한, 인터넷 검색엔진부(400)는 검색어 추출부(300)에 의해 추출된 검색어 를 이용하여 인터넷을 검색하고, 관련 정보를 관련도(relevance)에 따라 제공하는 기능을 수행한다. 여기서, 본 실시예에 따른 관련도는 검색어를 이용하여 검색된 다수의 관련 정보 중, 관련 정보 내의 검색어 빈도수가 다른 관련 정보보다 상대적으로 높은 것을 관련도가 높다고 할 수 있다.In addition, the internet
또한, 디스플레이부(500)는 인터넷 검색엔진부(400)에 의해 검색된 결과를 인식부(200)의 인식 신뢰도, 검색어 추출부(300)의 적합도 및 인터넷 검색엔진부(400)의 관련도에 따라 목록으로 출력하는 기능을 수행한다.In addition, the
그리고, 제어부(600)는 상술한 TV신호 입력부(100), 인식부(200), 검색어 추출부(300), 인터넷 검색엔진부(400) 및 디스플레이부(500)를 제어하는 기능을 수행한다.The
본 발명은 TV시청중 임의의 시점에 인터넷 검색을 요청할 것에 대비하여 매 시점마다 사용자의 요구를 파악하기에 충분한 양(N frames)의 방송 내용을 저장하였다가 검색 요청이 들어오면 이 자료를 인식하고 분석하여 검색어를 추출하는 효과가 있다.The present invention stores N frames of broadcasting contents sufficient to grasp the user's request at each time in preparation for requesting Internet search at any time during TV viewing, and recognizes this data when a search request is received. It is effective to extract search terms by analyzing.
또한, 본 발명은 TV시청 중 TV화면의 영상, 소리, 프로그램 정보로부터 인터넷을 직접 검색하여 정보를 제공받을 수 있는 효과가 있다.In addition, the present invention has the effect that can be provided by directly searching the Internet from the image, sound, program information of the TV screen during TV viewing.
그리고, 본 발명은 TV화면 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 해당 국어의 키보드 없이 인터넷 검색하는 효과가 있다.In addition, the present invention has the effect of directly searching for words or logos on the TV screen to obtain related information, and to search the Internet without knowing a foreign language without a keyboard of the corresponding language.
한편, 본 발명의 일실시예에 따른 TV 시청중 인터넷을 검색하는 장치를 이용 하는 검색 방법(이하, '검색 방법')에 관하여 도 3을 참조하여 설명하면 다음과 같다.Meanwhile, a search method (hereinafter, a 'search method') using an apparatus for searching the Internet while watching TV according to an embodiment of the present invention will be described with reference to FIG. 3.
도 3은 본 발명의 일실시예에 따른 검색 방법에 관한 전체적인 흐름도이다.3 is an overall flowchart of a search method according to an embodiment of the present invention.
도 3에 도시된 바와 같이, 제어부(600)는 TV신호 입력부(100)를 통해 TV방송신호를 입력받는다(S2).As shown in FIG. 3, the
다음으로 제어부(600)는 음성인식모듈(210), 얼굴인식모듈(220), 장소인식모듈(230), 위치인식모듈(240), 문자인식모듈(250), 동식물 인식모듈(260), 물체인식모듈(270) 및 상표인식모듈(280)의 각 인식결과물에 대한 데이터를 비교하기 위하여, 수신한 TV방송신호 중, 음성, 얼굴사진, 장소, GPS정보, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭에 대한 정보 및 TV방송 프로그램 정보를 저장하고 미리 설정하여 데이터베이스로 구축한다(S4).Next, the
다음으로 제어부(600)는 TV신호 입력부(100)의 외부신호 입력모듈(120)을 통해 검색요청을 입력받는다(S6).Next, the
다음으로 제어부(600)는 입력받은 TV방송신호 중 음성, 얼굴사진, 장소, GPS정보, 사전, 용어목록, 물체 및 상표를 인식부(200)의 각 인식모듈(210 내지 280)를 통해 인식한다(S8).Next, the
다음으로 제어부(600)는 각 인식모듈(210 내지 280)을 통해 인식DB모듈(290)에 데이터베이스로 기설정한 데이터와 비교하여 텍스트 형태의 단어를 인식 신뢰도에 따라 검색어의 후보들로 추출한다(S10).Next, the
다음으로 제어부(600)는 인식부(200)의 인식결과인 후보 단어들을 검색어 추 출부(300)를 통해 인터넷 검색어로서의 적합도에 따라 검색어를 추출한다(S12).Next, the
다음으로 제어부(600)는 검색어 추출부(300)에 의해 추출된 검색어를 이용하여 인터넷 검색엔진부(400)를 통해 인터넷 검색하고, 관련 정보를 관련도에 따라 추출한다(S14).Next, the
그리고 제어부(600)는 인터넷 검색엔진부(400)에 의해 추출된 관련 정보를 디스플레이부(500)를 통해 출력한다(S16). 여기서, 제 S16 단계를 구체적으로 살펴보면, 제어부(600)는 추출된 관련 정보를 디스플레이부(500)를 통해 인식부(200)의 인식 신뢰도, 검색어 추출부(300)의 적합도 및 인터넷 검색엔진부(400)의 관련도에 따라 출력한다.The
그리고, 본 발명의 일실시예에 따른 검색어 추출과정에 대하여 도 4를 참조하여 상세히 살펴본다.And, the search word extraction process according to an embodiment of the present invention will be described in detail with reference to FIG.
도 4는 본 발명의 일실시예에 따른 검색어 추출과정에 관한 상세한 흐름도이다.4 is a detailed flowchart illustrating a search word extraction process according to an embodiment of the present invention.
도 4에 도시된 바와 같이, 제어부(600)는 검색어 추출부(300)의 검색 이력 저장모듈(310)을 통해 검색 포탈 이력을 저장한다(S22).As shown in FIG. 4, the
다음으로 제어부(600)는 검색어 추출부(300)의 단어추가모듈(330)을 통해 인식부(200)의 결과인 후보단어들과 유사한 단어를 단어DB모듈(320)로부터 추가한다(S24).Next, the
그리고 제어부(600)는 검색 이력 저장모듈(310)에 저장된 검색 포탈 이력으로부터 인터넷 검색어로 적합한지 적합도 판단모듈(340)을 통해 적합도를 판단하여 그 적합도에 따라 검색어를 추출한다(S26).The
도 1은 종래기술에 따른 개략적인 블록도.1 is a schematic block diagram according to the prior art;
도 2는 본 발명의 일실시예에 따른 TV 시청중 인터넷을 검색하는 장치에 관한 개략적인 블록도.2 is a schematic block diagram of an apparatus for searching the Internet while watching TV according to an embodiment of the present invention.
도 3은 본 발명의 일실시예에 따른 검색 방법에 관한 전체적인 흐름도.3 is an overall flowchart of a search method according to an embodiment of the present invention;
도 4는 본 발명의 일실시예에 따른 검색어 추출과정에 관한 상세한 흐름도.4 is a detailed flowchart illustrating a search word extraction process according to an embodiment of the present invention.
<도면 부호에 대한 설명><Description of Drawing>
100 : TV신호 입력부 110 : TV신호 입력모듈100: TV signal input unit 110: TV signal input module
120 : 외부신호 입력모듈 200 : 인식부120: external signal input module 200: recognition unit
210 : 음성인식모듈 220 : 얼굴인식모듈210: voice recognition module 220: face recognition module
230 : 장소인식모듈 240 : 위치인식모듈230: location recognition module 240: location recognition module
250 : 문자인식모듈 260 : 동식물 인식모듈250: character recognition module 260: flora and fauna recognition module
270 : 물체인식모듈 280 : 상표인식모듈270: object recognition module 280: trademark recognition module
290 : 인식DB모듈 300 : 검색어 추출부290: recognition DB module 300: search term extraction unit
310 : 검색 이력 저장모듈 320 : 단어DB모듈310: search history storage module 320: word DB module
330 : 단어추가모듈 340 : 적합도 판단모듈330: word addition module 340: goodness of fit module
400 : 인터넷 검색엔진부 500 : 디스플레이부400: Internet search engine unit 500: Display unit
600 : 제어부600: control unit
Claims (11)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080019165A KR100970711B1 (en) | 2008-02-29 | 2008-02-29 | Apparatus for searching the internet while watching TV and method threrefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080019165A KR100970711B1 (en) | 2008-02-29 | 2008-02-29 | Apparatus for searching the internet while watching TV and method threrefor |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090093571A KR20090093571A (en) | 2009-09-02 |
KR100970711B1 true KR100970711B1 (en) | 2010-07-16 |
Family
ID=41302041
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080019165A KR100970711B1 (en) | 2008-02-29 | 2008-02-29 | Apparatus for searching the internet while watching TV and method threrefor |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100970711B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150127675A1 (en) | 2013-11-05 | 2015-05-07 | Samsung Electronics Co., Ltd. | Display apparatus and method of controlling the same |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140012468A (en) * | 2012-07-20 | 2014-02-03 | 안태영 | Mobile device and method for providing home-shopping information and |
KR101472014B1 (en) * | 2012-12-14 | 2014-12-12 | 주식회사 케이티 | apparatus using text included in reproduction screen of video contents and method thereof |
KR102460927B1 (en) * | 2013-11-12 | 2022-10-31 | 삼성전자 주식회사 | Voice recognition system, voice recognition server and control method of display apparatus |
CN103634640A (en) * | 2013-11-29 | 2014-03-12 | 乐视致新电子科技(天津)有限公司 | Method and system for controlling voice input of smart television terminal by using mobile terminal equipment |
CN105898525A (en) * | 2016-04-19 | 2016-08-24 | 乐视控股(北京)有限公司 | Method of searching videos in specific video database, and video terminal thereof |
CN111125310A (en) * | 2019-12-24 | 2020-05-08 | 北京百度网讯科技有限公司 | Voice query method and device |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1318672A1 (en) * | 2001-12-07 | 2003-06-11 | Accenture Global Services GmbH | Method and apparatus for displaying definitions of selected words in a television programme |
JP2004023345A (en) | 2002-06-14 | 2004-01-22 | Sony Corp | Information searching method, information searching system, receiver, information processing apparatus |
JP2008028529A (en) * | 2006-07-19 | 2008-02-07 | Nippon Telegr & Teleph Corp <Ntt> | Broadcast program viewing system and method |
US20080201142A1 (en) | 2007-02-15 | 2008-08-21 | Motorola, Inc. | Method and apparatus for automication creation of an interactive log based on real-time content |
-
2008
- 2008-02-29 KR KR1020080019165A patent/KR100970711B1/en not_active IP Right Cessation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1318672A1 (en) * | 2001-12-07 | 2003-06-11 | Accenture Global Services GmbH | Method and apparatus for displaying definitions of selected words in a television programme |
JP2004023345A (en) | 2002-06-14 | 2004-01-22 | Sony Corp | Information searching method, information searching system, receiver, information processing apparatus |
JP2008028529A (en) * | 2006-07-19 | 2008-02-07 | Nippon Telegr & Teleph Corp <Ntt> | Broadcast program viewing system and method |
US20080201142A1 (en) | 2007-02-15 | 2008-08-21 | Motorola, Inc. | Method and apparatus for automication creation of an interactive log based on real-time content |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150127675A1 (en) | 2013-11-05 | 2015-05-07 | Samsung Electronics Co., Ltd. | Display apparatus and method of controlling the same |
US10387508B2 (en) | 2013-11-05 | 2019-08-20 | Samsung Electronics Co., Ltd. | Method and apparatus for providing information about content |
US11409817B2 (en) | 2013-11-05 | 2022-08-09 | Samsung Electronics Co., Ltd. | Display apparatus and method of controlling the same |
Also Published As
Publication number | Publication date |
---|---|
KR20090093571A (en) | 2009-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11636146B2 (en) | Content analysis to enhance voice search | |
KR100930249B1 (en) | Apparatus and method for searching the Internet using information obtained from images | |
US9547716B2 (en) | Displaying additional data about outputted media data by a display device for a speech search command | |
KR100970711B1 (en) | Apparatus for searching the internet while watching TV and method threrefor | |
US10366169B2 (en) | Real-time natural language processing of datastreams | |
EP3321929B1 (en) | Language merge | |
US10229111B1 (en) | Sentence compression using recurrent neural networks | |
US9202523B2 (en) | Method and apparatus for providing information related to broadcast programs | |
US20030074199A1 (en) | Speech input system, speech portal server, and speech input terminal | |
US20080134038A1 (en) | Interactive information providing service method and apparatus | |
KR20160014926A (en) | speech recognition apparatus and method thereof | |
EP2713535A1 (en) | Image processing apparatus and control method thereof and image processing system | |
KR20020054325A (en) | Transcript triggers for video enhancement | |
US20150161204A1 (en) | Interactive system, server and control method thereof | |
CN103902611A (en) | Video content searching system and video content searching method | |
CN110096619A (en) | Video data analysis method, analysis platform, terminal and storage medium | |
US20150020087A1 (en) | System for Identifying Features in a Television Signal | |
CN109635125B (en) | Vocabulary atlas building method and electronic equipment | |
CN114697762B (en) | Processing method, processing device, terminal equipment and medium | |
CN112243524B (en) | Program name search support device and program name search support method | |
RU2571520C2 (en) | Image processing device and associated control method and image processing system | |
KR100930248B1 (en) | Apparatus and method for searching the Internet using information obtained from sound | |
CN110942070A (en) | Content display method and device, electronic equipment and computer readable storage medium | |
CN115687693A (en) | Video display method and device, electronic equipment and medium | |
CN114911920A (en) | Retrieval method, retrieval device and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130628 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20140630 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |