KR100930249B1 - 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법 - Google Patents

영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법 Download PDF

Info

Publication number
KR100930249B1
KR100930249B1 KR1020080019167A KR20080019167A KR100930249B1 KR 100930249 B1 KR100930249 B1 KR 100930249B1 KR 1020080019167 A KR1020080019167 A KR 1020080019167A KR 20080019167 A KR20080019167 A KR 20080019167A KR 100930249 B1 KR100930249 B1 KR 100930249B1
Authority
KR
South Korea
Prior art keywords
search
recognition
image
module
internet
Prior art date
Application number
KR1020080019167A
Other languages
English (en)
Other versions
KR20090093573A (ko
Inventor
김진형
김기응
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020080019167A priority Critical patent/KR100930249B1/ko
Publication of KR20090093573A publication Critical patent/KR20090093573A/ko
Application granted granted Critical
Publication of KR100930249B1 publication Critical patent/KR100930249B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • G06V40/173Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 인터넷 검색장치 및 그 방법에 관한 것으로, 카메라나 비디오 카메라를 통하여 입력되는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치 및 그 방법에 관한 것이다.
본 발명은 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 있어서, 외부 영상취득기기로부터 영상을 입력받는 영상 입력부; 영상 입력부에 의해 입력받은 영상을 인식하여 기설정된 데이터와 비교하고, 그 결과를 인식 신뢰도에 따라 텍스트 형태의 단어들로 출력하는 인식부; 검색 포탈 이력을 저장하고, 인식부로부터 출력되는 단어들과 유사한 단어를 추가하며, 검색 포탈 이력으로부터 적합도를 판단하고, 그 결과 검색어로 선택하여 추출하는 검색어 추출부; 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색을 하여 관련 정보를 관련도에 따라 추출하는 인터넷 검색엔진부; 및, 영상 입력부, 인식부, 검색어 추출부 및 인터넷 검색엔진부를 제어하는 제어부; 를 포함한다.
상기와 같은 본 발명은 카메라나 비디오장치를 통해 취득한 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하여 정보를 제공받는 효과가 있다.
영상, 인터넷, 검색

Description

영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치 및 그 방법{Apparatus for searching the internet by using the information obtained from the image and method threrefor}
본 발명은 인터넷 검색장치 및 그 방법에 관한 것으로, 보다 상세하게는 카메라나 비디오 카메라를 통하여 입력되는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치 및 그 방법에 관한 것이다.
종래, 인터넷 검색장치에 관한 기술은 대한민국 공개특허 제2000-0072482호 '이용자의 검색을 용이하게 하는 인터넷 검색 시스템' 이외에 다수 출원 및 공개된 상태이다.
상기 종래기술은, 도 1에 도시된 바와 같이, 인터넷 통신망에 접속하고 다양한 웹사이트(30)를 검색하여 필요한 정보를 제공받고, 접근한 웹사이트(30)의 정보가 자동으로 저장되어 있는 쿠키(11)나 템포롤리 인터넷 파일(12)을 갖는 이용자의 인터넷 연결수단(10)과; 인터넷 통신망에 접속한 상기 이용자의 인터넷 연결수단(10)에 검색엔진을 제공하고, 이 검색엔진을 통하여 정보 검색이나 특정 웹사이트(30)의 검색을 요청할 경우, 상기 이용자의 인터넷 연결수단(10)에 자동으로 저 장되어 있는 쿠키(11)나 템포롤리 인터넷 파일(Temporary internet file:12)의 특성을 분석하고 분석된 웹사이트(30)의 특성에 따라 정보 또는 웹사이트(30)의 검색결과부터 알려주는 운영자 서버(20)로 구성되는 것을 특징으로 한다.
그러나, 종래기술은 키보드를 이용하여 검색어를 입력하면 검색엔진이 검색하여 그 결과를 출력하나, 영상으로 주어진 정보를 직접 검색어로 사용할 수 없는 문제점이 있다. 한 예로 어느 배우의 사진을 얻었으나, 그 배우의 이름을 모르면 그 배우의 신상정보를 얻지 못하는 것이 현실이다. 즉, 사용자가 해당 검색어를 직접 입력하여야 하는 불편함이 있고, 해당 검색어를 모르면 중요한 정보를 놓치게 되는 문제점이 있다.
본 발명의 목적은, 상기와 같은 문제점을 해결하기 위한 것으로서, 카메라나 비디오장치를 통해 취득한 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하여 정보를 제공받을 수 있도록 함에 있다.
그리고 본 발명의 다른 목적은, 영상 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 키보드 없이도 인터넷 검색하는 TV 시청중 인터넷을 검색하는 장치 및 그 방법을 제공함에도 있다.
본 발명은 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 있어서, 외부 영상취득기기로부터 영상을 입력받는 영상 입력부; 상기 영상 입력부에 의해 입력받은 영상을 인식하여 기설정된 데이터와 비교하고, 그 결과를 인식 신뢰도에 따라 텍스트 형태의 단어들로 출력하는 인식부; 검색 포탈 이력을 저장하고, 상기 인식부로부터 출력되는 단어들과 유사한 단어를 추가하며, 상기 검색 포탈 이력으로부터 적합도를 판단하고, 그 결과 검색어로 선택하여 추출하는 검색어 추출부; 상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색을 하여 관련 정보를 관련도에 따라 추출하는 인터넷 검색엔진부; 및, 상기 영상 입력부, 인식부, 검색어 추출부 및 인터넷 검색엔진부를 제어하는 제어부; 를 포함한다.
한편, 본 발명은 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치를 이용하는 검색 방법에 있어서, (a) 제어부가 영상 입력부를 통해 영상을 입력 받는 단계; (b) 상기 제어부가 입력받은 영상에 대한 정보 및 그 영상에 대한 텍스트 명칭을 미리 설정하여 인식DB모듈에 데이터베이스로 구축하는 단계; (c) 상기 제어부가 입력받은 영상을 인식부를 통해 인식하고, 상기 인식DB모듈에 데이터베이스로 기설정한 데이터와 입력받은 영상을 비교하여 텍스트 형태의 단어를 인식 신뢰도에 따라 검색어의 후보들로 추출하는 단계; (d) 상기 제어부가 상기 인식부의 인식결과인 후보 단어들을 검색어 추출부를 통해 인터넷 검색어로서의 적합도에 따라 검색어를 추출하는 단계; 및 (e) 상기 제어부가 상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색엔진부를 통해 인터넷 검색하고 관련 정보를 추출하는 단계; 를 포함한다.
상기와 같은 본 발명은 카메라나 비디오장치를 통해 취득한 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하여 정보를 제공받는 효과가 있다.
그리고, 본 발명은 영상 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 키보드 없이도 인터넷 검색하는 TV 시청중 인터넷을 검색하는 효과가 있다.
본 발명의 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명으로 더욱 명백해질 것이다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 발명자가 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미 와 개념으로 해석되어야 할 것이다. 또한, 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.
이하, 첨부된 도면을 참조하여 본 발명을 상세하게 설명한다.
본 발명의 일실시예에 따른 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 관하여 도 2를 참조하여 설명하면 다음과 같다.
도 2는 본 발명의 일실시예에 따른 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 관한 개략적인 블록도이다.
본 발명의 일실시예에 따른 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치는 도 2에 도시된 바와 같이, 영상 입력부(100), 인식부(200), 검색어 추출부(300), 인터넷 검색엔진부(400), 디스플레이부(500) 및 제어부(600)를 포함한다.
우선, 영상 입력부(100)는 카메라나 비디오 카메라 등의 외부 영상취득기기로부터 영상을 입력받는 기능을 수행한다.
또한, 인식부(200)는 영상 입력부(100)에 의해 수신한 영상 중 얼굴영역, 장소, GPS정보, 물체 및 상표를 인식하고, 기설정된 데이터와 비교하여, 그 결과를 인식 신뢰도(confidence)에 따라 텍스트 형태의 단어로 출력하는 기능을 수행한다.
이러한 기능을 수행하는 인식부(200)는 얼굴인식모듈(210), 장소인식모듈(220), 위치인식모듈(230), 문자인식모듈(240), 동식물 인식모듈(250), 물체인식모듈(260), 상표인식모듈(270) 및 인식DB모듈(280)을 포함한다. 이때, 기설정된 데 이터는 얼굴사진, 배경사진, 장소, GPS정보, 문자, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭에 대한 정보를 포함한다.
우선, 인식DB모듈(280)은 얼굴인식모듈(210), 장소인식모듈(220), 위치인식모듈(230), 문자인식모듈(240), 동식물 인식모듈(250), 물체인식모듈(260) 및 상표인식모듈(270)을 의 각 인식결과물에 대한 데이터를 비교하기 위하여, 수신한 영상 중, 얼굴사진, 배경사진, 장소, GPS정보, 문자, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭을 데이터베이스로 저장하여 미리 설정하는 기능을 수행한다. 여기서, 인식DB모듈은 인식 결과를 높이기 위하여 사전이나 자주 나타나는 용어 목록 등을 데이터베이스화한다.
얼굴인식모듈(210)은 영상 입력부(100)를 통해 수신한 영상 중, 얼굴영역을 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 해당자의 성명을 텍스트 형태의 단어로 추출한다.
장소인식모듈(220)은 수신한 영상 중, 영상의 배경을 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 해당 장소명을 텍스트 형태의 단어로 추출한다.
위치인식모듈(230)은 GPS가 장착된 카메라로 취득한 영상인 경우, GPS정보를 인식DB모듈(280)에 기설정된 데이터와 비교하여, 해당 위치명을 텍스트 형태의 단어로 추출한다.
문자인식모듈(240)은 수신한 영상 중, 문자 영역을 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 그 해당하는 문자열을 텍스트 형태의 단어 로 추출한다.
동식물 인식모듈(250)은 수신한 영상 중, 동식물 영역을 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 그 해당 동식물의 명칭을 텍스트 형태의 단어로 추출한다.
물체인식모듈(260)은 수신한 영상 중, 물체를 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 그 해당 물체의 일반 명칭을 텍스트 형태의 단어로 추출한다.
상표인식모듈(270)은 수신한 영상 중, 상표를 인식하고, 인식DB모듈(280)에 기설정된 데이터와 비교하여, 그 해당 회사의 명칭을 텍스트 형태의 단어로 추출한다.
본 실시예에 따른 인식부(200)는 수신하는 영상에 다수의 얼굴, 물체 등이 존재하고, 또 다른 측면에서 동일한 영상을 서술할 수 있으므로, 한 영상에서 신뢰도(confidence)를 달리하는 다수의 인식 결과를 검색어의 후보로 도출한다.
또한, 검색어 추출부(300)는 인식부(200)에서 출력하는 후보 단어들을 인터넷 검색어로서의 적합도에 따라 검색어로 선택하여 추출하는 기능을 수행한다. 이러한 기능을 수행하는 검색어 추출부(300)는 검색 포탈 이력을 저장하는 검색 이력 저장모듈(310), 다수의 단어를 데이터베이스로 구축하는 단어DB모듈(320), 단어DB모듈에 구축된 데이터베이스로부터 후보 단어들과 유사한 단어를 추가하는 단어추가모듈(330) 및 검색 이력으로부터 적합도를 판단하는 적합도 판단모듈(340)을 포함한다.
여기서, 인터넷의 검색어로서의 가능성, 즉 적합도(suitability)는 단어의 의미, 단어의 언어적 기능 등을 감안하여 결정되며 고유 명사는 검색어로서의 적합도가 높은 반면 자주 나타나는 일반명사와 기능어는 검색어로 적합도가 떨어지는 것이 통상적이다. 사용자의 나이, 학력, 직업, 취미 등에 따라서 개인차가 있고 시류에 따라 기복이 있다. 따라서 검색어로서의 적합도는 검색 포탈의 이력으로부터 추출하는 것이 바람직하다. 또한 한 검색어가 여러 의미로도 쓰이기 때문에 추출된 검색어의 의미를 차별화할 수 있는 부가적인 검색어를 추가하기도 한다. 한 예로서 과일의 그림을 인식하여 'Apple'이라고 검색엔진에 넘겼더니 컴퓨터 회사에 관한 이야기가 대부분인 경우를 피하기 위하여 'fruit'이라는 검색어를 추가하면 컴퓨터 회사의 검색 결과는 피할 수 있다. 다수의 후보 단어가 각기 다른 신뢰도로 추출되기 때문에 이들을 통합하여 인터넷 검색어로 가능성, 즉 적합도가 높은 것들을 선택한다.
또한, 인터넷 검색엔진부(400)는 검색어 추출부(300)에 의해 추출된 검색어를 이용하여 인터넷을 검색하고, 관련 정보를 관련도(relevance)에 따라 제공하는 기능을 수행한다. 여기서, 본 실시예에 따른 관련도는 검색어를 이용하여 검색된 다수의 관련 정보 중, 관련 정보 내의 검색어 빈도수가 다른 관련 정보보다 상대적으로 높은 것을 관련도가 높다고 할 수 있다.
또한, 디스플레이부(500)는 인터넷 검색엔진부(400)에 의해 검색된 결과를 인식부(200)의 인식 신뢰도, 검색어 추출부(300)의 적합도 및 인터넷 검색엔진부(400)의 관련도 순에 따라 목록으로 출력하는 기능을 수행한다.
그리고, 제어부(600)는 상술한 영상 입력부(100), 인식부(200), 검색어 추출부(300), 인터넷 검색엔진부(400) 및 디스플레이부(500)를 제어하는 기능을 수행한다.
본 발명은 카메라나 비디오장치를 통해 취득한 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하여 정보를 제공받는 효과가 있다.
또한, 본 발명은 배우의 사진 또는 영상으로부터 그 배우의 신상정보를 얻고, 저명한 지형지물의 사진 또는 영상으로부터 관광정보를 제공받는 효과가 있다.
또한, 본 발명은 길거리에서 간판의 영상을 촬영하면 무선통신을 이용하여 해당 상품이나 점포의 정보를 제공받는 효과가 있다.
또한, 본 발명은 책을 보다가 모르는 단어가 나오면 카메라로 촬영하여 문자를 인식하면 이를 검색어로 하여 검색한 정보를 얻고, 이 경우 다국어 키보드 없이도 다양한 언어로 된 검색어 입력이 가능하며, 이를 이용한 다국어 인터넷을 검색하는 효과가 있다.
그리고, 본 발명은 영상 속의 단어나 로고를 직접 검색하여 관련 정보를 얻고, 모르는 외국어를 키보드 없이도 인터넷을 검색하는 효과가 있다.
한편, 본 발명의 일실시예에 따른 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치를 이용하는 검색 방법(이하, '검색 방법')에 관하여 도 3을 참조하여 설명하면 다음과 같다.
도 3은 본 발명의 일실시예에 따른 검색 방법에 관한 전체적인 흐름도이다.
도 3에 도시된 바와 같이, 제어부(600)는 외부 영상취득기기로부터 영상 입력부(100)를 통해 영상을 입력받는다(S2).
다음으로 제어부(600)는 얼굴인식모듈(210), 장소인식모듈(220), 위치인식모듈(230), 문자인식모듈(240), 동식물 인식모듈(250), 물체인식모듈(260) 및 상표인식모듈(270)의 각 인식결과물에 대한 데이터를 비교하기 위하여, 수신한 영상 중, 얼굴사진, 배경사진, 장소, GPS정보, 문자, 사전, 용어목록, 물체, 상표 등에 대한 정보와 그 정보에 대한 텍스트 명칭을 미리 설정하여 데이터베이스로 구축한다(S4).
다음으로 제어부(600)는 입력받은 영상 중 얼굴사진, 배경사진, 장소, GPS정보, 사전, 용어목록, 물체 및 상표를 인식부(200)의 얼굴인식모듈(210), 장소인식모듈(220), 위치인식모듈(230), 문자인식모듈(240), 동식물 인식모듈(250), 물체인식모듈(260) 및 상표인식모듈(270)을 통해 인식한다(S6).
다음으로 제어부(600)는 각 인식모듈(210 내지 270)을 통해 인식한 결과를, 인식DB모듈(280)에 데이터베이스로 기설정한 데이터와 비교하여 텍스트 형태의 단어를 인식 신뢰도에 따라 검색어의 후보들로 추출한다(S8).
다음으로 제어부(600)는 인식부(200)의 인식결과인 후보 단어들을 검색어 추출부(300)를 통해 인터넷 검색어로서의 적합도에 따라 검색어를 추출한다(S10).
다음으로 제어부(600)는 검색어 추출부(300)에 의해 추출된 검색어를 이용하여 인터넷 검색엔진부(400)를 통해 인터넷 검색하고, 관련 정보를 관련도에 따라 추출한다(S12).
그리고 제어부(600)는 인터넷 검색엔진부(400)에 의해 추출된 관련 정보를 디스플레이부(500)를 통해 출력한다(S14). 여기서, 제 S14 단계를 구체적으로 살펴보면, 제어부(600)는 추출된 관련 정보를 디스플레이부(500)를 통해 인식부(200)의 인식신뢰도, 검색어 추출부(300)의 적합도 및 인터넷 검색엔진부(400)의 관련도 순에 따라 목록으로 출력한다.
그리고, 본 발명의 일실시예에 따른 검색어 추출과정에 대하여 도 4를 참조하여 상세히 살펴본다.
도 4는 본 발명의 일실시예에 따른 검색어 추출과정에 관한 상세한 흐름도이다.
도 4에 도시된 바와 같이, 제어부(600)는 검색어 추출부(300)의 검색 이력 저장모듈(310)을 통해 검색 포탈 이력을 저장한다(S22).
다음으로 제어부(600)는 검색어 추출부(300)의 단어추가모듈(330)을 통해 인식부(200)의 결과인 후보단어들과 유사한 단어를 단어DB모듈(320)로부터 추가한다(S24).
그리고 제어부(600)는 검색 이력 저장모듈(310)에 저장된 검색 포탈 이력으로부터 인터넷 검색어로 적합한지 적합도 판단모듈(340)을 통해 적합도를 판단하여 그 적합도에 따라 검색어를 추출한다(S26).
도 1은 종래기술에 따른 개략적인 블록도.
도 2는 본 발명의 일실시예에 따른 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 관한 개략적인 블록도.
도 3은 본 발명의 일실시예에 따른 검색 방법에 관한 전체적인 흐름도.
도 4는 본 발명의 일실시예에 따른 검색어 추출과정에 관한 상세한 흐름도.
<도면 부호에 대한 설명>
100 : 영상 입력부 200 : 인식부
210 : 얼굴인식모듈 220 : 장소인식모듈
230 : 위치인식모듈 240 : 문자인식모듈
250 : 동식물 인식모듈 260 : 물체인식모듈
270 : 상표인식모듈 280 : 인식DB모듈
300 : 검색어 추출부 310 : 검색 이력 저장모듈
320 : 단어DB모듈 330 : 단어추가모듈
340 : 적합도 판단모듈 400 : 인터넷 검색엔진부
500 : 디스플레이부 600 : 제어부

Claims (10)

  1. 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치에 있어서,
    외부 영상취득기기로부터 영상을 입력받는 영상 입력부;
    상기 영상 입력부에 의해 입력받은 영상을 인식하여 기설정된 데이터와 비교하고, 그 결과를 인식 신뢰도에 따라 텍스트 형태의 단어들로 출력하는 인식부;
    검색 포탈 이력을 저장하고, 상기 인식부로부터 출력되는 단어들과 유사한 단어를 추가하며, 상기 검색 포탈 이력으로부터 적합도를 판단하고, 그 결과 검색어로 선택하여 추출하는 검색어 추출부;
    상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색을 하여 관련 정보를 관련도에 따라 추출하는 인터넷 검색엔진부; 및
    상기 영상 입력부, 인식부, 검색어 추출부 및 인터넷 검색엔진부를 제어하는 제어부; 를 포함하며,
    상기 검색어 추출부는,
    검색 포탈 이력을 저장하는 검색 이력 저장모듈;
    다수의 단어를 데이터베이스로 구축하는 단어DB모듈;
    상기 인식부로부터 출력되는 단어들과 유사한 단어를 상기 단어DB모듈에 구축된 데이터베이스로부터 추가하는 단어추가모듈; 및
    상기 검색 이력 저장모듈의 검색 이력으로부터 적합도를 판단하는 적합도 판단모듈; 을 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  2. 제 1 항에 있어서,
    상기 인터넷 검색엔진부에 의해 검색된 결과를 상기 인식 신뢰도, 적합도 및 관련도에 따라 출력하는 디스플레이부; 를 더 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  3. 제 1 항에 있어서,
    상기 인식부는,
    상기 영상 입력부를 통해 입력받은 영상 중, 얼굴영역을 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여 해당자의 성명을 텍스트 형태의 단어로 추출하는 얼굴인식모듈;
    상기 영상 입력부를 통해 입력받은 영상 중, 영상의 배경을 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여 해당 장소명을 텍스트 형태의 단어로 추출하는 장소인식모듈;
    상기 얼굴인식모듈 및 장소인식모듈의 각 인식결과를 비교하기 위하여, 입력받은 영상에 대한 정보 및 그 정보에 대한 텍스트 명칭을 포함하는 데이터를 미리 설정하여 저장된 인식DB모듈; 을 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  4. 제 3 항에 있어서,
    상기 인식부는,
    상기 영상 입력부를 통해 입력받은 영상이 GPS가 장착된 영상취득기기로 취득한 영상인 경우, GPS정보를 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여 해당 위치명을 텍스트 형태의 단어로 추출하는 위치인식모듈; 및
    상기 영상 입력부를 통해 입력받은 영상 중, 문자 영역을 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여, 그 해당하는 문자열을 텍스트 형태의 단어로 추출하는 문자인식모듈; 을 더 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  5. 제 3 항에 있어서,
    상기 인식부는,
    상기 영상 입력부를 통해 입력받은 영상 중, 동식물 영역을 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여, 그 해당 동식물의 명칭을 텍스트 형태의 단어로 추출하는 동식물 인식모듈;
    상기 영상 입력부를 통해 입력받은 영상 중, 물체를 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여, 그 해당 물체의 일반 명칭을 텍스트 형태의 단어로 추출하는 물체인식모듈; 및
    상기 영상 입력부를 통해 입력받은 영상 중, 상표를 인식하고, 인식DB모듈에 기설정된 데이터와 비교하여, 그 해당 회사의 명칭을 텍스트 형태의 단어로 추출하는 상표인식모듈; 을 더 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  6. 제 3 항에 있어서,
    상기 영상에 대한 정보는,
    상기 영상 입력부를 통해 입력받은 영상 중, 얼굴사진, 배경사진, 장소, GPS정보, 문자, 사전, 용어목록, 물체 및 상표에 대한 정보를 포함하는 것을 특징으로 하는 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치.
  7. 삭제
  8. 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치를 이용하는 검색 방법에 있어서,
    (a) 제어부가 영상 입력부를 통해 영상을 입력받는 단계;
    (b) 상기 제어부가 입력받은 영상에 대한 정보 및 그 영상에 대한 텍스트 명칭을 미리 설정하여 인식DB모듈에 데이터베이스로 구축하는 단계;
    (c) 상기 제어부가 입력받은 영상을 인식부를 통해 인식하고, 상기 인식DB모듈에 데이터베이스로 기설정한 데이터와 입력받은 영상을 비교하여 텍스트 형태의 단어를 인식 신뢰도에 따라 검색어의 후보들로 추출하는 단계;
    (d) 상기 제어부가 상기 인식부의 인식결과인 후보 단어들을 검색어 추출부를 통해 인터넷 검색어로서의 적합도에 따라 검색어를 추출하는 단계; 및
    (e) 상기 제어부가 상기 검색어 추출부에 의해 추출된 검색어를 이용하여 인터넷 검색엔진부를 통해 인터넷 검색하고 관련 정보를 추출하는 단계; 를 포함하며,
    상기 제 (d) 단계는,
    (d-1) 상기 제어부가 검색어 추출부의 검색 이력 저장모듈을 통해 검색 포탈 이력을 저장하는 단계;
    (d-2) 상기 제어부가 상기 검색어 추출부의 단어추가모듈을 통해 인식부의 결과인 후보단어들과 유사한 단어를 추가하는 단계; 및
    (d-3) 상기 제어부가 상기 검색 이력 저장모듈에 저장된 검색 포탈 이력으로부터 인터넷 검색어로 적합한지 적합도 판단모듈을 통해 적합도를 판단하여 그 적합도에 따라 검색어를 추출하는 단계; 를 포함하는 것을 특징으로 하는 검색 방법.
  9. 제 8 항에 있어서,
    상기 제 (e) 단계 이후에,
    (f) 상기 제어부가 인터넷 검색엔진부에 의해 추출된 관련 정보를 디스플레이부를 통해 출력하는 단계; 를 더 포함하는 것을 특징으로 하는 검색 방법.
  10. 삭제
KR1020080019167A 2008-02-29 2008-02-29 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법 KR100930249B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080019167A KR100930249B1 (ko) 2008-02-29 2008-02-29 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080019167A KR100930249B1 (ko) 2008-02-29 2008-02-29 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20090093573A KR20090093573A (ko) 2009-09-02
KR100930249B1 true KR100930249B1 (ko) 2009-12-09

Family

ID=41302043

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080019167A KR100930249B1 (ko) 2008-02-29 2008-02-29 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR100930249B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101104734B1 (ko) 2009-11-25 2012-01-11 에스케이플래닛 주식회사 캡처 영상을 이용한 정보 획득 시스템 및 방법
US10061388B2 (en) 2014-08-18 2018-08-28 Samsung Electronics Co., Ltd. Method and apparatus for processing user input
KR20210092347A (ko) 2020-01-15 2021-07-26 박영 식물사진 이미지를 이용한 식물 정보 제공 방법 및 시스템
US11853108B2 (en) 2017-10-27 2023-12-26 Samsung Electronics Co., Ltd. Electronic apparatus for searching related image and control method therefor

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101468231B1 (ko) * 2009-09-11 2014-12-04 삼성전자주식회사 라벨 검색 방법 및 장치
KR20110033423A (ko) * 2009-09-25 2011-03-31 아주대학교산학협력단 유비쿼터스 공간 모니터 및 모니터링 방법
KR101116434B1 (ko) 2010-04-14 2012-03-07 엔에이치엔(주) 이미지를 이용한 쿼리 제공 방법 및 시스템
KR101193485B1 (ko) * 2010-05-07 2012-10-22 엔에이치엔비즈니스플랫폼 주식회사 모바일 카메라를 이용한 다중 정보 인식 및 이를 이용한 검색 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
CN104572972A (zh) * 2014-12-31 2015-04-29 百度在线网络技术(北京)有限公司 一种用于对用户进行验证的方法和装置
KR102112754B1 (ko) * 2018-07-06 2020-05-19 한국항공우주연구원 기계학습 기반의 영상 인식 방법 및 기계학습 기반의 영상 인식 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000072482A (ko) * 2000-09-06 2000-12-05 이재학 이용자의 검색을 용이하게 하는 인터넷 검색 시스템 및 그방법
KR20020037394A (ko) * 2000-11-14 2002-05-21 김진철 웹카메라를 이용한 이미지 인식 게이트웨이 시스템
KR20040063641A (ko) * 2003-01-08 2004-07-14 주식회사 옵투스 키워드확장장치 및 방법과 키워드확장장치를 이용한검색시스템
KR20040076927A (ko) * 2003-02-27 2004-09-04 (주)아이에스엘지 비교에 의한 신분증 위변조 검증 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000072482A (ko) * 2000-09-06 2000-12-05 이재학 이용자의 검색을 용이하게 하는 인터넷 검색 시스템 및 그방법
KR20020037394A (ko) * 2000-11-14 2002-05-21 김진철 웹카메라를 이용한 이미지 인식 게이트웨이 시스템
KR20040063641A (ko) * 2003-01-08 2004-07-14 주식회사 옵투스 키워드확장장치 및 방법과 키워드확장장치를 이용한검색시스템
KR20040076927A (ko) * 2003-02-27 2004-09-04 (주)아이에스엘지 비교에 의한 신분증 위변조 검증 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101104734B1 (ko) 2009-11-25 2012-01-11 에스케이플래닛 주식회사 캡처 영상을 이용한 정보 획득 시스템 및 방법
US10061388B2 (en) 2014-08-18 2018-08-28 Samsung Electronics Co., Ltd. Method and apparatus for processing user input
US11853108B2 (en) 2017-10-27 2023-12-26 Samsung Electronics Co., Ltd. Electronic apparatus for searching related image and control method therefor
KR20210092347A (ko) 2020-01-15 2021-07-26 박영 식물사진 이미지를 이용한 식물 정보 제공 방법 및 시스템

Also Published As

Publication number Publication date
KR20090093573A (ko) 2009-09-02

Similar Documents

Publication Publication Date Title
KR100930249B1 (ko) 영상으로부터 얻은 정보를 이용하여 인터넷을 검색하는장치 및 그 방법
CN108829893B (zh) 确定视频标签的方法、装置、存储介质和终端设备
US10229111B1 (en) Sentence compression using recurrent neural networks
US9411827B1 (en) Providing images of named resources in response to a search query
US9547716B2 (en) Displaying additional data about outputted media data by a display device for a speech search command
US9411801B2 (en) General dictionary for all languages
US8577882B2 (en) Method and system for searching multilingual documents
US8140530B2 (en) Similarity calculation device and information search device
US8625899B2 (en) Method for recognizing and translating characters in camera-based image
US10282374B2 (en) System and method for feature recognition and document searching based on feature recognition
CN106980664B (zh) 一种双语可比较语料挖掘方法及装置
KR100970711B1 (ko) Tv 시청중 인터넷을 검색하는 장치 및 그 방법
Posner et al. Using text-spotting to query the world
EP2806336A1 (en) Text prediction in a text input associated with an image
KR20160029587A (ko) 단위 또는 약어의 풀네임 음성출력 방법 및 장치
CN113806588A (zh) 搜索视频的方法和装置
CN109635125B (zh) 一种词汇图谱搭建方法及电子设备
CN113301382B (zh) 视频处理方法、设备、介质及程序产品
CN112487159B (zh) 检索方法、检索装置及计算机可读存储介质
JP2017182646A (ja) 情報処理装置、プログラム及び情報処理方法
CN116628278A (zh) 多模态搜索方法、装置、存储介质和设备
KR101800975B1 (ko) 필기체가 인식되어 생성된 전자문서의 공유 방법 및 그 장치
JP2008225676A (ja) 辞書検索装置及びその制御プログラム
US10642920B2 (en) System, method, and program for search
KR100930248B1 (ko) 소리로부터 얻은 정보를 이용하여 인터넷을 검색하는 장치및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121031

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131030

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150430

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20151019

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161116

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20171127

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20191126

Year of fee payment: 11