KR20060036592A - Method for search service using image-data - Google Patents

Method for search service using image-data Download PDF

Info

Publication number
KR20060036592A
KR20060036592A KR1020040085611A KR20040085611A KR20060036592A KR 20060036592 A KR20060036592 A KR 20060036592A KR 1020040085611 A KR1020040085611 A KR 1020040085611A KR 20040085611 A KR20040085611 A KR 20040085611A KR 20060036592 A KR20060036592 A KR 20060036592A
Authority
KR
South Korea
Prior art keywords
search
terminal
image data
server
predetermined
Prior art date
Application number
KR1020040085611A
Other languages
Korean (ko)
Inventor
오재홍
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020040085611A priority Critical patent/KR20060036592A/en
Publication of KR20060036592A publication Critical patent/KR20060036592A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Abstract

본 발명은, 문자로 표현하기 힘든 대상물의 형상이나 처음 보는 대상물에 대해서 디지털 카메라로 촬영한, 이미지 데이터를 이용하여 상기 대상물에 대한 각종 정보를 검색할 수 있도록 하는 방법을 제공한다. 본 발명은 유무선 통신이 가능한 단말기를 이용하여 소정의 대상물이 포함되어 있는 이미지 데이터를 획득하는 단계; 상기 단말기가, 제어 서버에 접속하고 상기 이미지 데이터를 상기 제어 서버에 등록하여 상기 이미지를 기초로 하는 검색의 수행을 요청하는 단계; 상기 제어 서버가, 다수의 데이터를 보유하고 있는 데이터베이스 검색 서버로 상기 이미지 데이터를 전송하고, 상기 단말기로부터 요청된 검색을 수행하도록 지시하는 단계; 상기 데이터베이스 검색 서버에서 상기 지시된 검색을 수행하고 검색 결과를 생성하는 단계; 상기 데이터베이스 검색 서버가 상기 검색 결과를 상기 제어 서버로 전송하고, 상기 제어 서버는 상기 검색 결과를 소정의 전송 형태로 가공한 후 상기 단말기로 전송하는 단계; 를 포함한다.
The present invention provides a method for retrieving various types of information about an object using image data photographed with a digital camera about a shape of an object that is difficult to be expressed by text or an object to be viewed for the first time. The present invention comprises the steps of acquiring image data including a predetermined object using a terminal capable of wired and wireless communication; Requesting, by the terminal, to perform a search based on the image by connecting to a control server and registering the image data with the control server; Instructing, by the control server, to transmit the image data to a database search server that holds a plurality of data, and to perform a requested search from the terminal; Performing the indicated search and generating a search result at the database search server; The database search server transmitting the search result to the control server, and the control server processing the search result in a predetermined transmission form and transmitting the search result to the terminal; It includes.

디지털 카메라, 이미지 데이터, 단말기, 검색Digital Camera, Image Data, Terminal, Search

Description

이미지 데이터를 이용한 검색 서비스 제공 방법{METHOD FOR SEARCH SERVICE USING IMAGE-DATA}Search service provision method using image data {METHOD FOR SEARCH SERVICE USING IMAGE-DATA}

도 1은 본 발명의 이미지 데이터를 이용한 검색 서비스를 제공하는 시스템의 구성을 간략하게 나타낸 도면.BRIEF DESCRIPTION OF THE DRAWINGS Fig. 1 is a diagram schematically showing the configuration of a system for providing a search service using image data of the present invention.

도 2는 본 발명의 이미지 데이터를 이용한 검색 서비스를 제공하는 개략적인 순서를 나타낸 도면.2 is a diagram illustrating a schematic sequence of providing a search service using the image data of the present invention.

도 3은 본 발명의 이미지 데이터를 이용한 검색 방법에서, 소정의 검색 결과가 사용자의 검색 요청에 부합하지 않는 경우의 처리에 관한 흐름도.3 is a flowchart of processing in a case where a predetermined search result does not meet a user's search request in the search method using the image data of the present invention.

(도면의 주요 부분에 대한 부호의 설명)(Explanation of symbols for the main parts of the drawing)

1 : 단말기1: terminal

2 : 제어 서버2: control server

3 : 데이터베이스 검색 서버3: database search server

31 : 데이터베이스31: database

32 : 미해결 질문 목록
32: List of open questions

본 발명은 소정의 대상물을 디지털 카메라로 촬영하고, 상기 촬영된 대상물 이미지를 이용하여 소정의 검색을 수행하는 방법에 관한 것으로서, 더욱 상세하게는 정보를 획득하고자 하는 대상물을 유무선 통신 단말기에 탑재된 디지털 카메라로 촬영한 후, 상기 이미지를 소정의 데이터베이스 검색 서버에 등록하고 상기 이미지 데이터를 기초로 검색을 수행하기 위한 소정의 검색어를 입력하여, 상기 이미지 및 검색어와 관련된 문서 정보 또는 멀티미디어 정보를 검색하도록 함으로써 소정의 정보를 획득할 수 있도록 하는 이미지 데이터를 이용한 검색 서비스의 제공 방법에 관한 것이다.The present invention relates to a method of photographing a predetermined object with a digital camera and performing a predetermined search by using the photographed object image. More particularly, the present invention relates to a digital device equipped with a wired / wireless communication terminal. After shooting with the camera, by registering the image in a predetermined database search server and inputting a predetermined search word for performing a search based on the image data, by searching for document information or multimedia information related to the image and the search word The present invention relates to a method of providing a search service using image data to obtain predetermined information.

일반적으로, 사용자가 의미를 정확히 알지 못하는 외국어나 국어 단어에 대한 정보를 필요로할 때는 비치되어 있는 사전을 이용하거나, PC 등을 이용하여 인터넷 사전 또는 사전 프로그램을 이용하여 상기 정보가 필요한 단어에 대한 의미를 검색한다. In general, when a user needs information about a foreign language or a Korean word that does not know the meaning exactly, the user may use a dictionary provided, or use an Internet dictionary or a dictionary program using a PC or the like to search for a word that requires the information. Search for meaning.

그러나 사용자가 이동중이거나, 상기와 같이 사전을 손쉽게 이용할 수 있는 경우가 아닐 때에는, 유무선 이동 통신 단말기를 통한 무선 인터넷을 이용하거나, 전자 사전 기능이 추가되어 있는 단말기를 이용하여 상기 단어에 대한 정보를 검색하기도 한다.However, when the user is moving or the dictionary is not readily available as described above, the information on the word is searched by using the wireless Internet through a wired / wireless mobile communication terminal or using a terminal to which an electronic dictionary function is added. Sometimes.

그런데, 상기의 유무선 이동 통신 단말기를 통한 무선 인터넷을 이용하는 경우에는 무선 인터넷에 접속하여 검색하고자 하는 단어를 입력하는 동안 상기 무선 인터넷 접속으로 인한 통화료가 계속 부과되어 사용자가 이를 부담해야 하는 단점 이 있다.However, in the case of using the wireless Internet through the wired / wireless mobile communication terminal, a call charge due to the wireless Internet access is continuously charged while the user inputs a word to search for access to the wireless Internet, and the user has to bear this.

또한, 전자 사전 기능이 추가되어 있는 단말기의 경우에는, 전자 사전 데이터의 방대한 양으로 인해 단말기 메모리가 많이 필요하게 되고, 단말기의 중앙 처리 장치의 성능에 따라 검색 속도가 매우 느릴 수 있으며, 단말기 자체의 회로가 복잡해진다는 단점이 있다. In addition, in case of a terminal to which an electronic dictionary function is added, a large amount of electronic dictionary data requires a lot of terminal memory, and according to the performance of the central processing unit of the terminal, the search speed may be very slow. The disadvantage is that the circuit is complicated.

이러한 문제점을 해결하기 위한 한가지 방법으로써, 검색하고자 하는 단어를 SMS로 발송하고, 상기 단어의 의미를 SMS로 수신하여 확인하는 방법에 관한 발명이 제안되어 있다. As one method for solving this problem, an invention has been proposed regarding a method of sending a word to be searched by SMS and receiving and confirming the meaning of the word by SMS.

그러나 이러한 방법은 검색하고자 하는 단어를 문자 메시지로 작성해야 한다는 번거로움이 있고, 상기 이동 통신 단말기로 입력할 수 있는 외국어 문자 및 기호들에 대해서는 상기 단말기에 내장된 글꼴의 종류상 한계가 있으므로, 상기 SMS를 이용한 사전 검색 서비스 방법은 사용에 많은 제약을 받는다.However, this method is cumbersome to write a word to search in a text message, and there is a limitation in the type of fonts embedded in the terminal for foreign language characters and symbols that can be input into the mobile communication terminal. The dictionary search service method using SMS has a lot of restrictions on its use.

또한, 이러한 SMS 입력의 번거로움 및 다양한 글씨체의 입력을 대신할 방법으로, 소정의 디지털 카메라에 의해 촬영된 정지 화상을 이용하는 방법이 제안되어 있다. 상기 방법은, 전자 사전 기능을 구비한 단말기에 장착된 디지털 카메라로 소정의 문자를 촬영한 후, 상기 촬영된 이미지에서 문자 데이터를 추출하여 인식하고, 상기 인식된 문자 데이터를 기초로 하여, 상기 단말기에 구비된 전자 사전의 데이터를 검색한 후, 그 결과를 상기 단말기에 구비된 소정의 액정 표시부에 출력하도록 하는 방법이다. In addition, a method of using a still image photographed by a predetermined digital camera has been proposed as a method to replace the inconvenience of SMS input and input of various fonts. The method may include photographing a predetermined character with a digital camera mounted to a terminal having an electronic dictionary function, extracting and recognizing character data from the photographed image, and based on the recognized character data, After searching the data of the electronic dictionary provided in the, and outputs the result to a predetermined liquid crystal display unit provided in the terminal.

그러나 이 방법은 상기 검색하고자 하는 문자 및 기호를 SMS로 입력하는 번 거로움을 없앨 수 있지만, 상기 단말기내에서 상기 문자 데이터 인식 기능 및 전자 사전 기능을 구현해야 하기 때문에 상기 단말기의 하드웨어 및 소프트웨어의 구성이 복잡해지고, 상기 검색 기능을 사용하기 위한 사용자의 조작 또한 복잡해 질 수 있다는 단점이 있다.However, this method can eliminate the hassle of inputting the text and symbols to be searched by SMS, but it is necessary to implement the text data recognition function and the electronic dictionary function in the terminal. This is complicated and the user's manipulation to use the search function can also be complicated.

또한, 상기한 종래 기술들은 문자 데이터에 기초하여 검색을 수행하고 있으므로, 이미 문자로 작성된 문서, 또는 상기 이동 통신 단말기에 의해 작성된 문자 데이터에 의해서만 검색이 이루어질 수 있다는 단점이 있다.
In addition, since the above-described conventional techniques perform a search based on text data, there is a disadvantage that the search can be performed only by a document already written in text or text data created by the mobile communication terminal.

본 발명은, 상기와 같은 문자 데이터의 입력에 따른 번거로움 및 다양한 문자를 입력할 수 없는 글꼴의 제약, 전자 사전 기능을 단말기 내에 구비하기 위해 감수해야하는 여러 가지 하드웨어적인 구성상의 문제점, 또는 사전 기능을 포함하는 단말기의 복잡한 사용법 등의 문제점들을 해결하기 위한, 이미지 데이터를 이용한 검색 방법을 제공하는데 그 목적이 있다.
The present invention is to solve the inconvenience of the input of the character data and the limitation of the font that can not input a variety of characters, various hardware configuration problems that must be taken in order to have the electronic dictionary function in the terminal, or dictionary function An object of the present invention is to provide a retrieval method using image data for solving problems such as complicated usage of a terminal.

상기한 목적을 달성하기 위하여 본 발명은, 유무선 통신이 가능한 단말기가, 소정의 대상물이 포함되어 있는 이미지 데이터를 획득하는 단계; 상기 이미지 데이터를 획득한 단말기가, 제어 서버에 접속하는 단계; 상기 단말기가 상기 이미지 데이터를 상기 제어 서버에 등록하고, 상기 이미지를 기초로 하는 검색의 수행을 요 청하는 단계; 상기 제어 서버가, 다수의 데이터를 보유하고 있는 데이터베이스 검색 서버로 상기 이미지 데이터를 전송하고, 상기 단말기로부터 요청된 검색을 수행하도록 지시하는 단계; 상기 데이터베이스 검색 서버에서 상기 지시된 검색을 수행하고 검색 결과를 생성하는 단계; 상기 데이터베이스 검색 서버가 상기 검색 결과를 상기 제어 서버로 전송하고, 상기 제어 서버는 상기 검색 결과를 소정의 전송 형태로 가공한 후 상기 단말기로 전송하는 단계; 를 포함한다.In order to achieve the above object, the present invention, the wired and wireless communication capable terminal, the step of acquiring the image data containing a predetermined object; Connecting, by the terminal acquiring the image data, to a control server; Registering, by the terminal, the image data with the control server and requesting to perform a search based on the image; Instructing, by the control server, to transmit the image data to a database search server that holds a plurality of data, and to perform a requested search from the terminal; Performing the indicated search and generating a search result at the database search server; The database search server transmitting the search result to the control server, and the control server processing the search result in a predetermined transmission form and transmitting the search result to the terminal; It includes.

또한, 상기 데이터베이스 검색 서버에서 상기 단말기로부터의 상기 검색 요청에 부합하는 검색 결과가 있으면 상기 결과 정보를 상기 단말기로 전송하도록 하고, 상기 검색 요청에 부합하는 검색 결과가 없으면 상기 단말기에 재검색을 실행할 것인지의 여부를 문의하도록 하는 단계를 더 포함한다.In addition, if there is a search result corresponding to the search request from the terminal, the database search server transmits the result information to the terminal, and if there is no search result corresponding to the search request, whether to perform re-search on the terminal. It further includes the step of asking whether or not.

또한, 상기 단말기를 이용하여 상기 검색을 요청한 사용자가 상기 단말기에 전송된 검색 결과를 확인하였으나, 요청한 검색에 부합하는 검색 결과가 없는 경우, 상기 이미지 데이터 및 상기 검색 요청을 소정의 미해결 질문 목록에 추가하도록 하는 단계를 더 포함한다.In addition, when the user who requested the search using the terminal checks the search result sent to the terminal, but there is no search result corresponding to the requested search, the image data and the search request are added to a predetermined list of unanswered questions. It further comprises the step of.

또한, 상기 검색 결과를 상기 단말기로 전송하기 위한 상기 가공된 전송 형태는, 문자 메시지 또는 멀티미디어 메시지인 것을 특징으로 한다.The processed transmission form for transmitting the search result to the terminal may be a text message or a multimedia message.

또한, 상기 단말기로부터의 검색 요청은, 상기 이미지에 포함된 대상물을 인식하고, 상기 인식된 대상물에 관련된 각종 문서 정보 또는 멀티미디어 정보를 검색하도록 하는 것을 특징으로 한다.The search request from the terminal may recognize an object included in the image and search for various document information or multimedia information related to the recognized object.

또한, 상기 이미지 데이터는, 소정의 유무선 통신망 내에서 상기 단말기로 다운로드 되거나, 디지털 이미지 데이터를 생성할 수 있는 소정의 외부기기에 의해 생성되거나, 상기 단말기에 탑재된 디지털 카메라에 의해 촬영된 이미지 데이터 중의 하나인 것을 특징으로 한다.
The image data may be downloaded from the terminal within a predetermined wired / wireless communication network, generated by a predetermined external device capable of generating digital image data, or photographed by a digital camera mounted on the terminal. It is characterized by one.

이하 첨부한 도면을 참조하여 본 발명을 상세히 설명하면 다음과 같다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명을 수행하기 위한 이미지 데이터를 이용한 검색 시스템의 구성을 간략하게 나타낸 도면이다. 1 is a diagram briefly showing a configuration of a search system using image data for carrying out the present invention.

단말기(1)는 소정의 데이터 통신 기능을 구비하여 유무선 통신망에서 이미지 데이터를 포함하는 각종 데이터를 송수신할 수 있는 통신 단말기이다. 또한 상기 통신 단말기(1)는 상기 유무선 통신망으로부터 또는 디지털 이미지 데이터를 생성할 수 있는 스캐너와 같은 외부기기로부터 소정의 이미지 데이터를 다운로드하여 획득하거나, 상기 단말기(1)에 탑재된 디지털 카메라에 의해 촬영된 이미지 데이터를 상기 단말기(1)에 구비된 소정의 메모리에 저장하는 기능을 포함하는 것이 바람직하다. The terminal 1 is a communication terminal having a predetermined data communication function and capable of transmitting and receiving various data including image data in a wired / wireless communication network. In addition, the communication terminal 1 may download and acquire predetermined image data from the wired / wireless communication network or from an external device such as a scanner capable of generating digital image data, or may be photographed by a digital camera mounted on the terminal 1. It is preferable to include a function for storing the image data stored in a predetermined memory provided in the terminal (1).

제어 서버(2)는 상기 단말기(1)와 상기 유무선 통신망으로 연결되어, 상기 단말기(1)로부터 전송되는 이미지 데이터 및 소정의 검색 요청을 수신하여 후술될 데이터베이스 검색 서버(3)로 전송해 주는 동작을 수행한다. 또한 상기 제어 서버(2)는 상기 데이터베이스 검색 서버(3)로부터 전송되는 검색 결과를 소정의 전송 형태로 가공한 후 다시 상기 단말기(1)로 전송한다. The control server 2 is connected to the terminal 1 and the wired / wireless communication network, and receives image data and a predetermined search request from the terminal 1 and transmits them to the database search server 3 to be described later. Do this. In addition, the control server 2 processes the search result transmitted from the database search server 3 into a predetermined transmission form and transmits the result to the terminal 1 again.

상기 검색 요청은, 상기 이미지 데이터를 전송하는 사용자에 의해 작성되는 것으로써, 예를 들면, 상기 이미지 데이터가 길가의 들꽃을 촬영한 이미지일 경우, 상기 들꽃의 이미지를 상기 통신망에 접속하여 상기 제어 서버(2)로 전송하고 동시에 "이 꽃의 이름은?" 과 같은 검색어를 입력함으로써 작성된다. 그러면 상기 제어 서버(2)가 상기 검색어로부터 사용자의 검색 의도를 파악하고, 상기 검색 의도에 따른 검색의 수행을 상기 데이터베이스 검색 서버(3)로 지시하게 되는 것이다. The search request is created by a user who transmits the image data. For example, when the image data is an image of a wild flower of a roadside, the image of the wild flower is connected to the communication network to control the server. (2) and at the same time "What is the name of this flower?" It is created by entering a search word such as Then, the control server 2 grasps the user's search intention from the search word and instructs the database search server 3 to perform a search according to the search intention.

사용자에 의해 작성되는 상기의 검색 요청은, 촬영된 이미지의 대상물의 명칭과 같은 속성 정보에 관한 것일 수도 있고, 또한, 상기 이미지를 포함하는 다른 이미지나 동영상 등의 멀티 미디어 데이터를 검색하고자 하는 요청일 수도 있다.The search request made by the user may be related to attribute information such as the name of the object of the photographed image, and is a request to search for multimedia data such as another image or video including the image. It may be.

또한 상기 단말기(1)로 전송될 검색 결과를 소정의 전송 형태로 가공한 후 전송하는 것은, 상기 데이터베이스 검색 서버(3)로부터 전송된 상기 검색 결과를, 상기 단말기(1)에서 표현 가능한 데이터 표현 형식, 예를 들면, SMS 나 멀티미디어 메시지로 가공하고, 상기 가공된 검색 결과를 상기 단말기(1)로 전송하는 것이다.Further, processing the search result to be transmitted to the terminal 1 in a predetermined transmission form and then transmitting the data expression format that can express the search result transmitted from the database search server 3 in the terminal 1. For example, to process the SMS or multimedia message, and transmit the processed search results to the terminal (1).

데이터베이스 검색 서버(3)는, 다수의 문서 데이터 및 멀티 미디어 데이터를 저장하고 있는 소정의 데이터베이스(31)를 구비하고 있으며, 상기 제어 서버(2)로부터 전송되는, 이미지 데이터를 기초로 하는 검색 지시에 따라 소정의 검색을 수행한다. 더욱 상세하게는, 상기 검색의 결과, 상기 제어 서버(2)로부터의 검색 지시에 부합하는 검색 결과가 있는 경우는 상기 검색 결과들을 소정의 우선 순위에 따라 재 정렬한 후 상기 검색 결과를 상기 제어 서버(2)로 전송하고, 검색 결과가 없는 경우는 소정의 "결과 없음" 메시지를 상기 제어 서버(2)로 전송한다. The database retrieval server 3 has a predetermined database 31 which stores a large number of document data and multimedia data, and has a retrieval instruction based on image data transmitted from the control server 2. A predetermined search is performed accordingly. More specifically, when there is a search result that matches the search instruction from the control server 2 as a result of the search, the search results are rearranged according to a predetermined priority, and the search result is arranged in the control server. (2), and if there is no search result, a predetermined "no result" message is transmitted to the control server (2).

상기 데이터베이스 검색 서버(3)는 소정의 미해결 질문 목록(32)을 더 구비 하고 있다. 상기 미해결 질문 목록(32)은 상기 데이터베이스 검색 서버(3)로부터 검색된 결과를 제어 서버(2) 및 단말기(1)를 통해 확인한 사용자가, 상기 검색 결과가 자신이 요구한 검색에 대한 올바른 결과가 아닐 경우, 차후 상기 데이터베이스 검색 서버(3)를 소정의 단말기를 통해 방문하는 다른 사용자로부터 적당한 정답을 구할 수 있도록, 상기 이미지 데이터 및 자신의 검색어를 등록해 놓는 소정의 공용 저장 공간이다. The database search server 3 further has a predetermined list of open questions 32. The list of unresolved questions 32 indicates that the user who checks the result retrieved from the database search server 3 through the control server 2 and the terminal 1 is not the correct result for the search requested by the user. In this case, it is a predetermined common storage space in which the image data and its search word are registered so that a proper answer can be obtained from another user who visits the database search server 3 through a predetermined terminal.

상기와 같이 구성되는 본 발명의 이미지 데이터를 이용한 검색 시스템을 이용하여 제공되는, 이미지 데이터를 이용한 검색 서비스를 제공하는 방법에 대해 살펴보면 다음과 같다. 도 2는 본 발명의 이미지 데이터를 이용한 검색 방법의 개략적인 순서를 나타낸 흐름도이다. Looking at the method for providing a search service using the image data, provided by using a search system using the image data of the present invention configured as described above are as follows. 2 is a flowchart showing a schematic sequence of a retrieval method using the image data of the present invention.

먼저 단말기(1)의 사용자는 정보를 얻고자 하는 대상물에 대한 이미지 데이터를 획득하여 상기 단말기(1)에 구비된 소정의 저장부에 저장한다(S10). 상기 정보를 얻고자 하는 대상물의 이미지 데이터는 앞서 설명한 바와 같이, 상기 단말기(1)가 접속되어 있는 소정의 유무선 통신망으로부터 또는 디지털 이미지 데이터를 생성할 수 있는 스캐너와 같은 외부기기로부터 이미지 데이터를 다운로드하여 획득하거나, 상기 단말기(1)에 탑재된 디지털 카메라에 의해 촬영된 이미지 데이터를 포함한다. First, a user of the terminal 1 obtains image data of an object for which information is to be obtained and stores the image data in a predetermined storage unit provided in the terminal 1 (S10). As described above, the image data of the object for which the information is to be obtained is downloaded from a predetermined wired / wireless communication network to which the terminal 1 is connected or from an external device such as a scanner capable of generating digital image data. Or image data captured by a digital camera mounted on the terminal 1.

다음으로 상기 단말기는, 상기 유무선 통신망을 통해 제어 서버(2)에 접속한다(S20). 이후 상기 단말기는 저장된 이미지 데이터를 상기 제어 서버(2)로 전송하고, 동시에 상기 이미지를 기초로 하는 검색을 요청하기 위한 소정의 검색어를 작 성한다(S30). 상기 검색어는 각종 기호를 포함하는 정형화된 검색어 형태일 수도 있고, 일상 언어와 같은 자연어를 이용한 검색어일 수도 있다. Next, the terminal connects to the control server 2 via the wired or wireless communication network (S20). Thereafter, the terminal transmits the stored image data to the control server 2, and simultaneously creates a predetermined search word for requesting a search based on the image (S30). The search word may be in the form of a standardized search word including various symbols or may be a search word using a natural language such as a daily language.

다음으로 상기 제어 서버(2)에서는, 상기 이미지 데이터를 상기 데이터베이스 검색 서버(3)로 전송하고, 상기 단말기(1)로부터 작성되어 전송된 검색어를 통해 상기 사용자의 검색 의도를 분석한 후 데이터베이스 검색 서버(3)에 소정의 검색을 지시한다(S40). 상기 검색 의도는 상기 이미지 데이터에 포함된 대상물의 명칭과 같은 속성 정보에 관한 것일 수도 있고, 또한, 상기 이미지를 포함하는 다른 이미지나 동영상 등의 멀티 미디어 데이터를 검색하고자 하는 것일 수도 있다.Next, the control server 2 transmits the image data to the database search server 3, analyzes the search intention of the user through the search word created and transmitted from the terminal 1, and then the database search server. A predetermined search is instructed to (3) (S40). The search intent may be related to attribute information such as a name of an object included in the image data, or may be to search for multimedia data such as another image or video including the image.

상기 이미지 데이터 및 상기 검색 지시를 수신한 데이터베이스 검색 서버(3)는, 상기 이미지 데이터를 기초로 상기 검색 지시에 부합하는 데이터를 검색하고, 상기 검색의 결과를 소정의 우선 순위에 맞게 정렬한다(S50). 상기 검색 결과가 생성되면, 상기 데이터베이스 검색 서버(3)는 상기 검색 결과를 제어 서버(2)로 전송하고, 상기 제어 서버(2)는 상기 검색 결과를 소정의 전송 형태로 가공하여 상기 단말기(1)로 재 전송한다(S60).The database search server 3 which has received the image data and the search instruction searches for data corresponding to the search instruction based on the image data, and sorts the search result according to a predetermined priority (S50). ). When the search result is generated, the database search server 3 transmits the search result to the control server 2, and the control server 2 processes the search result into a predetermined transmission form to the terminal 1 Retransmit to (S60).

또한, 상기 데이터베이스 검색 서버(3)에서 이미지 데이터를 기초로한 검색을 수행하여 소정의 검색 결과를 생성하도록 하지만(S50), 상기 검색에 대한 결과가 존재하지 않을 경우가 발생할 수 있으므로 상기 데이터베이스 검색 서버는 상기 검색 결과가 존재하는지의 여부를 판단하는 과정을 더 포함한다(S52). 상기 판단의 결과, 상기 제어 서버(2)로부터 지시된 검색에 대한 적어도 하나 이상의 결과가 존재하는 경우는 상기 검색 결과를 상기 제어 서버(2)로 전송하고(S60), 상기 검색 결과가 존재하지 않아 상기 제어 서버(2)로 전송할 결과가 없을 때는, 소정의 "결과 없음" 메시지를 생성하여 상기 제어 서버(2)로 전송한다. In addition, the database search server 3 performs a search based on image data to generate a predetermined search result (S50). However, there may be a case in which there is no result for the search. The method may further include determining whether the search result exists (S52). As a result of the determination, if at least one or more results for the search indicated by the control server 2 exist, the search result is transmitted to the control server 2 (S60), and the search result does not exist. When there is no result to be transmitted to the control server 2, a predetermined "no result" message is generated and transmitted to the control server 2.

상기 검색 결과 또는 상기 "결과 없음" 메시지는 상기 제어 서버(2)에서 소정의 전송 형태로 가공되어 단말기(1)로 전송된다(S70). 상기 제어 서버(2)에서 가공되는 소정의 전송 형태는, 상기 단말기(1)에서 표현 가능한 데이터 표현 형식, 예를 들면, SMS 나 멀티미디어 메시지를 이른다.The search result or the "no result" message is processed by the control server 2 in a predetermined transmission form and transmitted to the terminal 1 (S70). The predetermined form of transmission processed by the control server 2 leads to a data representation format that can be expressed by the terminal 1, for example, SMS or multimedia message.

이 후, 상기 제어 서버(2)로부터 전송된 소정의 전송 형태의 검색 결과를 상기 단말기(1)가 수신하고, 상기 단말기는 상기 검색 결과를 소정의 표시부(미도시)에 출력하여 사용자가 확인할 수 있도록 한다. 상기 사용자는 상기 출력되는 검색 결과를 확인한 후 상기 이미지를 이용한 검색을 종료하게 된다.Thereafter, the terminal 1 receives a search result of a predetermined transmission form transmitted from the control server 2, and the terminal outputs the search result to a predetermined display unit (not shown) so that the user can check it. Make sure The user ends the search using the image after checking the output search result.

도 3은 본 발명의 이미지 데이터를 이용한 검색 방법에서, 소정의 검색 결과가 사용자의 검색 요청에 부합하지 않는 경우의 처리에 관한 흐름도이다. 도 3은 도 2의 결과 전송 단계(S70)의 이후에 수행되는 단계이다. 3 is a flowchart illustrating processing when a predetermined search result does not meet a user's search request in the search method using the image data of the present invention. 3 is a step performed after the result transmission step S70 of FIG.

S70 단계에서 상기 제어 서버(2)에서 소정의 전송 형태로 가공된 검색 결과를 단말기(1)로 전송하면, 상기 전송 결과를 상기 단말기(1)에 구비된 소정의 출력부(미도시)를 통해 사용자가 확인한다(S82). In operation S70, when the control server 2 transmits a search result processed in a predetermined transmission form to the terminal 1, the transmission result is transmitted through a predetermined output unit (not shown) provided in the terminal 1. The user confirms (S82).

상기 제어 서버(2)는 상기 단말기(1)로 상기 검색 결과를 전송할 때, 상기 검색 결과가 사용자의 검색 요청에 부합하는 결과인지의 여부를 묻는 질문을 수행하는 과정을 더 수행한다(S84). 따라서 상기 사용자는 출력되는 검색 결과를 확인한 후, 상기 사용자가 최초에 의도한 검색의 요청에 부합하는 검색 결과가 있을 경 우에 상기 사용자는 상기 검색 및 확인 과정을 종료하고, 상기 검색되어 단말기(1)에 출력된 결과가 사용자가 의도한 검색 요청과 부합하지 않는 경우에는 상기 단말기(1)를 통해 상기 제어 서버로 검색 결과의 부정확함을 통보하게 된다. 상기 통보는 단말기(1)의 소정의 기능키를 입력함으로써 수행된다. 상기 제어 서버(2)는 상기의 검색 결과가 부정확하다는 통보를 수신하면, 상기 이미지를 이용한 검색 요청을 상기 데이터베이스 검색 서버(3)의 미해결 질문 목록(32)에 추가, 등록할 것인지를 다시 사용자에게 문의하고(S86), 이 후 단말기(1)로부터 수신되는 신호에 대응하는 동작을 수행하게 된다.When the control server 2 transmits the search result to the terminal 1, the control server 2 further performs a process of asking a question whether the search result corresponds to a user's search request (S84). Therefore, after the user checks the output of the search result, if there is a search result corresponding to the request of the search originally intended by the user, the user ends the search and confirmation process, and the search is performed on the terminal 1. If the result displayed on the screen does not match the search request intended by the user, the terminal 1 notifies the control server of the inaccuracy of the search result. The notification is performed by entering a predetermined function key of the terminal 1. When the control server 2 receives a notification that the search result is inaccurate, the control server 2 again asks the user whether to add and register a search request using the image to the list of outstanding questions 32 of the database search server 3. Inquiry (S86), and then performs an operation corresponding to the signal received from the terminal (1).

상기와 같은 일련의 과정을 통해, 사용자는 정보를 얻고자 하는 대상물의 이미지를 소정의 카메라 등으로 획득한 후, 상기 이미지 및 상기 이미지를 기초로 하는 검색 요청을 소정의 검색 시스템으로 전송함으로써, 소정의 검색을 수행하도록 하고, 상기 검색에 대한 결과를 획득할 수 있도록 한다.
Through the above-described process, the user acquires an image of an object for which information is to be obtained by using a predetermined camera or the like, and then transmits the image and a search request based on the image to a predetermined search system. To perform a search of and to obtain a result for the search.

상기와 같은 서비스 제공 방법을 포함하는 본 발명은, 문자로 표현하기 힘든 대상물의 형상이나 사용자가 처음 보는 대상물에 대해서 디지털 카메라로 촬영된 소정의 이미지 데이터를 이용하여 검색을 수행할 수 있으므로, 문자 데이터 입력의 번거로움을 감소시킬 수 있다.According to the present invention including the service providing method as described above, the character data may be searched by using a predetermined image data photographed by a digital camera with respect to a shape of an object that is difficult to express by text or an object that the user first sees. The input hassle can be reduced.

또한, 다양한 종류의 검색을 수행하기 위한 데이터베이스를 사용자의 단말기가 아닌 유무선 통신망 상에 존재하는 서버에서 구현함으로써, 소정의 데이터베이 스 기능을 단말기 내에 구비하기 위해 감수해야하는 여러 가지 하드웨어적인 구성상의 문제점을 해결할 수 있는 장점이 있다.In addition, by implementing a database for performing various types of searches in a server existing on a wired / wireless communication network instead of a user's terminal, various hardware configuration problems that must be taken in order to have a predetermined database function in the terminal. There is an advantage that can be solved.

또한, 상기 미해결 질문 목록을 이용하여, 서버에서 수행되는 기계적인 검색 뿐만아니라, 상기 검색 서비스를 이용하는 서로 다른 사용자들 간의 지식 정보의 교환 및 공유도 가능하게 된다.In addition, by using the unresolved question list, not only a mechanical search performed on the server, but also the exchange and sharing of knowledge information between different users using the search service is possible.

Claims (9)

유무선 통신이 가능한 단말기가, 소정의 대상물이 포함되어 있는 이미지 데이터를 획득하는 단계;Obtaining, by a terminal capable of wired and wireless communication, image data including a predetermined object; 상기 이미지 데이터를 획득한 단말기가, 제어 서버에 접속하는 단계;Connecting, by the terminal acquiring the image data, to a control server; 상기 단말기가 상기 이미지 데이터를 상기 제어 서버에 등록하고, 상기 이미지를 기초로 하는 검색의 수행을 요청하는 단계;Registering, by the terminal, the image data with the control server and requesting to perform a search based on the image; 상기 제어 서버가, 다수의 데이터를 보유하고 있는 데이터베이스 검색 서버로 상기 이미지 데이터를 전송하고, 상기 단말기로부터 요청된 검색을 수행하도록 지시하는 단계;Instructing, by the control server, to transmit the image data to a database search server that holds a plurality of data, and to perform a requested search from the terminal; 상기 데이터베이스 검색 서버에서 상기 지시된 검색을 수행하고 검색 결과를 생성하는 단계;Performing the indicated search and generating a search result at the database search server; 상기 데이터베이스 검색 서버가 상기 검색 결과를 상기 제어 서버로 전송하고, 상기 제어 서버는 상기 검색 결과를 소정의 전송 형태로 가공한 후 상기 단말기로 전송하는 단계;The database search server transmitting the search result to the control server, and the control server processing the search result in a predetermined transmission form and transmitting the search result to the terminal; 를 포함하는 이미지 데이터를 이용한 검색 서비스 제공 방법.Search service providing method using the image data comprising a. 제 1항에 있어서, 상기 데이터베이스 검색 서버에서 상기 단말기로부터의 상기 검색 요청에 부합하는 검색 결과가 있으면 상기 결과 정보를 상기 단말기로 전송하도록 하고, 상기 검색 요청에 부합하는 검색 결과가 없으면 상기 단말기에 재 검색을 실행할 것인지의 여부를 문의하도록 하는 단계를 더 포함하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The method of claim 1, wherein the database search server transmits the result information to the terminal if there is a search result corresponding to the search request from the terminal. A method of providing a search service using image data, the method further comprising: inquiring whether or not to execute a search. 제 1항 및 제 2항에 있어서, 상기 단말기를 이용하여 상기 검색을 요청한 사용자가 상기 단말기에 전송된 검색 결과를 확인하였으나, 요청한 검색에 부합하는 검색 결과가 없는 경우, 상기 이미지 데이터 및 상기 검색 요청을 소정의 미해결 질문 목록에 추가하도록 하는 단계를 더 포함하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The image data and the search request according to claim 1 or 2, wherein if the user who requested the search using the terminal checks the search result sent to the terminal, but there is no search result corresponding to the requested search, the image data and the search request. The search service providing method using the image data further comprising the step of adding to the list of predetermined questions. 제 1항에 있어서, 상기 검색 결과를 상기 단말기로 전송하기 위한 상기 가공된 전송 형태는, 문자 메시지 또는 멀티미디어 메시지인 것을 특징으로 하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The method of claim 1, wherein the processed transmission form for transmitting the search result to the terminal is a text message or a multimedia message. 제 1항에 있어서, 상기 단말기로부터의 검색 요청은, 상기 이미지에 포함된 대상물을 인식하고, 상기 인식된 대상물에 관련된 각종 문서 정보 또는 멀티미디어 정보를 검색하도록 하는 것을 특징으로 하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The search service of claim 1, wherein the search request from the terminal recognizes an object included in the image and searches various document information or multimedia information related to the recognized object. How to Provide. 제 1항에 있어서, 상기 이미지 데이터는, 소정의 유무선 통신망 내에서 상기 단말기로 다운로드 되거나, 디지털 이미지 데이터를 생성할 수 있는 소정의 외부기 기에 의해 생성되거나, 상기 단말기에 탑재된 디지털 카메라에 의해 촬영된 이미지 데이터 중의 하나인 것을 특징으로 하는 이미지 데이터를 이용한 검색 서비스 방법.The image data of claim 1, wherein the image data is downloaded to the terminal within a predetermined wired / wireless communication network, generated by a predetermined external device capable of generating digital image data, or photographed by a digital camera mounted on the terminal. Search service method using the image data, characterized in that one of the image data. 유무선 통신 수단에 탑재된 디지털 카메라로 소정의 대상물을 촬영하여 이미지 데이터를 생성하는 단계;Photographing a predetermined object with a digital camera mounted on the wired / wireless communication means to generate image data; 상기 촬영된 이미지 데이터를 소정의 통신망을 통해 제어 서버에 등록하고, 상기 이미지를 기초로 하는 소정의 검색을 요청하는 단계;Registering the photographed image data with a control server through a predetermined communication network, and requesting a predetermined search based on the image; 상기 제어 서버가, 다수의 데이터를 보유하고 있는 데이터베이스 검색 서버로 상기 이미지 데이터를 전송하고, 상기 요청된 검색을 수행하도록 지시하는 단계;Instructing, by the control server, to transmit the image data to a database search server that holds a plurality of data and to perform the requested search; 상기 데이터베이스 검색 서버에서 상기 지시된 검색을 수행하고 검색 결과를 생성하는 단계;Performing the indicated search and generating a search result at the database search server; 상기 데이터베이스 검색 서버가 상기 검색 결과를 상기 제어 서버로 전송하고, 상기 제어 서버는 상기 검색 결과를 소정의 전송 형태로 가공한 후 상기 단말기로 전송하는 단계;The database search server transmitting the search result to the control server, and the control server processing the search result in a predetermined transmission form and transmitting the search result to the terminal; 상기 이미지 데이터를 이용한 검색을 요청한 사용자가 상기 검색 결과를 확인한 후의 상기 사용자의 판단 및 소정 신호 입력에 기초하여, 상기 단말기에 전송된 검색 결과가 상기 검색 요청에 부합하는 결과이면 상기 검색을 종료하고, 상기 검색 결과가 검색 요청에 부합하는 결과가 아니면 상기 이미지 데이터 및 검색 요 청을 상기 데이터베이스 검색 서버에 구비된 미해결 질문 목록에 추가하는 단계;를 포함하는 이미지 데이터를 이용한 검색 서비스 제공 방법.On the basis of the user's judgment and input of a predetermined signal after the user requesting the search using the image data confirms the search result, if the search result transmitted to the terminal is a result corresponding to the search request, the search is terminated. And if the search result is not a result corresponding to the search request, adding the image data and the search request to an unresolved question list provided in the database search server. 제 6항에 있어서, 상기 검색 결과를 상기 단말기로 전송하기 위한 상기 가공된 전송 형태는, 문자 메시지 또는 멀티미디어 메시지인 것을 특징으로 하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The method of claim 6, wherein the processed transmission form for transmitting the search result to the terminal is a text message or a multimedia message. 제 6항에 있어서, 상기 단말기로부터의 검색 요청은, 상기 디지털 카메라에 의해 촬영된 대상물을 인식하고, 상기 인식된 대상물에 관련된 각종 문서 정보 또는 상기 인식된 대상물에 관련된 각종 멀티미디어 정보를 검색하도록 하는 것을 특징으로 하는 이미지 데이터를 이용한 검색 서비스 제공 방법.The method of claim 6, wherein the search request from the terminal is further configured to recognize an object photographed by the digital camera and to search for various document information related to the recognized object or various multimedia information related to the recognized object. Search service providing method using the image data characterized in that.
KR1020040085611A 2004-10-26 2004-10-26 Method for search service using image-data KR20060036592A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040085611A KR20060036592A (en) 2004-10-26 2004-10-26 Method for search service using image-data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040085611A KR20060036592A (en) 2004-10-26 2004-10-26 Method for search service using image-data

Publications (1)

Publication Number Publication Date
KR20060036592A true KR20060036592A (en) 2006-05-02

Family

ID=37144711

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040085611A KR20060036592A (en) 2004-10-26 2004-10-26 Method for search service using image-data

Country Status (1)

Country Link
KR (1) KR20060036592A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100839623B1 (en) * 2007-10-12 2008-06-19 유니챌(주) Digital information offering system about word, symbol, image of physical document and method for control thereof
KR20190013071A (en) * 2017-07-31 2019-02-11 코닉오토메이션 주식회사 Item registry system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100839623B1 (en) * 2007-10-12 2008-06-19 유니챌(주) Digital information offering system about word, symbol, image of physical document and method for control thereof
KR20190013071A (en) * 2017-07-31 2019-02-11 코닉오토메이션 주식회사 Item registry system

Similar Documents

Publication Publication Date Title
KR100329378B1 (en) Information processing device that advises information
US20150081278A1 (en) Electronic device, character conversion method, and storage medium
KR20110133582A (en) Communication system, communication terminal, server, data storing method and recording medium
CN112860642A (en) Court trial data processing method, server and terminal
JP2007018166A (en) Information search device, information search system, information search method, and information search program
EP1422958A1 (en) Permission token management system, permission token management method, program and recording medium
US11556604B2 (en) Electronic device and search keyword processing method thereof
WO2008066324A1 (en) User font generating apparatus, user font generating method and user font service providing method
KR20060036592A (en) Method for search service using image-data
KR100861133B1 (en) System for providing offline object information by using mobile device and method thereof
KR20110017171A (en) System, server, mobile terminal and method for providing of image searching service using search query
KR100625656B1 (en) System and Method for Resource Sharing
JP2006254014A (en) Dictionary retrieving system
US20190278798A1 (en) Terminal device, method, and information processing system
KR20200098933A (en) Pen type text translating apparatus and method thereof
JP7251102B2 (en) Display device, reader, information reading system, information reading method, and program
KR101659886B1 (en) business card ordering system and method
KR20120003597U (en) Tour Guide Service System
CN110874444B (en) URL conversion model building method and device and electronic equipment
JP5223328B2 (en) Information management apparatus, information management method, and program thereof
KR100712850B1 (en) Mobile communication terminal for setting font and its operating method
CN114219443A (en) Document data processing method, device and equipment
JP2002132795A (en) Method and device for storing information, method and device for calling information
KR100594432B1 (en) A mobile phone for browsing dictionary data and an operating method thereof
JP3994962B2 (en) Image data storage system or portable terminal device

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid