KR101520389B1 - Method for acquiring search information, recording medium storing program to implement the method, and mobile phone - Google Patents

Method for acquiring search information, recording medium storing program to implement the method, and mobile phone Download PDF

Info

Publication number
KR101520389B1
KR101520389B1 KR1020140003614A KR20140003614A KR101520389B1 KR 101520389 B1 KR101520389 B1 KR 101520389B1 KR 1020140003614 A KR1020140003614 A KR 1020140003614A KR 20140003614 A KR20140003614 A KR 20140003614A KR 101520389 B1 KR101520389 B1 KR 101520389B1
Authority
KR
South Korea
Prior art keywords
characters
portable terminal
displaying
display unit
unit
Prior art date
Application number
KR1020140003614A
Other languages
Korean (ko)
Inventor
윤창수
Original Assignee
윤창수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 윤창수 filed Critical 윤창수
Priority to KR1020140003614A priority Critical patent/KR101520389B1/en
Application granted granted Critical
Publication of KR101520389B1 publication Critical patent/KR101520389B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

The present invention relates to a method for acquiring search information capable of easily and quickly acquiring the search information with a simple method, a recording medium storing a program to execute the same, and a portable terminal. The present invention provides the method for acquiring the search information using the portable terminal which includes the steps of: extracting a character from image data acquired by using a camera part of the portable terminal; transmitting the information about the extracted character to a search server; receiving the search information about the extracted character from the search server; and displaying the received search information on a display unit of the portable terminal, the recording medium storing the program to execute the same, and the portable terminal.

Description

검색정보 획득방법, 이를 실행하기 위한 프로그램을 저장한 기록매체 및 휴대용 단말기{Method for acquiring search information, recording medium storing program to implement the method, and mobile phone}[0001] The present invention relates to a method for acquiring search information, a recording medium storing a program for executing the method, and a portable terminal,

본 발명은 검색정보 획득방법, 이를 실행하기 위한 프로그램을 저장한 기록매체 및 휴대용 단말기에 관한 것으로서, 더 상세하게는 간단한 방법으로 용이하게 검색정보를 신속하게 획득할 수 있는 검색정보 획득방법, 이를 실행하기 위한 프로그램을 저장한 기록매체 및 휴대용 단말기에 관한 것이다.The present invention relates to a search information obtaining method, a recording medium storing a program for executing the search information, and a portable terminal, and more particularly, to a search information obtaining method capable of easily obtaining search information with a simple method, The present invention relates to a recording medium and a portable terminal in which a program for storing the program is stored.

최근 휴대용 단말기의 소지가 일반화되었으며, 이에 따라 일상생활 중 컴퓨터가 아닌 휴대용 단말기를 이용해 정보를 검색하게 되었다. 휴대용 단말기를 이용한 정보 검색을 위해서는 휴대용 단말기의 인터넷 브라우저를 실행하고, 검색사이트에 접속하며, 이후 검색할 내용을 입력하는 검색창에 자판 등을 이용해 문자를 입력해야만 한다.Recently, the possession of a portable terminal has been generalized, and accordingly, information is retrieved using a portable terminal rather than a computer during daily life. In order to search for information using a portable terminal, a user must input characters using a keyboard or the like in a search window for executing an Internet browser of a portable terminal, accessing a search site, and inputting contents to be searched for later.

그러나 컴퓨터 등이 비치된 실내가 아닌 실외에서 휴대용 단말기를 이용해 이와 같은 절차를 거쳐 정보를 검색하는 것은 용이하지 않다는 문제점이 있었다.However, there is a problem in that it is not easy to retrieve information through such a procedure by using a portable terminal outside the room where the computer and the like are provided.

본 발명은 상기와 같은 문제점을 포함하여 여러 문제점들을 해결하기 위한 것으로서, 간단한 방법으로 용이하게 검색정보를 신속하게 획득할 수 있는 검색정보 획득방법, 이를 실행하기 위한 프로그램을 저장한 기록매체 및 휴대용 단말기를 제공하는 것을 목적으로 한다. 그러나 이러한 과제는 예시적인 것으로, 이에 의해 본 발명의 범위가 한정되는 것은 아니다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems and it is an object of the present invention to provide a search information acquisition method capable of easily acquiring search information in a simple manner, a recording medium storing a program for executing the search information, And to provide the above-mentioned objects. However, these problems are exemplary and do not limit the scope of the present invention.

본 발명의 일 관점에 따르면, 휴대용 단말기의 카메라부를 이용하여 획득된 이미지데이터에서 문자를 추출하는 단계와, 추출된 문자에 대한 정보를 검색서버로 전송하는 단계와, 검색서버로부터 추출된 문자에 대한 검색정보를 수신하는 단계와, 휴대용 단말기의 디스플레이부에 수신된 검색정보를 디스플레이하는 단계를 포함하는, 휴대용 단말기를 이용한 검색정보 획득방법이 제공된다.According to an aspect of the present invention, there is provided a method for searching for a character, the method comprising: extracting a character from image data acquired using a camera unit of a portable terminal; transmitting information about the extracted character to a search server; There is provided a method for acquiring search information using a mobile terminal, the method comprising: receiving search information; and displaying search information received on a display unit of the mobile terminal.

이때, 추출된 문자를 그루핑(grouping)하여 휴대용 단말기의 디스플레이부에 복수개의 그루핑된 영역들을 디스플레이하는 단계를 더 포함하고, 상기 검색서버로 전송하는 단계는, 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자에 대한 정보를 검색서버로 전송하는 단계일 수 있다.The method may further include grouping the extracted characters and displaying a plurality of grouped areas on a display unit of the portable terminal, wherein the step of transmitting to the search server comprises the steps of: And transmitting information on the character to the search server.

상기 그루핑된 영역들을 디스플레이하는 단계는, 획득된 이미지데이터를 이용하여 휴대용 단말기의 디스플레이부에 이미지를 디스플레이하며 이미지 상에 복수개의 그루핑된 영역들을 표시하는 단계일 수 있다. 나아가, 상기 그루핑된 영역들을 디스플레이하는 단계는, 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 그루핑된 영역들을 표시하는 단계일 수 있다.The step of displaying the grouped areas may include displaying an image on a display unit of the portable terminal using the obtained image data and displaying a plurality of grouped areas on the image. Further, the step of displaying the grouped areas may be a step of displaying the grouped areas so that each of the grouped areas may be enlarged or reduced by the user.

상기 그루핑된 영역들을 디스플레이하는 단계는, 휴대용 단말기의 디스플레이부에 추출된 문자들을 포함하는 복수개의 구문들을 디스플레이하는 단계일 수 있다. 이 경우, 휴대용 단말기의 디스플레이부에 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자를 편집될 수 있도록 디스플레이하는 단계를 더 포함하고, 상기 검색서버로 전송하는 단계는, 복수개의 그루핑된 영역들 중 선택된 영역 내의 편집된 상태의 문자에 대한 정보를 검색서버로 전송하는 단계일 수 있다.The step of displaying the grouped areas may include displaying a plurality of phrases including characters extracted on a display unit of the portable terminal. In this case, the method may further comprise displaying on the display unit of the portable terminal a character in a selected one of a plurality of grouped areas to be editable, wherein the transmitting to the search server comprises selecting one of the plurality of grouped areas And transmitting the information on the edited character in the area to the search server.

상기 그루핑된 영역들을 디스플레이하는 단계는, 추출된 문자 사이의 간격 정보를 획득하는 단계와, 추출된 문자 사이의 간격 중 최소간격을 확정하는 단계와, 추출된 문자 사이의 간격 중 최소간격의 사전설정된 배수 이상의 간격이 존재할 경우 최소간격의 사전설정된 배수 이상의 간격 전후의 문자를 상이한 영역으로 그루핑하는 단계를 포함할 수 있다.Wherein the step of displaying the grouped regions comprises the steps of: obtaining interval information between extracted characters; determining a minimum interval between the extracted characters; determining a minimum interval among the intervals between the extracted characters And grouping the characters before and after the interval by a predetermined multiple of the minimum interval into different areas when there is an interval of more than a multiple.

본 발명의 다른 일 관점에 따르면, 휴대용 단말기의 카메라부를 이용하여 획득된 이미지데이터를 이용하여 휴대용 단말기의 디스플레이부에 이미지를 디스플레이하는 단계와, 이미지 중 사용자에 의해 선택된 영역 내에서 문자를 추출하는 단계와, 추출된 문자에 대한 정보를 검색서버로 전송하는 단계와, 검색서버로부터 추출된 문자에 대한 검색정보를 수신하는 단계와, 휴대용 단말기의 디스플레이부에 수신된 검색정보를 디스플레이하는 단계를 포함하는, 휴대용 단말기를 이용한 검색정보 획득방법이 제공된다.According to another aspect of the present invention, there is provided a method for displaying an image on a display unit of a portable terminal using image data obtained using a camera unit of a portable terminal, A step of transmitting information on the extracted characters to a search server, a step of receiving search information on characters extracted from a search server, and a step of displaying search information received on a display unit of the portable terminal And a method of acquiring search information using a portable terminal.

상기 문자를 추출하는 단계는, 획득된 이미지데이터를 이용하여 간판 내 문자를 추출하는 단계일 수 있다.The step of extracting the character may be a step of extracting characters in the sign by using the obtained image data.

본 발명의 또 다른 일 관점에 따르면, 상기와 같은 방법들 중 적어도 어느 하나를 실행시키기 위한 프로그램을 저장한 기록매체가 제공된다.According to another aspect of the present invention, there is provided a recording medium storing a program for executing at least any one of the above methods.

본 발명의 또 다른 일 관점에 따르면, 이미지데이터를 획득할 수 있는 카메라부와, 이미지데이터에서 문자를 추출할 수 있는 문자추출부와, 추출된 문자에 대한 정보를 검색서버로 전송할 수 있는 전송부와, 검색서버로부터 추출된 문자에 대한 검색정보를 수신할 수 있는 수신부와, 수신된 검색정보를 디스플레이할 수 있는 디스플레이부를 구비하는, 휴대용 단말기가 제공된다.According to another aspect of the present invention, there is provided an image processing apparatus including a camera unit capable of acquiring image data, a character extracting unit capable of extracting characters from image data, a transmission unit capable of transmitting information on extracted characters to a search server, A receiving unit capable of receiving search information on characters extracted from a search server, and a display unit capable of displaying the received search information.

상기 디스플레이부는 상기 문자추출부가 추출한 문자를 그루핑(grouping)하여 복수개의 그루핑된 영역들을 디스플레이할 수 있고, 상기 전송부는 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자에 대한 정보를 검색서버로 전송할 수 있다.The display unit may display a plurality of grouped regions by grouping the extracted characters, and the transmitting unit may transmit information on the characters in the selected region among the plurality of grouped regions to the search server .

상기 디스플레이부는 획득된 이미지데이터를 이용하여 이미지를 디스플레이하되 이미지 상에 복수개의 그루핑된 영역들을 표시할 수 있다. 나아가, 상기 디스플레이부는 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 그루핑된 영역들을 표시할 수 있다.The display unit may display an image using the acquired image data, but may display a plurality of grouped areas on the image. Furthermore, the display unit may display the grouped regions so that each of the grouped regions may be enlarged or reduced by a user.

상기 디스플레이부는 추출된 문자들을 포함하는 복수개의 구문들을 디스플레이할 수 있다. 나아가, 상기 디스플레이부는 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자를 편집될 수 있도록 디스플레이할 수 있다.The display unit may display a plurality of phrases including extracted characters. Furthermore, the display unit may display characters in a selected one of the plurality of grouped areas to be editable.

상기 디스플레이부는 상기 카메라부가 획득한 이미지데이터를 이용하여 이미지를 디스플레이할 수 있고, 상기 문자추출부는 이미지 중 사용자에 의해 선택된 영역 내에서 문자를 추출할 수 있다.The display unit may display an image using image data acquired by the camera unit, and the character extracting unit may extract a character in an area selected by a user from the image.

상기 문자추출부는, 상기 카메라부가 획득한 이미지데이터를 이용하여 간판 내 문자를 추출할 수 있다.The character extracting unit may extract the characters in the sign by using the image data acquired by the camera unit.

상기한 바와 같이 이루어진 본 발명의 일 실시예에 따르면, 간단한 방법으로 용이하게 검색정보를 신속하게 획득할 수 있는 검색정보 획득방법, 이를 실행하기 위한 프로그램을 저장한 기록매체 및 휴대용 단말기를 구현할 수 있다. 물론 이러한 효과에 의해 본 발명의 범위가 한정되는 것은 아니다.According to an embodiment of the present invention as described above, it is possible to implement a retrieval information acquisition method, a recording medium storing a program for executing the retrieval information, and a portable terminal that can easily acquire retrieval information with a simple method . Of course, the scope of the present invention is not limited by these effects.

도 1은 본 발명의 일 실시예에 따른 휴대용 단말기를 이용할 시의 시스템을 개략적으로 도시하는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 휴대용 단말기를 개략적으로 도시하는 블록도이다.
도 3은 도 2의 휴대용 단말기의 카메라부를 이용해 획득한 이미지데이터에 따른 이미지를 개략적으로 도시하는 개념도이다.
도 4는 도 2의 휴대용 단말기의 디스플레이부에 디스플레이되는 이미지를 개략적으로 도시하는 개념도이다.
도 5는 본 발명의 일 실시예에 따른 검색정보 획득방법을 개략적으로 도시하는 플로우챠트이다.
도 6은 본 발명의 다른 일 실시예에 따른 검색정보 획득방법을 개략적으로 도시하는 플로우챠트이다.1 is a block diagram schematically showing a system for using a portable terminal according to an embodiment of the present invention.
2 is a block diagram schematically illustrating a portable terminal according to an embodiment of the present invention.
3 is a conceptual diagram schematically showing an image according to image data acquired using the camera unit of the portable terminal of FIG.
FIG. 4 is a conceptual view schematically showing an image displayed on the display unit of the portable terminal of FIG. 2. FIG.
5 is a flow chart schematically showing a retrieval information obtaining method according to an embodiment of the present invention.
6 is a flowchart schematically showing a retrieval information acquiring method according to another embodiment of the present invention.

이하, 첨부된 도면들을 참조하여 본 발명의 실시예를 상세히 설명하면 다음과 같다. 그러나 본 발명은 이하에서 개시되는 실시예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있는 것으로, 이하의 실시예는 본 발명의 개시가 완전하도록 하며, 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 또한 설명의 편의를 위하여 도면에서는 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도시된 바에 한정되지 않는다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. It should be understood, however, that the invention is not limited to the disclosed embodiments, but may be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, Is provided to fully inform the user. Also, for convenience of explanation, the components may be exaggerated or reduced in size. For example, the size and thickness of each component shown in the drawings are arbitrarily shown for convenience of explanation, and thus the present invention is not necessarily limited to those shown in the drawings.

도 1은 본 발명의 일 실시예에 따른 휴대용 단말기(110)를 이용할 시의 시스템을 개략적으로 도시하는 블록도이다.1 is a block diagram schematically showing a system for using the portable terminal 110 according to an embodiment of the present invention.

휴대용 단말기(110)는 스마트폰 및/또는 스마트패드 등을 포함할 수 있다. 이러한 휴대용 단말기(110)는 게이트웨이(130)를 통해 웹 서버(160), 왑(WAP, Wireless Application Protocol) 서버 또는 다른 부가가치서비스 서버(도시하지 않음)에 접속할 수 있는 웹 브라우저 또는 왑 브라우저를 탑재하고 있으며, 무선 인터넷을 사용할 수 있는 인터페이스를 갖추고 있다.The portable terminal 110 may include a smart phone and / or a smart pad. The portable terminal 110 is equipped with a web browser or a WAP browser capable of accessing a web server 160, a WAP (Wireless Application Protocol) server or another value-added service server (not shown) via the gateway 130 And has an interface for wireless Internet access.

이동통신망(120)은 기지국 전송기(BST), 기지국 제어기(BSC), 교환기(MSC), 홈 위치 등록기(HLR) 등(도시되지 않음)을 포함하며, 이동통신망(120)은 휴대용 단말기(110)와 게이트웨이(130)를 무선 채널 상에서 연결해 준다.The mobile communication network 120 includes a base station transmitter BST, a BSC, an MSC, a home location register (HLR) And gateway 130 on a wireless channel.

게이트웨이(130)는 일반적으로 통신을 하는데 있어서 서로 다른 두 개의 프로토콜이 정보를 교환하여 전송할 수 있도록 중간에서 변환해 주는 기능 혹은 다른 서비스나 다른 통신망에 접속해 준다. 즉, 다른 통신망에 데이터를 보내거나 다른 망으로부터 데이터를 받아들이는 통신 기능을 갖는 컴퓨터처럼 한 시스템에서 다른 시스템과 정보를 교환하는 출입구 역할을 담당한다.The gateway 130 generally connects to another service or other communication network to convert the two protocols so that two different protocols can exchange information for transmission. In other words, it acts as an access point for exchanging information with other systems in one system, such as a computer having a communication function to send data to or receive data from another network.

게이트웨이(130)는 이동통신망(120)과 인터넷망(140)을 연결시켜 주며, 휴대용 단말기(110)로부터 전송되는 웹 접속 요청 등을 인터넷상의 TCP/IP에 맞는 웹 접속 요청 메시지 등으로 변환하여 인터넷망을 통해 웹 서버(160)에 전송한다. 이러한 게이트웨이(130)는 이동통신 회사에서 브라우저 상에서 무선 인터넷을 서비스하기 위한 왑(WAP) 게이트웨이를 포함한다.The gateway 130 connects the mobile communication network 120 and the Internet network 140 and converts web access requests transmitted from the portable terminal 110 into Web access request messages conforming to TCP / IP on the Internet, To the web server 160 through the network. The gateway 130 includes a WAP gateway for serving wireless Internet on a browser in a mobile communication company.

물론 휴대용 단말기(110)는 이동통신망(120)을 거치지 않고 와이파이(wifi) 등을 통해 인터넷망(140)에 직접 연결될 수도 있다.Of course, the portable terminal 110 may be directly connected to the Internet network 140 via a wifi or the like without going through the mobile communication network 120.

웹 서버(160)는 게이트웨이(130)로부터 전송된 웹 접속 요청 메시지에 따라 해당 웹 사이트 페이지를 게이트웨이(130)를 통해 휴대용 단말기(110)에 전송한다. 여기서 웹 서버(160)는 검색서버가 될 수 있는데, 예컨대 검색정보를 제공할 수 있는 Daum, Naver 및/또는 Google 등의 서버일 수 있다.The web server 160 transmits the web site page to the portable terminal 110 through the gateway 130 according to the web access request message transmitted from the gateway 130. The web server 160 may be a search server, e.g., a server such as Daum, Naver, and / or Google that can provide search information.

도 2는 본 발명의 일 실시예에 따른 휴대용 단말기(110)를 개략적으로 도시하는 블록도이다. 본 실시예에 따른 휴대용 단말기(110)는, 무선통신부(111), 제어부(112), 카메라부(113), 조작부(114), 문자추출부(115), 디스플레이부(116), 저장부(117) 및/또는 전원공급부(118) 등을 구비한다. 물론 이 외에도 필요에 따라 음향출력부 등을 더 구비할 수도 있다.2 is a block diagram schematically illustrating a portable terminal 110 according to an embodiment of the present invention. The portable terminal 110 according to the present embodiment includes a wireless communication unit 111, a control unit 112, a camera unit 113, an operation unit 114, a character extraction unit 115, a display unit 116, 117 and / or a power supply 118 and the like. Of course, an acoustic output unit or the like may be further provided if necessary.

무선통신부(111)는 이동통신망을 통해 무선 신호를 송수신하는 이동통신 모듈 및 무선 인터넷 접속을 위한 무선 인터넷 모듈을 포함할 수 있다. 무선통신부(111)는 추출된 문자에 대한 정보를 검색서버인 웹 서버(160)로 전송하고, 검색서버인 웹 서버(160)로부터 추출된 문자에 대한 검색정보를 수신할 수 있다. 이러한 무선통신부(111)는 전송부와 수신부를 포함하거나, 전송부와 수신부가 일체화된 것일 수도 있다.The wireless communication unit 111 may include a mobile communication module for transmitting and receiving a wireless signal through a mobile communication network and a wireless Internet module for wireless Internet access. The wireless communication unit 111 may transmit information on the extracted characters to the web server 160 as a search server and receive search information on characters extracted from the web server 160 as a search server. The wireless communication unit 111 may include a transmitting unit and a receiving unit, or the transmitting unit and the receiving unit may be integrated.

카메라부(113)는 이미지센서를 포함하여, 정지영상 또는 동영상 등과 같은 이미지에 대한 데이터인 이미지데이터를 획득할 수 있다. 이러한 카메라부(113)가 획득한 이미지데이터로부터의 이미지는 디스플레이부(116)에 디스플레이될 수 있다.The camera unit 113 may acquire image data including image data such as a still image or a moving image, including an image sensor. The image from the image data acquired by the camera unit 113 can be displayed on the display unit 116. [

조작부(114)는 사용자가 휴대용 단말기(110)의 동작을 제어할 수 있도록 하는 것으로, 키패드, 돔 스위치, 터치 패드 등을 포함할 수 있다. 터치 패드의 경우에는 디스플레이부(116)와 일체화된 터치스크린일 수도 있다.The operation unit 114 allows the user to control the operation of the portable terminal 110 and may include a keypad, a dome switch, a touch pad, and the like. Or a touch screen integrated with the display unit 116 in the case of a touch pad.

문자추출부(115)는 카메라부(113)가 획득한 이미지데이터로부터의 이미지 중에서의 문자를 추출할 수 있다. 이러한 문자추출부(115)는 통상적인 OCR(optical The character extracting unit 115 can extract characters in the image from the image data acquired by the camera unit 113. [ The character extracting unit 115 extracts character data from a conventional OCR (optical

원본 영상 이미지 중 선택된 문자 영역에서 문자를 추출한다. 이때, 문자추출부(115)는 통상적인 OCR 프로그램과 유사한 방식으로 문자를 추출할 수 있다. 예컨대 문자추출부(115)는 이미지의 밝기 또는 콘트라스트 등을 조절하여 윤곽을 선명하게 처리하는 전처리수행모듈과, 문자 정보를 추출하는 문자추출모듈과, 문자 정보 중 문자 코드만을 추출하는 후처리수행모듈을 포함할 수 있다.The character is extracted from the selected character area of the original image. At this time, the character extracting unit 115 can extract characters in a manner similar to a conventional OCR program. For example, the character extracting unit 115 may include a preprocessing module for performing sharpness processing of the contour by adjusting the brightness or contrast of the image, a character extracting module for extracting character information, a postprocessing module . ≪ / RTI >

제어부(112)는 휴대용 단말기(110)의 전반적인 동작을 제어하며, 예를 들어, 음성통화, 데이터통신, 화상통화 등을 위한 관련 제어 및 처리를 수행할 수 있다. 또한 제어부(112)는 이미지에서 문자를 추출하도록 하고, 추출된 문자 정보를 검색서버와 같은 웹 서버(160)로 전송하도록 관련 제어 및 처리를 수행할 수 있다. 또한, 제어부(112)는 이미지에서 문자 특징을 추출하도록 하고, 추출된 문자 특징 정보를 검색버서와 같은 웹 서버(160)로 전송하도록 제어할 수 있다.The controller 112 controls the overall operation of the portable terminal 110 and can perform related control and processing for voice communication, data communication, video communication, and the like, for example. In addition, the control unit 112 may extract characters from an image and perform related control and processing to transmit the extracted character information to a web server 160 such as a search server. In addition, the control unit 112 may extract character characteristics from the image and control the extracted character characteristic information to be transmitted to the web server 160 such as a search bar.

디스플레이부(116)는 휴대용 단말기(110)에서 처리되는 정보를 디스플레이할 수 있다. 예컨대 휴대용 단말기(110)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 디스플레이한다. 휴대용 단말기(110)가 화상 통화 모드 또는 촬영 모드인 경우, 촬영되거나 수신된 영상을 각각 또는 동시에 디스플레이할 수 있다. 또한 디스플레이부(116)는 검색서버와 같은 웹 서버(160)로부터 수신한 검색정보를 디스플레이할 수 있다.The display unit 116 may display information processed in the portable terminal 110. [ For example, when the portable terminal 110 is in the call mode, a UI (User Interface) or a GUI (Graphic User Interface) associated with a call is displayed. When the portable terminal 110 is in the video call mode or the photographing mode, the photographed or received image can be displayed individually or simultaneously. Also, the display unit 116 may display search information received from the web server 160 such as a search server.

이와 같은 디스플레이부(116)는 액정 디스플레이, 유기 발광 디스플레이 등을 포함할 수 있다. 그리고 전술한 바와 같이 터치 패드와 같은 조작부(114)와 일체화된 터치스크린일 수도 있다.The display unit 116 may include a liquid crystal display, an organic light emitting display, and the like. And may be a touch screen integrated with the operation unit 114 such as a touch pad as described above.

저장부(117)는 제어부(112)의 처리 및 제어를 위한 프로그램이 저장될 수 있고, 입력되거나 출력되는 데이터들을 임시로 저장할 수 있다. 전원공급부(118)는 제어부(112)의 제어에 의해 내외부로부터 전원을 공급받아, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다.The storage unit 117 may store a program for processing and control of the controller 112, and may temporarily store input or output data. The power supply unit 118 is supplied with power from the inside and the outside under the control of the control unit 112 and can supply power necessary for operation of the respective components.

이하에서는 도 3 및 도 4를 참조하여 도 2의 휴대용 단말기(110)의 동작에 대해 상세히 설명한다.Hereinafter, the operation of the portable terminal 110 of FIG. 2 will be described in detail with reference to FIGS. 3 and 4. FIG.

도 3은 도 2의 휴대용 단말기(110)의 카메라부(113)를 이용해 획득한 이미지데이터에 따른 이미지를 개략적으로 도시하는 개념도이다. 도 3에 도시된 것과 같이 사용자의 조작에 의해 휴대용 단말기(110)의 카메라부(113)는 복수개의 간판들이 걸린 건물에 대한 이미지데이터를 획득할 수 있다. 카메라부(113)가 이와 같은 이미지에 대한 이미지데이터를 획득하면 문자추출부(115)는 이미지데이터로부터의 이미지 내의 문자들을 추출하며, 디스플레이부(116)는 도 4에 도시된 것과 같이 문자추출부(115)가 추출한 문자들을 포함하는 복수개의 구문들을 디스플레이한다.3 is a conceptual diagram schematically showing an image according to image data obtained by using the camera unit 113 of the portable terminal 110 of FIG. As shown in FIG. 3, the camera unit 113 of the portable terminal 110 can acquire image data of a building in which a plurality of signboards are hung by the user's operation. 4, the character extracting unit 115 extracts characters in the image from the image data, and the character extracting unit 115 extracts characters in the image from the character extracting unit 115, And displays a plurality of phrases including the extracted characters.

도 3에서는 카메라부(113)가 획득한 이미지데이터로부터의 이미지에 "김밥나라"라는 문자들(T1), "정관장"이라는 문자들(T2), "도레미 음악학원"이라는 문자들(T3) 및 "PRO WORLDCUP"이라는 문자들(T4)이 포함되어 있는 것으로 도시하고 있는바, 문자추출부(115)가 이들 문자들을 추출함에 따라 디스플레이부(116)는 도 4에 도시된 것과 같이 네 개의 구문들을 디스플레이할 수 있다. 이와 같이 디스플레이부(116)는 문자추출부(115)가 추출한 문자를 그루핑(grouping)하여 복수개의 그루핑된 영역들을 디스플레이할 수 있다. 물론 문자추출부(115)가 추출한 문자를 그루핑하는 것은 디스플레이부(116)가 하는 것은 아니며, 제어부(112) 또는 제어부(112)에 의한 제어에 따른 데이터처리부(미도시)가 진행할 수 있다.In Fig. 3, the characters T1 of "Kimbara Nara", the characters T2 of "Coronado", the letters T3 of "Doremi music school" and the letters " As shown in FIG. 4, the character extracting unit 115 extracts these characters, the display unit 116 displays the four phrases " PRO WORLDCUP " Can be displayed. In this way, the display unit 116 can display a plurality of grouped regions by grouping the characters extracted by the character extraction unit 115. Of course, the display unit 116 does not group characters extracted by the character extracting unit 115, and a data processing unit (not shown) controlled by the control unit 112 or the control unit 112 can proceed.

문자추출부(115)가 추출한 문자를 그루핑하는 것은 다양한 방법을 통해 이루어질 수 있다. 예컨대 추출된 문자들 사이의 간격 정보를 획득하고, 추출된 문자들 사이의 간격 중 최소간격을 확정할 수 있다. 그 후, 추출된 문자들 사이의 간격 중 최소간격의 사전설정도니 배수 이상의 간격이 존재할 경우, 최소간격의 사전설정된 배수 이상의 간격 전후의 문자를 상이한 영역으로 그루핑할 수 있다. 이는 통상적으로 관련된 문자들의 경우 가까이 위치하고, 관련되지 않은 문자들 사이에는 상당한 거리가 존재하기 때문이다.The grouping of the extracted characters by the character extracting unit 115 can be performed by various methods. For example, it is possible to acquire the interval information between the extracted characters and determine the minimum interval between the extracted characters. Thereafter, if there is an interval equal to or greater than a preset multiple of the minimum interval among the intervals between extracted characters, characters before and after the interval of a predetermined multiple of the minimum interval can be grouped into different areas. This is typically the case for closely related characters, and there is a significant distance between unrelated characters.

예컨대 도 3에 도시된 것과 같이 복수개의 간판들을 포함하는 건물에 대한 이미지의 경우, 각 간판 내의 문자들 사이의 간격은 크지 않지만 간판과 간판 사이의 간격은 상대적으로 매우 크다. 따라서 예컨대 문자들 사이의 최소간격의 3배 이상의 간격이 문자들 사이에 존재할 경우 상이한 영역으로 그루핑하는 것으로 설정한 상태에서 도 3에 도시된 것과 같은 복수개의 간판들을 포함하는 건물에 대한 이미지에 대한 이미지데이터를 카메라부(113)가 획득하였다면, 김밥나라"라는 문자들(T1), "정관장"이라는 문자들(T2), "도레미 음악학원"이라는 문자들(T3) 및 "PRO WORLDCUP"이라는 문자들(T4)을 상이한 영역으로 그루핑할 수 있다. 여기서 최소간격의 몇 배가 될 경우 상이한 영역으로 그루핑할 것인지는 사용자에 의해 사전설정되거나 변경되도록 할 수 있다.For example, in the case of an image for a building including a plurality of signboards as shown in FIG. 3, the spacing between characters in each signboard is not large, but the spacing between signboards and signs is relatively large. Thus, for example, if an interval of at least three times the minimum spacing between characters is set to group into different areas when there is a space between characters, an image for an image for a building including a plurality of signboards as shown in Fig. 3 Characters Tl, " Coronary Schools, " T2, "Doremi Music Schools, " T3, and" PRO WORLDCUP ", if the camera 113 has acquired the data, (T4) may be grouped into different regions. Here, when the number of times is the minimum interval, it is possible to preset or change by the user whether grouping into different regions.

도 4에 도시된 것과 같이 문자추출부(115)가 추출한 문자들을 포함하는 복수개의 구문들을 디스플레이한 상태에서 사용자가 터치스크린 기능 등을 이용해서 일 구문을 선택하면, 무선통신부(111) 또는 무선통신부(111)의 전송부는 사용자에 의해 선택된 구문 내의 문자에 대한 정보를 검색서버와 같은 웹 서버(160)로 전송하며 검색정보를 요청하고, 무선통신부(111) 또는 무선통신부(111)의 수신부는 검색서버와 같은 웹 서버(160)로부터 전송된 문자에 대한 검색정보를 수신하며, 디스플레이부(116)는 그와 같은 수신된 검색정보를 디스플레이할 수 있다.4, when a user selects a phrase using a touch screen function or the like in a state in which a plurality of phrases including characters extracted by the character extraction unit 115 are displayed, the radio communication unit 111 or the radio communication unit The transmitting unit of the wireless communication unit 111 transmits the information on the characters in the syntax selected by the user to the web server 160 such as the search server and requests the search information. The display unit 116 receives search information about characters transmitted from the web server 160 such as a server, and the display unit 116 can display the received search information.

전술한 바와 같이 종래의 휴대용 단말기를 이용하여 정보를 검색하기 위해서는 휴대용 단말기의 인터넷 브라우저를 실행하고, 검색사이트에 접속하며, 이후 검색할 내용을 입력하는 검색창에 자판 등을 이용해 문자를 입력해야만 한다. 그러나 컴퓨터 등이 비치된 실내가 아닌 실외에서 휴대용 단말기를 이용해 이와 같은 절차를 거쳐 정보를 검색하는 것은 용이하지 않다는 문제점이 있었다. 특히 길가에서 특정 매장에 대한 정보를 획득하기 위해서는 상기와 같은 복잡한 절차를 거치며 그 매장의 간판에 표시된 명칭을 입력해야만 한다는 문제점이 있었다.As described above, in order to search for information using a conventional portable terminal, a character must be input using a keyboard or the like in a search window for executing an Internet browser of a portable terminal, accessing a search site, and inputting contents to be searched . However, there is a problem in that it is not easy to retrieve information through such a procedure by using a portable terminal outside the room where the computer and the like are provided. Particularly, in order to acquire information on a specific store on the roadside, it is necessary to input the name displayed on the signboard of the store through the complicated procedure as described above.

그러나 본 실시예에 따른 휴대용 단말기(110)의 경우에는 매장의 간판을 포함하는 건물의 사진을 휴대용 단말기(110)의 카메라부(113)를 이용해 촬영하기만 하면(도 3 참조), 문자추출부(115)가 이미지 내에 포함된 간판들에서 문자들을 추출하고 디스플레이부(116)가 추출된 문자들을 그루핑하여 디스플레이하며(도 4 참조), 사용자는 단순히 그 중 관심의 대상인 문구를 선택하기만 하면, 디스플레이부(116)가 그에 대한 검색정보를 디스플레이한다. 따라서 사용자의 검색 편의성을 획기적으로 높일 수 있다.However, in the case of the portable terminal 110 according to the present embodiment, when the photograph of the building including the signboard of the store is simply photographed using the camera unit 113 of the portable terminal 110 (see Fig. 3) The display unit 116 extracts characters from the signboards included in the image and displays the extracted characters by grouping them (see FIG. 4). When the user simply selects a phrase of interest, The display unit 116 displays search information for the search. Therefore, the convenience of the user can be significantly improved.

만일 휴대용 단말기(110)의 카메라부(113)를 이용해 촬영했을 시 획득한 이미지데이터로부터의 이미지 내에 한 개의 문구만 존재한다면, 필요에 따라 디스플레이부(116)가 그 문구를 디스플레이하는 과정을 생략하고 바로 그 문구에 대한 검색정보를 디스플레이부(116)가 디스플레이하도록 할 수도 있다.If there is only one phrase in the image from the image data obtained when the photographing is performed using the camera unit 113 of the portable terminal 110, the display unit 116 omits the process of displaying the phrase if necessary The display unit 116 may display the search information for the phrase.

한편, 카메라부(113)가 획득한 이미지데이터로부터 문자추출부(115)가 문자를 정확하게 추출하지 못할 수도 있다. 그러한 경우 사용자의 의도와 상이한 문자에 대한 정보를 검색서버에 요청하게 될 수도 있다. 따라서 그러한 문제가 발생하는 것을 방지하기 위해, 도 4에 도시된 것과 같이 문자추출부(115)가 추출한 문자들을 포함하는 복수개의 구문들을 디스플레이부(116)가 디스플레이한 상태에서 사용자가 터치스크린 기능 등을 이용해서 일 구문을 선택하면, 그 선택된 구문의 내용이 편집될 수 있는 상태로, 즉 문자가 편집될 수 있는 상태로 디스플레이부(116)가 디스플레이하도록 할 수 있다. 이에 따라 사용자가 문자 편집을 완료하면, 무선통신부(111) 또는 무선통신부(111)의 전송부는 사용자에 의해 선택되어 편집이 완료된 구문 내의 문자에 대한 정보를 검색서버와 같은 웹 서버(160)로 전송할 수 있다.On the other hand, the character extracting unit 115 may not correctly extract the character from the image data acquired by the camera unit 113. In such a case, the information may be requested to the search server for characters different from the intention of the user. In order to prevent such a problem from occurring, when the user displays a plurality of phrases including characters extracted by the character extracting unit 115 as shown in FIG. 4 on the display unit 116, The display unit 116 can display the selected syntax in a state in which the contents of the selected syntax can be edited, that is, the text can be edited. Accordingly, when the user completes the character editing, the transmitting unit of the wireless communication unit 111 or the wireless communication unit 111 transmits the information on the characters in the syntax selected by the user to the web server 160 such as the search server .

본 발명의 다른 일 실시예에 따르면, 휴대용 단말기(110)의 디스플레이부(116)는 도 4에 도시된 것과 같이 디스플레이하는 것이 아니라 도 3에 도시된 것과 같이 카메라부(113)가 획득한 이미지데이터에 따른 이미지를 디스플레이하되 그 이미지 상에 복수개의 그루핑된 영역들(T1 내지 T4)을 함께 표시하여 디스플레이할 수도 있다. 복수개의 그루핑된 영역들(T1 내지 T4)은 문자추출부(115)가 추출한 문자를 그루핑한 것이다. 사용자는 이와 같이 디스플레이부(116)가 디스플레이한 이미지를 보면서 관심의 대상인 구문을 터치스크린 등의 방식을 이용해 선택함으로써, 자신이 관심이 있는 매장에 대한 검색정보를 용이하게 획득할 수 있다.According to another embodiment of the present invention, the display unit 116 of the portable terminal 110 does not display as shown in FIG. 4, but displays the image data obtained by the camera unit 113 And displays a plurality of grouped areas T1 to T4 on the image together. The plurality of grouped regions T1 to T4 are groups of characters extracted by the character extraction unit 115. [ The user can easily obtain the search information for the shop of interest by selecting the phrase of interest by using a touch screen or the like while viewing the image displayed by the display unit 116. [

한편, 휴대용 단말기(110)의 디스플레이부(116)가 도 3에 도시된 것과 같이 카메라부(113)가 획득한 이미지데이터에 따른 이미지를 디스플레이하되 그 이미지 상에 복수개의 그루핑된 영역들(T1 내지 T4)을 함께 표시하여 디스플레이할 시, 그루핑된 영역들(T1 내지 T4) 각각이 사용자에 의해 확대 또는 축소될 수 있도록 할 수도 있다. 예컨대 사용자가 터치스크린 기능을 이용하여 그루핑된 영역들(T1 내지 T4)의 외곽선을 선택하여 이동시킴으로써, 그루핑된 영역들(T1 내지 T4) 각각이 사용자에 의해 확대 또는 축소될 수 있도록 할 수 있다. 이후 그루핑된 영역들(T1 내지 T4) 중 어느 하나가 사용자에 의해 선택되면, 해당 영역 내의 문자를 문자추출부(115)가 다시 추출하여 이에 대한 정보를 검색서버 등에 전송하고, 디스플레이부(116)는 검색서버로부터의 검색정보를 디스플레이할 수 있다.3, the display unit 116 of the portable terminal 110 displays an image according to the image data acquired by the camera unit 113, and a plurality of grouped regions T1 to T4 T4 are displayed together and displayed, each of the grouped regions T1 to T4 may be enlarged or reduced by the user. For example, the user can select and move the outline of the grouped regions T1 to T4 using the touch screen function so that each of the grouped regions T1 to T4 can be enlarged or reduced by the user. When any one of the grouped regions T1 to T4 is selected by the user, the character extracting unit 115 extracts the character in the corresponding region again, transmits information about the extracted character to the search server or the like, Can display the search information from the search server.

한편, 본 발명의 또 다른 일 실시예에 따른 휴대용 단말기(110)의 경우, 카메라부(113)가 획득한 이미지데이터에 따른 이미지를 (복수개의 그루핑된 영역들(T1 내지 T4)의 표시 없이) 디스플레이부(116)가 디스플레이하고, 이 상태에서 사용자에 의해 (터치스크린 등의 기능을 이용해) 특정 영역이 선택되면, 문자추출부(115)가 그 선택된 영역 내에서 문자를 추출하여 이에 대한 정보를 검색서버 등에 전송하고, 디스플레이부(116)는 검색서버로부터의 검색정보를 디스플레이할 수 있다.Meanwhile, in the case of the portable terminal 110 according to another embodiment of the present invention, an image according to image data acquired by the camera unit 113 (without displaying a plurality of grouped regions T1 to T4) When a specific area is selected by a user (using a function of a touch screen or the like) in this state, the character extracting unit 115 extracts characters from the selected area and stores information And the display unit 116 may display the search information from the search server.

지금까지는 휴대용 단말기(110)에 대해 설명하였으나 본 발명이 이에 한정되는 것은 아니다. 예컨대 휴대용 단말기를 이용한 검색정보 획득방법 역시 본 발명의 범위에 속한다고 할 것이다.Although the portable terminal 110 has been described so far, the present invention is not limited thereto. For example, a method of acquiring search information using a portable terminal is also within the scope of the present invention.

도 5는 본 발명의 일 실시예에 따른 검색정보 획득방법을 개략적으로 도시하는 플로우챠트이다. 도 5에 도시된 것과 같이, 휴대용 단말기의 카메라부를 이용해 적어도 한 개의 간판이 포함된 건물에 대한 이미지데이터를 획득하는 단계(S10)를 거친다. 이후 획득된 이미지데이터에서 문자를 추출하는 단계(S20)를 거쳐 추출된 문자에 대한 정보를 검색서버로 전송하는 단계(S30)를 거친다. 이에 따라 검색서버로부터 추출된 문자에 대한 검색정보를 수신하는 단계(S40)를 거쳐, 휴대용 단말기의 디스플레이부에 수신된 검색정보를 디스플레이하는 단계(S50)를 거치게 된다.5 is a flow chart schematically showing a retrieval information obtaining method according to an embodiment of the present invention. As shown in FIG. 5, a step (S10) of acquiring image data of a building including at least one signboard using a camera unit of the portable terminal is performed. Thereafter, a step of extracting characters from the acquired image data is performed (S20), and information on the extracted characters is transmitted to a search server (S30). In operation S40, the search information for the characters extracted from the search server is received, and the search information received in the display unit of the portable terminal is displayed in operation S50.

전술한 바와 같이 종래의 휴대용 단말기를 이용하여 정보를 검색하기 위해서는 휴대용 단말기의 인터넷 브라우저를 실행하고, 검색사이트에 접속하며, 이후 검색할 내용을 입력하는 검색창에 자판 등을 이용해 문자를 입력해야만 한다. 그러나 컴퓨터 등이 비치된 실내가 아닌 실외에서 휴대용 단말기를 이용해 이와 같은 절차를 거쳐 정보를 검색하는 것은 용이하지 않다는 문제점이 있었다. 특히 길가에서 특정 매장에 대한 정보를 획득하기 위해서는 상기와 같은 복잡한 절차를 거치며 그 매장의 간판에 표시된 명칭을 입력해야만 한다는 문제점이 있었다.As described above, in order to search for information using a conventional portable terminal, a character must be input using a keyboard or the like in a search window for executing an Internet browser of a portable terminal, accessing a search site, and inputting contents to be searched . However, there is a problem in that it is not easy to retrieve information through such a procedure by using a portable terminal outside the room where the computer and the like are provided. Particularly, in order to acquire information on a specific store on the roadside, it is necessary to input the name displayed on the signboard of the store through the complicated procedure as described above.

그러나 본 실시예에 따른 휴대용 단말기를 이용한 검색정보 획득방법에 따르면, 길가에서 특정 매장에 대한 정보를 획득하기를 원할 시 사용자는 휴대용 단말기의 카메라부를 이용해 특정 매장의 간판을 촬영하기만 하면 되기에, 사용자의 검색 편의성을 획기적으로 높일 수 있다. 이 경우 문자를 추출하는 단계(20)는 획득된 이미지데이터를 이용하여 간판 내 문자를 추출하는 단계인 것으로 이해될 수 있다.However, according to the method for acquiring search information using the portable terminal according to the present embodiment, when it is desired to acquire information about a specific store on the roadside, the user only needs to photograph a signboard of a specific store using the camera unit of the portable terminal, The retrieval convenience of the user can be dramatically improved. In this case, the character extracting step 20 may be understood as a step of extracting characters in the sign by using the obtained image data.

도 6은 본 발명의 다른 일 실시예에 따른 검색정보 획득방법을 개략적으로 도시하는 플로우챠트이다. 도 6에 도시된 것과 같이, 문자를 추출하는 단계(S20)를 거친 후 추출된 문자를 그루핑하여 휴대 단말기의 디스플레이부에 복수개의 그루핑된 영역들을 디스플레이하는 단계(S25)를 거칠 수 있다. 이후 검색서버로 전송하는 단계(S30)는, 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자에 대한 정보를 검색서버로 전송하는 단계가 될 수 있다.6 is a flowchart schematically showing a retrieval information acquiring method according to another embodiment of the present invention. As shown in FIG. 6, after the step of extracting characters (S20), the extracted characters are grouped and a plurality of grouped regions are displayed on the display unit of the portable terminal (S25). The step S30 of transmitting the information to the search server may be a step of transmitting information on characters in the selected region among the plurality of grouped regions to the search server.

사용자가 휴대용 단말기의 카메라부를 이용해 특정 매장의 간판 촬영을 시도하더라도, 사용자와 그 특정 매장의 간판 사이의 거리가 충분히 가깝지 않은 경우에는 복수개의 간판들이 함께 촬영될 수 있다. 그와 같은 경우 복수개의 간판들에서 추출된 문자를 간판별로 그루핑하여 휴대 단말기의 디스플레이부에 복수개의 그루핑된 영역들을 디스플레이함으로써, 사용자가 원하는 특정 매장의 간판과 관련된 문구를 정확하게 선택할 수 있도록 할 수 있다.Even if the user tries to shoot a signboard of a specific store using the camera unit of the portable terminal, a plurality of signboards can be shot together when the distance between the signboard of the user and the particular store is not sufficiently close. In such a case, characters extracted from a plurality of signboards may be grouped by signs, and a plurality of grouped regions may be displayed on the display unit of the portable terminal, so that the user can accurately select a phrase associated with a signboard of a specific store .

추출된 문자를 그루핑하여 디스플레이부에 디스플레이하는 단계(S25)는, 휴대 단말기의 디스플레이부에 추출된 문자들을 포함하는 복수개의 구문들을 디스플레이하는 단계일 수 있다(도 4 참조). 나아가 필요에 따라, 디스플레이부에 디스플레이된 복수개의 구문들 중 일 구문이 사용자에 의해 선택되면, 휴대 단말기의 디스플레이부에 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자를 편집될 수 있도록 디스플레이하는 단계를 더 포함할 수 있다. 이는 문자 추출시 일부 문자가 부정확하게 추출될 수도 있기에, 사용자가 이를 수정할 수 있는 기회를 제공하여 최종적으로 정확한 검색정보를 획득할 수 있도록 하기 위함이다. 이때 검색서버로 전송하는 단계(S30)는, 복수개의 그루핑된 영역들 중 선택된 영역 내의 편집된 상태의 문자에 대한 정보를 검색서버로 전송하는 단계일 수 있다.Step S25 of grouping the extracted characters and displaying them on the display unit may be a step of displaying a plurality of phrases including characters extracted on the display unit of the portable terminal (see FIG. 4). Further comprising the step of displaying characters in a selected area of the plurality of grouped areas on the display unit of the portable terminal so that they can be edited when a phrase among the plurality of phrases displayed on the display unit is selected by the user . This is because some characters may be extracted incorrectly when extracting characters, so that the user can provide an opportunity to correct the characters, thereby obtaining accurate retrieval information at the end. At this time, the step S30 of transmitting to the search server may be a step of transmitting information on the edited character in the selected region among the plurality of grouped regions to the search server.

이와 달리, 추출된 문자를 그루핑하여 디스플레이부에 디스플레이하는 단계(S25)는, 획득된 이미지데이터를 이용하여 휴대 단말기의 디스플레이부에 이미지를 디스플레이하며 이미지 상에 복수개의 그루핑된 영역들을 표시하는 단계일 수 있다(도 3 참조). 이를 통해 사용자가 자신이 획득하고자 하는 검색정보와 정확하게 관련된 문구를 디스플레이된 이미지를 통해 확인하며 선택할 수 있다. 이 경우 나아가 그루핑된 영역들을 디스플레이하는 단계(S25)는, 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 그루핑된 영역들을 표시하는 단계일 수 있다. 예컨대 사용자가 터치스크린 기능을 이용하여 그루핑된 영역들의 외곽선을 선택하여 이동시킴으로써, 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 할 수 있다.Alternatively, the step (S25) of grouping the extracted characters and displaying them on the display unit may include displaying the images on the display unit of the portable terminal using the obtained image data, and displaying the plurality of grouped areas on the image (See FIG. 3). Through this, the user can confirm and select the displayed image with the phrase accurately related to the search information that the user wants to acquire. In this case, step (S25) of displaying the grouped areas may further include displaying the grouped areas so that each of the grouped areas can be enlarged or reduced by the user. For example, the user may select and move the outline of the grouped regions using the touch screen function so that each of the grouped regions may be enlarged or reduced by the user.

이와 같이 그루핑된 영역들을 디스플레이하는 단계(S25)는 다양한 서브 단계들을 포함할 수 있다. 예컨대 추출된 문자 사이의 간격 정보를 획득하는 단계와, 추출된 문자 사이의 간격 중 최소간격을 확정하는 단계와, 추출된 문자 사이의 간격 중 최소간격의 사전설정된 배수 이상의 간격이 존재할 경우 최소간격의 사전설정된 배수 이상의 간격 전후의 문자를 상이한 영역으로 그루핑하는 단계를 포함할 수 있다. 이는 통상적으로 관련된 문자들의 경우 가까이 위치하고, 관련되지 않은 문자들 사이에는 상당한 거리가 존재하기 때문이다. 이에 대해서는 도 3을 참조하여 전술한 실시예들에서 설명한 바와 동일/유사하기에, 자세한 설명은 생략한다.The step of displaying such grouped regions (S25) may include various sub-steps. A step of acquiring interval information between extracted characters, a step of determining a minimum interval between the extracted characters, and a step of determining a minimum interval between extracted characters if there is an interval of a predetermined multiple of the minimum interval among the extracted characters And grouping characters before and after the predetermined number of intervals into a different area. This is typically the case for closely related characters, and there is a significant distance between unrelated characters. This is the same as or similar to that described in the above embodiments with reference to FIG. 3, and a detailed description thereof will be omitted.

한편, 도 5를 참조하여 전술한 실시예에 따른 휴대용 단말기를 이용한 검색정보 획득방법과 상이하게, 휴대 단말기의 카메라를 이용하여 획득된 이미지데이터를 이용하여 휴대 단말기의 디스플레이부에 (복수개의 그루핑된 영역들을 표시하지 않은 채) 단순히 이미지를 디스플레이하는 단계를 거치고, 이 이미지 내에서 사용자에 의해 터치스크린 등의 기능을 이용해 특정 영역이 선택되면, 이미지 중 사용자에 의해 선택된 영역 내에서 문자를 추출하는 단계를 거치고, 추출된 문자에 대한 정보를 검색서버로 전송하는 단계를 거치며, 검색서버로부터 추출된 문자에 대한 검색정보를 수신하는 단계를 거쳐, 휴대 단말기의 디스플레이부에 수신된 검색정보를 디스플레이하는 단계를 거칠 수도 있다.Unlike the method of acquiring search information using the portable terminal according to the above-described embodiment with reference to FIG. 5, the display unit of the portable terminal (using a plurality of grouped Simply displaying the image without displaying the areas) and extracting the character in the area selected by the user of the image when a specific area is selected by the user using the function of the touch screen or the like in the image And transmitting information on the extracted characters to a search server, receiving search information on characters extracted from the search server, and displaying the search information received on the display unit of the mobile terminal .

전술한 바와 같은 실시예들 및 그 변형예들에 따른 휴대용 단말기를 이용한 검색방법을 휴대용 단말기에서 실행시키기 위한 프로그램은 기록매체에 저장될 수 있다. 여기서 기록매체라 함은 예컨대 도 2에 도시된 것과 같은 저장부(117)일 수도 있고, 이와 다른 별도의 기록매체일 수도 있다. 여기서 기록매체는 롬(ROM), 플로피 디스크, 하드디스크, SD카드, CF카드 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc))와 같은 저장매체를 포함한다.The program for executing the searching method using the portable terminal according to the embodiments and the modifications described above in the portable terminal can be stored in the recording medium. Here, the recording medium may be, for example, a storage unit 117 as shown in FIG. 2, or a different recording medium. Here, the recording medium includes a storage medium such as a ROM, a floppy disk, a hard disk, an SD card, a CF card, and an optical reading medium such as a CD-ROM and a DVD (Digital Versatile Disc) .

또한, 본 발명은 상술한 것에 그치지 않고, 검색방법을 실행하기 위한 프로그램 자체, 검색방법이 휴대용 단말기에서 구현될 수 있도록 하는 스마트폰 앱, 플랫폼 및/또는 미들웨어 역시 본 발명의 범위에 속한다고 할 것이다.It should be noted that the present invention is not limited to the above, and the scope of the present invention also encompasses a program itself for executing a search method, a smartphone application, a platform and / or a middleware that enables a search method to be implemented in a portable terminal .

본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the invention. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

110: 휴대용 단말기 111: 무선 통신부
112: 제어부 113: 카메라부
114: 조작부 115: 문자추출부
116: 디스플레이부 117: 저장부
118: 전원공급부 120: 이동통신망
130: 게이트웨이 140: 인터넷망
160: 웹 서버110: portable terminal 111: wireless communication unit
112: control unit 113: camera unit
114: Operation unit 115: Character extraction unit
116: display unit 117: storage unit
118: Power supply unit 120: Mobile communication network
130: Gateway 140: Internet network
160: Web server

Claims (18)

휴대용 단말기의 카메라부를 이용하여 획득된 이미지데이터에서 문자를 추출하는 단계;
추출된 문자를 그루핑(grouping)하여 휴대용 단말기의 디스플레이부에 복수개의 그루핑된 영역들을 디스플레이하는 단계;
복수개의 그루핑된 영역들 중 선택된 영역 내의 추출된 문자에 대한 정보를 검색서버로 전송하는 단계;
검색서버로부터 추출된 문자에 대한 검색정보를 수신하는 단계; 및
휴대용 단말기의 디스플레이부에 수신된 검색정보를 디스플레이하는 단계;
를 포함하는, 휴대용 단말기를 이용한 검색정보 획득방법.Extracting a character from image data obtained using a camera unit of the portable terminal;
Grouping the extracted characters to display a plurality of grouped areas on a display unit of the portable terminal;
Transmitting information about extracted characters in a selected one of the plurality of grouped regions to a search server;
Receiving search information about a character extracted from a search server; And
Displaying the received search information on a display unit of the portable terminal;
And acquiring the search information using the portable terminal. 삭제delete 제1항에 있어서,
상기 그루핑된 영역들을 디스플레이하는 단계는, 획득된 이미지데이터를 이용하여 휴대용 단말기의 디스플레이부에 이미지를 디스플레이하며 이미지 상에 복수개의 그루핑된 영역들을 표시하는 단계인, 휴대용 단말기를 이용한 검색정보 획득방법.The method according to claim 1,
Wherein displaying the grouped areas comprises displaying an image on a display unit of the portable terminal using the obtained image data and displaying a plurality of grouped areas on the image. 제3항에 있어서,
상기 그루핑된 영역들을 디스플레이하는 단계는, 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 그루핑된 영역들을 표시하는 단계인, 휴대용 단말기를 이용한 검색정보 획득방법.The method of claim 3,
Wherein displaying the grouped areas comprises displaying the grouped areas so that each of the grouped areas can be enlarged or reduced by a user. 제1항에 있어서,
상기 그루핑된 영역들을 디스플레이하는 단계는, 휴대용 단말기의 디스플레이부에 추출된 문자들을 포함하는 복수개의 구문들을 디스플레이하는 단계인, 휴대용 단말기를 이용한 검색정보 획득방법.The method according to claim 1,
Wherein displaying the grouped areas comprises displaying a plurality of phrases including characters extracted on a display unit of the portable terminal. 제5항에 있어서,
휴대용 단말기의 디스플레이부에 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자를 편집될 수 있도록 디스플레이하는 단계를 더 포함하고,
상기 검색서버로 전송하는 단계는, 복수개의 그루핑된 영역들 중 선택된 영역 내의 편집된 상태의 문자에 대한 정보를 검색서버로 전송하는 단계인, 휴대용 단말기를 이용한 검색정보 획득방법.6. The method of claim 5,
Further comprising displaying on the display unit of the portable terminal a character in a selected one of a plurality of grouped areas to be edited,
Wherein the step of transmitting to the search server is a step of transmitting information on an edited character in a selected one of a plurality of grouped areas to a search server. 제1항에 있어서,
상기 그루핑된 영역들을 디스플레이하는 단계는,
추출된 문자 사이의 간격 정보를 획득하는 단계;
추출된 문자 사이의 간격 중 최소간격을 확정하는 단계; 및
추출된 문자 사이의 간격 중 최소간격의 사전설정된 배수 이상의 간격이 존재할 경우, 최소간격의 사전설정된 배수 이상의 간격 전후의 문자를 상이한 영역으로 그루핑하는 단계;
를 포함하는, 휴대용 단말기를 이용한 검색정보 획득방법.The method according to claim 1,
Wherein displaying the grouped areas comprises:
Obtaining spacing information between extracted characters;
Determining a minimum interval between the extracted characters; And
Grouping the characters before and after the predetermined number of intervals of the minimum interval into different areas when there is an interval of a predetermined multiple of the minimum interval among the intervals between extracted characters;
And acquiring the search information using the portable terminal. 삭제delete 제1항 및 제3항 내지 제7항 중 어느 한 항에 있어서,
상기 문자를 추출하는 단계는, 획득된 이미지데이터를 이용하여 간판 내 문자를 추출하는 단계인, 휴대용 단말기를 이용한 검색정보 획득방법.8. The method according to any one of claims 1 to 7,
Wherein the step of extracting the character is a step of extracting a character in a sign by using the obtained image data. 이미지데이터를 획득할 수 있는 카메라부;
이미지데이터에서 문자를 추출할 수 있는 문자추출부;
추출된 문자에 대한 정보를 검색서버로 전송할 수 있는 전송부;
검색서버로부터 추출된 문자에 대한 검색정보를 수신할 수 있는 수신부; 및
수신된 검색정보를 디스플레이할 수 있는 디스플레이부;
를 구비하며,
상기 디스플레이부는 상기 문자추출부가 추출한 문자를 그루핑(grouping)하여 복수개의 그루핑된 영역들을 디스플레이할 수 있고, 상기 전송부는 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자에 대한 정보를 검색서버로 전송할 수 있는, 휴대용 단말기.A camera unit capable of acquiring image data;
A character extracting unit capable of extracting characters from image data;
A transmitting unit capable of transmitting information on extracted characters to a search server;
A receiving unit capable of receiving search information on characters extracted from a search server; And
A display unit capable of displaying received search information;
And,
The display unit may display a plurality of grouped regions by grouping the extracted characters, and the transmitting unit may transmit information on characters in the selected region among the plurality of grouped regions to a search server , A portable terminal. 삭제delete 제10항에 있어서,
상기 디스플레이부는 획득된 이미지데이터를 이용하여 이미지를 디스플레이하되 이미지 상에 복수개의 그루핑된 영역들을 표시할 수 있는, 휴대용 단말기.11. The method of claim 10,
Wherein the display unit can display an image using the obtained image data, but can display a plurality of grouped areas on the image. 제12항에 있어서,
상기 디스플레이부는 그루핑된 영역들 각각이 사용자에 의해 확대 또는 축소될 수 있도록 그루핑된 영역들을 표시할 수 있는, 휴대용 단말기.13. The method of claim 12,
Wherein the display unit is capable of displaying the grouped areas so that each of the grouped areas can be enlarged or reduced by a user. 제10항에 있어서,
상기 디스플레이부는 추출된 문자들을 포함하는 복수개의 구문들을 디스플레이할 수 있는, 휴대용 단말기.11. The method of claim 10,
Wherein the display unit is capable of displaying a plurality of phrases including extracted characters. 제14항에 있어서,
상기 디스플레이부는 복수개의 그루핑된 영역들 중 선택된 영역 내의 문자를 편집될 수 있도록 디스플레이할 수 있는, 휴대용 단말기.15. The method of claim 14,
Wherein the display unit is capable of displaying characters in a selected one of a plurality of grouped areas to be edited. 제10항에 있어서,
상기 디스플레이부는 상기 카메라부가 획득한 이미지데이터를 이용하여 이미지를 디스플레이할 수 있고,
상기 문자추출부는 이미지 중 사용자에 의해 선택된 영역 내에서 문자를 추출할 수 있는, 휴대용 단말기.11. The method of claim 10,
The display unit may display an image using the image data acquired by the camera unit,
Wherein the character extractor is capable of extracting characters in an area selected by a user from among images. 제10항 및 제12항 내지 제15항 중 어느 한 항에 있어서,
상기 문자추출부는, 상기 카메라부가 획득한 이미지데이터를 이용하여 간판 내 문자를 추출할 수 있는, 휴대용 단말기.16. The method according to any one of claims 10 to 15,
Wherein the character extracting unit is capable of extracting characters in a billboard using image data acquired by the camera unit. 제1항 및 제3항 내지 제7항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 저장한 기록매체.A recording medium storing a program for executing the method according to any one of claims 1 and 3 to 7.
KR1020140003614A 2014-01-10 2014-01-10 Method for acquiring search information, recording medium storing program to implement the method, and mobile phone KR101520389B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140003614A KR101520389B1 (en) 2014-01-10 2014-01-10 Method for acquiring search information, recording medium storing program to implement the method, and mobile phone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140003614A KR101520389B1 (en) 2014-01-10 2014-01-10 Method for acquiring search information, recording medium storing program to implement the method, and mobile phone

Publications (1)

Publication Number Publication Date
KR101520389B1 true KR101520389B1 (en) 2015-05-14

Family

ID=53394743

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140003614A KR101520389B1 (en) 2014-01-10 2014-01-10 Method for acquiring search information, recording medium storing program to implement the method, and mobile phone

Country Status (1)

Country Link
KR (1) KR101520389B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120063127A (en) * 2010-12-07 2012-06-15 유신상 Mobile terminal with extended data
US20130108115A1 (en) * 2011-08-29 2013-05-02 Qualcomm Incorporated Camera ocr with context information

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120063127A (en) * 2010-12-07 2012-06-15 유신상 Mobile terminal with extended data
US20130108115A1 (en) * 2011-08-29 2013-05-02 Qualcomm Incorporated Camera ocr with context information

Similar Documents

Publication Publication Date Title
US10339383B2 (en) Method and system for providing augmented reality contents by using user editing image
CN105094760B (en) A kind of picture indicia method and device
CN109040960A (en) A kind of method and apparatus for realizing location-based service
KR101790655B1 (en) Feedback method for bus information inquiry, mobile terminal and server
US8520967B2 (en) Methods and apparatuses for facilitating generation images and editing of multiframe images
US10789474B2 (en) System, method and apparatus for displaying information
US10628955B2 (en) Information processing device, information processing method, and program for identifying objects in an image
US20170278267A1 (en) Picture information processing method and system based on mobile terminal
CN110019599A (en) Obtain method, system, device and the electronic equipment of point of interest POI information
CN107330087B (en) Page file generation method and device
CN108230220B (en) Watermark adding method and device
JP2016143158A (en) Information provision system, information provision method, and information acquisition program
JP2016058057A (en) Translation system, translation method, computer program, and storage medium readable by computer
US11003707B2 (en) Image processing in a virtual reality (VR) system
US20140044377A1 (en) Shot image processing system, shot image processing method, mobile terminal, and information processing apparatus
TW201441966A (en) Sever and method for obtaining audio guide information
CN109697242B (en) Photographing question searching method and device, storage medium and computing equipment
KR101768914B1 (en) Geo-tagging method, geo-tagging apparatus and storage medium storing a program performing the method
US9977793B2 (en) Information processing system, information processing method, and information processing apparatus
CN104252475A (en) Method and device for positioning text messages in picture
JP2010205121A (en) Information processor and portable terminal
US9952814B2 (en) Information processing apparatus, information processing method, and recording medium
KR101520389B1 (en) Method for acquiring search information, recording medium storing program to implement the method, and mobile phone
JP2017046324A (en) User terminal, object recognition server, notification method and user terminal program
KR20120109265A (en) Food information provision system and method thereof using qr code limked with broadcasting program

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180424

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190502

Year of fee payment: 5