KR100664421B1 - Portable terminal and method for recognizing name card using having camera - Google Patents

Portable terminal and method for recognizing name card using having camera Download PDF

Info

Publication number
KR100664421B1
KR100664421B1 KR20060002916A KR20060002916A KR100664421B1 KR 100664421 B1 KR100664421 B1 KR 100664421B1 KR 20060002916 A KR20060002916 A KR 20060002916A KR 20060002916 A KR20060002916 A KR 20060002916A KR 100664421 B1 KR100664421 B1 KR 100664421B1
Authority
KR
Grant status
Grant
Patent type
Prior art keywords
field
character
card
information
area
Prior art date
Application number
KR20060002916A
Other languages
Korean (ko)
Inventor
김기석
김인중
유대근
이영태
Original Assignee
주식회사 인지소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers; Analogous equipment at exchanges
    • H04M1/26Devices for signalling identity of wanted subscriber
    • H04M1/27Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, i.e. memories whose operation does not require relative movement between storage means and a transducer, e.g. chips
    • H04M1/2755Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, i.e. memories whose operation does not require relative movement between storage means and a transducer, e.g. chips whose contents are provided by optical scanning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers; Analogous equipment at exchanges
    • H04M1/26Devices for signalling identity of wanted subscriber
    • H04M1/27Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, i.e. memories whose operation does not require relative movement between storage means and a transducer, e.g. chips
    • H04M1/274508Telephone number directory allowing to store a plurality of information regarding one subscriber
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera

Abstract

A mobile terminal for recognizing a business card using a camera and a business card recognizing method are provided to quickly and accurately recognize a business card by using a camera according to a type of a field. A storage unit(330) stores a program for recognizing a business card set information with respect to characteristics of character display of each field of the business card. A character region extracting unit(350) extracts a character region from an image of the business card captured by a camera(120). A field candidate region extracting unit(370) extracts a candidate region of each field estimated to have information of a corresponding field desired to be extracted from the image of the business card. A character information extracting unit(370) extracts character information from each field candidate having the highest priority. A controller(100) integratedly stores the extracted character information as business card data.

Description

구비된 카메라를 이용한 명함 인식을 위한 휴대용 단말기 및 명함 인식 방법{Portable Terminal and Method for recognizing name card using having camera} A portable terminal and card recognition method for the business card recognition using a camera provided with {Portable Terminal and Method for recognizing name card using having camera}

도 1은 일반적인 명함 인식을 위한 카메라가 부착된 휴대용 단말기의 예를 도시한 도면, 1 is a diagram showing an example of the portable terminal camera is attached for common business card recognition,

도 2는 종래의 카메라를 구비한 휴대용 단말기를 이용한 명함 인식 방법의 예를 도시한 흐름도, 2 is a flow chart showing an example of a business card recognition method using a portable terminal having a conventional camera,

도 3은 본 발명의 실시예가 적용되는 명함의 일반적인 필드 구조를 나타낸 도면, Figure 3 is a view showing a general structure of a card field to be applied to embodiments of the invention,

도 4는 본 발명의 바람직한 실시예에 따른, 구비된 카메라를 이용하여 보다 빠르고 정확한 명함 인식을 수행하기 위한 휴대용 단말기를 도시한 블록도, Figure 4 is a block diagram showing a portable terminal for performing faster, more accurate business card recognition using, having a camera according to an embodiment of the present invention,

도 5는 본 발명의 바람직한 실시예에 따른, 카메라가 구비된 휴대용 단말기를 이용하여 보다 빠르고 정확하게 명함을 인식할 수 있는 방법을 도시한 흐름도, 5 is a flow chart illustrating a way to more quickly and accurately recognizing the business card by using a portable terminal having a camera according to an embodiment of the present invention,

도 6은 본 발명의 제1실시예에 따른 도 5의 필드별 후보영역 추출단계를 보다 상세히 도시한 흐름도, 6 is a flowchart showing in more detail the candidate area extraction step for the field in Fig. 5 according to a first embodiment of the present invention,

도 7a 내지 도 7i 는 발명의 실시예들을 적용할 수 있는 실제 명함의 다양한 예들을 도시한 도면, 그리고 Figures 7a-7i are a view showing various examples of the physical card which can be applied to embodiments of the invention, and

도 8은 본 발명의 제2실시예에 따른 도 5의 필드별 후보영역 추출단계를 보 다 상세히 도시한 흐름도이다. Figure 8 is a flow chart of the detail view showing the second embodiment per field candidate area extraction step of Figure 5 according to the present invention.

본 발명은 카메라가 부착된 휴대용 단말기를 이용한 명함인식방법 및 그 장치에 관한 것으로서, 보다 상세하게는, 휴대용 단말기에 부착된 카메라를 이용하여 명함을 촬영한 후 필요한 정보만을 보다 신속하게 추출하여 문자 데이터화할 수 있는 명함인식방법 및 그 장치에 관한 것이다. The present invention relates to a method card recognition using a mobile terminal with a camera attached, and relates to an apparatus and, more particularly, by using a camera attached to the mobile terminal after taking a business card to more rapidly extract only the necessary information character ingestion It relates to the business card recognition method and apparatus capable.

일반적으로, 만나는 상대방으로부터 명함을 건네 받으면, 휴대용 단말기의 사용자는 휴대용 단말기에서 지원하는 전화전호 편집메뉴를 이용하여 명함으로부터 필요한 내용을 키패드를 이용하여 직접 입력하여 저장한다. Typically, upon handing someone a business card from seeing the other party, the user of the portable terminal is stored by direct input using the keypad on the information that you need from the Edit menu, business card, using the phone all houses that are supported by the portable terminal.

이와 같은 개인정보 관리는 휴대용 단말기의 사용자에게 많은 수작업을 필요로 하게 한다. This personal information manager, such is it requires a lot of hand to the user of the portable terminal. 더욱이 사용자가 지인들로부터 받은 명함이 많을 경우, 이를 일일이 수작업으로 정리해야 한다면 입력되는 데이터의 정확성이나 관리도 그 만큼 힘들어지게 되는 문제점이 있다. Furthermore, if there are many users who have cards from friends, there is a problem if you need to manually do this manually clean up the accuracy of data input and management that would be that much harder.

이러한 단점을 해결하고자 휴대용 단말기에 부착된 카메라를 이용하여 명함을 촬영하고, 촬영한 이미지를 문자 인식 알고리즘을 이용하여 문자 인식함으로써, 명함을 휴대용 단말기에 저장할 수 있는 방법이 제안되었다. By trying to solve these problems take a business card using the camera attached to a portable device, and character recognition to the captured images using character recognition algorithms have been proposed a way to save the business card in the mobile terminal.

문자 인식이란, 종이와 같은 일정한 면을 갖는 영역에 기록된 문자들을 기계장치를 이용하여 판독 및 식별하여 이를 컴퓨터가 이해할 수 있는 코드로 전환하는 기술을 말한다. Character recognition means, by using the characters written in the area having a certain surface, such as paper using a mechanical device, and the read identification refers to a technique for conversion of the code that the computer can understand.

일반적으로, 문자인식장치는 광전변환장치, 인식처리장치, 기억장치, 출력장치로 구성된다. In general, the text recognition apparatus is composed of a photoelectric conversion device, the recognition processing unit, memory device, the output device. 광전변환장치는 지면의 문자를 전압파형으로 변환하고 이때 지면의 2차원 도형인 문자의 형상은 TV와 같은 방식인 주사(scan)에 의해 전압 파형의 시계열 변화인 1차원 신호로 변환한다. The photoelectric conversion device converts a one-dimensional signal with a time-series change of the voltage waveform by the two-dimensional shape of the characters and graphics of converting the character of the ground surface to a voltage waveform and wherein the ground system is an injection, such as a TV (scan). 기억장치는 인식처리장치를 제어하는 연산 제어 프로그램과, 인식한 형상을 특정한 형태로 표현한 데이터를 저장한다. The storage device stores the operation control program that controls the recognition process and device, the image of the recognized shape in the form of specific data. 인식처리장치는 기억장치 상 프로그램의 제어에 따라 광전변환장치를 통해 미지의 문자를 입력하여 처리하고, 같은 기억장치 내의 표준 패턴과 비교하여 가장 일치도가 높은 패턴에 해당되는 문자의 종류를 미지 문자의 글자 종류로 인식한다. Recognition processing apparatus in the storage device the program character type of characters corresponding to the high pattern best matching degree as compared with the standard pattern in the memory devices, such processing by entering the text of the image through the photoelectric conversion device in accordance with the control, and unknown recognized as a character type. 출력장치는 인식된 문자를 컴퓨터나 그 밖의 정보처리장치에 전달하기 쉬운 형태로 전달한다. The output device is transmitted to the easy-to-pass the recognized characters to a computer or other information processing apparatus type.

문자인식장치로는 인쇄문자와 필기문자를 모두 인식할 수 있는 광학식 문자판독기(Optical Character Reader: OCR), 필기문자를 인식할 수 있는 태블릿(tablet), 특수 문자를 인식할 수 있는 광학식 마크판독기(Optical Mark Reader: OMR), 바코드, 자기잉크판독기(Magnetic Ink Character Reader: MICR) 등이 있다. Character recognition device to print characters and an optical character reader which can recognize all handwritten characters: Optical mark reader that can recognize (Optical Character Reader OCR), tablet (tablet) that can recognize handwritten characters, and special characters ( Optical Mark Reader: include MICR): OMR), barcode, magnetic ink reader (magnetic ink Character Reader.

도 1은 일반적인 명함 인식을 위한 카메라가 부착된 휴대용 단말기의 예를 도시한 도면이다. 1 is a diagram showing an example of the portable terminal camera is attached for common business card recognition.

도시된 바와 같이, 휴대용 단말기는, 키패드에 마련된 조작키들(32,34)을 이용하여 카메라(10)를 통해 명함의 이미지를 촬영하고, 촬영한 이미지를 화면(20)에 표시한다. As shown, the mobile terminal, using the operation keys 32 and 34 provided in the keypad and recording an image of the business card via a camera 10, and displays a recorded image on the screen (20). 이때 휴대용 단말기는 표시된 이미지로부터 문자 인식 기능을 통해 문 자를 인식하여 해당 정보를 추출한 후, 추출한 정보를 명함 데이터로서 저장한다. At this time, the mobile terminal recognizes the characters from the character recognition from a displayed image, and stores the information extracted, the extracted information as the card data. 이러한 기능을 통해 사용자는 보다 간편한 명함 정보의 저장이 가능하다. With this feature, the user can be stored in the card information easier.

도 2는 종래의 카메라를 구비한 휴대용 단말기를 이용한 명함 인식 방법의 예를 도시한 흐름도이다. 2 is a flow chart showing an example of a business card recognition method using a portable terminal having a conventional camera.

먼저, 휴대용 단말기는 카메라(10)를 통해 명함을 촬영하여 명함 이미지를 독출한다(S11). First, the portable terminal reads a business card image by photographing a business card via a camera (10) (S11). 휴대용 단말기는 독출한 명함 이미지에 대한 영상 처리를 수행한다(S13). The mobile terminal carries out the image processing for the read out card image (S13). 여기서 영상 처리란, 촬영영상을 인식에 용이하도록 변환하는 단계로서, 이진화 및 잡영 제거등이 포함된다. Wherein the method comprising: an image processing means, convert the photographed image so as to facilitate the recognition, and the like and binarized japyoung removed.

휴대용 단말기는 영상 처리된 명함 이미지로부터 문자 영역을 추출한다(S15). The mobile terminal extracts the character region from the image processing card image (S15). 휴대용 단말기는 추출한 문자 영역에 대한 문자 인식을 수행한다(S170). The portable terminal performs a character recognition of the extracted character region (S170). 휴대용 단말기는 모든 문자 영역에 대한 문자 인식을 통해 각 필드의 정보를 추출한다(S18). The mobile terminal extracts the information for each field with the character recognition for all the character region (S18). 이에 따라, 휴대용 단말기는 최종적으로 추출한 정보를 화면(20)에 표시한다(S19). Accordingly, the portable terminal displays the information finally extracted with a screen (20) (S19).

그런데, 종래의 휴대용 단말기를 이용한 명함 인식 방법은 문자를 인식할 때 명함 이미지의 문자 영역에 대해 범용 문자 인식을 수행한다. However, the card recognition method using a conventional portable terminal is to recognize the character performs a universal character recognition on the character region of the card images. 따라서, 기존의 명함 인식 방법은 명함에서 추출하고자 하는 정보 외에 불필요한 정보들까지 포함된 전체 명함 이미지의 문자 영역에 대해 문자 인식을 수행하기 때문에, 문자 인식 시간 및 명함 정보의 추출 시간이 많이 걸리는 문제점이 있다. Therefore, because the existing business card recognition method performs character recognition for the character area of ​​the entire card images included in addition to the information to be extracted from business cards up to unnecessary information, the extraction time-consuming problem of character recognition time, and card information have.

게다가, 프로세서의 속도가 빠른 일반 컴퓨터(PC)에서는 문자 인식 속도가 큰 문제가 되지 않으나, 휴대용 단말기는 종래의 방법으로 명함을 인식할 경우 느 린 명함 인식 속도로 인해 사용자에게 불편함을 야기 시켜 명함 인식 기능의 활용도를 떨어뜨리게 되는 문제점이 있다. In addition, the processor speeds faster General Computer (PC), but not the character recognition speed of a big problem, a portable device to cause discomfort to the user due to slower business card recognition rate when recognizing business cards in a conventional manner Cards there is a problem that tteurige down the utilization of cognitive function.

뿐만 아니라, 종래의 명함 인식 방법은 필드의 종류에 상관없이 전체 명함 이미지에 대해 문자 인식을 처리한 후 인식 결과에 따라 문자 데이터를 일괄적으로 표시하기 때문에, 문자 인식의 오류가 발생할 가능성이 있다. In addition, because the display character data according to the conventional business card recognition method after processing the character recognition for the entire card image regardless of the type of field recognition results in batches, there is a possibility that the character recognition error.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 구비된 카메라를 이용하여 명함을 인식할 때 보다 빠른 명함 인식이 가능한 휴대용 단말기 및 그 방법을 제공하는 데 있다. An object of the present invention for solving the above problems is to provide a rapid than when using a camera provided to recognize the card business card-aware mobile terminal and a method thereof.

본 발명의 다른 목적은, 구비된 카메라를 이용하여 명함을 인식할 때, 필드의 종류에 따라 보다 정확한 명함 인식이 가능한 휴대용 단말기 및 그 방법을 제공하는 데 있다. When another object of the present invention, recognizing the business card using a camera provided, to provide a more accurate recognition card a portable terminal and a method thereof according to the type of the field.

상기와 같은 목적은 본 발명의 실시예에 따라, 카메라가 구비된 휴대용 단말기를 이용한 명함 인식 방법에 있어서, a)상기 명함의 필드별 문자 표기 특성을 설정하는 단계; Above object, according to an embodiment of the present invention, in the card recognition method using a portable terminal having a camera, a) establishing a field-specific character representation characteristic of the card; b)명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 단계; b) the business card in the recognition mode, extracts the character region from the business card image photographed by the camera; c)상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보 영역을 상기 필드별 문자 표기 특성을 참조하여 추출하는 단계; c) extracting by referring to the field indicated by the character attributes of the field-specific candidate region estimated to be the title information for that field to be extracted from the business card image; d)상기 필드별 후보 영역 중 최우선순위를 갖는 필드 후보 각각으로부터 문자 정보를 추출하는 단계; d) extracting the character information from each of the candidate with the highest priority field of the field-specific candidate area ranking; 및 e)상기 각각 추출 한 문자 정보를 통합하는 단계를 포함하는 것을 명함 인식 방법에 의해 달성된다. And e) are achieved by the card recognition method comprises the step of integrating the character information extracted above.

바람직하게는, 본 실시예의 명함 인식 방법은, 상기 통합한 문자 정보로 구성되는 명함 데이터를 화면에 표시하는 단계; Preferably, this embodiment business card recognition method comprising: displaying card data consisting of the combined character information on the display; 및 상기 표시된 명함 데이터에 대한 수정 명령이 입력되면, 입력되는 명령에 따라 상기 명함 데이터를 수정하여 표시하는 단계를 더 포함한다. And when the edit command is input to the card data is displayed, further comprising the step of displaying by modifying the card data in accordance with the inputted command.

또한, 본 실시예의 명함 인식 방법은, 상기 통합한 문자 정보로 구성되는 명함 데이터 및 상기 수정된 명함 데이터를 저장 명령에 따라 저장하는 단계를 더 포함한다. Further, this embodiment business card recognition method further includes the step of storing in accordance with the store instruction to the card data and the corrected card data consisting of the combined character information.

본 실시예의 명함 인식 방법은, 상기 a) 단계 후, 상기 명함의 전체 필드들 중에서 획득하고자 하는 정보가 포함되어 있는 필드를 설정하는 추출필드 설정단계를 더 포함한다. Example card recognition method of this embodiment further includes an extraction field, a setting step of setting a field that is included after the step a), information to be obtained among all the fields of the business card. 이에 따라, 상기 c) 단계에서는 상기 필드별 문자 표기 특성을 참조하여 상기 명함 이미지로부터 상기 설정된 추출필드에 대응하는 필드후보 영역을 추출한다. In this way, the c) step, with reference to the specific field characteristics and extracts the text representation field candidate area corresponding to the extracted field is set from the card images.

상기 명함의 필드는, 회사 마크, 회사명, 부서/직책, 이름, 및 상세정보 필드로 구성된다. Field of the cards is made up of the company mark, company name, department / position, name, and Details fields. 상기 상세정보 필드는, 우편번호, 주소, 전화번호, 팩스번호, 핸드폰번호, 홈페이지 주소, 및 이메일 주소 필드로 구성된다. The Details fields, zip code, address, and phone number, and configure the fax number, mobile phone number, home address, and email address field.

상기 필드별 문자 표기 특성은, 상기 회사 마크가 상기 명함 이미지의 맨 왼쪽 상단에 위치하고, 상기 회사명은 상기 명함 이미지의 맨 위의 중앙 부위에 위치하며, 상기 부서/직책이 상기 회사명 필드 영역의 아래 영역에 위치하며 글자 크기가 작고 "/" 또는 빈칸으로 구분되어 표시되고, 상기 이름이 상기 소속/직책 필드 영역의 아래 또는 오른쪽에 위치하고 글자의 크기가 크고 명함의 가운데 영역에 위치하며 간격을 두고 한 글자씩 표시되며, 상기 상세정보가 이름 필드 영역의 아래 부분에 위치하여 작은 글씨로 그룹화되어 표시된 패러그래프 형태를 갖는다. The field character representation Characteristics are the company marks are located on the top left of the top of the card image, the company names below the top is located in the central part of the above, the department / office is the company name field area of ​​the card image located in the area and is displayed is divided into small "/" or blank the font size, and the name is located on the bottom or right of the affiliation / title field area located in the center area of ​​the size of the font bigger cards and one at a distance is displayed by letters, the detailed information is located in the lower part of the name field area has a paragraph is displayed in grouped form a fine print.

상기 필드별 문자 표기 특성은, 상기 상세정보 필드 중, 상기 우편번호가 "-"를 기준으로 3개의 숫자들이 구분되어 표시되고, 상기 주소가 상기 우편번호 필드 영역 다음에 표시되며 시 또는 도로 시작하며, 상기 전화번호가 상기 주소 필드 영역 아래쪽에 위치하며 국가 또는 지역 번호로 시작하며, 상기 팩스번호가 상기 전화번호 필드 영역 아래 또는 옆에 위치하여 상기 전화번호 필드와 동일한 국가 또는 지역 번호로 시작하는 숫자가 표시되고, 상기 핸드폰번호가 상기 팩스번호 필드 영역의 아래에 위치하여 이동통신 사업자 지정번호로 시작하는 숫자로 구성되며, 상기 홈페이지 주소가 "http" 또는 "www"를 포함하는 문자로 표시되며, 상기 이메일 주소가 특수문자 "@"를 포함하는 영문으로 표시되는 것을 특성을 갖는다. The field character representation Characteristics are among the Details field, the postal code "-" is displayed and is divided to three numbers based on the address shown in the following the postal code field region begins or when roads and , the number of the phone number located on the bottom of the address field region begins by country or area code, and the fax number is located next to or under the phone number field region begins with the same country or area code and the phone number field It is displayed, and is the cell phone number that consists of numbers beginning with designated mobile operators numbers located on the bottom of the fax number field region, and the website address is displayed as text, including "http" or "www", that the email address has an attribute that is displayed in English that contains a special character "@".

한편 상기와 같은 목적은 본 발명의 실시예에 따라, 구비된 카메라를 이용하여 명함을 인식하기 위한 휴대용 단말기에 있어서, 상기 명함 인식을 위한 프로그램 및 상기 명함의 필드별 문자 표기 특성에 대한 설정 정보를 저장하는 저장부; The above object is the setting information for, in the mobile terminal for recognizing the business card using the provided cameras, character-by-character field of the program, and the card for the card recognition mark characteristics in accordance with an embodiment of the invention a storage unit for storing; 명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 문자영역 추출부; In the card recognition mode, character region extraction unit for extracting a character area from the card image photographed by the camera; 상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보 영역을 상기 필드별 문자 표기 특성을 참조하여 추출하는 필드후보영역 추출부; Wherein the field-specific candidate region estimated from the card image to be the information for that field is marked to be extracted by referring to the field attribute character representation to extract extraction field candidate area to unit; 상기 필드별 후보 영역 중 최우선순위를 갖는 필드 후보 각각으로부터 문자 정보를 추출하는 문자정보 추출부; Character information extracting unit for extracting character information from each of the candidate with the highest priority field of the field-specific candidate area ranking; 및 상기 각각 추출한 문자 정보를 통합하여 명함 데이터로서 상기 저장부에 저장하는 제어부를 포함하는 휴대용 단말기에 의해 달성된다. And it is achieved by a portable terminal by integrating the respective extracted character information, and a control unit for storing in the storage unit as the card data.

바람직하게는, 상기 제어부는, 입력되는 명령에 따라 상기 명함의 전체 필드들 중에서 획득하고자 하는 정보가 포함되어 있는 추출 필드를 설정하여 상기 저장부에 저장한다. Preferably, the control unit may set the extracted field containing the information to be acquired from among the entire field of the card in accordance with the inputted command is stored in the storage unit. 이에 따라, 상기 필드후보영역 추출부는 상기 필드별 문자 표기 특성을 참조하여 상기 명함 이미지로부터 상기 설정된 추출 필드에 대응하는 필드후보 영역을 추출한다. Accordingly, the field candidate area extracting unit extracts the field candidate region by referring to the field indicated by the character property corresponding to the set extraction field, from the business card image.

상기 제어부는 상기 통합한 명함 데이터를 화면에 표시하고, 상기 표시된 명함 데이터에 대한 수정 명령이 입력되면 입력되는 명령에 따라 상기 명함 데이터를 수정하여 표시한다. The control unit may be displayed by modifying the card data in accordance with the command represented by the card data in the integrated screen, and the input when the modification command for the displayed card data input.

한편, 상기와 같은 목적은 본 발명의 실시예에 따라, 카메라가 구비된 휴대용 단말기를 이용한 명함 인식 방법에 있어서, 상기 명함의 필드별 문자 배열패턴을 설정하는 단계; On the other hand, the method comprising the above object, according to an embodiment of the present invention, in the card recognition method using a portable terminal having the camera, setting the character array pattern-specific fields of the business card; 명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 단계; In the card recognition mode, a step of extracting a character area from the card image photographed by the camera; 상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보영역을 상기 필드별 문자 배열패턴정보를 참조하여 추출하는 단계; Extracting with reference to said field by the character array pattern information to the appropriate field by field candidate area in which information is assumed to be the title to be extracted from the business card image; 상기 추출한 필드별 후보영역에 표기된 각각의 문자 특성에 대응하여 인식 가능한 문자인식 알고리즘을 적용하여 해당 문자정보를 추출하는 단계; Extracting the character information corresponding to each character displayed on the characteristics of the extracted field candidate region by applying a recognizable character recognition algorithm; 및 상기 각각 추출한 문자 정보를 통합하는 단계를 포함하는 명함 인식 방법에 의해 달성된다. And it is achieved by the card recognition method, comprising the step of integrating the respective extracted text information.

바람직하게는, 상기 문자정보 추출단계에서는, 추출된 필드별 후보 영역이 한글도 표기되었을 것으로 예상되는 필드 후보 영역인 경우에는 한글 인식 알고리즘을 적용하여 필드 후보 영역의 문자인식을 수행하여 문자 정보를 추출하고, 추출된 필드별 후보 영역이 영어 또는 숫자로 표기되었을 것으로 예상되는 필드 후보 영역인 경우에는 각각 영어 또는 숫자 인식 알고리즘을 각각 적용하여 필드 후보 영역의 문자인식을 수행하여 문자 정보를 추출한다. Preferably, in the above character information extraction step, if the extraction field by the candidate area is Hangul is also expected to have been marked field candidate area, and by applying the Hangul recognition algorithm performs character recognition of the field candidate area extracted character information and, when the extraction candidate region of each field field candidate area that is expected to be in English or a number is applied to each of the English and digit recognition algorithm each extract character information by performing character recognition in the field candidate area.

본 실시예에서 상기 필드별 후보영역 추출단계는, 상기 추출된 문자 영역에 대해 문자들 간의 줄 간격, 각 라인의 높이, 문자열 정렬 방식(내용 추가) 등을 고려하여 문자 표시 영역별로 블록을 구분하는 단계; In this embodiment step extracts the field-specific candidate area, considering the line for the extracted character region among the character pitch, the height of each line, a string alignment (additional information) such as to separate block for each character display area step; 상기 구분된 블록별로 문자 표시 라인의 특성을 체크하는 단계; Step of checking the characteristics of the character display line by the the sorting block; 상기 체크한 라인별 특성에 따라 필드의 종류를 추정하는 단계; Estimating the type of the field in accordance with the said check line-by-line properties; 상기 추정된 각 필드에 대해 문자 표시 특성을 체크하는 단계; Checking the text display attributes for each field, the estimated; 및 상기 문자 표시 특정에 따라 상기 필드별 후보영역을 결정하는 단계를 포함한다. And determining the specific field candidate area according to the specific character display.

상기 명함의 필드는, 회사 마크, 회사명, 부서/직책, 이름, 및 상세정보 필드 등일 수 있다. Field of the cards, the company marks, may be a company name, department / position, name, and Details fields. 상기 상세정보 필드는, 우편번호, 주소, 전화번호, 팩스번호, 핸드폰번호, 홈페이지 주소, 및 이메일 주소 필드 등일 수 있다. The Details fields, zip code, address, telephone number, fax number, mobile phone number, home address, and the like, and the email address field.

본 발명에 따르면, 명함을 촬영한 이미지에 대해 문자 영역을 추출하고 추출하고자 하는 정보가 표시된 필드 후보 영역을 기 설정된 필드별 배열패턴정보 또는 필드별 문자 표기 특성 정보를 참조하여 추출한 후 이에 대한 문자 정보를 추출하여 명함 정보를 얻어냄으로써, 명함으로부터 문자 인식을 통한 명함 정보 획득을 보다 신속하게 처리할 수 있다. Character information about it was extracted according to the present invention, by extracting a text region for image taking a business card, and the information is reference to an array pattern information, the displayed field candidate area group-specific set field or a field-specific character representation attribute information to be extracted the extract obtained naemeurosseo the business card information, the card information obtained by the character recognition from a business card to be processed more quickly. 또한 명함 이미지의 문자 영역으로부터 필드별 문자 특성에 따라 문자 정보를 추출하고자 하는 필드 후보를 추정한 후 이에 대한 문 자 정보를 추출함으로써, 명함으로부터 보다 정확한 문자 인식을 통한 명함 정보 획득이 가능하다. In addition, by extracting the character information on this and then estimates the candidate field to be extracted character information according to the text property-specific fields from the text region of a card image, it is possible to obtain the card information by a more accurate character recognition from the business card. 뿐만 아니라, 명함으로부터 문자 정보를 추출하고자 하는 추출필드를 미리 설정하고 설정정보를 기초로 문자 정보를 추출하고자 하는 필드 후보 영역만을 추출하여 추출된 후보 필드에 대해서만 문자 정보를 추출함으로써, 명함으로부터 필요한 정보만을 선택적으로 신속하게 획득할 수 있다. By not only extracts the character information only for the candidate fields extracted by setting the extraction field to extract the text information from the card in advance, and extracts only the field candidate area to extract the character information based on the setting information, and information from the business card only it can be selectively quickly obtained.

이하, 본 발명의 바람직한 실시예들을 첨부한 도면을 참조하여 상세히 설명한다. With reference to the accompanying drawings a preferred embodiment of the present invention will be described in detail. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. Like elements of the drawings It should be noted that denoted by the same reference numerals even though where possible. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다. In the following description, a detailed description of known functions and configurations may unnecessarily obscure the subject matter of the present invention will be omitted.

도 3은 본 발명의 실시예가 적용되는 명함의 일반적인 필드 구조를 나타낸 도면이다. 3 is a view showing a general structure of a field of a card that apply an embodiment of the invention.

도시된 바와 같이, 명함은 맨 왼쪽 상단에 표시된 회사 마크(41), 회사 마크(41)의 오른쪽 및 명함의 최상단에 표시되는 회사명(42), 회사명(42)의 아래쪽 가운데에 위치하며 주변 글자 크기보다 크고 굵은 글씨로 표시된 이름(44), 이름(44)의 왼쪽 또는 위쪽에 표시된 부서/직책(43), 및 이름(44) 아래쪽에 위치하며 작은 글씨로 하나의 패러그래프를 형성하고 있는 상세정보로 구성된다. As shown, the card is located in the bottom center of the company name 42, a company name 42 is displayed on the top of the right side and the business card of the company mark 41, a company mark 41 is displayed at the top left-most, and peripheral located under the name indicated by the large, bold than the font size 44, a division / office 43 shown at the left or top of the name 44, name 44, and which forms one of the paragraph in fine print It consists of detailed information.

상세정보는 "-"를 기준으로 3개의 숫자들이 구분되어 표시되는 우편번호(45), 시 또는 도로 시작하는 주소(46), 지역번호로 시작하는 전화번호(47), 전화번호(47) 아래에 위치하는 팩스번호(48), 이동통신 사업자 지정번호로 시작하는 핸드폰번호(49), 및 "@"를 포함하는 영문이 표시된 이메일 주소(50)로 구성된다. More information is "-" are three numbers are separated by reference to the following postal code (45), or when the address (46), Phone (47) Telephone (47), starting with the area code that begins the road that is displayed fax number, which is located in 48, the mobile phone number starting with the specified number of carriers (49), and English is marked with a "@" is made up of an email address (50).

본 발명의 실시예에서는, 명함 이미지 전체에 대한 문자 인식을 수행하지 않고, 문자 영역을 필드의 종류별로 구분하여 문자 인식의 속도 및 정확도를 높이고자 한다. According to an embodiment of the present invention, without performing character recognition of the entire card image, by separating the character region by the type of field and want to increase the speed and accuracy of the character recognition.

도 4는 본 발명의 바람직한 실시예에 따른, 구비된 카메라를 이용하여 보다 빠르고 정확한 명함 인식을 수행하기 위한 휴대용 단말기를 도시한 블록도이다. Figure 4 is a block diagram illustrating a portable terminal for performing faster, more accurate business card recognition using, having a camera according to an embodiment of the present invention.

도시된 바와 같이, 휴대용 단말기는, 제어부(100), 카메라부(120), 영상처리부(140), 표시부(160), 무선통신부(220), 데이터 처리부(240), 오디오 처리부(260), 키입력부(310), 저장부(330), 문자영역 추출부(350), 필드후보영역 추출부(370), 및 문자정보 추출부(390)로 구성된다. , The mobile terminal, the control unit 100, camera unit 120, image processing unit 140, display unit 160, the wireless communication unit 220, data processor 240, audio processor 260, a key, as illustrated It consists of the input unit 310, storage unit 330, a character area extraction unit 350, a field candidate area extraction unit 370, and character information extraction unit 390.

제어부(100)는 휴대용 단말기의 전반적인 제어 동작을 수행한다. The controller 100 performs the overall control operation of the mobile terminal. 제어부(100)는 본 발명의 실시예에 따라 명함 이미지에 대한 필드별 문자 인식을 통한 정보 추출을 제어하는 기능을 수행한다. The controller 100 performs a function of controlling the information extracted by the field-specific recognition of the character card image according to an embodiment of the invention. 또한, 제어부(100)는 명함 이미지 중 사용자에 의해 설정된 필드에 대한 문자 인식을 통한 정보 추출을 제어한다. In addition, the controller 100 controls the information extracted by the character recognition for a field set by the user of the card images.

카메라부(120)는 렌즈를 통해 촬상되는 영상을 촬영하며, 촬영된 광 신호를 전기적 신호로 변환하는 카메라 센서, 카메라 센서로부터 촬영되는 아날로그 영상신호를 디지털 데이터로 변환하는 신호처리부를 구비한다. The camera unit 120 takes a picture image picked up through the lens and provided with a converting analog image signals photographed from the camera to the photographed optical signal sensor, a camera sensor for converting an electrical signal into a digital data signal processing. 여기서 카메라 센서는 CCD(Charge Coupled Device) 센서가 적용되는 것이 일반적이며, 신호처리부는 DSP(Digital Signal Processor)로 구현할 있다. The camera sensor is generally that (Charge Coupled Device) sensor CCD application, the signal processor may be implemented as a DSP (Digital Signal Processor). 또한 카메라 센서 및 신호처리부는 별도로 분리 또는 일체형으로 구현할 수 있다. In addition, the camera sensor and the signal processor can be implemented as separate or integrated separately. 본 발명의 실시예에 따른 카메라부(120)는 입력되는 촬영 명령에 따라 명함을 촬영하고, 촬영한 명함 이미지 데 이터를 영상처리부(140)로 출력한다. The camera unit 120 according to an embodiment of the present invention includes recording the business card in accordance with the recording command is input, and outputs the data to the recorded card image to the image processing unit 140.

영상처리부(140)는 카메라부(120)에서 출력되는 명함 이미지 데이터를 표시하기 위한 화면 데이터로 변환한다. Image processing unit 140 converts the screen data for displaying a card image data output from the camera unit 120. 영상처리부(140)는 케메라부(120)에서 출력되는 명함 이미지 데이터로부터 잡음 이미지를 제거하고, 표시부(160)의 특성 및 크기에 대응하여 사이즈를 변환하여 출력한다. Image processing unit 140 removes noise from the image of the business card image data output from Kane camera unit 120, and converts and outputs a size corresponding to the characteristics and size of the display unit 160. 또한 영상처리부(140)는 영상 코덱(CODEC)을 구비하며, 표시부(160)에 표시되는 프레임 영상 데이터를 설정된 방식으로 압축하거나 압축된 프레임 영상데이터를 원래의 프레임 영상데이터로 복원하는 기능을 수행한다. In addition, image processing unit 140 is provided with a video codec (CODEC), performs a function of restoring compressed in the manner set the frame image data or compressed frame image data displayed on the display unit 160 to the original frame image data . 여기서 영상 코덱은 JPEG 코덱, MPEG 코덱, 및 Wavelet 코덱 등이 될 수 있다. The image codec may be a JPEG codec, MPEG codec, and Wavelet codec. 또한 영상처리부(140)는 OSD(On Screen Display) 기능을 구비할 수 있으며, 이 경우 영상처리부(140)는 제어부(100)의 제어에 따라 표시하기 위한 표시 데이터를 화면의 소정 영역에 표시하도록 출력할 수 있다. In addition, image processing unit 140 may be provided with an OSD (On Screen Display) function, in which case the image processing unit 140 is output to display the display data for displaying in accordance with the control of the controller 100 in a predetermined area of ​​the screen can do.

표시부(160)는 영상처리부(140)에서 출력되는 명함 이미지를 화면에 표시하며, 제어부(100)에서 출력되는 표시 데이터를 화면에 표시한다. Display 160 displays a card image to be output from the image processing unit 140 on the screen, and displays the display data output from the controller 100 on the screen. 여기서 표시부(160)는 LCD(Liquid Crystal Display)가 적용될 수 있으며, 이런 경우 표시부(160)는 LCD 제어부, 영상 데이터를 저장할 수 있는 메모리 및 LCD 표시소자 등을 구비할 수 있다. The display unit 160 may be applied to the (Liquid Crystal Display), LCD, In this case the display 160 may be provided with a memory, etc., and an LCD display device that can store the LCD control, the video data. 이때 LCD를 터치스크린 방식으로 구현하는 경우, 입력부로 동작할 수도 있다. In this case, when implementing the LCD touch screen scheme, it is also possible to operate as an input unit. 또한 표시부(160)는 명함 이미지가 제어부(100)의 제어에 따라 변환된 텍스트 형태의 명함 정보를 필드별로 화면에 표시할 수 있다. In addition, the display 160 may be displayed on the screen and the card information of the converted text format according to the control of the card image control unit 100 for each field.

무선통신부(220)는 휴대용 단말기의 무선 통신을 위한 해당 데이터의 송수신 기능을 수행한다. Wireless communication unit 220 performs transmission and reception functions of the data for wireless communication of the mobile terminal. 무선통신부(220)는 송신되는 신호의 주파수를 상승변환 및 증폭 하는 RF송신기와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 RF수신기 등으로 구성된다. Wireless communication unit 220 is composed of a RF transmitter for up-converting and amplifying a frequency of a signal to be transmitted, for converting low-noise amplifying received signals and down the frequency RF receiver. 무선통신부(220)는 입력되는 송신 대상 신호를 무선신호로 변환하여 무선 채널을 통해 송신한다. A wireless communication unit 220 converts a transmission subject signal to be inputted to a radio signal transmitted on a radio channel. 또한 무선통신부(220)는 무선 채널을 통해 송신되는 무선 신호를 수신하여 해당 데이터로 변환하여 출력한다. The wireless communication unit 220 and outputs to receive a radio signal transmitted on a radio channel switching to the respective data.

데이터 처리부(240)는 무선 채널을 통해 송신하기 위한 신호를 부호화 및 변조하는 송신모듈, 및 무선 채널을 통해 수신한 신호를 복조 및 복호화하는 수신모듈 등을 구비한다. The data processing unit 240 includes a receiving module for decoding and demodulating a signal received through the transmitting module, and a radio channel for encoding and modulating a signal for transmission over a wireless channel.

오디오 처리부(260)는 코덱으로 구성될 수 있으며, 코덱은 패킷 데이터 등을 처리하는 데이터 코덱과 음성 등의 오디오 신호를 처리하는 오디오 코덱을 구비한다. Audio processor 260 may be of a codec, the codec is provided with an audio codec for processing audio signals such as voice data codec for processing packet data. 오디오 처리부(260)는 데이터 처리부(240)에 수신되는 디지털 오디오신호를 오디오 코덱을 통해 아날로그신호로 변환하여 스피커를 통해 재생한다. An audio processing unit 260 converts a digital audio signal received at the data processor 240 into an analog signal through the audio codec and reproduces the speakers. 또한 오디오 처리부(260)는 마이크로부터 입력되는 아날로그 오디오신호를 오디오 코덱을 통해 디지털 오디오신호로 변환하여 데이터 처리부(240)로 출력한다. In addition, the audio processing unit 260 converts the analog audio signal input from a microphone into a digital audio signal through the audio codec and outputs it to the data processing unit 240. 코덱은 별도로 구비되거나 제어부(100)에 포함될 수 있다. The codec may be included in or provided with the controller 100 separately. 본 실시예에 따른 오디오 처리부(260)는 제어부(100)의 제어에 따라 명함 이미지에 대응하여 추출된 명함의 필드별 정보를 음성 변환하여 스피커를 통해 출력할 수도 있다. An audio processing unit 260 according to this embodiment may be output from the speaker to the speech-specific information field of the card to extract the card image corresponding to the response to the control of the controller 100.

키입력부(310)는 숫자 및 문자 정보 등을 입력하기 위한 다수의 키들 및 휴대용 단말기의 동작 제어를 위한 제어키들을 구비한다. A key input unit 310 is provided with a control keys for controlling the operation of the plurality of keys, and a portable terminal for inputting number and letter information and the like. 본 발명의 실시예에 따른 키입력부(310)는 명함에 대한 촬영 및 촬영된 명함 이미지에 대한 필드별 문자 정보 추출을 제어하기 위한 키들을 구비한다. A key input unit according to an embodiment of the present invention (310) is provided with keys for controlling the recording and character information extracted by the field for the recording card images for business cards. 키입력부(310)는 입력되는 해당 명령 신호를 제어부(100)로 출력한다. And it outputs the command signal the key input unit 310 is input to the controller 100.

저장부(330)는 프로그램 저장부, 데이터 저장부 등으로 구성될 수 있다. Storage unit 330 may be composed of a program storage unit, a data storage unit or the like. 프로그램 저장부는 휴대용 단말기의 일반적인 동작을 제어하기 위한 프로그램들 및 본 발명의 실시예에 따른 소정 면에 표시된 문자 이미지로부터 텍스트 정보로 추출하기 위한 문자 인식에 필요한 프로그램들을 포함할 수 있다. The program storage unit may include a program required for the character recognition for extracting text information from the character image displayed on the predetermined plane in accordance with a program and embodiments of the present invention for controlling the general operation of the mobile terminal. 데이터 저장부는 프로그램들을 수행하는 중에 발생하는 데이터들을 일시 저장하는 용도로 이용된다. It is used for the purpose of temporarily stores data generated while performing the data storage unit comprises a program. 본 발명의 실시예에 따라, 저장부(330)에는 명함으로부터 얻고자하는 정보의 필드가 설정된 추출필드 설정정보, 및 명함 이미지로부터 추출한 필드별 명함 정보가 저장된다. According to an embodiment of the invention, storage unit 330, the extracted setting information field, and a field-specific business card information extracted from the card image field is set in the information to be obtained from the business card and stored. 또한 저장부(330)에는 해당 명함들의 일반적인 타입을 분석하여 설정된 명함의 필드별 배열 패턴정보가 저장된다. In addition, storage unit 330 is stored in the field by an array pattern information of the card is set by analyzing the general type of the business card.

문자영역 추출부(350)는 제어부(100)의 제어에 따라 명함 이미지로부터 문자가 표시된 문자 영역을 추출한다. A text area extracting unit 350 extracts a character region from the character card image displayed in accordance with the control of the controller 100.

본 발명의 제1실시예에 따라 필드후보영역 추출부(370)는 저장부(330)에 저장된 명함의 필드별 배열 패턴정보를 참조하여 문자 정보를 추출하고자 하는 해당 필드의 후보 영역을 우선순위별로 추출한다. The first embodiment according to the example field candidate area extraction unit 370 of the present invention, by priority, the candidate area for the field to extract character information by referring to the field by an array pattern information of a business card stored in the storage unit 330 extracts. 이에 따라 명함의 문자 인식 시간을 단축시킬 수 있다. Accordingly, it is possible to shorten the time of character recognition card.

본 발명의 제2실시예에 따라 필드후보영역 추출부(370)는 설정된 추출필드 설정정보에 따라 문자 정보를 추출하고자 하는 필드의 후보 영역을 우선순위별로 추출한다. The second embodiment according to the example field candidate area extraction unit 370 of the present invention extracts a candidate region of a field to be extracted character information according to the set extraction field setting information by priority. 필드후보영역 추출부(370)는 명함에 기재되는 필드별 문자 특성을 참조하여, 설정된 추출필드 설정정보에 대응하는 필드 후보 영역을 추출한다. Field candidate area extraction unit 370 refers to the field-specific character attributes that are described in the business card, and extracts the field candidate area corresponding to the set extraction field setting information. 여기서 필드별 문자 특성 정보는 저장부(330)에 저장된다. The character attribute information, specific fields are stored in the storage unit 330.

명함에 표시되는 필드의 종류는 도 3에 도시한 바와 같이, 회사 마크(41), 회사명(42), 부서/직책(43), 이름(44), 및 상세정보로 구성된다. As shown in the type of field is displayed on the card 3, it consists of a company mark 41, a company name 42, a department / job title 43, a name 44, and detailed information. 여기서, 상세정보는 우편번호(45), 주소(46), 전화번호(47), 팩스번호(48), 핸드폰번호(49), 이메일 주소(50), 및 회사 홈페이지 주소를 들 수 있다. Here, the detailed information may include your zip code 45, address 46, phone number 47, fax number (48), mobile phone number (49), and email address (50), and company website address.

필드후보영역 추출부(370)가 추출하고자 하는 문자 정보가 포함된 필드 후보 영역을 추출하는 구체적인 예는 도 6 내지 도 8에서 설명한다. Specific examples of extracting a field candidate area extraction unit field candidate area containing the character information 370 is to be extracted will be described in FIGS. 6-8.

제어부(100)는 필드후보영역 추출부(370)에서 추출한 필드 후보 영역을 확인하고 그 결과에 따라 후보 필드의 문자 정보를 추출하도록 문자정보 추출부(390)를 제어할 수 있다. The controller 100 may check the extracted field candidate area in the field candidate area extraction unit 370, and controls the text information extracting unit 390 to extract the character information of the candidate field accordingly. 또한 제어부(100)는 필드후보영역 추출부(370)에서 추출한 필드 후보 영역에 대해 사용자로부터 확인 명령을 입력받아, 최종 선택된 필드에 대한 문자 정보를 추출하도록 문자정보 추출부(390)를 제어할 수도 있다. In addition, the controller 100 is a field candidate area extraction unit 370 from receiving a check command from the user to the extracted field candidate area, you can also control the text information extracting unit 390 to extract the character information on the last selected field have.

문자정보 추출부(390)는 제어부(100)의 제어에 따라 필드후보영역 추출부(370)에서 추출한 필드 후보 영역에 표시된 문자 정보를 문자 인식 기능을 이용하여 추출한다. Character information extraction unit 390 extracts features using the character information, the character recognition shown in the field candidate area extracted in the field candidate area extraction unit 370 according to the control of the controller 100. 바람직하게는 문자정보 추출부(390)는 추출한 필드 후보 영역에 대한 문자 정보를 추출할 때, 필드 후보 영역 각각에 기재되었을 것으로 예상되는 문자 특성(한글, 영어, 숫자 등)에 대응하여, 해당 필드 후보 영역에 문자 인식 알고리즘을 적용하여 문자 정보를 추출한다. Preferably, in correspondence with the character information extraction unit 390 to extract the character information of the extracted field candidate area, character attributes that are expected to have been described in each field candidate area (Hangul, English, numbers, or the like), the field by applying a character recognition algorithm to the candidate regions to extract the textual information.

예를 들어, 추출한 필드 후보 영역이 한글 필드(예를 들어, 한글 명함의 경우에 이름 필드라고 판단되는 후보 영역)인 경우, 문자정보 추출부(390)는 한글 인 식 알고리즘을 적용하여 문자 정보를 추출한다. For example, the extracted field candidate area Hangul field when the (e. G., A candidate zone is determined that the name field in the case of Hangul card), the character information extraction unit 390 applies the Hangul recognition algorithm to the character information extracts. 또한, 추출한 필드 후보 영역이 영어 및 숫자로 구성된 필드(예를 들어, 전화 번호, 이메일, 홈페이지 주소 등)인 경우, 문자정보 추출부(390)는 영어/숫자 인식 알고리즘을 적용하여 문자 정보를 추출한다. In addition, the field is extracted field candidate area is configured in English and number when the (e. G., Phone number, e-mail, home page address), character information extracting unit 390 extracts text information by applying the English / number recognition algorithm do.

따라서, 추출하고자 하는 정보 이외의 필드 영역을 인식하는 것을 방지할 수 있으며, 해당 필드 영역에 대해서도 해당 필드 영역에 기재되었을 것으로 예상되는 문자 패턴에 대한 인식 알고리즘을 먼저 적용함으로써, 필요한 정보를 인식하는 시간을 단축시킬 수 있다. Therefore, it is possible to prevent to recognize the field area other than the information to be extracted, by first applying a recognition algorithm to the character pattern to be expected is also described in the field region in the field region, the time of recognizing the information required the can be shortened.

제어부(100)는 문자정보 추출부(390)에서 각 필드로부터 추출한 문자 정보를 통합하여 명함 정보를 화면에 표시 및 저장 명령에 따라 저장부(330)에 저장한다. The control unit 100 stores in the storage unit 330 in accordance with the card information by integrating the character information extracted from each of the fields in the text information extracting unit 390 to display and store instruction on the screen.

따라서, 명함을 촬영한 이미지에 대해 문자 영역을 추출하고 추출하고자 하는 정보가 표시된 필드 후보 영역을 추출한 후 이에 대한 문자 정보를 추출하여 명함 정보를 얻어냄으로써, 명함으로부터 문자 인식을 통한 명함 정보 획득을 보다 신속하게 처리할 수 있다. Therefore, after the information to be extracted character region is extracted for an image taking a business card to extract the displayed field candidate area naemeurosseo obtain the card information by extracting the character information on this, than the card information obtained by the character recognition from the business card It can be rapidly processed. 또한 명함 이미지의 문자 영역으로부터 필드별 문자 특성에 따라 문자 정보를 추출하고자 하는 필드 후보를 추정한 후 이에 대한 문자 정보를 추출함으로써, 명함으로부터 보다 정확한 문자 인식을 통한 명함 정보 획득이 가능하다. In addition, by extracting the character information on this and then estimates the candidate field to be extracted character information according to the text property-specific fields from the text region of a card image, it is possible to obtain the card information by a more accurate character recognition from the business card. 뿐만 아니라, 명함으로부터 문자 정보를 추출하고자 하는 추출필드를 미리 설정하고 설정정보를 기초로 문자 정보를 추출하고자 하는 필드 후보 영역만을 추출하여 추출된 후보 필드에 대해서만 문자 정보를 추출함으로써, 명함으로부터 필요한 정보만을 선택적으로 신속하게 획득할 수 있다. By not only extracts the character information only for the candidate fields extracted by setting the extraction field to extract the text information from the card in advance, and extracts only the field candidate area to extract the character information based on the setting information, and information from the business card only it can be selectively quickly obtained.

도 5는 본 발명의 바람직한 실시예에 따른, 카메라가 구비된 휴대용 단말기를 이용하여 보다 빠르고 정확하게 명함을 인식할 수 있는 방법을 도시한 흐름도이다. Figure 5 is a flow chart illustrating a way to more quickly and accurately recognizing the business card by using a portable terminal having a camera according to an embodiment of the present invention.

먼저, 제어부(100)는 키입력부(310)를 통해 명함 인식 명령에 따라, 전면에 놓여진 명함을 카메라(120)를 통해 촬영하여 명함 이미지를 독출한다(S110). First, the controller 100 reads out the business card image by photographing a, placed on the front card in accordance with the business card recognition command through the key input unit 310 via the camera (120) (S110). 제어부(100)는 독출한 명함 이미지로부터 잡음 이미지를 제거하고 문자 인식에 적합한 형태의 영상 처리를 수행하도록 영상처리부(140)를 제어한다(S120). The control unit 100 are read out to remove noise from the image of the business card image and controls the image processing unit 140 to perform the type of image processing suitable for the character recognition (S120). 제어부(100)는 영상 처리된 명함 이미지를 표시부(160)를 통해 화면에 표시한다. The controller 100 displays a card image on the image processing screen through the display 160. The 이에 따라, 명함 이미지로부터 해당 필드에 대한 문자 정보를 추출하여 추출된 정보를 통합하여 명함 정보를 생성하는 과정이 표시부(160)를 통해 화면에 표시된다. Thus, the process of creating a business card information from a card image by integrating the information extracted by extracting the character information for that field is displayed on the screen through the display 160. The

제어부(100)는 문자영역 추출부(350)를 제어하여 영상 처리된 문자 이미지에 대해 문자가 표시된 영역을 추출한다(S130). The controller 100 extracts the character area is displayed for the image processing character image by controlling the character region extracting unit (350) (S130). 문자 영역이 추출되면, 제어부(100)는 필드후보영역 추출부(370)를 제어하여 추출된 문자 영역으로부터 설정된 추출필드 설정정보에 따라 추출하고자 하는 문자가 표시된 필드별 후보 영역을 우선순위에 따라 순차적으로 추출한다(S140). When the character region extracted, the control unit 100 in order of the field candidate area extraction unit fields per candidate region is the character displayed to be extracted according to the extraction field setting information set from the character region extracted by controlling the 370 ranked sequentially and extracted with (S140). 이때 필드후보영역 추출부(370)는 필드별 배열패턴정보 또는 필드별 표시되는 문자 특성을 참조하여 필드별 후보 영역을 추출한다. The field candidate area extraction unit 370, see the text attributes that can be viewed by the array pattern information or field by field, the field is extracted by the candidate region.

필드별 후보 영역이 추출되면, 제어부(100)는 후보 영역들로부터 문자 정보를 획득하고자 하는 최종 필드 영역을 결정하고, 문자정보 추출부(390)를 제어하여 결정된 필드 영역에 표시된 문자 특성을 고려하여 해당 문자 인식 알고리즘(한글, 영어, 및 숫자 중 적어도 어느 하나의 알고리즘)을 이용하여 문자(한글, 영어, 숫자 중 적어도 어느 하나) 정보를 추출한다(S150). When this field-specific candidate area extracted by the control unit 100 considers the character attributes displayed in the determined field area to control the decision to end the field area, and character information extraction unit 390 to obtain character information from the candidate area the character recognition algorithms using the (Hangul, at least one of the algorithms of English, and numbers) extracting characters (Hangul, English, at least any one of a number) information (S150).

이 때, 추출된 필드별 후보 영역이, 이름 필드와 같이, 한글도 표기되었을 것으로 예상되는 필드 후보 영역인 경우에, 문자정보 추출부(390)는 한글 인식 알고리즘을 먼저 적용하여 필드 후보 영역의 문자인식을 수행하여 문자 정보를 추출한다. At this time, the extracted field-specific candidate region, such as the Name field, Hangul even when the field candidate area that is estimated to have been indicated, the character information extracting section 390, the character of the field candidate region by applying a Hangul recognition algorithm first perform recognition to extract the textual information. 동일한 방식으로 추출된 필드별 후보 영역이 영어 또는 숫자로 표기되었을 것으로 예상되는 필드 후보 영역인 경우에, 문자 정보 추출부(390)는 각각 영어 또는 숫자 인식 알고리즘을 먼저 적용하여 필드 후보 영역의 문자인식을 수행하여 문자 정보를 추출한다. In the case where the field-specific candidate area extracted in the same manner as the field candidate area that is estimated to have been written in English or a number, the character information extracting section 390, the character recognition in each of English or by applying a number recognition algorithm first field candidate area to be performed by extracting the text information.

제어부(100)는 문자정보 추출부(390)에서 각 필드 영역으로부터 추출한 문자 정보를 통합하여 하나의 명함 정보를 생성한다(S160). Controller 100 creates a business card information by integrating the character information extracted from each of the field area from the text information extracting unit (390) (S160). 제어부(100)는 통합한 명함 정보를 필드별로 해당 위치를 배치하여 화면에 표시한다(S170). The controller 100 may place the position an integrated card information for each field displayed on the screen (S170). 표시된 명함 정보에 대하여 저장 명령이 입력되면, 제어부(100)는 표시된 명함 정보를 저장부(330)에 저장한다(S180). When the store instruction input with respect to the business card information is displayed, the controller 100 may store the displayed card information in the storage unit (330) (S180). 여기서, 제어부(100)는 표시된 명함 정보에 대한 편집 명령이 입력되면, 입력되는 명령에 따라 명함 정보를 편집할 수 있다. Here, the control unit 100 when the edit command for the displayed card type information, it is possible to edit the card information according to input commands.

따라서, 명함을 촬영한 이미지에 대해 문자 영역을 추출하고 추출하고자 하는 정보가 표시된 필드 후보 영역을 필드별 배열패턴정보 또는 필드별 문자표시특성을 기초로 추출한 후 추출한 필드 영역에 표시된 문자 특성에 대응하는 문자인식 알고리즘을 적용하여 문자 정보를 추출하여 최종적으로 명함 정보를 얻어냄으로써, 명함으로부터 문자 인식을 통한 명함 정보 획득을 보다 신속하고 정확하게 처리할 수 있다. Thus, the field candidate area is information to be extracted character region, and extract displayed for the images taken on the cards extracted based on the field-specific arrangement pattern information or a field-specific character display attributes corresponding to the character attribute indicated in the extracted field region naemeurosseo by applying the character recognition algorithm to extract the text information obtained the last business card information, and the acquired business card information through a character recognition from a business card it can be quickly and more accurately.

도 6은 본 발명의 제1실시예에 따른 도 5의 필드별 후보영역 추출단계를 보다 상세히 도시한 흐름도이고, 도 7a 내지 도 7i 는 발명의 실시예들을 적용할 수 있는 실제 명함의 다양한 예들을 도시한 도면이다. Figure 6 is a different embodiment of the physical card to a flowchart in more detail illustrating the candidate region extraction step for the field in Fig. 5 according to a first embodiment of the present invention, Figures 7a-7i are applied to the embodiments of the invention shows.

도 6을 설명하기에 앞서, 도 6에 적용되는 명함의 예들이 도시된 도 7a 내지도 7i 를 통해 실제 명함의 주요 정보들의 배열 구조에 대해 간략하게 설명한다. Before a description of FIG 6, a brief description about the arrangement of the key information of the actual card Figures 7a to the example of the business card it is shown through 7i are applied in FIG.

도면에서 도 7a 내지 도 7c는 명함의 라인 정렬 방식 특성에 따른 예들을 나타낸 것이다. In the drawing Fig. 7a-7c illustrate examples of the alignment characteristics of the line card. 도 7a는 이름 및 주요 정보들이 왼쪽 정렬 방식으로 표시된 예이고, 도 7b는 가운데 정렬 방식으로 표시된 예이며, 도 7c는 오른쪽 정렬방식으로 표시된 예이다. Figure 7a is an example name, and key information are displayed to the left alignment, Figure 7b is an example shown in the center alignment, Figure 7c is an example shown on the right-aligned. 이러한 정렬 방식에 따른 명함의 라인 정렬 방식 특성 및 이에 따라 표시되는 이름 및 주요정보들의 표시 특성을 포함하는 배열패턴정보는 저장부(330)에 저장된다. This arrangement pattern information including the line alignment characteristic and hence the name, and the display characteristics of the main information that is displayed in accordance with the business card of the alignment are stored in the storage unit 330.

도 7d 내지 도 7i는 명함의 라인 배열 방식 특성에 따른 예들을 나타낸 것이다. Figure 7d to Figure 7i shows the example according to the line array structure characteristic of the card. 구체적으로, 도 7d 내지 도 7f는 이름 및 주요 정보들이 상하로 배열되어 표시된 예를 나타내고, 도 7g 내지 도 7i는 좌우로 배열되어 표시된 예를 나타낸다. Specifically, Figure 7d through 7f are name and key information are arranged up and down indicates the example shown, Fig. 7g to Figure 7i shows an example shown are arranged in right and left. 이러한 배열 방식에 따른 명함의 라인 배열 방식 특성 및 이에 따라 표시되는 이름 및 주요정보들의 표시 특성을 포함하는 배열패턴정보는 저장부(330)에 저장된다. Arrangement information pattern comprising such line array structure characteristics of the card according to the array structure and hence the name, and the display characteristics of the main information that is displayed along is stored in the storage unit 330.

이에 따라, 필드후보영역 추출부(370)는 저장부(330)에 저장된 상기와 같은 명함의 필드별 배열패턴정보를 참조하여 추출하고자 하는 정보가 포함된 필드 영역을 보다 용이하게 추출할 수 있다. Accordingly, the field candidate area extraction unit 370 may extract more easily that contains the information to be extracted by referring to the card field specific arrangement pattern of information, such as the above are stored in the storage unit 330, a field area.

이하, 도 6을 참조하여 본 발명의 제1 실시예에 따른 필드별 후보영역 추출 단계(S140)에 대해 설명한다. With reference to Figure 6 will be described in the first embodiment per field candidate area extracted in accordance with the step (S140) of the present invention. 도 6은 필드별 배열패턴정보를 참조하여 필드 후보 영역을 추출할 없는 경우에 적용된다. Figure 6 is applied to a case with reference to a specific field an array pattern information that is not to extract a field candidate area.

제어부(100)는 필드별 후보 영역의 추출을 필드후보영역 추출부(370)를 제어하여 수행한다. The control unit 100 performs the extraction of the candidate region by field by controlling the field candidate area extraction unit 370. 따라서, 제어부(100)의 제어에 따라 필드후보영역 추출부(370)가 필드별 후보 영역을 추출하는 과정을 이하에서 설명한다. Thus, the extraction unit 370, a field candidate area according to the control of the controller 100 will be described below a process of extracting a specific field candidate area.

도시된 바와 같이, 필드후보영역 추출부(370)는 추출된 문자 영역에 대해 문자들 간의 줄 간격, 각 라인의 높이, 문자열 정렬 방식 등을 이용하여 문자 표시 영역별로 블록을 구분한다(S610). It distinguishes the field candidate area extraction unit 370 is a block for each character display area by using a line between the symbols for the extracted character region interval, the height of each line, a string alignment such as illustrated (S610).

이때 필드후보영역 추출부(370)는 구분된 블록별로 문자 표시 라인의 특성을 체크한다(S630). The field candidate area extraction unit 370 checks the attribute of the character display line for each separated block (S630). 예를 들어, 전화번호가 포함된 블록은 일반적으로 주소, 팩스, 휴대전화번호, 및 이메일 정보 등을 포함하는 라인들이 다른 라인들에 비해 상하 라인 간에 근접하게 분포되어 있으며, 가장 많은 수의 라인을 포함하거나 가로로 가장 긴 라인을 포함할 수 있다. For example, the block with the number generally address, fax lines including a mobile phone number, and e-mail information, and are compared to the other line, and is closer to the distribution between the upper and lower lines, the largest number of lines of It contains or may contain the longest lines horizontally. 이러한 라인별 특성을 필드후보영역 추출부(370)를 통해 체크한다. Checks this line-by-line through a characteristic field candidate area extraction unit 370.

라인별 특성을 체크한 후, 필드후보영역 추출부(370)는 체크한 라인별 특성에 따라 필드의 종류를 추정한다(S650). After checking the characteristics of each line, field candidate area extraction unit 370 estimates a kind of a field, depending on a line-by-line characteristic check (S650). 예를 들어, 필드후보영역 추출부(370)는 가로로 가장 긴 라인에 대해서는 주소 필드인 것으로 추정할 수 있다. For example, the field candidate area extraction unit 370 may estimate that the address field for the longest line horizontally.

필드의 종류를 추정한 후, 필드후보영역 추출부(370)는 해당 필드의 문자 표시 특성을 체크한다(S670). After estimating the type of the field, a field candidate area extraction unit 370 checks the character display characteristics of the corresponding field (S670). 예를 들어, 한글 이름 필드는 일반적으로 명함에서 다 른 필드와의 라인 간격, 위치, 폰트 크기, 문자 간격 등에서 다른 필드와는 구별되는 특징을 가지고 있다. For example, the Hangul Name field is usually a line spacing of the other cards in the field, location, etc. and other fields, font size, character spacing has a distinguishing characteristic. 따라서 본 발명에서는 한글 이름필드 영역의 아래와 같은 특징을 기초로 필드의 표시 특성을 체크할 수 있다. In this invention, it is possible to check the display characteristics of the field on the basis of the following features of Hangul name field area.

첫째, 이름 필드는 다른 정보 필드 영역보다 높이가 상대적으로 높으며, 문자 영역간 간격이 비교적 넓고 일정하다. First, the name of the field is relatively high, the inter-region character spacing is relatively large and a predetermined height than the other information field region. 둘째, 이름이 단독으로 존재할 경우 보통 2~4개의 문자 영역으로 구성되어 있으며, 간격이 일정하다. Second, the name, and is solely composed of usually 2 to 4 of the character region, if present, the spacing is constant. 셋째, 이름이 단독으로 존재하지 않을 경우, 직위나 부서 등과 함께 존재할 수 있으며, 이 경우 동일한 필드 영역의 문자 후보 영역들 사이에 높이차가 존재한다. Third, if the name does not exist by itself, it can exist alongside title or department, in which case the height difference exists between the character candidate area of ​​the same field area. 일반적으로 직위나 부서 등의 문자 영역이 이름 문자 영역보다 높이가 작다. Typically, the height is smaller than the text area, such as job title or department name text area. 넷째, 이름 필드는 상대적으로 높이가 작은 직위나 부서 등의 라인이 위 또는 아래에 존재할 수 있다. Fourth, the name field is a line of relatively small positions or departments that exist in height above or below.

또한 상세정보필드(전화, 팩스, 휴대전화, 이메일 정보 등)는 인식 후에는 각 필드별로 구분되는 키워드나 문자 구성 등의 필드 판별에 사용 가능한 정보가 존재하지만, 인식 전에는 필드 가판별에 사용할 수 있는 뚜렷한 특징은 찾기 어렵다. Further details fields (phone, fax, phone, email, information, etc.) are recognized after that you can present the available information in determining fields such as keywords or text configuration separated each field, but recognize before use in specific fields gapan distinguishing feature is hard to find. 그러나 이들 필드들은 명함에서 주로 함께 모여 라인 블록을 이루고 있으며, 본 실시예에서는 이러한 특징을 활용하여 이들 필드들의 위치를 판단하는 것이 가능하다. However, these fields are mostly gathered together in a business card, and forms a line block, in the present embodiment, it is possible to take advantage of these characteristics to determine the location of these fields. 다음은 상세정보필드들이 포함된 라인 블록 영역을 찾는데 사용 가능한 특징들의 예이다. The following are examples of possible features used to find the detailed information field includes the line block area to.

첫째, 블록 영역에 가장 많은 수의 라인을 포함한다. First, the block area containing the greatest number of lines. 둘째, 첫 번째 특징을 만족하지 않을 경우, 전화번호, 휴대폰, 팩스 정보 등이 연속하여 배열된 라인이나 주소 라인 등의 명함에서 추출된 라인들 중에서 가장 가로의 길이가 긴 라인을 포 함하게 된다. Second, it must first case features are not satisfied, phone number, mobile phone, po fax information, including the most horizontal long line length among the lines extracted from business cards, such as continuously arranged in lines or address lines. 셋째, 다른 라인에 비해 문자 영역의 수가 많다. Third, a large number of character areas as compared to other lines.

필드후보영역 추출부(370)는 이러한 필드별 특성들을 참조하여 인식하고자 하는 정보가 포함되어 존재하는 것으로 판단되는 필드 후보영역을 결정한다(S690). Field candidate area extraction unit 370 and these fields contain information to be recognized with reference to the specific characteristics field determines the candidate area is determined to exist (S690).

도 8은 본 발명의 제1실시예에 따른 도 5의 필드별 후보영역 추출단계(S140)의 일예를 도시한 흐름도이다. 8 is a flow chart showing an example of the first embodiment also extracts a candidate region by a field of 5 according to the step (S140) of the present invention. 도 8은 필드별 배열패턴정보를 참조하여 필드 후보 영역을 추출할 수 없고 라인별 체크 특성이 어려운 경우에 적용 가능한 일예이다. Figure 8 is a possible example applied to a case with reference to a specific field an array pattern information can not be extracted field candidate area line by checking characteristics is difficult.

먼저, 필드후보영역 추출부(370)는 명함 이미지의 맨 위의 중앙 부위에서 맨 처음 인식되는 영역을 "회사명" 필드후보 영역으로 추출한다(S141). First, a field candidate area extraction unit 370 extracts the top area first recognized in the central part of the top of the card image to the "Company Name" field candidate region (S141).

필드후보영역 추출부(370)는 "회사명"필드후보 영역의 아래 영역에 위치하며 글자 크기가 작고 "/"로 구분되어 문자가 표시된 영역을 "소속/직책" 필드후보 영역으로 추출한다(S142). Field candidate area extraction section 370 "Company" located in the lower area of ​​the field candidate area, and is divided smaller the font size to "/" extracting a region where characters shown in the "Member / Title" field candidate region (S142 ). 다만, 이 때, "/" 대신에 빈칸이 소속과 직책을 분리하기 위한 수단으로 사용될 수 있고, 이 경우에 필드후보영역 추출부(370)는 "회사명" 필드후보 영역의 아래 영역에 위치하고, 글자크기가 작은 영역이 빈칸에 의해서 분리된 영역을 "소속/직책" 필드 후보 영역으로 추출할 수 있다. However, in this case, "/", instead can be used as a means for separating the Member and position the blank on, in this case field candidate area extraction unit 370 is "company name" field located in the lower area of ​​the candidate region, the two spaces are separated by a region font size smaller area can be extracted as the "Department / title" field candidate area.

필드후보영역 추출부(370)는 "소속/직책" 필드후보 영역의 아래 또는 오른쪽에 위치하고 글자의 크기가 크고 명함의 가운데 영역에 위치하며 간격을 두고 한 글자씩 표시된 영역을 "이름"필드후보 영역으로 추출한다(S143). Field candidate area extraction section 370 "Member / Title" field candidate area, the area below or located to the right of the size of the letters large and located in the center area of ​​the card and displayed with every single character intervals of the "Name" field candidate area and extracted with (S143).

필드후보영역 추출부(370)는 "이름"필드후보 영역의 아래 부분에 위치하여 작은 글씨로 그룹화되어 표시된 패러그래프 영역을 "상세정보" 필드후보 영역으로 추출한다. Field candidate area extraction unit 370 extracts a paragraph region indicated are grouped into small print located at the bottom of the "Name" field candidate area as the "detailed information" field candidate area.

보다 상세하게, 필드후보영역 추출부(370)는 "-"를 기준으로 3개의 숫자들이 구분되어 표시된 영역을 "우편번호" 필드후보 영역으로 추출한다(S144). More specifically, the field candidate area extraction unit 370 is "-" extracts are shown, separated by three numbers, based on the region to the "zip code" field candidate region (S144).

필드후보영역 추출부(370)는 "우편번호" 필드후보 영역 다음에 표시되며 시 또는 도로 시작하는 영역을 "주소" 필드후보 영역으로 추출한다(S145). Field candidate area extraction unit 370 is shown in the following "zip code" field candidate area, and extracting a region in which the road or when starting with the "Address" field candidate region (S145).

필드후보영역 추출부(370)는 "주소"필드후보 영역 아래쪽에 위치하며 국가 또는 지역 번호로 시작하는 숫자 표시 영역을 "전화번호"필드후보 영역으로 추출한다(S146). The field candidate area extraction unit 370 is "address" at the bottom field candidate area extracted, and the number display area, starting with the country or area code, a "telephone number" field candidate region (S146).

필드후보영역 추출부(370)는 "전화번호" 필드후보 영역 아래 또는 옆에 위치하며, "전화번호"필드후보 영역과 동일한 국가 또는 지역 번호로 시작하는 숫자가 표시된 영역을 "팩스번호"필드후보 영역으로 추출한다(S147). Field candidate area extraction section 370 "telephone number" field candidate area is located below or to the side, "Phone Number" field candidate area and the area numbers are displayed starting with the same country or area code, "Fax Number" field candidate It extracts a region (S147).

필드후보영역 추출부(370)는 "팩스번호"필드후보 영역의 아래에 위치하며 이동통신 사업자 지정번호로 시작하는 숫자 영역을 "핸드폰번호"필드후보 영역으로 추출한다(S148). Field candidate area extraction unit 370 extracts a "Fax Number" number region located under the field candidate area starts with a designated network operator code to "Cell Number" field candidate region (S148).

필드후보영역 추출부(370)는 "핸드폰번호" 필드후보 영역의 아래에 위치하며 특수문자 "@"를 포함하는 영문으로 표시된 영역을 "이메일 주소"필드후보 영역으로 추출한다(S149). Field candidate area extraction unit 370 extracts the "mobile phone number" located at the bottom of the field candidate area and the area indicated in English that contain special characters "@" in the "Email Address" field candidate region (S149).

필드후보영역 추출부(370)는 "http" 또는 "www"를 포함하는 표시 영역을 "홈페이지 주소"필드후보 영역으로 추출한다. Field candidate area extraction unit 370 extracts a display area including the "http" or "www" to "Home Address" field candidate area.

상기와 같이 필드의 특성에 따른 명함 이미지에서의 표시 영역 및 문자 특성을 기초로 해당 영역에 대한 필드후보 영역을 결정하기 위한 정보는 저장부(330)에 저장되어 있다. Information for determining a field candidate area for the area based on the display region and the character property of the card images in accordance with the characteristics of the field as described above is stored in the storage unit 330.

이상에서는 본 발명에서 특정의 바람직한 실시예에 대하여 도시하고 또한 설명하였다. In the above illustrated with respect to certain preferred embodiments of the present invention, which was also described. 그러나, 본 발명은 상술한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다. The present invention, however, possible that shall not be limited to the embodiments described above, those skilled in the art to which this invention pertains the art without departing from the subject matter of the present invention to attach in the claims various anyone modified embodiment will be.

본 발명에 따르면, 명함을 촬영한 이미지에 대해 문자 영역을 추출하고 추출하고자 하는 정보가 표시된 필드 후보 영역을 기 설정된 필드별 배열패턴정보 또는 필드별 문자 표기 특성 정보를 참조하여 추출한 후 이에 대한 문자 정보를 추출하여 명함 정보를 얻어냄으로써, 명함으로부터 문자 인식을 통한 명함 정보 획득을 보다 신속하게 처리할 수 있다. Character information about it was extracted according to the present invention, by extracting a text region for image taking a business card, and the information is reference to an array pattern information, the displayed field candidate area group-specific set field or a field-specific character representation attribute information to be extracted the extract obtained naemeurosseo the business card information, the card information obtained by the character recognition from a business card to be processed more quickly.

또한 명함 이미지의 문자 영역으로부터 필드별 문자 특성에 따라 문자 정보를 추출하고자 하는 필드 후보를 추정한 후 이에 대한 문자 정보를 추출함으로써, 명함으로부터 보다 정확한 문자 인식을 통한 명함 정보 획득이 가능하다. In addition, by extracting the character information on this and then estimates the candidate field to be extracted character information according to the text property-specific fields from the text region of a card image, it is possible to obtain the card information by a more accurate character recognition from the business card.

뿐만 아니라, 명함으로부터 문자 정보를 추출하고자 하는 추출필드를 미리 설정하고 설정정보를 기초로 문자 정보를 추출하고자 하는 필드 후보 영역만을 추출하여 추출된 후보 필드에 대해서만 문자 정보를 추출함으로써, 명함으로부터 필요한 정보만을 선택적으로 신속하게 획득할 수 있다. By not only extracts the character information only for the candidate fields extracted by setting the extraction field to extract the text information from the card in advance, and extracts only the field candidate area to extract the character information based on the setting information, and information from the business card only it can be selectively quickly obtained.

Claims (18)

  1. 카메라가 구비된 휴대용 단말기를 이용한 명함 인식 방법에 있어서, In the card recognition method using a portable terminal equipped with a camera,
    a)상기 명함의 필드별 문자 표기 특성을 설정하는 단계; a) step of setting the field-specific character representation characteristic of the card;
    b)명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 단계; b) the business card in the recognition mode, extracts the character region from the business card image photographed by the camera;
    c)상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보 영역을 상기 필드별 문자 표기 특성을 참조하여 추출하는 단계; c) extracting by referring to the field indicated by the character attributes of the field-specific candidate region estimated to be the title information for that field to be extracted from the business card image;
    d)상기 필드별 후보 영역 중 최우선순위를 갖는 필드 후보 각각으로부터 문자 정보를 추출하는 단계; d) extracting the character information from each of the candidate with the highest priority field of the field-specific candidate area ranking; And
    e)상기 각각 추출한 문자 정보를 통합하는 단계를 포함하는 것을 특징으로 하는 명함 인식 방법. e) card recognition method comprising the step of integrating the respective extracted text information.
  2. 제 1항에 있어서, According to claim 1,
    상기 통합한 문자 정보로 구성되는 명함 데이터를 화면에 표시하는 단계; Displaying the card data that is composed of the combined character information on the display; And
    상기 표시된 명함 데이터에 대한 수정 명령이 입력되면, 입력되는 명령에 따라 상기 명함 데이터를 수정하여 표시하는 단계를 더 포함하는 것을 특징으로 하는 명함 인식 방법. When the modification command is input to the card data is displayed, according to input commands card recognition according to claim 1, further comprising the step of displaying by modifying the card data method.
  3. 제 1항 또는 제 2항에 있어서, According to claim 1 or 2,
    상기 통합한 문자 정보로 구성되는 명함 데이터 및 상기 수정된 명함 데이터를 저장 명령에 따라 저장하는 단계를 더 포함하는 것을 특징으로 하는 명함 인식 방법. Card recognition method according to claim 1, further comprising the step of storing in accordance with the store instruction to the card data and the corrected card data consisting of the combined character information.
  4. 제 1항에 있어서, According to claim 1,
    상기 a) 단계 후, 상기 명함의 전체 필드들 중에서 획득하고자 하는 정보가 포함되어 있는 필드를 설정하는 추출필드 설정단계를 더 포함하며, Further comprising an extraction field, a setting step of setting a field containing the information to be obtained after the step a), among all the fields of the business card,
    이에 따라, 상기 c) 단계에서는 상기 필드별 문자 표기 특성을 참조하여 상기 명함 이미지로부터 상기 설정된 추출필드에 대응하는 필드후보 영역을 추출하는 것을 특징으로 하는 명함 인식 방법. In this way, the c) step, the card recognition method, characterized in that with reference to said field by the character representation of the field feature extraction candidate region corresponding to the extracted field is set from the card images.
  5. 제 1 항에 있어서, According to claim 1,
    상기 명함의 필드는, 회사 마크, 회사명, 부서/직책, 이름, 및 상세정보 필드 중 적어도 하나를 포함하고, Field of the cards, the company includes the mark, company name, department / position, name and details at least one of the fields,
    상기 상세정보 필드는, 우편번호, 주소, 전화번호, 팩스번호, 핸드폰번호, 홈페이지 주소, 및 이메일 주소 필드 중 적어도 하나를 포함하는 것을 특징으로 하는 명함 인식 방법. The Details fields, zip code, address, telephone number, fax number, mobile phone number, business card recognition method, comprising: at least one of a home address and e-mail address field.
  6. 제 5항에 있어서, 6. The method of claim 5,
    상기 필드별 문자 표기 특성은, Character indicated by the characteristic field,
    상기 회사 마크가 상기 명함 이미지의 맨 왼쪽 상단에 위치하고, 상기 회사명은 상기 명함 이미지의 맨 위의 중앙 부위에 위치하며, 상기 부서/직책이 상기 회사명 필드 영역의 아래 영역에 위치하며 글자 크기가 작고 "/"또는 빈칸으로 구분되어 표시되고, 상기 이름이 상기 소속/직책 필드 영역의 아래 또는 오른쪽에 위치하고 글자의 크기가 크고 명함의 가운데 영역에 위치하며 간격을 두고 한 글자씩 표시되며, 상기 상세정보가 이름 필드 영역의 아래 부분에 위치하여 작은 글씨로 그룹화되어 표시된 패러그래프 형태를 갖는 것을 특징으로 하는 명함 인식 방법. The company marks are located on the top left of the top of the card image, the company name and position in the top center portion of the top of the card image, the department / office is located in the lower area of ​​the company name field area and small in font size "/" or being displayed, separated by spaces, and the name is located on the bottom or right of the affiliation / title field area located in the center area of ​​the size of the font bigger cards and are displayed with every single character spacing, the details card recognition method, characterized in that has a paragraph marked form are grouped into small print located at the bottom of the name field area.
  7. 제 6 항에 있어서, 7. The method of claim 6,
    상기 필드별 문자 표기 특성은, Character indicated by the characteristic field,
    상기 상세정보 필드 중, Details of the information field,
    상기 우편번호가 "-"를 기준으로 3개의 숫자들이 구분되어 표시되고, 상기 주소가 상기 우편번호 필드 영역 다음에 표시되며 시 또는 도로 시작하며, 상기 전화번호가 상기 주소 필드 영역 아래쪽에 위치하며 국가 또는 지역 번호로 시작하며, 상기 팩스번호가 상기 전화번호 필드 영역 아래 또는 옆에 위치하여 상기 전화번호 필드와 동일한 국가 또는 지역 번호로 시작하는 숫자가 표시되고, 상기 핸드폰번호가 상기 팩스번호 필드 영역의 아래에 위치하여 이동통신 사업자 지정번호로 시작하는 숫자로 구성되며, 상기 홈페이지 주소가 "http" 또는 "www"를 포함하는 문자로 표시되며, 상기 이메일 주소가 특수문자 "@"를 포함하는 영문으로 표시되는 것을 특징으로 하는 명함 인식 방법. The zip code "-" is displayed with three digits are separated based on the address, the zip code field area are shown in the following hour, or start the road, and the phone number located on the bottom of the Address field, region and country or start with the area code, and the fax number is the phone number field area located below or to the side, and the display numbers that begin with the same country or area code and the phone number field, the cell phone number of the fax number field area located below consists of numbers beginning with designated mobile operators numbers, in English, that the Web address including "http" or "www" is displayed as text that includes, the above email address special character "@" how to recognize a business card being shown.
  8. 구비된 카메라를 이용하여 명함을 인식하기 위한 휴대용 단말기에 있어서, Using a camera provided in the mobile terminal for recognizing the business card,
    상기 명함 인식을 위한 프로그램 및 상기 명함의 필드별 문자 표기 특성에 대한 설정 정보를 저장하는 저장부; A storage unit for storing the setting information for the program title and text specific attributes field in the card for the card recognition;
    명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 문자영역 추출부; In the card recognition mode, character region extraction unit for extracting a character area from the card image photographed by the camera;
    상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보 영역을 상기 필드별 문자 표기 특성을 참조하여 추출하는 필드후보영역 추출부; Wherein the field-specific candidate region estimated from the card image to be the information for that field is marked to be extracted by referring to the field attribute character representation to extract extraction field candidate area to unit;
    상기 필드별 후보 영역 중 최우선순위를 갖는 필드 후보 각각으로부터 문자 정보를 추출하는 문자정보 추출부; Character information extracting unit for extracting character information from each of the candidate with the highest priority field of the field-specific candidate area ranking; And
    상기 각각 추출한 문자 정보를 통합하여 명함 데이터로서 상기 저장부에 저장하는 제어부를 포함하는 것을 특징으로 하는 휴대용 단말기. The portable terminal by integrating each of the extracted character information as the card data; and a controller for storage in the storage unit.
  9. 제 10 항에 있어서, 11. The method of claim 10,
    상기 제어부는, 입력되는 명령에 따라 상기 명함의 전체 필드들 중에서 획득하고자 하는 정보가 포함되어 있는 추출 필드를 설정하여 상기 저장부에 저장하고, The controller is configured to set the extracted field containing the information to be acquired from among the entire field of the card in accordance with the input command stored in the storage unit,
    상기 필드후보영역 추출부는 상기 필드별 문자 표기 특성을 참조하여 상기 명함 이미지로부터 상기 설정된 추출 필드에 대응하는 필드후보 영역을 추출하는 것을 특징으로 하는 휴대용 단말기. The field candidate area extraction part that the mobile terminal is characterized in that with reference to the field indicated by the character attribute field candidate area extracted corresponding to the set extraction field, from the business card image.
  10. 제 8 항에 있어서, The method of claim 8,
    상기 명함의 필드는, 회사 마크, 회사명, 부서/직책, 이름, 및 상세정보 필드 중 적어도 하나로 포함하는 것을 특징으로 하는 휴대용 단말기. Field of the cards, the company mark, company name, department / position, name, and detailed information portable terminal comprising at least one of the fields.
  11. 제 10 항에 있어서, 11. The method of claim 10,
    상기 상세정보 필드는, 우편번호, 주소, 전화번호, 팩스번호, 핸드폰번호, 홈페이지 주소, 및 이메일 주소 필드 중 적어도 하나를 포함하는 것을 특징으로 하는 휴대용 단말기. The Details fields, zip code, address, telephone number, fax number, mobile phone number, a mobile terminal comprises at least one home address, and email address field.
  12. 제 11 항에 있어서, 12. The method of claim 11,
    상기 제어부는 상기 통합한 명함 데이터를 화면에 표시하고, 상기 표시된 명함 데이터에 대한 수정 명령이 입력되면 입력되는 명령에 따라 상기 명함 데이터를 수정하여 표시하는 것을 특징으로 하는 휴대용 단말기. The control unit the mobile terminal, characterized in that for displaying and modifying the card data in accordance with the command represented by the card data in the integrated screen, and when the modified input command is input to the card data is displayed.
  13. 카메라가 구비된 휴대용 단말기를 이용한 명함 인식 방법에 있어서, In the card recognition method using a portable terminal equipped with a camera,
    상기 명함의 필드별 문자 배열패턴을 설정하는 단계; Setting a field-specific character array pattern of the card;
    명함 인식 모드에서, 상기 카메라를 통해 촬영된 명함 이미지로부터 문자 영역을 추출하는 단계; In the card recognition mode, a step of extracting a character area from the card image photographed by the camera;
    상기 명함 이미지로부터 추출하고자 하는 해당 필드의 정보가 표기되어 있을 것으로 추정되는 필드별 후보영역을 상기 필드별 문자 배열패턴정보를 참조하여 추출하는 단계; Extracting with reference to said field by the character array pattern information to the appropriate field by field candidate area in which information is assumed to be the title to be extracted from the business card image;
    상기 추출한 필드별 후보영역에 표기된 각각의 문자 특성에 대응하여 인식 가능한 문자인식 알고리즘을 적용하여 해당 문자정보를 추출하는 단계; Extracting the character information corresponding to each character displayed on the characteristics of the extracted field candidate region by applying a recognizable character recognition algorithm; And
    상기 각각 추출한 문자 정보를 통합하는 단계를 포함하는 것을 특징으로 하는 명함 인식 방법. Card recognition method comprising the steps of: integrating the respective extracted text information.
  14. 제 13 항에 있어서, 14. The method of claim 13,
    상기 문자정보 추출단계에서는, In the character information extracting step,
    상기 추출한 필드 후보영역이 한글로 표기되었을 것으로 예상되는 문자 영역인 경우에는, 한글 인식 알고리즘을 적용하여 상기 추출한 필드 후보영역으로부터 한글 문자를 인식하여 추출하는 것을 특징으로 하는 명함 인식 방법. Card recognition method characterized in that when the character region is expected to have the extracted field candidate area is expressed as Hangul, extracted by recognizing the Hangul character from the field candidate area extracted by applying the Hangul recognition algorithm.
  15. 제 13 항에 있어서, 상기 문자정보 추출단계에서는, 14. The method of claim 13, wherein in the character information extraction step,
    상기 추출한 필드 후보영역이 영어 및 숫자로 표기되었을 것으로 예상되는 문자 영역인 경우에는, 영어/숫자 인식 알고리즘을 적용하여 상기 추출한 필드 후보영역으로부터 영어/숫자 문자를 인식하여 추출하는 것을 특징으로 하는 명함 인식 방법. In the case where the extracted field candidate area is a character area, which is expected to have been written in English, numbers, business card recognition, characterized in that that by applying the English / number recognition algorithm to extract the recognition of English / number characters from the extracted field candidate area Way.
  16. 제 15 항에 있어서, 16. The method of claim 15,
    상기 필드별 후보영역 추출단계는, The candidate area extraction step for the field,
    상기 추출된 문자 영역에 대해 문자들 간의 줄 간격, 각 라인의 높이, 문자열 정렬 방식을 고려하여 문자 표시 영역별로 블록을 구분하는 단계; The step of separating the characters of the line spacing, the character block for each display area in consideration of the height, the string alignment of each line between a character area for the extracted;
    상기 구분된 블록별로 문자 표시 라인의 특성을 체크하는 단계; Step of checking the characteristics of the character display line by the the sorting block;
    상기 체크한 라인별 특성에 따라 필드의 종류를 추정하는 단계; Estimating the type of the field in accordance with the said check line-by-line properties;
    상기 추정된 각 필드에 대해 문자 표시 특성을 체크하는 단계; Checking the text display attributes for each field, the estimated; And
    상기 문자 표시 특정에 따라 상기 필드별 후보영역을 결정하는 단계를 포함하는 것을 특징으로 하는 명함 인식 방법. Depending on the character display particular card recognition method comprising the step of determining the specific field candidate area.
  17. 제 13 항에 있어서, 14. The method of claim 13,
    상기 명함의 필드는, 회사 마크, 회사명, 부서/직책, 이름, 및 상세정보 필드 중 적어도 하나를 포함하는 것을 특징으로 하는 명함 인식 방법. Field of the cards, the company mark, company name, department / position, name and details business card recognition method comprising at least one field.
  18. 제 17 항에 있어서, 18. The method of claim 17,
    상기 상세정보 필드는, 우편번호, 주소, 전화번호, 팩스번호, 핸드폰번호, 홈페이지 주소, 및 이메일 주소 필드 중 적어도 하나를 포함하는 것을 특징으로 하는 명함 인식 방법. The Details fields, zip code, address, telephone number, fax number, mobile phone number, business card recognition method, comprising: at least one of a home address and e-mail address field.
KR20060002916A 2006-01-10 2006-01-10 Portable terminal and method for recognizing name card using having camera KR100664421B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20060002916A KR100664421B1 (en) 2006-01-10 2006-01-10 Portable terminal and method for recognizing name card using having camera

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20060002916A KR100664421B1 (en) 2006-01-10 2006-01-10 Portable terminal and method for recognizing name card using having camera
PCT/KR2007/000158 WO2007081147A1 (en) 2006-01-10 2007-01-09 Portable terminal having camera for recognizing name card and method thererof using the same

Publications (1)

Publication Number Publication Date
KR100664421B1 true KR100664421B1 (en) 2007-01-03

Family

ID=37866849

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20060002916A KR100664421B1 (en) 2006-01-10 2006-01-10 Portable terminal and method for recognizing name card using having camera

Country Status (2)

Country Link
KR (1) KR100664421B1 (en)
WO (1) WO2007081147A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101796946B1 (en) * 2017-02-02 2017-11-13 에스비주식회사 Enterprise reputation information service system

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9769354B2 (en) 2005-03-24 2017-09-19 Kofax, Inc. Systems and methods of processing scanned data
US9576272B2 (en) 2009-02-10 2017-02-21 Kofax, Inc. Systems, methods and computer program products for determining document validity
US9767354B2 (en) 2009-02-10 2017-09-19 Kofax, Inc. Global geographic information retrieval, validation, and normalization
US9349046B2 (en) 2009-02-10 2016-05-24 Kofax, Inc. Smart optical input/output (I/O) extension for context-dependent workflows
CN106170798A (en) * 2014-04-15 2016-11-30 柯法克斯公司 Smart optical input/output (I/O) extension for context-dependent workflows
US8774516B2 (en) 2009-02-10 2014-07-08 Kofax, Inc. Systems, methods and computer program products for determining document validity
US8958605B2 (en) 2009-02-10 2015-02-17 Kofax, Inc. Systems, methods and computer program products for determining document validity
US8374646B2 (en) 2009-10-05 2013-02-12 Sony Corporation Mobile device visual input system and methods
US9349063B2 (en) 2010-10-22 2016-05-24 Qualcomm Incorporated System and method for capturing token data with a portable computing device
US9355312B2 (en) 2013-03-13 2016-05-31 Kofax, Inc. Systems and methods for classifying objects in digital images captured using mobile devices
CN105518704A (en) 2013-05-03 2016-04-20 柯法克斯公司 Systems and methods for detecting and classifying objects in video captured using mobile devices
US9208536B2 (en) 2013-09-27 2015-12-08 Kofax, Inc. Systems and methods for three dimensional geometric reconstruction of captured image data
WO2015073920A1 (en) 2013-11-15 2015-05-21 Kofax, Inc. Systems and methods for generating composite images of long documents using mobile video data
US9760788B2 (en) 2014-10-30 2017-09-12 Kofax, Inc. Mobile document detection and orientation based on reference object characteristics
US9779296B1 (en) 2016-04-01 2017-10-03 Kofax, Inc. Content-based detection and three dimensional geometric reconstruction of objects in image and video data

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002152696A (en) 2000-11-10 2002-05-24 Hitachi Ltd Portable terminal
KR20040023498A (en) * 2002-09-11 2004-03-18 삼성전자주식회사 Device and method for recognizing character image in picture screen
KR20050017316A (en) * 2003-08-12 2005-02-22 삼성전자주식회사 An Apparatus And Method For Managing A Phonebook In A Mobile Terminal Having Camera
KR20050061172A (en) * 2003-12-18 2005-06-22 엘지전자 주식회사 Phone number automatic storing arraratus and method for mobile communication terminal using imaging device
KR20050077840A (en) * 2004-01-28 2005-08-04 주식회사 팬택앤큐리텔 Method of perceiving images in the mobile communication terminal

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4383790B2 (en) * 2003-08-06 2009-12-16 日立オムロンターミナルソリューションズ株式会社 Portable information terminal
KR100459074B1 (en) * 2004-08-05 2004-11-19 주식회사 인지소프트 Method for recognizing name card by mobile phone having camera

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002152696A (en) 2000-11-10 2002-05-24 Hitachi Ltd Portable terminal
KR20040023498A (en) * 2002-09-11 2004-03-18 삼성전자주식회사 Device and method for recognizing character image in picture screen
KR20050017316A (en) * 2003-08-12 2005-02-22 삼성전자주식회사 An Apparatus And Method For Managing A Phonebook In A Mobile Terminal Having Camera
KR20050061172A (en) * 2003-12-18 2005-06-22 엘지전자 주식회사 Phone number automatic storing arraratus and method for mobile communication terminal using imaging device
KR20050077840A (en) * 2004-01-28 2005-08-04 주식회사 팬택앤큐리텔 Method of perceiving images in the mobile communication terminal

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101796946B1 (en) * 2017-02-02 2017-11-13 에스비주식회사 Enterprise reputation information service system

Also Published As

Publication number Publication date Type
WO2007081147A1 (en) 2007-07-19 application

Similar Documents

Publication Publication Date Title
US6594503B1 (en) Communication device with dial function using optical character recognition, and method
US7787693B2 (en) Text detection on mobile communications devices
US20140270349A1 (en) Systems and methods for classifying objects in digital images captured using mobile devices
US5907835A (en) Electronic filing system using different application program for processing drawing commands for printing
US20050205671A1 (en) Cellular phone with scanning capability
US8528818B2 (en) Optical reader having an imager
US7450760B2 (en) System and method for capturing and processing business data
US20060173859A1 (en) Apparatus and method for extracting context and providing information based on context in multimedia communication system
US20020131636A1 (en) Palm office assistants
US20030120478A1 (en) Network-based translation system
US20140270536A1 (en) Systems and methods for classifying objects in digital images captured using mobile devices
US20080146274A1 (en) Method and apparatus for storing image file in mobile terminal
US20030062419A1 (en) Optical reader having a color imager
US20050050165A1 (en) Internet access via smartphone camera
US20050041862A1 (en) Mobile phone system with a card character recognition function
US20020058536A1 (en) Mobile phone
US6598798B1 (en) Code reader and code reading method for color image
US7433517B2 (en) Image processing apparatus and method for converting image data to predetermined format
US6351559B1 (en) User-enclosed region extraction from scanned document images
US20140024411A1 (en) Multifunction Mobile Device and Cellular Phone with Touch Screen and Internet Connectivity
US20010044324A1 (en) Cellular telephone
JPH10289243A (en) Data retrieval system
JP2005267146A (en) Method and device for creating email by means of image recognition function
US20080170786A1 (en) Image processing system, image processing method, and image processing program
US20120287070A1 (en) Method and apparatus for notification of input environment

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121221

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140113

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141226

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20151210

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20161226

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20171211

Year of fee payment: 12