KR20060114137A - Mobile phone for having a function of character recognition and method of treating a call using it - Google Patents

Mobile phone for having a function of character recognition and method of treating a call using it Download PDF

Info

Publication number
KR20060114137A
KR20060114137A KR1020050035270A KR20050035270A KR20060114137A KR 20060114137 A KR20060114137 A KR 20060114137A KR 1020050035270 A KR1020050035270 A KR 1020050035270A KR 20050035270 A KR20050035270 A KR 20050035270A KR 20060114137 A KR20060114137 A KR 20060114137A
Authority
KR
South Korea
Prior art keywords
phone number
mobile communication
communication terminal
call
camera
Prior art date
Application number
KR1020050035270A
Other languages
Korean (ko)
Inventor
배형준
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020050035270A priority Critical patent/KR20060114137A/en
Publication of KR20060114137A publication Critical patent/KR20060114137A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/22Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/235Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72466User interfaces specially adapted for cordless or mobile telephones with selection means, e.g. keys, having functions defined by the mode or the status of the device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Abstract

A mobile communication terminal having a function for recognizing characters and a call processing method using the same are provided to convert a character image photographed by a camera into a readable text file and recognize a phone number from the character image before executing a real time call so that a user can execute the real time call by using the phone number without inputting the phone number one by one. A mobile communication terminal comprises the followings: a keypad(110); a memory(130); a character reader(140); and a controller(150). According as character images photographed by a camera(120) are transmitted, the character reader(140) converts the character image into a readable text file and extracts a phone number from the converted text file before transmitting the extracted phone number to the outside. According as the phone number extracted from the character reader(140) is transmitted, the controller(150) recognizes the phone number by referring to character information stored in the memory(130) and outputs the phone number on a display(160) before executing a real time call by using the phone number outputted on the display(160).

Description

문자 인식 기능을 갖는 이동통신 단말기 및 이를 이용한 호처리 방법{Mobile phone for having a function of character recognition and method of treating a call using it}Mobile communication terminal having a character recognition function and call processing method using the same {Mobile phone for having a function of character recognition and method of treating a call using it}

도 1은 본 발명에 따른 촬상용 카메라가 내장된 이동통신 단말기의 사시도.1 is a perspective view of a mobile communication terminal having a camera for imaging according to the present invention.

도 2는 본 발명에 따른 촬상용 카메라가 내장된 이동통신 단말기의 내부 구성도.2 is an internal configuration diagram of a mobile communication terminal having a camera for imaging according to the present invention;

도 3a 내지 도 3c는 본 발명에 따른 사용자가 선택한 메뉴항목을 표시하는 액정화면.3A to 3C are LCD screens showing menu items selected by a user according to the present invention.

도 4는 본 발명에 따른 이동통신 단말기의 카메라에 의해 촬영된 전화번호를 출력하는 액정화면.4 is a liquid crystal display for outputting a telephone number photographed by a camera of a mobile communication terminal according to the present invention.

도 5는 본 발명에 따른 이동통신 단말기의 카메라에 의해 촬영된 전화번호로 실시간 통화를 수행하는 과정을 도시한 순서도.5 is a flowchart illustrating a process of performing a real-time call to a phone number photographed by a camera of a mobile communication terminal according to the present invention.

도 6은 본 발명에 따른 이동통시 단말기의 카메라를 통해 문자 이미지를 촬영하는 과정을 도시한 순서도.6 is a flowchart illustrating a process of photographing a text image through a camera of a mobile communication terminal according to the present invention.

도 7은 본 발명에 따른 이동통신 단말기가 카메라에 의해 촬영된 문자 이미로부터 전화번호를 인식하여 표시부상에 출력하는 과정을 도시한 순서도.7 is a flowchart illustrating a process in which a mobile communication terminal recognizes a telephone number from an image already taken by a camera and outputs the telephone number on a display unit.

도 8은 본 발명에 따른 이동통신 단말기의 표시부상에 출력된 전화번호로 실 시간 통화를 수행하는 과정을 도시한 순서도.8 is a flowchart illustrating a process of performing a real time call with a phone number output on a display unit of a mobile communication terminal according to the present invention.

* 도면의 주요 부분에 대한 부호의 설명 *Explanation of symbols on the main parts of the drawings

100 : 이동통신 단말기 110 : 키패드 100: mobile communication terminal 110: keypad

120 : 카메라 130 : 메모리120: camera 130: memory

140 : 문자 판독부 150 : 제어부140: character reading unit 150: control unit

160 : 표시부 170 : 무선주파수 처리부160: display unit 170: radio frequency processing unit

180 : 스피커 190 : 마이크 180: speaker 190: microphone

본 발명은 문자인식 기능을 갖는 이동통신 단말기 및 이를 이용한 콜(call)처리 방법에 관한 것으로서, 보다 구체적으로는 카메라에 의해 촬영된 문자 이미지로부터 전화번호를 인식하여 실시간으로 통화를 수행하는 이동통신 단말기 및 이를 이용한 호처리 방법에 관한 것이다.The present invention relates to a mobile communication terminal having a text recognition function and a call processing method using the same, and more particularly, a mobile communication terminal which recognizes a phone number from a text image photographed by a camera and makes a call in real time. And it relates to a call processing method using the same.

이동통신 단말기가 사람들의 필수품으로 자리를 잡아가고 있는 상황에서, 젊은이들은 대부분 하나 이상의 이동통신 서비스를 이용하고 있다. 특히, 10대나 20대 초반의 사용자들은 서로간의 의사소통을 대부분 이동통신 서비스를 이용하여 하고 있으며, 특히 문자메시지 및 음성메시지를 많이 이용하고 있다. With mobile terminals becoming a necessity for people, young people are mostly using more than one mobile service. In particular, users in their teens or early twenties mostly use mobile communication services to communicate with each other, especially text and voice messages.

통상적으로, 이동통신 단말기의 사용자들은 기본적인 통화 기능 이외에 부가적으로 구현된 복수의 기능들 중의 하나인 단문메시지 서비스(SMS : Short Message Service) 기능을 이용해 문자 등의 메시지를 자신이 원하는 상대측 이동통신 단말기로 송신할 수 있으며, 임의의 이동통신 단말기에 의해 전송된 메시지를 수신할 수도 있다.Typically, users of a mobile communication terminal use a short message service (SMS) function, which is one of a plurality of functions additionally implemented in addition to the basic call function, to request a message such as a text message. It may transmit a message, and may receive a message transmitted by any mobile communication terminal.

최근, 이동통신 단말기는 무선통신 기술이 고도로 발달됨에 따라 음성통화, 문자 및 음성 메시지 전송 등과 같은 기본 서비스, 게임, 벨소리, 음악 및 동영상 등의 다양한 컨텐츠 서비스와 각종 부가적인 기능을 사용자들에게 제공하고 있다.Recently, mobile communication terminals have provided various additional services such as basic services such as voice call, text and voice message transmission, games, ringtones, music and video, and various additional functions as wireless communication technology is highly developed. have.

종래, 이와 같은 다양한 기능을 갖는 이동통신 단말기를 통해 명함, 팜플렛 및 광고판 등의 기록매체에 기록된 전화번호로 통화를 수행하고자 하는 경우, 이동통신 단말기의 사용자는 해당 기록매체이 기록된 전화번호를 일일이 키패드를 통해 입력해야만 하는 사용상의 불편함이 있었다.Conventionally, when a user wants to make a call to a phone number recorded on a recording medium such as a business card, a brochure, a billboard or the like through a mobile communication terminal having various functions as described above, the user of the mobile communication terminal may read the telephone number on which the recording medium is recorded. There was a inconvenience in using the keypad to enter it.

본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 이동통신 단말기에 내장된 카메라에 의해 촬영된 문자 이미지로부터 전화번호를 인식하여 실시간 통화를 수행하는 이동통신 단말기 및 이를 이용한 호처리 방법을 제공하는 데 그 목적이 있다.The present invention has been made to solve the above problems, and provides a mobile communication terminal and a call processing method using the same to perform a real-time call by recognizing a phone number from a text image taken by a camera embedded in the mobile communication terminal Its purpose is to.

이와 같은 목적을 달성하기 위한 본 발명은, 문자 이미지를 촬영하기 위한 카메라가 내장된 이동통신 단말기에 있어서, 통화 서비스 및 각종 부가 서비스에 관한 키신호 등을 입력하기 위한 키패드; 카메라에 의해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환시키는 판독용 프로그램 및 각종 문자정보를 저장하 는 메모리; 카메라로부터 촬영된 문자 이미지가 전달됨에 따라, 판독용 프로그램을 통해 문자 이미지를 판독 가능한 텍스트 파일로 변환하고, 변환된 텍스트 파일로부터 전화번호를 추출하여 외부로 전달하는 문자 판독부; 문자 판독부로부터 추출된 전화번호가 전달됨에 따라, 메모리에 저장된 문자정보를 참조하여 해당 전화번호를 인식하여 표시부상에 출력시키고, 키패드를 통해 통화용 키신호가 입력되면 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 제어부를 포함하여 구성된 것을 특징으로 한다.According to an aspect of the present invention, there is provided a mobile communication terminal including a camera for capturing a text image, comprising: a keypad for inputting a key signal for a call service and various additional services; A memory for storing a program for reading and converting a variety of text information, the text image being photographed by a camera into a readable text file; A text reading unit for converting the text image into a readable text file through a program for reading, and extracting a phone number from the converted text file and transferring the text image photographed from the camera to the outside; As the phone number extracted from the character reading unit is transferred, the phone number is recognized by the character information stored in the memory and the phone number is recognized and output on the display unit. It characterized in that it comprises a control unit for performing a real-time call.

본 발명은, 소정의 문자 이미지를 촬영하는 카메라가 내장된 이동통신 단말기의 실시간 호처리 방법에 있어서, 카메라에 의해 촬영된 소정의 문자 이미지를 입력받는 단계; 카메라로부터 촬영된 문자 이미지가 입력됨에 따라, 소정의 문자 판독용 프로그램을 구동시켜 문자 이미지로부터 전화번호를 추출하여 표시부상에 출력시키는 단계; 및 사용자 명령에 따라 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 단계를 포함하여 구성된 것을 특징으로 한다.The present invention provides a real-time call processing method of a mobile communication terminal in which a camera for capturing a predetermined text image comprises the steps of: receiving a predetermined text image photographed by a camera; As the character image photographed from the camera is input, driving a predetermined character reading program to extract a phone number from the character image and output it on the display unit; And performing a real-time call to the telephone number output on the display unit according to a user command.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail a preferred embodiment of the present invention.

여기서, 도 1은 본 발명에 따른 촬상용 카메라가 내장된 이동통신 단말기의 사시도이고, 도 2는 본 발명에 따른 촬상용 카메라가 내장된 이동통신 단말기의 내부 구성도이고, 도 3a 내지 도 3c는 본 발명에 따른 사용자가 선택한 메뉴항목을 표시하는 액정화면이고, 도 4는 본 발명에 따른 이동통신 단말기의 카메라에 의해 촬영된 전화번호를 출력하는 액정화면이다.1 is a perspective view of a mobile communication terminal having a built-in imaging camera according to the present invention, FIG. 2 is an internal configuration diagram of a mobile communication terminal having a built-in imaging camera according to the present invention, and FIGS. 3A to 3C are 4 is a liquid crystal screen displaying a menu item selected by a user according to the present invention, and FIG. 4 is a liquid crystal screen outputting a telephone number photographed by a camera of a mobile communication terminal according to the present invention.

도 2를 참조하면, 이동통신 단말기(100)는, 음성 통화 및 각종 부가 서비스와 호처리에 관한 사용자 명령을 입력하기 위한 키패드(110)와, 키패드(110)를 통해 입력되는 사용자 명령에 따라 소정의 기록매체에 기록된 문자 이미지를 촬영하는 카메라(120)와, 카메라(120)에 의해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환시키기 위한 판독용 프로그램 및 각종 문자 데이터를 저장하는 메모리(130)와, 메모리(130)에 저장된 판독용 프로그램을 통해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환하고, 변환된 텍스트 파일로부터 소정의 전화번호를 인식하여 외부로 전달하는 문자 인식부(140)와, 문자 인식부(140)에 의해 인식되어 전달되는 전화번호를 외부로 출력시키고, 키패드(110)를 통해 입력되는 통화키 신호에 연동하여 해당 전화번호로 통화(call)를 수행하는 제어부(150)와, 제어부(150)에 의해 전달되는 각종 문자 및 영상정보와 문자 인식부에 의해 인식된 전화번호를 디스플레이하기 위한 표시부(160)와, 제어부(150)에 의해 전달되는 기저대역신호를 고주파신호로 변환시켜 외부로 전송하고 기지국 등을 통해 수신되는 고주파신호를 기저대역신호로 변환시켜 제어부(150)에 접속시키는 무선주파수 처리부(170)와, 제어부(150)에 의해 전달되는 소리신호를 외부로 출력하기 위한 스피커(180)와, 외부로부터 소리신호를 입력받아 제어부로 전달하는 마이크(190)를 구비한다.Referring to FIG. 2, the mobile communication terminal 100 includes a keypad 110 for inputting a user command related to a voice call, various additional services, and call processing, and predetermined according to a user command input through the keypad 110. A camera 120 for capturing text images recorded on a recording medium of the memory 120; And, the character recognition unit 140 for converting the character image photographed through the program for reading stored in the memory 130 to a readable text file, and recognizes a predetermined telephone number from the converted text file and transfers it to the outside, The phone number recognized and transmitted by the character recognition unit 140 is output to the outside, the call to the corresponding phone number in conjunction with the call key signal input through the keypad 110 the control unit 150 for performing a call, the display unit 160 for displaying various character and image information transmitted by the control unit 150, and a telephone number recognized by the character recognition unit, and the control unit 150. The radio frequency processor 170 and the controller 150 convert the baseband signal transmitted by the radio frequency signal to a high frequency signal and transmit it to the outside and convert the high frequency signal received through the base station into a baseband signal and connect it to the controller 150. Speaker 180 for outputting the sound signal transmitted by the outside and a microphone 190 for receiving the sound signal from the outside and transmitting to the control unit.

키패드(110) 상에는 숫자, 기호 및 문자 등을 입력하기 위한 키와 각종 메뉴를 선택하고 각종 기능을 실행시키기 위한 키 등이 배치된다. 이러한 키패드(110)는 사용자에 의해 특정키가 눌릴 경우 숫자, 기호 및 문자 등의 입력을 지시하는 키신호 또는 표시부상에 출력되는 전화번호에 대한 통화키 신호를 발생시켜 제어부(150)로 전달한다.On the keypad 110, keys for inputting numbers, symbols, characters, and the like, and keys for selecting various menus and executing various functions are arranged. When the user presses a specific key, the keypad 110 generates a key signal indicating an input of numbers, symbols, characters, or the like, or generates a call key signal for a phone number output on the display unit, and transmits the signal to the controller 150. .

카메라(120)는 제어부(150)의 촬영 지시에 따라 소정의 기록매체, 예를 들면 명함, 팜플랫, 책자 등의 기록매체에 기록된 문자 이미지에 대한 촬영을 수행하고, 촬영된 문자 이미지를 제어부(150)로 전달한다. 이때, 카메라(120)에 의해 촬영된 문자 이미지로는 한글 또는 아라비아 숫자 형태로 기록된 전화번호이다.The camera 120 photographs a text image recorded on a predetermined recording medium, for example, a business card, a brochure, a booklet, or the like according to a recording instruction of the controller 150, and controls the photographed text image to be recorded. 150). In this case, the text image photographed by the camera 120 is a phone number recorded in the form of Korean or Arabic numerals.

메모리(130)는 사용자에게 제공되는 소정의 메뉴항목, 예를 들면 전화번호부, 휴대폰 설정, 일정관리, 편리한 기능, 재미난 기능, 화면설정, 음량벨소리 등의 메뉴항목과 해당 메뉴항목별로 연계되어 설정되어 있는 하위 메뉴항목 등을 저장한다. The memory 130 is set in association with a predetermined menu item provided to the user, for example, a menu item such as a phone book, a mobile phone setting, a schedule management, a convenient function, a fun function, a screen setting, a volume ringtone, and the corresponding menu item. Saves sub menu items.

또한, 메모리(130)는 각종 부가정보와 통화 서비스 제공을 위한 실행프로그램과, 카메라에 의해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환하기 위한 문자 판독용 프로그램인 광학식 문자판독 프로그램(OCR :Optical Character Reader)을 저장한다.In addition, the memory 130 is an execution program for providing various additional information and call service, and an optical character reading program (OCR: Optical Character), which is a character reading program for converting a text image photographed by a camera into a readable text file. Save Reader).

이때, 광학식 문자판독 프로그램은 인쇄되거나 또는 손으로 쓴 글씨들을 인식하는 것으로서, 스캐너로 읽어들인 이미지나 비트맵에 대해 밝은 부분과 어두운 부분으로 나누어 분석한 다음, 하나의 글자로 인식되면, 아스키코드로 변환하여 인식된 글자를 번역하는 역할을 수행하는 것으로서, 도서관의 장서를 보호하기 위한 자료의 디지털화에 많이 사용되며, 또한 수표와 신용카드 매출전표를 처리하고, 우편물을 자동으로 분류하는 등의 업무에 주로 사용된다. At this time, the optical character reading program recognizes printed or handwritten letters, and analyzes the image or bitmap read by the scanner into bright and dark parts, and then recognizes as one letter. It converts recognized texts by converting them and is used for digitizing materials to protect library collections, and also processes checks and credit card sales slips and automatically sorts mail. Mainly used.

여기서, 문자 판독용 프로그램은 광학식 문자판독 프로그램에 한정되는 것은 아니고, 필기문자 인식용 테블렛(tablet), 바코드, 자기잉크 판독 프로그램(MICR) 등도 이용될 수 있다.Here, the character reading program is not limited to the optical character reading program, but a tablet, a barcode, a magnetic ink reading program (MICR) for handwriting character recognition may also be used.

또한, 메모리(130)는 카메라(120)에 의해 촬영된 문자 이미지의 텍스트 파일로부터 독출되는 문자정보를 인식하기 위해 사용되는 다양한 문자 및 숫자 정보를 저장한다.In addition, the memory 130 stores various character and numeric information used to recognize character information read from a text file of the character image photographed by the camera 120.

여기서, 문자 정보로는 한글, 알파벳, 일본어 등의 문자들을 포함하고, 숫자 정보로는 0에서 9까지의 숫자와 이들을 조합하여 형성되는 각종 숫자들을 포함하여 구성되어 있다.Here, the character information includes letters such as Korean, alphabet, Japanese, and the like, and the number information includes numbers from 0 to 9 and various numbers formed by combining them.

또한, 메모리(130)는 카메라(120)에 의해 촬영된 각종 기록매체에 기록된 전화번호를 제어부(150)로부터 전달받아 이를 저장하고, 제어부(150)로부터 입력되는 소정 전화번호에 대한 선택신호에 연동하여 선택된 전화번호를 표시부(160)상에 출력시킨다.In addition, the memory 130 receives and stores telephone numbers recorded on various recording media photographed by the camera 120 from the controller 150, and stores them in a selection signal for a predetermined telephone number input from the controller 150. The selected phone number is linked to the display unit 160.

문자 판독부(140)는 카메라(120)에 의해 촬영된 문자 이미지가 전달됨에 따라 메모리(130)에 저장된 문자 판독용 프로그램을 통해 해당 문자 이미지를 판독 가능한 텍스트 파일로 변환시킨다.As the character image photographed by the camera 120 is transferred, the character reading unit 140 converts the character image into a readable text file through a character reading program stored in the memory 130.

이후, 문자 판독부(140)는 텍스트 파일로 변환된 문자 이미지로부터 소정의 문자정보, 보다 구체적으로는 한글 또는 아라비아 숫자 형태로 기록된 전화번호를 판독 및 추출하여 제어부(150)로 전달한다.Thereafter, the character reading unit 140 reads and extracts predetermined character information, more specifically, a telephone number recorded in Korean or Arabic numeral form, from the character image converted into a text file and transmits it to the controller 150.

제어부(150)는 키패드(110)를 통해 입력되는 통화 및 각종 부가 서비스에 대 한 키신호에 따라 메모리(130)에 저장된 실행프로그램을 실행시켜 통화 및 각종 부가 서비스와 전화번호부, 휴대폰 설정, 일정관리, 편리한 기능, 재미난 기능, 화면설정, 음량벨소리 등의 메뉴항목 등을 실행시킨다.The controller 150 executes an execution program stored in the memory 130 according to a call input through the keypad 110 and key signals for various additional services, such as calling and various additional services, a phone book, mobile phone settings, and schedule management. , Convenient functions, funny functions, screen settings, volume items such as ringtones to run menu items.

예를 들면, 사용자가 키패드(110)를 통하여 메뉴키 신호를 입력하는 경우, 제어부(150)는 입력된 메뉴키 신호에 연동하여 도 3a에 도시된 바와 같이 다양한 메뉴 항목을 표시부(160)상에 디스플레이시킨다.For example, when a user inputs a menu key signal through the keypad 110, the controller 150 displays various menu items on the display unit 160 as shown in FIG. 3A in association with the input menu key signal. Display.

이때, 사용자가 키패드(110)를 통해 실행하고자 하는 메뉴 항목을 선택하면, 제어부(150)는 선택된 메뉴 항목을 실행시키거나 또는 도 3b에 도시된 바와 같이 선택된 메뉴 항목에 설정된 하위 메뉴 항목을 표시부(160)상에 디스플레이시킨다.In this case, when the user selects a menu item to be executed through the keypad 110, the controller 150 executes the selected menu item or displays the sub-menu item set in the selected menu item as shown in FIG. 3B. 160).

여기서는, 하위 메뉴 항목으로서 카메라(120)가 선택된 경우에 대하여 설명한다.Here, the case where the camera 120 is selected as the lower menu item will be described.

상술한 바와 같이 표시부(160)상에 하위 메뉴 항목이 디스플레이된 상태에서, 사용자가 키패드(110)를 사용하여 디스플레이된 하위 메뉴 항목 중에서 카메라(120) 메뉴 항목을 선택하는 경우, 제어부(150)는 도 3c에 도시된 바와 같이 카메라(120) 촬영을 수행하기 위한 최종 메뉴 항목인 사진찍기, 나만의 사진관리,...화면크기 등의 최종 메뉴 항목을 표시부(160)상에 디스플레이시킨다.As described above, when the user selects the camera 120 menu item among the displayed submenu items by using the keypad 110 while the submenu items are displayed on the display unit 160, the controller 150 As shown in FIG. 3C, a final menu item, such as taking a picture, taking a picture of yourself, a screen size, etc., which is a final menu item for performing camera 120 shooting, is displayed on the display unit 160.

이때, 사용자가 키패드(110)를 통하여 카메라(120) 촬영을 위한 최종 메뉴 항목 중에서 " 사진찍기 " 메뉴 항목을 선택하면, 제어부(150)는 키패드(110)를 통해 입력되는 사용자 명령에 따라 카메라(120)를 구동시켜 소정의 문자 이미지에 대한 촬영을 수행한다.In this case, when the user selects the “take picture” menu item from the final menu item for photographing the camera 120 through the keypad 110, the controller 150 controls the camera according to a user command input through the keypad 110. 120 is performed to photograph a predetermined text image.

여기서, 카메라(120)에 의해 촬영되는 문자 이미지는 명함, 신문, 잡지, 판플렛 등의 기록매체에 한글 또는 아라비아 숫자 형태로 기록된 전화번호이다.Here, the text image photographed by the camera 120 is a phone number recorded in Korean or Arabic numerals on a recording medium such as a business card, a newspaper, a magazine, or a leaflet.

제어부(150)는 텍스트 파일로 변환된 문자 이미지로부터 추출된 전화번호가 문자 판독부(140)로부터 입력되면 메모리(130)에 기 설정된 문자정보와 입력된 전화번호를 상호 비교하여 입력된 전화번호를 인식한다. 이때, 제어부(150)는 도 4에 도시된 바와 같이 카메라에 의해 촬영된 문자 이미지로부터 인식된 전화번호를 표시부(160)상에 출력시킨다.When the telephone number extracted from the character image converted into the text file is input from the character reading unit 140, the controller 150 compares the character information preset in the memory 130 with the input telephone number and inputs the input telephone number. Recognize. In this case, as shown in FIG. 4, the controller 150 outputs the telephone number recognized from the text image photographed by the camera on the display unit 160.

이후, 제어부(150)는 키패드(110)를 통해 입력되는 소정의 키신호에 연동하여 표시부상에 출력된 해당 전화번호를 메모리(130)에 저장시키거나 또는 해당 전화번호로 실시간 통화를 수행한다.Thereafter, the controller 150 stores the corresponding telephone number output on the display unit in the memory 130 in association with a predetermined key signal input through the keypad 110 or performs a real time call with the corresponding telephone number.

이를 보다 구체적으로 설명하면, 전화번호를 표시부(160)상에 출력시킨 상태에서 키패드(110)로부터 해당 전화번호를 메모리(130)에 저장하라는 키신호가 입력되면, 제어부(150)는 입력된 키신호에 연동하여 표시부(160)상에 출력된 해당 전화번호를 메모리(130)에 저장시킨다.In more detail, when a key signal for storing the telephone number in the memory 130 is input from the keypad 110 while the telephone number is output on the display unit 160, the controller 150 inputs the input key. In response to the signal, the corresponding phone number output on the display unit 160 is stored in the memory 130.

이때, 키패드(110)를 통해 표시부(160)상에 출력된 전화번호로의 통화용 키신호가 입력되면, 제어부(150)는 입력된 통화키에 연동하여 표시부(160)상에 출력된 해당 전화번호로 실시간 통화를 수행한다.At this time, when a key signal for a call to the telephone number output on the display unit 160 is input through the keypad 110, the controller 150 is linked to the input call key and the corresponding telephone output on the display unit 160. Make a real time call to a number.

이하, 도 5 내지 도 8을 참조하여 본 발명에 따른 이동통신 단말기를 이용해 인식된 전화번호로 실시간 통화를 수행하는 방법에 대하여 상세하게 설명한다. Hereinafter, a method of performing a real time call to a recognized phone number using a mobile communication terminal according to the present invention will be described in detail with reference to FIGS. 5 to 8.

여기서, 도 5는 본 발명에 따른 이동통신 단말기의 카메라에 의해 촬영된 전 화번호로 실시간 통화를 수행하는 과정을 도시한 순서도이고, 도 6은 본 발명에 따른 이동통시 단말기의 카메라를 통해 문자 이미지를 촬영하는 과정을 도시한 순서도이고, 도 7은 본 발명에 따른 이동통신 단말기가 카메라에 의해 촬영된 문자 이미로부터 전화번호를 인식하여 표시부상에 출력하는 과정을 도시한 순서도이고, 도 8은 본 발명에 따른 이동통신 단말기의 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 과정을 도시한 순서도이다.5 is a flowchart illustrating a process of performing a real time call with a phone number photographed by a camera of a mobile communication terminal according to the present invention, and FIG. 6 is a text image through a camera of the mobile communication terminal according to the present invention. FIG. 7 is a flowchart illustrating a process of photographing a photograph, and FIG. 7 is a flowchart illustrating a process in which a mobile communication terminal recognizes a phone number from a character image photographed by a camera and outputs it to a display unit. A flowchart illustrating a process of performing a real time call with a phone number output on a display unit of a mobile communication terminal according to the present invention.

먼저, 이동통신 단말기(100)는 도 5에 도시된 바와 같이 사용자 명령에 따라 소정의 기록매체에 기록된 문자 이미지에 대한 촬영을 수행한다(S100).First, as shown in FIG. 5, the mobile communication terminal 100 photographs a text image recorded on a predetermined recording medium according to a user command (S100).

도 6를 참조하여 보다 구체적으로 설명하면, 사용자가 키패드(110)를 통해 사진촬영을 위한 키신호를 입력하면(S101), 이동통신 단말기(100)는 입력되는 키신호에 따라 "촬영모드"를 설정한다(S102).More specifically, referring to FIG. 6, when the user inputs a key signal for photographing through the keypad 110 (S101), the mobile communication terminal 100 selects the "shooting mode" according to the input key signal. It is set (S102).

이때, 사용자가 키패드(110)를 사용해 카메라(220)의 촬영을 지시하면(S103), 이동통신 단말기(100)는 카메라(120)를 제어하여 명함, 팜플렛, 간판, 잡지 등의 기록매체에 기록된 소정의 문자 이미지, 보다 구체적으로는 한글 또는 아라비아 숫자 형태로 기록매체에 기록된 전화번호인 문자 이미지에 대한 촬영을 수행한다(S104).At this time, when the user instructs the photographing of the camera 220 using the keypad 110 (S103), the mobile communication terminal 100 controls the camera 120 to record on a recording medium such as business cards, brochures, signs, magazines, etc. The photographing is performed on a predetermined text image, more specifically, a text image which is a telephone number recorded on a recording medium in the form of Korean or Arabic numerals (S104).

상술한 바와 같이 카메라(120)를 통해 소정의 기록매체에 기록된 문자 이미지에 대한 촬영을 수행한 후, 이동통신 단말기(100)는 도 5에 도시된 바와 같이 촬영된 문자 이미지를 문자 판독부(140)를 통해 판독 가능한 텍스트 파일로 변환 및 인식하여 표시부(160)상에 출력시킨다(S200).As described above, after photographing a text image recorded on a predetermined recording medium through the camera 120, the mobile communication terminal 100 displays the photographed text image as shown in FIG. In operation S200, the display apparatus 160 converts the text file into a text file that can be read and output through the display unit 160.

도 7을 참조하여 보다 구체적으로 설명하면, 카메라(120)로부터 촬영된 문자 이미지가 전달됨에 따라(S201), 이동통신 단말기(100)는 메모리(130)에 저장된 소정의 문자 판독용 프로그램을 구동시켜 문자 이미지를 판독 가능한 텍스트 파일로 변환시킨다(S202).More specifically, referring to FIG. 7, as the text image photographed from the camera 120 is transferred (S201), the mobile communication terminal 100 drives a predetermined character reading program stored in the memory 130. The character image is converted into a readable text file (S202).

상술한 바와 같이 문자 이미지를 판독 가능한 텍스트 파일로 변환시킨 후, 이동통신 단말기(100)는 변환된 텍스트 파일로부터 문자 또는 아라비아 숫자 형태로 기록된 전화번호를 추출한다(S203).After converting the text image into a readable text file as described above, the mobile communication terminal 100 extracts the telephone number recorded in the form of letters or Arabic numerals from the converted text file (S203).

이후, 이동통신 단말기(100)는 판독 가능한 텍스트 파일 형태로 추출된 전화번호와 메모리(130)에 저장된 문자 및 숫자정보를 상호 비교하여 해당 전화번호를 인식하고(S204), 인식된 전화번호를 표시부(160)상에 출력시킨다(S205).Thereafter, the mobile communication terminal 100 compares the phone number extracted in the form of a readable text file with the character and numeric information stored in the memory 130 to recognize the corresponding phone number (S204), and displays the recognized phone number. Output on 160 (S205).

상술한 바와 같이 표시부(160)상에 인식된 전화번호를 출력시킨 후, 이동통신 단말기(100)는 도 5에 도시된 바와 같이 키패드(110)를 통해 입력되는 통화키 신호에 연동하여 인식된 전화번호로 실시간 통화를 수행한다(S300).After outputting the recognized phone number on the display unit 160 as described above, the mobile communication terminal 100 is a phone recognized in conjunction with the call key signal input through the keypad 110 as shown in FIG. Perform a real-time call to the number (S300).

도 8을 참조하여 보다 구체적으로 설명하면, 표시부(160)상에 인식된 전화번호가 출력된 상태에서, 이동통신 단말기(100)는 키패드(110)를 통해 상기 전화번호에 대한 통화 및 저장을 위한 키신호를 입력받는다(S301).Referring to FIG. 8, in the state in which the recognized phone number is output on the display unit 160, the mobile communication terminal 100 uses the keypad 110 to call and store the phone number. The key signal is received (S301).

상술한 바와 같이 키패드를 통해 소정의 키신호가 입력되면, 이동통신 단말기(100)는 입력된 키신호가 해당 전화번호에 대한 통화용 키신호 인지 또는 저장용 키 신호를 판단한다(S302).As described above, when a predetermined key signal is input through the keypad, the mobile communication terminal 100 determines whether the input key signal is a call key signal for the corresponding telephone number or a storage key signal (S302).

단계(S302)의 판단 결과 입력된 키신호가 해당 전화번호에 대한 저장용 키신 호인 경우, 이동통신 단말기(100)는 입력된 키신호에 연동하여 해당 전화번호를 메모리(130)에 저장시킨다(S303).As a result of the determination in step S302, when the input key signal is a storage key signal for the corresponding phone number, the mobile communication terminal 100 stores the corresponding phone number in the memory 130 in association with the input key signal (S303). ).

그러나, 단계(S302)의 판단 결과 입력된 키신호가 해당 전화번호에 대한 통화용 키신호인 경우, 이동통신 단말기(100)는 입력된 키신호에 연동하여 해당 전화번호로 실시간 통화(call)를 수행한다(S304).However, when the inputted key signal is a call signal for the corresponding phone number as a result of the determination in step S302, the mobile communication terminal 100 makes a real-time call to the corresponding phone number in conjunction with the input key signal. Perform (S304).

본 발명의 기술사상은 상기 바람직한 실시예에 따라 구체적으로 기술되었으나, 상기한 실시예는 그 설명을 위한 것이며, 그 제한을 위한 것이 아님을 주의하여야 한다. 또한, 본 발명의 기술분야의 통상의 전문가라면 본 발명의 기술사상의 범위에서 다양한 실시예가 가능함을 이해할 수 있을 것이다.Although the technical spirit of the present invention has been described in detail according to the above-described preferred embodiment, it should be noted that the above-described embodiment is for the purpose of description and not of limitation. In addition, those skilled in the art will understand that various embodiments are possible within the scope of the technical idea of the present invention.

이상에서 설명한 바와 같이, 본 발명은 카메라에 의해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환한 후 해당 문자 이미지로부터 전화번호를 인식하여 실시간 통화를 수행함으로써, 사용자들이 전화번호를 일일이 입력할 필요가 없이 해당 전화번호로 실시간 통화를 수행할 수 있다는 특유의 효과를 갖는다.As described above, the present invention converts a character image photographed by a camera into a readable text file and recognizes a telephone number from the character image to perform a real-time call, so that users need to input the telephone number one by one. It has the unique effect that you can make a real-time call to the phone number without using it.

Claims (10)

문자 이미지를 촬영하기 위한 카메라가 내장된 이동통신 단말기에 있어서,In the mobile communication terminal with a built-in camera for taking a text image, 통화 서비스 및 각종 부가 서비스에 관한 키신호 등을 입력하기 위한 키패드; A keypad for inputting a key signal for a call service and various additional services; 카메라에 의해 촬영된 문자 이미지를 판독 가능한 텍스트 파일로 변환시키는 판독용 프로그램 및 각종 문자정보를 저장하는 메모리; A memory for storing a program for reading and converting various character information into a text file that can be read by a camera; 상기 카메라로부터 촬영된 문자 이미지가 전달됨에 따라, 상기 판독용 프로그램을 통해 상기 문자 이미지를 판독 가능한 텍스트 파일로 변환하고, 변환된 텍스트 파일로부터 전화번호를 추출하여 외부로 전달하는 문자 판독부; 및A text reading unit converting the text image into a readable text file through the reading program, extracting a phone number from the converted text file, and transmitting the text image photographed from the camera to the outside; And 상기 문자 판독부로부터 추출된 전화번호가 전달됨에 따라, 상기 메모리에 저장된 문자정보를 참조하여 해당 전화번호를 인식하여 표시부상에 출력시키고, 상기 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 제어부 As the phone number extracted from the character reading unit is transferred, the controller recognizes the phone number with reference to the character information stored in the memory and outputs the phone number to the display unit, and performs a real time call with the phone number output on the display unit. 를 포함하여 구성된 것을 특징으로 하는 이동통신 단말기.Mobile communication terminal, characterized in that configured to include. 제 1 항에 있어서,The method of claim 1, 상기 키패드를 통해 상기 표시부상에 디스플레이된 전화번호에 대한 통화용 키신호가 입력되면, 상기 제어부는 입력된 키신호에 연동하여 해당 전화번호로 통화를 수행하는 것을 특징으로 하는 이동통신 단말기.And when a call signal for a phone number displayed on the display unit is input through the keypad, the controller performs a call to the corresponding phone number in association with the input key signal. 제 1 항에 있어서, The method of claim 1, 상기 문자 판독부에 의해 추출된 전화번호는 한글 또는 아라비아 숫자 형태인 것을 특징으로 하는 이동통신 단말기.The phone number extracted by the character reading unit is a mobile communication terminal, characterized in that the Korean or Arabic numerals. 제 1 항에 있어서, The method of claim 1, 상기 메모리에 저장된 판독용 프로그램은 광학 문자 인식기(OCR)인 것을 특징으로 하는 이동통신 단말기.And a reading program stored in the memory is an optical character recognizer (OCR). 소정의 문자 이미지를 촬영하는 카메라가 내장된 이동통신 단말기의 실시간 호처리 방법에 있어서,In the real-time call processing method of a mobile communication terminal with a camera for taking a predetermined text image, 사용자 명령에 따라 상기 카메라를 제어하여 소정의 문자 이미지를 촬영하는 단계;Controlling the camera according to a user command to take a predetermined text image; 상기 카메라에 의해 촬영된 문자 이미지가 입력됨에 따라, 소정의 문자 판독용 프로그램을 구동시켜 상기 문자 이미지로부터 전화번호를 추출하여 표시부상에 출력시키는 단계; 및 As the character image photographed by the camera is input, driving a predetermined character reading program to extract a phone number from the character image and output the phone number on the display unit; And 외부로부터 입력되는 통화용 키신호에 따라 상기 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 단계Performing a real-time call to a phone number output on the display unit according to a key signal for a call input from the outside; 를 포함하여 구성된 것을 특징으로 하는 이동통신 단말기의 호처리 방법.Call processing method of a mobile communication terminal, characterized in that configured to include. 제 5 항에 있어서, 상기 문자 이미지를 입력받는 단계는, The method of claim 5, wherein the receiving of the text image comprises: 소정의 기록매체에 기록된 문자 이미지를 촬영하기 위한 키신호를 입력받는 단계;Receiving a key signal for photographing a text image recorded on a predetermined recording medium; 상기 문자 이미지 촬영용 키신호가 입력됨에 따라, 상기 이통신 단말기가 입력된 키신호에 연동하여 상기 카메라를 촬영모드로 설정하는 단계; 및Setting the camera to a photographing mode in response to the key signal for photographing a text image being input; And 상기 카메라에 대한 촬영모드가 설정된 상태에서, 상기 이동통신 단말기가 사용자 명령에 따라 촬영된 소정의 문자 이미지를 상기 카메라로부터 입력받는 단계Receiving a predetermined text image captured by the mobile terminal according to a user command from the camera while a photographing mode is set for the camera; 를 포함하여 구성된 것을 특징으로 하는 이동통신 단말기의 호처리 방법.Call processing method of a mobile communication terminal, characterized in that configured to include. 제 5 항에 있어서, 상기 촬영된 문자 이미지로부터 전화번호를 추출하여 표시부상에 출력시키는 단계는,The method of claim 5, wherein the extracting the phone number from the photographed text image and outputting the phone number on the display unit includes: 상기 카메라로부터 촬영된 문자 이미지가 전달됨에 따라, 상기 이동통신 단말기가 메모리에 저장된 판독용 프로그램을 구동시켜 상기 문자 이미지를 텍스트 파일로 변환시키는 단계;Converting the text image into a text file by driving a reading program stored in a memory, as the text image photographed from the camera is transferred; 상기 문자 이미지가 판독 가능한 텍스트 파일로 변환됨에 따라, 상기 이동통신 단말기가 변환된 텍스트 파일로부터 소정 형식의 전화번호를 추출하는 단계;As the text image is converted into a readable text file, extracting a telephone number of a predetermined format from the converted text file by the mobile communication terminal; 상기 이동통신 단말기가 추출된 전화번호를 메로리에 설정된 각종 문자정보와 상호 비교하여 상기 전화번호를 인식하는 단계; 및Recognizing the telephone number by comparing the extracted telephone number with various text information set in memory; And 상기 이동통신 단말기가 인식된 전화번호를 표시부상에 출력시키는 단계Outputting the recognized phone number on the display unit by the mobile communication terminal; 를 포함하여 구성된 것을 특징으로 하는 이동통신 단말기의 호처리 방법.Call processing method of a mobile communication terminal, characterized in that configured to include. 제 7 항에 있어서,The method of claim 7, wherein 상기 텍스트 파일로부터 추출된 전화번호는 한글 또는 아라비아 숫자 형태인 것을 특징으로 하는 이동통신 단말기의 호처리 방법.The phone number extracted from the text file is a call processing method of a mobile communication terminal, characterized in that the Korean numeral or Arabic numeral form. 제 7 항에 있어서, The method of claim 7, wherein 상기 메모리에 저장된 판독용 프로그램은 광학 문자 인시기(OCR)인 것을 특징으로 하는 이동통신 단말기의 호처리 방법. And a reading program stored in the memory is an optical character recognition time (OCR). 제 5 항에 있어서, 상기 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 단계는,The method of claim 5, wherein the real time call is performed using the phone number output on the display unit. 상기 표시부상에 전화번호가 출력된 상태에서, 상기 이동통신 단말기가 출력된 전화번호에 대한 소정의 키신호를 입력받는 단계;Receiving, by the mobile communication terminal, a predetermined key signal corresponding to the outputted telephone number while the telephone number is output on the display unit; 상기 이동통신 단말기가 입력된 키신호가 상기 전화번호에 대한 저장용 키신호인지 또는 통화용 키신호인지를 판단하는 단계;Determining, by the mobile communication terminal, whether the input key signal is a storage key signal or a call key signal for the telephone number; 상기 키신호가 상기 전화번호에 대한 저장용 키신호인 경우, 상기 이동통신 단말기가 상기 표시부상에 출력된 전화번호를 메모리에 저장시키는 단계; 및If the key signal is a storage key signal for the telephone number, storing, by the mobile communication terminal, the telephone number output on the display unit in a memory; And 상기 키신호가 상기 전화번호에 대한 통화용 키신호인 경우, 상기 이동통신 단말기가 상기 표시부상에 출력된 전화번호로 실시간 통화를 수행하는 단계If the key signal is a key signal for a call to the telephone number, the mobile communication terminal performing a real-time call to the telephone number output on the display unit; 를 포함하여 구성된 것을 특징으로 하는 이동통신 단말기의 호처리 방법. Call processing method of a mobile communication terminal, characterized in that configured to include.
KR1020050035270A 2005-04-27 2005-04-27 Mobile phone for having a function of character recognition and method of treating a call using it KR20060114137A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050035270A KR20060114137A (en) 2005-04-27 2005-04-27 Mobile phone for having a function of character recognition and method of treating a call using it

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050035270A KR20060114137A (en) 2005-04-27 2005-04-27 Mobile phone for having a function of character recognition and method of treating a call using it

Publications (1)

Publication Number Publication Date
KR20060114137A true KR20060114137A (en) 2006-11-06

Family

ID=37651946

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050035270A KR20060114137A (en) 2005-04-27 2005-04-27 Mobile phone for having a function of character recognition and method of treating a call using it

Country Status (1)

Country Link
KR (1) KR20060114137A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100867422B1 (en) * 2007-11-15 2008-11-06 삼성전기주식회사 System for acquiring imformation with camera and method thereof
KR101134656B1 (en) * 2009-08-12 2012-04-09 윤태호 System and mobile phone for sending call using pattern recognition and method for operating the same
KR102167774B1 (en) * 2019-06-14 2020-10-19 최현준 Telephone application image control method, program and computer readable recording medium

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100867422B1 (en) * 2007-11-15 2008-11-06 삼성전기주식회사 System for acquiring imformation with camera and method thereof
KR101134656B1 (en) * 2009-08-12 2012-04-09 윤태호 System and mobile phone for sending call using pattern recognition and method for operating the same
KR102167774B1 (en) * 2019-06-14 2020-10-19 최현준 Telephone application image control method, program and computer readable recording medium

Similar Documents

Publication Publication Date Title
US10545645B2 (en) Method for realizing user interface using camera and mobile communication terminal for the same
US9052751B2 (en) Visual laser touchpad for mobile telephone and method
JP4123473B2 (en) Mobile phone
CN102265304B (en) Method and device for optimizing image displayed on screen
KR100547738B1 (en) Apparatus and method for managing address book in portable terminal with camera
US20060142054A1 (en) Mobile communications terminal and method therefor
JP2010136238A (en) Communication apparatus
KR20060114137A (en) Mobile phone for having a function of character recognition and method of treating a call using it
JP2010057053A (en) System and method for controlling mobile phone
JP4146700B2 (en) Portable terminal device, information providing system, recording medium on which information providing program is recorded, and print medium
KR100465059B1 (en) Method for managing calling card having bar code and mobile phone using the same
JP2003163736A (en) Portable terminal with camera
KR20100000936A (en) Method and mobile communication terminal for processing individual information
KR20080113843A (en) Apparatus and method for user information retrieval using face detection in portable communication system
KR101024433B1 (en) Mobile communication terminal and phone number automatic storing method thereof
CN102656571A (en) Communication device and electronic mail creation method
KR100724914B1 (en) Method for implementing user interface using camera module and mobile communication terminal therefor
KR20060038678A (en) Method for controlling character cognition function in electronic instrument having camera module
KR100743090B1 (en) System and method for providing dictionary using mobile phone
KR20050077840A (en) Method of perceiving images in the mobile communication terminal
US9736285B2 (en) Communication terminal device
JP4436288B2 (en) Mobile terminal device
JP2001160848A (en) Communication terminal and image read/processing method in the communication terminal
KR20050022107A (en) Mobile Phone Having Character Recognition Function of Business Card
JP2002324028A (en) Communication terminal

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid