KR20080055710A - Information processing device and method of controlling the same - Google Patents

Information processing device and method of controlling the same Download PDF

Info

Publication number
KR20080055710A
KR20080055710A KR1020070130168A KR20070130168A KR20080055710A KR 20080055710 A KR20080055710 A KR 20080055710A KR 1020070130168 A KR1020070130168 A KR 1020070130168A KR 20070130168 A KR20070130168 A KR 20070130168A KR 20080055710 A KR20080055710 A KR 20080055710A
Authority
KR
South Korea
Prior art keywords
character
image
pattern
mask pattern
temporary
Prior art date
Application number
KR1020070130168A
Other languages
Korean (ko)
Other versions
KR100905857B1 (en
Inventor
링 루
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20080055710A publication Critical patent/KR20080055710A/en
Application granted granted Critical
Publication of KR100905857B1 publication Critical patent/KR100905857B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/88Image or video recognition using optical means, e.g. reference filters, holographic masks, frequency domain filters or spatial domain filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Character Input (AREA)

Abstract

An information processing device and a controlling method thereof are provided to generate a document image facilitating cutting characters correctly when a document image is generated, and facilitate cutting the characters normally when a post-process such as character recognition is performed. A mask pattern storing part(203) stores a plurality of different mask patterns. A sentence information input unit(201) receives sentence information(200). A character pattern generator(202) generates a corresponding character pattern based on a character code form a sentence included in the received sentence information. A mask pattern selector(204) selects the different mask pattern from the mask pattern selected by the previous character code of a target character code among the mask patterns stored in the mask pattern storing part. A combiner(205) combines a character pattern corresponding to the target character pattern and the selected mask pattern. The mask pattern storing part stores two mask patterns, and the mask pattern selector selects one of two mask patterns alternatively whenever the character pattern corresponding to the size of one character is generated.

Description

정보 처리 장치 및 정보 처리 장치의 제어 방법{INFORMATION PROCESSING DEVICE AND METHOD OF CONTROLLING THE SAME}Information processing device and control method of information processing device {INFORMATION PROCESSING DEVICE AND METHOD OF CONTROLLING THE SAME}

본 발명은, 전자 문서에 워터마크 정보를 매립하는 기술에 관한 것이다.The present invention relates to a technique for embedding watermark information in an electronic document.

광학식 문자 인식 장치(OCR)에서는, 광학적으로 판독한 문서 화상으로부터 문자 단위로 문자 잘라내기를 행하고, 잘라내어진 문자마다 문자 인식이 행해진다. 그러나, 문자 잘라내기 처리는, 문자를 문자 단위로 정확하게 인식하는 것이 어려워, 지금까지 다양한 기술이 제안되어 있다.In the optical character recognition device (OCR), characters are cut out in units of characters from an optically read document image, and character recognition is performed for each cut out character. However, in the character cutting process, it is difficult to accurately recognize characters in units of characters, and various techniques have been proposed so far.

예를 들면, 일본 특허 공개 공보 특개평 5-128299호(문헌 1)에서는, 입력받은 문서 화상에서, 문서 화상 중의 문자를 순번으로 1문자씩 잘라내어, 특징 추출 및 유사도 연산을 행하고, 유사도가 낮은 문자 화상의 문자 잘라내기를 변경하여, 특징 추출 및 유사도 연산을 반복하는 기술이 개시되어 있다(도 15a 내지 도 15e 참조). For example, Japanese Patent Application Laid-open No. Hei 5-128299 (Document 1) cuts characters in a document image one by one in sequence from an input document image, performs feature extraction and similarity calculation, and performs a character with low similarity. A technique of changing the character clipping of an image and repeating feature extraction and similarity calculation is disclosed (see Figs. 15A to 15E).

또한, 일본 특허 공개 공보 특개평 9-237316호(문헌 2)에서는, 판독 문자열로부터 문자를 잘라내고, 각 잘라내기 문자의 가로 폭 dx와 세로 폭 dy의 비율에 기초하여, 각 잘라내기 문자에 2 문자 이상이 포함되어 있는지의 여부를 판단하는 기술이 개시되어 있다(도 16 참조). In addition, Japanese Patent Laid-Open No. Hei 9-237316 (Document 2) cuts a character out of a read string, and based on the ratio of the horizontal width dx and the vertical width dy of each cut character, 2 to each cut character. A technique for determining whether or not a character abnormality is included is disclosed (see Fig. 16).

문헌 1에 개시되어 있는 기술은, 문자 잘라내기에 기인하는 오인식을 저감할 수 있는 점에서 바람직하다.The technique disclosed in the document 1 is preferable at the point which can reduce the misperception by the character cutting.

또한, 문헌 2에 개시되어 있는 기술은, 각 잘라내기 문자에 2 문자 이상이 포함되어 있다고 판단되고, 또한, 그 잘라내기 문자의 인식을 할 수 없었던 경우에는, 적어도 2문자분의 문자 인식 결과가 정정 기호 및 스페이스에 의해, 표시부의 화면에 표시된다. 이 때문에, 문자 인식 결과의 정정에 필요로 하는 시간을 단축할 수 있는 점에서 바람직하다. In addition, in the technique disclosed in Document 2, when it is determined that two or more characters are included in each cut character, and if the cut character cannot be recognized, at least two character character recognition results are obtained. The correction symbol and the space are displayed on the screen of the display unit. For this reason, it is preferable at the point which can shorten the time required for correction of a character recognition result.

그러나, 문헌 1에서는, 문서 화상 중의 문자를 순번으로 1문자씩 유사도 계산을 반복하기 때문에, 처리 시간이 쓸데없이 걸리게 된다고 하는 문제가 있다.However, in Document 1, since the similarity calculation is repeated one by one for the characters in the document image, there is a problem that the processing time is unnecessarily taken.

또한, 문헌 2에서는, 반각 문자와 전각 문자가 혼재될 때의 문자 잘라내기가 곤란하다(도 17 참조). 또한,변과 방으로 구성되는 문자가, 2개의 문자로 잘라내어지게 되는 경우가 있다. In addition, in Document 2, it is difficult to cut out characters when half-width characters and full-width characters are mixed (see Fig. 17). In addition, a character composed of sides and rooms may be cut out into two characters.

따라서, 본 발명의 목적은, 문서 화상을 생성할 때에는, 문자의 잘라내기가 올바르게 행해지기 쉽게 하는 문서 화상을 생성하는 것에 있다. 또한, 문자 인식 등의 후처리를 행하는 경우에는, 문자 잘라내기가 정상적으로 행해지기 쉽게 하는 것에 있다. Therefore, an object of the present invention is to generate a document image which makes it easy to cut out characters when generating a document image. In addition, in the case of performing post-processing such as character recognition, the character is easily cut off.

본 발명에서는, 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치로서, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, 문장 정보를 입력하는 입력 수단과, 그 입력 수단에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 대응하는 문자 패턴을 생성하는 문자 패턴 생성 수단과, 주목 문자 코드에 대응하는 문자 패턴을 생성하는 경우, 상기 주목 문자 코드의 1개 전의 문자 코드에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 수단과, 주목 문자 코드에 대응하는 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하는 합성 수단을 구비하는 것을 특징으로 하는 정보 처리 장치가 제공된다.In the present invention, an information processing apparatus for generating document image data based on sentence information composed of character codes, comprising: storage means for storing a plurality of different mask patterns, input means for inputting sentence information, and input thereof Character pattern generating means for generating a corresponding character pattern based on a character code constituting a sentence in the sentence information input by the means, and when generating a character pattern corresponding to the character code of interest, Selecting means for selecting a mask pattern different from the mask pattern selected by the previous character code from the storage means, a character pattern corresponding to the character code of interest and a combining means for combining the mask pattern selected by the selection means; An information processing apparatus is provided, which is provided.

또한, 본 발명에서는, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치의 제어 방법으로서, 입력 수단이 문장 정보를 입력하는 입력 공정과, 그 입력 공정에 의해 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 문자 패턴 생성 수단이 대응하는 문자 패턴을 생성하는 문자 패턴 생성 공정과, 그 문자 패턴 생성 공정에서 주목 문자 코드에 대응하는 문자 패턴을 생성하는 경우, 선택 수단이 상기 주목 문자 코드의 1개 전의 문자 코드에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 공정과, 합성 수단이, 주목 문자 코드에 대응하는 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하는 합성 공정을 구비하는 것을 특징으로 하는 정보 처리 방법이 제공된다. Moreover, in this invention, input means is a control method provided with the memory means which stores several mask patterns different from each other, and produces | generates document image data based on the sentence information comprised from a character code. A character pattern generation step of generating a character pattern corresponding to the character pattern generation means based on an input step of inputting information, a character code constituting a sentence in the sentence information by the input step, and the character pattern generation step In the case of generating a character pattern corresponding to the character code of interest in the step of selecting, wherein the selection means selects from the storage means a mask pattern different from the mask pattern selected by the character code preceding one of the character code of interest; The character pattern corresponding to the character code of interest and the mask pattern selected by the selection means. The information processing method comprising: a synthesizing step is provided of synthesizing.

또한, 본 발명에서는, 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치로서, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, 문장 정보를 입력하는 입력 수단과, 그 입력 수단에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 대응하는 문자 패턴을 생성하는 문자 패턴 생성 수단과, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이 2 이상으로 구성되었는지의 여부를 판단하는 판단 수단과, 그 판단 수단에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 1개로 구성되었다고 판단된 경우에는, 주목 문자 패턴을, 페이지 화상의 일부로서 출력하는 제1 출력 수단과, 상기 판단 수단에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 2 이상으로 구성되었다고 판단된 경우에는, 상기 주목 문자 패턴의 1개 전의 문자 패턴에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 수단과, 주목 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하고, 합성 후의 문자 패턴을 페이지 화상의 일부로서 출력하는 제2 출력 수단을 구비하는 것을 특징으로 하는 정보 처리 장치가 제공된다.Moreover, in this invention, the information processing apparatus which produces | generates document image data based on the sentence information comprised from a character code, Comprising: Storage means which stores several different mask patterns, Input means which inputs sentence information, On the basis of the character code constituting the sentence in the sentence information input by the input means, character pattern generating means for generating a corresponding character pattern, and whether a distribution region of independent significant pixels of the character pattern of interest is composed of two or more; A judging means for judging whether or not, and if it is judged by the judging means that the distribution region of the independent significant pixels of the attention character pattern is composed of one, the first outputting the attention character pattern as part of the page image; By the output means and the said determination means, the distribution area | region of independent significant pixel of the character pattern of interest was comprised by two or more. If it is determined, selecting means for selecting a mask pattern different from the mask pattern selected by the character pattern preceding one of the character patterns of interest from the storage means, the character pattern of interest, and the mask pattern selected by the selection means. There is provided an information processing apparatus comprising: second output means for synthesizing and outputting the synthesized character pattern as part of a page image.

또한, 본 발명에서는, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 문장을 구성하는 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치의 제어 방법으로서, 입력 수단이 문장 정보를 입력하는 입력 공정과, 그 입력 공정에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드의 순번으로, 문자 패턴 생성 수단이 대응하는 문자 패턴을 생성하는 문자 패턴 생성 공정과, 판단 수단이, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 2 이상으로 구성되었는지의 여부를 판단하는 판단 공정과, 그 판단 공정에 의해 주목 문자 패턴이, 독립된 유의 화소의 분포 영역이 1개로 구성되었다고 판단한 경우에는, 제1 출력 수단이, 주목 문자 패턴을, 페이지 화상의 일부로서 출력하는 제1 출력 공정과, 상기 판단 공정에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이 2 이상으로 구성되었다고 판단된 경우에는, 선택 수단이 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 공정과, 제2 출력 수단이, 주목 문자 패턴과, 상기 선택 공정에서 선택된 마스크 패턴을 합성하고, 합성 후의 문자 패턴을 페이지 화상의 일부로서 출력하는 제2 출력 공정을 구비하는 것을 특징으로 하는 정보 처리 장치의 제어 방법이 제공된다. Moreover, in this invention, as a control method of the information processing apparatus provided with the memory means which stores several mask patterns different from each other, and based on the sentence information comprised from the character code which comprises a sentence, A character pattern generation process in which the character pattern generation means generates a corresponding character pattern in order of an input step of inputting sentence information by the input means, and a character code constituting a sentence in the sentence information input by the input step; The judging means determines whether or not the distribution region of the independent significant pixels of the attention character pattern is composed of two or more, and the distribution region of the attention significant character pattern and the independent significance pixels is one by the determination process. If it is determined that it is configured, the first output means outputs the character pattern of interest as part of the page image. If it is determined by the step and the determination step that the distribution area of the independent significant pixel of the character pattern of interest is composed of two or more, the selection means selects a mask pattern different from the mask pattern previously selected from the storage means. The selection step and the second output means comprise a second output step of synthesizing the character pattern of interest and the mask pattern selected in the selection step, and outputting the synthesized character pattern as part of the page image. A control method of a processing apparatus is provided.

이상 설명한 바와 같이, 본 발명에 따르면, 문서 화상을 생성할 때에는, 문자의 잘라내기가 올바르게 행해지기 쉽게 하는 문서 화상을 생성할 수 있다. 또한, 문자 인식 등의 후처리를 행하는 경우에는, 문자 잘라내기가 정상적으로 행해지기 쉽게 할 수 있다. As described above, according to the present invention, when generating a document image, it is possible to generate a document image which makes it easy to cut out characters correctly. In addition, when post-processing such as character recognition is performed, character truncation can be easily performed.

본 발명의 부가적인 특징은 다음의 상세한 설명에서 기술된다(첨부 도면 참조).Additional features of the present invention are described in the following detailed description (see accompanying drawings).

본 명세서에 첨부되고 본 명세서의 일부를 구성하는 첨부 도면은, 본 발명의 실시예를 기술하며, 상술한 일반적인 설명과 후술하는 상세한 설명은 모두 본 발명 의 원리를 설명한다.The accompanying drawings, which are incorporated in and constitute a part of this specification, illustrate embodiments of the invention, and both the foregoing general description and the following detailed description describe the principles of the invention.

이하, 첨부 도면에 따라서, 본 발명에 따른 실시 형태를 상세하게 설명한다.EMBODIMENT OF THE INVENTION Hereinafter, embodiment which concerns on this invention is described in detail according to an accompanying drawing.

<제1 실시 형태><First Embodiment>

도 1은, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치 및 문자 잘라내기 장치의 전기적 구성을 도시하는 도면이다.BRIEF DESCRIPTION OF THE DRAWINGS It is a figure which shows the electrical structure of the mask pattern synthesizing apparatus and character cutting apparatus which concerns on one Embodiment of this invention.

컴퓨터(101)는, 일반적으로 보급되어 있는 퍼스널 컴퓨터 등의 범용의 정보 처리 장치로서, 스캐너(117)로부터 화상을 판독하여, 편집이나 보관을 행하는 것이 가능하다. 또한, 스캐너(117)에 의해 판독된 화상을 프린터(116)로부터 인쇄시킬 수 있다. 또한, 유저로부터의 각종 지시 등은, 포인팅 디바이스인 마우스(113), 키보드(114), 터치 패널(119)로부터의 입력 조작에 의해 행해진다. 컴퓨터(101)의 내부에서는, 후술하는 각 블록이 버스(107)로 접속되어, 다양한 데이터를 수수할 수 있다. The computer 101 is a general-purpose information processing apparatus such as a personal computer, which is generally spread, and can read and edit or store an image from the scanner 117. In addition, the image read by the scanner 117 can be printed from the printer 116. In addition, various instructions from the user are performed by input operations from the mouse 113, the keyboard 114, and the touch panel 119, which are pointing devices. Inside the computer 101, each block described later is connected to the bus 107 to receive various data.

CPU(102)는, 컴퓨터(101) 내부의 각 블록의 동작을 제어하거나, 혹은 내부에 기억된 컴퓨터 프로그램을 실행할 수 있다.The CPU 102 can control the operation of each block inside the computer 101 or execute a computer program stored therein.

주기억 장치(RAM으로 구성됨)(103)는, CPU(102)에서 행해지는 처리를 위해서, 일시적으로 컴퓨터 프로그램이나 처리 대상의 화상 데이터를 저장하는 장치이다.The main memory device (consisting of RAM) 103 is a device that temporarily stores a computer program or image data of a processing target for processing performed by the CPU 102.

CPU(102)는, 키보드(114) 등으로부터의 입력 지시에 의해 주기억 장치(103)에 기억한 컴퓨터 프로그램을 실행함으로써, 마스크 패턴 합성 장치 또는 문자 잘라내기 장치로서 기능하게 된다.The CPU 102 functions as a mask pattern synthesizing device or a character cutting device by executing a computer program stored in the main memory device 103 by an input instruction from the keyboard 114 or the like.

하드디스크(HDD)(104)는, 주기억 장치(103) 등에 전송되는 프로그램이나 화상 데이터를 저장하거나, 처리 후의 화상 데이터를 보존하거나 할 수 있는 장치이다.The hard disk (HDD) 104 is a device capable of storing a program or image data transmitted to the main memory device 103 or the like, or storing image data after processing.

스캐너 인터페이스(I/F)(115)는, 스캐너(117)와 접속되고, 스캐너(117)에 의해 판독된 화상 데이터를 입력할 수 있는 I/F이다.The scanner interface (I / F) 115 is an I / F that is connected to the scanner 117 and can input image data read by the scanner 117.

프린터 인터페이스(108)는, 프린터(116)와 접속되고, 인쇄하는 화상 데이터를 프린터(116)에 송신할 수 있는 I/F이다. The printer interface 108 is an I / F which is connected to the printer 116 and can transmit the image data to be printed to the printer 116.

CD 드라이브(109)는, 외부 기억 매체의 하나인 CD(CD-R/CD-RW)에 기억된 데이터의 읽어들이기나, 쓰기를 할 수 있는 장치이다.The CD drive 109 is a device capable of reading or writing data stored in a CD (CD-R / CD-RW), which is one of external storage media.

DVD 드라이브(110)는, 외부 기억 매체의 하나인 DVD에 기억된 데이터의 읽어들이기나, 쓰기를 할 수 있는 장치이다.The DVD drive 110 is a device capable of reading or writing data stored in a DVD, which is one of external storage media.

FDD 드라이브(111)는, 외부 기억 매체의 하나인 FDD에 기억된 데이터의 읽어들이기나, 쓰기를 할 수 있는 장치이다.The FDD drive 111 is a device capable of reading or writing data stored in FDD, which is one of external storage media.

또한,CD, DVD, FDD 등에 화상 편집용의 프로그램 또는 프린터 드라이버가 기억되어 있는 경우에는, 이 프로그램을 하드디스크(104)에 인스톨하고, 필요에 따라서 주기억 장치(103)에 전송되도록 되어 있다.In addition, when a program for image editing or a printer driver is stored in a CD, DVD, FDD or the like, the program is installed in the hard disk 104 and transferred to the main memory 103 as necessary.

인터페이스(I/F)(112)는, 마우스(113) 및 키보드(114)로부터의 입력 지시를 받기 위해서 접속되는 I/F이다.The interface (I / F) 112 is an I / F connected to receive input instructions from the mouse 113 and the keyboard 114.

인터페이스(I/F)(118)는, 터치 패널(119)로부터의 입력 지시를 받기 위해서 접속되는 I/F이다.The interface (I / F) 118 is an I / F connected to receive an input instruction from the touch panel 119.

모니터(106)는, 마스크 패턴의 추출 처리 결과나 처리 과정을 표시할 수 있는 표시 장치이다.The monitor 106 is a display device that can display the extraction processing result and the processing of the mask pattern.

비디오 컨트롤러(105)는, 표시 데이터를 모니터(106)에 송신하기 위한 장치이다.The video controller 105 is an apparatus for transmitting display data to the monitor 106.

도 2는, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 구성을 도시하는 도면이며, 도 3은, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트이다.FIG. 2 is a diagram illustrating a configuration of a mask pattern synthesizing apparatus according to an embodiment of the present invention, and FIG. 3 is a flowchart illustrating an operation procedure of the mask pattern synthesizing apparatus according to an embodiment of the present invention.

문장 정보(200)는, 문자 코드(예를 들면 아스키 코드)로 구성되며, 문장 정보 입력부(201)로부터 입력된다(스텝 S300). 문장 정보 입력부(201)는, 키보드(114)로 하지만, 컴퓨터 판독 가능 기억 매체에 기억된 데이터 파일을 사용하여도 된다. The sentence information 200 is composed of a character code (for example, an ASCII code) and is input from the sentence information input unit 201 (step S300). The sentence information input unit 201 is a keyboard 114, but a data file stored in a computer readable storage medium may be used.

또한, 문장 정보(200)는, 어플리케이션 프로그램 고유의 형식, 텍스트 형식 등의 전자 데이터이어도 된다. 또한, 문서 편집 어플리케이션 프로그램을 이용하여 작성된 전자 데이터이어도 된다. 또한, 문장 정보(200)는, 하드디스크(104)나 CD 드라이브(109), DVD 드라이브(110), FDD 드라이브(111) 등에 접속된 각 컴퓨터 판독 가능 기억 매체에 저장된 것이어도 된다.In addition, the sentence information 200 may be electronic data such as an application program-specific format or a text format. Moreover, the electronic data created using the document editing application program may be used. The sentence information 200 may be stored in each computer readable storage medium connected to the hard disk 104, the CD drive 109, the DVD drive 110, the FDD drive 111, or the like.

다음으로, 문자 패턴 생성부(202)에서, 문장 정보 입력부(201)에 의해 입력된 문장 정보(200) 중의 문장을 구성하는 문자 코드의 순번으로, 그 문자 코드를 판독하여, 대응하는 문자 패턴을 생성한다(스텝 S301).Next, in the character pattern generation unit 202, the character code is read in order of the character codes constituting the sentence in the sentence information 200 input by the sentence information input unit 201, and the corresponding character pattern is read. (Step S301).

마스크 패턴 기억부(203)는, 2개의 서로 다른 마스크 패턴을 기억하고 있다. 본 실시 형태에서는, 예를 들면, 「0」과 「1」이 기억되어 있다. 다음으로, 마스크 패턴 선택부(204)에서, 이 2개의 마스크 패턴 중으로부터 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 교대로 선택한다(스텝 S302). 본 실시 형태의 경우, 마스크 패턴 기억부(203)에는, 2개의 마스크 패턴이 기억되어 있기 때문에, 마스크 패턴 선택부(204)에서는,1문자분의 문자 패턴이 생성될 때마다, 2개의 마스크 패턴의 한쪽을 교대로 선택한다.The mask pattern storage unit 203 stores two different mask patterns. In the present embodiment, for example, "0" and "1" are stored. Next, the mask pattern selection unit 204 alternately selects a mask pattern different from the mask pattern previously selected from these two mask patterns (step S302). In the case of this embodiment, since two mask patterns are memorize | stored in the mask pattern memory | storage part 203, in the mask pattern selection part 204, two mask patterns are produced every time the character pattern for one character is produced | generated. Alternately select one side of.

다음으로, 합성부(205)에서, 주목 문자 코드에 대응하는 문자 패턴과, 마스크 패턴 선택부(204)에서 선택된 마스크 패턴을 합성한다(스텝 S303). 문자 패턴은 스텝 S301에서 생성된 것이며, 마스크 패턴은 스텝 S302에서 마스크 패턴 기억부(203)로부터 선택한 것이다. 또한, 문자 패턴과 마스크 패턴의 합성 수순에 대해서는 후술한다. Next, the combining unit 205 synthesizes the character pattern corresponding to the character code of interest and the mask pattern selected by the mask pattern selecting unit 204 (step S303). The character pattern is generated in step S301, and the mask pattern is selected from the mask pattern storage unit 203 in step S302. In addition, the synthesis | combination procedure of a character pattern and a mask pattern is mentioned later.

다음으로, 문자 패턴과 마스크 패턴이 합성된 문자가 문자 패턴의 최종 문자 인지의 여부가 판단된다(스텝 S304). 그 결과, 최종 문자가 아니라고 판단된 경우에는, 스텝 S301로 되돌아가서, 동일한 처리를 반복한다. 한편, 최종 문자이다라고 판단된 경우에는, 합성 후의 문자 패턴이 페이지 화상(206)의 일부로서, 프린터(116)로부터 출력된다(스텝 S305). Next, it is determined whether or not the character obtained by combining the character pattern and the mask pattern is the final character of the character pattern (step S304). As a result, when it is determined that it is not the last character, the process returns to step S301 and the same process is repeated. On the other hand, when it is judged that it is the last character, the synthesized character pattern is output from the printer 116 as a part of the page image 206 (step S305).

또한, 본 실시 형태에서는, 출력 수단은 프린터(116)를 사용하지만, 하드디스크(104)에 화상 데이터로서 기억하여도 된다. 또한, 네트워크로 다른 단말기에 송신하는 구성으로 하여도 된다.In addition, in this embodiment, although the output means uses the printer 116, you may store in the hard disk 104 as image data. It may also be configured to transmit to other terminals via a network.

이러한 구성에 의해, 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화 상 데이터를 생성한다. With such a configuration, document image data is generated based on sentence information composed of character codes.

도 4는, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치에서 문자 패턴과 마스크 패턴을 합성하는 수순을 설명하는 도면이다.4 is a diagram for explaining a procedure of synthesizing a character pattern and a mask pattern in the mask pattern synthesizing apparatus according to one embodiment of the present invention.

문자(401)는 마스크 패턴이 합성되어 있지 않은 문자 「イ」이다. 이 문자(401)를 각각 서로 다른 도트 패턴으로 형성함으로써, 각각 서로 다른 마스크 패턴을 갖는 문자(402, 403)를 얻는다. 패턴0(404), 패턴1(405)로 나타내어지는 도트 패턴에 의해 각각 서로 다른 정보를 갖는 문자(402, 403)로 된다.The character 401 is the character "イ" with which the mask pattern is not synthesize | combined. By forming the characters 401 in different dot patterns, the characters 402 and 403 having different mask patterns, respectively, are obtained. The dot patterns represented by the pattern 0 404 and the pattern 1 405 form letters 402 and 403 having different information, respectively.

다음으로, 정보 처리 장치가 출력한 페이지 화상(206)으로부터, 문자 화상 단위의 후처리를 위해서 각 문자 화상을 잘라내는 처리에 대해서 설명한다.Next, the process of cutting out each character image for the post-processing of a character image unit from the page image 206 output by the information processing apparatus is demonstrated.

도 5는, 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 구성을 도시하는 도면이며, 도 6은, 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 동작 수순을 설명하는 플로우차트이다.FIG. 5 is a diagram illustrating a configuration of a character slicing device according to an embodiment of the present invention, and FIG. 6 is a flowchart illustrating an operation procedure of the character slicing device according to one embodiment of the present invention.

우선, 페이지 화상 입력부(501)로부터 마스크 패턴이 합성된 페이지 화상(206)이 입력된다(스텝 S600).First, a page image 206 obtained by combining a mask pattern is input from the page image input unit 501 (step S600).

다음으로, 히스토그램 작성부(502)에서, 입력된 페이지 화상(206)을, 수직, 수평 방향으로 사영하여, 유의 화소의 분포를 나타내는 히스토그램을 작성한다(스텝 S601). Next, the histogram generator 502 projects the input page image 206 in the vertical and horizontal directions to create a histogram indicating the distribution of the pixel of interest (step S601).

다음으로, 마스크 패턴 임시 추출부(503)에서, 히스토그램 작성부(502)에서 작성된 히스토그램에 기초하여, 유의 화소의 영역을 임시 문자 화상 영역으로서 추출한다(스텝 S602). Next, the mask pattern temporary extraction unit 503 extracts the area of the pixel of interest as a temporary character image area based on the histogram created by the histogram generator 502 (step S602).

다음으로, 마스크 패턴 판별부(504)에서, 마스크 패턴 임시 추출부(503)에서 추출한 임시 문자 화상이, 마스크 패턴 기억부(505)에 기억된 어느 마스크 패턴과 합성되었는지를 판별한다(스텝 S603).Next, the mask pattern discriminating unit 504 determines which mask pattern is stored in the mask pattern storage unit 505 with the temporary character image extracted by the mask pattern temporary extracting unit 503 (step S603). .

다음으로, 마스크 패턴 판정부(506)에서, 마스크 패턴 판별부(504)에 의해 판별된 주목 임시 문자 화상의 마스크 패턴의 종류와, 직전 위치의 임시 문자 화상에 합성된 마스크 패턴의 종류가 동일한지의 여부를 판정한다(스텝 S604).Next, the mask pattern determination unit 506 determines whether the type of the mask pattern of the temporary character image of interest determined by the mask pattern determination unit 504 is the same as the type of the mask pattern synthesized in the temporary character image at the previous position. It is judged whether or not (step S604).

다음으로, 마스크 패턴 판정부(506)에 의해 마스크 패턴의 종류가 동일하다고 판정한 경우에는, 마스크 패턴 제어부(507)에서, 주목 임시 문자 화상과 직전 위치에 있는 임시 문자 화상을 포함하는 영역의 화상을 새로운 임시 문자 화상으로서 갱신한다(스텝 S605). 그 후, 후처리에 출력한다(스텝 S606). 한편, 마스크 패턴 판정부(506)에 의해, 마스크 패턴의 종류가 상이하다고 판정한 경우에는, 주목 임시 문자 화상의 직전 위치에서의 임시 문자 화상이 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력된다(스텝 S606). Next, when the mask pattern determination unit 506 determines that the types of mask patterns are the same, the mask pattern control unit 507 displays an image of a region including the temporary character image of interest and the temporary character image at the immediately preceding position. Is updated as a new temporary character image (step S605). Thereafter, output to the post-processing (step S606). On the other hand, when the mask pattern determination unit 506 determines that the type of mask pattern is different, the temporary character image at the position immediately before the temporary character image of interest is output to the post-processing as a cut-out image of the normal character image. (Step S606).

또한, 페이지 화상(206)은, 인쇄물을 스캐너(117)로부터 입력하고, 그것을 비트맵화한 것이어도 된다. 또한, 문서 편집 어플리케이션 프로그램을 사용하여 작성된 전자 데이터이어도 된다. 또한, 하드디스크(104), CD 드라이브(109), DVD 드라이브(110), FDD 드라이브(111) 등에 접속된 각 컴퓨터 판독 가능 기억 매체에 저장된 어플리케이션 프로그램 고유의 형식이어도 된다. 또한, 텍스트 형식 등의 전자 데이터를 화상 처리 소프트 등에 의해 변환하여, 비트맵화한 것이어도 된다.In addition, the page image 206 may input the printed matter from the scanner 117, and may bitmap it. Moreover, the electronic data created using the document editing application program may be used. In addition, the format may be unique to an application program stored in each computer readable storage medium connected to the hard disk 104, the CD drive 109, the DVD drive 110, the FDD drive 111, or the like. Further, the electronic data such as a text format may be converted into bitmaps by image processing software or the like.

도 7a 내지 도 7d는, 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하기 위한 도면이다.7A to 7D are diagrams for specifically describing character cutting processing according to an embodiment of the present invention.

우선, 도 7a에서 도시하는 입력 화상 문자 「大石靜」으로부터 사영을 취득하여 문자 잘라내기를 행한다. 그 결과, 도 7b에서 도시하는 「大石靑爭」이라고 하는 4개의 임시 문자 화상이 얻어진다.First, projection is acquired from the input image character "大 石靜" shown in FIG. 7A, and a character is cut out. As a result, four temporary character images called "大石 靑 爭" shown in FIG. 7B are obtained.

다음으로, 이 4개의 임시 문자 화상으로부터, 도 7c에서 도시하는 마스크 패턴 「0100」을 추출한다. 입력 화상 문자에는, 교대로 「0」과 「1」이 합성되어 있기 때문에, 주목 임시 문자 화상과 직전 위치의 임시 문자 화상의 마스크 패턴의 종류가 동일한 경우에는, 문자 잘라내기의 오류인 것을 알 수 있다. 따라서, 그 경우에는, 주목 임시 문자 화상과 직전 위치에 있는 임시 문자 화상을 포함하는 영역의 화상을 새로운 임시 문자 화상으로서 갱신한다. Next, the mask pattern "0100" shown in FIG. 7C is extracted from these four temporary character images. Since "0" and "1" are synthesized alternately with the input image character, it can be seen that when the type of mask pattern of the temporary character image of interest and the temporary character image of the previous position is the same, it is an error of character truncation. have. Therefore, in that case, the image of the area | region containing the temporary character image of interest and the temporary character image in the immediate position is updated as a new temporary character image.

도 7c에서 도시하는 바와 같이, 3번째 「0」과 4번째 「0」이 동일한 종류의 마스크 패턴이기 때문에, 양자를 합병하여 정정한다. 이러한 수순으로 문자 잘라내기를 정정하면, 문자 잘라내기는 도 7d에 도시하는 상태 「大石靜」으로 된다.As shown in Fig. 7C, since the third &quot; 0 &quot; and the fourth &quot; 0 &quot; are the same kind of mask patterns, both are merged and corrected. If the character cut is corrected in such a procedure, the character cut is in the state "大 石靜" shown in Fig. 7D.

이에 의해, 마스크 패턴을 이용함으로써, 문자 잘라내기의 오류를 정정할 수 있다. Thereby, the error of character cutting can be corrected by using a mask pattern.

또한, 본 실시 형태에서는, 마스크 패턴 기억부(203)가 복수의 마스크 패턴을 기억하고 있고, 합성부(205)에서 마스크 패턴 선택부(204)로부터 선택된 마스크 패턴과, 문자 패턴을 합성하였다. 그러나, 본 발명은, 이 형태에 한정되는 것이 아니라, 예를 들면, 문자 패턴과 마스크 패턴(적어도 2종류)을 합성한 모든 패턴을 기억부에 기억하고 있고, 이들 패턴으로부터 문자 코드에 합치되는 패턴을 선택하 여도 된다. In addition, in this embodiment, the mask pattern memory | storage part 203 memorize | stores several mask patterns, and the synthesis | combination part 205 synthesize | combined the mask pattern selected from the mask pattern selection part 204, and a character pattern. However, the present invention is not limited to this embodiment, but for example, all patterns obtained by combining a character pattern and a mask pattern (at least two kinds) are stored in the storage unit, and the pattern conforms to the character code from these patterns. You can also select.

<변형예1><Modification 1>

제1 실시 형태의 변형예1로서, 문자 잘라내기에 오류가 발생하기 쉬운 문자 패턴만으로 마스크 패턴을 합성하도록, 더욱 고안을 가하였다.As a modification 1 of the first embodiment, further devising was made so that the mask pattern was synthesized only by the character pattern in which an error would easily occur in the character cutting.

도 8은, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트이다.8 is a flowchart for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

또한, 장치는 제1 실시 형태와 마찬가지이기 때문에, 설명을 생략한다. 또한, 본 변형예의 처리에서 전술한 제1 실시 형태와의 공통 부분에 대해서는 공통의 스텝의 참조 번호를 붙이고 설명을 생략한다.In addition, since an apparatus is the same as that of 1st Embodiment, description is abbreviate | omitted. In addition, in the process of this modification, the common part with 1st Embodiment mentioned above is attached | subjected with the reference number of a common step, and description is abbreviate | omitted.

우선, 문자 패턴 생성부(202)에서, 입력된 문자 코드에 대응하는 문자 패턴이 생성된다(스텝 S301). 여기까지의 처리는, 제1 실시 형태와 상위가 없다.First, in the character pattern generation unit 202, a character pattern corresponding to the input character code is generated (step S301). The processing up to this point does not differ from the first embodiment.

다음으로, 주목 문자 패턴이, 2 이상의 독립된 유의 화소의 분포 영역으로 구성되었는지의 여부를 판단한다(스텝 S801). 본 실시 형태에서는, 주목 문자 패턴을 구성하는 유의 화소의 수평, 수직 방향의 사영 히스토그램을 작성하고, 그 히스토그램에 기초하여, 독립된 유의 화소의 분포 영역이 2 이상 있는지의 여부를 판단한다. Next, it is judged whether or not the character pattern of interest consists of a distribution area of two or more independent significant pixels (step S801). In this embodiment, the projection histograms in the horizontal and vertical directions of the pixel of interest forming the character pattern of interest are created, and based on the histogram, it is determined whether there are two or more independent distribution areas of the pixel of interest.

이 결과, 주목 문자 패턴이, 2 이상의 독립된 유의 화소의 분포 영역으로 구성되었다고 판단한 경우, 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 마스크 패턴 기억부로부터 선택한다(스텝 S302). 그 후, 선택된 마스크 패턴과 문자 패턴을 합성하고(스텝 S303), 다음 처리로 진행한다.As a result, when it is determined that the character pattern of interest is composed of a distribution area of two or more independent significant pixels, a mask pattern different from the mask pattern previously selected is selected from the mask pattern storage unit (step S302). Thereafter, the selected mask pattern and the character pattern are synthesized (step S303), and the processing proceeds to the next process.

한편, 주목 문자 패턴이, 2 이상의 독립된 유의 화소의 분포 영역으로 구성되어 있지 않다고 판단한 경우에는, 스텝 S302, 스텝 S303의 처리를 생략하고, 다음 처리로 진행한다. 이에 의해, 주목 문자 패턴이, 2 이상의 독립된 유의 화소의 분포 영역으로 구성되는 문자 패턴만으로 마스크 패턴이 합성된 페이지 화상이 생성된다. On the other hand, when it determines with the character pattern of interest not being comprised by the distribution area of two or more independent pixel of interest, the process of step S302 and step S303 is skipped and it progresses to the next process. Thereby, the page image in which the mask pattern was synthesize | combined only by the character pattern of which the character pattern of interest consists of the distribution area | region of two or more independent significance pixels is produced | generated.

또한, 문자 잘라내기를 정정할 때에는, 동일한 마스크 패턴이 추출되었다면, 각각의 독립된 유의 화소의 분포 영역을 합병하면 된다.Further, when correcting the character cutout, if the same mask pattern is extracted, the distribution area of each independent significant pixel may be merged.

이들 처리에 대해서, 도 9a 내지 도 9e에 도시하는 문장 정보가 입력된 경우를 상정하여 구체적으로 설명한다. These processes will be described concretely with the assumption that the sentence information shown in Figs. 9A to 9E is input.

도 9a 내지 도 9e는, 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하는 도면이다.9A to 9E are diagrams specifically illustrating the character cutting process according to the embodiment of the present invention.

도 9a에서 도시하는 「ラリルレロ」가 문장 정보로서 입력된 것을 상정한다. 도 9b는, 「リ」와 「ル」에 각각 서로 다른 마스크 패턴 「1」 「0」이 합성되어 있는 것을 나타낸다. 그 밖의 문자에는, 마스크 패턴은 합성되어 있지 않기 때문에, 「_」로 표시하고 있다. 전체적으로는, 「_10__」의 상태로 마스크 패턴이 합성되어 있다. It is assumed that "LARILERRO" shown in FIG. 9A is input as sentence information. 9B shows that different mask patterns "1" and "0" are synthesized in "L" and "L", respectively. The mask pattern is not synthesized with other characters, and is represented by "_". The mask pattern is synthesize | combined in the state of "_10__" as a whole.

이 방법으로 마스크 패턴이 합성된 문자열의 문자 잘라내기를 행하면, 도 9c에서 도시하는 바와 같이, 7개의 블록으로 나누어진다. 다음으로, 도 9d는, 7개의 블록으로부터 마스크 패턴 「_1100__」을 추출한다. 인접하는 것끼리의 문자 블록으로부터 동일한 마스크 패턴(「1」과 「1」, 「0」과 「0」)이 추출되었으므로, 각각을 합병한다. 그 결과, 마스크 패턴은, 「_10__」으로 되기 때문에, 도 9e에서 도시하는 바와 같이, 「ラリルレロ」로 문자 잘라내기를 정정할 수 있다.When the character is cut out of the character string in which the mask pattern is synthesized in this way, it is divided into seven blocks as shown in Fig. 9C. Next, FIG. 9D extracts a mask pattern "_1100__" from seven blocks. Since the same mask pattern ("1" and "1", "0" and "0") were extracted from the adjacent character blocks, they are merged. As a result, since the mask pattern becomes "_10__", as shown in FIG. 9E, the character cutout can be corrected with "La Lilorero".

이에 의해, 변형예1에서는 일부의 문자 패턴만으로 마스크 패턴을 합성하므로, 문자 화질을 유지할 수 있음과 함께, 페이지 화상 생성 및 문자 잘라내기 정정의 처리를 고속으로 행할 수 있다. As a result, in the first modified example, the mask pattern is synthesized by only a part of the character patterns, so that the character image quality can be maintained, and the page image generation and character cropping correction processing can be performed at high speed.

<변형예2><Modification 2>

제1 실시 형태의 변형예2로서, 문자 자름 오류가 발생하기 쉬운 문자를 고속으로 선정할 수 있도록 고안을 가하였다.As a modified example 2 of the first embodiment, the present invention has been devised so as to select a character at which a character truncation error is likely to occur at high speed.

도 10은, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트이다. 10 is a flowchart for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

또한, 장치는 제1 실시 형태와 마찬가지이기 때문에, 설명을 생략한다. 또한, 본 변형예의 처리에서 제1 실시 형태와의 공통 부분에 대해서는 공통의 스텝의 참조 번호를 붙이고 설명을 생략한다.In addition, since an apparatus is the same as that of 1st Embodiment, description is abbreviate | omitted. In addition, about the part in common with 1st Embodiment in the process of this modification, the reference numeral of a common step is attached | subjected, and description is abbreviate | omitted.

본 변형예에서는, 유의 화소의 독립된 분포 영역을 2 이상 갖는 문자를 나타내는 문자 코드를 나타내는 사전 정보를 기억하는 사전 기억부를 갖는다.In this modified example, it has a dictionary storage part which stores dictionary information which shows the character code which shows the character which has two or more independent distribution area | regions of a significant pixel.

문자 패턴 생성부(202)에서, 입력된 문자 코드에 대응하는 문자 패턴이 생성된다(스텝 S301). 여기까지의 처리는, 제1 실시 형태와 상위가 없다.In the character pattern generation unit 202, a character pattern corresponding to the input character code is generated (step S301). The processing up to this point does not differ from the first embodiment.

입력된 문자 코드가 사전 기억부에 등록되어 있는지의 여부를 검출한다(스텝 S1001). It is detected whether or not the input character code is registered in the preliminary storage unit (step S1001).

입력된 문자 코드가 사전 기억부에 등록되어 있는 경우, 그 문자 패턴에 합 성하기 위한 마스크 패턴을 선택한다(스텝 S302).If the inputted character code is registered in the dictionary storage unit, a mask pattern for combining with the character pattern is selected (step S302).

다음으로, 선택된 마스크 패턴을 문자 패턴에 합성하고(스텝 S303), 다음 처리로 진행한다. Next, the selected mask pattern is combined with the character pattern (step S303), and the processing proceeds to the next process.

한편, 입력된 문자 코드가 사전 기억부에 등록되어 있지 않은 경우, 스텝 S302 및 스텝 S303의 처리를 생략하고, 다음 처리로 진행한다.On the other hand, when the input character code is not registered in the preliminary storage unit, the processing of step S302 and step S303 is omitted, and the processing proceeds to the next processing.

변형예2는, 유의 화소의 독립된 분포 영역을 2 이상 갖는 문자만으로 마스크 패턴을 합성하는 점에서 공통되지만, 사전 기억부에 등록되어 있는 사전 데이터를 사용하기 때문에, 처리를 고속으로 행할 수 있다.Modification 2 is common in synthesizing a mask pattern only with characters having two or more independent distribution regions of the pixel of interest, but the processing can be performed at high speed because the dictionary data registered in the preliminary storage unit is used.

<제2 실시 형태><2nd embodiment>

본 실시 형태에서는, 부호의 인식을 정확하게 행하기 위해서, 더욱 고안을 가하였다. In the present embodiment, in order to accurately recognize the code, further devising has been made.

도 11은, 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트이다.11 is a flowchart for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

또한, 장치는 제1 실시 형태와 마찬가지이기 때문에, 설명을 생략한다. 또한, 본 실시 형태의 처리에서 제1 실시 형태의 변형예2와의 공통 부분에 대해서는 공통의 스텝의 참조 번호를 붙이고 설명을 생략한다.In addition, since an apparatus is the same as that of 1st Embodiment, description is abbreviate | omitted. In addition, in the process of this embodiment, about common part with the modification 2 of 1st Embodiment, the common step is attached | subjected with the reference number of a description, and description is abbreviate | omitted.

문자 패턴 생성부(202)에서, 입력된 문자 코드에 대응하는 문자 패턴이 생성된다(스텝 S301). 여기까지의 처리는, 제1 실시 형태와 상위가 없다.In the character pattern generation unit 202, a character pattern corresponding to the input character code is generated (step S301). The processing up to this point does not differ from the first embodiment.

다음으로, 전술한 변형예2에서는, 입력된 문자 코드가, 사전 기억부에 등록 되어 있는지의 여부가 판단된다(스텝 S1001). 그러나, 본 실시 형태에서는, 스텝 S1001의 직전에 주목 문자 패턴의 직후의 문자가 부호인지의 여부를 판단한다(스텝 S1101). Next, in the modification 2 mentioned above, it is determined whether the input character code is registered in the prior storage part (step S1001). However, in this embodiment, it is determined whether the character immediately after the character pattern of interest immediately before step S1001 is a sign (step S1101).

그 결과, 부호인 경우, 스텝 S1001의 처리를 생략하고, 마스크 패턴 기억부(203)로부터 특정 마스크 패턴이 선택된다(스텝 S302). 예를 들면, 전술한 마스크 패턴 「0」 및 「1」과 상이한 「2」가 선택된다. 또한, 마스크 패턴의 합성 방법으로서, 1개의 문자에 2비트 이상을 합성할 수 있는 방법을 사용한다. 다음 문자가 부호가 아닌 경우, 제1 실시 형태의 변형예2와 마찬가지의 처리를 행한다.As a result, in the case of a code | symbol, the process of step S1001 is abbreviate | omitted and a specific mask pattern is selected from the mask pattern storage part 203 (step S302). For example, "2" different from the above-mentioned mask pattern "0" and "1" is selected. As a method of synthesizing a mask pattern, a method capable of synthesizing two or more bits in one character is used. If the next character is not a sign, the same process as in Modification 2 of the first embodiment is performed.

도 12는, 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 구성을 도시하는 도면이다. It is a figure which shows the structure of the character cutting device which concerns on one Embodiment of this invention.

또한, 제1 실시 형태와 마찬가지인 구성에 관해서는, 동일한 부호를 붙이고, 설명을 생략한다. In addition, about the structure similar to 1st Embodiment, the same code | symbol is attached | subjected and description is abbreviate | omitted.

우선, 마스크 패턴 판별부(504)에서, 마스크 패턴 기억부(505)에 기억되어 있는 어느 마스크 패턴이 주목 문자 화상으로부터 추출되었는지를 식별한다. 여기까지의 처리는, 제1 실시 형태와 공통이다. First, the mask pattern discriminating unit 504 identifies which mask pattern stored in the mask pattern storage unit 505 has been extracted from the character image of interest. The processing up to this point is common to the first embodiment.

특정 마스크 패턴이 합성되어 있다고 판별한 경우에는, 부호 인식부(1201)에서, 주목 문자 화상의 직후가 부호이다라고 인식하고, 새로운 문자 화상으로서 갱신을 행한다. 그 후의 처리는, 제1 실시 형태와 마찬가지이다.When it is determined that the specific mask pattern is synthesized, the code recognition unit 1201 recognizes that immediately after the character image of interest is the code, and updates as a new character image. Subsequent processing is the same as that of 1st Embodiment.

문자 잘라내기 처리의 흐름은 제1 실시 형태의 변형예2와 공통되지만, 스텝S604의 처리에 추가가 있다.The flow of the character truncation process is the same as that of the modification 2 of the first embodiment, but is additional to the process of step S604.

도 13은, 본 발명의 일 실시 형태에 따른 스텝 S604의 상세한 동작 수순을 설명하는 플로우차트이다.13 is a flowchart for explaining the detailed operation procedure of step S604 according to the embodiment of the present invention.

우선, 마스크 패턴 판별부(504)에서, 추출한 마스크 패턴이 특정 마스크 패턴인지의 여부가 판단된다(스텝 S604a). 예를 들면, 전술한 마스크 패턴 「0」 「1」과 상이한 「2」를 특정 마스크 패턴으로 할 수 있다.First, the mask pattern determination unit 504 determines whether or not the extracted mask pattern is a specific mask pattern (step S604a). For example, "2" different from the mask pattern "0" "1" mentioned above can be made into the specific mask pattern.

스텝 S604a에서, 특정 마스크 패턴으로 판단된 경우, 다음 문자의 문자 인식을 행한다(스텝 S604b). 다음으로, 부호 인식부(1201)에서, 문자 인식된 문자가 부호인지의 여부가 판단된다(스텝 S604c). 문자 인식된 문자가 부호인 경우, 정확한 문자 잘라내기가 완료되었다고 판단하고, 처리를 종료한다. 부호가 아닌 경우, 제1 실시 형태의 변형예2와 마찬가지로 문자 잘라내기의 오류 개소 지정이 행해진다(스텝 S604f). When it is determined in step S604a that it is determined as the specific mask pattern, character recognition of the next character is performed (step S604b). Next, in the code recognition unit 1201, it is determined whether the character recognized character is a code (step S604c). If the character recognized character is a sign, it is determined that the correct character truncation is completed, and the process ends. If it is not a sign, an error point designation for character truncation is performed as in the second modification of the first embodiment (step S604f).

한편, 특정 마스크 패턴이 아니라고 판단된 경우, 주목 문자 화상의 다음 문자로부터 마스크 패턴을 추출하고(스텝 S604d), 그 마스크 패턴과 주목 문자 화상으로부터 추출한 마스크 패턴을 비교한다(스텝 S604e). 이들 마스크 패턴이 서로 다른 경우, 처리를 종료한다. 동일한 경우에는, 문자 잘라내기의 오류 개소 지정을 행하고(스텝 S604f), 처리를 종료한다.On the other hand, when it is judged that it is not a specific mask pattern, a mask pattern is extracted from the next character of the character image of interest (step S604d), and the mask pattern and the mask pattern extracted from the character image of interest are compared (step S604e). If these mask patterns differ from each other, the process ends. In the same case, an error point designation for character truncation is performed (step S604f), and the processing ends.

이와 같은 처리에 대해서, 임의의 문자 화상이 입력된 경우를 상정하여, 구체적으로 설명한다. Such a process will be described in detail, assuming a case where an arbitrary character image is input.

도 14a 내지 도 14e는, 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하기 위한 도면이다.14A to 14E are views for explaining in detail the character cutting process according to the embodiment of the present invention.

우선, 도 14a에서 도시하는 바와 같이, 「する。 次に」 라고 하는 문자 패 턴이 생성된다. First, as shown in FIG. 14A, a character pattern called "Surure. Next" is generated.

다음으로, 도 14b에서 도시하는 바와 같이, 「_2_01」이라고 하는 마스크 패턴이 문자 패턴에 매립된다. 그 결과, 도 14c에 도시한 바와 같이, 문자 잘라내기가 행해진다. Next, as shown in FIG. 14B, a mask pattern called "_2_01" is embedded in the character pattern. As a result, character cutting is performed as shown in Fig. 14C.

또한, 도 14d는 각 유의 화소로부터 추출된 마스크 패턴 「_201」을 나타낸다. 이 마스크 패턴에는, 2문자째에 특정 마스크 패턴인 「2」가 포함되어 있기 때문에, 부호가 포함되어 있다고 판단하고, 문자와 부호를 분리하는 처리를 행한다. 14D shows the mask pattern "_201" extracted from each pixel of significance. Since this mask pattern contains "2" which is a specific mask pattern in the 2nd character, it is judged that the code is included, and the process which separates a character and a code is performed.

그 결과, 도 14e에서 도시하는 바와 같이, 「る」와 「。」가 2개의 문자 블록으로 분리된다.  본 실시 형태에서는, 기호 전의 문자에 특정 마스크 패턴(예를 들면 「2」)을 매립하여, 문자와 기호를 분리하는 방법을 나타냈다. 이 방법과 마찬가지로 하여, 주목 문자 화상의 주변부에 문자 이외의 화상을 갖고 있는 경우, 그 주목 문자 화상에 특정 마스크 패턴을 합성한다. 예를 들면, 표의 선 등이 주목 문자 화상의 주변부에 배치되어 있는 경우에는, 그 문자 화상에 특정 마스크 패턴(예를 들면 「3」)을 합성함으로써, 문자와 표의 선 등을 분리할 수 있다.As a result, as shown in Fig. 14E, "RU" and "." Are separated into two character blocks. In this embodiment, the specific mask pattern (for example, "2") was embedded in the character before a symbol, and the method of separating a character and a symbol was shown. In the same manner as in this method, in the case where there is an image other than a character in the periphery of the character image of interest, a specific mask pattern is synthesized to the character image of interest. For example, when a table line or the like is disposed at the periphery of the character image of interest, the character and the table line can be separated by synthesizing a specific mask pattern (for example, "3") to the character image.

이에 의해, 표 안의 문자나 기호의 잘라내기를 정확하게 행할 수 있다.As a result, the characters and symbols in the table can be cut out accurately.

<그 밖의 실시 형태><Other embodiments>

또한, 본 발명은, 복수의 기기(예를 들면 호스트 컴퓨터, 인터페이스 기기, 리더, 프린터 등)로 구성되는 시스템에 적용해도, 1개의 기기로 이루어지는 장치(예를 들면, 복사기, 팩시밀리 장치 등)에 적용해도 된다.In addition, even if the present invention is applied to a system composed of a plurality of devices (for example, a host computer, an interface device, a reader, a printer, etc.), the present invention may be applied to a device (for example, a copier, a facsimile device, etc.) consisting of one device. You may apply.

또한, 전술한 실시 형태의 기능을 실현하는 컴퓨터 프로그램을 기억한 기억 매체를 장치에 공급하고, 그 장치의 컴퓨터(또는 CPU, MPU)가 컴퓨터 판독 가능 기억 매체에 저장된 컴퓨터 프로그램을 실행함으로써 달성된다.Moreover, it is achieved by supplying the storage medium which stored the computer program which implement | achieves the function of the above-mentioned embodiment to an apparatus, and the computer (or CPU, MPU) of the apparatus executes the computer program stored in the computer readable storage medium.

이 경우, 컴퓨터 판독 가능 기억 매체로부터 읽어내어진 컴퓨터 프로그램 자체가 전술한 실시 형태의 기능을 실현하기 때문에, 그 컴퓨터 프로그램을 기억한 컴퓨터 판독 가능 기억 매체는 본 발명을 구성한다. In this case, since the computer program itself read out from the computer readable storage medium realizes the functions of the above-described embodiments, the computer readable storage medium storing the computer program constitutes the present invention.

또한, 컴퓨터가 읽어들인 컴퓨터 프로그램에 기초하여, 컴퓨터 상에서 가동하는 오퍼레이팅 시스템(OS) 등이 실제의 처리를 행하기 때문에, 그 처리에 의해 전술한 실시 형태의 기능이 실현되는 경우도 포함된다.Moreover, since the operating system (OS) etc. which run on a computer perform an actual process based on the computer program read by the computer, the case where the function of the above-mentioned embodiment is implemented by the process is also included.

또한, 컴퓨터 판독 가능 기억 매체에 저장된 컴퓨터 프로그램이, 컴퓨터에 접속된 기능 확장 카드 또는 기능 확장 유닛에 구비되는 메모리에 기입된 후, 컴퓨터 프로그램의 지시에 기초하여,CPU 등이 실제의 처리를 행하는 경우가 있다. 이러한 경우도 전술한 실시 형태의 기능을 실현할 수 있기 때문에, 본 발명에 포함되는 것은 물론이다.In addition, when a computer program stored in a computer readable storage medium is written in a memory provided in a function expansion card or a function expansion unit connected to the computer, and then the CPU or the like performs the actual processing based on the instruction of the computer program. There is. In such a case as well, the functions of the above-described embodiments can be realized.

본 발명을 컴퓨터 판독 가능 기억 매체에 적용하는 경우, 그 컴퓨터 판독 가능 기억 매체에는, 전술한 플로우차트에 대응하는 컴퓨터 프로그램이 저장된다.When the present invention is applied to a computer readable storage medium, the computer program corresponding to the above-described flowchart is stored in the computer readable storage medium.

당 분야의 업자라면 부가적인 장점 및 변경들이 용이하게 생성될 수 있다. 따라서, 광의의 관점에서의 본 발명은 본 명세서에 예시되고 기술된 상세한 설명 및 대표 실시예들에 한정되는 것은 아니다. 따라서, 첨부된 청구범위들 및 그 등가물들에 의해 정의된 바와 같은 일반적인 발명적 개념의 정신 또는 범위로부터 벗 어나지 않고 다양한 변경들이 생성될 수 있다.Additional advantages and modifications can be readily made by those skilled in the art. Accordingly, the invention in its broadest sense is not limited to the description and representative embodiments illustrated and described herein. Accordingly, various modifications may be made without departing from the spirit or scope of the general inventive concept as defined by the appended claims and their equivalents.

도 1은 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치 및 문자 잘라내기 장치의 전기적 구성을 도시하는 도면.BRIEF DESCRIPTION OF THE DRAWINGS It is a figure which shows the electrical structure of the mask pattern synthesizing apparatus and character cutting apparatus which concerns on one Embodiment of this invention.

도 2는 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 구성을 도시하는 도면. 2 is a diagram illustrating a configuration of a mask pattern synthesizing apparatus according to an embodiment of the present invention.

도 3은 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트. 3 is a flowchart for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

도 4는 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치에서 마스크 패턴을 합성하는 수순을 설명하는 도면.4 is a diagram illustrating a procedure of synthesizing a mask pattern in the mask pattern synthesizing apparatus according to one embodiment of the present invention.

도 5는 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 구성을 도시하는 도면. 5 is a diagram illustrating a configuration of a character cutting device according to an embodiment of the present invention.

도 6은 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 동작 수순을 설명하는 플로우차트. 6 is a flowchart for explaining the operation procedure of the character cutting device according to the embodiment of the present invention.

도 7a 내지 도 7d는 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하기 위한 도면. 7A to 7D are views for concretely explaining a character cutting process according to an embodiment of the present invention.

도 8은 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트. 8 is a flowchart for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

도 9a 내지 도 9e는 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하기 위한 도면. 9A to 9E are views for explaining in detail the character cutting process according to the embodiment of the present invention.

도 10 및 도 11은 본 발명의 일 실시 형태에 따른 마스크 패턴 합성 장치의 동작 수순을 설명하는 플로우차트.10 and 11 are flowcharts for explaining the operation procedure of the mask pattern synthesizing apparatus according to the embodiment of the present invention.

도 12는 본 발명의 일 실시 형태에 따른 문자 잘라내기 장치의 구성을 도시하는 도면. 12 is a diagram illustrating a configuration of a character cutting device according to an embodiment of the present invention.

도 13은 본 발명의 일 실시 형태에 따른 스텝 S604의 상세한 동작 수순을 설명하는 플로우차트.Fig. 13 is a flowchart for explaining a detailed operational procedure of step S604 according to the embodiment of the present invention.

도 14a 내지 도 14e는 본 발명의 일 실시 형태에 따른 문자 잘라내기 처리를 구체적으로 설명하기 위한 도면.14A to 14E are views for explaining in detail the character cutting process according to the embodiment of the present invention.

도 15a 내지 도 15e는 종래의 문자 잘라내기의 오류 정정 처리에 대해서 설명하기 위한 도면.15A to 15E are diagrams for explaining conventional error correction processing for character truncation.

도 16 및 도 17은 종래의 문자 잘라내기의 오류 정정 처리에 대해서 설명하기 위한 도면. 16 and 17 are diagrams for explaining conventional error correction processing for character truncation.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

101 : 컴퓨터101: computer

103 : 주기억 장치103: main memory device

105 : 비디오 컨트롤러105: video controller

106 : 모니터106: monitor

113 : 마우스113: mouse

114 ; 키보드114; keyboard

116 : 프린터116: Printer

117 : 스캐너117: Scanner

119 : 터치 패널119: touch panel

200 : 문장 정보200: sentence information

201 : 문장 정보 입력부201: sentence information input unit

202 : 문자 패턴 생성부202: character pattern generation unit

203 : 마스크 패턴 기억부203: mask pattern storage unit

204 : 마스크 패턴 선택부204: mask pattern selection unit

205 : 합성부205: synthesis unit

206 : 페이지 화상206: page image

Claims (19)

문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치로서, An information processing apparatus for generating document image data based on sentence information composed of character codes, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, Storage means for storing a plurality of different mask patterns; 상기 문장 정보를 입력하는 입력 수단과, Input means for inputting the sentence information; 상기 입력 수단에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 대응하는 문자 패턴을 생성하는 문자 패턴 생성 수단과, Character pattern generation means for generating a corresponding character pattern on the basis of a character code constituting a sentence in the sentence information input by the input means; 주목 문자 코드에 대응하는 문자 패턴을 생성하는 경우, 상기 주목 문자 코드의 1개 전의 문자 코드에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 수단과, Selecting means for selecting from the storage means a mask pattern different from the mask pattern selected by the character code preceding one of the character strings of interest when generating a character pattern corresponding to the character string of interest; 주목 문자 코드에 대응하는 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하는 합성 수단Synthesizing means for synthesizing a character pattern corresponding to the character code of interest and the mask pattern selected by the selection means; 을 구비하는 것을 특징으로 하는 정보 처리 장치.An information processing apparatus, comprising: a. 제1항에 있어서,The method of claim 1, 상기 기억 수단은, 2개의 마스크 패턴을 기억하고, The storage means stores two mask patterns, 상기 선택 수단은, 1문자분의 문자 패턴이 생성될 때마다, 상기 2개의 마스크 패턴의 한쪽을 교대로 선택하는 것을 특징으로 하는 정보 처리 장치.The selection means selects one of the two mask patterns alternately each time a character pattern for one character is generated. 제1항에 있어서,The method of claim 1, 상기 기억 수단은, 3개의 마스크 패턴을 기억하고, The storage means stores three mask patterns, 상기 선택 수단은, 1문자분의 문자 패턴이 생성될 때마다, 다음 문자가 부호가 아닌 경우에는, 상기 3개의 마스크 패턴 중의 제1 마스크 패턴 또는 제2 마스크 패턴으로부터 어느 하나의 마스크 패턴을 선택하고, 다음 문자가 부호인 경우에는, 상기 제1 마스크 패턴 및 제2 마스크 패턴과는 상이한 제3 마스크 패턴을 선택하는 것을 특징으로 하는 정보 처리 장치.The selection means selects any one of the mask patterns from the first mask pattern or the second mask pattern among the three mask patterns when the next character is not a sign every time a character pattern for one character is generated. And when the next character is a sign, a third mask pattern different from the first mask pattern and the second mask pattern is selected. 제1항 내지 제3항 중 어느 한 항에 있어서,The method according to any one of claims 1 to 3, 상기 합성 수단은, 인쇄 수단에 출력하는 것을 특징으로 하는 정보 처리 장치.The synthesizing means outputs to the printing means. 제1항에 기재한 정보 처리 장치가 출력한 페이지 화상으로부터, 문자 화상 단위의 후처리를 위해서 각 문자 화상을 잘라내는 화상 처리 장치로서, As the image processing apparatus which cuts out each character image for the post-processing of a character image unit from the page image output by the information processing apparatus of Claim 1, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, Storage means for storing a plurality of different mask patterns; 페이지 화상을 입력하는 입력 수단과, Input means for inputting page images, 입력된 페이지 화상을, 수직, 수평 방향으로 사영하여, 유의(有意) 화소의 분포를 나타내는 히스토그램을 작성하는 작성 수단과, Creation means for projecting the input page image in the vertical and horizontal directions to create a histogram indicating the distribution of significant pixels; 작성된 히스토그램에 기초하여, 유의 화소의 영역을 임시 문자 화상 영역으로서 추출하는 임시 추출 수단과, Temporary extraction means for extracting a region of the pixel of interest as a temporary character image region based on the created histogram; 상기 임시 추출 수단에 의해 추출된 임시 문자 화상 영역 내의 임시 문자 화상이, 상기 기억 수단에 기억된 어느 마스크 패턴과 합성되었는지를 판별하는 마스크 패턴 판별 수단과, Mask pattern determination means for determining which mask pattern stored in the temporary character image area extracted by said temporary extraction means is combined with which mask pattern stored in said storage means; 상기 마스크 패턴 판별 수단에 의해 판별된 주목 임시 문자 화상의 마스크 패턴의 종류와, 직전 위치의 임시 문자 화상에 합성된 마스크 패턴의 종류가 동일한지의 여부를 판정하는 판정 수단과, Determination means for determining whether the type of the mask pattern of the temporary character image of interest determined by the mask pattern determination means and the type of the mask pattern synthesized in the temporary character image at the immediately preceding position are the same; 상기 판정 수단에 의해, 주목 임시 문자 화상과 직전 위치의 임시 문자 화상의 마스크 패턴의 종류가 동일하다고 판정한 경우에는, 주목 임시 문자 화상과 직전 위치에 있는 임시 문자 화상을 포함하는 영역의 화상을 새로운 임시 문자 화상으로서 갱신하고,When the determination means determines that the kind of mask pattern of the temporary character image of interest and the temporary character image at the immediately preceding position is the same, the image of the area including the temporary character image of interest and the temporary character image located at the immediately preceding position is renewed. We update as temporary letter image, 상기 판정 수단에 의해, 주목 임시 문자 화상과 직전 위치의 임시 문자 화상의 마스크 패턴의 종류가 서로 다르다고 판정한 경우에는, 주목 임시 문자 화상의 직전 위치에서의 임시 문자 화상이 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하는 제어 수단When the determination means determines that the types of mask patterns of the temporary text image of interest and the temporary character image at the immediately preceding position are different from each other, the temporary text image at the position immediately before the temporary text image of interest is cut out of the normal character image. Control means for outputting to the post-process as an image 을 구비하는 것을 특징으로 하는 화상 처리 장치. An image processing apparatus comprising: 제5항에 있어서,The method of claim 5, 상기 합성 수단이 출력하는 후처리는, 문자 인식 수단으로 하는 것을 특징으로 하는 화상 처리 장치. The post-processing output by the synthesizing means is a character recognition means. 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치의 제어 방법으로서, As a control method of the information processing apparatus which has the memory means which stores several mask patterns different from each other, and produces | generates document image data based on the sentence information comprised from a character code, 입력 수단이 문장 정보를 입력하는 입력 공정과, An input step in which the input means inputs sentence information, 상기 입력 공정에 의해 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 문자 패턴 생성 수단이 대응하는 문자 패턴을 생성하는 문자 패턴 생성 공정과, A character pattern generation step of generating a character pattern to which a character pattern generation means corresponds based on a character code constituting a sentence in the sentence information by the input step; 상기 문자 패턴 생성 공정에서 주목 문자 코드에 대응하는 문자 패턴을 생성하는 경우, 선택 수단이 상기 주목 문자 코드의 1개 전의 문자 코드에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 공정과, In the case where the character pattern corresponding to the character code of interest is generated in the character pattern generation step, the selection means selects, from the storage means, a mask pattern different from the mask pattern selected by the character code preceding one of the character code of interest; Fair, 합성 수단이, 주목 문자 코드에 대응하는 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하는 합성 공정A combining step in which the combining means synthesizes the character pattern corresponding to the character code of interest and the mask pattern selected by the selection means; 을 포함하는 것을 특징으로 하는 정보 처리 장치의 제어 방법. Control method of the information processing apparatus comprising a. 제7항에 있어서,The method of claim 7, wherein 상기 기억 수단에는 2개의 마스크 패턴이 기억되고, Two mask patterns are stored in the storage means, 상기 선택 공정은, 1문자분의 문자 패턴이 생성될 때마다, 상기 2개의 마스크 패턴의 한쪽을 교대로 선택하는 것을 특징으로 하는 정보 처리 장치의 제어 방법.The selecting step is a control method for an information processing apparatus, characterized in that one of the two mask patterns is alternately selected each time a character pattern of one character is generated. 제7항 또는 제8항에 있어서,The method according to claim 7 or 8, 상기 합성 공정은, 인쇄 수단에 출력하는 것을 특징으로 하는 정보 처리 장치의 제어 방법. And the synthesizing step is output to printing means. 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 제1항에 기재한 정보 처리 장치가 출력한 페이지 화상으로부터, 문자 화상 단위의 후처리를 위해서 각 문자 화상을 잘라내는 화상 처리 장치의 제어 방법으로서, Control of the image processing apparatus which is equipped with the memory means which memorize | stores several mask patterns different from each other, and cuts out each character image for the post-processing of a character image unit from the page image output by the information processing apparatus of Claim 1. As a method, 입력 수단이 페이지 화상을 입력하는 입력 공정과, An input step in which the input means inputs the page image, 작성 수단이, 입력된 페이지 화상을, 수직, 수평 방향으로 사영하여, 유의 화소의 분포를 나타내는 히스토그램을 작성하는 작성 공정과, A creation step in which the creation means projects the input page image in the vertical and horizontal directions to create a histogram indicating the distribution of pixels of interest; 임시 추출 수단이, 작성된 히스토그램에 기초하여, 유의 화소의 영역을 임시 문자 화상 영역으로서 추출하는 임시 추출 공정과, A temporary extraction step, wherein the temporary extraction means extracts the area of the pixel of interest as a temporary character image area based on the created histogram; 마스크 패턴 판별 수단이, 상기 임시 추출 공정에서 추출한 임시 문자 화상이 상기 기억 수단에 기억된 어느 마스크 패턴과 합성되었는지를 판별하는 마스크 패턴 판별 공정과, A mask pattern determination step of determining, by the mask pattern discrimination means, which mask pattern stored in the temporary means image extracted in the temporary extraction step is combined with; 판정 수단이, 상기 마스크 패턴 판별 공정에 의해 판별된 주목 임시 문자 화상의 마스크 패턴의 종류와, 직전 위치의 임시 문자 화상에 합성된 마스크 패턴의 종류가 동일한지의 여부를 판정하는 판정 공정과, A judging step of the judging means judging whether or not the type of the mask pattern of the temporary character image of interest determined by the mask pattern determination step is identical to the type of the mask pattern synthesized in the temporary character image at the immediately preceding position; 제어 수단이, 상기 판정 공정에 의해, 주목 임시 문자 화상과 직전 위치의 임시 문자 화상의 마스크 패턴의 종류가 동일하다고 판정한 경우에는, 주목 임시 문자 화상과 직전 위치에 있는 임시 문자 화상을 포함하는 영역의 화상을 새로운 임시 문자 화상으로서 갱신하고, When the control means determines that the kind of mask pattern of the temporary character image of interest and the temporary character image of the previous position is the same by the determination step, the area including the temporary character image of interest and the temporary character image located at the immediately preceding position. To update the image as a new temporary character image, 상기 판정 공정에 의해, 주목 임시 문자 화상과 직전 위치의 임시 문자 화상의 마스크 패턴의 종류가 상이하다고 판정한 경우에는, 주목 임시 문자 화상의 직전 위치에서의 임시 문자 화상이 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하는 제어 공정In the case where it is determined by the determination step that the type of mask pattern of the temporary character image of interest and the temporary character image at the immediately preceding position is different, the temporary character image at the position immediately before the temporary character image of interest is cut out of the normal character image. Control process output to post-processing as image 을 포함하는 것을 특징으로 하는 화상 처리 장치의 제어 방법.Control method of an image processing apparatus comprising a. 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치로서, An information processing apparatus for generating document image data based on sentence information composed of character codes, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, Storage means for storing a plurality of different mask patterns; 문장 정보를 입력하는 입력 수단과, An input means for inputting sentence information, 상기 입력 수단에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드에 기초하여, 대응하는 문자 패턴을 생성하는 문자 패턴 생성 수단과,Character pattern generation means for generating a corresponding character pattern on the basis of a character code constituting a sentence in the sentence information input by the input means; 주목 문자 패턴의 독립된 유의 화소의 분포 영역이 2 이상으로 구성되었는지의 여부를 판단하는 판단 수단과, Judging means for judging whether or not the distribution area of the independent significant pixels of the attention character pattern is composed of two or more; 상기 판단 수단에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 1개로 구성되었다고 판단된 경우에는, 주목 문자 패턴을, 페이지 화상의 일부로서 출력하는 제1 출력 수단과, A first output means for outputting the character pattern of interest as part of the page image, when it is determined by the determination means that the distribution region of the independent significant pixels of the character of interest is composed of one; 상기 판단 수단에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 2 이상으로 구성되었다고 판단된 경우에는, 상기 주목 문자 패턴의 1개 전의 문자 패턴에 의해 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 수단과, In the case where it is determined by the determining means that the distribution area of the independent significant pixels of the attention character pattern is composed of two or more, the mask pattern different from the mask pattern selected by the character pattern before one of the attention character pattern is described. Selection means for selecting from storage means, 주목 문자 패턴과, 상기 선택 수단에 의해 선택된 마스크 패턴을 합성하고, 합성 후의 문자 패턴을 페이지 화상의 일부로서 출력하는 제2 출력 수단Second output means for synthesizing the character pattern of interest and the mask pattern selected by the selection means, and outputting the synthesized character pattern as part of the page image; 을 구비하는 것을 특징으로 하는 정보 처리 장치. An information processing apparatus, comprising: a. 제11항에 있어서,The method of claim 11, 상기 판단 수단은, 주목 문자 패턴을 구성하는 유의 화소의 수평, 또는, 수직 방향의 사영 히스토그램을 작성하고, 해당 히스토그램에 기초하여, 독립된 유의 화소의 분포 영역이 2 이상 있는지의 여부를 판단하는 것을 특징으로 하는 정보 처리 장치. The determining means creates a horizontal or vertical projection histogram of the pixels of interest forming the character pattern of interest, and judges whether or not there are two or more independent areas of distribution of significant pixels based on the histogram. An information processing apparatus. 제11항에 있어서,The method of claim 11, 유의 화소의 독립된 분포 영역을 2 이상 갖는 문자를 나타내는 문자 코드를 나타내는 사전 정보를 기억하는 사전 기억 수단을 더 구비하고, Further comprising dictionary storage means for storing dictionary information indicating a character code indicating a character having two or more independent distribution areas of the pixel of interest, 상기 판단 수단은, 주목 문자 코드가 상기 사전 정보에 등록되어 있는지의 여부를 검출함으로써, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이 2 이상으로 구성되었는지의 여부를 판단하는 것을 특징으로 하는 정보 처리 장치.The determining means determines whether or not the distribution region of the independent significant pixels of the attention character pattern is composed of two or more by detecting whether the attention character code is registered in the dictionary information. . 제11항에 있어서,The method of claim 11, 상기 선택 수단은, 직후의 문자 패턴이 부호인 주목 문자 패턴에는, 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 선택하는 것을 특징으로 하는 정보 처리 장치. The selection means selects a mask pattern different from the mask pattern previously selected for the character pattern of interest whose character pattern immediately following is a sign. 제11항에 있어서,The method of claim 11, 상기 선택 수단은, 주변부에 문자 이외의 화상을 갖는 주목 문자 화상에는, 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 선택하는 것을 특징으로 하는 정보 처리 장치. The selection means selects a mask pattern different from the mask pattern previously selected for the character image of interest having an image other than the character in the periphery. 제11항에 기재한 정보 처리 장치가 출력한 페이지 화상으로부터, 문자 화상 단위의 후처리를 위해서 각 문자 화상을 잘라내는 화상 처리 장치로서,As an image processing apparatus which cuts out each character image for post processing of a character image unit from the page image output by the information processing apparatus of Claim 11, 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단과, Storage means for storing a plurality of different mask patterns; 페이지 화상을 입력하는 입력 수단과, Input means for inputting page images, 입력된 페이지 화상을, 수직, 수평 방향으로 사영하여, 유의 화소의 분포를 나타내는 히스토그램을 작성하는 작성 수단과, Creation means for projecting the input page image in the vertical and horizontal directions to create a histogram indicating the distribution of pixels of interest; 작성된 히스토그램에 기초하여, 유의 화소의 영역을 임시 문자 화상 영역으로서 추출하는 임시 추출 수단과, Temporary extraction means for extracting a region of the pixel of interest as a temporary character image region based on the created histogram; 상기 임시 문자 화상 영역 내의 임시 문자 화상이, 상기 기억 수단에 기억된 마스크 패턴 중 어느 하나와 합성되어 있는지의 여부를 판별하고, 합성되어 있는 경우에는, 그 마스크 패턴을 식별하는 마스크 패턴 판별 수단과, Mask pattern discrimination means for discriminating whether or not the temporary character image in the temporary character image area is combined with any one of the mask patterns stored in the storage means, and identifying the mask pattern if synthesized; 상기 마스크 패턴 판별 수단에 의해, 주목 임시 문자 화상이, 상기 기억 수단에 기억된 마스크 패턴 중 어느 하나와도 합성되어 있지 않다고 판별된 경우, 주목 임시 문자 화상을 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하고, When the mask pattern discriminating means determines that the temporary text image of interest is not synthesized with any of the mask patterns stored in the storage means, the temporary text image of interest is regarded as a cutout image of the normal text image. Output to processing, 상기 마스크 패턴 판별 수단에 의해 판별된 주목 임시 문자 화상이 상기 마스크 패턴에 의해 합성되어 있다고 판별한 경우, 주목 임시 문자 화상과 인접하는 임시 문자 화상 중에서, 동일한 마스크 패턴에 의해 합성된 임시 문자 화상을 포함하는 영역을, 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하는 출력 수단When it is determined that the temporary text image of interest determined by the mask pattern discriminating means is synthesized by the mask pattern, the temporary text image synthesized by the same mask pattern is included among the temporary text images adjacent to the attentional text image. Output means for outputting a region to be processed to a post-processing as a cut-out image of a normal character image 을 구비하는 것을 특징으로 하는 화상 처리 장치. An image processing apparatus comprising: 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 문장을 구성하는 문자 코드로 구성되는 문장 정보에 기초하여, 문서 화상 데이터를 생성하는 정보 처리 장치의 제어 방법으로서, As a control method of an information processing apparatus, comprising: a storage means for storing a plurality of different mask patterns, and generating document image data on the basis of sentence information composed of character codes constituting a sentence, 입력 수단이 문장 정보를 입력하는 입력 공정과, An input step in which the input means inputs sentence information, 상기 입력 공정에 의해 입력된 상기 문장 정보 중의 문장을 구성하는 문자 코드의 순번으로, 문자 패턴 생성 수단이 대응하는 문자 패턴을 생성하는 문자 패턴 생성 공정과, A character pattern generation step of generating a character pattern corresponding to the character pattern generation means in a sequence of character codes constituting a sentence in the sentence information input by the input step; 판단 수단이, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이, 2 이상으 로 구성되었는지의 여부를 판단하는 판단 공정과, A judging step, wherein the judging means judges whether or not the distribution area of the independent significant pixels of the attention character pattern is composed of two or more; 상기 판단 공정에 의해 주목 문자 패턴이, 독립된 유의 화소의 분포 영역이 1개로 구성되었다고 판단한 경우에는, 제1 출력 수단이, 주목 문자 패턴을, 페이지 화상의 일부로서 출력하는 제1 출력 공정과, In the case where it is determined by the determination step that the target character pattern is composed of one independent distribution area of the significant pixels, the first output unit outputs the target character pattern as part of the page image; 상기 판단 공정에 의해, 주목 문자 패턴의 독립된 유의 화소의 분포 영역이 2 이상으로 구성되었다고 판단된 경우에는, 선택 수단이 종전에 선택한 마스크 패턴과는 상이한 마스크 패턴을 상기 기억 수단으로부터 선택하는 선택 공정과, In the case where it is determined by the determination step that the distribution area of the independent significant pixels of the target character pattern is composed of two or more, the selection step of selecting a mask pattern different from the mask pattern previously selected by the selection means from the storage means; , 제2 출력 수단이, 주목 문자 패턴과, 상기 선택 공정에서 선택된 마스크 패턴을 합성하고, 합성 후의 문자 패턴을 페이지 화상의 일부로서 출력하는 제2 출력 공정A second output step in which the second output means synthesizes the character pattern of interest and the mask pattern selected in the selection step, and outputs the synthesized character pattern as part of the page image. 을 포함하는 것을 특징으로 하는 정보 처리 장치의 제어 방법. Control method of the information processing apparatus comprising a. 서로 다른 복수의 마스크 패턴을 기억하는 기억 수단을 구비하고, 제11항에 기재한 정보 처리 장치가 출력한 페이지 화상으로부터, 문자 화상 단위의 후처리를 위해서 각 문자 화상을 잘라내는 화상 처리 장치의 제어 방법으로서, Control of the image processing apparatus which is equipped with the memory means which memorize | stores several mask patterns different from each other, and cuts out each character image for the post-processing of a character image unit from the page image output by the information processing apparatus of Claim 11. As a method, 입력 수단이 페이지 화상을 입력하는 입력 공정과, An input step in which the input means inputs the page image, 작성 수단이, 입력된 페이지 화상을, 수직, 수평 방향으로 사영하여, 유의 화소의 분포를 나타내는 히스토그램을 작성하는 작성 공정과, A creation step in which the creation means projects the input page image in the vertical and horizontal directions to create a histogram indicating the distribution of pixels of interest; 임시 추출 수단이, 작성된 히스토그램에 기초하여, 유의 화소의 영역을 임시 문자 화상 영역으로서 추출하는 임시 추출 공정과, A temporary extraction step, wherein the temporary extraction means extracts the area of the pixel of interest as a temporary character image area based on the created histogram; 마스크 패턴 판별 수단이, 상기 임시 추출 공정에서 추출한 임시 문자 화상이 상기 기억 수단에 기억된 마스크 패턴 중 어느 하나와 합성되어 있는지의 여부를 판단하고, 합성되어 있는 경우에는, 그 마스크 패턴을 식별하는 마스크 패턴 판별 공정과, The mask pattern discriminating means judges whether or not the temporary character image extracted in the temporary extraction process is combined with any one of the mask patterns stored in the storage means, and when it is synthesized, a mask for identifying the mask pattern. Pattern discrimination process, 상기 마스크 패턴 판별 공정에 의해, 주목 임시 문자 화상이, 상기 기억 수단에 기억된 마스크 패턴 중 어느 하나와도 합성되어 있지 않다고 판별된 경우, 출력 수단이 주목 임시 문자 화상을 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하고,When it is determined by the mask pattern determination step that the temporary text image of interest is not synthesized with any of the mask patterns stored in the storage means, the output means cuts out the temporary text image of interest by the normal character image. Output to post-processing as an image, 상기 마스크 패턴 판별 공정에 의해 판별된 주목 임시 문자 화상이 상기 마스크 패턴에 의해 합성되어 있다고 판별한 경우, 출력 수단이, 주목 임시 문자 화상과 인접하는 임시 문자 화상 중에서, 동일한 마스크 패턴에 의해 합성된 임시 문자 화상을 포함하는 영역을, 정규의 문자 화상의 잘라내기 화상으로서 후처리에 출력하는 출력 공정When it is determined that the temporary text image of interest determined by the mask pattern discrimination process is synthesized by the mask pattern, the output means is constructed by the same mask pattern among the temporary text images adjacent to the temporary text image of interest. An output step of outputting a region containing a character image to a post-process as a cut-out image of a regular character image 을 포함하는 것을 특징으로 하는 화상 처리 장치의 제어 방법.Control method of an image processing apparatus comprising a. 제7항, 제8항 또는 제17항 중 어느 한 항에 기재한 공정을 실행시키는 컴퓨터 프로그램을 저장한 것을 특징으로 하는 컴퓨터 판독 가능 기억 매체. A computer-readable storage medium storing a computer program for executing the process according to any one of claims 7, 8 and 17.
KR1020070130168A 2006-12-13 2007-12-13 Information processing device and method of controlling the same KR100905857B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2006-00336385 2006-12-13
JP2006336385A JP4818091B2 (en) 2006-12-13 2006-12-13 Information processing apparatus, image processing apparatus, control method for information processing apparatus, and control method for image processing apparatus

Publications (2)

Publication Number Publication Date
KR20080055710A true KR20080055710A (en) 2008-06-19
KR100905857B1 KR100905857B1 (en) 2009-07-02

Family

ID=39517089

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070130168A KR100905857B1 (en) 2006-12-13 2007-12-13 Information processing device and method of controlling the same

Country Status (3)

Country Link
JP (1) JP4818091B2 (en)
KR (1) KR100905857B1 (en)
CN (1) CN101201936B (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108345577A (en) * 2017-01-24 2018-07-31 富士施乐株式会社 Information processing equipment and method

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100988309B1 (en) 2008-12-11 2010-10-29 주식회사 엘아이텍 Inserting method of document identifier and decoding method thereof
CN102074042B (en) * 2010-12-29 2012-11-14 律国甦 Pattern generation system capable of utilizing everyday objects to generate rich pattern effect and method thereof
CN102968764B (en) * 2012-10-26 2015-04-29 北京航空航天大学 Chinese character image inpainting method based on strokes
JP6330388B2 (en) * 2014-03-14 2018-05-30 オムロン株式会社 Image processing method, image processing apparatus, program for executing the method, and recording medium for recording the program
WO2016024200A2 (en) * 2014-08-12 2016-02-18 Mantisvision Ltd. Structured light projection and imaging
CN109903261B (en) * 2019-02-19 2021-04-09 北京奇艺世纪科技有限公司 Image processing method and device and electronic equipment

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6274183A (en) * 1985-09-27 1987-04-04 Sony Corp Character recognizing device
JP2002279344A (en) * 2001-03-16 2002-09-27 Ricoh Co Ltd Character recognition device and method, and recording medium
JP3938176B2 (en) * 2003-12-10 2007-06-27 キヤノン株式会社 Image processing method, image processing apparatus, program, and recording medium
CN100364260C (en) * 2004-01-18 2008-01-23 哈尔滨工业大学 Method for making and verifying digital signature and digital watermark bar code
JP3990375B2 (en) * 2004-03-30 2007-10-10 東芝ソリューション株式会社 Image processing apparatus and image processing method
JP2006050551A (en) * 2004-06-30 2006-02-16 Canon Inc Image processing apparatus, image processing method, program and storage medium
CN100573577C (en) * 2004-12-08 2009-12-23 株式会社理光 In file and picture, embed and extract additional information
JP2006217035A (en) * 2005-02-01 2006-08-17 Canon Inc Printer, image processing apparatus, image processing system, image processing method
JP4310288B2 (en) * 2005-04-12 2009-08-05 キヤノン株式会社 Image processing apparatus and method, program, and storage medium

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108345577A (en) * 2017-01-24 2018-07-31 富士施乐株式会社 Information processing equipment and method

Also Published As

Publication number Publication date
JP2008146608A (en) 2008-06-26
CN101201936B (en) 2010-04-14
CN101201936A (en) 2008-06-18
KR100905857B1 (en) 2009-07-02
JP4818091B2 (en) 2011-11-16

Similar Documents

Publication Publication Date Title
KR100905857B1 (en) Information processing device and method of controlling the same
EP2264995B1 (en) Image processing apparatus, image processing method, and computer program
JP4310288B2 (en) Image processing apparatus and method, program, and storage medium
JP2004265384A (en) Image processing system, information processing device, control method, computer program, and computer-readable storage medium
US20080273813A1 (en) Method for controlling the combining of original image data and coded image data
JP4194462B2 (en) Digital watermark embedding method, digital watermark embedding apparatus, program for realizing them, and computer-readable storage medium
JP2005073015A (en) Device and method for image processing and computer program
JP2008109394A (en) Image processor, its method, and program
EP1684162A2 (en) Print data processor
JP2006050551A (en) Image processing apparatus, image processing method, program and storage medium
JP4673200B2 (en) Print processing system and print processing method
JP4921335B2 (en) Document processing apparatus and search method
JPH113390A (en) Method and device for generating embedded code
US20100021059A1 (en) Image processing apparatus and method
JP2002232679A (en) Method and device for image processing, computer program, and storage medium
JP4164458B2 (en) Information processing apparatus and method, computer program, and computer-readable storage medium
JP2006270589A (en) Information processing device, information processing method, program, and recording medium
US8125691B2 (en) Information processing apparatus and method, computer program and computer-readable recording medium for embedding watermark information
JP2009278181A (en) Electronic watermark information embedding apparatus and method, and electronic watermark information extraction apparatus and method
CN106469034A (en) Drawing command processing meanss and drawing command processing method
JP7497620B2 (en) Document data generation device, image forming device, and document data generation program
JP2009141525A (en) Apparatus and method of processing image
JP2007142986A (en) Image processor and image processing method
JP5720166B2 (en) Image processing apparatus and image processing program
JP2005253005A (en) Information processing apparatus and method therefor, computer program and computer-readable storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130528

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140527

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150527

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160525

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20170526

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180525

Year of fee payment: 10