JP4454550B2 - Image processing apparatus and defect image correction method - Google Patents

Image processing apparatus and defect image correction method Download PDF

Info

Publication number
JP4454550B2
JP4454550B2 JP2005221642A JP2005221642A JP4454550B2 JP 4454550 B2 JP4454550 B2 JP 4454550B2 JP 2005221642 A JP2005221642 A JP 2005221642A JP 2005221642 A JP2005221642 A JP 2005221642A JP 4454550 B2 JP4454550 B2 JP 4454550B2
Authority
JP
Japan
Prior art keywords
mail
image
image data
processing apparatus
reply
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005221642A
Other languages
Japanese (ja)
Other versions
JP2007037067A (en
Inventor
政雄 宮座
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2005221642A priority Critical patent/JP4454550B2/en
Publication of JP2007037067A publication Critical patent/JP2007037067A/en
Application granted granted Critical
Publication of JP4454550B2 publication Critical patent/JP4454550B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Facsimiles In General (AREA)
  • Facsimile Transmission Control (AREA)
  • Editing Of Facsimile Originals (AREA)

Description

本発明は、画像処理装置及び不具合画像修正方法、より詳細には、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能を備えた画像処理装置及び該画像処理装置の不具合画像修正方法に関する。   The present invention relates to an image processing apparatus and a defect image correction method, and more particularly, an image processing apparatus having a function of adding image data acquired by scanning a document to an e-mail and transmitting the image data, and a defect of the image processing apparatus The present invention relates to an image correction method.

従来、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能(所謂、スキャンtoEメール)により画像データを送信し、受信側で画像データに不具合が分かった場合、受信側で不具合箇所を修正したり、送信側に画像データの再送信を依頼する必要があり、受信側に手間をかけていた。   Conventionally, when image data is transmitted by a function of sending image data acquired by scanning a document by adding it to an e-mail (so-called scan to E-mail), and the receiving side finds a defect in the image data, the receiving side It was necessary to correct the troubled part or to request the transmission side to retransmit the image data, which took time and effort on the reception side.

上記のような問題に対して、例えば、特許文献1には、受信側ファクシミリ装置で受信した画像データが復号されたときに画質不良と判定されると、送信側ファクシミリ装置からオペレータの介在なしに画像データを再受信できるようにしたものが開示されている。   To deal with the above problem, for example, in Patent Document 1, if image data received by the receiving facsimile apparatus is decoded and it is determined that the image quality is poor, the transmitting facsimile apparatus does not require operator intervention. An image data that can be received again is disclosed.

これは、受信側ファクシミリ装置が、復号された画像データの画質の良/不良を判定する画質チェック回路を備え、画質チェック回路にて画質不良と判定された場合、再送要求信号を送信側ファクシミリ装置に送出する。一方、送信側ファクシミリ装置は、受信側ファクシミリ装置に送信した画像データを符号メモリ内に蓄積し、再送要求信号を受信すると、符号メモリに蓄積された画像データを受信側ファクシミリ装置に送信する。これにより受信側ファクシミリ装置は受信した画像データが復号されたときに画質不良と判定された場合、送信側ファクシミリ装置からオペレータの介在なしに画像データを再受信できるようにしている。
特開平3−52378号公報
This is because the reception side facsimile apparatus includes an image quality check circuit for determining whether the decoded image data is good or bad, and if the image quality check circuit determines that the image quality is poor, a retransmission request signal is sent to the transmission side facsimile apparatus. To send. On the other hand, the transmission-side facsimile apparatus stores the image data transmitted to the reception-side facsimile apparatus in the code memory, and when receiving a retransmission request signal, transmits the image data stored in the code memory to the reception-side facsimile apparatus. As a result, the reception side facsimile apparatus can re-receive the image data from the transmission side facsimile apparatus without operator intervention when it is determined that the image quality is poor when the received image data is decoded.
JP-A-3-52378

しかしながら、上記特許文献1に記載の発明では、画質不良があった場合に画像データを単に再送するだけなので、例えば、画像が傾いている、画像に黒筋があるなどの不具合があっても修正されることはなかった。   However, in the invention described in Patent Document 1, since image data is simply retransmitted when there is an image quality defect, for example, it is corrected even if there is a problem such as an image being tilted or having black streaks in the image. It was never done.

本発明は、上述のごとき実情に鑑みてなされたものであり、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能を備える画像処理装置において、受信側に送信した画像データに不具合があったときに、不具合の内容を含む返信メールを受信側から受け取り、該返信メールを解析した結果に基づいて画像データを修正して再送信できるようにすること、を目的とする。   The present invention has been made in view of the above circumstances, and in an image processing apparatus having a function of transmitting image data acquired by scanning a document by adding it to an e-mail, the image data transmitted to the receiving side When there is a defect, the object is to receive a reply mail including the contents of the defect from the receiving side, modify the image data based on the result of analyzing the reply mail, and retransmit the image data.

上記課題を解決するために、本発明の第1の技術手段は、原稿を読み取って画像データを取得する原稿読取手段と、該取得した画像データを記憶する記憶手段とを備える画像処理装置において、前記原稿読取手段により取得した画像データを電子メールに付加して送信先のコンピュータに送信する電子メール送信手段と、該送信先のコンピュータから返信された返信メールを解析する返信メール解析手段と、前記返信メールに含まれる画像識別情報に応じた画像データを前記記憶手段から選択し、該選択した画像データの不具合を前記返信メールに含まれる不具合情報に基づいて修正する画像修正手段とを備え、前記記憶手段は、前記原稿読取手段により取得した画像データと、該画像データを前記電子メール送信手段により前記送信先のコンピュータに送信した送信者の電子メールアドレスとを対応付けて記憶し、前記返信メールに含まれる不具合情報が画像の傾きである場合、前記画像修正手段は、前記画像データの傾き判定が可能か否かを判定し、該画像データの傾き判定可能と判定された場合には、前記画像データを回転させるか、または、前記画像データの印字位置を揃えて傾きを修正し、前記電子メール送信手段は、前記画像修正手段により修正した画像データを前記送信先のコンピュータに再度送信し、また、前記画像修正手段により前記画像データの傾き判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴としたものである。 In order to solve the above-described problem, a first technical means of the present invention is an image processing apparatus including a document reading unit that reads a document and acquires image data, and a storage unit that stores the acquired image data. An e-mail transmission unit that adds image data acquired by the document reading unit to an e-mail and transmits the e-mail to a destination computer, a reply e-mail analysis unit that analyzes a reply e-mail returned from the destination computer, select the image data corresponding to the image identification information included in the reply mail from the storage unit, and an image correction means for correcting, based defect of the image data the selected defect information contained in the reply mail, the The storage means stores the image data acquired by the original reading means and the destination data by the e-mail transmission means. In association with the sender's e-mail address sent to computer, when defect information contained in the reply mail is a tilt of the image, the image correcting means, whether or not can tilt determination of the image data If it is determined that the inclination of the image data can be determined, the image data is rotated, or the inclination is corrected by aligning the print position of the image data, and the e-mail transmitting means The image data corrected by the image correcting means is transmitted again to the destination computer, and if the image correcting means determines that the inclination of the image data cannot be determined, the e-mail transmitting means The sender's email address is referenced based on the image identification information included in the reply email, and the image data is not addressed to the email address. It is obtained by and transmits the e-mail for notifying that there is focus.

第2の技術手段は、第1の技術手段において、前記画像データに不具合があった旨を通知するための電子メールは、前記送信者に対して前記画像処理装置で再度スキャンを行なうように促すためのメッセージを含むことを特徴としたものである。 According to a second technical means, in the first technical means, the e-mail for notifying that the image data is defective prompts the sender to scan again with the image processing apparatus. It is characterized by including the message for .

第3の技術手段は、第1の技術手段において、前記返信メールに含まれる不具合情報が黒筋発生の場合、前記画像修正手段は、前記画像データの黒筋判定が可能か否かを判定し、前記画像データの黒筋判定可能と判定された場合には、該黒筋を除去し、また、前記画像修正手段により前記画像データの黒筋判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴としたものである。 According to a third technical means, in the first technical means, when the defect information included in the reply mail has black streaks , the image correcting means determines whether or not black streak determination of the image data is possible. , when it is determined to be the determination black streaks of the image data, when removing the black lines, also it was determined to not be black streaks determination of the image data by the image correcting means, the electronic The mail sending means refers to the sender's email address based on the image identification information included in the reply email, and sends an email to notify the email address that the image data is defective. It is characterized by transmitting .

第4の技術手段は、第1の技術手段において、前記返信メールに含まれる不具合情報がノイズ発生の場合、前記画像修正手段は、前記画像データノイズ判定が可能か否かを判定し、前記画像データのノイズ判定可能と判定された場合には、該ノイズを除去し、また、前記画像修正手段により前記画像データのノイズ判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴としたものである。 A fourth technical means is the first technical means, when fault information included in the reply mail is noise, the image correction unit determines whether it is possible to noise determination of the image data, wherein When it is determined that the noise of the image data can be determined, the noise is removed . When the image correction unit determines that the noise of the image data cannot be determined, the e-mail transmission unit includes: The e-mail address of the sender is referred to based on the image identification information included in the reply e-mail, and an e-mail for notifying that the image data is defective is transmitted to the e-mail address. It is what.

第5の技術手段は、第3又は第4の技術手段において、前記画像データに不具合があった旨を通知するための電子メールは、前記送信者に対して前記画像処理装置で前記原稿読取手段の清掃と再度スキャンを行なうように促すためのメッセージを含むことを特徴としたものである。 A fifth technical means is the third or fourth technical means, e-mail for notifying that there is a problem with the image data, the document read by the image processing apparatus to the sender It includes a message for prompting the user to clean the means and scan again .

第6の技術手段は、第の技術手段において、前記返信メールに含まれる不具合情報が文字濃度の場合、前記画像修正手段は、前記画像データに含まれる濃度の低い文字を判定し、該文字の濃度を補正することを特徴としたものである。 According to a sixth technical means, in the first technical means, when the defect information included in the reply mail is a character density, the image correction means determines a low-density character included in the image data, and the character It is characterized by correcting the density of the color .

第7の技術手段は、第の技術手段において、前記返信メールに含まれる不具合情報が解像度不足の場合には、前記電子メール送信手段は、前記送信者の電子メールアドレス宛に、該送信者に対して前記画像処理装置で解像度を上げて再度スキャンを行なうように促すための電子メールを送信することを特徴としたものである。 According to a seventh technical means, in the first technical means, when the defect information included in the reply mail has insufficient resolution, the electronic mail transmitting means sends the sender to the electronic mail address of the sender. In contrast, the image processing apparatus transmits an e-mail for urging the user to perform scanning again after increasing the resolution .

第8の技術手段は、原稿を読み取って画像データを取得する原稿読取手段と、該取得した画像データを記憶する記憶手段とを備える画像処理装置の不具合画像修正方法において、前記原稿読取手段により取得した画像データを電子メールに付加して送信先のコンピュータに送信する電子メール送信ステップと、該送信先のコンピュータから返信された返信メールを解析する返信メール解析ステップと、前記返信メールに含まれる画像識別情報に応じた画像データを前記記憶手段から選択し、該選択した画像データの不具合を前記返信メールに含まれる不具合情報に基づいて修正する画像修正ステップとを備え、前記記憶手段は、前記原稿読取手段により取得した画像データと、該画像データを前記電子メール送信ステップにて前記送信先のコンピュータに送信した送信者の電子メールアドレスとを対応付けて記憶して有し、前記返信メールに含まれる不具合情報が画像の傾きである場合、前記画像修正ステップは、前記画像データの傾き判定が可能か否かを判定し、該画像データの傾き判定可能と判定された場合には、前記画像データを回転させるか、または、前記画像データの印字位置を揃えて傾きを修正し、前記電子メール送信ステップは、前記画像修正ステップにて修正した画像データを前記送信先のコンピュータに再度送信し、また、前記画像修正ステップにて前記画像データの傾き判定ができないと判定された場合には、前記電子メール送信ステップは、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴としたものである。 According to an eighth technical means, in the defect image correcting method for an image processing apparatus, comprising: a document reading unit that reads a document to acquire image data; and a storage unit that stores the acquired image data. An e-mail transmission step of adding the processed image data to the e-mail and transmitting it to the destination computer, a reply e-mail analysis step of analyzing a reply e-mail returned from the destination computer, and an image included in the reply e-mail An image correction step of selecting image data corresponding to the identification information from the storage means, and correcting a defect of the selected image data based on the defect information included in the reply mail, wherein the storage means includes the document The image data acquired by the reading means and the image data are sent to the destination of the email at the e-mail transmission step. When the defect information included in the reply mail is the inclination of the image, the image correction step is performed to determine the inclination of the image data. If it is determined that the inclination of the image data can be determined, the image data is rotated, or the inclination is corrected by aligning the print position of the image data, and the e-mail In the transmission step, the image data corrected in the image correction step is transmitted again to the transmission destination computer, and when it is determined in the image correction step that the inclination of the image data cannot be determined, The e-mail transmission step refers to the e-mail address of the sender based on the image identification information included in the reply mail, and the e-mail address It is obtained by and transmits the e-mail for notifying that there is a problem with the image data to the.

本発明によれば、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能を備える画像処理装置において、受信側に送信した画像データに不具合があったときに、不具合の内容を含む返信メールを受信側から受け取り、該返信メールを解析した結果に基づいて画像データを修正して再送信できるため、受信側は返信メールを送るだけで、手間をかけることなく、不具合の修正された画像を取得することができる。   According to the present invention, in an image processing apparatus having a function of transmitting image data acquired by scanning a document by adding it to an e-mail, when the image data transmitted to the receiving side is defective, the content of the defect Can be received from the receiving side, and the image data can be corrected and re-sent based on the analysis result of the reply mail, so the receiving side can send the reply mail and correct the trouble without any hassle Obtained images can be acquired.

図1は、本発明の一実施形態に係る画像処理装置の構成例を示すブロック図で、図中、10は画像処理装置で、該画像処理装置10は、原稿読取手段11、操作パネル12、画像処理手段13、画像メモリ14、印字手段15、通信手段16、記憶手段17、制御手段18、を備えている。以下、本発明の画像処理装置10をデジタル複合機(以下、デジタル複合機10)に適用した例について説明する。図1に示すデジタル複合機10は、複写機、プリンタ装置、ファクシミリ装置、スキャナ装置の機能を備えた複合機として構成され、ネットワーク1を介して電子メールサーバ20、クライアント用のパーソナルコンピュータ(以下、クライアントPC)30と接続されている。   FIG. 1 is a block diagram illustrating a configuration example of an image processing apparatus according to an embodiment of the present invention. In FIG. 1, reference numeral 10 denotes an image processing apparatus, and the image processing apparatus 10 includes an original reading unit 11, an operation panel 12, An image processing unit 13, an image memory 14, a printing unit 15, a communication unit 16, a storage unit 17, and a control unit 18 are provided. Hereinafter, an example in which the image processing apparatus 10 of the present invention is applied to a digital multifunction peripheral (hereinafter, digital multifunction peripheral 10) will be described. A digital multifunction device 10 shown in FIG. 1 is configured as a multifunction device having functions of a copying machine, a printer device, a facsimile device, and a scanner device. An electronic mail server 20 and a client personal computer (hereinafter referred to as a client computer) are connected via a network 1. Client PC) 30 is connected.

制御手段18には、演算を行うCPU、演算に伴う一時的な情報を記憶するRAM、及びデジタル複合機10を制御するための制御プログラムを記憶しているROM等が含まれる。また、制御手段18には、記録用紙に記録された画像(原稿)を読み取って画像データを生成する原稿読取手段11が接続される。この原稿読取手段11には、原稿画像を画像データとして取り込むためのCCD(Charge Coupled Device:電荷結合素子)、原稿台や自動原稿送り装置(ADF)などにセットされた原稿を検知する原稿検知センサなどが設けられる。   The control means 18 includes a CPU that performs a calculation, a RAM that stores temporary information associated with the calculation, a ROM that stores a control program for controlling the digital multifunction peripheral 10, and the like. The control unit 18 is connected to a document reading unit 11 that reads an image (document) recorded on a recording sheet and generates image data. The document reading unit 11 includes a document detection sensor that detects a document set on a CCD (Charge Coupled Device), a document table, an automatic document feeder (ADF), or the like for capturing a document image as image data. Etc. are provided.

また、制御手段18には、図示しない給紙トレイから給紙される記録用紙上に画像データを形成する画像形成部として機能する印字手段15が接続される。この印字手段15は、画像メモリ14に一時的に記憶された画像データから画像を形成して記録用紙に記録する。デジタル複合機10は、原稿読取手段11で生成した画像データを画像メモリ14に一旦記憶させた後、印字手段15で画像を形成することができる。このようにして、デジタル複合機10は複写機として機能する。   The control unit 18 is connected to a printing unit 15 that functions as an image forming unit that forms image data on a recording sheet fed from a sheet feeding tray (not shown). The printing unit 15 forms an image from the image data temporarily stored in the image memory 14 and records it on a recording sheet. The digital multi-function peripheral 10 can form the image with the printing unit 15 after temporarily storing the image data generated by the document reading unit 11 in the image memory 14. In this way, the digital multifunction machine 10 functions as a copying machine.

また、図1において、制御手段18には、ファクシミリ通信を行うFAXモデム(図示せず)が接続されており、このFAXモデムは公衆回線網に接続される。デジタル複合機10は、原稿読取手段11が生成した画像データを、FAXモデムに接続された公衆回線網を介して他のファクシミリ装置へファクシミリ通信にて送信することができる。また、デジタル複合機10は、公衆回線網を介して他のファクシミリ装置から送信された画像データをFAXモデムで受信し、受信した画像データから印字手段15で画像を形成することができる。このようにして、デジタル複合機10はファクシミリ装置として機能する。   In FIG. 1, the control means 18 is connected to a FAX modem (not shown) for performing facsimile communication, and this FAX modem is connected to a public line network. The digital multi-function peripheral 10 can transmit the image data generated by the document reading unit 11 to another facsimile apparatus by facsimile communication via a public line network connected to a FAX modem. The digital multi-function peripheral 10 can receive image data transmitted from another facsimile apparatus via a public line network by a FAX modem, and can form an image by the printing unit 15 from the received image data. In this way, the digital multifunction machine 10 functions as a facsimile machine.

また、制御手段18には、デジタル複合機10が外部と情報を送受信するための通信手段16が接続されている。通信手段16は、インターネットやLAN(Local Area Network)等のネットワーク1に接続可能であり、ネットワーク1には、電子メールの送受信を管理するためのサーバコンピュータである電子メールサーバ20、デジタル複合機10との間で電子メールを送受信する1または複数のクライアントPC30が接続される。デジタル複合機10が単独で動作している通常の状態では、通信手段16はネットワーク1に接続されており、ネットワーク1を介してクライアントPC30との間で情報(電子メール)を交換可能とする。   The control unit 18 is connected to a communication unit 16 for the digital multi-function peripheral 10 to transmit / receive information to / from the outside. The communication means 16 can be connected to a network 1 such as the Internet or a LAN (Local Area Network). The network 1 includes an e-mail server 20 which is a server computer for managing transmission / reception of e-mails, and a digital multi-function peripheral 10. Are connected to one or a plurality of client PCs 30 that transmit and receive electronic mail. In a normal state where the digital multi-function peripheral 10 is operating alone, the communication means 16 is connected to the network 1 so that information (e-mail) can be exchanged with the client PC 30 via the network 1.

クライアントPC30は、装置全体の制御を行うCPU、半導体メモリであるRAM,ROM、HD(ハードディスク)等の記憶装置、入力装置、表示装置、通信装置、出力装置、及びシステムバスなどを有する汎用のパーソナルコンピュータからなる情報処理装置である。処理の途中経過や処理結果は、CRT,LCD等の表示装置を通じて操作者等に提示され、各処理において、操作者は、キーボード,マウス(ポインティングデバイス)等の入力装置から必要なパラメータ等を入力指定する。また、通信装置は各種通信ネットワークに接続するためのネットワークインタフェースであって、これにより、デジタル複合機10とアクセス可能に接続することができる。出力装置はプリンタ等の外部機器と接続して各種データを出力するための手段である。これらのCPU、RAM、ROM、記憶装置、入力装置、表示装置、通信装置、及び出力装置は、システムバスを介して相互に接続されている。このクライアントPC30は、電子メールの送受信を可能とする電子メール機能を備えているものとする。   The client PC 30 is a general-purpose personal computer having a CPU for controlling the entire apparatus, a storage device such as RAM, ROM, and HD (hard disk) as semiconductor memory, an input device, a display device, a communication device, an output device, and a system bus. It is an information processing apparatus comprising a computer. The progress of the process and the processing results are presented to the operator etc. through a display device such as a CRT or LCD, and in each process, the operator inputs necessary parameters from an input device such as a keyboard and mouse (pointing device). specify. The communication device is a network interface for connecting to various communication networks, and can thereby be connected to the digital multifunction peripheral 10 in an accessible manner. The output device is a means for connecting to an external device such as a printer and outputting various data. These CPU, RAM, ROM, storage device, input device, display device, communication device, and output device are connected to each other via a system bus. The client PC 30 is assumed to have an electronic mail function that enables transmission and reception of electronic mail.

デジタル複合機10は、原稿読取手段11が生成した画像データを電子メールに添付して通信手段16からクライアントPC30へ送信することができる。このようにして、デジタル複合機10はスキャナ装置として機能する。また、デジタル複合機10は、クライアントPC30から送信された画像データ等を通信手段16で受信し、受信した画像データから印字手段15で画像を形成することができる。このようにして、デジタル複合機10はプリンタ装置として機能する。   The digital multifunction peripheral 10 can transmit the image data generated by the document reading unit 11 to the client PC 30 from the communication unit 16 by attaching it to an electronic mail. In this way, the digital multifunction device 10 functions as a scanner device. In addition, the digital multi-function peripheral 10 can receive image data transmitted from the client PC 30 by the communication unit 16 and form an image by the printing unit 15 from the received image data. In this way, the digital multifunction device 10 functions as a printer device.

また、制御手段18には、使用者からの操作を受け付ける操作パネル12が接続されている。操作パネル12は、使用者の操作により制御命令などの情報が入力されるタッチパネル又はテンキー等の入力部と、操作のために必要な情報を表示する液晶パネル等の表示部とからなっている。操作パネル12には、デジタル複合機10の利用者や操作者を認証するための認証コードが入力される。また、認証コードは、通信手段16を介して外部機器から入力する場合もある。   The control means 18 is connected to an operation panel 12 that receives an operation from a user. The operation panel 12 includes an input unit such as a touch panel or a numeric keypad on which information such as a control command is input by a user's operation, and a display unit such as a liquid crystal panel that displays information necessary for the operation. An authentication code for authenticating the user or operator of the digital multi-function peripheral 10 is input to the operation panel 12. The authentication code may be input from an external device via the communication unit 16.

制御手段18には、ハードディスク(HD)などの記憶手段17が接続されている。記憶手段17は、原稿読取手段11により取得された画像データなどを記憶する。   A storage means 17 such as a hard disk (HD) is connected to the control means 18. The storage unit 17 stores the image data acquired by the document reading unit 11 and the like.

図2は、記憶手段17あるいは画像メモリ14に記憶されるデータ構造の一例を示す図である。記憶手段17あるいは画像メモリ14には、原稿読取手段11が画像を読み取ったときに、該画像の識別番号を生成し、画像データと共に記憶される。この際、識別番号の生成処理は、制御手段18で実行される。また、送信者の電子メールアドレスを、識別番号及び画像データに対応付けて記憶するようにしてもよい。   FIG. 2 is a diagram illustrating an example of a data structure stored in the storage unit 17 or the image memory 14. When the original reading unit 11 reads an image, the storage unit 17 or the image memory 14 generates an identification number of the image and stores it together with the image data. At this time, the generation process of the identification number is executed by the control means 18. Further, the sender's e-mail address may be stored in association with the identification number and the image data.

また、図1において、制御手段18には、画像データの各種不具合に対応した画像処理を実現するための画像処理手段13が接続される。この画像処理手段13は、制御手段18からの制御に基づいて、画像の傾き補正、黒筋除去、濃度補正、ノイズ除去、解像度変更などの各種画像処理を実行するための手段である。   In FIG. 1, the control means 18 is connected to an image processing means 13 for realizing image processing corresponding to various defects in image data. The image processing unit 13 is a unit for executing various types of image processing such as image inclination correction, black streak removal, density correction, noise removal, and resolution change based on control from the control unit 18.

本発明に係る主要な機能を実現するための制御手段18は、送信メール生成部18a、受信メール解析部18b、及び画像修正制御部18cを備えている。これら送信メール生成部18a、受信メール解析部18b、及び画像修正制御部18cは、本発明の画像処理装置10としての機能を実現するためのプログラムであって、制御手段18内のROMあるいは記憶手段17に記憶されており、実行時に、制御手段18のCPUがRAMに読み出して実行される。   The control means 18 for realizing the main functions according to the present invention includes a transmission mail generation unit 18a, a reception mail analysis unit 18b, and an image correction control unit 18c. These outgoing mail generator 18a, incoming mail analyzer 18b, and image correction controller 18c are programs for realizing the functions of the image processing apparatus 10 of the present invention, and are ROM or storage means in the controller 18. The CPU of the control means 18 is read into the RAM and executed at the time of execution.

また、デジタル複合機10は、原稿読取手段11、送信メール生成部18a、及び通信手段16により、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能(所謂、スキャンtoEメール機能)を実現し、電子メールサーバ20を介してクライアントPC30と電子メールの送受信を行うことができる。   The digital multi-function peripheral 10 also has a function of sending image data acquired by scanning a document by adding it to an e-mail (so-called scan to e-mail) by the document reading unit 11, the transmission mail generation unit 18a, and the communication unit 16. Function) and transmission / reception of electronic mail to / from the client PC 30 via the electronic mail server 20.

本発明の電子メール送信手段に相当する送信メール生成部18a及び通信手段16は、原稿読取手段11により取得した画像データを、該画像データの不具合情報を返信させるための電子メールに付加して送信先のコンピュータであるクライアントPC30に送信する。このとき、画像データは前述した識別番号が付与された状態で送信される。   The transmission mail generation unit 18a and the communication means 16 corresponding to the electronic mail transmission means of the present invention add the image data acquired by the original reading means 11 to the electronic mail for sending back the defect information of the image data and transmit it. The data is transmitted to the client PC 30 that is the previous computer. At this time, the image data is transmitted with the above-described identification number assigned.

図3は、デジタル複合機10からクライアントPC30へ送信される電子メールの一例を示す図で、図中、40は画像データが添付された電子メールで、該電子メール40は、添付の画像データを示すアイコン(以下、画像データ)41、不具合番号42、不具合番号入力欄43で構成されている。受信側であるクライアントPC30のユーザは、クライアントPC30で受信した電子メール40に添付された画像データ41を見て、画像データ41に不具合があると判断した場合、その不具合の種類を不具合番号1〜6から選択して、不具合番号入力欄43に入力し、デジタル複合機10に返信メールを送信する。この返信メールには、修正して再送信してもらいたい画像データの識別番号が付与されて送信されるため、デジタル複合機10では、この識別番号に基づいて、該当する画像データや、画像データの送信者の操作するPCへの電子メールアドレスなどを特定することが可能となる。   FIG. 3 is a diagram showing an example of an e-mail transmitted from the digital multi-function peripheral 10 to the client PC 30. In the figure, 40 is an e-mail attached with image data, and the e-mail 40 contains the attached image data. An icon (hereinafter referred to as image data) 41, a defect number 42, and a defect number input field 43 are shown. When the user of the client PC 30 on the receiving side looks at the image data 41 attached to the e-mail 40 received by the client PC 30 and determines that the image data 41 has a defect, the type of the defect is determined as a defect number 1 to 1. 6 is selected and entered in the defect number input field 43, and a reply mail is transmitted to the digital multi-function peripheral 10. Since this reply mail is sent with the identification number of the image data to be corrected and retransmitted, the digital multi-function peripheral 10 receives the corresponding image data or image data based on this identification number. It is possible to specify an e-mail address or the like to the PC operated by the sender.

また、本発明の返信メール解析手段に相当する受信メール解析部18bは、送信先のクライアントPC30からの返信メールを解析し、送信済み画像データの不具合情報を取得する。また、本発明の画像修正手段に相当する画像修正制御部18cは、返信メールから取得される識別番号に応じた画像データを記憶手段17から選択し、返信メールから取得される不具合情報(不具合番号1〜6)に基づいて、画像処理手段13を制御し、上記選択した画像データの不具合を修正する。そして、送信メール生成部18aは不具合が修正された画像データを電子メールに添付し、この画像データ付きの電子メールは通信手段16からクライアントPC30へ再送信される。   In addition, the received mail analysis unit 18b corresponding to the reply mail analysis unit of the present invention analyzes the reply mail from the destination client PC 30 and acquires defect information of the transmitted image data. Further, the image correction control unit 18c corresponding to the image correction means of the present invention selects image data corresponding to the identification number acquired from the reply mail from the storage means 17, and defect information (fault number acquired from the reply mail). 1-6), the image processing means 13 is controlled to correct the defect of the selected image data. Then, the transmission mail generation unit 18a attaches the image data whose defect is corrected to the electronic mail, and the electronic mail with the image data is retransmitted from the communication unit 16 to the client PC 30.

また、別の実施形態として、記憶手段17あるいは画像メモリ14に画像データの送信者に対する通知先の電子メールアドレスが登録されている場合、送信メール生成部18aは、返信メールから取得される識別番号の画像データに対応する電子メールアドレスを参照し、その電子メールアドレス、すなわち送信者の操作しているPC宛に、画像データに不具合があった旨の電子メールを送信して、送信者に送信画像に不具合が有ったことを通知するようにしてもよい。   As another embodiment, when the e-mail address of the notification destination for the sender of the image data is registered in the storage unit 17 or the image memory 14, the transmission mail generation unit 18 a uses the identification number acquired from the reply mail. The e-mail address corresponding to the image data is referred to, and an e-mail indicating that the image data is defective is sent to the e-mail address, that is, to the PC operated by the sender, and sent to the sender. You may make it notify that there was a malfunction in an image.

例えば、不具合番号2で黒筋発生の場合、当該電子メールアドレスに、原稿読取手段11の清掃と再度スキャンを促すための電子メールを送信する、また、不具合番号5で文字がつぶれている場合(すなわち、解像度不足の場合)、当該電子メールアドレスに、解像度を上げて再度スキャンを促すための電子メールを送信する、など不具合の種類によって、不具合通知の電子メールを送信するように制御してもよい。このときの電子メールの詳細例については後述の図10で説明する。   For example, when black stripes occur at defect number 2, an e-mail is sent to the e-mail address to prompt cleaning and scanning of the document reading means 11 again, and characters are crushed at defect number 5 ( In other words, if the resolution is insufficient, an e-mail for increasing the resolution and prompting scanning again is sent to the e-mail address. Good. A detailed example of the e-mail at this time will be described later with reference to FIG.

図3において、不具合番号1は、画像データが傾いている場合に選択され、この不具合番号1がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、画像回転処理もしくは印字位置揃え処理を施してクライアントPC30へ再送信する。また、不具合番号2は、画像データに黒筋が発生している場合に選択され、この不具合番号2がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、黒筋除去処理を施してクライアントPC30へ再送信する、もしくは、原稿読取手段11(原稿読取窓)の清掃と再スキャンを促す電子メールを送信者の操作するPCに送信する処理を行う。   In FIG. 3, defect number 1 is selected when the image data is tilted. When this defect number 1 is returned from the client PC 30, the digital multifunction peripheral 10 selects the corresponding image data from the storage unit 17. Then, image rotation processing or print position alignment processing is performed, and the data is retransmitted to the client PC 30. The defect number 2 is selected when black streaks are generated in the image data. When the defect number 2 is returned from the client PC 30, the digital multifunction peripheral 10 stores the corresponding image data from the storage unit 17. Select, perform black streak removal processing, and retransmit to client PC 30, or perform processing to send an e-mail prompting cleaning and rescanning of document reading means 11 (document reading window) to the PC operated by the sender .

また、不具合番号3は、文字(画像)の濃度が薄い(低い)場合に選択され、この不具合番号3がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、画像濃度補正処理を施してクライアントPC30へ再送信する。また、不具合番号4は、画像データにノイズが発生している場合に選択され、この不具合番号4がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、ノイズ除去処理を施してクライアントPC30へ再送信する。   The defect number 3 is selected when the density of the character (image) is low (low). When the defect number 3 is returned from the client PC 30, the digital multifunction peripheral 10 stores the corresponding image data in the storage means 17. Are selected, subjected to image density correction processing, and retransmitted to the client PC 30. The defect number 4 is selected when noise is generated in the image data. When the defect number 4 is returned from the client PC 30, the digital multifunction peripheral 10 selects the corresponding image data from the storage unit 17. Then, it performs noise removal processing and retransmits it to the client PC 30.

また、不具合番号5は、文字が解像度不足によりつぶれている場合に選択され、この不具合番号5がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、解像度アップと再スキャンを促す電子メールを送信者の操作するPCに送信する処理を行う。また、不具合番号6は、その他のジャムなどが発生した場合に選択され、この不具合番号6がクライアントPC30から返信されると、デジタル複合機10は、該当する画像データを記憶手段17から選択し、再スキャンを促す電子メールを送信者の操作するPCに送信する処理を行う。   The defect number 5 is selected when characters are crushed due to insufficient resolution. When the defect number 5 is returned from the client PC 30, the digital multi-function peripheral 10 selects the corresponding image data from the storage unit 17. Then, processing is performed to send an e-mail prompting resolution enhancement and rescanning to the PC operated by the sender. The defect number 6 is selected when another jam occurs. When the defect number 6 is returned from the client PC 30, the digital multifunction peripheral 10 selects the corresponding image data from the storage unit 17, and A process of sending an e-mail prompting rescanning to a PC operated by the sender is performed.

次に、図4及び図5に基づいて、デジタル複合機10による不具合画像修正方法について説明する。図4は、本発明のデジタル複合機10における返信メールの受信処理の一例を説明するためのフロー図である。まず、デジタル複合機10は、クライアントPC30からの返信メール(図3参照)を受信し(ステップS1)、返信メールを解析し(ステップS2)、該当する画像データの識別番号、送信者の操作するPCの電子メールアドレス等の関連情報を取得すると共に、不具合情報(不具合番号1〜6)が含まれているかどうかを判断する(ステップS3)。   Next, a defective image correction method by the digital multi-function peripheral 10 will be described with reference to FIGS. FIG. 4 is a flowchart for explaining an example of a reply mail reception process in the digital multi-function peripheral 10 of the present invention. First, the digital multifunction peripheral 10 receives a reply mail (see FIG. 3) from the client PC 30 (step S1), analyzes the reply mail (step S2), operates the identification number of the corresponding image data, and the sender's operation. In addition to acquiring related information such as an e-mail address of the PC, it is determined whether or not defect information (defect numbers 1 to 6) is included (step S3).

次に、デジタル複合機10は、上記ステップS3において、不具合番号1〜6のいずれかが指定されている場合(YESの場合)、返信メールから取得される識別番号の画像データを記憶手段17あるいは画像メモリ14から抽出し(ステップS4)、抽出した画像データに対して、不具合番号に応じた修正等の処理を施してクライアントPC30へ再送信する(ステップS5)。また、上記ステップS3において、不具合番号1〜6のいずれかが指定されていない場合(NOの場合)、エラーを通知するための電子メールをクライアントPC30へ返信する(ステップS6)。   Next, when any one of the defect numbers 1 to 6 is designated in the above step S3 (in the case of YES), the digital multifunction peripheral 10 stores the image data of the identification number acquired from the reply mail as the storage unit 17 or Extracted from the image memory 14 (step S4), the extracted image data is subjected to processing such as correction according to the defect number, and retransmitted to the client PC 30 (step S5). If any one of the defect numbers 1 to 6 is not specified in step S3 (NO), an e-mail for notifying an error is returned to the client PC 30 (step S6).

図5は、本発明のデジタル複合機10における画像データの修正/再送信処理の一例を説明するためのフロー図である。本フローは、図4に示したフローのステップS5を詳細に説明したものである。まず、デジタル複合機10は、クライアントPC30からの返信メールに指定されたエラーコード(すなわち、図3に示した不具合番号1〜6)を判断し(ステップS11)、不具合番号1(傾き)が指定されている場合(図中、(1)の場合)、該当する画像データの傾きを判定し(ステップS12)、傾き判定が可能かどうかを判断し(ステップS13)、傾き判定可能であれば(YESの場合)、画像回転処理あるいは印字位置修正処理を施して(ステップS14)、修正された画像データをクライアントPC30へ再送信する。また、上記ステップS13において、傾き判定ができない場合(NOの場合)、原稿の再セットと再スキャンを促す電子メールを送信者の操作するPCの電子メールアドレスに送信する(ステップS15)。   FIG. 5 is a flowchart for explaining an example of image data correction / retransmission processing in the digital multi-function peripheral 10 of the present invention. This flow describes step S5 of the flow shown in FIG. 4 in detail. First, the digital multifunction peripheral 10 determines the error code (that is, the defect numbers 1 to 6 shown in FIG. 3) specified in the reply mail from the client PC 30 (step S11), and the defect number 1 (slope) is specified. If it is determined (in the case of (1) in the figure), the inclination of the corresponding image data is determined (step S12), it is determined whether the inclination can be determined (step S13), and if the inclination can be determined (step S13). In the case of YES), image rotation processing or print position correction processing is performed (step S14), and the corrected image data is retransmitted to the client PC 30. If the inclination cannot be determined in step S13 (NO), an e-mail for urging the document to be reset and rescanned is transmitted to the e-mail address of the PC operated by the sender (step S15).

また、デジタル複合機10は、ステップS11において、不具合番号2(黒筋)が指定されている場合(図中、(2)の場合)、該当する画像データの黒筋を判定し(ステップS16)、黒筋判定が可能かどうかを判断し(ステップS17)、黒筋判定可能であれば(YESの場合)、黒筋除去処理を施して(ステップS18)、修正された画像データをクライアントPC30へ再送信する。また、上記ステップS17において、黒筋判定ができない場合(NOの場合)、原稿読取手段11の清掃と再スキャンを促す電子メールを送信者の操作するPCの電子メールアドレスに送信する(ステップS19)。   In addition, when the defect number 2 (black streak) is designated in step S11 (in the case of (2) in the figure), the digital multifunction peripheral 10 determines the black streak of the corresponding image data (step S16). Then, it is determined whether black streak determination is possible (step S17). If black streak determination is possible (YES), black streak removal processing is performed (step S18), and the corrected image data is sent to the client PC 30. Resend. If the black streak cannot be determined in step S17 (NO), an e-mail prompting cleaning and rescanning of the document reading unit 11 is transmitted to the e-mail address of the PC operated by the sender (step S19). .

また、デジタル複合機10は、ステップS11において、不具合番号3(薄い文字)が指定されている場合(図中、(3)の場合)、画像データに含まれる濃度の低い文字を判定し、濃度補正処理を施して(ステップS20)、修正された画像データをクライアントPC30へ再送信する。   In step S11, when the defect number 3 (light character) is designated (in the case of (3) in the figure), the digital multi-function peripheral 10 determines the low-density character included in the image data and determines the density. Correction processing is performed (step S20), and the corrected image data is retransmitted to the client PC 30.

また、デジタル複合機10は、ステップS11において、不具合番号4(ノイズ)が指定されている場合(図中、(4)の場合)、該当する画像データのノイズ判定が可能かどうかを判断し(ステップS21)、ノイズ判定可能であれば(YESの場合)、ノイズ除去処理を施して(ステップS22)、修正された画像データをクライアントPC30へ再送信する。また、上記ステップS21において、ノイズ判定ができない場合(NOの場合)、原稿読取手段11の清掃と再スキャンを促す電子メールを送信者の操作するPCの電子メールアドレスに送信する(ステップS23)。   In step S11, when the defect number 4 (noise) is designated (in the case of (4) in the figure), the digital multi-function peripheral 10 determines whether noise determination of the corresponding image data is possible ( If noise determination is possible (in the case of YES), noise removal processing is performed (step S22), and the corrected image data is retransmitted to the client PC 30. If noise determination cannot be made in step S21 (NO), an e-mail for cleaning and rescanning the document reading unit 11 is transmitted to the e-mail address of the PC operated by the sender (step S23).

また、デジタル複合機10は、ステップS11において、不具合番号5(文字がつぶれている)が指定されている場合(図中、(5)の場合)、解像度アップと再スキャンを促す電子メールを送信者の操作するPCの電子メールアドレスに送信する(ステップS24)。また、デジタル複合機10は、ステップS11において、不具合番号6(その他)が指定されている場合(図中、(6)の場合)、再スキャンを促す電子メールを送信者の操作するPCの電子メールアドレスに送信する(ステップS25)。   Also, in step S11, when the defect number 5 (characters are crushed) is designated in the step S11 (in the case of (5) in the figure), the digital multi-function peripheral 10 transmits an e-mail for encouraging resolution up and rescanning. It is transmitted to the e-mail address of the PC operated by the person (step S24). In addition, in the case where the defect number 6 (other) is specified in step S11 (in the case of (6) in the figure), the digital multi-function peripheral 10 sends an electronic mail prompting rescanning to the electronic device of the PC operated by the sender. It transmits to a mail address (step S25).

図6は、画像修正制御部18cによる各種の画像補正処理パターンの一例を示す図である。図6(A)は色文字の濃度が不足した読み取り画像に濃度補正処理を施した場合の例を示す。図中左側の原稿「あいうえお かき、さしすせそ なに」を読み取ったときに、読み取り画像(図中中央)の「さしすせそ なに」の部分が濃度不足により薄かった場合、後述の図8に示すようにガンマカーブを変更し、濃度補正を行う。図中右側が補正後の画像を示す。   FIG. 6 is a diagram illustrating an example of various image correction processing patterns by the image correction control unit 18c. FIG. 6A shows an example in which density correction processing is performed on a read image in which the density of color characters is insufficient. As shown in Fig. 8 below, if the original image on the left side of the figure reads "Aisuke Osaki, Sashisuse Sona", and the "Sashi Suse Sona" part of the scanned image (middle in the figure) is faint due to insufficient density, Change the gamma curve and perform density correction. The right side of the figure shows the image after correction.

また、図6(B)〜図6(G)において、図中左側が読み取り画像を示し、右側が補正後(あるいは再スキャン後)の画像を示す。図6(B)は傾いた読み取り画像に回転処理を施した場合の例を示し、図6(C)は傾いた読み取り画像に印字位置補正処理を施した場合の例を示す。また、図6(D)は黒筋が発生した読み取り画像に黒筋除去処理を施した場合の例を示し、図6(E)は読み取りジャムが発生した読み取り画像を再スキャン処理した場合の例を示す。また、図6(F)は解像度が不足した読み取り画像を再スキャン処理した場合の例を示し、図6(G)はノイズが発生した読み取り画像にノイズ除去処理を施した場合の例を示す。   In FIG. 6B to FIG. 6G, the left side in the figure shows the read image, and the right side shows the image after correction (or after rescanning). FIG. 6B shows an example when the tilted read image is subjected to the rotation process, and FIG. 6C shows an example when the print position correction process is performed on the tilted read image. FIG. 6D shows an example in which a black streak removal process is performed on a read image in which black streaks have occurred, and FIG. 6E shows an example in which a read image in which a read jam has occurred is rescanned. Indicates. FIG. 6F shows an example in the case where a read image with insufficient resolution is rescanned, and FIG. 6G shows an example in which noise removal processing is performed on a read image in which noise has occurred.

次に、図7に基づいて、上述した画像の傾き補正、黒筋除去、ノイズ除去、濃度補正などの画像処理についてより詳細に説明する。これらの画像処理は、公知の画像処理技術を用いて実現することが可能であり、画像修正制御部18cからの制御に従って、画像処理手段13により実行される。図7(A)〜図7(E)において、図中左側が読み取り画像を示し、右側が画像処理(補正)後の画像を示す。図7(A)は傾いた読み取り画像に回転処理を施した場合の例を示し、図7(B)は傾いた読み取り画像に印字位置補正処理を施した場合の例を示す。また、図7(C)は黒筋が発生した読み取り画像に黒筋除去処理を施した場合の例を示し、図7(D)はノイズが発生した読み取り画像にノイズ除去処理を施した場合の例を示す。また、図7(E)は濃度が不足した読み取り画像に濃度補正処理を施した場合の例を示す。   Next, the image processing such as the above-described image inclination correction, black streak removal, noise removal, and density correction will be described in detail with reference to FIG. These image processes can be realized using a known image processing technique, and are executed by the image processing means 13 in accordance with the control from the image correction control unit 18c. 7A to 7E, the left side in the figure shows the read image, and the right side shows the image after image processing (correction). FIG. 7A shows an example when the tilted read image is subjected to the rotation process, and FIG. 7B shows an example when the print position correction process is performed on the tilted read image. FIG. 7C shows an example in which black stripe removal processing is performed on a read image in which black stripes are generated, and FIG. 7D shows a case in which noise removal processing is performed on a read image in which noise has occurred. An example is shown. FIG. 7E shows an example in which density correction processing is performed on a read image with insufficient density.

図7(A)において、副走査方向に延びる黒線(原稿端の影、もしくは、原稿内の罫線など)を抽出し、所定値(例えば、副走査方向全長の1/3程度)以上の長さの黒線を傾き判定用の黒線として特定し、黒線の副走査方向に対する角度θ(傾き)を計算する。これにより計算された傾きに応じて回転処理を行う。また、傾きが所定値よりも小さい場合、図7(B)に示すように、画像の印字開始位置を副走査毎に差分(l、l、l)だけ順次ずらして補正を行う(印字位置補正)。また、所定値以上の長さの黒線が検出できなければ、判定不可として、再スキャンを促すための電子メールを送信者の操作するPCの電子メールアドレスに送信するようにしてもよい。 In FIG. 7A, a black line extending in the sub-scanning direction (such as a shadow at the document edge or a ruled line in the document) is extracted and is longer than a predetermined value (for example, about 1/3 of the total length in the sub-scanning direction). The black line is specified as the black line for inclination determination, and the angle θ (inclination) of the black line with respect to the sub-scanning direction is calculated. Thus, rotation processing is performed according to the calculated inclination. If the inclination is smaller than a predetermined value, correction is performed by sequentially shifting the image print start position by the difference (l 1 , l 2 , l 3 ) for each sub-scan, as shown in FIG. Print position correction). Further, if a black line having a length equal to or longer than a predetermined value cannot be detected, an e-mail for prompting rescanning may be transmitted to the e-mail address of the PC operated by the sender.

図7(C)において、副走査方向に延びる黒線を抽出し、全ての黒線の長さを計算する。所定値(例えば、副走査方向全長)以上の長さの黒線を黒筋として特定し、特定した黒筋を除去する。また、所定値以上の長さの黒線が検出できなければ、判定不可として、再スキャンを促すための電子メールを送信者の操作するPCの電子メールアドレスに送信するようにしてもよい。   In FIG. 7C, black lines extending in the sub-scanning direction are extracted, and the lengths of all black lines are calculated. A black line having a length equal to or longer than a predetermined value (for example, the total length in the sub-scanning direction) is specified as a black line, and the specified black line is removed. Further, if a black line having a length equal to or longer than a predetermined value cannot be detected, an e-mail for prompting rescanning may be transmitted to the e-mail address of the PC operated by the sender.

図7(D)において、図9に示すように、所定値(例えば、2×2ドット)以下の大きさの画素のかたまりを検出し、例えば、3×3ドットのマトリクスを利用する。図9に示すグレーの部分(2×2)内にはドットが有り、且つ、3×3の周辺にドットがない場合、グレー部分をノイズとして検出し、検出したノイズを除去する。また、ノイズが検出できなければ、判定不可として、再スキャンを促すための電子メールを送信者の操作するPCの電子メールアドレスに送信するようにしてもよい。   In FIG. 7D, as shown in FIG. 9, a block of pixels having a size equal to or smaller than a predetermined value (eg, 2 × 2 dots) is detected, and a 3 × 3 dot matrix is used, for example. When there are dots in the gray portion (2 × 2) shown in FIG. 9 and there are no dots around 3 × 3, the gray portion is detected as noise, and the detected noise is removed. Further, if noise cannot be detected, determination may be impossible, and an e-mail for prompting rescanning may be transmitted to the e-mail address of the PC operated by the sender.

図7(E)において、文字列「あいうえお」の“う”の濃度が低い場合、前述した図8に示すガンマカーブを変更して、該当箇所“う”の濃度を、他の“あ,い,え,お”の濃度に合わせて補正する。   In FIG. 7E, when the density of “U” in the character string “Aiueo” is low, the gamma curve shown in FIG. 8 described above is changed to change the density of the corresponding location “U” to other “A”. , Eh, correct to match the density.

図10は、画像データの送信者の操作するPCへ、不具合があった旨を通知するための電子メールの一例を示す図である。図10(A)は、画像が傾いていたときに送信者の操作するPCに送信される電子メールのメッセージを示し、「送信した画像データに不具合があり、原稿の再読み込みと再送信をお願いします。」というメッセージに続き、「送信原稿に傾きがありました。原稿再読み込みの際は原稿台を利用し、原稿載置に傾きが無いか確認の上、再読み込みを行ってください。」というメッセージが付加されて送信される。   FIG. 10 is a diagram illustrating an example of an e-mail for notifying the PC operated by the sender of the image data that there is a problem. FIG. 10A shows an e-mail message sent to the PC operated by the sender when the image is tilted. “There is a problem with the sent image data, please re-read and re-send the document. "The sent document is skewed. Use the document table to check whether the document is tilted before re-reading the document." Is added and sent.

図10(B)は、画像に黒筋があるときに送信者の操作するPCに送信される電子メールのメッセージを示し、図10(A)と同様に、「送信した画像データに不具合があり、原稿の再読み込みと再送信をお願いします。」というメッセージに続き、ここでは、「画像に黒筋が発生しました。読み込み前に原稿読取窓の清掃を行って下さい。」というメッセージが付加されて送信される。   FIG. 10B shows an e-mail message sent to the PC operated by the sender when the image has a black streak. Like FIG. 10A, “the transmitted image data has a defect. , Please re-read and re-send the document. ”, Followed by the message“ Black streaks have occurred in the image. Clean the document reading window before scanning. ” To be sent.

図10(C)は、画像にノイズがあるときに送信者の操作するPCに送信される電子メールのメッセージを示し、図10(A)と同様に、「送信した画像データに不具合があり、原稿の再読み込みと再送信をお願いします。」というメッセージに続き、ここでは、「画像にノイズが発生しました。読み込み前に原稿読取窓またはテーブルガラスの清掃を行って下さい。」というメッセージが付加されて送信される。   FIG. 10C shows an e-mail message sent to the PC operated by the sender when there is noise in the image. Like FIG. 10A, “the transmitted image data has a defect, Please follow the message "Please re-read and re-send the document." Here, the message "There is noise in the image. Please clean the document reading window or table glass before scanning." It is added and transmitted.

図10(D)は、その他の不具合があるときに送信者の操作するPCに送信される電子メールのメッセージを示し、図10(A)と同様に、「送信した画像データに不具合があり、原稿の再読み込みと再送信をお願いします。」というメッセージに続き、ここでは、原稿自動送り装置で発生した不具合により画像不良となっている可能性があるので「原稿台を利用することをお勧めします。」というメッセージが付加されて送信される。   FIG. 10D shows an e-mail message transmitted to the PC operated by the sender when there is another problem. Like FIG. 10A, “the transmitted image data has a problem, Following the message "Please re-read and re-send the original." Here, there is a possibility that the image is defective due to a problem with the automatic document feeder. "Recommended" message is added and sent.

画像データの送信者は、デジタル複合機10から、図10(A)〜(D)に示したいずれかの電子メールのメッセージを受信した場合、それぞれのメッセージに従って、デジタル複合機10で原稿読取窓の清掃や再スキャン等を実施し、画像データを再送信する。   When the sender of the image data receives any of the e-mail messages shown in FIGS. 10A to 10D from the digital multi-function peripheral 10, the digital multi-function peripheral 10 uses the digital multi-function peripheral 10 to read a document reading window. Perform cleaning, rescanning, etc., and retransmit the image data.

以上説明したように、本発明によれば、原稿をスキャンして取得した画像データを電子メールに付加して送信する機能を備える画像処理装置において、受信側に送信した画像データに不具合があったときに、不具合の内容を含む返信メールを受信側から受け取り、該返信メールを解析した結果に基づいて画像データを修正して再送信できるため、受信側は返信メールを送るだけで、手間をかけることなく、不具合の修正された画像を取得することができる。   As described above, according to the present invention, there is a problem in the image data transmitted to the receiving side in the image processing apparatus having the function of adding the image data acquired by scanning the document to the e-mail and transmitting it. Sometimes it is possible to receive a reply mail containing the contents of the defect from the receiving side, modify the image data based on the result of analyzing the reply mail, and re-send the image. The image in which the defect is corrected can be acquired without any problem.

本発明の一実施形態に係る画像処理装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the image processing apparatus which concerns on one Embodiment of this invention. 記憶手段あるいは画像メモリに記憶されるデータ構造の一例を示す図である。It is a figure which shows an example of the data structure memorize | stored in a memory | storage means or an image memory. デジタル複合機からクライアントPCへ送信される電子メールの一例を示す図である。2 is a diagram illustrating an example of an electronic mail transmitted from a digital multifunction peripheral to a client PC. FIG. 本発明のデジタル複合機における返信メールの受信処理の一例を説明するためのフロー図である。It is a flowchart for demonstrating an example of the reception process of the reply mail in the digital multi-functional peripheral of this invention. 本発明のデジタル複合機における画像データの修正/再送信処理の一例を説明するためのフロー図である。FIG. 6 is a flowchart for explaining an example of image data correction / retransmission processing in the digital multi-function peripheral according to the present invention. 画像修正制御部による各種の画像補正処理パターンの一例を示す図である。It is a figure which shows an example of the various image correction process patterns by an image correction control part. 画像の傾き補正、黒筋除去、ノイズ除去、濃度補正などの画像処理の一例について説明するための図である。It is a figure for demonstrating an example of image processing, such as image inclination correction | amendment, black stripe removal, noise removal, and density correction. 濃度補正処理におけるガンマカーブの一例を示す図である。It is a figure which shows an example of the gamma curve in a density correction process. ノイズ除去処理におけるマトリクスの一例を示す図である。It is a figure which shows an example of the matrix in a noise removal process. 画像データの送信者の操作するPCへ、不具合があった旨を通知するための電子メールの一例を示す図である。It is a figure which shows an example of the email for notifying that there was a malfunction to PC which the transmission person of image data operated.

符号の説明Explanation of symbols

1…ネットワーク、10…画像処理装置(デジタル複合機)、11…原稿読取手段、12…操作パネル、13…画像処理手段、14…画像メモリ、15…印字手段、16…通信手段、17…記憶手段、18…制御手段、18a…送信メール生成部、18b…受信メール解析部、18c…画像修正制御部、20…電子メールサーバ、30…クライアントPC、40…電子メール、41…添付の画像データを示すアイコン(画像データ)、42…不具合番号、43…不具合番号入力欄。 DESCRIPTION OF SYMBOLS 1 ... Network, 10 ... Image processing apparatus (digital multifunction device), 11 ... Document reading means, 12 ... Operation panel, 13 ... Image processing means, 14 ... Image memory, 15 ... Printing means, 16 ... Communication means, 17 ... Memory Means, 18 ... Control means, 18a ... Transmission mail generation part, 18b ... Received mail analysis part, 18c ... Image correction control part, 20 ... Email server, 30 ... Client PC, 40 ... Email, 41 ... Attached image data An icon (image data) indicating 42, a defect number, 43 ... a defect number input field.

Claims (8)

原稿を読み取って画像データを取得する原稿読取手段と、該取得した画像データを記憶する記憶手段とを備える画像処理装置において、
前記原稿読取手段により取得した画像データを電子メールに付加して送信先のコンピュータに送信する電子メール送信手段と、該送信先のコンピュータから返信された返信メールを解析する返信メール解析手段と、前記返信メールに含まれる画像識別情報に応じた画像データを前記記憶手段から選択し、該選択した画像データの不具合を前記返信メールに含まれる不具合情報に基づいて修正する画像修正手段とを備え、
前記記憶手段は、前記原稿読取手段により取得した画像データと、該画像データを前記電子メール送信手段により前記送信先のコンピュータに送信した送信者の電子メールアドレスとを対応付けて記憶し、
前記返信メールに含まれる不具合情報が画像の傾きである場合、前記画像修正手段は、前記画像データの傾き判定が可能か否かを判定し、該画像データの傾き判定可能と判定された場合には、前記画像データを回転させるか、または、前記画像データの印字位置を揃えて傾きを修正し、前記電子メール送信手段は、前記画像修正手段により修正した画像データを前記送信先のコンピュータに再度送信し、また、前記画像修正手段により前記画像データの傾き判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴とする画像処理装置。
In an image processing apparatus comprising a document reading unit that reads a document and acquires image data, and a storage unit that stores the acquired image data.
An e-mail transmission unit that adds image data acquired by the document reading unit to an e-mail and transmits the e-mail to a destination computer, a reply e-mail analysis unit that analyzes a reply e-mail returned from the destination computer, Image correction means for selecting image data corresponding to the image identification information included in the reply mail from the storage means, and correcting the defect of the selected image data based on the defect information included in the reply mail;
The storage means stores the image data acquired by the document reading means and the email address of the sender who sent the image data to the destination computer by the email sending means in association with each other;
When the defect information included in the reply mail is an image inclination, the image correction unit determines whether the image data inclination can be determined, and when it is determined that the image data inclination can be determined. The image data is rotated or the print position of the image data is aligned and the inclination is corrected, and the e-mail transmission means sends the image data corrected by the image correction means to the transmission destination computer again. And when the image correction means determines that the inclination of the image data cannot be determined, the e-mail transmission means transmits the e-mail of the sender based on the image identification information included in the reply mail. It refers to an address, image, characterized by sending e-mail for notifying that there is a problem with the image data to the addressed electronic mail address Processing apparatus.
請求項1に記載の画像処理装置において、前記画像データに不具合があった旨を通知するための電子メールは、前記送信者に対して前記画像処理装置で再度スキャンを行なうように促すためのメッセージを含むことを特徴とする画像処理装置。 2. The image processing apparatus according to claim 1, wherein an e-mail for notifying that there is a defect in the image data is a message for prompting the sender to scan again with the image processing apparatus. the image processing apparatus characterized by comprising a. 請求項1に記載の画像処理装置において、前記返信メールに含まれる不具合情報が黒筋発生の場合、前記画像修正手段は、前記画像データの黒筋判定が可能か否かを判定し、前記画像データの黒筋判定可能と判定された場合には、該黒筋を除去し、また、前記画像修正手段により前記画像データの黒筋判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴とする画像処理装置。 2. The image processing apparatus according to claim 1, wherein when the defect information included in the reply mail is black streak occurrence , the image correction unit determines whether black streak determination of the image data is possible , and the image If it is determined that the black stripe determinable data is to remove the black streaks, and when it is determined that it is black streaks determination of the image data by the image correcting means, said electronic mail transmitting means Refers to the e-mail address of the sender based on the image identification information included in the reply e-mail, and transmits an e-mail for notifying that the image data is defective to the e-mail address. An image processing apparatus. 請求項1に記載の画像処理装置において、前記返信メールに含まれる不具合情報がノイズ発生の場合、前記画像修正手段は、前記画像データノイズ判定が可能か否かを判定し、前記画像データのノイズ判定可能と判定された場合には、該ノイズを除去し、また、前記画像修正手段により前記画像データのノイズ判定ができないと判定された場合には、前記電子メール送信手段は、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴とする画像処理装置。 The image processing apparatus according to claim 1, if defect information contained in the reply mail is noise, the image correction unit determines whether it is possible to noise determination of the image data, the image data If it is determined that the noise can be determined, the noise is removed, and if it is determined by the image correcting means that the noise of the image data cannot be determined, the e-mail transmitting means An image for referring to the e-mail address of the sender based on the image identification information included in the e-mail and transmitting an e-mail for notifying that the image data is defective to the e-mail address Processing equipment. 請求項3又は4に記載の画像処理装置において、前記画像データに不具合があった旨を通知するための電子メールは、前記送信者に対して前記画像処理装置で前記原稿読取手段の清掃と再度スキャンを行なうように促すためのメッセージを含むことを特徴とする画像処理装置。 5. The image processing apparatus according to claim 3 , wherein an e-mail for notifying that there is a problem with the image data is sent to the sender again by cleaning the original reading unit and re-sending the image reading means. An image processing apparatus comprising a message for prompting to perform scanning . 請求項に記載の画像処理装置において、前記返信メールに含まれる不具合情報が文字濃度の場合、前記画像修正手段は、前記画像データに含まれる濃度の低い文字を判定し、該文字の濃度を補正することを特徴とする画像処理装置。 2. The image processing apparatus according to claim 1 , wherein when the defect information included in the reply mail is a character density, the image correction unit determines a low-density character included in the image data and determines the character density. An image processing apparatus that performs correction . 請求項に記載の画像処理装置において、前記返信メールに含まれる不具合情報が解像度不足の場合には、前記電子メール送信手段は、前記送信者の電子メールアドレス宛に、該送信者に対して前記画像処理装置で解像度を上げて再度スキャンを行なうように促すための電子メールを送信することを特徴とする画像処理装置。 The image processing apparatus according to claim 1 , wherein when the defect information included in the reply mail is insufficient in resolution, the e-mail transmission unit sends the e-mail address to the sender to the sender. the image processing apparatus characterized by sending e-mail for prompting to perform re-scan by increasing the resolution in the image processing apparatus. 原稿を読み取って画像データを取得する原稿読取手段と、該取得した画像データを記憶する記憶手段とを備える画像処理装置の不具合画像修正方法において、
前記原稿読取手段により取得した画像データを電子メールに付加して送信先のコンピュータに送信する電子メール送信ステップと、該送信先のコンピュータから返信された返信メールを解析する返信メール解析ステップと、前記返信メールに含まれる画像識別情報に応じた画像データを前記記憶手段から選択し、該選択した画像データの不具合を前記返信メールに含まれる不具合情報に基づいて修正する画像修正ステップとを備え、
前記記憶手段は、前記原稿読取手段により取得した画像データと、該画像データを前記電子メール送信ステップにて前記送信先のコンピュータに送信した送信者の電子メールアドレスとを対応付けて記憶して有し、
前記返信メールに含まれる不具合情報が画像の傾きである場合、前記画像修正ステップは、前記画像データの傾き判定が可能か否かを判定し、該画像データの傾き判定可能と判定された場合には、前記画像データを回転させるか、または、前記画像データの印字位置を揃えて傾きを修正し、前記電子メール送信ステップは、前記画像修正ステップにて修正した画像データを前記送信先のコンピュータに再度送信し、また、前記画像修正ステップにて前記画像データの傾き判定ができないと判定された場合には、前記電子メール送信ステップは、前記返信メールに含まれる画像識別情報に基づき前記送信者の電子メールアドレスを参照し、該電子メールアドレス宛に前記画像データに不具合があった旨を通知するための電子メールを送信することを特徴とする不具合画像修正方法
In a defect image correcting method for an image processing apparatus, comprising: a document reading unit that reads a document and acquires image data; and a storage unit that stores the acquired image data.
An e-mail transmission step of adding the image data acquired by the document reading means to an e-mail and transmitting it to a destination computer; a reply e-mail analysis step of analyzing a reply e-mail returned from the destination computer; An image correction step of selecting image data corresponding to the image identification information included in the reply mail from the storage means, and correcting a defect of the selected image data based on the defect information included in the reply mail;
The storage means stores the image data acquired by the document reading means and the e-mail address of the sender who transmitted the image data to the transmission destination computer in the e-mail transmission step in association with each other. And
When the defect information included in the reply mail is an image inclination, the image correction step determines whether or not the image data inclination can be determined, and when it is determined that the image data inclination can be determined. The image data is rotated or the print position of the image data is aligned and the inclination is corrected, and the e-mail transmission step sends the image data corrected in the image correction step to the destination computer. If the image correction step determines that the inclination of the image data cannot be determined in the image correction step, the e-mail transmission step is performed based on the image identification information included in the reply mail. By referring to the e-mail address, an e-mail for notifying that the image data is defective is sent to the e-mail address. Defect image correction method comprising.
JP2005221642A 2005-07-29 2005-07-29 Image processing apparatus and defect image correction method Active JP4454550B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005221642A JP4454550B2 (en) 2005-07-29 2005-07-29 Image processing apparatus and defect image correction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005221642A JP4454550B2 (en) 2005-07-29 2005-07-29 Image processing apparatus and defect image correction method

Publications (2)

Publication Number Publication Date
JP2007037067A JP2007037067A (en) 2007-02-08
JP4454550B2 true JP4454550B2 (en) 2010-04-21

Family

ID=37795713

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005221642A Active JP4454550B2 (en) 2005-07-29 2005-07-29 Image processing apparatus and defect image correction method

Country Status (1)

Country Link
JP (1) JP4454550B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5347723B2 (en) * 2008-08-08 2013-11-20 株式会社リコー Image communication apparatus, image communication method, image communication program, and recording medium
JP5660165B2 (en) * 2008-08-08 2015-01-28 株式会社リコー Image communication apparatus, image communication method, image communication program, and recording medium
JP2014220652A (en) 2013-05-08 2014-11-20 コニカミノルタ株式会社 Image editing apparatus, image editing method, and image editing program
JP7439462B2 (en) * 2019-11-08 2024-02-28 コニカミノルタ株式会社 Scan data transmitter
US11341616B2 (en) * 2020-03-23 2022-05-24 Ge Precision Healthcare Methods and system for selective removal of streak artifacts and noise from images using deep neural networks
US20220236926A1 (en) 2021-01-26 2022-07-28 Toshiba Tec Kabushiki Kaisha Information processing apparatus with print failure reporting capabilities

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0352378A (en) * 1989-07-19 1991-03-06 Sanyo Electric Co Ltd Facsimile communication system
JPH0851533A (en) * 1994-08-08 1996-02-20 Ricoh Co Ltd Communication equipment
JPH08274912A (en) * 1995-03-29 1996-10-18 Oki Electric Ind Co Ltd System for recognizing characters on slip
JPH09275482A (en) * 1996-04-05 1997-10-21 Canon Inc Image communication system and image communication equipment
JP3458888B2 (en) * 1998-12-09 2003-10-20 日本電気株式会社 Facsimile machine
JP2001148770A (en) * 1999-11-19 2001-05-29 Murata Mach Ltd Image reader
JP2001197247A (en) * 2000-01-11 2001-07-19 Fuji Xerox Co Ltd Image data transmitter-receiver and communication system
JP2001339559A (en) * 2000-05-26 2001-12-07 Ricoh Co Ltd Image generating method and image generating system
JP2002262083A (en) * 2001-03-06 2002-09-13 Ricoh Co Ltd Image processor
JP2004104226A (en) * 2002-09-05 2004-04-02 Fuji Xerox Co Ltd Image processing method and apparatus therefor
JP3617838B2 (en) * 2003-01-28 2005-02-09 花王株式会社 Liquid detergent composition

Also Published As

Publication number Publication date
JP2007037067A (en) 2007-02-08

Similar Documents

Publication Publication Date Title
US7397575B2 (en) Communication apparatus and method having electronic mail communication function, and program
US7610346B2 (en) User confirmation for retransmission of compressed e-mail attachments
JP4454550B2 (en) Image processing apparatus and defect image correction method
US20070206754A1 (en) Transmission apparatus and transmission method
JP2004146877A (en) Data transmitter, data transmitting method, data transmitting program, data receiver, data receiving method, data receiving program, and communication system
US7734794B2 (en) Network communication device
JP2007074124A (en) Network facsimile machine, image output system, and image output method
JP2007235731A (en) Transmission apparatus and transmission method
US20050195425A1 (en) Email confirmation for specified task at print device
KR20120033718A (en) Image forming apparatus and method for sending e-mail thereof
JP4503623B2 (en) COMMUNICATION SYSTEM, COMMUNICATION METHOD, PROGRAM, AND RECORDING MEDIUM THEREOF
JP4830955B2 (en) Digital multifunction device
JP4420601B2 (en) Data communication system and communication apparatus
US7312889B2 (en) Facsimile machine and transmission method of scanned image
JP2007282248A (en) Communication apparatus and control method of communication apparatus
JP2000032184A (en) Image processor
JP6391238B2 (en) System, facsimile apparatus, control method, and program
JP2007049435A (en) Facsimile machine and data transmission method
JP2003288307A (en) Data transmission device and program
JP2010187173A (en) Image processing device and image processing method
US20090089387A1 (en) Electronic mail communication apparatus
JP4339329B2 (en) Image forming apparatus
JP2008236106A (en) Image transfer device, image reception device, and image transfer system equipped therewith
JP4595973B2 (en) Data transmitting apparatus and program
JP6446926B2 (en) Image processing program and image processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070822

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090901

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091117

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100202

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100202

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4454550

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140212

Year of fee payment: 4