JP5660165B2 - Image communication apparatus, image communication method, image communication program, and recording medium - Google Patents

Image communication apparatus, image communication method, image communication program, and recording medium Download PDF

Info

Publication number
JP5660165B2
JP5660165B2 JP2013138435A JP2013138435A JP5660165B2 JP 5660165 B2 JP5660165 B2 JP 5660165B2 JP 2013138435 A JP2013138435 A JP 2013138435A JP 2013138435 A JP2013138435 A JP 2013138435A JP 5660165 B2 JP5660165 B2 JP 5660165B2
Authority
JP
Japan
Prior art keywords
image data
image
character
unit
paper
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013138435A
Other languages
Japanese (ja)
Other versions
JP2013192274A (en
Inventor
藤岡 進
進 藤岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2013138435A priority Critical patent/JP5660165B2/en
Publication of JP2013192274A publication Critical patent/JP2013192274A/en
Application granted granted Critical
Publication of JP5660165B2 publication Critical patent/JP5660165B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Facsimiles In General (AREA)
  • Facsimile Transmission Control (AREA)

Description

本発明は、画像通信装置、画像通信方法、画像通信プログラム及び記録媒体に関し、特にネットワーク通信により受信した画像データの印刷結果を通知する制御に関する。   The present invention relates to an image communication apparatus, an image communication method, an image communication program, and a recording medium, and more particularly to control for notifying a print result of image data received by network communication.

送信側装置から受信側装置に画像データを送信したときに、送信した画像データが正常に届いているかを送信者が確認するため、ファクシミリ装置等の画像通信装置には、受信確認通知機能が実装されている。受信確認通知機能によれば、送信側装置から送信した画像データが受信側装置に正常に届いたこと及び受信途中で送信が中断されたことを含む受信確認情報が、受信側装置から送信側装置へ通知される(特許文献1、2参照)。   When the image data is transmitted from the transmission side device to the reception side device, the reception confirmation notification function is implemented in the image communication device such as a facsimile device in order for the sender to check whether the transmitted image data has arrived normally. Has been. According to the reception confirmation notification function, the reception confirmation information including that the image data transmitted from the transmission side device has normally arrived at the reception side device and that transmission has been interrupted in the middle of reception is transmitted from the reception side device to the transmission side device. (See Patent Documents 1 and 2).

従来の画像通信装置でも、画像データが正常に受信側装置に届いたかどうかは、送信者が確認することができた。しかしながら、従来の画像通信装置に搭載されている受信確認通知機能は、受信側装置が画像データを正常に受信したか否かを送信側端末に通知しているに過ぎない。このため、画像通信装置において、受信側装置で印刷された画像データの品質を送信者が確認することはできなかった。   Even in the conventional image communication apparatus, the sender can confirm whether the image data has normally arrived at the receiving apparatus. However, the reception confirmation notification function installed in the conventional image communication apparatus merely notifies the transmission side terminal whether or not the reception side apparatus has received the image data normally. For this reason, in the image communication apparatus, the sender cannot confirm the quality of the image data printed by the receiving side apparatus.

本発明は、上記問題点に鑑みてなされたものであり、本発明の目的は、送信者が受信側端末で印刷された画像データの品質を確認することが可能な、新規かつ改良された画像通信装置を提供することにある。   The present invention has been made in view of the above problems, and an object of the present invention is to provide a new and improved image that enables a sender to check the quality of image data printed on a receiving terminal. It is to provide a communication device.

上記課題を解決するために、本発明は、他の画像通信装置から送信された第1の画像データを記憶する記憶手段と、第1の画像データを紙に出力する印刷手段と、印刷手段で紙に出力された紙面画像を読み取って第2の画像データを得る読取手段と、記憶手段に記憶された第1の画像データから文字を抽出すると共に、読取手段で得た第2の画像データから文字を抽出する文字抽出手段と、文字抽出手段で第1の画像データおよび第2の画像データから抽出されたそれぞれの文字が同一文字かを判定する文字判定手段と、第1の画像データおよび第2の画像データから、文字判定手段で同一文字であると判定された文字を含む所定の画像領域を切り出す画像領域切り出し手段と、画像領域切り出し手段で第1の画像データおよび第2の画像データから切り出されたそれぞれの画像領域の中で、文字に該当するそれぞれの画素の色の差異が、予め記憶されている条件よりも大きいか否かを判定する差異判定手段と、差異判定手段で色の差異が条件よりも大きいと判定されたとき、他の画像通信装置から送信された第1の画像データと、第1の画像データが出力された紙の紙面画像を読み取って得た第2の画像データとが異なっている旨のメッセージを、第1の画像データの送信元の他の画像通信装置に送信する送信手段とを有する。 In order to solve the above problems, the present invention includes a storage unit that stores first image data transmitted from another image communication device, a printing unit that outputs the first image data to paper, and a printing unit. Reading means for reading the paper image output on the paper to obtain second image data, and extracting characters from the first image data stored in the storage means, and from the second image data obtained by the reading means Character extracting means for extracting characters, character determining means for determining whether the characters extracted from the first image data and the second image data by the character extracting means are the same character, the first image data and the first image data The image area cutout means for cutting out a predetermined image area including the character determined to be the same character by the character determination means, and the first image data and the second image data by the image area cutout means. A difference determination unit that determines whether or not a color difference of each pixel corresponding to the character is larger than a pre-stored condition in each image region cut out from the data; When it is determined that the color difference is greater than the condition, the second image obtained by reading the first image data transmitted from the other image communication apparatus and the paper image on which the first image data is output. Transmitting means for transmitting a message to the effect that the image data of the first image data is different to another image communication apparatus that is the transmission source of the first image data.

本発明によれば、受信側装置で印刷された画像の品質を送信者が確認することができる。これにより、画像通信装置の信頼性を向上させることが可能となる。   According to the present invention, the sender can check the quality of the image printed by the receiving-side apparatus. Thereby, it is possible to improve the reliability of the image communication apparatus.

図1は、本発明の第1の実施形態に係る複合機の運用態様を示す図である。FIG. 1 is a diagram illustrating an operation mode of the multifunction peripheral according to the first embodiment of the present invention. 図2は、本発明の第1の実施形態に係る複合機のハードウェア構成を示すブロック図である。FIG. 2 is a block diagram showing a hardware configuration of the multifunction peripheral according to the first embodiment of the present invention. 図3は、本発明の第1の実施形態に係る排紙用スキャナの構成図である。FIG. 3 is a configuration diagram of the paper discharge scanner according to the first embodiment of the present invention. 図4は、本発明の第1の実施形態に係る排紙用スキャナの取り付け位置を示す図である。FIG. 4 is a view showing a mounting position of the paper discharge scanner according to the first embodiment of the present invention. 図5は、本発明の第1の実施形態に係る複合機が送信機として機能するときの機能構成図である。FIG. 5 is a functional configuration diagram when the multifunction peripheral according to the first embodiment of the present invention functions as a transmitter. 図6は、本発明の第1の実施形態に係る複合機が受信機として機能するときの機能構成図である。FIG. 6 is a functional configuration diagram when the multifunction peripheral according to the first embodiment of the present invention functions as a receiver. 図7は、本発明の第1の実施形態に係るITU−T勧告T.38で規定されたプロトコルで通信する動作の流れを示す図である。FIG. 7 shows ITU-T recommendation T.30 according to the first embodiment of the present invention. FIG. 4 is a diagram illustrating a flow of an operation of performing communication using a protocol defined in FIG. 図8は、本発明の第1の実施形態に係る複合機106が複合機103にカラー画像データを送信するときの動作を示す図である。FIG. 8 is a diagram illustrating an operation when the multi-function peripheral 106 according to the first embodiment of the present invention transmits color image data to the multi-function peripheral 103. 図9は、本発明の第1の実施形態に係る複合機106から送信されたカラー画像データを受信するときの複合機103の動作を示す図である。FIG. 9 is a diagram illustrating an operation of the multi-function peripheral 103 when receiving color image data transmitted from the multi-function peripheral 106 according to the first embodiment of the present invention. 図10は、本発明の第1の実施形態に係る2値画像の例を示す図である。FIG. 10 is a diagram illustrating an example of a binary image according to the first embodiment of the present invention. 図11は、本発明の第2の実施形態に係る複合機が受信機として機能するときの機能構成図である。FIG. 11 is a functional configuration diagram when the multifunction peripheral according to the second embodiment of the present invention functions as a receiver. 図12は、本発明の第2の実施形態に係るTCPパケットのデータ構造を示す図である。FIG. 12 is a diagram illustrating a data structure of a TCP packet according to the second embodiment of the present invention. 図13は、本発明の第2の実施形態に係るNSSコマンドにメールアドレスを含めた例を示す図である。FIG. 13 is a diagram illustrating an example in which a mail address is included in the NSS command according to the second embodiment of the present invention. 図14は、本発明の第2の実施形態に係る複合機106から送信されたカラー画像データを受信するときの複合機103の動作を示す図である。FIG. 14 is a diagram illustrating an operation of the multi-function peripheral 103 when receiving color image data transmitted from the multi-function peripheral 106 according to the second embodiment of the present invention. 図15は、本発明の第3の実施形態に係る複合機が受信機として機能するときの機能構成図である。FIG. 15 is a functional configuration diagram when the multifunction peripheral according to the third embodiment of the present invention functions as a receiver. 図16は、本発明の第3の実施形態に係る複合機106から送信されたカラー画像データを受信するときの複合機103の動作を示す図である。FIG. 16 is a diagram illustrating an operation of the multi-function peripheral 103 when receiving color image data transmitted from the multi-function peripheral 106 according to the third embodiment of the present invention. 図17は、本発明の第4の実施形態に係る複合機が受信機として機能するときの機能構成図である。FIG. 17 is a functional configuration diagram when the multifunction peripheral according to the fourth embodiment of the present invention functions as a receiver. 図18は、本発明の第4の実施形態に係る複合機106から送信された2値画像データを受信するときの複合機103の動作を示す図である。FIG. 18 is a diagram illustrating an operation of the multi-function peripheral 103 when receiving binary image data transmitted from the multi-function peripheral 106 according to the fourth embodiment of the present invention. 図19は、本発明の第4の実施形態に係る2値画像をレイアウト解析によりブロック分割した例(その1)を示す図である。FIG. 19 is a diagram illustrating an example (part 1) in which a binary image according to the fourth embodiment of the present invention is divided into blocks by layout analysis. 図20は、本発明の第4の実施形態に係る2値画像が出力された際に問題が生じた例(その1)を示す図である。FIG. 20 is a diagram illustrating an example (part 1) in which a problem occurs when a binary image according to the fourth embodiment of the present invention is output. 図21は、本発明の第4の実施形態に係る文字列の比較結果において、異なる文字を示す図(その1)である。FIG. 21 is a diagram (part 1) showing different characters in the comparison result of the character strings according to the fourth embodiment of the present invention. 図22は、本発明の第4の実施形態に係る2値画像をレイアウト解析によりブロック分割した例(その2)を示す図である。FIG. 22 is a diagram illustrating an example (part 2) in which a binary image according to the fourth embodiment of the present invention is divided into blocks by layout analysis. 図23は、本発明の第4の実施形態に係る2値画像が出力された際に問題が生じた例(その2)を示す図である。FIG. 23 is a diagram illustrating an example (part 2) in which a problem occurs when a binary image according to the fourth embodiment of the present invention is output. 図24は、本発明の第4の実施形態に係る文字列の比較結果において、異なる文字を示す図(その2)である。FIG. 24 is a diagram (No. 2) showing different characters in a character string comparison result according to the fourth embodiment of the present invention. 図25は、本発明の第4の実施形態に係る受信側の複合機における文字抽出部が記憶している情報の例を示す図である。FIG. 25 is a diagram illustrating an example of information stored in the character extraction unit in the receiving-side multifunction peripheral according to the fourth embodiment of the present invention.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In the present specification and drawings, components having substantially the same functional configuration are denoted by the same reference numerals, and redundant description is omitted.

なお、本実施形態では画像通信装置の一例としてプリンタ、コピー、ファクシミリ、スキャナ等の各装置の機能を1つの筐体内に収納した複合機を一例として説明していくが、画像通信機能を備えている如何なる画像通信装置であってもよい。また、本実施形態では画像通信装置の画像通信機能として、SIP(Session Initiation Protocol)サーバを使用して相手側装置と接続するIP−FAX機能を用いて説明していくが、画像通信機能はこれに限られるものではない。   In this embodiment, as an example of an image communication apparatus, a multifunction machine in which the functions of each apparatus such as a printer, a copy, a facsimile machine, and a scanner are housed in one housing will be described as an example. Any image communication apparatus may be used. In the present embodiment, the image communication function of the image communication apparatus will be described using an IP-FAX function that connects to a partner apparatus using a SIP (Session Initiation Protocol) server. It is not limited to.

〔実施の形態1〕
図1は、本実施形態に係る複合機の運用態様を示す図である。図1に示すように、IPネットワーク101は、SIPサーバ102が接続されている。拠点Aに存在する複合機103、PC104及びIP電話105と、拠点Bに存在する複合機106、PC107及びIP電話108とは、それぞれIPネットワーク101を介して通信可能となっている。
[Embodiment 1]
FIG. 1 is a diagram illustrating an operation mode of the multifunction peripheral according to the present embodiment. As shown in FIG. 1, an IP network 101 is connected to a SIP server 102. The MFP 103, the PC 104, and the IP phone 105 existing at the site A can communicate with the MFP 106, the PC 107, and the IP phone 108 existing at the site B via the IP network 101, respectively.

次に、図2は、本実施形態に係る複合機103または複合機106のハードウェア構成を示すブロック図である。図2に示すように、本実施形態に係る複合機103または複合機106は、CPU(Central Processing Unit)201と、フラッシュROM(Read Only Memory)202と、メインメモリ203と、クロック204と、バスコントローラ205と、PCI(Peripheral Component Interconnect)ブリッジ206と、キャッシュメモリ207とがCPUバス225を介して接続されている。   Next, FIG. 2 is a block diagram illustrating a hardware configuration of the multifunction machine 103 or the multifunction machine 106 according to the present embodiment. As shown in FIG. 2, the MFP 103 or the MFP 106 according to the present embodiment includes a CPU (Central Processing Unit) 201, a flash ROM (Read Only Memory) 202, a main memory 203, a clock 204, and a bus. A controller 205, a PCI (Peripheral Component Interconnect) bridge 206, and a cache memory 207 are connected via a CPU bus 225.

また、複合機103または複合機106は、原稿用スキャナ208と、原稿スキャナコントローラ209と、プリントコントローラ210と、プリントエンジン211と、排紙用スキャナ212と、排紙スキャナコントローラ213と、ハードディスク214と、HD(Hard Disk)コントローラ215と、LCD表示コントローラ216と、LCD217と、LANコントローラ218と、LAN I/F219とがPCIバス226を介して接続されている。   The multifunction machine 103 or the multifunction machine 106 includes a document scanner 208, a document scanner controller 209, a print controller 210, a print engine 211, a paper discharge scanner 212, a paper discharge scanner controller 213, and a hard disk 214. An HD (Hard Disk) controller 215, an LCD display controller 216, an LCD 217, a LAN controller 218, and a LAN I / F 219 are connected via a PCI bus 226.

また、複合機103または複合機106は、キー入力コントローラ220とハードキー221と、タッチパネルコントローラ222と、タッチパネル223とがXバス(内部バス)227を介して接続されている。   In the multifunction machine 103 or the multifunction machine 106, a key input controller 220, a hard key 221, a touch panel controller 222, and a touch panel 223 are connected via an X bus (internal bus) 227.

そして、複合機103または複合機106は、CPUバス225と、PCIバス226と、Xバス227とが、バスコントローラ205またはPCIブリッジ206を介して接続されている。   The MFP 103 or the MFP 106 is connected to the CPU bus 225, the PCI bus 226, and the X bus 227 via the bus controller 205 or the PCI bridge 206.

CPU201は、フラッシュROM202に記憶された制御処理プログラムやOS(Operating System)を実行処理する。メインメモリ203は、DRAM(Dynamic Random Access Memory)より構成されており、CPU201のワークエリア等で使用される。   The CPU 201 executes a control processing program and an OS (Operating System) stored in the flash ROM 202. The main memory 203 is composed of a DRAM (Dynamic Random Access Memory) and is used in the work area of the CPU 201 and the like.

フラッシュROM202は、電源を切ってもデータが消去されず、電気的に書き換え可能なROMであり、電源オン時のシステムの立ち上げや複合機の機能を実現するための各種プログラムが予め書き込まれている。また、フラッシュROM202には、プログラムの実行時に参照されるスイッチやパラメータ等のデータも記憶される。   The flash ROM 202 is an electrically rewritable ROM whose data is not erased even when the power is turned off, and various programs are written in advance to realize the system startup and the functions of the multifunction device when the power is turned on. Yes. The flash ROM 202 also stores data such as switches and parameters that are referred to when the program is executed.

クロック204は、水晶発振子と分周回路から構成されており、CPU201やバスコントローラ205の動作タイミングを制御するためのクロックを生成している。バスコントローラ205は、CPUバス225とXバス227でのデータ転送を制御する。   The clock 204 includes a crystal oscillator and a frequency dividing circuit, and generates a clock for controlling the operation timing of the CPU 201 and the bus controller 205. The bus controller 205 controls data transfer through the CPU bus 225 and the X bus 227.

PCIブリッジ206は、キャッシュメモリ207を使用して、PCIバス226とCPU201との間のデータ転送を行う。キャッシュメモリ207は、DRAMより構成されており、PCIブリッジ206により使用される。   The PCI bridge 206 uses the cache memory 207 to perform data transfer between the PCI bus 226 and the CPU 201. The cache memory 207 is composed of a DRAM and is used by the PCI bridge 206.

原稿用スキャナ208は、1次元配列されたLEDアレイを光源としてカラーCCDラインセンサにより紙面画像を読み取り、カラーCCDラインセンサから出力されるR(Red)、G(Green)、B(Blue)の各アナログ画像信号をそれぞれA(Analog)/D(Digital)変換によりデジタル画像データに変換する。原稿スキャナコントローラ209は、原稿用スキャナ208の原稿読み取り動作を制御するとともに、原稿用スキャナ208から入力されるRGBデジタル画像データについて、色差成分(Cb,Cr)と輝度成分(Y)に変換してJPEG(Joint Photographic Experts Group)に準拠した圧縮(符号化)処理を行う。   The original scanner 208 reads a paper image by a color CCD line sensor using a one-dimensionally arranged LED array as a light source, and outputs each of R (Red), G (Green), and B (Blue) output from the color CCD line sensor. Each analog image signal is converted into digital image data by A (Analog) / D (Digital) conversion. The document scanner controller 209 controls the document reading operation of the document scanner 208 and converts the RGB digital image data input from the document scanner 208 into color difference components (Cb, Cr) and luminance components (Y). Compression (encoding) processing conforming to JPEG (Joint Photographic Experts Group) is performed.

プリントコントローラ210はプリントエンジン211の動作を制御する。プリントエンジン211は、シアン、マゼンタ、イエロー、ブラックのトナーを使用して、紙面にカラー画像またはモノクロ画像をプリントする。   The print controller 210 controls the operation of the print engine 211. The print engine 211 uses a cyan, magenta, yellow, and black toner to print a color image or a monochrome image on a paper surface.

排紙用スキャナ212は、原稿用スキャナ208と同様に、紙面画像を読み取り、読み取ったアナログ画像信号をデジタル画像データに変換する。排紙スキャナコントローラ213は排紙用スキャナ212の原稿読み取り動作を制御する。排紙用スキャナの詳細については後述する。   As with the document scanner 208, the paper discharge scanner 212 reads a paper image and converts the read analog image signal into digital image data. A paper discharge scanner controller 213 controls a document reading operation of the paper discharge scanner 212. Details of the paper discharge scanner will be described later.

ハードディスク214は、原稿用スキャナ208から入力された画像データや通信により受信した画像データ等を記憶する。HDコントローラ215は、ハードディスク214とのインタフェースとして、ハードディスク214と高速データ転送を行う。   The hard disk 214 stores image data input from the document scanner 208, image data received through communication, and the like. The HD controller 215 performs high-speed data transfer with the hard disk 214 as an interface with the hard disk 214.

LCD表示コントローラ216は、文字データやグラフィックデータ等をD/A(Digital/Analog)変換するとともに、これらのデータをLCD217に表示するための制御を行う。   The LCD display controller 216 performs D / A (Digital / Analog) conversion of character data, graphic data, and the like, and performs control for displaying these data on the LCD 217.

LANコントローラ218は、例えばIEEE(Institute of Electrical and Electronics Engineers)802.3規格に準拠した通信プロトコルを実行して、LAN I/F219を介してイーサネット(登録商標)に接続された他の機器との通信を制御する。   The LAN controller 218 executes a communication protocol compliant with, for example, the IEEE (Institut of Electrical and Electronics Engineers) 802.3 standard, and communicates with other devices connected to the Ethernet (registered trademark) via the LAN I / F 219. Control communication.

キー入力コントローラ220は、ハードキー221から入力されたシリアルデータからパラレルデータへの変換を行う。タッチパネルコントローラ222は、タッチパネル223上で指等の物体が接触した部分を検出し、その位置情報を取り込む。タッチパネル223はLCD217と重ね合わせて密着している。   The key input controller 220 performs conversion from serial data input from the hard key 221 to parallel data. The touch panel controller 222 detects a portion where an object such as a finger contacts on the touch panel 223, and takes in the position information. The touch panel 223 is in close contact with the LCD 217.

次に、排紙用スキャナ212の構成を図3に示す。排紙用スキャナ212はLEDアレイ301とカラーCCDラインセンサ302から構成される。LEDアレイ301から発光された光は、読み取り対象の紙303で反射され、カラーCCDラインセンサ302に入力される。排紙用スキャナ212は、図4に示すように、排紙口の内側に取り付けられる。   Next, the configuration of the paper discharge scanner 212 is shown in FIG. The paper discharge scanner 212 includes an LED array 301 and a color CCD line sensor 302. The light emitted from the LED array 301 is reflected by the paper 303 to be read and input to the color CCD line sensor 302. As shown in FIG. 4, the paper discharge scanner 212 is attached to the inside of the paper discharge port.

次に、複合機103又は複合機106が送信機として機能するときの機能構成図を図5に示す。   Next, FIG. 5 shows a functional configuration diagram when the multifunction machine 103 or the multifunction machine 106 functions as a transmitter.

画像読取部501は原稿用スキャナ208を使用して原稿画像を読み取ってRGBデジタル画像データを取得する。さらに、画像読取部501は原稿スキャナコントローラ209によりRGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換してJPEG圧縮(符号化)を行う。   The image reading unit 501 reads an original image using the original scanner 208 and acquires RGB digital image data. Further, the image reading unit 501 converts the RGB digital image data into color difference component (Cb, Cr) and luminance component (Y) data by the document scanner controller 209 and performs JPEG compression (encoding).

画像送信部502は画像読取部501によりJPEG符号化された画像データを、RFC3261で規定されたSIPを使用した呼接続、ITU−T勧告T.38で規定されたIP−FAXプロトコルを実行して他の端末に送信する。例えば、画像送信部502は画像データ送信手段として機能する。   The image transmission unit 502 converts the image data JPEG-encoded by the image reading unit 501 into a call connection using SIP defined by RFC 3261, an ITU-T recommendation T.264. The IP-FAX protocol defined in 38 is executed and transmitted to another terminal. For example, the image transmission unit 502 functions as an image data transmission unit.

表示制御部503はLCD217に対する各種画面等の表示処理を制御する。具体的には、表示制御部503は各種機能を指定するためのメニュー画面の表示、IP−FAXの送信宛先を入力するための画面の表示等を制御する。   A display control unit 503 controls display processing of various screens on the LCD 217. Specifically, the display control unit 503 controls display of a menu screen for designating various functions, display of a screen for inputting an IP-FAX transmission destination, and the like.

操作部504はハードキー221から入力されたキーデータやタッチパネル223から入力された座標データに基づいて各種の操作処理を制御する。   The operation unit 504 controls various operation processes based on key data input from the hard keys 221 and coordinate data input from the touch panel 223.

メッセージ受信部505は他の端末から送信されたSIPのインスタントメッセージを受信する。   The message receiving unit 505 receives an SIP instant message transmitted from another terminal.

次に、複合機103又は複合機106が受信機として機能するときの機能構成図を図6に示す。   Next, FIG. 6 shows a functional configuration diagram when the MFP 103 or the MFP 106 functions as a receiver.

画像受信部601はSIPを使用した着呼接続、ITU−T勧告T.38で規定されたIP−FAXプロトコルを実行して他のIP−FAXからJPEG画像データを受信する。例えば、画像受信部601は画像データ受信手段として機能する。   The image receiving unit 601 is an incoming call connection using SIP, ITU-T recommendation T.264. The IP-FAX protocol defined in 38 is executed and JPEG image data is received from another IP-FAX. For example, the image receiving unit 601 functions as an image data receiving unit.

画像記憶部602は画像受信部601で受信したJPEG画像データをハードディスク214に記憶する。例えば、画像記憶部602は記憶手段として機能する。   The image storage unit 602 stores the JPEG image data received by the image receiving unit 601 in the hard disk 214. For example, the image storage unit 602 functions as a storage unit.

文字抽出部603は後述するアルゴリズムに従って、画像データから文字を抽出する。例えば、文字抽出部603は文字抽出手段として機能する。   The character extraction unit 603 extracts characters from the image data according to an algorithm described later. For example, the character extraction unit 603 functions as a character extraction unit.

プリント色変換部604はハードディスク214に記憶されたJPEG画像データをJPEGに準拠した伸長(復号化)処理を行い、色差成分(Cb,Cr)と輝度成分(Y)に分離された画像データをRGB画像データに変換し、RGB画像データからY(Yellow)、M(Magenta)、C(Cyan)、K(blacK)のプリント用画像データに変換する。また、プリント色変換部604は、JPEG画像データから変換したRGB画像データを、文字抽出部603とL*a*b*色変換部605が利用できるようにメインメモリ203に記憶しておく。   The print color conversion unit 604 performs JPEG-compliant decompression (decoding) processing on the JPEG image data stored in the hard disk 214, and converts the image data separated into color difference components (Cb, Cr) and luminance components (Y) into RGB The image data is converted, and the RGB image data is converted into Y (Yellow), M (Magenta), C (Cyan), and K (blacK) print image data. The print color conversion unit 604 stores the RGB image data converted from the JPEG image data in the main memory 203 so that the character extraction unit 603 and the L * a * b * color conversion unit 605 can use them.

L*a*b*色変換部605はRGB画像データについて、まず、式(1)によりRGBからCIEXYZへ変換する。なお、式(1)はCCIR709で定義された式である。

Figure 0005660165
The L * a * b * color conversion unit 605 first converts RGB image data from RGB to CIEXYZ according to Equation (1). Equation (1) is an equation defined by CCIR709.
Figure 0005660165

続いて、L*a*b*色変換部605はこのCIEXYZから式(2)〜式(7)によりL*a*b*に変換する。なお、式(2)〜式(5)にあるXn、Yn、ZnはD65光源下での値であり、それぞれXn=95.045、Yn=100.000、Zn=108.892の値を持つ。

Figure 0005660165
Subsequently, the L * a * b * color conversion unit 605 converts the CIEXYZ into L * a * b * according to equations (2) to (7). Xn, Yn, and Zn in the equations (2) to (5) are values under the D65 light source, and have values of Xn = 95.045, Yn = 100.000, and Zn = 108.892, respectively. .
Figure 0005660165

プリント出力部606はYMCKの画像データをプリントエンジン211を使用して紙303にプリントする。例えば、プリント出力部606は出力手段として機能する。   The print output unit 606 prints the YMCK image data on the paper 303 using the print engine 211. For example, the print output unit 606 functions as an output unit.

色差異抽出部607は後述するアルゴリズムに従って、2つの色の差(色差)を求める。例えば、色差異抽出部607は差異抽出手段として機能する。   The color difference extraction unit 607 obtains a difference between two colors (color difference) according to an algorithm described later. For example, the color difference extraction unit 607 functions as a difference extraction unit.

色差異判定部609は、色差異抽出部607で求めた色差と予めフラッシュROM202に記憶されている所定条件とを比較判定する。ここで、所定条件とは、差異条件として許容できる色差ΔE94の値を示す。例えば、色差異判定部609は差異判定手段として機能する。   The color difference determination unit 609 compares and determines the color difference obtained by the color difference extraction unit 607 and a predetermined condition stored in the flash ROM 202 in advance. Here, the predetermined condition indicates a value of the color difference ΔE94 that is acceptable as the difference condition. For example, the color difference determination unit 609 functions as a difference determination unit.

画像読取部608は排紙用スキャナ212を使用して紙303にプリントされた画像を読み取り、RGBデジタル画像データを取得し、このRGBデジタル画像データをL*a*b*色変換部605が利用できるようにメインメモリ203に記憶しておく。また、画像読取部608は、このRGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換して、この輝度成分(Y)の画像データのみを文字抽出部603が利用できるようにメインメモリ203に記憶しておく。例えば、画像読取部608は読取手段として機能する。   The image reading unit 608 reads an image printed on the paper 303 by using the paper discharge scanner 212 to acquire RGB digital image data, and the RGB digital image data is used by the L * a * b * color conversion unit 605. It is stored in the main memory 203 so that it can be done. The image reading unit 608 converts the RGB digital image data into color difference component (Cb, Cr) and luminance component (Y) data, and the character extraction unit 603 converts only the luminance component (Y) image data. It is stored in the main memory 203 so that it can be used. For example, the image reading unit 608 functions as a reading unit.

メッセージ送信部610はSIPのインスタントメッセージを使用して、他の端末へメッセージを送信する。   The message transmission unit 610 transmits a message to another terminal using an SIP instant message.

設定情報記憶部611は受信したカラー画像データをプリントした色が原稿の色と異なるか否かを判断するための色の差異条件となる情報等をフラッシュROM202に記憶する。   The setting information storage unit 611 stores information serving as a color difference condition for determining whether or not the color printed from the received color image data is different from the color of the document in the flash ROM 202.

次に、図1に示した拠点Bに存在する複合機106が拠点Aに存在する複合機103に、ITU−T勧告T.38で規定されたプロトコルで通信する動作の流れを図7に示すシーケンス図と併せて説明する。   Next, the MFP 106 existing at the site B shown in FIG. The flow of the operation of communicating with the protocol defined in 38 will be described together with the sequence diagram shown in FIG.

まず、複合機106は、SIPサーバ102に複合機103のFAX番号を含めたINVITEメッセージを送信する(S701)。   First, the multifunction device 106 transmits an INVITE message including the FAX number of the multifunction device 103 to the SIP server 102 (S701).

すると、SIPサーバ102は既に登録されているFAX番号とIPアドレスとの対応テーブルを参照して(S702)、複合機103にINVITEメッセージを送信する(S703)。   Then, the SIP server 102 refers to the correspondence table between the registered FAX numbers and IP addresses (S702), and transmits an INVITE message to the multi-function peripheral 103 (S703).

INVITEメッセージを受け取った複合機103は、SIPサーバ102に成功である旨の200OKレスポンスを送信する(S704)。200OKレスポンスを受け取ったSIPサーバ102は、複合機106に200OKレスポンスを送信する(S705)。   Upon receiving the INVITE message, the multifunction machine 103 transmits a 200 OK response indicating success to the SIP server 102 (S704). The SIP server 102 that has received the 200OK response transmits the 200OK response to the multi-function peripheral 106 (S705).

200OKレスポンスを受け取った複合機106は、ACKメッセージを複合機103へ送信し、セッションを確立させる(S706)。   Upon receiving the 200 OK response, the multifunction device 106 transmits an ACK message to the multifunction device 103 to establish a session (S706).

そして、複合機106は画像データをITU−T勧告T.38で規定されたプロトコルを実行して複合機103に送信する(S707)。画像データの送信が完了すると、複合機106からBYEメッセージを複合機103に送信する(S708)。すると、複合機103から複合機106に200OKレスポンスが送信され、セッションが終了する(S709)。   Then, the multi-function device 106 transmits the image data to the ITU-T recommendation T.264. The protocol defined in 38 is executed and transmitted to the MFP 103 (S707). When the transmission of the image data is completed, the MFP 106 transmits a BYE message to the MFP 103 (S708). Then, a 200 OK response is transmitted from the MFP 103 to the MFP 106, and the session is terminated (S709).

次に、図1に示した複合機106が複合機103にカラー画像データを送信するときの動作について図8に示すフローチャートと併せて説明する。   Next, an operation when the multi-function device 106 shown in FIG. 1 transmits color image data to the multi-function device 103 will be described with reference to a flowchart shown in FIG.

送信者がカラー原稿を原稿用スキャナ208にセットして、複合機103のFAX番号を入力してスタートキーを押す。すると画像読取部501は原稿スキャナコントローラ209を制御して、原稿用スキャナ208から原稿画像を読み取ってRGBデジタル画像データを取得する(S801)。   The sender sets a color original on the original scanner 208, inputs the FAX number of the multifunction machine 103, and presses the start key. Then, the image reading unit 501 controls the document scanner controller 209 to read a document image from the document scanner 208 and acquire RGB digital image data (S801).

次に読み取ったRGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換してJPEG符号化を行う(S802)。   Next, the read RGB digital image data is converted into color difference component (Cb, Cr) and luminance component (Y) data, and JPEG encoding is performed (S802).

そして、画像送信部502はJPEG符号化された画像データを、図7に示した通信手順により複合機103に送信する(S803)。   Then, the image transmission unit 502 transmits the JPEG-encoded image data to the multi-function peripheral 103 by the communication procedure shown in FIG. 7 (S803).

次に、複合機106から送信されたカラー画像データを受信するときの複合機103の動作について、図9に示すフローチャートと併せて説明する。   Next, the operation of the multi-function peripheral 103 when receiving color image data transmitted from the multi-function peripheral 106 will be described in conjunction with the flowchart shown in FIG.

複合機103は、画像受信部601が複合機106から送信されたJPEG画像データを受信したか否かを判断する(S901)。受信した場合には、ステップS902に進み、受信しない場合は、ステップS901を繰り返す。   The multi-function peripheral 103 determines whether the image receiving unit 601 has received JPEG image data transmitted from the multi-function peripheral 106 (S901). If received, the process proceeds to step S902. If not received, step S901 is repeated.

画像記憶部602が受信したJPEG画像データをハードディスク214に記憶する(S902)。   The JPEG image data received by the image storage unit 602 is stored in the hard disk 214 (S902).

続いて、プリント色変換部604がハードディスク214に記憶されたJPEG画像データを、JPEGに準拠した伸長(復号化)処理を行い、色差成分(Cb,Cr)と輝度成分(Y)に分離された画像データをRGB画像データに変換し、さらに、RGBからYMCKのプリント用画像データに変換する。この時、プリント色変換部604は、JPEG伸長で得られた輝度成分(Y)の画像データを文字抽出部603が利用できるように、色差成分(Cb,Cr)と輝度成分(Y)から変換されたRGB画像データをL*a*b*色変換部605がそれぞれ利用できるようにメインメモリ203に記憶する(S903)。   Subsequently, the print color conversion unit 604 performs JPEG-compliant decompression (decoding) processing on the JPEG image data stored in the hard disk 214, and is separated into color difference components (Cb, Cr) and luminance components (Y). The image data is converted into RGB image data, and further converted from RGB to YMCK print image data. At this time, the print color conversion unit 604 converts the luminance component (Y) image data obtained by JPEG decompression from the color difference component (Cb, Cr) and the luminance component (Y) so that the character extraction unit 603 can use them. The RGB image data thus stored is stored in the main memory 203 so that it can be used by the L * a * b * color converter 605 (S903).

続いて、プリント出力部606がYMCKに変換された画像データをプリントエンジン211を使用して紙303にプリントする(S904)。   Subsequently, the print output unit 606 prints the image data converted into YMCK on the paper 303 using the print engine 211 (S904).

次に、プリントされた紙が排紙口を通過するときに、画像読取部608は排紙用スキャナ212を使用して紙303にプリントされた画像を読み取り、RGBデジタル画像データを取得し、当該RGBデジタル画像データをL*a*b*色変換部605が利用できるようにメインメモリ203に記憶する(S905)。   Next, when the printed paper passes through the paper discharge port, the image reading unit 608 reads the image printed on the paper 303 using the paper discharge scanner 212, acquires RGB digital image data, and The RGB digital image data is stored in the main memory 203 so that the L * a * b * color conversion unit 605 can use it (S905).

また、画像読取部608は、このRGB画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換して、この輝度成分(Y)の画像データのみを文字抽出部603が利用できるようにメインメモリ203に記憶する(S906)。   Further, the image reading unit 608 converts the RGB image data into color difference component (Cb, Cr) and luminance component (Y) data, and the character extraction unit 603 uses only the image data of the luminance component (Y). The data is stored in the main memory 203 so that it can be performed (S906).

次に、文字抽出部603はプリント色変換部604が記憶した輝度成分(Y)の画像データを、スレッシュレベルとしてフラッシュROM202に予め記憶された所定の輝度値と比較することにより、スレッシュレベル以上であれば白画素(ビットの値が0)、そうでなければ黒画素(ビットの値が1)として2値画像に変換する。そして、この2値画像の中から文字画像を抽出し、この文字画像に対して文字認識を行う(S907)。この文字画像の抽出と文字認識は、例えば東芝レビュー 1997 VOL.52 NO.2に記載された方法を用いる。   Next, the character extraction unit 603 compares the image data of the luminance component (Y) stored by the print color conversion unit 604 with a predetermined luminance value stored in advance in the flash ROM 202 as a threshold level. If there is a white pixel (bit value is 0), otherwise, it is converted to a binary image as a black pixel (bit value is 1). Then, a character image is extracted from the binary image, and character recognition is performed on the character image (S907). This character image extraction and character recognition are described in, for example, Toshiba Review 1997 VOL. 52 NO. The method described in 2 is used.

ここで、この2値画像の例を図10に示す。図10では、「NEWS」以外の文字は「……」で表現している。図10に示す2値画像では、文字認識により、まず、「N」「E」「W」「S」の各文字が認識される。そして2値画像の中から最初の文字列(図10の例では、「NEWS」)を認識すると、文字抽出部603は画像読取部608が排紙用スキャナ212を使用して紙303にプリントされた画像を読み取って生成した輝度成分(Y)の画像データについて、上記と同様に、2値画像変換、文字画像抽出、文字認識の処理を行い、「N」「E」「W」「S」の各文字が認識される。   Here, an example of this binary image is shown in FIG. In FIG. 10, characters other than “NEWS” are represented by “... In the binary image shown in FIG. 10, the characters “N”, “E”, “W”, and “S” are first recognized by character recognition. When the first character string (“NEWS” in the example of FIG. 10) is recognized from the binary image, the character extraction unit 603 is printed on the paper 303 by the image reading unit 608 using the paper discharge scanner 212. In the same manner as described above, binary image conversion, character image extraction, and character recognition processing are performed on the luminance component (Y) image data generated by reading the obtained image, and “N”, “E”, “W”, and “S” are processed. Are recognized.

続いて、文字抽出部603はプリント色変換部604が記憶した輝度成分(Y)の画像データから認識した文字列と、画像読取部608が記憶した輝度成分(Y)の画像データから認識した文字列とを比較する(S908)。   Subsequently, the character extraction unit 603 recognizes the character string recognized from the image data of the luminance component (Y) stored by the print color conversion unit 604 and the character recognized from the image data of the luminance component (Y) stored by the image reading unit 608. The columns are compared (S908).

そして、両文字列が一致しない場合は(S908でNO)、プリント画像の色を原稿の色と比較できない旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する(S909)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   If the character strings do not match (NO in S908), the message transmission unit 610 transmits a message to the effect that the color of the print image cannot be compared with the color of the document to the multifunction device 106 that is the transmission source terminal (S909). . At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

両文字列が一致した場合には(S908でYES)、文字認識した2値の文字画像に対応したRGB画像データをL*a*b*に色変換する処理に移行する。ここで、後述する条件判定を容易にするために、本実施形態ではRGB画像データをL*a*b*に色変換する手法を採用している。   If the two character strings match (YES in S908), the process proceeds to a process of color-converting RGB image data corresponding to the binary character image that has been character-recognized into L * a * b *. Here, in order to facilitate the condition determination described later, the present embodiment employs a method of color-converting RGB image data into L * a * b *.

文字抽出部603はまず、プリント色変換部604が記憶した輝度成分(Y)の画像データから2値化された「N」の文字画像領域(矩形)の画像データと、プリント色変換部604が記憶したRGB画像データの中からこの矩形領域に該当する画像データをL*a*b*色変換部605へ渡す。L*a*b*色変換部605はこの領域の2値画素の中で黒画素(ビットの値が1)に該当する各画素のRGBデータについて、上述した式(1)〜式(7)によりL*a*b*に変換する。ここで、「N」の文字を構成する画素の色が赤の場合、この画素のa*は+の大きな値、b*は+または−の小さな値、L*は40〜60近辺の値を持つ。そして、L*a*b*に変換した画素について、それぞれL*、a*、b*の平均を求める(S910)。このとき、平均値から大きく外れる値を持った画素は省くようにしてもよい。   First, the character extraction unit 603 includes image data of a character image area (rectangle) of “N” binarized from the image data of the luminance component (Y) stored by the print color conversion unit 604, and the print color conversion unit 604. Image data corresponding to this rectangular area is transferred to the L * a * b * color converter 605 from the stored RGB image data. The L * a * b * color conversion unit 605 uses the above-described equations (1) to (7) for the RGB data of each pixel corresponding to the black pixel (bit value is 1) among the binary pixels in this region. To L * a * b *. Here, when the color of the pixel constituting the character “N” is red, a * of this pixel is a large value of +, b * is a small value of + or −, and L * is a value around 40-60. Have. Then, the average of L *, a *, and b * is obtained for each pixel converted to L * a * b * (S910). At this time, pixels having a value greatly deviating from the average value may be omitted.

続いて、文字抽出部603は、画像読取部608が記憶した輝度成分(Y)の画像データから2値化された「N」の文字画像領域(矩形)の画像データと、画像読取部608が記憶したRGB画像データの中からこの矩形領域に該当する画像データをL*a*b*色変換部605へ渡す。L*a*b*色変換部605は同様にして、2値画素の中で黒画素(ビットの値が1)に該当する各画素のRGBデータについてL*a*b*に変換し、これらの画素について、それぞれL*、a*、b*の平均を求める(S911)。   Subsequently, the character extraction unit 603 includes the image data of the character image region (rectangle) of “N” binarized from the image data of the luminance component (Y) stored by the image reading unit 608, and the image reading unit 608 Image data corresponding to this rectangular area is transferred to the L * a * b * color converter 605 from the stored RGB image data. Similarly, the L * a * b * color conversion unit 605 converts the RGB data of each pixel corresponding to the black pixel (bit value is 1) among the binary pixels into L * a * b *, and these The average of L *, a *, and b * is obtained for each of the pixels (S911).

次に、これら2つのL*a*b*の値から色の差異を表す情報である色差を求める処理に移行する。本実施の形態では、この色差として、ΔE94(CIE1994)を使用する。この色差ΔE94を求める計算は色差異抽出部607が実行し、2つのL*a*b*の値を(L1,a1,b1)、(L2,a2,b2)として、ΔE94を式(8)、式(9)で求める(S912)。

Figure 0005660165
Next, the process proceeds to a process for obtaining a color difference, which is information representing a color difference, from these two L * a * b * values. In this embodiment, ΔE94 (CIE1994) is used as the color difference. The calculation for obtaining the color difference ΔE94 is executed by the color difference extraction unit 607, and the values of two L * a * b * are (L1, a1, b1) and (L2, a2, b2), and ΔE94 is expressed by Equation (8). Is obtained by equation (9) (S912).
Figure 0005660165

続いて、色差異判定部609は求まった色差ΔE94の値を、予めフラッシュROM202に記憶されている所定条件の値と比較する(S913)。   Subsequently, the color difference determination unit 609 compares the obtained color difference ΔE94 value with a predetermined condition value stored in advance in the flash ROM 202 (S913).

そして、求まった色差ΔE94が差異条件の値よりも大きい場合は(S913でNO)、紙303に印刷されたプリント画像の色が原稿の色と異なる旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する(S914)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   If the obtained color difference ΔE94 is larger than the value of the difference condition (NO in S913), the message transmission unit 610 sends a message that the color of the print image printed on the paper 303 is different from the color of the original, to the transmission source terminal. (S914). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

求まった色差ΔE94が差異条件の値よりも小さい場合には(S913でYES)、受信してハードディスク214に記憶したJPEG画像データを削除する(S915)。求まった色差ΔE94が差異条件の値よりも小さい場合に記憶したJPEG画像データを削除し、色差ΔE94が差異条件の値よりも大きい場合は記憶したJPEG画像データを削除しないことで、印刷した画像が送信者の意図するものでなかったときに、そのJPEG画像データを残しておくことが可能となる。このJPEG画像データを残しておくことにより、カラートナーが不足していた場合にはカラートナーを補充した後に、保存されたJPEG画像データを再度プリントして、上述したプリント画像の色を原稿の色と比較する処理を繰り返すことが可能となる。   If the obtained color difference ΔE94 is smaller than the value of the difference condition (YES in S913), the received JPEG image data stored in the hard disk 214 is deleted (S915). When the obtained color difference ΔE94 is smaller than the value of the difference condition, the stored JPEG image data is deleted. When the color difference ΔE94 is larger than the value of the difference condition, the stored JPEG image data is not deleted. When not intended by the sender, the JPEG image data can be left. By leaving the JPEG image data, if the color toner is insufficient, after replenishing the color toner, the stored JPEG image data is printed again, and the color of the print image is changed to the color of the original. It becomes possible to repeat the process compared with.

以上説明したように、本実施形態に係る複合機により、受信した画像データと該画像データを印刷したものにある一定以上の差異が生じるときは、送信元端末にその旨を送信することにより、画像データの送信者が印刷品質の確認をすることができる。   As described above, when there is a certain difference between the received image data and the printed image data by the MFP according to the present embodiment, by transmitting that fact to the transmission source terminal, The sender of the image data can check the print quality.

なお、上記の説明においては、紙303にプリントされた画像を排紙用スキャナ212で読み取る例を説明したが、排紙された紙303を原稿用スキャナ208で読み取っても良い。これにより、排紙口に排紙用スキャナを設けなくても本発明を実施することができる。   In the above description, an example in which an image printed on the paper 303 is read by the paper discharge scanner 212 has been described, but the discharged paper 303 may be read by the original scanner 208. Thus, the present invention can be implemented without providing a paper discharge scanner at the paper discharge port.

なお、上記の説明においては、文字を構成する画素の色を比較して色差ΔE94を求めたが、文字の周辺が白画素である場合に、その白画素も含めた領域に含まれる画素の色の平均を求め、この領域全体の色について比較して色差を求めることもできる。この場合の処理の流れを以下に説明する。   In the above description, the color difference ΔE94 is obtained by comparing the colors of the pixels constituting the character. However, when the periphery of the character is a white pixel, the color of the pixel included in the region including the white pixel. The color difference can be obtained by comparing the colors of the entire region and comparing the colors. The processing flow in this case will be described below.

L*a*b*色変換部605がL*、a*、b*の平均値を求めるとき、L*a*b*色変換部605が文字画像領域(矩形)の2値画素の中で白画素(ビットの値が0)に該当する各画素のRGBデータについてもL*a*b*に変換する。ここで、「N」の文字を構成する画素の色が赤の場合、この画素のa*は+の大きな値、b*は+または−の小さな値、L*は40〜60近辺の値を持つ。また、矩形領域内のその他の画素の色が白の場合、この画素のa*とb*は+または−の小さな値、L*は100に近い値を持つ(L*の範囲は0(黒)〜100(白))。そこで、L*a*b*色変換部605は矩形領域内の文字以外の画素が、a*とb*が+または−の小さな値、L*が100に近い値を持つ場合には、この画素の色を白とみなす。そして、矩形領域内の文字以外の画素が全て白であると判断した場合には、L*a*b*色変換部605は矩形領域内の全ての画素について、a*、b*の平均を求める。L*については、白とみなした100に近い値は省いて平均を求める。そして、色差異抽出部507はこれらのL*、a*、b*の平均値を用いて色差ΔE94を求める。   When the L * a * b * color conversion unit 605 calculates an average value of L *, a *, and b *, the L * a * b * color conversion unit 605 is included in the binary pixels of the character image area (rectangle). The RGB data of each pixel corresponding to the white pixel (bit value is 0) is also converted to L * a * b *. Here, when the color of the pixel constituting the character “N” is red, a * of this pixel is a large value of +, b * is a small value of + or −, and L * is a value around 40-60. Have. When the color of other pixels in the rectangular area is white, a * and b * of this pixel have a small value of + or −, and L * has a value close to 100 (the range of L * is 0 (black ) To 100 (white)). Therefore, the L * a * b * color conversion unit 605 determines that when pixels other than characters in the rectangular area have small values of a * and b * of + or − and L * is close to 100, Consider the color of the pixel as white. If it is determined that all pixels other than characters in the rectangular area are white, the L * a * b * color conversion unit 605 calculates the average of a * and b * for all the pixels in the rectangular area. Ask. For L *, a value close to 100 regarded as white is omitted and an average is obtained. Then, the color difference extraction unit 507 obtains the color difference ΔE94 using the average value of these L *, a *, and b *.

〔実施の形態2〕
実施の形態1では、印刷した画像データと受信した画像データが異なる旨をSIPのインスタントメッセージを使用して送信している。本実施の形態においては、SIPのインスタントメッセージと併せて、さらに送信者のメールアドレスへ通知する場合について説明する。なお、実施の形態1と同様の符号を付す構成要素については実施の形態1と同一又は相当部を示し、説明を省略する。
[Embodiment 2]
In the first embodiment, the fact that the printed image data is different from the received image data is transmitted using an SIP instant message. In the present embodiment, a case will be described in which notification is further sent to the sender's mail address together with the SIP instant message. In addition, about the component which attaches | subjects the code | symbol similar to Embodiment 1, the same or equivalent part as Embodiment 1 is shown, and description is abbreviate | omitted.

複合機103又は複合機106が受信機として機能するときの機能構成図を図11に示す。図11の機能構成図では、図6で示した機能構成に、指定されたメールアドレスへのメール送信の制御を行うメール送信部1101が追加されている。   FIG. 11 shows a functional configuration diagram when the multifunction machine 103 or the multifunction machine 106 functions as a receiver. In the functional configuration diagram of FIG. 11, a mail transmission unit 1101 that controls mail transmission to a specified mail address is added to the functional configuration illustrated in FIG. 6.

次に、図1に示した複合機106が複合機103にカラー画像データを送信するときの動作について説明する。なお、複合機106が送信するときの動作は、図8に示すフローチャート図を用いて説明する。   Next, an operation when the multifunction device 106 shown in FIG. 1 transmits color image data to the multifunction device 103 will be described. The operation when the MFP 106 transmits will be described with reference to the flowchart shown in FIG.

送信者がカラー原稿を原稿用スキャナ208にセットして、送信者のメールアドレスと複合機103のFAX番号を入力してスタートキーを押す。すると画像読取部501は原稿スキャナコントローラ209を制御して、原稿用スキャナ208から原稿画像を読み取ってRGBデジタル画像データを取得する(S801)。次に読み取ったRGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換してJPEG符号化を行う(S802)。そして、画像送信部502はJPEG符号化された画像データを、図7に示した通信手順により複合機103に送信する(S803)。   The sender sets a color original on the original scanner 208, inputs the sender's mail address and the FAX number of the multifunction machine 103, and presses the start key. Then, the image reading unit 501 controls the document scanner controller 209 to read a document image from the document scanner 208 and acquire RGB digital image data (S801). Next, the read RGB digital image data is converted into color difference component (Cb, Cr) and luminance component (Y) data, and JPEG encoding is performed (S802). Then, the image transmission unit 502 transmits the JPEG-encoded image data to the multi-function peripheral 103 by the communication procedure shown in FIG. 7 (S803).

このとき、複合機106は送信者のメールアドレスをITU−T勧告T.38で規定されたプロトコルのNSS (Non−Standard Facilities Set−up)コマンドに含めて複合機103へ送信する。ここで、NSSコマンドはITU−T勧告T.30で定義されたコマンドであるが、ITU−T勧告T.38はITU−T勧告T.30を参照するようになっており、ITU−T勧告T.38はまた ITU−T勧告T.30で規定されたNSS等のHDLC(High−level Data Link Control procedure)フレームをIFP(Internet Facsimile Protocol)パケットに入れ、このIFPパケットをさらにUDPパケットまたはTCPパケットに入れて送信する仕様となっている。TCPパケットのデータ構造を図12に示す。また、NSSコマンドにメールアドレスを含めた例を図13に示す。   At this time, the multifunction device 106 sets the sender's mail address to ITU-T recommendation T.264. It is included in the NSS (Non-Standard Facilities Set-up) command of the protocol defined in 38 and transmitted to the multi-function peripheral 103. Here, the NSS command is an ITU-T recommendation T.264. 30 is a command defined in ITU-T Recommendation T.30. 38 is an ITU-T recommendation T.38. 30 and ITU-T recommendation T.30. 38 is also an ITU-T recommendation T.38. It is a specification that HDLC (High-level Data Link control procedure) frames such as NSS specified in 30 are put in IFP (Internet Facsimile Protocol) packets, and these IFP packets are further put in UDP packets or TCP packets. . The data structure of the TCP packet is shown in FIG. An example in which a mail address is included in the NSS command is shown in FIG.

次に、複合機106から送信されたJPEG画像データを受信するときの複合機103の動作について、図14に示すフローチャートと併せて説明する。   Next, the operation of the multifunction device 103 when receiving JPEG image data transmitted from the multifunction device 106 will be described in conjunction with the flowchart shown in FIG.

S1401からS1408の動作は、上述した図9のS901〜S908と同様であるため説明を省略する。そして、両文字列が一致しない場合は(S1408でNO)、プリント画像の色を原稿の色と比較できない旨のメッセージを、メッセージ送信部610が送信元端末である複合機106に送信する(S1409)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   The operations from S1401 to S1408 are the same as S901 to S908 in FIG. If the character strings do not match (NO in step S1408), the message transmission unit 610 transmits a message to the effect that the color of the print image cannot be compared with the color of the document to the MFP 106 that is the transmission source terminal (S1409). ). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

そして、当該旨のメッセージをメール送信部1101が受信したNSSコマンドに含まれたメールアドレス宛にメール送信する(S1410)。なお、フローチャートの説明上、S1409でメッセージを送信した後、S1410でメールを送信しているが、どちらを先に送信しても良い。   Then, a mail message is sent to the mail address included in the NSS command received by the mail transmission unit 1101 (S1410). In the description of the flowchart, after the message is transmitted in S1409, the mail is transmitted in S1410. However, either may be transmitted first.

両文字列が一致した場合には(S1408でYES)、文字認識した2値の文字画像に対応したRGB画像データをL*a*b*に色変換する処理に移行する。   If the two character strings match (YES in S1408), the process proceeds to a process of color-converting RGB image data corresponding to the binary character image that has been character-recognized into L * a * b *.

S1411からS1414の動作は、上述した図9のS910〜S913と同様であるため説明を省略する。そして、求まった色差ΔE94が差異条件の値よりも大きい場合は(S1414でNO)、紙303に印刷されたプリント画像の色が原稿の色と異なる旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する(S1415)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   The operations from S1411 to S1414 are the same as S910 to S913 in FIG. If the obtained color difference ΔE94 is larger than the value of the difference condition (NO in S1414), the message transmission unit 610 sends a message indicating that the color of the print image printed on the paper 303 is different from the color of the document. (S1415). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

そして、当該旨のメッセージをメール送信部1101が受信したNSSコマンドに含まれたメールアドレス宛にメール送信する(S1416)。なお、フローチャートの説明上、S1415でメッセージを送信した後、S1416でメールを送信しているが、どちらを先に送信しても良い。   Then, a mail message is sent to the mail address included in the NSS command received by the mail transmission unit 1101 (S1416). In the description of the flowchart, after the message is transmitted in S1415, the mail is transmitted in S1416. However, either may be transmitted first.

続いて、求まった色差ΔE94が差異条件の値よりも小さい場合には(S1414でYES)、受信してハードディスク214に記憶したJPEG画像データを削除する(S1417)。求まった色差ΔE94が差異条件の値よりも小さい場合に記憶したJPEG画像データを削除し、色差ΔE94が差異条件の値よりも大きい場合は記憶したJPEG画像データを削除しないことで、印刷した画像が送信者の意図するものでなかったときに、そのJPEG画像データを残しておくことが可能となる。このJPEG画像データを残しておくことにより、カラートナーが不足していた場合にはカラートナーを補充した後に、保存されたJPEG画像データを再度プリントして、上述したプリント画像の色を原稿の色と比較する処理を繰り返すことが可能となる。   Subsequently, when the obtained color difference ΔE94 is smaller than the value of the difference condition (YES in S1414), the received JPEG image data stored in the hard disk 214 is deleted (S1417). When the obtained color difference ΔE94 is smaller than the value of the difference condition, the stored JPEG image data is deleted. When the color difference ΔE94 is larger than the value of the difference condition, the stored JPEG image data is not deleted. When not intended by the sender, the JPEG image data can be left. By leaving the JPEG image data, if the color toner is insufficient, after replenishing the color toner, the stored JPEG image data is printed again, and the color of the print image is changed to the color of the original. It becomes possible to repeat the process compared with.

以上説明したように、本実施形態に係る複合機により、受信した画像データと該画像データを印刷したものにある一定以上の差異が生じるときは、送信元端末及び送信者のメールアドレスにその旨を通知することができる。これにより、画像データの送信者が送信元端末の前にいなくても印刷品質の確認をすることができる。   As described above, when there is a certain difference between the received image data and the image data printed by the multi-function peripheral according to the present embodiment, the sender terminal and the sender's e-mail address to that effect. Can be notified. Thereby, it is possible to check the print quality even if the sender of the image data is not in front of the transmission source terminal.

なお、上記の説明においては、紙303にプリントされた画像を排紙用スキャナ212で読み取る例を説明したが、排紙された紙303を原稿用スキャナ208で読み取っても良い。これにより、排紙口に排紙用スキャナを設けなくても本発明を実施することができる。   In the above description, an example in which an image printed on the paper 303 is read by the paper discharge scanner 212 has been described, but the discharged paper 303 may be read by the original scanner 208. Thus, the present invention can be implemented without providing a paper discharge scanner at the paper discharge port.

なお、上記の説明においては、S1410またはS1416でメール送信するときに、S1405で読み取った画像データをメールに添付して送信しても良い。これにより、画像データの送信者が、印刷された画像データを見て印刷品質の確認をすることができる。   In the above description, when mail is transmitted in S1410 or S1416, the image data read in S1405 may be attached to the mail and transmitted. As a result, the sender of the image data can check the print quality by looking at the printed image data.

また、複合機103に機器管理者のメールアドレスが登録されている(このメールアドレス情報はフラッシュROM202に記憶)場合には、プリント画像の色が原稿の色と異なる旨のメッセージをこの機器管理者のメールアドレス宛にメールにて送信するようにしてもよい。この場合、機器管理者は色の品質が劣化したことを迅速に知ることができ、トナーの補充や機器の修理、調整を速やかに行うことが可能となる。   If the device administrator's e-mail address is registered in the multi-function peripheral 103 (this e-mail address information is stored in the flash ROM 202), a message stating that the color of the print image is different from the color of the original is displayed. You may make it send by e-mail to e-mail address. In this case, the device manager can quickly know that the color quality has deteriorated, and can quickly replenish toner, repair and adjust the device.

〔実施の形態3〕
実施の形態1では、印刷した画像データと受信した画像データが異なる旨を、SIPのインスタントメッセージを使用して送信している。本実施の形態においては、SIPのインスタントメッセージと併せて、さらに読み取った画像データを送信する場合について説明する。なお、実施の形態1と同様の符号を付す構成要素については実施の形態1と同一又は相当部を示し、説明を省略する。
[Embodiment 3]
In the first embodiment, the fact that the printed image data is different from the received image data is transmitted using an SIP instant message. In the present embodiment, a case will be described in which the read image data is transmitted together with the SIP instant message. In addition, about the component which attaches | subjects the code | symbol similar to Embodiment 1, the same or equivalent part as Embodiment 1 is shown, and description is abbreviate | omitted.

複合機103又は複合機106が受信機として機能するときの機能構成図を図15に示す。図15の機能構成図では、図6で示した機能構成に、画像送信部502が追加されている。   FIG. 15 shows a functional configuration diagram when the multifunction machine 103 or the multifunction machine 106 functions as a receiver. In the functional configuration diagram of FIG. 15, an image transmission unit 502 is added to the functional configuration shown in FIG.

画像送信部502は、図5の送信機として機能するときの機能構成図内で示した画像送信部502と同機能である。画像送信部502はJPEG符号化された画像データを、RFC3261で規定されたSIPを使用した呼接続、ITU−T勧告T.38で規定されたIP−FAXプロトコルを実行して他の端末に送信する。例えば、画像送信部502は画像データ送信手段として機能する。   The image transmission unit 502 has the same function as the image transmission unit 502 shown in the functional configuration diagram when functioning as the transmitter of FIG. The image transmission unit 502 converts JPEG-encoded image data into a call connection using SIP defined by RFC 3261, ITU-T recommendation T.264. The IP-FAX protocol defined in 38 is executed and transmitted to another terminal. For example, the image transmission unit 502 functions as an image data transmission unit.

次に、図1に示した複合機106が複合機103にカラー画像データを送信するときの動作について説明する。なお、複合機106が送信するときの動作は、図8の説明で上述したとおりである(S801〜S803)。   Next, an operation when the multifunction device 106 shown in FIG. 1 transmits color image data to the multifunction device 103 will be described. The operation when the multi-function peripheral 106 transmits is as described above with reference to FIG. 8 (S801 to S803).

次に、複合機106から送信されたJPEG画像データを受信するときの複合機103の動作について、図16に示すフローチャートと併せて説明する。   Next, the operation of the multi-function peripheral 103 when receiving JPEG image data transmitted from the multi-function peripheral 106 will be described with reference to the flowchart shown in FIG.

S1601からS1608の動作は、上述した図9のS901〜S908と同様であるため説明を省略する。そして、両文字列が一致しない場合は(S1608でNO)、プリント画像の色を原稿の色と比較できない旨のメッセージを、メッセージ送信部610が送信元端末である複合機106に送信する(S1609)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   The operations from S1601 to S1608 are the same as S901 to S908 in FIG. If the character strings do not match (NO in S1608), the message transmission unit 610 transmits a message indicating that the color of the print image cannot be compared with the color of the document to the multi-function peripheral 106 that is the transmission source terminal (S1609). ). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

そして、画像送信部502はS1605で読み取った画像データを、ITU−T勧告T.38で規定されたプロトコルを実行して送信元端末である複合機106に送信する(S1610)。なお、フローチャートの説明上、S1609でメッセージを送信した後、S1610で画像データを送信しているが、どちらを先に送信しても良い。   Then, the image transmission unit 502 converts the image data read in S1605 to ITU-T recommendation T.264. The protocol defined in 38 is executed and transmitted to the multi-function peripheral 106 which is the transmission source terminal (S1610). In the description of the flowchart, the image data is transmitted in S1610 after the message is transmitted in S1609, but either may be transmitted first.

続いて、両文字列が一致した場合には(S1608でYES)、文字認識した2値の文字画像に対応したRGB画像データをL*a*b*に色変換する処理に移行する。   Subsequently, if the two character strings match (YES in S1608), the process proceeds to a process of color-converting RGB image data corresponding to the binary character image that has been character-recognized into L * a * b *.

S1611からS1614の動作は、上述した図9のS910〜S913と同様であるため説明を省略する。そして、求まった色差ΔE94が差異条件の値よりも大きい場合は(S1614でNO)、紙303に印刷されたプリント画像の色が原稿の色と異なる旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する(S1615)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   The operations from S1611 to S1614 are the same as S910 to S913 in FIG. If the obtained color difference ΔE94 is larger than the value of the difference condition (NO in S1614), the message transmission unit 610 sends a message indicating that the color of the print image printed on the paper 303 is different from the color of the document. (S1615). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

そして、画像送信部502はS1605で読み取った画像データを、ITU−T勧告T.38で規定されたプロトコルを実行して送信元端末である複合機106に送信する(S1616)。なお、フローチャートの説明上、S1615でメッセージを送信した後、S1616で画像データを送信しているが、どちらを先に送信しても良い。   Then, the image transmission unit 502 converts the image data read in S1605 to ITU-T recommendation T.264. The protocol defined in 38 is executed and transmitted to the multi-function peripheral 106 which is the transmission source terminal (S1616). In the description of the flowchart, the image data is transmitted in S1616 after the message is transmitted in S1615, but either may be transmitted first.

続いて、求まった色差ΔE94が差異条件の値よりも小さい場合には(S1614でYES)、受信してハードディスク214に記憶したJPEG画像データを削除する(S1617)。求まった色差ΔE94が差異条件の値よりも小さい場合に記憶したJPEG画像データを削除し、色差ΔE94が差異条件の値よりも大きい場合は記憶したJPEG画像データを削除しないことで、印刷した画像が送信者の意図するものでなかったときに、そのJPEG画像データを残しておくことが可能となる。このJPEG画像データを残しておくことにより、カラートナーが不足していた場合にはカラートナーを補充した後に、保存されたJPEG画像データを再度プリントして、上述したプリント画像の色を原稿の色と比較する処理を繰り返すことが可能となる。   Subsequently, when the obtained color difference ΔE94 is smaller than the value of the difference condition (YES in S1614), the received JPEG image data stored in the hard disk 214 is deleted (S1617). When the obtained color difference ΔE94 is smaller than the value of the difference condition, the stored JPEG image data is deleted. When the color difference ΔE94 is larger than the value of the difference condition, the stored JPEG image data is not deleted. When not intended by the sender, the JPEG image data can be left. By leaving the JPEG image data, if the color toner is insufficient, after replenishing the color toner, the stored JPEG image data is printed again, and the color of the print image is changed to the color of the original. It becomes possible to repeat the process compared with.

以上説明したように、本実施形態に係る複合機により、受信した画像データと該画像データを印刷したものにある一定以上の差異が生じるときは、その旨を送信元端末に送信するとともに、読み取った画像データを送信元端末に送信することができる。これにより、画像データの送信者が、印刷された画像データを見て印刷品質の確認をすることができる。   As described above, when there is a certain difference between the received image data and the image data printed by the multifunction peripheral according to this embodiment, the fact is transmitted to the transmission source terminal and read. The transmitted image data can be transmitted to the transmission source terminal. As a result, the sender of the image data can check the print quality by looking at the printed image data.

〔実施の形態4〕
本実施の形態では、図1に示した拠点Bに存在する複合機106から拠点Aに存在する複合機103へ2値画像データを送信し、複合機103にて受信した2値画像データから文字認識によって認識された文字列と、その画像データがプリントされた紙を読み取った画像データから文字認識によって認識された文字列とを比較する。文字列の差異が所定の条件を満足していないと判断した場合には、複合機106へプリント品質が悪いという情報を通知する。
[Embodiment 4]
In the present embodiment, binary image data is transmitted from the multi-function peripheral 106 existing at the base B shown in FIG. 1 to the multi-function peripheral 103 existing at the base A, and characters are received from the binary image data received by the multi-function peripheral 103. The character string recognized by the recognition is compared with the character string recognized by the character recognition from the image data obtained by reading the paper on which the image data is printed. When it is determined that the character string difference does not satisfy the predetermined condition, the MFP 106 is notified of information indicating that the print quality is poor.

複合機103が受信機として機能するときの本実施形態の機能構成図を図17に示す。複合機103は、画像受信部1701、画像記憶部1702、文字抽出部1703、プリント出力部1704、文字差異判定部1705、画像読取部608、メッセージ送信部610、及び、設定情報記憶部611を有する。   FIG. 17 shows a functional configuration diagram of this embodiment when the multi-function peripheral 103 functions as a receiver. The multifunction machine 103 includes an image receiving unit 1701, an image storage unit 1702, a character extraction unit 1703, a print output unit 1704, a character difference determination unit 1705, an image reading unit 608, a message transmission unit 610, and a setting information storage unit 611. .

画像受信部1701は、SIPを使用した着呼接続、ITU−T勧告T.38で規定されたIP−FAXプロトコルを実行して他のIP−FAXからMMR圧縮された2値画像データを受信する。画像記憶部1702は、画像受信部1701で受信した2値画像データをハードディスク214に記憶する。   The image receiving unit 1701 is an incoming call connection using SIP, ITU-T recommendation T.264. The IP-FAX protocol defined in 38 is executed and MMR compressed binary image data is received from another IP-FAX. The image storage unit 1702 stores the binary image data received by the image receiving unit 1701 in the hard disk 214.

文字抽出部1703は、後述するアルゴリズムに従って、2値画像データから文字を抽出する。プリント出力部1704は、2値画像データをプリントエンジン211を使用して紙303にプリントする。文字差異判定部1705は、受信した2値画像データを文字抽出部1703で抽出した文字列と、画像読取部1706が紙303から読み取った2値画像データを文字抽出部1703で抽出した文字列とを比較する。文字差異判定部1705は、比較により得られる異なる文字数を、予めフラッシュROM202に記憶されている所定条件と比較判定する。ここで、所定条件とは、許容できる異なる文字数を示す。   The character extraction unit 1703 extracts characters from the binary image data according to an algorithm described later. The print output unit 1704 prints the binary image data on the paper 303 using the print engine 211. The character difference determination unit 1705 includes a character string obtained by extracting the received binary image data by the character extraction unit 1703, and a character string obtained by extracting the binary image data read by the image reading unit 1706 from the paper 303 by the character extraction unit 1703. Compare The character difference determination unit 1705 compares and determines the number of different characters obtained by comparison with a predetermined condition stored in the flash ROM 202 in advance. Here, the predetermined condition indicates an allowable number of different characters.

画像読取部1706は、排紙用スキャナ212を使用して紙303にプリントされた画像を読み取り、RGBデジタル画像データを取得し、このRGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)とのデータに変換する。画像読取部1706は、輝度成分(Y)の画像データを2値化した2値画像データを、文字抽出部1703へ渡す。   The image reading unit 1706 reads an image printed on the paper 303 using the paper discharge scanner 212, acquires RGB digital image data, and uses the RGB digital image data as a color difference component (Cb, Cr) and a luminance component ( Y). The image reading unit 1706 passes binary image data obtained by binarizing the image data of the luminance component (Y) to the character extraction unit 1703.

メッセージ送信部610は、SIPのインスタントメッセージを使用して、他の端末へメッセージを送信する。設定情報記憶部611は、受信した2値画像データとプリントした画像を読み取って得た2値画像データとから、それぞれ抽出した文字列の差異条件となる情報等をフラッシュROM202に記憶する。   The message transmission unit 610 transmits a message to another terminal using an SIP instant message. The setting information storage unit 611 stores, in the flash ROM 202, information serving as a difference condition between character strings extracted from the received binary image data and the binary image data obtained by reading the printed image.

複合機106では、送信者によりモノクロ原稿またはカラー原稿が原稿用スキャナ208にセットされ、複合機103のFAX番号が入力されスタートキーを押される。これにより、画像読取部501が、原稿スキャナコントローラ209を制御して、原稿用スキャナ208から原稿画像を読み取ってRGBデジタル画像データを取得する。次に読み取ったRGBデジタル画像データを、色差成分(Cb,Cr)と輝度成分(Y)のデータに変換して、輝度成分(Y)のデータを2値化してMMR符号化を行う。そして、画像送信部502はMMR符号化された2値画像データを、図7に示した通信手順により複合機103に送信する。   In the multifunction device 106, the sender sets a monochrome document or a color document on the document scanner 208, inputs the FAX number of the multifunction device 103, and presses the start key. As a result, the image reading unit 501 controls the document scanner controller 209 to read the document image from the document scanner 208 and acquire RGB digital image data. Next, the read RGB digital image data is converted into color difference component (Cb, Cr) and luminance component (Y) data, and the luminance component (Y) data is binarized to perform MMR encoding. Then, the image transmission unit 502 transmits the MMR-encoded binary image data to the multi-function peripheral 103 using the communication procedure shown in FIG.

次に、複合機106から送信された2値画像データを受信するときの複合機103の動作について、図18に示すフローチャートと併せて説明する。   Next, the operation of the multi-function peripheral 103 when receiving the binary image data transmitted from the multi-function peripheral 106 will be described with reference to the flowchart shown in FIG.

複合機103は、画像受信部1701が複合機106から送信された2値画像データ(MMR符号化データ)を受信したか否かを判断する(S1801)。受信した場合には、ステップS1802に進み、受信しない場合は、ステップS1801を繰り返す。   The multi-function peripheral 103 determines whether the image receiving unit 1701 has received the binary image data (MMR encoded data) transmitted from the multi-function peripheral 106 (S1801). If received, the process proceeds to step S1802. If not received, step S1801 is repeated.

画像記憶部1702が受信した2値画像データをハードディスク214に記憶する(S1802)。   The binary image data received by the image storage unit 1702 is stored in the hard disk 214 (S1802).

続いて、プリント出力部1704がハードディスク214に記憶された2値画像データ(MMR符号化データ)を、MMR復号化処理を行って、各画素が0か1の値を持つ2値画像データ(生画像データ)に変換する。続いて、プリント出力部1704はこの生画像データを文字抽出部1703に渡すとともに、プリントエンジン211を使用して紙303にプリントする(S1803)。   Subsequently, the print output unit 1704 performs MMR decoding processing on the binary image data (MMR encoded data) stored in the hard disk 214, and binary image data (raw data) in which each pixel has a value of 0 or 1. Image data). Subsequently, the print output unit 1704 passes this raw image data to the character extraction unit 1703 and prints it on the paper 303 using the print engine 211 (S1803).

文字抽出部1703はこの2値の生画像データから、まず、文字部の切り出しと、この切り出された文字が活字か手書き文字かを識別する処理を行う。この処理は、例えば、特開2006−92346に記載された方法を用いる。すなわち、まず、画像の傾きを補正し、レイアウト解析により活字文字から成るブロック、手書き文字から成るブロック、その他(図等)のブロックに分割する(S1804)。   The character extraction unit 1703 first performs a process of identifying the character part and identifying whether the extracted character is a printed or handwritten character from the binary raw image data. This process uses, for example, the method described in JP-A-2006-92346. That is, first, the inclination of the image is corrected, and the image is divided into blocks composed of type characters, blocks composed of handwritten characters, and other (such as figures) blocks by layout analysis (S1804).

文字抽出部1703が、画像をレイアウト解析によりブロック分割した例を図19に示す。図19中、ブロックA1は活字文字を含むブロック、ブロックB1は手書き文字を含むブロック、ブロックC1はその他のブロックである。なお、ブロックA1中の○は文字を抽象化して表したものである。続いて、文字抽出部1703は活字文字から成るブロックA1について、外郭ゼロ交差特徴(Peripheral Zero−Crossing Code)と正準判別分析(Canonical Discriminant Analysys)により文字を認識する(S1805)。   FIG. 19 shows an example in which the character extraction unit 1703 divides an image into blocks by layout analysis. In FIG. 19, a block A1 is a block containing type characters, a block B1 is a block containing handwritten characters, and a block C1 is another block. The circles in the block A1 represent characters abstractly. Subsequently, the character extraction unit 1703 recognizes the characters of the block A1 made up of type characters by using a contour zero-crossing feature and a canonical discriminant analysis (S1805).

外郭ゼロ交差特徴とは、2値画像を、全体をぼかした多値画像としてパターン処理したうえで、文字と背景の境界部分の特徴を捉えて認識する方法である。また、正準判別分析は、文字の特徴から文字を判別する方法で、文字の特徴を表す数値テーブルは似た文字同士が区別しやすいように作成されている(電子情報通信学会技術研究報告. PRMU, パターン認識・メディア理解 Technical report of IEICE. PRMU 98(490) pp.71−78 19981218 社団法人電子情報通信学会)。なお、この文字の特徴を表す数値テーブルは、例えば、ハードディスク214に予め記憶されている。   The outline zero-crossing feature is a method of recognizing a feature of a boundary portion between a character and a background after pattern processing a binary image as a multi-valued image with a blurred whole. Canonical discriminant analysis is a method of discriminating characters from character features, and a numerical table representing character features is created so that similar characters can be easily distinguished from each other (Technical Report of IEICE Technical Report. PRMU, pattern recognition / media understanding Technical report of IEICE. PRMU 98 (490) pp. 71-78 19981218 The Institute of Electronics, Information and Communication Engineers). Note that a numerical table representing the character characteristics is stored in advance in the hard disk 214, for example.

文字抽出部1703は、また、手書き文字から成るブロックB1に対し、端点、凸部、凹部等の形状の構造を捉える輪郭解析法と、上述した外郭ゼロ交差特徴と正準判別分析を組み合わせて文字を認識する。輪郭解析法は漢字以外の手書き文字の認識に優れ、外郭ゼロ交差特徴と正準判別分析は手書きの漢字の認識に優れる。認識した文字列は、ブロックA1の文字列とブロックB2の文字列とに分けてメインメモリ203に記憶しておく。これにより、後で両者の文字列を比較することができる。   The character extraction unit 1703 also combines the contour analysis method that captures the structure of shapes such as end points, convex portions, and concave portions, and the above-described contour zero-crossing feature and canonical discriminant analysis for the block B1 made of handwritten characters. Recognize The contour analysis method is excellent for recognizing handwritten characters other than kanji, and the contour zero-crossing feature and canonical discriminant analysis are excellent for recognizing handwritten kanji. The recognized character string is stored in the main memory 203 separately for the character string of the block A1 and the character string of the block B2. Thereby, both character strings can be compared later.

次に、プリントされた紙が排紙口を通過するときに、画像読取部608は排紙用スキャナ212を使用して紙303にプリントされた画像を読み取ってRGBデジタル画像データを取得し、当該RGBデジタル画像データを色差成分(Cb,Cr)と輝度成分(Y)のデータに変換して、この輝度成分(Y)の画像データのみを文字抽出部1703が利用できるようにメインメモリ203に記憶する。次に、文字抽出部1703は画像読取部608が記憶した輝度成分(Y)の画像データをスレッシュレベルとしてフラッシュROM202に予め記憶された所定の輝度値と比較することにより2値画像に変換する。そして、文字抽出部1703は上述したように2値画像の中から文字部を切り出して、この切り出された文字が活字か手書き文字かを識別してブロックに分割し、それぞれのブロックについて文字を認識する(S1806)。   Next, when the printed paper passes through the paper discharge port, the image reading unit 608 reads the image printed on the paper 303 using the paper discharge scanner 212 to acquire RGB digital image data, and The RGB digital image data is converted into color difference component (Cb, Cr) and luminance component (Y) data, and only the image data of the luminance component (Y) is stored in the main memory 203 so that the character extraction unit 1703 can use it. To do. Next, the character extraction unit 1703 converts the image data of the luminance component (Y) stored in the image reading unit 608 into a binary image by comparing it with a predetermined luminance value stored in advance in the flash ROM 202 as a threshold level. Then, as described above, the character extraction unit 1703 cuts out the character portion from the binary image, identifies whether the cut out character is a type or handwritten character, divides it into blocks, and recognizes the character for each block. (S1806).

ここで、出力された画像に問題がある例について説明する。例えば、プリントエンジン211に問題があり、図20に示すように画像に縦線が付加されてプリントされたとする。この場合、文字抽出部1703はブロックA1の1行目を「この資料は親製品の機能に関するものである。」と文字認識する。   Here, an example in which there is a problem in the output image will be described. For example, it is assumed that there is a problem with the print engine 211 and the image is printed with vertical lines added as shown in FIG. In this case, the character extraction unit 1703 recognizes the first line of the block A1 as “this material relates to the function of the parent product”.

次に、文字差異判定部1705は、ブロックA1とブロックB1とのそれぞれについて、受信した2値画像データから抽出した文字列と、画像読取部608が紙303から読み取った2値画像データから抽出した文字列とを比較する(S1807)。ブロックA1について、比較結果の異なる文字を図21に枠で囲って示す。この場合、5個の文字が異なっている。ブロックB1については異なる文字は無い。   Next, the character difference determination unit 1705 extracts the character string extracted from the received binary image data and the binary image data read from the paper 303 by the image reading unit 608 for each of the block A1 and the block B1. The character string is compared (S1807). For the block A1, characters with different comparison results are shown in a box in FIG. In this case, the five characters are different. There is no different character for block B1.

次に、文字差異判定部1705は、この異なった文字の数を予めフラッシュROM202に記憶されている許容できる文字数以下か否かを判断する(S1808)。許容できる文字数以下の場合には、処理を終了し、許容できる文字数ではない場合には、ステップS1809に進む。   Next, the character difference determination unit 1705 determines whether or not the number of different characters is equal to or less than the allowable number of characters stored in the flash ROM 202 in advance (S1808). If it is less than the allowable number of characters, the process is terminated. If not, the process proceeds to step S1809.

この許容できる文字数が3の場合、異なった文字数が許容できる文字数よりも大きいため、紙303に印刷されたプリント画像の品質に問題がある旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する(S1809)。このとき、メッセージ送信部610はSIPのインスタントメッセージを使用してメッセージを複合機106に送信する。   When the allowable number of characters is 3, since the number of different characters is larger than the allowable number of characters, a message indicating that there is a problem with the quality of the print image printed on the paper 303 is a composite in which the message transmission unit 610 is the transmission source terminal. It transmits to the machine 106 (S1809). At this time, the message transmission unit 610 transmits the message to the multi-function device 106 using the SIP instant message.

図22から図24は、英文を含む画像の例を示す図である。図22は、文字抽出部1703が、画像をレイアウト解析によりブロック分割した例である。図22中、ブロックA2は活字文字を含むブロック、ブロックB2は手書き文字を含むブロック、ブロックC2はその他のブロックである。なお、ブロックA2中の○は文字を抽象化して表したものである。   22 to 24 are diagrams showing examples of images including English sentences. FIG. 22 shows an example in which the character extraction unit 1703 divides an image into blocks by layout analysis. In FIG. 22, a block A2 is a block containing type characters, a block B2 is a block containing handwritten characters, and a block C2 is another block. Note that the circles in the block A2 represent characters abstractly.

図23は、図20と同様に、画像に縦線が付加されてプリントされた例を示す図である。この場合、文字抽出部1703は、ブロックA2の1行目を「The Ouality of Products:」と文字認識する。   FIG. 23 is a diagram illustrating an example in which a vertical line is added to an image and printed, as in FIG. In this case, the character extraction unit 1703 recognizes the first line of the block A2 as “The Ouality of Products:”.

図24は、図21と同様に、ブロックA2において、比較結果の異なる文字を枠で囲って示す図である。図24でも、5個の文字が異なっている。ブロックB2については異なる文字は無い。そこで、文字差異判定部1705により、ステップS1808の処理が実行される。   FIG. 24 is a diagram showing characters with different comparison results surrounded by a frame in the block A2, similarly to FIG. In FIG. 24, five characters are different. There is no different character for block B2. Therefore, the process of step S1808 is executed by the character difference determination unit 1705.

上記の例では、文字差異判定条件として、許容できる文字数を予めフラッシュROM202に記憶させていたが、認識される文字の全文字数に対するパーセンテージを予めフラッシュROM202に記憶させておき、このパーセンテージから許容文字数を算出するようにしてもよい。   In the above example, the allowable number of characters is stored in advance in the flash ROM 202 as the character difference determination condition. However, the percentage of the total number of recognized characters is stored in the flash ROM 202 in advance, and the allowable number of characters is calculated from this percentage. You may make it calculate.

また、上記の例では、許容できる異なった文字が横方向について離散的に存在する場合を示したが、横方向に連続して存在する場合に対応するために、異なった文字の連続数を文字差異判定条件として使用することもできる。すなわち、異なった文字の連続数が許容できる値を越えた場合、紙303に印刷されたプリント画像の品質に問題がある旨のメッセージをメッセージ送信部610が送信元端末である複合機106に送信する。   In the above example, the case where different allowable characters exist in the horizontal direction is shown discretely. However, in order to cope with the case where the different characters exist continuously in the horizontal direction, the number of consecutive different characters is changed to the character. It can also be used as a difference determination condition. That is, if the number of consecutive different characters exceeds an allowable value, the message transmission unit 610 transmits a message indicating that there is a problem with the quality of the print image printed on the paper 303 to the multifunction device 106 that is the transmission source terminal. To do.

なお、ステップS1807において、類似する複数の文字を同一の文字とみなしてもよい。この場合、文字抽出部1703が、例えば、図25に示すテーブルの情報を記憶している。図25に示すテーブルは、夫々の文字についての類似文字を、類似度毎に第1群、第2群、第3群に分けて記憶している。例えば、“日”という漢字の場合、類似度“1”に対応する文字は、アルファベットの“E”及び漢字の“曰”等である。類似度“2”に対応する文字は、アルファベットの“B”、及び、“F”、並びに、漢字の“田”である。類似度“3”に対応する文字は、アルファベットの“A”、数字の“8”、及び、漢字の“旦”である。   In step S1807, a plurality of similar characters may be regarded as the same character. In this case, the character extraction unit 1703 stores, for example, information of the table shown in FIG. The table shown in FIG. 25 stores similar characters for each character separately for each degree of similarity into a first group, a second group, and a third group. For example, in the case of the Chinese character “day”, the characters corresponding to the similarity “1” are the alphabet “E” and the Chinese character “曰”. The characters corresponding to the similarity “2” are the alphabet “B” and “F”, and the Chinese character “ta”. The characters corresponding to the similarity “3” are the alphabet “A”, the number “8”, and the Chinese character “Han”.

文字抽出部1703は、予めフラッシュROM202に記憶された類似文字許容数に応じて図25に示すテーブルを参照し、許容される類似文字は同一の文字であるものとして文字列を比較する。   The character extraction unit 1703 refers to the table shown in FIG. 25 according to the allowable number of similar characters stored in the flash ROM 202 in advance, and compares the character strings assuming that the allowable similar characters are the same character.

なお、本実施の形態の複合機は、さらに、実施の形態2のメール送信部1101、及び、実施の形態3の画像送信部502の何れか、又は、その両方を有してもよい。メール送信部1101は、メッセージ送信部610がメッセージを送信する際に、同様のメッセージをメールにより送信する。この処理は、実施の形態2におけるステップS1416の処理と同様である。画像送信部502は、メッセージ送信部610がメッセージを送信する際に、読み取った画像を送信する。この処理は、実施の形態に3におけるステップS1616の処理と同様である。   Note that the MFP according to the present embodiment may further include either or both of the mail transmission unit 1101 according to the second embodiment and the image transmission unit 502 according to the third embodiment. When the message transmission unit 610 transmits a message, the mail transmission unit 1101 transmits a similar message by mail. This process is the same as the process of step S1416 in the second embodiment. The image transmission unit 502 transmits the read image when the message transmission unit 610 transmits a message. This process is the same as the process of step S1616 in the third embodiment.

なお、上記の説明においては、紙303にプリントされた画像を排紙用スキャナ212で読み取る例を説明したが、排紙された紙303を原稿用スキャナ208で読み取っても良い。これにより、排紙口に排紙用スキャナを設けなくても本発明を実施することができる。   In the above description, an example in which an image printed on the paper 303 is read by the paper discharge scanner 212 has been described, but the discharged paper 303 may be read by the original scanner 208. Thus, the present invention can be implemented without providing a paper discharge scanner at the paper discharge port.

なお、本発明の実施の形態に係る画像通信装置は、例えばパーソナルコンピュータ(PC)等で実現されてもよい。また、本発明の実施形態に係る画像通信方法は、例えば、CPUがROMやハードディスク装置等に記憶されたプログラムに従い、RAM等のメインメモリをワークエリアとして使用し、実行される。   Note that the image communication apparatus according to the embodiment of the present invention may be realized by, for example, a personal computer (PC). Further, the image communication method according to the embodiment of the present invention is executed by using, for example, a main memory such as a RAM as a work area in accordance with a program stored in a ROM, a hard disk device or the like by the CPU.

また、上記各機能は、アセンブラ、C、C++、C#、Java(登録商標)、などのレガシープログラミング言語やオブジェクト指向ブログラミング言語などで記述されたコンピュータ実行可能なプログラムにより実現でき、ROM、EEPROM、EPROM、フラッシュメモリ、フレキシブルディスク、CD−ROM、CD−RW、DVD、SDカード、MOなど、装置が読み取り可能な記録媒体に格納して頒布することができる。   Each of the above functions can be realized by a computer-executable program written in a legacy programming language such as assembler, C, C ++, C #, Java (registered trademark), an object-oriented programming language, or the like. ROM, EEPROM , EPROM, flash memory, flexible disk, CD-ROM, CD-RW, DVD, SD card, MO and the like can be stored and distributed in a recording medium readable by the apparatus.

なお、本発明は、上記実施の形態で説明したものに限らず、種々の変形実施が可能である。また、実施の形態で説明したものに限定されず、これらと均等な手法も本発明の技術的範囲に含まれる。   The present invention is not limited to the one described in the above embodiment, and various modifications can be made. Moreover, it is not limited to what was demonstrated by embodiment, The method equivalent to these is also contained in the technical scope of this invention.

以上のように、本発明にかかる画像通信装置は、受信された画像の品質を確認することに有用であり、特に、プリンタに適している。   As described above, the image communication apparatus according to the present invention is useful for confirming the quality of a received image, and is particularly suitable for a printer.

101 IPネットワーク
102 SIPサーバ
103 複合機
104 PC
105 IP電話
106 複合機
107 PC
108 IP電話
201 CPU
202 フラッシュROM
203 メインメモリ
204 クロック
205 バスコントローラ
206 PCIブリッジ
207 キャッシュメモリ
208 原稿用スキャナ
209 原稿スキャナコントローラ
210 プリントコントローラ
211 プリントエンジン
212 排紙用スキャナ
213 排紙スキャナコントローラ
214 ハードディスク
215 HDコントローラ
216 LCD表示コントローラ
217 LCD
218 LANコントローラ
219 LAN I/F
220 キー入力コントローラ
221 ハードキー
222 タッチパネルコントローラ
223 タッチパネル
301 LEDアレイ
302 CCDラインセンサ
303 紙
501 画像読取部
502 画像送信部
503 表示制御部
504 操作部
505 メッセージ受信部
601 画像受信部
602 画像記憶部
603 文字抽出部
604 プリント色変換部
605 L*a*b*色変換部
606 プリント出力部
607 色差異抽出部
608 画像読取部
609 色差異判定部
610 メッセージ送信部
611 設定情報記憶部
1101 メール送信部
1701 画像受信部
1702 画像記憶部
1703 文字抽出部
1704 プリント出力部
1705 文字差異判定部
101 IP network 102 SIP server 103 MFP 104 PC
105 IP phone 106 MFP 107 PC
108 IP phone 201 CPU
202 flash ROM
203 Main Memory 204 Clock 205 Bus Controller 206 PCI Bridge 207 Cache Memory 208 Document Scanner 209 Document Scanner Controller 210 Print Controller 211 Print Engine 212 Discharge Scanner 213 Discharge Scanner Controller 214 Hard Disk 215 HD Controller 216 LCD Display Controller 217 LCD
218 LAN controller 219 LAN I / F
220 Key input controller 221 Hard key 222 Touch panel controller 223 Touch panel 301 LED array 302 CCD line sensor 303 Paper 501 Image reading unit 502 Image transmission unit 503 Display control unit 504 Operation unit 505 Message reception unit 601 Image reception unit 602 Image storage unit 603 Character Extraction unit 604 Print color conversion unit 605 L * a * b * color conversion unit 606 Print output unit 607 Color difference extraction unit 608 Image reading unit 609 Color difference determination unit 610 Message transmission unit 611 Setting information storage unit 1101 Mail transmission unit 1701 Image Reception unit 1702 Image storage unit 1703 Character extraction unit 1704 Print output unit 1705 Character difference determination unit

特開2000−151957号公報JP 2000-151957 A 特開2000−174973号公報Japanese Unexamined Patent Publication No. 2000-174974

Claims (7)

他の画像通信装置から送信された第1の画像データを記憶する記憶手段と、
前記第1の画像データを紙に出力する印刷手段と、
前記印刷手段で紙に出力された紙面画像を読み取って第2の画像データを得る読取手段と、
前記記憶手段に記憶された前記第1の画像データから文字を抽出すると共に、前記読取手段で得た前記第2の画像データから文字を抽出する文字抽出手段と、
前記文字抽出手段で前記第1の画像データおよび前記第2の画像データから抽出されたそれぞれの文字が同一文字かを判定する文字判定手段と、
前記第1の画像データおよび前記第2の画像データから、前記文字判定手段で同一文字であると判定された文字を含む所定の画像領域を切り出す画像領域切り出し手段と、
前記画像領域切り出し手段で前記第1の画像データおよび前記第2の画像データから切り出されたそれぞれの画像領域の中で、文字に該当するそれぞれの画素の色の差異が、予め記憶されている条件よりも大きいか否かを判定する差異判定手段と、
前記差異判定手段で前記色の差異が前記条件よりも大きいと判定されたとき、前記他の画像通信装置から送信された前記第1の画像データと、該第1の画像データが出力された紙の紙面画像を読み取って得た前記第2の画像データとが異なっている旨のメッセージを、前記第1の画像データの送信元の前記他の画像通信装置に送信する送信手段と
を有する画像通信装置。
Storage means for storing first image data transmitted from another image communication device;
Printing means for outputting the first image data on paper;
Reading means for reading a paper image output on paper by the printing means to obtain second image data;
Character extraction means for extracting characters from the first image data stored in the storage means and extracting characters from the second image data obtained by the reading means;
Character determination means for determining whether or not each character extracted from the first image data and the second image data by the character extraction means is the same character;
An image region cutout unit that cuts out a predetermined image region that includes characters determined to be the same character by the character determination unit from the first image data and the second image data;
A condition in which a difference in color of each pixel corresponding to a character is stored in advance in each of the image areas cut out from the first image data and the second image data by the image area cut-out means. A difference determination means for determining whether or not the difference is greater than
When the difference determining unit determines that the color difference is greater than the condition, the first image data transmitted from the other image communication apparatus and the paper on which the first image data is output And a transmission means for transmitting a message to the effect that the second image data obtained by reading the paper image is different to the other image communication device that is the transmission source of the first image data. apparatus.
メールアドレスを取得するメールアドレス取得手段をさらに備え、
前記送信手段は、前記他の画像通信装置から送信された前記第1の画像データと、該第1の画像データが出力された紙の紙面画像を読み取って得た前記第2の画像データとが異なっている旨のメッセージを、前記メールアドレス取得手段で取得したメールアドレスにメール送信すること
を特徴とする請求項1に記載の画像通信装置。
It further includes an email address acquisition means for acquiring an email address,
The transmission means includes the first image data transmitted from the other image communication apparatus and the second image data obtained by reading a paper image of the paper on which the first image data is output. The image communication apparatus according to claim 1, wherein a message indicating that the messages are different is transmitted by mail to the mail address acquired by the mail address acquisition unit.
前記送信手段は、前記メール送信するメールに前記読取手段で読み取った前記第2の画像データを添付してメール送信すること
を特徴とする請求項2に記載の画像通信装置。
The image communication apparatus according to claim 2, wherein the transmission unit transmits the mail by attaching the second image data read by the reading unit to the mail to be transmitted by the mail.
前記読取手段で読み取った前記第2の画像データを、前記他の画像通信装置に送信する画像データ送信手段をさらに備えたこと
を特徴とする請求項1から請求項3のうち、いずれか一項に記載の画像通信装置。
The image data transmitting means for transmitting the second image data read by the reading means to the other image communication device, further comprising any one of claims 1 to 3. The image communication apparatus described in 1.
他の画像通信装置から送信された第1の画像データを、記憶制御手段が記憶手段に記憶制御する記憶工程と、
印刷手段が、前記第1の画像データを紙に出力する印刷工程と、
読取手段が、前記印刷手段で紙に出力された紙面画像を読み取って第2の画像データを得る読取工程と、
文字抽出手段が、前記記憶手段に記憶された前記第1の画像データから文字を抽出すると共に、前記読取手段で得た前記第2の画像データから文字を抽出する文字抽出工程と、
文字判定手段が、前記文字抽出手段で前記第1の画像データおよび前記第2の画像データから抽出されたそれぞれの文字が同一文字かを判定する文字判定工程と、
画像領域切り出し手段が、前記第1の画像データおよび前記第2の画像データから、前記文字判定手段で同一文字であると判定された文字を含む所定の画像領域を切り出す画像領域切り出し工程と、
差異判定手段が、前記画像領域切り出し手段で前記第1の画像データおよび前記第2の画像データから切り出されたそれぞれの画像領域の中で、文字に該当するそれぞれの画素の色の差異が、予め記憶されている条件よりも大きいか否かを判定する差異判定工程と、
送信手段が、前記差異判定手段で前記色の差異が前記条件よりも大きいと判定されたとき、前記他の画像通信装置から送信された前記第1の画像データと、該第1の画像データが出力された紙の紙面画像を読み取って得た前記第2の画像データとが異なっている旨のメッセージを、前記第1の画像データの送信元の前記他の画像通信装置に送信する送信工程と
を有する画像通信方法。
A storage step in which the storage control unit stores and controls the first image data transmitted from the other image communication device;
A printing step in which the printing means outputs the first image data to paper;
A reading step in which a reading unit reads a paper image output on paper by the printing unit to obtain second image data; and
A character extraction step of extracting characters from the first image data stored in the storage unit and extracting characters from the second image data obtained by the reading unit;
A character determination step for determining whether the characters extracted from the first image data and the second image data by the character extraction unit are the same character;
An image region cutout step of cutting out a predetermined image region including a character determined to be the same character by the character determination unit from the first image data and the second image data;
A difference determining unit is configured to determine whether a color difference of each pixel corresponding to a character in each of the image regions extracted from the first image data and the second image data by the image region extracting unit is in advance. A difference determination step for determining whether or not the condition is greater than a stored condition;
When the transmission unit determines that the color difference is larger than the condition by the difference determination unit, the first image data transmitted from the other image communication device and the first image data are A transmitting step of transmitting a message to the effect that the second image data obtained by reading the paper surface image of the output paper is different to the other image communication device that is the transmission source of the first image data; An image communication method comprising:
コンピュータを、
他の画像通信装置から送信された第1の画像データを記憶手段に記憶制御する記憶制御手段と、
前記第1の画像データを紙に出力するように印刷手段を制御する印刷制御手段と、
前記印刷手段で紙に出力された紙面画像を読み取って第2の画像データを得るように、読取手段を読み取り制御する読み取り制御手段と、
前記記憶手段に記憶された前記第1の画像データから文字を抽出すると共に、前記読取手段で得た前記第2の画像データから文字を抽出する文字抽出手段と、
前記文字抽出手段として機能することで前記第1の画像データおよび前記第2の画像データから抽出されたそれぞれの文字が同一文字かを判定する文字判定手段と、
前記第1の画像データおよび前記第2の画像データから、前記文字判定手段として機能することで同一文字であると判定された文字を含む所定の画像領域を切り出す画像領域切り出し手段と、
前記画像領域切り出し手段として機能することで前記第1の画像データおよび前記第2の画像データから切り出されたそれぞれの画像領域の中で、文字に該当するそれぞれの画素の色の差異が、予め記憶されている条件よりも大きいか否かを判定する差異判定手段と、
前記差異判定手段として機能することで前記色の差異が前記条件よりも大きいと判定されたとき、前記他の画像通信装置から送信された前記第1の画像データと、該第1の画像データが出力された紙の紙面画像を読み取って得た前記第2の画像データとが異なっている旨のメッセージを、前記第1の画像データの送信元の前記他の画像通信装置に送信するように送信手段を制御する送信制御手段として機能させること
を特徴とする画像通信プログラム。
Computer
Storage control means for storing and controlling the first image data transmitted from another image communication device in the storage means;
Printing control means for controlling the printing means to output the first image data on paper;
Reading control means for reading and controlling the reading means so as to read the paper image output on the paper by the printing means to obtain second image data;
Character extraction means for extracting characters from the first image data stored in the storage means and extracting characters from the second image data obtained by the reading means;
A character determination unit that determines whether each character extracted from the first image data and the second image data functions as the character extraction unit;
An image region cutout unit that cuts out a predetermined image region that includes the character determined to be the same character by functioning as the character determination unit from the first image data and the second image data;
By functioning as the image area cutout means, the difference in color of each pixel corresponding to the character in each of the image areas cut out from the first image data and the second image data is stored in advance. Difference determining means for determining whether or not the condition is greater than
When it is determined that the color difference is larger than the condition by functioning as the difference determination unit, the first image data transmitted from the other image communication apparatus and the first image data are A message indicating that the second image data obtained by reading the output paper image of the paper is different is transmitted so as to be transmitted to the other image communication device that is the transmission source of the first image data. An image communication program that functions as transmission control means for controlling the means.
コンピュータを、
他の画像通信装置から送信された第1の画像データを記憶手段に記憶制御する記憶制御手段と、
前記第1の画像データを紙に出力するように印刷手段を制御する印刷制御手段と、
前記印刷手段で紙に出力された紙面画像を読み取って第2の画像データを得るように、読取手段を読み取り制御する読み取り制御手段と、
前記記憶手段に記憶された前記第1の画像データから文字を抽出すると共に、前記読取手段で得た前記第2の画像データから文字を抽出する文字抽出手段と、
前記文字抽出手段として機能することで前記第1の画像データおよび前記第2の画像データから抽出されたそれぞれの文字が同一文字かを判定する文字判定手段と、
前記第1の画像データおよび前記第2の画像データから、前記文字判定手段として機能することで同一文字であると判定された文字を含む所定の画像領域を切り出す画像領域切り出し手段と、
前記画像領域切り出し手段として機能することで前記第1の画像データおよび前記第2の画像データから切り出されたそれぞれの画像領域の中で、文字に該当するそれぞれの画素の色の差異が、予め記憶されている条件よりも大きいか否かを判定する差異判定手段と、
前記差異判定手段として機能することで前記色の差異が前記条件よりも大きいと判定されたとき、前記他の画像通信装置から送信された前記第1の画像データと、該第1の画像データが出力された紙の紙面画像を読み取って得た前記第2の画像データとが異なっている旨のメッセージを、前記第1の画像データの送信元の前記他の画像通信装置に送信するように送信手段を制御する送信制御手段
として機能させる画像通信プログラムを記憶したコンピュータ読み取り可能な記憶媒体。
Computer
Storage control means for storing and controlling the first image data transmitted from another image communication device in the storage means;
Printing control means for controlling the printing means to output the first image data on paper;
Reading control means for reading and controlling the reading means so as to read the paper image output on the paper by the printing means to obtain second image data;
Character extraction means for extracting characters from the first image data stored in the storage means and extracting characters from the second image data obtained by the reading means;
A character determination unit that determines whether each character extracted from the first image data and the second image data functions as the character extraction unit;
An image region cutout unit that cuts out a predetermined image region that includes the character determined to be the same character by functioning as the character determination unit from the first image data and the second image data;
By functioning as the image area cutout means, the difference in color of each pixel corresponding to the character in each of the image areas cut out from the first image data and the second image data is stored in advance. Difference determining means for determining whether or not the condition is greater than
When it is determined that the color difference is larger than the condition by functioning as the difference determination unit, the first image data transmitted from the other image communication apparatus and the first image data are A message indicating that the second image data obtained by reading the output paper image of the paper is different is transmitted so as to be transmitted to the other image communication device that is the transmission source of the first image data. A computer-readable storage medium storing an image communication program that functions as transmission control means for controlling the means.
JP2013138435A 2008-08-08 2013-07-01 Image communication apparatus, image communication method, image communication program, and recording medium Active JP5660165B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013138435A JP5660165B2 (en) 2008-08-08 2013-07-01 Image communication apparatus, image communication method, image communication program, and recording medium

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008206305 2008-08-08
JP2008206305 2008-08-08
JP2013138435A JP5660165B2 (en) 2008-08-08 2013-07-01 Image communication apparatus, image communication method, image communication program, and recording medium

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2009131912A Division JP5347723B2 (en) 2008-08-08 2009-06-01 Image communication apparatus, image communication method, image communication program, and recording medium

Publications (2)

Publication Number Publication Date
JP2013192274A JP2013192274A (en) 2013-09-26
JP5660165B2 true JP5660165B2 (en) 2015-01-28

Family

ID=49392024

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013138435A Active JP5660165B2 (en) 2008-08-08 2013-07-01 Image communication apparatus, image communication method, image communication program, and recording medium

Country Status (1)

Country Link
JP (1) JP5660165B2 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003115060A (en) * 2001-10-05 2003-04-18 Hitachi Ltd Printing and issuing machine
JP2006272727A (en) * 2005-03-29 2006-10-12 Seiko Epson Corp Printer, printing method, printing program, and recording medium
JP4454550B2 (en) * 2005-07-29 2010-04-21 シャープ株式会社 Image processing apparatus and defect image correction method
JP4736128B2 (en) * 2006-03-27 2011-07-27 富士フイルム株式会社 Printing apparatus and printing system

Also Published As

Publication number Publication date
JP2013192274A (en) 2013-09-26

Similar Documents

Publication Publication Date Title
US8427679B2 (en) Image communication apparatus, image communication system, and control program for image communication
US6426809B1 (en) Image transmitting system and image transmitting method
JP2008042325A (en) Method, device, and computer program for processing input data related to generation of electronic file
JP5347723B2 (en) Image communication apparatus, image communication method, image communication program, and recording medium
JP2009100026A (en) Image processor
CN101626443A (en) Image sending apparatus
US8670623B2 (en) Image processing apparatus, image conversion method, and computer-readable storage medium for computer program based on calculated degree of complexity
JP2008017014A (en) Image processor, image processing method, and program
JP4139154B2 (en) Image communication device
JP4416782B2 (en) Image processing apparatus, determination apparatus, change apparatus, and image processing method
US8699809B2 (en) Image processing apparatus, image conversion method, and recording medium
JP5660165B2 (en) Image communication apparatus, image communication method, image communication program, and recording medium
JP4710672B2 (en) Character color discrimination device, character color discrimination method, and computer program
EP1898625A2 (en) Apparatus and method for deciding image color
JP5549371B2 (en) Image generation device, transmission device, image transmission system, and program used therefor
JP5821985B2 (en) Image communication apparatus and image communication system
JP4375106B2 (en) Image processing device
JP2002142106A (en) Image processing device and method therefor
JP5186994B2 (en) Image processing device
JP2011223074A (en) Image processing apparatus
JPH0851540A (en) Image processor and its method
JPH0898016A (en) Image processing unit
JP4844744B2 (en) Facsimile machine
JP2003134280A (en) Facsimile machine
JP3991922B2 (en) Image processing device

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130730

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140826

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141009

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141117

R151 Written notification of patent or utility model registration

Ref document number: 5660165

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151