JP2017139693A - Information processing unit, information processing method, and program - Google Patents

Information processing unit, information processing method, and program Download PDF

Info

Publication number
JP2017139693A
JP2017139693A JP2016020728A JP2016020728A JP2017139693A JP 2017139693 A JP2017139693 A JP 2017139693A JP 2016020728 A JP2016020728 A JP 2016020728A JP 2016020728 A JP2016020728 A JP 2016020728A JP 2017139693 A JP2017139693 A JP 2017139693A
Authority
JP
Japan
Prior art keywords
information
image data
fax
data
received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016020728A
Other languages
Japanese (ja)
Inventor
義高 松本
Yoshitaka Matsumoto
義高 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2016020728A priority Critical patent/JP2017139693A/en
Publication of JP2017139693A publication Critical patent/JP2017139693A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To prevent false transmission in the case of such a utilization method that a received document, printed at the time of FAX reception, is transmitted as a return document, as it is or making some retouch or correction, by FAX.SOLUTION: An information processing unit performing FAX transmission of a return document, created based on the received document printed at the time of FAX reception, has reception image acquisition means for acquiring the image data received by FAX and the transmission source of the image data, reception image analysis means for extracting partial image information, i.e., the information about the character string area other than handwriting, from the image data by analyzing the image data, and holding the partial image information, while mapping to the transmission source, in storage means, and scan image analysis means for acquiring the scan image data obtained by reading the return document, comparing the partial image information extracted from the scan image data with the partial image information held in the storage means, and acquiring the return destination of the return document based on the comparison results.SELECTED DRAWING: Figure 3

Description

本発明はFAX誤送信を防止するための技術に関する。   The present invention relates to a technique for preventing erroneous FAX transmission.

現在、FAX(G3FAXやインターネットFAXなど)による画像データの送信が普及している。このようなFAXの用途として、FAX受信時に印刷された受信原稿(用紙)をそのまま、もしくは加筆や訂正等を行って返送原稿としてFAX送信するような使い方が広く行われている。例えば、商社などの受注業務において、確かに受注したことの通知手段として、受信原稿に納期などの情報を加筆して送信元に返送することがある。また例えば、銀行や保険会社などの個人情報を取り扱う申し込み受付業務において、FAXで受信した申込書の記載内容に不備があった場合に、不備箇所に記しを加筆した申込書を送信元に返送することがある。   Currently, transmission of image data by FAX (G3 FAX, Internet FAX, etc.) is widespread. As such a FAX application, there is a widespread use in which a received original (paper) printed at the time of FAX reception is used as it is, or FAX transmission is performed as a return original after adding or correcting. For example, in order-receiving work such as a trading company, there is a case where information such as a delivery date is added to a received original and returned to a transmission source as a means for notifying that an order has been received. In addition, for example, in the application reception business dealing with personal information such as banks and insurance companies, if there is an incompleteness in the contents of the application form received by FAX, the application form with the incomplete part added will be returned to the sender Sometimes.

このようなFAX通信において、返信先の誤設定に起因する誤送信は大きな問題となる。特に最近の個人情報保護法や社内の秘密事項などを含む分野における内部統制などのセキュリティの観点から情報の流出を抑えるために、このような誤送信を有効に防止する技術が求められている。   In such FAX communication, erroneous transmission caused by incorrect setting of a reply destination becomes a big problem. In particular, in order to suppress the outflow of information from the viewpoint of security such as internal control in a field including recent personal information protection laws and internal secret matters, a technique for effectively preventing such erroneous transmission is required.

そこで、特許文献1は、受信時の画像データと送信元FAX番号を保持し、FAX送信時にスキャンした画像データを受信時の画像データと比較して、一致した受信時の画像データの送信元FAX番号を返信先FAX番号として設定するFAX装置を開示している。特許文献1のFAX装置により、FAX受信した受信原稿をそのまま、あるいは若干の加筆や訂正を行って送信元に返送する際に誤送信の発生を抑えることが可能となる。   Therefore, Patent Document 1 holds the image data at the time of reception and the transmission source FAX number, compares the image data scanned at the time of FAX transmission with the image data at the time of reception, and matches the transmission source FAX of the image data at the time of reception. A FAX apparatus that sets a number as a reply destination FAX number is disclosed. With the FAX apparatus of Patent Document 1, it is possible to suppress the occurrence of erroneous transmission when a received document received by FAX is returned to the transmission source as it is or after being slightly added or corrected.

特開2005−175761号公報JP-A-2005-175761

特許文献1では、FAX送信時にスキャンした画像データ(スキャン画像データ)と受信時の画像データとの間で画素同士を比較し、一致度が閾値を超えたものを一致した画像データと判定する。判定用の閾値は、受信原稿に加筆や訂正する量が所定量以下であることを想定して予め設定されている。しかし、加筆や訂正する量が所定量を超え、送信時のスキャン画像データと受信時の画像データとの一致度が閾値を下回る場合があり、このような場合、一致した画像データが見つからないという課題がある。また、送信時に閾値を変更することが考えられるが、送信毎に加筆や訂正する量に応じて閾値を設定し直すのはユーザー操作の手間になるという課題もある。   In Patent Document 1, pixels are compared between image data scanned at the time of FAX transmission (scanned image data) and image data at the time of reception, and those having a matching degree exceeding a threshold value are determined as matching image data. The threshold value for determination is set in advance assuming that the amount to be added to or corrected on the received document is equal to or less than a predetermined amount. However, there is a case where the amount of correction or correction exceeds a predetermined amount, and the degree of coincidence between the scanned image data at the time of transmission and the image data at the time of reception is lower than the threshold value. There are challenges. Although it is conceivable to change the threshold value at the time of transmission, there is a problem that resetting the threshold value in accordance with the amount to be added or corrected for each transmission requires time and effort for the user operation.

本発明は、加筆と訂正した部分を排除して画像データの比較を行うことで受信時の画像データを見つけ出すことにより、FAX送信する際にユーザーによる操作負担を軽減しつつ、誤送信の発生を抑えることを可能にすることを目的とする。   The present invention eliminates the added and corrected parts and compares the image data to find out the image data at the time of reception, thereby reducing the operation burden on the user during FAX transmission and generating an erroneous transmission. It aims to make it possible to suppress.

本発明に係る情報処理装置は、FAX受信時に印刷された受信原稿を基に作成された返送原稿をFAX送信するための情報処理装置であって、FAX受信した画像データ及び前記画像データの送信元を取得する受信画像取得手段と、手書き以外の文字列領域についての情報である部分画像情報を、前記画像データを解析することで前記画像データから抽出し、抽出した該部分画像情報を前記送信元に対応付けて保存手段に保持する受信画像解析手段と、前記返送原稿を読み取ることで得られたスキャン画像データを取得し、前記スキャン画像データを解析することで前記スキャン画像データから部分画像情報を抽出し、当該スキャン画像データから抽出した該部分画像情報を前記保存手段に保持されている前記部分画像情報と比較し、比較結果に基づいて前記返送原稿の返信先を取得するスキャン画像解析手段とを有することを特徴とする。   An information processing apparatus according to the present invention is an information processing apparatus for FAX-transmitting a return original created based on a received original printed at the time of FAX reception, wherein the FAX-received image data and the transmission source of the image data Receiving image acquisition means for acquiring image information, partial image information that is information about a character string area other than handwriting is extracted from the image data by analyzing the image data, and the extracted partial image information is the source Received image analysis means stored in the storage means in association with the scan image data obtained by reading the return document, and analyzing the scan image data to obtain partial image information from the scan image data The partial image information extracted and extracted from the scanned image data is compared with the partial image information held in the storage unit, and a comparison result is obtained. And having a scan image analysis means for obtaining a reply to the returned document based on.

本発明によれば、FAX送信する際に、返送原稿における加筆や訂正する量に拘わらず、ユーザーによる操作負担を軽減しつつ、誤送信の発生を抑えることが可能となる。   According to the present invention, it is possible to suppress the occurrence of erroneous transmission while reducing the operation burden on the user regardless of the amount of correction or correction in the returned document when performing FAX transmission.

第1の実施形態におけるFAXシステム全体図である。1 is an overall view of a FAX system according to a first embodiment. 第1の実施形態におけるMFP101のハードウェア構成図である。2 is a hardware configuration diagram of an MFP 101 according to the first embodiment. FIG. 第1の実施形態におけるMFP101のソフトウェア構成図である。3 is a software configuration diagram of the MFP 101 according to the first embodiment. FIG. 第1の実施形態においてMFP101がFAX受信した画像データを印刷する際の動作を示すフローチャートである。6 is a flowchart illustrating an operation performed when the MFP 101 prints image data received by FAX in the first embodiment. 第1の実施形態における画像解析を説明するための図である。It is a figure for demonstrating the image analysis in 1st Embodiment. MFP101のFAX送信画面を示す図である。6 is a diagram illustrating a FAX transmission screen of the MFP 101. FIG. 第1の実施形態においてMFP101がFAX送信する際の動作を示すフローチャートである。6 is a flowchart illustrating an operation when the MFP 101 performs FAX transmission in the first embodiment. 第1の実施形態におけるMFP101の返信先確認画面を示す図である。6 is a diagram illustrating a reply destination confirmation screen of the MFP 101 according to the first embodiment. FIG. 第1の実施形態におけるMFP101の返信先入力画面を示す図である。6 is a diagram illustrating a reply destination input screen of the MFP 101 according to the first embodiment. FIG. 第2の実施形態においてMFP101がFAX送信する際の動作を示すフローチャートである。10 is a flowchart illustrating an operation when the MFP 101 performs FAX transmission in the second embodiment. 第2の実施形態におけるMFP101の返信先選択画面を示す図である。FIG. 10 illustrates a reply destination selection screen of the MFP 101 according to the second embodiment.

以下、本発明を実施するための形態について図面を用いて説明する。なお、以下の実施の形態は特許請求の範囲に係る発明を限定するものでなく、また実施の形態で説明されている特徴の組み合わせの全てが発明の解決手段に必須のものとは限らない。   Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings. The following embodiments do not limit the invention according to the claims, and all combinations of features described in the embodiments are not necessarily essential to the solution means of the invention.

<第1の実施形態>
図1は、本実施形態におけるFAXシステムの全体図である。MFP(Multifunction Peripheral)101は、PSTN(Public Switched Telephone Networks)100に接続されている。MFP101はPSTN100を介して、図示しないFAX装置との間で画像データをFAX通信することができる。
<First Embodiment>
FIG. 1 is an overall view of a FAX system according to this embodiment. An MFP (Multifunction Peripheral) 101 is connected to a PSTN (Public Switched Telephony Networks) 100. The MFP 101 can perform FAX communication of image data with a FAX apparatus (not shown) via the PSTN 100.

図2は、本実施形態におけるMFP101のハードウェア構成図である。MFP101は、制御部210、操作部220、プリンタ221、スキャナ222及びモデム223を備える。制御部210は、CPU211、ROM212、RAM213、HDD214、操作部I/F215、プリンタI/F216、スキャナI/F217及びモデムI/F218を備えており、MFP101全体の動作を制御する。   FIG. 2 is a hardware configuration diagram of the MFP 101 according to the present embodiment. The MFP 101 includes a control unit 210, an operation unit 220, a printer 221, a scanner 222, and a modem 223. The control unit 210 includes a CPU 211, ROM 212, RAM 213, HDD 214, operation unit I / F 215, printer I / F 216, scanner I / F 217, and modem I / F 218, and controls the overall operation of the MFP 101.

CPU211は、ROM212に記憶された制御プログラムを読み出して、読取、印刷及び通信などの各種制御を行う。RAM213は、CPU211の主メモリ、ワークエリア等の一時記憶領域として用いられる。HDD214は、画像データや各種プログラムを記憶する。なお、MFP101は1つのCPU211が1つのメモリ(RAM213またはHDD214)を用いて後述するフローチャートに示す各処理を実行するものとするが、他の態様であっても構わない。例えば、複数のCPUや複数のRAMまたはHDDを協働させてフローチャートに示す各処理を実行するようにすることもできる。   The CPU 211 reads the control program stored in the ROM 212 and performs various controls such as reading, printing, and communication. The RAM 213 is used as a temporary storage area such as a main memory or work area for the CPU 211. The HDD 214 stores image data and various programs. In the MFP 101, one CPU 211 executes each process shown in a flowchart to be described later using one memory (RAM 213 or HDD 214). However, other modes may be used. For example, a plurality of CPUs and a plurality of RAMs or HDDs can be cooperated to execute each process shown in the flowchart.

操作部I/F215は、操作部220と制御部210を接続する。操作部220には、タッチパネル機能を有する液晶表示部やキーボードなどが備えられており、ユーザーによる入力操作を受け付ける受付部としての役割を担う。プリンタI/F216は、プリンタ221と制御部210を接続する。プリンタ221で印刷すべき画像データはプリンタI/F216を介して制御部210から転送され、プリンタ221により記録媒体上に印刷される。スキャナI/F217は、スキャナ222と制御部210を接続する。スキャナ222は、原稿を読み取ることでスキャン画像データを取得し、スキャナI/F217を介して制御部210に入力する。モデムI/F218は、モデム223と制御部210を接続する。モデム223は、PSTN100を介して図示しないFAX装置との間における画像データのFAX通信を実行する。   The operation unit I / F 215 connects the operation unit 220 and the control unit 210. The operation unit 220 includes a liquid crystal display unit having a touch panel function, a keyboard, and the like, and serves as a reception unit that receives an input operation by a user. The printer I / F 216 connects the printer 221 and the control unit 210. Image data to be printed by the printer 221 is transferred from the control unit 210 via the printer I / F 216 and printed on a recording medium by the printer 221. The scanner I / F 217 connects the scanner 222 and the control unit 210. The scanner 222 acquires scanned image data by reading a document, and inputs the scanned image data to the control unit 210 via the scanner I / F 217. The modem I / F 218 connects the modem 223 and the control unit 210. The modem 223 performs FAX communication of image data with a FAX apparatus (not shown) via the PSTN 100.

図3は、本実施形態におけるMFP101のソフトウェア構成図である。MFP101は、ネイティブ機能部310及び追加アプリケーション320を有する。ネイティブ機能部310は、FAX受信部311、転送部312、印刷部313、画像読み取り部314及びFAX送信部315を有する。追加アプリケーション320は、受信画像取得部321、受信画像解析部322、印刷指示部323、UI制御部324、スキャン画像解析部325及びFAX送信指示部326を有する。ネイティブ機能部310に含まれる各部はMFP101に標準的に備えられたものであるのに対し、追加アプリケーション320はMFP101に追加インストールされたアプリケーションである。追加アプリケーション320はJava(登録商標)をベースとしたアプリケーションであり、MFP101への機能追加を容易に実現できる。なお、MFP101には図示しない他の追加アプリケーションがインストールされていても良い。   FIG. 3 is a software configuration diagram of the MFP 101 according to this embodiment. The MFP 101 includes a native function unit 310 and an additional application 320. The native function unit 310 includes a FAX reception unit 311, a transfer unit 312, a printing unit 313, an image reading unit 314, and a FAX transmission unit 315. The additional application 320 includes a received image acquisition unit 321, a received image analysis unit 322, a print instruction unit 323, a UI control unit 324, a scan image analysis unit 325, and a FAX transmission instruction unit 326. Each unit included in the native function unit 310 is provided in the MFP 101 as a standard, whereas the additional application 320 is an application additionally installed in the MFP 101. The additional application 320 is an application based on Java (registered trademark), and can easily add functions to the MFP 101. Note that other additional applications (not shown) may be installed in the MFP 101.

以下、ネイティブ機能部310に含まれる各部について説明する。FAX受信部311は、FAX装置からPSTN100を介して送信された画像データをFAX受信し、送信元情報などを含むTSI(Transmitting Subscriber Identification)情報を取得する。FAX受信部311が受信した画像データ(以下、受信画像データ)をPDF形式やJPEG形式といった画像ファイル形式に変換する。また、FAX受信部311は、TSI情報に含まれる画像データの送信元情報(送信元FAX番号)及び他の受信情報(例えば受信日時)を取得し、送信元FAX番号及び他の受信情報を含む受信情報ファイルを作成する。さらに、変換後の受信画像データとともに転送部312に渡す。   Hereinafter, each unit included in the native function unit 310 will be described. The FAX receiving unit 311 receives image data transmitted from the FAX apparatus via the PSTN 100 by FAX, and acquires TSI (Transmitting Subscriber Identification) information including transmission source information and the like. The image data (hereinafter, received image data) received by the FAX receiving unit 311 is converted into an image file format such as PDF format or JPEG format. Further, the FAX receiving unit 311 acquires transmission source information (transmission source FAX number) and other reception information (for example, reception date and time) of image data included in the TSI information, and includes the transmission source FAX number and other reception information. Create a reception information file. Further, the data is transferred to the transfer unit 312 together with the converted received image data.

転送部312は、FAX受信部311から受け取った受信画像データ及び受信情報ファイルを、予め設定されている転送先に転送する。転送先としては、印刷部313やファイルサーバ、LAN上のPC(不図示)等を設定可能であるが、ここではFAX受信部311で受信された画像データが一旦全て追加アプリケーション320に転送されるように設定するものとする。具体的に、転送部312は、FTP(File Transfer Protocol)クライアント機能を有しており、FTPサーバ機能を有する受信画像取得部321に対してFTPで受信画像データ及び受信情報ファイルを転送する。   The transfer unit 312 transfers the received image data and the received information file received from the FAX receiving unit 311 to a preset transfer destination. As the transfer destination, a printing unit 313, a file server, a PC (not shown) on the LAN, or the like can be set. Here, however, all image data received by the FAX receiving unit 311 is once transferred to the additional application 320. It shall be set as follows. Specifically, the transfer unit 312 has an FTP (File Transfer Protocol) client function, and transfers the received image data and the received information file by FTP to the received image acquisition unit 321 having the FTP server function.

印刷部313は、後述の追加アプリケーション320における印刷指示部323から受け取った画像データを記録媒体に印刷するようプリンタI/F216を介してプリンタ221を制御する。   The printing unit 313 controls the printer 221 via the printer I / F 216 so as to print the image data received from the print instruction unit 323 in the additional application 320 described later on a recording medium.

画像読み取り部314は、UI制御部324からのスキャン開始指示を受け取ると、スキャナI/F217を介してスキャナ222を制御し、スキャナ222が原稿を読み取ることでスキャン画像データを取得する。次に画像読み取り部314は取得したスキャン画像データを追加アプリケーション320におけるスキャン画像解析部325に渡す。   When the image reading unit 314 receives a scan start instruction from the UI control unit 324, the image reading unit 314 controls the scanner 222 via the scanner I / F 217, and the scanner 222 reads a document to acquire scan image data. Next, the image reading unit 314 passes the acquired scan image data to the scan image analysis unit 325 in the additional application 320.

FAX送信部315は、後述の追加アプリケーション320におけるFAX送信指示部326から受け取ったスキャン画像データを返信先FAX番号にFAX送信するようモデムI/F218を介してモデム223を制御する。   The FAX transmission unit 315 controls the modem 223 via the modem I / F 218 so that the scan image data received from the FAX transmission instruction unit 326 in the additional application 320 described later is FAX-transmitted to the reply destination FAX number.

以下、追加アプリケーション320に含まれる各部について説明する。受信画像取得部321は、ネイティブ機能部310における転送部312から転送された受信画像データ及び受信情報ファイルを取得する。   Hereinafter, each unit included in the additional application 320 will be described. The reception image acquisition unit 321 acquires the reception image data and the reception information file transferred from the transfer unit 312 in the native function unit 310.

受信画像解析部322は、受信情報ファイルに含まれる送信元FAX番号を取得する。また、受信画像解析部322は、OCR(Optical Character Recognition)などの画像解析処理によって受信画像データ内に含まれる文字列を認識し、文字列の領域情報を抽出する。受信画像解析部322は、認識処理が異なる複数のOCR処理を行うことで、手書き以外の文字列領域(すなわち、印刷文字領域)を判定する。印刷文字領域の部分画像データ及びその領域情報を部分画像情報として抽出し、抽出した全ての部分画像情報をまとめたデータを照合データとして生成し、送信元FAX番号に対応付けて保持する。また、受信画像解析部322は、受信画像データを印刷指示部323に渡す。   The reception image analysis unit 322 acquires a transmission source FAX number included in the reception information file. Also, the received image analysis unit 322 recognizes a character string included in the received image data by image analysis processing such as OCR (Optical Character Recognition) and extracts region information of the character string. The received image analysis unit 322 determines a character string area other than handwriting (that is, a print character area) by performing a plurality of OCR processes with different recognition processes. Partial image data of the print character area and its area information are extracted as partial image information, and data in which all the extracted partial image information is collected is generated as collation data, and is stored in association with the transmission source FAX number. The received image analysis unit 322 passes the received image data to the print instruction unit 323.

印刷指示部323は、受信画像解析部322から受け取った受信画像データを印刷部313に渡し、印刷指示を出す。UI制御部324は、操作部I/F215を介して操作部220にスキャン開始を指示するためのGUI(グラフィカルユーザーインターフェース)を表示し、ユーザーによるスキャン開始指示操作を待つ。UI制御部324はユーザーによるスキャン開始指示操作をトリガとして、画像読み取り部314にスキャン開始指示を出す。また、UI制御部324は、後述のFAX送信指示部326の指示に基づいてユーザーが返信先を確認するためのUIまたはユーザーが返信先を入力するためのUIを表示し、ユーザー操作情報をFAX送信指示部326に渡す。   The print instruction unit 323 passes the received image data received from the received image analysis unit 322 to the printing unit 313 and issues a print instruction. The UI control unit 324 displays a GUI (graphical user interface) for instructing the start of scanning on the operation unit 220 via the operation unit I / F 215 and waits for a scan start instruction operation by the user. The UI control unit 324 issues a scan start instruction to the image reading unit 314 with a scan start instruction operation by the user as a trigger. Also, the UI control unit 324 displays a UI for a user to confirm a reply destination or a UI for a user to input a reply destination based on an instruction from a FAX transmission instruction unit 326 described later, and displays user operation information as a FAX. The data is sent to the transmission instruction unit 326.

スキャン画像解析部325は、画像読み取り部314から受け取ったスキャン画像データに対して受信画像解析部322と同様に認識処理が異なる複数のOCR処理を行い、手書き以外の文字列領域(すなわち、印刷文字領域)を判定する。印刷文字領域の部分画像データ及びその領域情報を部分画像情報として抽出し、抽出した全ての部分画像情報をまとめたデータを被照合データとして生成し、生成した被照合データと受信画像解析部322が保持した照合データを比較する。被照合データと照合データに含まれる部分画像情報の照合を行って、一致した照合データと判定したら一致した照合データに対応する送信元FAX番号を返信先FAX番号として取得する。さらに、スキャン画像解析部325は、スキャン画像データ及び返信先FAX番号をFAX送信指示部326に渡す。   The scanned image analysis unit 325 performs a plurality of OCR processes with different recognition processes on the scanned image data received from the image reading unit 314 in the same manner as the received image analysis unit 322, and performs a character string region other than handwriting (that is, a print character) Region). The partial image data of the print character area and its area information are extracted as partial image information, data including all the extracted partial image information is generated as collated data, and the generated collated data and the received image analysis unit 322 Compare the stored verification data. If the collated data and the partial image information included in the collation data are collated, and the matching data is determined to be matched, the transmission source FAX number corresponding to the matched collation data is acquired as the reply destination FAX number. Further, the scan image analysis unit 325 passes the scan image data and the reply destination FAX number to the FAX transmission instruction unit 326.

FAX送信指示部326は、UI制御部324から受け取ったユーザー操作情報に基づいて、送信指示の有無を判定する。送信指示があった場合、FAX送信指示部326は、FAX送信部315にスキャン画像データ及び返信先FAX番号を渡してFAX送信を行うように指示する。   The FAX transmission instruction unit 326 determines whether there is a transmission instruction based on the user operation information received from the UI control unit 324. When there is a transmission instruction, the FAX transmission instruction unit 326 instructs the FAX transmission unit 315 to perform FAX transmission by passing the scan image data and the reply destination FAX number.

以上が、本実施形態におけるMFP101のソフトウェア構成であるが、図3で説明した追加アプリケーション320に含まれる各部がネイティブ機能部310に備えられていてもよい。また、追加アプリケーション320に含まれる各部はMFP101と通信可能な情報処理装置として構成されてもよい。   The above is the software configuration of the MFP 101 in the present embodiment, but each unit included in the additional application 320 described with reference to FIG. 3 may be included in the native function unit 310. Each unit included in the additional application 320 may be configured as an information processing apparatus that can communicate with the MFP 101.

図4は、本実施形態においてMFP101がFAX受信した画像データを印刷する際の動作を説明するフローチャートである。図4のフローチャートに示す各動作(ステップ)は、MFP101のCPU211がHDD214などに記憶された制御プログラムを実行することにより実現される。   FIG. 4 is a flowchart for explaining the operation when the MFP 101 prints image data received by FAX in this embodiment. Each operation (step) shown in the flowchart of FIG. 4 is realized by the CPU 211 of the MFP 101 executing a control program stored in the HDD 214 or the like.

ステップS400において、FAX受信部311が、PSTN100を介して画像データをFAX受信し、送信元番号などの情報を含むTSI情報を取得する。次に、FAX受信部311は受信画像データをPDF形式やJPEG形式といった画像ファイル形式に変換し、TSI情報から送信元番号などを含む受信情報ファイルを生成し、生成した受信情報ファイルを変換後の受信画像データとともに転送部312に渡す。転送部312はFAX受信部311から受け取った受信画像データ及び受信情報ファイルを追加アプリケーション320の受信画像取得部321に対してFTPで転送する。受信画像取得部321は転送部312から転送された受信画像データ及び受信情報ファイルを取得し、受信画像解析部322に渡す。   In step S400, the FAX receiving unit 311 receives the image data by FAX via the PSTN 100, and acquires TSI information including information such as a transmission source number. Next, the FAX receiving unit 311 converts the received image data into an image file format such as PDF format or JPEG format, generates a reception information file including a transmission source number from the TSI information, and converts the generated reception information file after conversion. The received image data is transferred to the transfer unit 312. The transfer unit 312 transfers the received image data and the received information file received from the FAX receiving unit 311 to the received image acquisition unit 321 of the additional application 320 by FTP. The reception image acquisition unit 321 acquires the reception image data and the reception information file transferred from the transfer unit 312 and passes them to the reception image analysis unit 322.

ステップS401において、受信画像解析部322が、受信画像取得部321から受け取った受信情報ファイルに含まれる送信元FAX番号を取得する。ステップS402において、受信画像解析部322が受信画像取得部321から受け取った受信画像データに対して印刷文字OCR処理を行うことで、受信画像データ内に含まれる1つ以上の文字列を認識し、それぞれの文字列の領域情報を抽出する。領域情報は、画像データの位置を示す情報であり、複数の座標で構成される。例えば、領域情報は、OCR処理によって認識された文字列を含む矩形の位置を示す情報であり、矩形の左上と右下を示す2つの座標で構成される。ステップS403において、受信画像解析部322が受信画像データに対して手書き文字OCR処理を行うことで、ステップS402で抽出された領域情報が示した領域内の文字列を認識する。   In step S <b> 401, the received image analysis unit 322 acquires the transmission source FAX number included in the received information file received from the received image acquisition unit 321. In step S402, the received image analysis unit 322 performs print character OCR processing on the received image data received from the received image acquisition unit 321, thereby recognizing one or more character strings included in the received image data. Extract region information for each character string. The area information is information indicating the position of the image data, and is composed of a plurality of coordinates. For example, the area information is information indicating the position of a rectangle including a character string recognized by the OCR process, and includes two coordinates indicating the upper left and lower right of the rectangle. In step S403, the received image analysis unit 322 performs handwritten character OCR processing on the received image data, thereby recognizing the character string in the area indicated by the area information extracted in step S402.

印刷文字OCR処理(印刷文字認識処理)と手書き文字OCR処理(手書き文字認識処理)は、認識処理が異なるものである。印刷文字OCR処理は、印刷文字の特徴のみを考慮して文字を認識するが、手書き文字OCR処理は、人が記述した文字の特徴も考慮して文字を認識する。そのため、印刷文字の場合、印刷文字OCRと手書き文字OCRの認識結果が同じになる傾向があるが、手書き文字の場合、印刷文字OCRと手書き文字OCRの認識結果が異なる傾向がある。例えば、図5に示す手書き文字例501を認識する場合、手書き文字OCR処理は「1」と正しく認識するが、印刷文字OCR処理は「7」と誤認識してしまう。一方、図5に示す印刷文字例502を認識する場合、印刷文字OCR処理と手書き文字OCR処理の両方は「1」と正しく認識する。   The print character OCR process (print character recognition process) and the handwritten character OCR process (handwritten character recognition process) are different in recognition process. The print character OCR process recognizes characters in consideration of only the characteristics of the print characters, whereas the handwritten character OCR process recognizes characters in consideration of the characteristics of characters written by a person. Therefore, in the case of a print character, the recognition result of the print character OCR and the handwritten character OCR tends to be the same, but in the case of a handwritten character, the recognition result of the print character OCR and the handwritten character OCR tends to be different. For example, when the handwritten character example 501 shown in FIG. 5 is recognized, the handwritten character OCR process is correctly recognized as “1”, but the print character OCR process is erroneously recognized as “7”. On the other hand, when the print character example 502 shown in FIG. 5 is recognized, both the print character OCR process and the handwritten character OCR process are correctly recognized as “1”.

本実施形態では、上記の特徴を利用して、印刷文字OCRと手書き文字OCRの認識結果が異なる領域を手書き文字領域と判定し、印刷文字OCRと手書き文字OCRの認識結果が同じである領域を印刷文字領域と判定する。   In the present embodiment, using the above features, an area where the recognition result of the printed character OCR and the handwritten character OCR is different is determined as the handwritten character area, and an area where the recognition result of the printed character OCR and the handwritten character OCR is the same. The print character area is determined.

ステップS404において、受信画像解析部322が、ステップS402とステップS403のそれぞれのOCR処理結果(文字列認識結果)が同じであった領域を印刷文字領域として判定する。印刷文字領域の部分画像データ及びその領域情報を部分画像情報として抽出し、抽出した全ての部分画像情報を含む照合データを生成し、送信元FAX番号に対応付けて保持する。   In step S404, the received image analysis unit 322 determines an area where the respective OCR processing results (character string recognition results) in steps S402 and S403 are the same as a print character area. Partial image data of the print character area and its area information are extracted as partial image information, collation data including all the extracted partial image information is generated, and stored in association with the transmission source FAX number.

ステップS405において、受信画像解析部322が、ステップS401で取得された送信元FAX番号が既に保持されているか否かを判定する。送信元FAX番号が既に保持されていると判定された場合、処理はステップS406に進む。ステップS406において、受信画像解析部322が、ステップS404で生成された照合データを用いて、既存の送信元FAX番号に対応づけて保持されている照合データを更新する。送信元FAX番号が保持されていないと判定された場合、処理はステップS407に進む。ステップS407において、受信画像解析部322が、ステップS404で生成された照合データを送信元FAX番号に対応付けて新規保存する。   In step S405, the received image analysis unit 322 determines whether the transmission source FAX number acquired in step S401 is already held. If it is determined that the transmission source FAX number is already held, the process proceeds to step S406. In step S406, the received image analysis unit 322 updates the collation data held in association with the existing transmission source FAX number using the collation data generated in step S404. If it is determined that the transmission source FAX number is not held, the process proceeds to step S407. In step S407, the received image analysis unit 322 newly stores the collation data generated in step S404 in association with the transmission source FAX number.

図6はFAX送信する際に、UI制御部324が操作部220に表示するFAX送信画面600を示す図である。通常、ユーザーは、FAX送信する際、MFP101のスキャナ222に原稿を置き、送信先FAX番号を入力し、図示しないスキャン開始指示用のハードウェアキーを押下する。このことによって、MFP101は、原稿をスキャンしてスキャン画像データを取得し、取得したスキャン画像データを入力された送信先FAX番号にFAX送信する。   FIG. 6 is a diagram showing a FAX transmission screen 600 displayed on the operation unit 220 by the UI control unit 324 when performing FAX transmission. Normally, when sending a fax, the user places an original on the scanner 222 of the MFP 101, inputs a destination FAX number, and presses a hardware key for scan start instruction (not shown). As a result, the MFP 101 scans the document to acquire scan image data, and transmits the acquired scan image data by FAX to the input destination FAX number.

FAX送信画面600において、入力された送信先FAX番号が送信先FAX番号入力エリア601に表示される。複数の送信先にFAX送信する場合は、入力された送信先FAX番号のリストは送信先FAX番号リストエリア602に表示される。また、ユーザーは、送信先FAX番号を入力する際にはハードウェアキーで番号を直接押下するのではなく、予めアドレス帳に登録された番号から選択することも可能である。ユーザーがアドレス帳から登録された番号を選択する際には、アドレス帳呼び出しボタン603を押下することによって、アドレス帳が表示される。   On the FAX transmission screen 600, the input transmission FAX number is displayed in the transmission FAX number input area 601. When FAX transmission is performed to a plurality of transmission destinations, a list of input destination FAX numbers is displayed in the transmission destination FAX number list area 602. In addition, when inputting the destination FAX number, the user can select from numbers registered in the address book in advance, instead of directly pressing the number with the hardware key. When the user selects a registered number from the address book, the address book is displayed by pressing an address book call button 603.

また、図6におけるボタン604〜609はそれぞれスキャン実行時のパラメータを設定するためのボタンである。解像度設定ボタン604は解像度を設定するUIを表示するためのボタンである。原稿サイズ設定ボタン605は原稿サイズを設定するUIを表示するためのボタンである。濃度設定ボタン606は原稿の濃度を設定するUIを表示するためのボタンである。両面原稿設定ボタン607は両面原稿または片面原稿であるかを設定するUIを表示するためのボタンである。原稿サイズ混載設定ボタン608は原稿サイズ混載モードであるか否かを設定するUIを表示するためのボタンである。その他機能ボタン609はその他機能を設定するUIを表示するためのボタンである。原稿に合わせてスキャン実行時のデフォルト設定を変更したい場合、ユーザーはボタン604〜609のそれぞれを押下し、設定変更を行う。   Further, buttons 604 to 609 in FIG. 6 are buttons for setting parameters at the time of scanning. A resolution setting button 604 is a button for displaying a UI for setting the resolution. A document size setting button 605 is a button for displaying a UI for setting a document size. A density setting button 606 is a button for displaying a UI for setting the density of the document. A double-sided original setting button 607 is a button for displaying a UI for setting whether the original is a double-sided original or a single-sided original. A document size mixed loading button 608 is a button for displaying a UI for setting whether or not the document size mixed loading mode is set. The other function button 609 is a button for displaying a UI for setting other functions. When the user wants to change the default setting at the time of scanning according to the document, the user presses each of the buttons 604 to 609 to change the setting.

通常、FAX送信する際にユーザーは図6のFAX送信画面600で宛先の入力を行うが、本実施形態ではMFP101が受信時の送信元FAX番号を特定し、返信先FAX番号として設定するので、ユーザーによる宛先の入力が不要になる。すなわち、ユーザーが宛先を入力せず、MFP101に原稿を置き、図示しないスキャン開始指示用のハードウェアキーを押下する。ただし、MFP101が受信時の送信元FAX番号を特定できていない場合、後述の返信先入力画面900を表示する。   Normally, when performing FAX transmission, the user inputs a destination on the FAX transmission screen 600 in FIG. 6, but in this embodiment, the MFP 101 specifies the transmission source FAX number at the time of reception and sets it as a reply destination FAX number. The user does not need to input a destination. That is, the user places an original on the MFP 101 without inputting a destination and presses a hardware key for scan start instruction (not shown). However, if the MFP 101 cannot identify the transmission source FAX number at the time of reception, a reply destination input screen 900 described later is displayed.

図7は、本実施形態においてMFP101がFAX送信する際の動作を説明するフローチャートである。図7のフローチャートに示す各動作(ステップ)は、MFP101のCPU211がHDD214などに記憶された制御プログラムを実行することにより実現される。   FIG. 7 is a flowchart illustrating an operation when the MFP 101 performs FAX transmission in this embodiment. Each operation (step) shown in the flowchart of FIG. 7 is realized by the CPU 211 of the MFP 101 executing a control program stored in the HDD 214 or the like.

ステップS700において、UI制御部324が、ユーザーによるスキャン開始指示操作(ハードウェアキー押下)をトリガとして、画像読み取り部314にスキャン開始指示を出す。画像読み取り部314はスキャン開始指示を受け取ると、スキャナI/F217を介してスキャナ222を制御し、スキャナ222が原稿を読み取ることでスキャン画像データを取得する。ここで、読み取り対象となる原稿は、FAX受信時に印刷された受信原稿を基に作成された返送原稿である。次に画像読み取り部314は取得したスキャン画像データをスキャン画像解析部325に渡す。   In step S <b> 700, the UI control unit 324 issues a scan start instruction to the image reading unit 314 using a user's scan start instruction operation (hardware key press) as a trigger. When the image reading unit 314 receives the scan start instruction, the image reading unit 314 controls the scanner 222 via the scanner I / F 217, and the scanner 222 reads the document to acquire scan image data. Here, the original to be read is a return original created based on the received original printed at the time of FAX reception. Next, the image reading unit 314 passes the acquired scan image data to the scan image analysis unit 325.

ステップS701において、スキャン画像解析部325が、画像読み取り部314から受け取ったスキャン画像データに対して印刷文字OCR処理を行うことで、スキャン画像データに含まれる1つ以上の文字列を認識し、それぞれの文字列の領域情報を抽出する。   In step S <b> 701, the scan image analysis unit 325 recognizes one or more character strings included in the scan image data by performing print character OCR processing on the scan image data received from the image reading unit 314. Extract the region information of the character string.

ステップS702において、スキャン画像解析部325が、画像読み取り部314から受け取ったスキャン画像データに対して手書き文字OCR処理を行うことで、ステップS701で抽出された領域情報が示した領域内の文字列を認識する。   In step S702, the scan image analysis unit 325 performs handwritten character OCR processing on the scan image data received from the image reading unit 314, so that the character string in the region indicated by the region information extracted in step S701 is obtained. recognize.

ステップS703において、スキャン画像解析部325が、ステップS701とステップS702のそれぞれのOCR処理結果(文字列認識結果)が同じであった領域を印刷文字領域として判定する。印刷文字領域の部分画像データ及びその領域情報を部分画像情報として抽出し、抽出した全ての部分画像情報を含む被照合データを生成する。   In step S703, the scan image analysis unit 325 determines an area where the OCR processing results (character string recognition results) in steps S701 and S702 are the same as a print character area. Partial image data of the print character region and its region information are extracted as partial image information, and collated data including all the extracted partial image information is generated.

ステップS704において、スキャン画像解析部325が、ステップS703で生成した被照合データを受信画像解析部322が1つ以上のFAX受信に応じて保持した1つ以上の照合データと比較する。   In step S704, the scan image analysis unit 325 compares the verification data generated in step S703 with one or more verification data held by the reception image analysis unit 322 in response to one or more FAX receptions.

ステップS705において、スキャン画像解析部325が、ステップS704の比較結果に基づいて、被照合データと一致した照合データがあるか否かを判定する。一致した照合データがある場合、処理はステップS706に進む。一致した照合データがない場合、スキャン画像解析部325はFAX送信指示部326にスキャン画像データを渡し、処理はステップS710に進む。   In step S705, the scan image analysis unit 325 determines whether there is collation data that matches the data to be collated based on the comparison result in step S704. If there is matching data that matches, the process proceeds to step S706. If there is no matching verification data, the scan image analysis unit 325 passes the scan image data to the FAX transmission instruction unit 326, and the process proceeds to step S710.

ステップS706において、スキャン画像解析部325が、一致した照合データに対応する送信元FAX番号を取得して返信先FAX番号とする。次にスキャン画像解析部325は、FAX送信指示部326にスキャン画像データ及び返信先FAX番号を渡す。   In step S706, the scanned image analysis unit 325 obtains a transmission source FAX number corresponding to the matched collation data and sets it as a reply destination FAX number. Next, the scan image analysis unit 325 passes the scan image data and the reply destination FAX number to the FAX transmission instruction unit 326.

ステップS707において、FAX送信指示部326が、操作部220に図8のような返信先確認画面800(返信先確認情報)を表示するようUI制御部324に指示する。UI制御部324は、操作部220に返信先確認画面800を表示する。次に、UI制御部324は、ユーザーがOKボタン801もしくはキャンセルボタン802のいずれを押下したかの情報(ユーザー操作情報)をFAX送信指示部326に渡す。   In step S <b> 707, the FAX transmission instruction unit 326 instructs the UI control unit 324 to display the reply destination confirmation screen 800 (reply destination confirmation information) as illustrated in FIG. 8 on the operation unit 220. The UI control unit 324 displays a reply destination confirmation screen 800 on the operation unit 220. Next, the UI control unit 324 passes information indicating whether the user has pressed the OK button 801 or the cancel button 802 (user operation information) to the FAX transmission instruction unit 326.

ステップS708において、FAX送信指示部326が、操作部220に図9のような返信先入力画面900(返信先入力情報)を表示するようUI制御部324に指示する。UI制御部324は、操作部220に返信先入力画面900を表示する。このとき、UI制御部324は、OKボタン902を押下不可能状態で表示する。UI制御部324は、図示しないハードウェアキー操作によって返信先FAX番号が入力されると返信先FAX番号入力エリア901に表示するとともに、OKボタン902を押下可能状態にする。UI制御部324は、ユーザーがOKボタン902もしくはキャンセルボタン903のいずれを押下したかの情報(ユーザー操作情報)をFAX送信指示部326に渡す。また、OKボタン902が押下された場合、UI制御部324は入力された返信先FAX番号もFAX送信指示部326に渡す。   In step S708, the FAX transmission instruction unit 326 instructs the UI control unit 324 to display the reply destination input screen 900 (reply destination input information) as shown in FIG. The UI control unit 324 displays a reply destination input screen 900 on the operation unit 220. At this time, the UI control unit 324 displays the OK button 902 in a state where it cannot be pressed. When a reply destination FAX number is input by a hardware key operation (not shown), the UI control unit 324 displays it in the reply destination FAX number input area 901 and makes the OK button 902 pressable. The UI control unit 324 passes information indicating whether the user has pressed the OK button 902 or the cancel button 903 (user operation information) to the FAX transmission instruction unit 326. When the OK button 902 is pressed, the UI control unit 324 also passes the input reply destination FAX number to the FAX transmission instruction unit 326.

ステップS709において、FAX送信指示部326が、UI制御部324から受け取ったユーザー操作情報に基づいて、送信指示の有無を判定する。ユーザーがOKボタン801またはOKボタン902を押下した場合は送信指示があったと判定し、処理はステップS709に進む。ユーザーがキャンセルボタン802またはキャンセルボタン903を押下した場合は送信がキャンセルされたと判定し、一連の処理を終了する。   In step S <b> 709, the FAX transmission instruction unit 326 determines whether there is a transmission instruction based on the user operation information received from the UI control unit 324. If the user presses the OK button 801 or the OK button 902, it is determined that there is a transmission instruction, and the process proceeds to step S709. When the user presses the cancel button 802 or the cancel button 903, it is determined that the transmission has been canceled, and the series of processing ends.

ステップS710において、FAX送信指示部326が、FAX送信部315にスキャン画像データ及び返信先FAX番号を渡す。FAX送信部315は、FAX送信指示部326から受け取ったスキャン画像データを返信先FAX番号にFAX送信するようモデムI/F218を介してモデム223を制御する。   In step S <b> 710, the FAX transmission instruction unit 326 passes the scan image data and the reply destination FAX number to the FAX transmission unit 315. The FAX transmission unit 315 controls the modem 223 via the modem I / F 218 so that the scanned image data received from the FAX transmission instruction unit 326 is FAX-transmitted to the reply destination FAX number.

以上説明した通り、本実施形態ではFAX文書受信時に受信画像データから複数のOCR処理を用いて照合データを生成し、送信元FAX番号に対応付けて保持する。さらに、送信時には返送原稿のスキャン画像データから同様に複数のOCR処理を用いて被照合データを生成する。送信時に生成された被照合データと受信時に保持された照合データを比較し、一致した照合データからその送信元FAX番号を特定する。そして、特定された送信元FAX番号を返信先FAX番号として扱う。   As described above, in this embodiment, collation data is generated from received image data using a plurality of OCR processes when a FAX document is received, and is stored in association with the transmission source FAX number. Further, at the time of transmission, data to be verified is generated from the scanned image data of the returned document similarly using a plurality of OCR processes. The verification target data generated at the time of transmission and the verification data held at the time of reception are compared, and the transmission source FAX number is specified from the matching verification data. Then, the specified transmission source FAX number is handled as a reply destination FAX number.

本実施形態によれば、返送原稿における加筆や訂正する量に拘わらず、ユーザーによる操作負担を軽減しつつ、誤送信の発生を抑えることが可能となる。   According to the present embodiment, it is possible to reduce the occurrence of erroneous transmission while reducing the operation burden on the user regardless of the amount of correction or correction in the returned document.

なお、本実施形態の説明では、手書き以外の文字列領域を特定する部分画像データ及びその領域情報を部分画像情報として抽出したが、部分画像データはこれに限定されない。例えば、手書き以外の文字列領域についてヒストグラムや特徴量を示したベクトルのようなデータを部分画像情報として抽出してもよい。また、OCR処理によって抽出された文字列領域は、1文字でも良いし文字列を含む領域であればどのような大きさでも構わない。   In the description of the present embodiment, partial image data specifying a character string region other than handwriting and the region information are extracted as partial image information, but the partial image data is not limited to this. For example, data such as a vector indicating a histogram or a feature amount for a character string region other than handwriting may be extracted as partial image information. The character string area extracted by the OCR process may be one character or any size as long as it includes the character string.

また、本実施形態の説明では、受信画像データから部分画像情報を抽出する処理とスキャン画像データから部分画像情報を抽出する処理はそれぞれ受信画像解析部322とスキャン画像解析部325で行うが、これに限定されない。部分画像情報を抽出する処理は共通の画像解析部で行ってもよい。なお、この場合の共通の画像解析部は、受信画像解析部322及びスキャン画像解析部325と別の処理部として構成されてもよい。または、受信画像解析部322、スキャン画像解析部325のいずれの内部に構成されてもよい。   In the description of the present embodiment, the process of extracting the partial image information from the received image data and the process of extracting the partial image information from the scanned image data are performed by the received image analyzing unit 322 and the scanned image analyzing unit 325, respectively. It is not limited to. The process of extracting the partial image information may be performed by a common image analysis unit. In this case, the common image analysis unit may be configured as a processing unit different from the received image analysis unit 322 and the scan image analysis unit 325. Alternatively, it may be configured inside either the received image analysis unit 322 or the scan image analysis unit 325.

また、本実施形態の説明では、照合データの保存先については記載されていないが、メモリ上、HDD、データベースや外部ファイルサーバのどのような保存先としてもよい。   In the description of the present embodiment, the storage location of the collation data is not described, but any storage location in the memory, HDD, database, or external file server may be used.

また、本実施形態の説明では、返信先確認画面800で確認のみを行うようなユーザーインターフェースを説明したが、返信先FAX番号を入力し、返信先FAX番号を変更できるようにしてもよい。   Further, in the description of the present embodiment, a user interface that performs only confirmation on the reply destination confirmation screen 800 has been described. However, a reply destination FAX number may be input to change the reply destination FAX number.

<第2の実施形態>
第1の実施形態において送信時に生成された被照合データと受信時に保持された照合データを比較して被照合データと一致した照合データを見つけ出し、一致した照合データに対応する送信元FAX番号を特定し、返信先FAX番号として設定する。本実施形態では、被照合データと一致した1つの照合データではなく、一致度が閾値を超える1つ以上の照合データを見つけ出し、見つけ出した照合データからそれらに対応する送信元FAX番号を特定して、返信先FAX番号の候補とする。また、第1の実施形態においてFAX送信画面600でユーザーによる返信先FAX番号の入力が不要となる。本実施形態では、返信先FAX番号はFAX送信画面600でユーザーによって入力され、入力された返信先FAX番号が返信先FAX番号の候補とともに後述の返信先選択画面1100でユーザーに提示される。なお、その他の構成について第1の実施形態で説明したものと同様であるため説明は省略する。
<Second Embodiment>
In the first embodiment, the collation data generated at the time of transmission and the collation data held at the time of reception are compared to find the collation data that matches the collation data, and the source FAX number corresponding to the matching collation data is specified. And set as a reply destination FAX number. In the present embodiment, one or more pieces of matching data whose matching degree exceeds a threshold value are found instead of one piece of matching data that matches the data to be matched, and the transmission source FAX number corresponding to them is identified from the found matching data. , A candidate for a reply destination FAX number. In the first embodiment, the user does not need to input a reply FAX number on the FAX transmission screen 600. In this embodiment, the reply destination FAX number is input by the user on the FAX transmission screen 600, and the input reply destination FAX number is presented to the user on the reply destination selection screen 1100 described later together with the reply destination FAX number candidates. Since other configurations are the same as those described in the first embodiment, description thereof will be omitted.

以下、図6、10、11を参照して本実施形態を説明する。本実施形態において、ユーザーはFAX送信する際に、MFP101のスキャナ222に原稿を置き、図6に示すFAX送信画面600上で返信先FAX番号を入力し、図示しないスキャン開始指示用のハードウェアキーを押下する。このことに応じて、MFP101のFAX送信処理が開始する。   Hereinafter, the present embodiment will be described with reference to FIGS. In the present embodiment, when sending a fax, the user places a document on the scanner 222 of the MFP 101, inputs a reply destination FAX number on the FAX transmission screen 600 shown in FIG. 6, and a hardware key for scan start instruction (not shown) Press. In response to this, the FAX transmission process of the MFP 101 starts.

図10は、本実施形態においてMFP101がFAX送信する際の動作を説明するフローチャートである。図10のフローチャートに示す各動作(ステップ)は、MFP101のCPU211がHDD214などに記憶された制御プログラムを実行することにより実現される。   FIG. 10 is a flowchart for explaining the operation when the MFP 101 performs FAX transmission in this embodiment. Each operation (step) shown in the flowchart of FIG. 10 is realized by the CPU 211 of the MFP 101 executing a control program stored in the HDD 214 or the like.

ステップS1000において、UI制御部324が、ユーザーによるスキャン開始指示操作(ハードウェアキー押下)をトリガとして、画像読み取り部314にスキャン開始指示を出す。画像読み取り部314はスキャン開始指示を受け取ると、スキャナI/F217を介してスキャナ222を制御し、スキャナ222が原稿を読み取ることでスキャン画像データを取得する。次に画像読み取り部314は取得したスキャン画像データ及びユーザーが入力した返信先FAX番号(入力番号)をスキャン画像解析部325に渡す。   In step S1000, the UI control unit 324 issues a scan start instruction to the image reading unit 314, triggered by a scan start instruction operation (hardware key press) by the user. When the image reading unit 314 receives the scan start instruction, the image reading unit 314 controls the scanner 222 via the scanner I / F 217, and the scanner 222 reads the document to acquire scan image data. Next, the image reading unit 314 passes the acquired scan image data and a reply FAX number (input number) input by the user to the scan image analysis unit 325.

ステップS1001〜ステップS1004において、スキャン画像解析部325がスキャン画像データに対して複数のOCR処理を行うことで被照合データを生成し、生成した被照合データと受信画像解析部322が保持した照合データを比較する。ステップS1001〜ステップS1004における処理の詳細は、それぞれ第1の実施形態で説明したステップS701〜ステップS704と同様であるため説明は省略する。   In steps S <b> 1001 to S <b> 1004, the scan image analysis unit 325 performs a plurality of OCR processes on the scan image data to generate collation data, and the generated collation data and the collation data held by the received image analysis unit 322. Compare The details of the processing in steps S1001 to S1004 are the same as those in steps S701 to S704 described in the first embodiment, and thus description thereof is omitted.

ステップS1005において、スキャン画像解析部325が、被照合データと照合データに含まれる部分画像情報を照合して、被照合データに対して一致度が閾値を超える全ての照合データを見つけ出す。見つけ出された照合データからそれらに対応する送信元FAX番号を特定し、返信先FAX番号の候補(候補番号)としてFAX送信指示部326に渡す。また、スキャン画像解析部325は、スキャン画像データ及び入力番号もFAX送信指示部326に渡す。なお、候補番号は、照合データ内の部分画像情報が一致した数が多い順にソートしていることが好ましい。   In step S <b> 1005, the scan image analysis unit 325 collates the collated data with the partial image information included in the collation data, and finds all collation data whose matching degree exceeds the threshold with respect to the collated data. The transmission source FAX numbers corresponding to them are identified from the found collation data, and are passed to the FAX transmission instruction unit 326 as a reply destination FAX number candidate (candidate number). Further, the scan image analysis unit 325 also passes the scan image data and the input number to the FAX transmission instruction unit 326. The candidate numbers are preferably sorted in descending order of the number of matching partial image information in the collation data.

ステップS1006において、FAX送信指示部326が、操作部220に図11のような返信先選択画面1100(返信先選択情報)を表示するようUI制御部324に指示する。UI制御部324は、操作部220に返信先選択画面1100を表示する。このとき、UI制御部324は、入力番号と候補番号を宛先選択リスト1101に表示、送信ボタン1103を押下不可能状態で表示する。宛先選択リスト1101は、リストボックスになっており、ユーザーはいずれかの項目を選択することによって最終的な返信先FAX番号を指定する。UI制御部324は、ユーザーが項目を選択することに応じて送信ボタン1103を押下可能状態にする。次に、UI制御部324は、ユーザーが送信ボタン1103またはキャンセルボタン1104のいずれを押下したかの情報(ユーザ操作情報)をFAX送信指示部326に渡す。また、送信ボタン1103が押下された場合、UI制御部324はユーザーが返信先選択画面1100で指定した返信先FAX番号(指定番号)もFAX送信指示部326に渡す。   In step S1006, the FAX transmission instruction unit 326 instructs the UI control unit 324 to display the reply destination selection screen 1100 (reply destination selection information) as shown in FIG. The UI control unit 324 displays a reply destination selection screen 1100 on the operation unit 220. At this time, the UI control unit 324 displays the input number and the candidate number in the destination selection list 1101 and displays the transmission button 1103 in a state where the transmission button 1103 cannot be pressed. The destination selection list 1101 is a list box, and the user specifies a final reply destination FAX number by selecting any item. The UI control unit 324 enables the transmission button 1103 to be pressed in response to the user selecting an item. Next, the UI control unit 324 passes information indicating whether the user has pressed the transmission button 1103 or the cancel button 1104 (user operation information) to the FAX transmission instruction unit 326. When the send button 1103 is pressed, the UI control unit 324 also passes the reply destination FAX number (specified number) designated by the user on the reply destination selection screen 1100 to the fax transmission instruction unit 326.

ステップS1007において、FAX送信指示部326が、UI制御部324から受け取ったユーザー操作情報に基づいて、送信指示の有無を判定する。ユーザーが送信ボタン1103を押下した場合は送信指示があったと判定し、処理はステップS1008に進む。ユーザーがキャンセルボタン1104を押下した場合は送信がキャンセルされたと判定し、一連の処理を終了する。   In step S <b> 1007, the FAX transmission instruction unit 326 determines whether there is a transmission instruction based on the user operation information received from the UI control unit 324. If the user presses the transmission button 1103, it is determined that there is a transmission instruction, and the process proceeds to step S1008. When the user presses the cancel button 1104, it is determined that the transmission has been canceled, and the series of processing ends.

ステップS1008において、FAX送信指示部326が、FAX送信部315にスキャン画像データと指定番号を渡す。FAX送信部315は、FAX送信指示部326から受け取ったスキャン画像データを指定番号にFAX送信するようモデムI/F218を介してモデム223を制御する。   In step S <b> 1008, the FAX transmission instruction unit 326 passes the scan image data and the specified number to the FAX transmission unit 315. The FAX transmission unit 315 controls the modem 223 via the modem I / F 218 so that the scanned image data received from the FAX transmission instruction unit 326 is FAX-transmitted to a designated number.

以上説明した通り、本実施形態ではFAX文書受信時に受信画像データから複数のOCR処理を用いて照合データを生成し、送信元FAX番号に対応付けて保持する。さらに、FAX送信時には返送原稿のスキャン画像データから同様に複数のOCR処理を用いて被照合データを生成する。送信時に生成された被照合データと、FAX受信時に保持された照合データを比較し、被照合データに対して一致度が閾値を超える全ての照合データを見つけ出す。見つけ出された照合データから、それらに対応する送信元FAX番号を特定して返信先FAX番号の候補とする。   As described above, in this embodiment, collation data is generated from received image data using a plurality of OCR processes when a FAX document is received, and is stored in association with the transmission source FAX number. Further, at the time of FAX transmission, the data to be verified is generated from the scanned image data of the returned document similarly using a plurality of OCR processes. The collation data generated at the time of transmission and the collation data held at the time of FAX reception are compared, and all the collation data whose matching degree exceeds the threshold with respect to the collation data are found. From the found collation data, the transmission source FAX number corresponding to them is identified and set as a reply destination FAX number candidate.

なお、本実施形態の説明では、返信先FAX番号の候補を、照合データの中の部分画像情報が一致した数が多い順に表示したが、表示する個数は固定数(例えば10個)までに制限してもよい。   In the description of this embodiment, the reply destination FAX number candidates are displayed in the order of the number of matching partial image information in the collation data, but the number to be displayed is limited to a fixed number (for example, 10). May be.

また、本実施形態の説明では、返信先FAX番号の候補を、照合データの中の部分画像情報が一致した数が多い順に表示したが、一致した数に閾値を設けて、閾値を超える返信先FAX番号の候補をリスト上に表示してもよい。閾値を超えるものが1つもない場合、返信先入力画面900のような画面を表示してもよい。   Further, in the description of the present embodiment, the reply destination FAX number candidates are displayed in the descending order of the number of matching partial image information in the collation data. Fax number candidates may be displayed on the list. If there is no item exceeding the threshold, a screen such as the reply destination input screen 900 may be displayed.

また、本実施形態の説明では、返信先FAX番号の候補のリストを表示したが、加えて照合で不一致となった箇所を表示するような確認画面を表示するようにしてもよい。   In the description of the present embodiment, a list of reply destination FAX number candidates is displayed. In addition, a confirmation screen may be displayed to display a portion that does not match in the collation.

また、本実施形態の説明では、返信先選択画面1100で選択のみを行うようなユーザーインターフェースを説明したが、返信先FAX番号を入力し、返信先FAX番号を変更できるようにしてもよい。   In the description of the present embodiment, a user interface in which only selection is performed on the reply destination selection screen 1100 has been described. However, a reply destination FAX number may be input to change the reply destination FAX number.

<他の実施形態>
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
<Other embodiments>
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

101 MFP
321 受信画像取得部
322 受信画像解析部
323 印刷指示部
324 UI制御部
325 スキャン画像解析部
326 FAX送信指示部
101 MFP
321 Received image acquisition unit 322 Received image analysis unit 323 Print instruction unit 324 UI control unit 325 Scanned image analysis unit 326 FAX transmission instruction unit

Claims (12)

FAX受信時に印刷された受信原稿を基に作成された返送原稿をFAX送信するための情報処理装置であって、
FAX受信した画像データ及び前記画像データの送信元を取得する受信画像取得手段と、
手書き以外の文字列領域についての情報である部分画像情報を、前記画像データを解析することで前記画像データから抽出し、抽出した該部分画像情報を前記送信元に対応付けて保存手段に保持する受信画像解析手段と、
前記返送原稿を読み取ることで得られたスキャン画像データを取得し、前記スキャン画像データを解析することで前記スキャン画像データから部分画像情報を抽出し、当該スキャン画像データから抽出した該部分画像情報を前記保存手段に保持されている前記部分画像情報と比較し、比較結果に基づいて前記返送原稿の返信先を取得するスキャン画像解析手段と
を有することを特徴とする情報処理装置。
An information processing apparatus for FAX sending a return original created based on a received original printed at the time of FAX reception,
Received image acquisition means for acquiring FAX received image data and a transmission source of the image data;
Partial image information, which is information about a character string region other than handwriting, is extracted from the image data by analyzing the image data, and the extracted partial image information is associated with the transmission source and held in the storage unit Received image analysis means;
Scan image data obtained by reading the return document is acquired, and the partial image information is extracted from the scan image data by analyzing the scan image data, and the partial image information extracted from the scan image data is An information processing apparatus comprising: a scan image analysis unit that compares the partial image information stored in the storage unit and acquires a return destination of the return document based on a comparison result.
前記受信画像解析手段及び前記スキャン画像解析手段は、それぞれ前記画像データ及び前記スキャン画像データに対して複数の異なる解析処理を行って、処理結果が同じである文字列領域についての情報を前記部分画像情報として抽出することを特徴とする請求項1に記載の情報処理装置。   The received image analysis unit and the scan image analysis unit perform a plurality of different analysis processes on the image data and the scan image data, respectively, and send information about character string regions having the same processing result to the partial image. The information processing apparatus according to claim 1, wherein the information processing apparatus is extracted as information. 前記複数の異なる解析処理は、印刷文字認識処理及び手書き文字認識処理を含むことを特徴とする請求項2に記載の情報処理装置。   The information processing apparatus according to claim 2, wherein the plurality of different analysis processes include a print character recognition process and a handwritten character recognition process. 前記部分画像情報は、文字列領域における部分画像データ及び領域情報を含むことを特徴とする請求項1乃至3のいずれか1項に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the partial image information includes partial image data and region information in a character string region. 前記受信画像解析手段は、FAX受信した前記画像データから1つ以上の前記部分画像情報を抽出し、抽出した1つ以上の前記部分画像情報を照合データとして前記保存手段に保持し、
前記スキャン画像解析手段は、前記スキャン画像データから1つ以上の前記部分画像情報を抽出し、抽出した1つ以上の前記部分画像情報を被照合データとして前記保存手段に保持されている前記照合データと比較することを特徴とする請求項1乃至4のいずれか1項に記載の情報処理装置。
The received image analysis means extracts one or more pieces of partial image information from the image data received by FAX, and holds the extracted one or more pieces of partial image information as collation data in the storage means,
The scan image analysis unit extracts one or more pieces of partial image information from the scan image data, and the collation data held in the storage unit as the collated data includes one or more pieces of the extracted partial image information. The information processing apparatus according to claim 1, wherein the information processing apparatus is compared with the information processing apparatus.
前記受信画像解析手段は、前記比較結果によって、前記被照合データと一致した前記照合データがある場合に、一致した前記照合データに対応する送信元を前記返信先として取得することを特徴とする請求項5に記載の情報処理装置。   The received image analysis means acquires, as the reply destination, a transmission source corresponding to the matched collation data when there is the collation data that matches the collated data based on the comparison result. Item 6. The information processing device according to Item 5. 前記被照合データと一致した前記照合データがある場合に、ユーザーに前記返信先を確認するための情報を表示する手段をさらに有すること特徴とする請求項6に記載の情報処理装置。   The information processing apparatus according to claim 6, further comprising: means for displaying information for confirming the reply destination to a user when there is the collation data that matches the collation data. 前記被照合データと一致した前記照合データがない場合に、ユーザーに前記返信先を入力するための情報を表示する手段をさらに有すること特徴とする請求項6または7に記載の情報処理装置。   8. The information processing apparatus according to claim 6, further comprising means for displaying information for inputting a reply destination to a user when there is no matching data that matches the data to be verified. 前記受信画像解析手段は、前記比較結果によって、前記被照合データに対して一致度が所定の閾値を超える1つ以上の前記照合データを判定し、前記1つ以上の前記照合データに対応する1つ以上の返信先を取得し、
前記情報処理装置は、返信先選択情報として前記1つ以上の返信先を前記照合データ内の前記部分画像情報が一致した数が多い順に表示する手段をさらに有すること特徴とする請求項5に記載の情報処理装置。
The received image analysis means determines one or more pieces of the matching data whose degree of coincidence with the data to be matched exceeds a predetermined threshold based on the comparison result, and corresponds to the one or more pieces of the matching data. Get at least one reply
6. The information processing apparatus according to claim 5, further comprising means for displaying the one or more reply destinations as reply destination selection information in descending order of the number of matches of the partial image information in the collation data. Information processing device.
FAX受信時に印刷された受信原稿を基に作成された返送原稿をFAX送信するための情報処理装置であって、
手書き以外の文字列領域についての情報である部分画像情報を、画像データを解析することで抽出する画像解析手段と、
FAX受信した画像データから前記画像解析手段を用いて部分画像情報を抽出し、当該抽出した部分画像情報を前記FAX受信した画像データの送信元に対応付けて保存手段に保持する手段と、
前記返送原稿を読み取ることで得られたスキャン画像データから前記画像解析手段を用いて部分画像情報を抽出し、当該スキャン画像データから抽出した部分画像情報を、前記保存手段に保持されている前記部分画像情報と比較し、比較結果に基づいて前記返送原稿の返信先を取得する手段と
を有することを特徴とする情報処理装置。
An information processing apparatus for FAX sending a return original created based on a received original printed at the time of FAX reception,
Image analysis means for extracting partial image information, which is information about a character string region other than handwriting, by analyzing image data;
Means for extracting partial image information from the image data received by FAX using the image analysis means, and storing the extracted partial image information in a storage means in association with the transmission source of the image data received by FAX;
The partial image information is extracted from the scanned image data obtained by reading the returned document using the image analysis unit, and the partial image information extracted from the scanned image data is stored in the storage unit. An information processing apparatus comprising: means for comparing with image information and acquiring a return destination of the return document based on a comparison result.
FAX受信時に印刷された受信原稿を基に作成された返送原稿をFAX送信するための情報処理方法であって、
FAX受信した画像データ及び前記画像データの送信元を取得する受信画像取得工程と、
手書き以外の文字列領域についての情報である部分画像情報を、前記画像データを解析することで前記画像データから抽出し、抽出した該部分画像情報を前記送信元に対応付けて保存手段に保持する受信画像解析工程と、
前記返送原稿を読み取ることで得られたスキャン画像データを取得し、前記スキャン画像データを解析することで前記スキャン画像データから部分画像情報を抽出し、当該スキャン画像データから抽出した該部分画像情報を前記保存手段に保持されている前記部分画像情報と比較し、比較結果に基づいて前記返送原稿の返信先を取得するスキャン画像解析工程と
を含むことを特徴とする情報処理方法。
An information processing method for FAX sending a return document created based on a received document printed at the time of FAX reception,
A received image acquisition step of acquiring FAX received image data and a transmission source of the image data;
Partial image information, which is information about a character string region other than handwriting, is extracted from the image data by analyzing the image data, and the extracted partial image information is associated with the transmission source and held in the storage unit Received image analysis process;
Scan image data obtained by reading the return document is acquired, and the partial image information is extracted from the scan image data by analyzing the scan image data, and the partial image information extracted from the scan image data is A scan image analysis step of comparing the partial image information held in the storage unit and acquiring a return destination of the return document based on a comparison result.
コンピュータを、請求項1乃至10に記載の情報処理装置の各手段として機能させるためのプログラム。   A program for causing a computer to function as each unit of the information processing apparatus according to claim 1.
JP2016020728A 2016-02-05 2016-02-05 Information processing unit, information processing method, and program Pending JP2017139693A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016020728A JP2017139693A (en) 2016-02-05 2016-02-05 Information processing unit, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016020728A JP2017139693A (en) 2016-02-05 2016-02-05 Information processing unit, information processing method, and program

Publications (1)

Publication Number Publication Date
JP2017139693A true JP2017139693A (en) 2017-08-10

Family

ID=59565100

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016020728A Pending JP2017139693A (en) 2016-02-05 2016-02-05 Information processing unit, information processing method, and program

Country Status (1)

Country Link
JP (1) JP2017139693A (en)

Similar Documents

Publication Publication Date Title
US11729339B2 (en) Image forming apparatus, method for controlling image forming apparatus, and storage medium
EP1742165B1 (en) Data processing system, data processing apparatus, and data processing program product suited for transmitting and receiving data among a plurality of image processing apparatuses
US8755066B2 (en) Image processing apparatus, image processing method, recording medium recorded with image processing program, and image processing system
US10375267B2 (en) Mediation server
US20160277638A1 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
JP6762722B2 (en) Information processing equipment, control methods, and programs
US9965235B2 (en) Multi-function peripheral and non-transitory computer-readable recording medium storing computer-readable instructions causing device to execute workflow
JP2022096218A (en) Information processing apparatus, information processing system, control method for the same, and program
US20200356769A1 (en) Image processing apparatus, image processing method, and storage medium
US20060050292A1 (en) Data management device and method, image output device, and computer program product
US9413841B2 (en) Image processing system, image processing method, and medium
US20210014381A1 (en) Image processing system, image processing apparatus, method of controlling the image processing apparatus, and storage medium
JP6686783B2 (en) Image forming system and printing method
JP2021184190A (en) Image processing device, image processing method, and program
JP4558009B2 (en) Image output apparatus, control method therefor, and computer program
JP2020184207A (en) Image processing device, image processing method and program
JP2017139693A (en) Information processing unit, information processing method, and program
US20160072966A1 (en) Non-transitory computer readable medium and image processing device
JP5201222B2 (en) Extension function server, extension function system, method and control program for controlling extension function server
JP7422471B2 (en) Information processing device, control method for information processing device, and program
JP5752347B2 (en) Image forming apparatus, image processing method, and program
JP2017118379A (en) Facsimile equipment, control method for facsimile equipment, and program
JP6657994B2 (en) Program, mobile terminal, and system
JP6724386B2 (en) Program, mobile terminal, and system
JP2020135022A (en) Image processor, image processing method, and program