JP4754236B2 - Information processing apparatus, acquisition method, and acquisition program - Google Patents

Information processing apparatus, acquisition method, and acquisition program Download PDF

Info

Publication number
JP4754236B2
JP4754236B2 JP2005044503A JP2005044503A JP4754236B2 JP 4754236 B2 JP4754236 B2 JP 4754236B2 JP 2005044503 A JP2005044503 A JP 2005044503A JP 2005044503 A JP2005044503 A JP 2005044503A JP 4754236 B2 JP4754236 B2 JP 4754236B2
Authority
JP
Japan
Prior art keywords
document
electronic document
information
unit
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005044503A
Other languages
Japanese (ja)
Other versions
JP2006229874A (en
JP2006229874A5 (en
Inventor
崇之 原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2005044503A priority Critical patent/JP4754236B2/en
Publication of JP2006229874A publication Critical patent/JP2006229874A/en
Publication of JP2006229874A5 publication Critical patent/JP2006229874A5/ja
Application granted granted Critical
Publication of JP4754236B2 publication Critical patent/JP4754236B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Analysis (AREA)

Description

本発明は、情報処理装置、情報処理方法、情報処理プログラム、コンピュータに読み取り可能な記録媒体及び情報処理システムに関するものであり、特に画像に付加された埋込情報に含まれている情報を用いて電子文書を取得する技術に関するものである。   The present invention relates to an information processing apparatus, an information processing method, an information processing program, a computer-readable recording medium, and an information processing system, and particularly using information included in embedded information added to an image. The present invention relates to a technique for acquiring an electronic document.

近年、コンピュータ関連技術の発達と共にオフィスのペーパレス化が進みつつある。このため、会議や打合せにおいて他の人に配布する紙文書も予めコンピュータで作成した電子文書をプリンタ等で出力したものであることが多い。   In recent years, with the development of computer-related technologies, offices are becoming paperless. For this reason, paper documents distributed to other people at meetings and meetings are often electronic documents created in advance by a computer and output by a printer or the like.

そして、紙文書を配布された利用者が元になった電子文書を直接モニタ上で参照したい場合も多く、紙文書から電子文書を取得する技術として種々のものが提案されている(例えば、特許文献1)。   In many cases, a user to whom a paper document is distributed wants to refer directly to the electronic document on the monitor, and various techniques for acquiring the electronic document from the paper document have been proposed (for example, patents). Reference 1).

また、紙文書に利用者がペン等で追記した情報に基づいて関連する情報を取得する技術として種々のものが提案されている(例えば特許文献2)。   Various techniques for acquiring related information based on information added by a user with a pen or the like to a paper document have been proposed (for example, Patent Document 2).

特開2002−351877号公報JP 2002-351877 A 特開平10−228468号公報Japanese Patent Laid-Open No. 10-228468

しかしながら、特許文献1に示した発明では、電子文書を取得する技術に留まっており、利用者がペン等で紙文書に追記した事柄に基づいて装置に対して所定の処理を要求できないという問題がある。   However, the invention disclosed in Patent Document 1 is limited to a technique for acquiring an electronic document, and there is a problem that a predetermined process cannot be requested from the apparatus based on a matter that a user adds to a paper document with a pen or the like. is there.

一方、特許文献2では、ペン等で追記した場合、対応する電子文書と比較して差分を抽出して関連する情報を取得しているが、差分を抽出するために予め電子文書を取得している必要があるという問題がある。また、画像と取得した電子文書の差分を比較する場合、ハードウェアに負荷が掛かるという問題がある。   On the other hand, in Patent Document 2, when additional writing is performed with a pen or the like, a difference is extracted by comparing with a corresponding electronic document and related information is acquired. In order to extract a difference, an electronic document is acquired in advance. There is a problem that you need to be. Further, when comparing the difference between an image and an acquired electronic document, there is a problem that a load is applied to hardware.

本発明は、上記に鑑みてなされたものであって、追記の有無を容易に判定可能とする情報処理装置、取得方法、及び取得プログラムを提供することを目的とする。 The present invention was made in view of the above, and an object thereof is to provide an information processing apparatus, the method acquiring and obtaining program to readily determinable whether the add serial.

上述した課題を解決し、目的を達成するために、本発明に係る情報処理装置は、電子文書を所定の領域に分割し、分割された領域毎に、該領域の特徴情報及び他の電子文書を特定する文書特定情報が埋め込まれた前記電子文書の画像情報を入力する入力手段と、前記電子文書に埋め込まれていた領域毎の該領域の特徴情報、及び当該領域毎に対応付けられた文書特定情報を抽出する抽出手段と、前記入力手段により入力された前記画像情報から、前記分割された領域毎の特徴情報を取得する特徴情報取得手段と、前記領域毎に、前記抽出手段により抽出された前記特徴情報と、前記特徴情報取得手段により取得された前記特徴情報と、を比較する比較手段と、前記比較手段による比較の結果に基づいて、分割された領域のうち、前記電子文書に対する追記が行われた領域を判断する判断手段と、前記判断手段により追記が行われたと判断された前記領域と対応付けられている前記文書特定情報に基づいて、前記他の電子文書を取得する電子文書取得手段と、を備えることを特徴とする。 To solve the above problems and achieve the object, an information processing apparatus according to the present invention divides an electronic document in a predetermined area, divided for each region, characteristic information and other electronic documents of the region Input means for inputting image information of the electronic document in which document specifying information for specifying the document is embedded, characteristic information of the area for each area embedded in the electronic document , and a document associated with the area Extraction means for extracting specific information , feature information acquisition means for acquiring feature information for each of the divided areas from the image information input by the input means, and extraction for each area by the extraction means wherein the characteristic information, and comparing means for comparing, and the feature information obtained by the feature information obtaining means, based on a comparison result by the comparison means, among the divided regions, the electronic document Against based on the determination means and the document identification information is associated with the region determined to additional recording has been performed by said determining means for determining additional recording is performed regions, acquiring the another electronic document Electronic document acquisition means.

発明によれば、紙文書に対する追記の有無を容易に判定可能になるという効果を奏する。 According to the present invention, there is an effect that it is possible to easily determine whether or not additional writing is performed on a paper document .

以下に添付図面を参照して、この発明にかかる情報処理装置、情報処理システム、情報処理方法、情報処理プログラム、コンピュータに読み取り可能な記録媒体及び情報処理システムの最良な実施の形態を詳細に説明する。   Exemplary embodiments of an information processing apparatus, an information processing system, an information processing method, an information processing program, a computer-readable recording medium, and an information processing system according to the present invention are explained in detail below with reference to the accompanying drawings. To do.

(第1の実施の形態)
第1の実施の形態では情報処理システムが情報処理装置及びMFPで構成されている場合について説明する。そして、これらの情報処理システムは、公衆ネットワークを介して埋込文書生成装置と接続されていることとする。
(First embodiment)
In the first embodiment, a case will be described in which the information processing system includes an information processing apparatus and an MFP. These information processing systems are connected to the embedded document generation apparatus via a public network.

図1は、本発明の第1の実施の形態にかかる情報処理装置100、MFP170及び公衆ネットワークを介して接続された埋込文書生成装置150の構成を示すブロック図である。本図に示すように埋込文書生成装置150で生成されたQRコード(登録商標)等の2次元バーコードが付加された紙文書を、MFP170でスキャンした画像を情報処理装置100に出力する。そして、情報処理装置100は入力処理した画像に付加された二次元バーコードに含まれた情報を抽出して、公衆ネットワークを介して埋込文書生成装置150から関連する電子文書を取得する。さらに、情報処理装置100は取得した電子文書をMFP170に送信し、MFP170から印刷処理することも可能とする。また、MFP170に送信する前に情報処理装置100が取得した電子文書に対して予め加工処理等を行うこともできる。   FIG. 1 is a block diagram showing a configuration of an information processing apparatus 100, an MFP 170, and an embedded document generation apparatus 150 connected via a public network according to the first embodiment of the present invention. As shown in the figure, an image obtained by scanning the MFP 170 with a paper document to which a two-dimensional barcode such as a QR code (registered trademark) generated by the embedded document generating apparatus 150 is added is output to the information processing apparatus 100. Then, the information processing apparatus 100 extracts information included in the two-dimensional barcode added to the input processed image, and acquires a related electronic document from the embedded document generation apparatus 150 via the public network. Further, the information processing apparatus 100 can transmit the acquired electronic document to the MFP 170 and perform printing processing from the MFP 170. Further, it is possible to perform processing or the like in advance on the electronic document acquired by the information processing apparatus 100 before being transmitted to the MFP 170.

本図に示すように埋込文書生成装置150の内部は、記憶部151と、対象文書取得部152と、領域分割部153と、関連文書取得部154と、関連文書登録部155と、領域特徴抽出部156と、埋込情報生成部157と、埋込情報付加部158と、埋込文書出力処理部159、通信部160と、関連文書取得部161と、を備え、出力する対象となる電子文書を行毎に分割して、各行の輝度値と各行に対応する関連文書を示す文書IDを対応付けた領域対応情報を含んだ二次元バーコードを生成し、生成した二次元バーコードを電子文書に付加して出力処理を行う。   As shown in the figure, the embedded document generating apparatus 150 includes a storage unit 151, a target document acquisition unit 152, a region division unit 153, a related document acquisition unit 154, a related document registration unit 155, and a region feature. An extraction unit 156, an embedded information generation unit 157, an embedded information addition unit 158, an embedded document output processing unit 159, a communication unit 160, and a related document acquisition unit 161, and an electronic to be output The document is divided for each line, and a two-dimensional barcode including area correspondence information in which the luminance value of each line is associated with the document ID indicating the related document corresponding to each line is generated. Add to the document and perform output processing.

記憶部151は、電子文書及びID文書対応テーブルを記憶する。図2は埋込文書生成装置150が保持するID文書対応テーブルのテーブル構造を示した図である。本図に示すようにID文書対応テーブルは、文書IDと文書ファイル名を対応付けて保持している。これにより文書IDより対応付けられた文書ファイルを特定することができる。   The storage unit 151 stores an electronic document and ID document correspondence table. FIG. 2 is a diagram showing a table structure of the ID document correspondence table held by the embedded document generation apparatus 150. As shown in the figure, the ID document correspondence table holds document IDs and document file names in association with each other. As a result, the document file associated with the document ID can be specified.

対象文書取得部152は、出力する対象となる電子文書を取得する。電子文書の取得先は記憶部151に記憶された電子文書でも良いし、利用者が新たに生成した電子文書でも良い。また、図3で示した処理対象電子文書301を取得した場合の例について下記で説明していく。なお、図3は、本実施の形態における取得した電子文書から二次元バーコードを付加するまでの概要を示した説明図である。   The target document acquisition unit 152 acquires an electronic document to be output. The electronic document may be acquired from an electronic document stored in the storage unit 151 or an electronic document newly generated by the user. An example in which the processing target electronic document 301 shown in FIG. 3 is acquired will be described below. FIG. 3 is an explanatory diagram showing an outline from the acquired electronic document to the addition of a two-dimensional barcode in the present embodiment.

図1に戻り、領域分割部153は、取得した電子文書を行毎に分割を行う。図3の302で示したように分割した行毎に領域が設定されたこととする。   Returning to FIG. 1, the area dividing unit 153 divides the acquired electronic document line by line. Assume that an area is set for each divided line as indicated by 302 in FIG.

関連文書取得部154は、分割された領域毎に適した関連する電子文書を取得する。行毎の関連した電子文書の取得方法はどのような方法を用いても良く、例えば利用者が行毎に対応する電子文書を設定し、関連文書取得部154が設定された電子文書をネットワーク上又は記憶部151から取得することが考えられる。   The related document acquisition unit 154 acquires a related electronic document suitable for each divided area. Any method may be used for acquiring the electronic document related to each line. For example, the user sets an electronic document corresponding to each line, and the electronic document in which the related document acquisition unit 154 is set is placed on the network. Alternatively, it may be acquired from the storage unit 151.

関連文書登録部155は、取得した関連文書毎に固有の文書IDを割り当て、記憶部151が記憶するID文書対応テーブルに割り当てた文書IDと、関連文書の位置及びファイル名を対応付けて登録する。また、関連文書登録部155は、取得した関連文書を記憶部151に追加する。これにより文書IDを用いてID文書対応テーブルを検索することで、文書IDと対応付けられた関連文書のファイル名を取得でき、記憶部151から関連文書を取得することができる。   The related document registration unit 155 assigns a unique document ID to each acquired related document, and registers the document ID assigned to the ID document correspondence table stored in the storage unit 151 in association with the position and file name of the related document. . Further, the related document registration unit 155 adds the acquired related document to the storage unit 151. Thus, by searching the ID document correspondence table using the document ID, the file name of the related document associated with the document ID can be acquired, and the related document can be acquired from the storage unit 151.

領域特徴抽出部156は、出力する対象となる電子文書において分割された領域である行毎の輝度平均を算出する。この算出された輝度平均が、本発明の特徴情報に相当する。   The area feature extraction unit 156 calculates an average luminance for each line, which is an area divided in the electronic document to be output. This calculated luminance average corresponds to the feature information of the present invention.

埋込情報生成部157は、算出された行毎の輝度平均値、関連文書登録部155で行毎の関連文書として割り当てられた文書IDを対応付けた領域対応情報と、埋込文書生成装置150を特定するURLを含んだ二次元バーコードを生成する。また、埋込情報生成部157は、二次元バーコードに埋込文書生成装置150を特定するURLを含めることとする。これにより関連文書の取得先を特定することができる。図3の303は、二次元バーコードに埋め込む領域対応情報の一例を示したものであり、行番号と、輝度平均と、文書IDが対応付けられていることを把握できる。そして、図3の304が、領域対応情報及び埋込文書生成装置150を特定するURLを含んだ情報から変換された二次元バーコードの一例を示したものである。これにより二次元バーコードが生成されたことになる。   The embedding information generation unit 157 includes the area correspondence information in which the calculated luminance average value for each row, the document ID assigned as the related document for each row in the related document registration unit 155, and the embedded document generation device 150. A two-dimensional bar code including a URL for specifying is generated. The embedded information generation unit 157 includes a URL that identifies the embedded document generation apparatus 150 in the two-dimensional barcode. Thereby, the acquisition source of the related document can be specified. Reference numeral 303 in FIG. 3 shows an example of the area correspondence information embedded in the two-dimensional barcode, and it can be grasped that the line number, the luminance average, and the document ID are associated with each other. 3 shows an example of the two-dimensional barcode converted from the information including the area correspondence information and the URL specifying the embedded document generation apparatus 150. FIG. As a result, a two-dimensional barcode is generated.

図1に戻り、埋込情報付加部158は、生成された二次元バーコードを出力する対象である電子文書に付加する。付加する領域について特に制限はないが、文書の内容が記載されていない領域に付与することが好ましい。図3の305は、埋込情報付加部158で二次元バーコードを付加して生成された電子文書の一例を示したものである。   Returning to FIG. 1, the embedding information adding unit 158 adds the generated two-dimensional barcode to the electronic document to be output. There is no particular limitation on the area to be added, but it is preferable to add it to an area where the contents of the document are not described. 305 in FIG. 3 shows an example of an electronic document generated by adding a two-dimensional barcode by the embedded information adding unit 158.

図1に戻り、埋込文書出力処理部159は、二次元バーコードを付加された電子文書を埋込文書生成装置150に接続されたプリンタ20から紙文書10として出力する処理を行う。これにより二次元バーコードが付加された紙文書10を利用者が取得することができる。   Returning to FIG. 1, the embedded document output processing unit 159 performs processing for outputting the electronic document with the two-dimensional barcode added thereto as the paper document 10 from the printer 20 connected to the embedded document generating apparatus 150. Thereby, the user can acquire the paper document 10 to which the two-dimensional barcode is added.

通信部160は、公衆ネットワーク60に接続され、他の装置との送受信を行う。また、通信部160は、他の装置から文書IDを受信した場合、文書IDを後述する関連文書取得部161に出力し、関連文書取得部161から入力された関連文書を、文書IDを送信した他の装置に送信する。   The communication unit 160 is connected to the public network 60 and performs transmission / reception with other devices. When the communication unit 160 receives a document ID from another device, the communication unit 160 outputs the document ID to the related document acquisition unit 161 described later, and transmits the document ID of the related document input from the related document acquisition unit 161. Send to other devices.

関連文書取得部161は、文書IDを入力された場合、ID文書対応テーブルを用いて文書IDに対応付けられた関連文書を特定し、特定された関連文書を記憶部151から取得して、通信部160に出力する。   When the document ID is input, the related document acquisition unit 161 specifies a related document associated with the document ID using the ID document correspondence table, acquires the specified related document from the storage unit 151, and performs communication. Output to the unit 160.

埋込文書生成装置150は、上述した構成を備えることで、文書の領域毎に輝度値と領域に対応する関連文書を特定する文書IDを対応付けた二次元バーコードを埋め込むことができる。なお、本実施の形態では埋込文書生成装置150が関連文書を特定する情報として文書IDを用いたが、他にもURL等、関連文書を特定する情報であればどのような情報を用いても良い。   With the above-described configuration, the embedded document generation apparatus 150 can embed a two-dimensional barcode in which a luminance value and a document ID that specifies a related document corresponding to the region are associated with each other in the document region. In this embodiment, the document ID is used as information for specifying the related document by the embedded document generation apparatus 150. However, any other information can be used as long as the information specifies the related document such as a URL. Also good.

次にMFP170について説明する。MFP170の内部は、文書読取処理部171と、印刷処理部172と、記憶部173と、電子文書入力処理部174と、画像出力処理部175と、通信部176を備え、埋込文書生成装置150から印刷された紙文書を読み取ることで生成された画像を、情報処理装置100に送信し、さらに情報処理装置100から電子文書を受信した場合は、受信した電子文書の印刷処理又は保存等を行う。   Next, the MFP 170 will be described. The MFP 170 includes a document reading processing unit 171, a print processing unit 172, a storage unit 173, an electronic document input processing unit 174, an image output processing unit 175, and a communication unit 176, and an embedded document generation apparatus 150. When an image generated by reading a paper document printed from the server is transmitted to the information processing apparatus 100 and further received from the information processing apparatus 100, the received electronic document is printed or saved. .

文書読取処理部171は、MFP170に備えられた図示しないスキャナより紙文書10を読み取り、紙文書の内容を保持した画像を取得する。取得した画像は、通信部176を通じて情報処理装置100に出力する。また、取得した画像を記憶部173に記憶しても良いし、印刷処理部172で取得した画像を用いて印刷処理を行うことで複写しても良い。また、紙文書の各行に対応付けられた関連文書を取得したい場合、予め利用者が関連文書を取得したい行に対してペン等を用いて追記している必要がある。そして、文書読取処理部171は、追記された紙文書の読み取りを行うこととする。   The document reading processing unit 171 reads the paper document 10 from a scanner (not shown) provided in the MFP 170 and acquires an image holding the content of the paper document. The acquired image is output to the information processing apparatus 100 through the communication unit 176. Further, the acquired image may be stored in the storage unit 173, or may be copied by performing print processing using the image acquired by the print processing unit 172. In addition, when a related document associated with each line of a paper document is to be acquired, it is necessary for the user to add in advance to the line from which the related document is to be acquired using a pen or the like. Then, the document reading processing unit 171 reads the added paper document.

印刷処理部172は、電子文書又は画像から紙文書として印刷処理を行う。印刷処理に用いられる電子文書又は画像は、情報処理装置100から受信したもの、文書読取処理部171で読み取られたもの又は記憶部173に記憶されていたもの等、どの電子文書又は画像を用いても良い。   The print processing unit 172 performs print processing from an electronic document or an image as a paper document. The electronic document or image used for the printing process is any electronic document or image such as the one received from the information processing apparatus 100, the one read by the document reading processing unit 171 or the one stored in the storage unit 173. Also good.

記憶部173は、電子文書及び画像を記憶する。記憶された電子文書及び画像は、印刷処理部172による印刷処理や、通信部176による情報処理装置100への送信等に用いられる。   The storage unit 173 stores electronic documents and images. The stored electronic document and image are used for print processing by the print processing unit 172, transmission to the information processing apparatus 100 by the communication unit 176, and the like.

画像出力処理部175は、文書読取処理部171で取得した画像又は記憶部173に記憶された画像を後述する通信部176に出力する。そして、電子文書入力処理部174は、通信部176で受信した電子文書の入力処理を行う。   The image output processing unit 175 outputs the image acquired by the document reading processing unit 171 or the image stored in the storage unit 173 to the communication unit 176 described later. Then, the electronic document input processing unit 174 performs input processing of the electronic document received by the communication unit 176.

通信部176は、情報処理装置100との間で送受信を行う。具体的な例としては、画像出力処理部175から入力された画像を情報処理装置100に送信し、情報処理装置100から受信した電子文書を電子文書入力処理部174に出力する。また、情報処理装置100との間の接続は、直接接続しても良いし、専用線又は公衆回線を介して接続しても良い。また、MFP170の接続する装置を情報処理装置100に制限するものではなく、他の装置と送受信を行っても良い。   The communication unit 176 performs transmission / reception with the information processing apparatus 100. As a specific example, the image input from the image output processing unit 175 is transmitted to the information processing apparatus 100, and the electronic document received from the information processing apparatus 100 is output to the electronic document input processing unit 174. Further, the connection with the information processing apparatus 100 may be directly connected, or may be connected via a dedicated line or a public line. Further, the apparatus to which the MFP 170 is connected is not limited to the information processing apparatus 100, and transmission and reception with other apparatuses may be performed.

次に情報処理装置100について説明する。情報処理装置100の内部は、記憶部101と、利用者入力処理部102と、利用者認証部103と、キーワード入力受付部104と、画像入力処理部105と、情報抽出部106と、特徴量取得部107と、判断部108と、電子文書取得部109と、キーワード検索部110と、キーワード領域取得部111と、加工処理部112と、表示処理部113と、出力処理部114と、通信部115と、を備え、受信した画像に基づいて関連文書を取得し、必要に応じて関連文書に対してキーワード検索や加工処理を行い、関連文書の表示、保存又はMFP170への送信を行う。   Next, the information processing apparatus 100 will be described. The information processing apparatus 100 includes a storage unit 101, a user input processing unit 102, a user authentication unit 103, a keyword input reception unit 104, an image input processing unit 105, an information extraction unit 106, and a feature amount. Acquisition unit 107, determination unit 108, electronic document acquisition unit 109, keyword search unit 110, keyword region acquisition unit 111, processing unit 112, display processing unit 113, output processing unit 114, and communication unit 115, and obtains a related document based on the received image, performs keyword search and processing on the related document as necessary, and displays and stores the related document or transmits it to the MFP 170.

記憶部101は、認証情報と、電子文書を記憶する。認証情報は、ユーザIDとパスワードを対応付けて保持している。また、電子文書は、埋込文書生成装置150から受信した関連文書等とする。   The storage unit 101 stores authentication information and an electronic document. The authentication information holds a user ID and a password in association with each other. The electronic document is a related document received from the embedded document generation apparatus 150.

通信部115は、MFP170又は埋込文書生成装置150との間で送受信を行う。具体的な例としては、通信部115は、MFP170との間で画像の受信や、電子文書の送信を行う。また、通信部115は、埋込文書生成装置150との間で文書IDの送信や、電子文書の受信を行う。   The communication unit 115 performs transmission / reception with the MFP 170 or the embedded document generation apparatus 150. As a specific example, the communication unit 115 receives an image and transmits an electronic document with the MFP 170. In addition, the communication unit 115 transmits a document ID and receives an electronic document with the embedded document generation apparatus 150.

利用者入力処理部102は、保存受付手段と出力受付手段とに相当し、利用者がキーボード50等の入力デバイスを用いて入力した情報の処理を行う。具体的な例としては、キーボード等の入力デバイスによる、取得した電子文書を保存する旨を示すアイコン等の選択を処理する。その後、利用者入力処理部102は、保存の確認を促すウィンドウが表示された後に保存しても良いか否かの入力を受け付ける。そして、保存して良い旨を示す情報を入力処理した場合、保存する旨を後述する出力処理部114に出力する。   The user input processing unit 102 corresponds to a storage receiving unit and an output receiving unit, and processes information input by a user using an input device such as the keyboard 50. As a specific example, selection of an icon or the like indicating that the acquired electronic document is to be saved is processed by an input device such as a keyboard. Thereafter, the user input processing unit 102 receives an input as to whether or not to save after a window for prompting confirmation of saving is displayed. When information indicating that it can be stored is input, a message indicating that the information is to be stored is output to the output processing unit 114 described later.

図4は、保存する旨を示すアイコン等が選択された後に表示される保存の確認を促すウィンドウの一例を示した図である。本図に示すようなウィンドウがモニタ40に表示されることで、利用者が保存しても良いか否か入力することができる。   FIG. 4 is a diagram showing an example of a window that prompts confirmation of saving that is displayed after an icon or the like indicating saving is selected. By displaying a window as shown in the figure on the monitor 40, it is possible to input whether or not the user can save the window.

さらに、利用者入力処理部102は、キーボード50等の入力デバイスによる、取得した電子文書をMFP170に出力する旨を示すアイコン等の選択を処理する。その後、利用者入力処理部102は、出力の確認を促すウィンドウが表示された後に出力しても良いか否かの入力を受け付ける。そして、出力して良い旨を示す情報を入力処理した場合、出力する旨を後述する出力処理部114に出力する。この場合も、上述した図4と同様に利用者に確認を求めるウィンドウが表示される。   Further, the user input processing unit 102 processes selection of an icon or the like indicating that the acquired electronic document is output to the MFP 170 by an input device such as the keyboard 50. Thereafter, the user input processing unit 102 receives an input as to whether or not the output may be performed after the window for confirming the output is displayed. When information indicating that the information can be output is input, the information indicating that the information is to be output is output to the output processing unit 114 described later. Also in this case, a window requesting confirmation from the user is displayed in the same manner as in FIG.

また、利用者入力処理部102は、入力デバイスからキーワードを示す文字列を入力処理した場合、キーワードを示す文字列をキーワード入力受付部104に出力する。さらに、入力デバイスからユーザID及びパスワードを入力処理した場合、ユーザID及びパスワードを利用者認証部103に出力する。   In addition, when a character string indicating a keyword is input from the input device, the user input processing unit 102 outputs a character string indicating the keyword to the keyword input receiving unit 104. Further, when the user ID and password are input from the input device, the user ID and password are output to the user authentication unit 103.

利用者認証部103は、利用者入力処理部102から入力されたユーザID及びパスワードと、記憶部101の認証情報で対応付けて保持されているユーザIDとパスワードが一致するか否かにより利用者の認証を行う。なお、本実施の形態では利用者の認証はパスワードによる認証を用いるが、本発明の認証方法としてはどのような認証方法を用いても良い。なお、利用者認証部103による認証処理は情報処理装置100に対して最初にログインする際に行われることとする。   The user authentication unit 103 determines whether the user ID and password input from the user input processing unit 102 and the user ID and password stored in association with the authentication information in the storage unit 101 match each other. Authenticate. In this embodiment, password authentication is used for user authentication, but any authentication method may be used as the authentication method of the present invention. Note that authentication processing by the user authentication unit 103 is performed when the information processing apparatus 100 is first logged in.

キーワード入力受付部104は、文字列入力受付手段に相当し、利用者入力処理部102から入力されたキーワードを示す文字列を受け付ける。そして、キーワード入力受付部104は、キーワードを示す文字列を受け付けた場合は、後述する電子文書取得部109で取得した関連文書を示す電子文書に対して、後述するキーワード検索部110でキーワードの検索が行われる。また、キーワードの入力の受付はキーボード50等の情報処理装置100に備えられた入力デバイスからの入力に制限するものではなく、例えばMFP170の液晶タッチパネルあるいは音声認識装置からの入力等でも良い。   The keyword input receiving unit 104 corresponds to a character string input receiving unit, and receives a character string indicating a keyword input from the user input processing unit 102. When the keyword input accepting unit 104 accepts a character string indicating a keyword, the keyword search unit 110 (to be described later) searches for a keyword with respect to the electronic document indicating the related document acquired by the electronic document acquiring unit 109 (to be described later). Is done. The keyword input reception is not limited to input from an input device provided in the information processing apparatus 100 such as the keyboard 50, and may be input from a liquid crystal touch panel of the MFP 170 or a voice recognition apparatus, for example.

画像入力処理部105は、通信部115が受信した画像の入力処理を行う。図5で示した入力処理画像501を入力処理した場合の例について下記で説明していく。なお、図5は、入力処理した画像から関連する電子文書を取得するまでの概要を示した説明図である。なお、本実施の形態は、画像入力処理部105による画像の入力処理をMFP170から受信することに制限するものではなく、例えば情報処理装置100に接続されたスキャナ等から直接入力処理しても良い。   The image input processing unit 105 performs input processing of the image received by the communication unit 115. An example in which the input processing image 501 shown in FIG. 5 is input will be described below. FIG. 5 is an explanatory diagram showing an overview of acquiring a related electronic document from an input processed image. The present embodiment is not limited to receiving the image input processing by the image input processing unit 105 from the MFP 170. For example, the input processing may be performed directly from a scanner or the like connected to the information processing apparatus 100. .

図1に戻り、情報抽出部106は、画像に付加されていた二次元バーコードに含まれていた情報を抽出する。本実施の形態においては、情報抽出部106は、二次元バーコードに含まれていた領域対応情報と埋込文書生成装置150を特定するURLを抽出する。図5の502が入力処理画像に付加されていた二次元バーコードであり、情報抽出部106がこの二次元バーコードから情報を抽出する。そして、図5の503は、情報抽出部106が二次元バーコードから抽出した領域対応情報を示したものである。   Returning to FIG. 1, the information extraction unit 106 extracts information included in the two-dimensional barcode added to the image. In the present embodiment, the information extraction unit 106 extracts the area correspondence information included in the two-dimensional barcode and the URL that identifies the embedded document generation apparatus 150. Reference numeral 502 in FIG. 5 denotes a two-dimensional barcode added to the input processed image, and the information extraction unit 106 extracts information from the two-dimensional barcode. Reference numeral 503 in FIG. 5 indicates the area correspondence information extracted from the two-dimensional barcode by the information extraction unit 106.

特徴量取得部107は、二次元バーコードを取り除いた画像について行毎に分割して、分割された行毎に輝度平均を算出する。図5の504は、特徴量取得部107が画像の行毎に算出した輝度平均を示したものである。   The feature amount acquisition unit 107 divides the image from which the two-dimensional barcode is removed for each row, and calculates a luminance average for each divided row. Reference numeral 504 in FIG. 5 indicates an average luminance calculated by the feature amount acquisition unit 107 for each row of the image.

判断部108は、抽出された領域対応情報における行毎の輝度平均と、特徴量取得部107が算出した行毎の輝度平均を比較して、各行において追記されているか否か判断する。図5の504では4行目の「3章 著作権法」を丸で囲むように追記されているので算出された輝度平均が、503の領域対応情報の4行目の輝度平均と異なるのが把握できる。そこで、判断部108は、4行目が追記されていると判断する。   The determination unit 108 compares the luminance average for each row in the extracted region correspondence information with the luminance average for each row calculated by the feature amount acquisition unit 107, and determines whether or not additional writing is performed in each row. In 504 of FIG. 5, “Chapter 3 Copyright Act” on the fourth line is added so as to be circled, so that the calculated luminance average is different from the luminance average on the fourth line of the area correspondence information 503. I can grasp. Therefore, the determination unit 108 determines that the fourth line has been added.

また、印刷又は紙原稿の読み取り処理といったアナログ過程を経ると、画像の劣化等により輝度平均が変化することもある。そこで、判断部108は、予め閾値を設けて、輝度平均の変化量が閾値以上の場合に追記と判断しても良い。なお、閾値は、出力に用いられる紙や使用環境等により適した値が異なるので、実測により最適な値を設定する。   In addition, after an analog process such as printing or paper document reading processing, the average brightness may change due to image degradation or the like. Therefore, the determination unit 108 may set a threshold value in advance, and may determine that additional writing is necessary when the amount of change in luminance average is equal to or greater than the threshold value. Note that since the threshold value varies depending on the paper used for output, the usage environment, and the like, an optimum value is set by actual measurement.

電子文書取得部109は、判断部108で追記されていると判断された場合、追記された行と対応付けられた文書IDを通信部115に出力することで埋込文書生成装置150に文書IDが送信される。その後、電子文書取得部109は、通信部115から文書IDと対応付けられた関連文書を示す電子文書が入力されるので、関連する電子文書を取得することができる。図5の505では追記された行と対応付けられていた文書IDを出力して埋込文書生成装置で検索されたことを示したものとする。そして図5の506は、電子文書が取得した関連する電子文書を示したものである。図5で示した処理が行われることで関連する電子文書を取得できる。   If the electronic document acquisition unit 109 determines that the additional information has been added by the determination unit 108, the electronic document acquisition unit 109 outputs the document ID associated with the added line to the communication unit 115, thereby allowing the embedded document generation apparatus 150 to receive the document ID. Is sent. Thereafter, the electronic document acquisition unit 109 receives the electronic document indicating the related document associated with the document ID from the communication unit 115, and thus can acquire the related electronic document. In FIG. 5 505, it is assumed that the document ID associated with the added line is output to indicate that the search has been performed by the embedded document generation apparatus. 5 indicates a related electronic document acquired by the electronic document. The related electronic document can be acquired by performing the processing shown in FIG.

キーワード検索部110は、文字列検索手段に相当し、電子文書取得部109が取得した電子文書に対して、キーワード入力受付部104が受け付けたキーワードで検索を行う。   The keyword search unit 110 corresponds to a character string search unit, and searches the electronic document acquired by the electronic document acquisition unit 109 using the keyword received by the keyword input reception unit 104.

キーワード領域取得部111は、領域取得手段に相当し、キーワード検索部110により検出されたキーワードが含まれているページを取得する。また、取得する領域をページに制限するものではなく、例えば段落、行又はキーワードに適合した部分を中心とした予め定められた範囲による近傍領域でも良い。   The keyword area acquisition unit 111 corresponds to an area acquisition unit, and acquires a page including the keyword detected by the keyword search unit 110. Further, the area to be acquired is not limited to a page, and may be a neighboring area based on a predetermined range centering on a part suitable for a paragraph, line, or keyword, for example.

加工処理部112は、取得した電子文書に対して加工処理を行う。行われる加工処理は予め設定されていても良いし、音声入力装置やキーボード50等の入力デバイスから入力された加工するための設定を用いて、加工処理部112が加工処理を行っても良い。実際に行われる加工処理としては、電子文書のレイアウト、全体の色調、文字の大きさ、文字のフォント、文字のスタイル、文字の色等のいずれか1つ又はこれらの組合せが考えられる。   The processing unit 112 performs processing on the acquired electronic document. The processing to be performed may be set in advance, or the processing unit 112 may perform the processing using settings for processing input from an input device such as a voice input device or the keyboard 50. As the actual processing performed, one or a combination of the layout of the electronic document, the overall color tone, the character size, the character font, the character style, the character color, and the like can be considered.

図6は、取得した2段組の電子文書と、1段組のレイアウトに変更する加工処理が行われた場合の電子文書の一例を示した図である。このような処理を行うことで、取得した電子文書より小さいサイズの紙に印刷しても利用者が視覚で把握することが容易になる。本図に示すように加工処理部112は、印刷する環境等に合わせて適切なレイアウトに変更することができる。   FIG. 6 is a diagram illustrating an example of the acquired two-column electronic document and an electronic document when the processing for changing to the one-column layout is performed. By performing such processing, it becomes easy for the user to visually grasp even when printing on paper of a size smaller than the acquired electronic document. As shown in the figure, the processing unit 112 can be changed to an appropriate layout in accordance with the printing environment or the like.

表示処理部113は、入力処理された画像や、取得した電子文書をモニタ40に表示する処理を行う。具体的な例としては、表示処理部113は、取得した電子文書を表示する際、予めキーワードが利用者により入力されていた場合、取得した電子文書を表示する際にキーワード領域取得部111で取得したページを表示処理し、さらに入力されたキーワードに該当する文字列を装飾して表示する。   The display processing unit 113 performs processing for displaying the input processed image and the acquired electronic document on the monitor 40. As a specific example, when displaying the acquired electronic document, the display processing unit 113 acquires the keyword in the keyword area acquisition unit 111 when displaying the acquired electronic document if the keyword has been input in advance by the user. The displayed page is displayed, and a character string corresponding to the input keyword is decorated and displayed.

図7は、キーワード領域取得部111で取得したページを表示処理部113で表示した画面例を示した図である。本図に示すように検索されたキーワードが含まれたページを表示処理することとし、表示処理を行う際にキーワードと一致する文字列の背景を通常の背景と異なる色で表示している。これにより、利用者は取得した電子文書において注目していたキーワードが含まれた所定の領域を視覚により認識することができる。   FIG. 7 is a diagram illustrating an example of a screen in which the page acquired by the keyword area acquisition unit 111 is displayed by the display processing unit 113. As shown in the figure, a page including the searched keyword is displayed, and the background of the character string that matches the keyword is displayed in a color different from the normal background when the display process is performed. As a result, the user can visually recognize a predetermined area including the keyword focused on in the acquired electronic document.

出力処理部114は、出力処理手段と保存手段とに相当し、取得した電子文書の出力処理を行う。出力処理部114が出力する電子文書の出力先としては、記憶部101又は通信部115とする。これにより記憶部101に取得した電子文書が保存され、又は取得した電子文書を通信部115よりMFP170に送信することで、MFP170が取得した電子文書の印刷又は保存をすることができる。   The output processing unit 114 corresponds to an output processing unit and a storage unit, and performs an output process for the acquired electronic document. The output destination of the electronic document output by the output processing unit 114 is the storage unit 101 or the communication unit 115. Thus, the electronic document acquired in the storage unit 101 is stored, or the acquired electronic document is transmitted to the MFP 170 from the communication unit 115, whereby the electronic document acquired by the MFP 170 can be printed or stored.

また、出力処理部114は、電子文書取得部109で取得した電子文書以外に、キーワード領域取得部111によりキーワードが装飾された電子文書や、加工処理部112により加工処理された電子文書を出力することもできる。なお、出力処理部114による出力処理を通信部115又は記憶部101への出力に制限するものではなく、例えば情報処理装置100に接続されたプロッタから印刷する処理を行っても良い。   In addition to the electronic document acquired by the electronic document acquisition unit 109, the output processing unit 114 outputs an electronic document in which a keyword is decorated by the keyword area acquisition unit 111 or an electronic document processed by the processing unit 112. You can also. Note that the output processing by the output processing unit 114 is not limited to the output to the communication unit 115 or the storage unit 101, and for example, printing from a plotter connected to the information processing apparatus 100 may be performed.

次に、以上のように構成された本実施の形態にかかる埋込文書生成装置150における文書の取得から二次元バーコードを付加して出力するまでの処理について説明する。図8は、本実施の形態にかかる埋込文書生成装置150における上述した処理の手順を示すフローチャートである。   Next, processing from acquisition of a document in the embedded document generation apparatus 150 according to the present embodiment configured as described above to output by adding a two-dimensional barcode will be described. FIG. 8 is a flowchart showing the above-described processing procedure in the embedded document generation apparatus 150 according to the present embodiment.

まず、対象文書取得部152が、二次元バーコードを埋め込む対象となる電子文書を取得する(ステップS801)。次に、領域分割部153が、取得した電子文書を行毎に領域を分割する(ステップS802)。   First, the target document acquisition unit 152 acquires an electronic document to be embedded with a two-dimensional barcode (step S801). Next, the area dividing unit 153 divides the acquired electronic document into areas for each line (step S802).

そして、関連文書取得部154が、行毎に関連する電子文書を取得する(ステップS803)。次に、関連文書登録部155が、取得した電子文書に対して文書IDを割り当てて、ID文書対応テーブルに電子文書名と文書IDを対応付けて登録し、電子文書は記憶部151に記憶させる(ステップS804)。   Then, the related document acquisition unit 154 acquires a related electronic document for each row (step S803). Next, the related document registration unit 155 assigns a document ID to the acquired electronic document, registers the electronic document name and the document ID in association with each other in the ID document correspondence table, and stores the electronic document in the storage unit 151. (Step S804).

そして、領域特徴抽出部156が、行毎の輝度平均を算出する(ステップS805)。次に、埋込情報生成部157が、行毎の輝度平均と行毎の関連する電子文書を示す文書IDと行番号とを対応付けた領域対応情報と、埋込文書生成装置150を特定するURLとを含んだ二次元バーコードを生成する(ステップS806)。   Then, the region feature extraction unit 156 calculates a luminance average for each row (step S805). Next, the embedding information generation unit 157 identifies the area correspondence information in which the luminance average for each line and the document ID indicating the related electronic document for each line are associated with the line number, and the embedded document generation apparatus 150. A two-dimensional barcode including the URL is generated (step S806).

次に、埋込情報付加部158が、生成された二次元バーコードをステップS801で取得した電子文書に付加する(ステップS807)。そして、埋込文書出力処理部159が、二次元バーコードを付加した電子文書をプリンタ20から出力する処理を行う(ステップS808)。   Next, the embedding information adding unit 158 adds the generated two-dimensional barcode to the electronic document acquired in step S801 (step S807). Then, the embedded document output processing unit 159 performs processing for outputting the electronic document to which the two-dimensional barcode is added from the printer 20 (step S808).

上述した処理手順により、領域対応情報と埋込文書生成装置150を特定するURLを含んだ二次元バーコードを付加した電子文書を印刷することが可能となる。なお、上述した処理手順は、本実施の形態による電子文書の取得から二次元バーコードを付加した電子文書の印刷までの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。   According to the above-described processing procedure, it is possible to print an electronic document to which a two-dimensional barcode including a region specifying information and a URL specifying the embedded document generating apparatus 150 is added. The above-described processing procedure shows an example of the processing procedure from acquisition of an electronic document to printing of an electronic document with a two-dimensional barcode added according to the present embodiment, and the present invention is limited to this processing procedure. Not what you want.

次に、以上のように構成された本実施の形態にかかる埋込文書生成装置150及び情報処理装置100で構成される情報処理システムにおける紙文書の読み込みから、利用者が紙文書に追記した行と対応した関連する電子文書を取得して印刷するまでの処理について説明する。図9は、本実施の形態にかかる埋込文書生成装置150及び情報処理装置100で構成される情報処理システムにおける上述した処理の手順を示すフローチャートである。   Next, the line added by the user to the paper document from the reading of the paper document in the information processing system configured by the embedded document generation apparatus 150 and the information processing apparatus 100 according to the present embodiment configured as described above. Will be described until the related electronic document is acquired and printed. FIG. 9 is a flowchart showing the above-described processing procedure in the information processing system including the embedded document generation apparatus 150 and the information processing apparatus 100 according to this embodiment.

まずは、MFP170の文書読取処理部171が、紙文書を読み取り、紙文書の内容を保持した画像を取得する(ステップS901)。そして、MFP170の画像出力処理部175は、取得した画像を通信部176に出力する(ステップS902)。これにより、通信部176は、入力された画像を情報処理装置100に送信する。   First, the document reading processing unit 171 of the MFP 170 reads a paper document and acquires an image holding the content of the paper document (step S901). Then, the image output processing unit 175 of the MFP 170 outputs the acquired image to the communication unit 176 (step S902). Thereby, the communication unit 176 transmits the input image to the information processing apparatus 100.

次に、情報処理装置100の画像入力処理部105が、通信部115が受信した画像を入力処理する(ステップS911)。そして、情報処理装置100の情報抽出部106は、入力処理した画像の二次元バーコードに含まれていた領域対応情報と埋込文書生成装置150のURLを抽出する(ステップS912)。抽出された領域対応情報は、行毎の輝度平均と文書IDとを対応付けて保持しているものとする。   Next, the image input processing unit 105 of the information processing apparatus 100 performs input processing on the image received by the communication unit 115 (step S911). Then, the information extraction unit 106 of the information processing apparatus 100 extracts the area correspondence information included in the two-dimensional barcode of the input image and the URL of the embedded document generation apparatus 150 (step S912). It is assumed that the extracted region correspondence information holds the luminance average for each row and the document ID in association with each other.

そして、情報処理装置100の特徴量取得部107は、入力処理した画像から二次元バーコードを取り除いた画像について行毎に領域を分割する(ステップS913)。次に、特徴量取得部107は、分割された行毎に輝度平均値を算出する(ステップS914)。   Then, the feature amount acquisition unit 107 of the information processing apparatus 100 divides the region for each row in the image obtained by removing the two-dimensional barcode from the input processed image (step S913). Next, the feature quantity acquisition unit 107 calculates a luminance average value for each divided row (step S914).

次に、情報処理装置100の判断部108は、ステップS912で抽出した行毎の輝度平均と、ステップS914で算出した行毎の輝度平均を比較して、行毎に追記されているか否か判断する(ステップS915)。   Next, the determination unit 108 of the information processing apparatus 100 compares the luminance average for each row extracted in step S912 with the luminance average for each row calculated in step S914 to determine whether or not additional writing is performed for each row. (Step S915).

そして、情報処理装置100の電子文書取得部109は、追記されたと判断された行と対応付けられた文書IDを通信部115に出力することで、通信部115から入力された関連する電子文書を取得する(ステップS916)。また、通信部115は、ステップS912で抽出されたURLより特定される埋込文書生成装置150に対して文書IDを送信することで、埋込文書生成装置150からID文書対応テーブルで文書IDと対応付けられた電子文書を受信する。   Then, the electronic document acquisition unit 109 of the information processing apparatus 100 outputs the document ID associated with the line determined to be added to the communication unit 115, so that the related electronic document input from the communication unit 115 is output. Obtain (step S916). In addition, the communication unit 115 transmits the document ID to the embedded document generation device 150 specified from the URL extracted in step S912, whereby the document ID and the document ID are stored in the ID document correspondence table from the embedded document generation device 150. The associated electronic document is received.

次に、情報処理装置100の出力処理部114は、取得した電子文書を通信部115に出力する処理を行う(ステップS917)。これにより通信部115は、入力された電子文書をMFP170に送信する。   Next, the output processing unit 114 of the information processing apparatus 100 performs a process of outputting the acquired electronic document to the communication unit 115 (step S917). As a result, the communication unit 115 transmits the input electronic document to the MFP 170.

そして、MFP170の電子文書入力処理部174は、通信部176が受信した電子文書の入力処理を行う(ステップS903)。次に、印刷処理部172は、入力処理された電子文書を印刷する処理を行う(ステップS904)。   Then, the electronic document input processing unit 174 of the MFP 170 performs input processing of the electronic document received by the communication unit 176 (step S903). Next, the print processing unit 172 performs processing for printing the input electronic document (step S904).

上述した処理手順により、情報処理システムを構成するMFP170で読み取られた画像を入力処理し、情報処理装置100で関連する電子文書を取得して、MFP170で印刷処理することが可能となる。なお、上述した処理手順は、本実施の形態による紙文書の読み取りから関連する電子文書を印刷するまでの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。   According to the processing procedure described above, an image read by the MFP 170 constituting the information processing system can be input, an associated electronic document can be acquired by the information processing apparatus 100, and can be printed by the MFP 170. The above-described processing procedure shows an example of the processing procedure from reading a paper document to printing a related electronic document according to the present embodiment, and the present invention is not limited to this processing procedure. .

また、情報処理装置100は、取得した電子文書をMFP170に出力して印刷する以外に、情報処理装置100に接続されたモニタ40に表示処理を行うことができる。また、当然ながら、モニタ40に表示処理を行う前に、取得した電子文書に対して、加工処理や、キーワード検索を行うこともできる。そこで、以上のように構成された本実施の形態にかかる情報処理装置100におけるMFP170から画像を入力処理してから関連する電子文書に対してキーワード検索して結果を表示するまでの処理について説明する。図10は、本実施の形態にかかる情報処理装置100における上述した処理の手順を示すフローチャートである。   In addition to outputting the acquired electronic document to the MFP 170 for printing, the information processing apparatus 100 can perform display processing on the monitor 40 connected to the information processing apparatus 100. Of course, before the display process is performed on the monitor 40, a processing process or a keyword search can be performed on the acquired electronic document. Therefore, a process from the input processing of an image from the MFP 170 in the information processing apparatus 100 according to the present embodiment configured as described above to a keyword search for a related electronic document and display of the result will be described. . FIG. 10 is a flowchart illustrating the above-described processing procedure in the information processing apparatus 100 according to the present embodiment.

まず、情報処理装置100の画像入力処理部105が、通信部115が受信した画像を入力処理する(ステップS1001)。なお、通信部115が受信した画像は図9で示した処理手順と同様にMFP170から送信されたものとする。   First, the image input processing unit 105 of the information processing apparatus 100 performs input processing on the image received by the communication unit 115 (step S1001). It is assumed that the image received by communication unit 115 is transmitted from MFP 170 in the same manner as the processing procedure shown in FIG.

次に、キーワード入力受付部104は、利用者入力処理部102で入力処理されたキーワードを示す文字列の入力を受け付ける(ステップS1002)。   Next, the keyword input receiving unit 104 receives an input of a character string indicating the keyword input by the user input processing unit 102 (step S1002).

そして、情報処理装置100は、図9のステップS912〜S916と同様に画像から抽出された情報に基づいて関連する電子文書を取得する(ステップS1003〜S1007)。   Then, the information processing apparatus 100 acquires a related electronic document based on the information extracted from the image, similarly to steps S912 to S916 in FIG. 9 (steps S1003 to S1007).

そして、キーワード探索部110は、キーワード入力受付部104がキーワードを受け付けていた場合、ステップS1007で取得した電子文書に対して、キーワード入力受付部104が受け付けたキーワードで検索を行う(ステップS1008)。   If the keyword input receiving unit 104 has received a keyword, the keyword searching unit 110 searches the electronic document acquired in step S1007 with the keyword received by the keyword input receiving unit 104 (step S1008).

次に、キーワード領域取得部111は、キーワードが含まれているページを取得する(ステップS1009)。   Next, the keyword area acquisition unit 111 acquires a page including the keyword (step S1009).

そして、表示処理部113は、キーワード領域取得部111が取得したページをモニタ40上に表示する処理を行う(ステップS1010)。この際、キーワードと一致した文字列は、背景の色を変更して表示処理を行う。   Then, the display processing unit 113 performs a process of displaying the page acquired by the keyword area acquisition unit 111 on the monitor 40 (step S1010). At this time, the character string that matches the keyword is subjected to display processing by changing the background color.

上述した処理手順により、情報処理装置100で関連する電子文書を取得して、キーワードが含まれているページを表示処理することが可能となる。なお、上述した処理手順は、本実施の形態による画像の入力処理からキーワードが含まれているページを表示するまでの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。   With the processing procedure described above, the information processing apparatus 100 can acquire a related electronic document and display a page including the keyword. Note that the processing procedure described above shows an example of the processing procedure from the image input processing according to the present embodiment to the display of the page including the keyword, and the present invention is limited to this processing procedure. It is not a thing.

図11は、情報処理装置100と埋込文書生成装置150の機能を実現するためのプログラムを実行したPCのハードウェア構成を示した図である。本実施の形態の情報処理装置100と埋込文書生成装置150は、それぞれCPU(Central Processing Unit)1101等の制御装置と、ROM(Read Only Memory)1102やRAM(Random Access Memory)1103等の記憶装置と、HDD(Hard Disk Drive)、CD(Compact Disk)ドライブ装置等の外部記憶装置1104と、ディスプレイ装置等の表示装置1105と、キーボードやマウス等の入力装置1106と、他の装置と通信を行う通信I/F1107とこれらを接続するバス1108を備えており、通常のコンピュータを利用したハードウェア構成となっている。   FIG. 11 is a diagram illustrating a hardware configuration of a PC that executes a program for realizing the functions of the information processing apparatus 100 and the embedded document generation apparatus 150. The information processing apparatus 100 and the embedded document generation apparatus 150 according to the present embodiment are each a control apparatus such as a CPU (Central Processing Unit) 1101 and a storage such as a ROM (Read Only Memory) 1102 and a RAM (Random Access Memory) 1103. Communicates with other devices, an external storage device 1104 such as an HDD (Hard Disk Drive), a CD (Compact Disk) drive device, a display device 1105 such as a display device, an input device 1106 such as a keyboard and a mouse, and the like. A communication I / F 1107 to be performed and a bus 1108 for connecting them are provided, and a hardware configuration using a normal computer is employed.

次に、MFP170について説明する。図12は、MFP170のハードウェア構成の一例を示すブロック図である。図12に示すように、MFP170は、このMFP170の各部の制御処理及び画像形成処理等の各種制御処理を行うシステム制御部1201を備えている。このシステム制御部1201には、システムメモリ1202、パラメータメモリ1203、時計回路1204、操作表示部1205、ページメモリ1206、プリンタエンジン1207、給紙搬送系ユニット1208、通信インターフェース回路1209、磁気ディスク装置1210及びスキャナエンジン1211が内部バス1212を介して接続されており、これらの各要素間でのデータのやりとりは、主としてこの内部バス1212を介して行われている。   Next, the MFP 170 will be described. FIG. 12 is a block diagram illustrating an exemplary hardware configuration of the MFP 170. As shown in FIG. 12, the MFP 170 includes a system control unit 1201 that performs various control processes such as a control process of each part of the MFP 170 and an image forming process. The system control unit 1201 includes a system memory 1202, a parameter memory 1203, a clock circuit 1204, an operation display unit 1205, a page memory 1206, a printer engine 1207, a paper feed / conveyance system unit 1208, a communication interface circuit 1209, a magnetic disk device 1210, and the like. A scanner engine 1211 is connected via an internal bus 1212, and data exchange between these elements is mainly performed via this internal bus 1212.

システムメモリ1202は、システム制御部1201が実行する制御処理プログラム及び処理プログラムを実行するときに必要な各種データ等を記憶するとともに、システム制御部1201のワークエリアを構成するものであり、パラメータメモリ1203は、このMFP170に固有な各種の情報を記憶するためのものである。   The system memory 1202 stores a control processing program executed by the system control unit 1201 and various data necessary for executing the processing program, and constitutes a work area of the system control unit 1201. The parameter memory 1203 Is for storing various types of information unique to the MFP 170.

時計回路1204は、現在時刻情報を出力するものである。操作表示部1205は、このMFP170を操作するためのもので、各種の操作キー及び各種の表示装置からなる。   The clock circuit 1204 outputs current time information. An operation display unit 1205 is for operating the MFP 170 and includes various operation keys and various display devices.

ページメモリ1206は、印刷する画像データ(印刷描画イメージ)を保持するものであり、プリンタエンジン1207は、ページメモリ1206に保持されている画像データの画像を記録用紙に記録出力するためのものである。給紙搬送系ユニット1208は、記録用紙を保持している用紙カセット等(図示略)から記録用紙を分離してプリンタエンジン1207の画像記録位置へと給紙搬送し、最終的に排紙トレイ(図示略)へと排出するためのものである。なお、本実施の形態のMFP170に備えられたプリンタはレーザプリンタであるので、プリンタエンジン1207は、電子写真プロセス方式により画像を形成して記録用紙に記録出力する。   The page memory 1206 holds image data to be printed (printed drawing image), and the printer engine 1207 is for recording and outputting an image of the image data held in the page memory 1206 on a recording sheet. . The paper feed / conveyance system unit 1208 separates the recording paper from a paper cassette or the like (not shown) holding the recording paper, feeds and feeds the recording paper to the image recording position of the printer engine 1207, and finally a paper discharge tray ( (Not shown). Note that since the printer provided in the MFP 170 of the present embodiment is a laser printer, the printer engine 1207 forms an image by an electrophotographic process method and records and outputs it on a recording sheet.

通信インターフェース回路1209は、ネットワークを介して他のコンピュータに接続し、印刷ジョブデータ等を受信したり、他のコンピュータに対して印刷結果等をあらわすデータを送信したりするためのものである。   The communication interface circuit 1209 is connected to another computer via a network, and receives print job data or the like, or transmits data representing a print result or the like to another computer.

磁気ディスク装置1210は、種々の印刷文書情報を格納したり、それ以外の適宜な情報ファイル等を保存するためのものである。   The magnetic disk device 1210 stores various print document information and stores other appropriate information files and the like.

スキャナエンジン1211は、紙文書に対してスキャンを行い、画像データを取得するためのものである。スキャナエンジン1211で取得した画像データはページメモリ1206に送信することで、複写することが可能となる。   The scanner engine 1211 scans a paper document and acquires image data. The image data acquired by the scanner engine 1211 can be copied by transmitting it to the page memory 1206.

また、本実施形態の情報処理装置100で実行される情報処理プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録されて提供される。   The information processing program executed by the information processing apparatus 100 of the present embodiment is a file in an installable format or an executable format, and is a CD-ROM, flexible disk (FD), CD-R, DVD (Digital Versatile Disk). And the like recorded on a computer-readable recording medium.

また、本実施形態の情報処理装置100で実行される情報処理プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の情報処理装置100で実行される情報処理プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。   Further, the information processing program executed by the information processing apparatus 100 according to the present embodiment may be stored on a computer connected to a network such as the Internet and provided by being downloaded via the network. Further, the information processing program executed by the information processing apparatus 100 of the present embodiment may be provided or distributed via a network such as the Internet.

また、本実施形態の情報処理プログラムを、ROM等に予め組み込んで提供するように構成してもよい。   In addition, the information processing program of the present embodiment may be provided by being incorporated in advance in a ROM or the like.

本実施の形態の情報処理装置100で実行される情報処理プログラムは、上述した各部(利用者入力処理部、利用者認証部、キーワード入力受付部、画像入力処理部、情報抽出部、特徴量取得部、判断部、電子文書取得部、キーワード検索部、キーワード領域取得部、加工処理部、表示処理部、出力処理部、通信部)を含むモジュール構成となっており、実際のハードウェアとしてはCPUが上記記録媒体から情報処理プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、利用者入力処理部、利用者認証部、キーワード入力受付部、画像入力処理部、情報抽出部、特徴量取得部、判断部、電子文書取得部、キーワード検索部、キーワード領域取得部、加工処理部、表示処理部、出力処理部、通信部が主記憶装置上に生成されるようになっている。   The information processing program executed by the information processing apparatus 100 according to the present embodiment includes the above-described units (user input processing unit, user authentication unit, keyword input reception unit, image input processing unit, information extraction unit, feature amount acquisition). Module, determination unit, electronic document acquisition unit, keyword search unit, keyword area acquisition unit, processing unit, display processing unit, output processing unit, communication unit), and the actual hardware is CPU The information processing program is read from the recording medium and executed to load the respective units onto the main storage device. The user input processing unit, the user authentication unit, the keyword input reception unit, the image input processing unit, and the information extraction unit , Feature amount acquisition unit, determination unit, electronic document acquisition unit, keyword search unit, keyword region acquisition unit, processing unit, display processing unit, output processing unit, communication unit is the main storage device It is adapted to be generated.

上述した情報処理システム又は情報処理装置により、利用者が追記した領域に関連づけられた電子文書を取得して、出力処理又は印刷処理を行えることで、利用者は容易に電子文書又は電子文書の内容が含まれた紙文書を取得できるので、利便性が向上する。また、取得した電子文書に対して加工処理を行った後に出力することができるため、視認性が向上する。   The information processing system or the information processing apparatus described above acquires the electronic document associated with the area added by the user and can perform the output process or the print process, so that the user can easily perform the contents of the electronic document or the electronic document. Can be obtained, so convenience is improved. In addition, visibility can be improved because the acquired electronic document can be output after being processed.

また、関連する文書を取得するために、関連する領域に追記するだけで良いため、利用者が容易に理解できると共に、容易に扱うことができる。   Further, in order to acquire a related document, it is only necessary to add to a related area, so that the user can easily understand and handle it easily.

また、MFP170と情報処理装置100で構成された情報処理システムで、紙原稿を入力してから、入力処理した画像を情報処理装置100に送信し、関連する電子文書を取得するまでの処理を行った後、取得した電子文書をMFP170で印刷する処理を行うことで、送受信機能を有する従来のMFP170であっても二次元バーコードを付加した紙文書に基づいて関連する文書を印刷することができる。また、従来から存在する他の装置と送受信できるMFPであれば、本発明の情報処理システムを構築できるので、情報処理システムの導入による利便性が向上すると共に、情報処理システムの構築に掛かる費用を低減させることができる。   Further, the information processing system configured by the MFP 170 and the information processing apparatus 100 performs a process from inputting a paper document to transmitting the input processed image to the information processing apparatus 100 and acquiring a related electronic document. After that, by performing a process of printing the acquired electronic document by the MFP 170, even the conventional MFP 170 having a transmission / reception function can print a related document based on a paper document to which a two-dimensional barcode is added. . In addition, any MFP that can transmit and receive with other existing devices can construct the information processing system of the present invention. Therefore, the convenience of the information processing system is improved, and the cost for constructing the information processing system is reduced. Can be reduced.

また、情報処理装置100の関連する電子文書の取得先を埋込文書生成装置150に制限するものではなく、公衆ネットワーク上に埋込文書生成装置150と別に設けられたサーバや、情報処理装置100が備える記憶部101から関連する電子文書を取得しても良い。この場合、ID文書対応テーブル及び関連する電子文書は、サーバや情報処理装置100が保持することとし、埋込文書生成装置150からこれらを更新できる必要がある。   Further, the acquisition destination of the electronic document related to the information processing apparatus 100 is not limited to the embedded document generation apparatus 150, but a server provided separately from the embedded document generation apparatus 150 on the public network, or the information processing apparatus 100 A related electronic document may be acquired from the storage unit 101 included in the. In this case, the ID document correspondence table and the related electronic document are held by the server or the information processing apparatus 100, and it is necessary to update them from the embedded document generation apparatus 150.

また、特徴情報は、輝度平均に制限されるものではなく、文書または画像について特徴を示す情報であればよい。特徴情報の具体的な例としては、黒画素数、連結成分数、文字数、周波数等が考えられる。   Further, the feature information is not limited to the luminance average, and may be information indicating the feature of the document or the image. Specific examples of feature information include the number of black pixels, the number of connected components, the number of characters, the frequency, and the like.

また、上記の説明では電子文書を分割する領域を行毎としたが、本実施の形態は分割する領域の単位を行に制限するものではなく、例えば文字要素である段落、単語、文字で分割しても良いし、あるいは文書要素に関係なく所定の格子状に分割した領域毎でも良い。   In the above description, the area to divide the electronic document is line-by-line. However, in the present embodiment, the unit of the area to be divided is not limited to a line. For example, the electronic document is divided into paragraphs, words, and characters. Alternatively, it may be a region divided into a predetermined grid regardless of the document element.

また、分割する領域の単位を埋込文書生成装置150及び情報処理装置100で予め設定しておいても良いし、二次元バーコード等の埋込情報に領域の分割方法を含めても良い。   The unit of the area to be divided may be set in advance by the embedded document generation apparatus 150 and the information processing apparatus 100, or the area dividing method may be included in the embedding information such as a two-dimensional barcode.

また、上記の説明では本発明の埋込情報として二次元バーコードを用いたが、本実施の形態は埋込情報を二次元バーコードに制限するものではなく、文字、一次元バーコード、ドット、二次元バーコード以外の幾何学パターンあるいは電子透かしのいずれか1つ又はこれらの組合せで実現しても良い。   In the above description, the two-dimensional bar code is used as the embedding information of the present invention. However, the present embodiment does not limit the embedding information to the two-dimensional bar code, and includes characters, one-dimensional bar codes, dots. Alternatively, any one of geometric patterns other than two-dimensional barcodes, digital watermarks, or a combination thereof may be realized.

(第1の実施の形態の変形例1)
上述した第1の実施の形態において、二次元バーコードに領域と、輝度平均と、文書IDを対応付けてから電子文書に付加していた。しかし、対応する電子文書を特定するために埋め込む情報を文書IDに制限するものではない。そこで、本変形例では文書IDの代わりに電子文書が記憶されているURLが領域と、輝度平均に対応付けて二次元バーコードに埋め込んだ場合の例とする。そして上述した実施の形態と同様に、画像の各領域から算出された輝度値と領域対応情報が保持する各領域の輝度値を算出し、追記された領域と対応付けられたURLより関連する電子文書を取得する。
(Modification 1 of the first embodiment)
In the first embodiment described above, the area, the luminance average, and the document ID are associated with the two-dimensional barcode and added to the electronic document. However, the information to be embedded to specify the corresponding electronic document is not limited to the document ID. Therefore, in this modification, the URL in which the electronic document is stored instead of the document ID is embedded in the two-dimensional barcode in association with the area and the luminance average. Similarly to the above-described embodiment, the brightness value calculated from each area of the image and the brightness value of each area held by the area correspondence information are calculated, and the associated electronic data is obtained from the URL associated with the added area. Get the document.

(第2の実施の形態)
第1の実施の形態では情報処理装置100で画像データに付加された二次元バーコードに基づいて追記された行に対応する関連文書を取得していた。しかしながら、二次元バーコードが付加された画像データで追記された領域を判断して行われる処理を、関連文書の取得に制限するものではない。そこで第2の実施の形態では、情報処理装置で追記された領域を装飾して表示することとしたものである。
(Second Embodiment)
In the first embodiment, the information processing apparatus 100 acquires a related document corresponding to a line added based on a two-dimensional barcode added to image data. However, the processing performed by determining the region added in the image data to which the two-dimensional barcode is added is not limited to acquisition of related documents. Therefore, in the second embodiment, the area added by the information processing apparatus is decorated and displayed.

また、情報処理装置100は、画像の入力をMFP170からの入力に制限するものではないため、第2の実施の形態においては情報処理装置単体で処理を行う場合について説明する。   In addition, since the information processing apparatus 100 does not limit the input of an image to the input from the MFP 170, a case where the information processing apparatus alone performs processing will be described in the second embodiment.

図13は、本発明の第2の実施の形態にかかる情報処理装置1300の構成を示すブロック図である。上述した第1の実施の形態にかかる情報処理装置100とは、領域加工処理部1306が追加され、利用者入力処理部102、画像入力処理部105、情報抽出部106、特徴量取得部107、判断部108、電子文書取得部109、出力処理部114、通信部115とは処理が異なる利用者入力処理部1301、画像入力処理部1302、情報抽出部1303、特徴量取得部1304、判断部1305、電子文書取得部1309、出力処理部1307、通信部1308に変更された構成を有している点で異なる。以下の説明では、上述した第1の実施の形態と同一の構成要素には同一の符号を付してその説明を省略している。また、情報処理装置1300はスキャナ30、プリンタ21と接続され、公衆ネットワーク61を介してサーバ70と通信を行う。   FIG. 13: is a block diagram which shows the structure of the information processing apparatus 1300 concerning the 2nd Embodiment of this invention. The information processing apparatus 100 according to the first embodiment described above includes an area processing unit 1306, a user input processing unit 102, an image input processing unit 105, an information extraction unit 106, a feature amount acquisition unit 107, A user input processing unit 1301, an image input processing unit 1302, an information extraction unit 1303, a feature amount acquisition unit 1304, and a determination unit 1305 that are different in processing from the determination unit 108, the electronic document acquisition unit 109, the output processing unit 114, and the communication unit 115. The electronic document acquisition unit 1309, the output processing unit 1307, and the communication unit 1308 have different configurations. In the following description, the same components as those in the first embodiment described above are denoted by the same reference numerals and description thereof is omitted. The information processing apparatus 1300 is connected to the scanner 30 and the printer 21 and communicates with the server 70 via the public network 61.

本実施の形態においては、第1の実施の形態の埋込文書生成装置150と同様の構成を備えた埋込文書生成装置で生成された紙文書を情報処理装置1300で読み込むこととするが、二次元バーコードに含まれている情報が第1の実施の形態の場合と異なる。   In the present embodiment, the information processing apparatus 1300 reads a paper document generated by the embedded document generation apparatus having the same configuration as the embedded document generation apparatus 150 of the first embodiment. Information contained in the two-dimensional barcode is different from that in the first embodiment.

図14は、第2の実施の形態の紙文書に付加された二次元バーコードが保持する領域対応情報を説明した説明図である。本図に示すように、本実施形態においては文書を矩形状に区切り、矩形毎に輝度平均を算出し、矩形の座標領域と輝度平均と処理IDとを対応付けた領域対応情報を二次元バーコードに含ませることとする。本図では領域を矩形で2点の座標(例えば左上と右下の頂点の座標)でこの領域を定義しているが、領域定義方法をこの方法に制限するものではなく、システムで予め領域を固定しておいても良いし(例えば縦を40、横を30の矩形に分割する等)、他の分割方法を示す情報を二次元バーコードに埋め込んでも良い。   FIG. 14 is an explanatory diagram for explaining the area correspondence information held by the two-dimensional barcode added to the paper document according to the second embodiment. As shown in this figure, in this embodiment, a document is divided into rectangles, a luminance average is calculated for each rectangle, and area correspondence information in which rectangular coordinate areas, luminance averages, and process IDs are associated is displayed in a two-dimensional bar. It will be included in the code. In this figure, this area is defined as a rectangular area with two coordinates (for example, the coordinates of the upper left and lower right vertices). However, the area definition method is not limited to this method, and the area is preliminarily defined by the system. It may be fixed (for example, divided into 40 rectangles in the vertical direction and 30 rectangles in the horizontal direction), or information indicating other division methods may be embedded in the two-dimensional barcode.

処理IDとは、各領域で追記されていた場合に行われる処理を示すIDをいう。例えば文字領域であればこの領域に一部でも含まれた文字を斜体若しくは太字にする処理を示す処理IDが埋め込まれ、空白領域であれば背景色を変更する処理を示すIDを埋め込まれること等が考えられる。なお、領域によらず全て同じ処理を行う場合は、処理IDを対応付けて埋め込まなくても良い。   The process ID refers to an ID indicating a process to be performed when additional writing is performed in each area. For example, if it is a character area, a process ID indicating a process for making it partially italic or bold is embedded, and if it is a blank area, an ID indicating a process for changing the background color is embedded. Can be considered. If the same process is performed regardless of the area, the process ID need not be associated and embedded.

利用者入力処理部1301は、保存受付手段と出力受付手段とに相当し、第1の実施の形態の利用者入力処理部102と同様に利用者がキーボード50等の入力デバイスを用いて入力した情報の処理を行う。利用者入力処理部1301が利用者入力処理部102と異なる点としては、利用者入力処理部102ではMFP170に出力する旨の選択を処理するのに対して、利用者入力処理部1301ではプリンタ21に出力する旨の選択を処理する点であり、他の処理については利用者入力処理部102と同様とする。   The user input processing unit 1301 corresponds to a storage receiving unit and an output receiving unit, and is input by a user using an input device such as the keyboard 50 as in the user input processing unit 102 of the first embodiment. Process information. The difference between the user input processing unit 1301 and the user input processing unit 102 is that the user input processing unit 102 processes selection to output to the MFP 170, whereas the user input processing unit 1301 processes the printer 21. The other processing is the same as that of the user input processing unit 102.

画像入力処理部1302は、スキャナ30を用いて紙文書11を読み取り、紙文書の内容を保持する画像の入力処理を行う。図15で示した入力処理画像1501を入力処理した場合の例について下記で説明していく。なお、図15は、情報処理装置1300が入力処理した画像から対応する電子文書を取得して加工処理するまでの概要を示した説明図である。   The image input processing unit 1302 reads the paper document 11 using the scanner 30 and performs an image input process for holding the content of the paper document. An example in which the input processing image 1501 shown in FIG. 15 is input will be described below. Note that FIG. 15 is an explanatory diagram showing an outline from the time when the information processing apparatus 1300 acquires the corresponding electronic document from the input processed image to the processing.

図13に戻り、情報抽出部1303は、画像に付加されていた二次元バーコードに含まれていた情報を抽出する。本実施の形態においては、情報抽出部1303は、二次元バーコードに含まれていた領域対応情報とサーバ70が保持している電子文書を特定するURLを抽出する。領域対応情報は、図14で示したように矩形状の領域の領域座標と、輝度平均と、処理IDが対応付けられているものとする。   Returning to FIG. 13, the information extraction unit 1303 extracts information included in the two-dimensional barcode added to the image. In the present embodiment, the information extraction unit 1303 extracts the area correspondence information included in the two-dimensional barcode and the URL that identifies the electronic document held by the server 70. In the area correspondence information, it is assumed that the area coordinates of the rectangular area, the luminance average, and the process ID are associated with each other as illustrated in FIG.

特徴量取得部1304は、情報抽出部1303で抽出された領域対応情報が保持する矩形状の領域毎に分割して、分割された矩形領域毎に輝度平均を算出する。   The feature amount acquisition unit 1304 divides each rectangular area held by the area correspondence information extracted by the information extraction unit 1303, and calculates an average luminance for each divided rectangular area.

判断部1305は、抽出された領域対応情報における矩形領域毎の輝度平均と、特徴量取得部1304が算出した矩形領域毎の輝度平均を比較して、各矩形領域において追記されている領域を判断する。図15の1502は、画像内の「著作権」を丸で囲むように追記されているため、この領域で算出された輝度平均が領域対応情報で保持される輝度平均と異なることとなり、判断部1305はこの領域で追記されたと判断できる。   The determination unit 1305 compares the luminance average for each rectangular area in the extracted area correspondence information with the luminance average for each rectangular area calculated by the feature amount acquisition unit 1304, and determines the area added in each rectangular area. To do. Since 1502 in FIG. 15 is added so as to enclose “copyright” in the image in a circle, the luminance average calculated in this area is different from the luminance average held in the area correspondence information. It can be determined that 1305 is added in this area.

電子文書取得部1309は、情報抽出部1303で抽出されたサーバ70が保持している電子文書を特定するURLから、電子文書を取得する。この電子文書は、本実施の形態では画像入力処理部1302で入力処理した画像の出力元となった電子文書とする。なお、電子文書の取得の具体的な処理手順の例は、電子文書取得部1309が通信部1308に対してURLを出力すると、通信部1308がURLから電子文書を受信して電子文書取得部1309に出力する。これにより電子文書取得部1309は電子文書を取得できる。   The electronic document acquisition unit 1309 acquires the electronic document from the URL that specifies the electronic document held by the server 70 extracted by the information extraction unit 1303. In this embodiment, the electronic document is an electronic document that is an output source of an image input by the image input processing unit 1302. An example of a specific processing procedure for acquiring an electronic document is as follows. When the electronic document acquisition unit 1309 outputs a URL to the communication unit 1308, the communication unit 1308 receives the electronic document from the URL and receives the electronic document acquisition unit 1309. Output to. Accordingly, the electronic document acquisition unit 1309 can acquire an electronic document.

領域加工処理部1306は、取得した電子文書に対して入力処理された画像と照合を行い、電子文書内で追記された領域を特定し、特定された領域に対して処理IDと対応付けられた加工処理を行う。なお、処理IDと処理の対応関係は予め情報処理装置1300で保持することとする。   The area processing unit 1306 compares the acquired electronic document with the input-processed image, identifies the area added in the electronic document, and associates the identified area with the process ID. Processing is performed. Note that the correspondence between the process ID and the process is held in the information processing apparatus 1300 in advance.

図15の1503は、入力処理された画像と取得した電子文書の照合を行い、追記された領域を特定された場合を示している。そしてこの領域と対応付けられた処理が行われる。図15の加工処理後の電子文書1504は、対応付けられた処理を行った後の電子文書を示したものである。特定された領域と対応付けられていた処理IDが文字を斜体にする処理を示すものだったため、加工処理後の電子文書1504では「著作権」が斜体にされた。   Reference numeral 1503 in FIG. 15 indicates a case where the input processed image is compared with the acquired electronic document, and the added area is specified. Then, processing associated with this area is performed. The electronic document 1504 after the processing in FIG. 15 shows the electronic document after the associated processing is performed. Since the process ID associated with the specified area indicates a process for italicizing characters, “Copyright” is italicized in the electronic document 1504 after the processing process.

出力処理部1307は、出力処理手段と保存手段とに相当し、取得した電子文書の出力処理を行う。また、出力処理部1307は、追記されていたので領域加工処理部1306で加工処理された電子文書、加工処理部112で加工処理された電子文書、キーワード領域取得部111でキーワードが強調された電子文書についても出力又は保存することができる。本実施の形態において出力処理部1307は、プリンタ21から出力処理を行うが、第1の実施の形態の出力処理部114と同様にMFP170に対して出力しても良い。   The output processing unit 1307 corresponds to an output processing unit and a storage unit, and performs an output process for the acquired electronic document. Further, since the output processing unit 1307 has been added, the electronic document processed by the region processing unit 1306, the electronic document processed by the processing unit 112, and the electronic in which the keyword is emphasized by the keyword region acquisition unit 111 Documents can also be output or saved. In the present embodiment, the output processing unit 1307 performs output processing from the printer 21, but the output processing unit 1307 may output to the MFP 170 in the same manner as the output processing unit 114 of the first embodiment.

通信部1308は、サーバ70との間で送受信を行う。具体的な例としては、通信部1308は、二次元バーコードから抽出されたURLで特定される電子文書を送信する要求を行い、電子文書の受信を行う。   The communication unit 1308 performs transmission / reception with the server 70. As a specific example, the communication unit 1308 makes a request for transmitting an electronic document specified by a URL extracted from a two-dimensional barcode, and receives the electronic document.

また、以上のように構成された本実施の形態にかかる情報処理装置1300における画像を入力処理してから領域加工処理部1306で加工処理されて表示処理部113で表示するまでの処理について説明する。図16は、本実施の形態にかかる情報処理装置1300における上述した処理の手順を示すフローチャートである。   In addition, a process from the input processing of the image in the information processing apparatus 1300 according to the present embodiment configured as described above to the processing by the region processing unit 1306 and the display by the display processing unit 113 will be described. . FIG. 16 is a flowchart showing the above-described processing procedure in the information processing apparatus 1300 according to the present embodiment.

画像入力処理部1302は、スキャナ30を用いて紙文書11を読み取り、読み取られた紙文書11の内容を保持する画像の入力処理を行う(ステップS1601)。   The image input processing unit 1302 reads the paper document 11 using the scanner 30, and performs an input process of an image that holds the content of the read paper document 11 (step S1601).

そして、情報抽出部1303は、入力処理した画像に付加された二次元バーコードから、電子文書の保存先を示すURLと、電子文書中の領域定義及び領域毎の輝度平均を抽出する(ステップS1602)。   Then, the information extraction unit 1303 extracts the URL indicating the storage destination of the electronic document, the region definition in the electronic document, and the luminance average for each region from the two-dimensional barcode added to the input processed image (step S1602). ).

次に、特徴量取得部1304は、ステップS1602で抽出された領域座標に応じて画像を矩形領域に分割する(ステップS1603)。そして、特徴量取得部1304は、分割された矩形領域毎に輝度平均を算出する(ステップS1604)。   Next, the feature amount acquisition unit 1304 divides the image into rectangular regions according to the region coordinates extracted in step S1602 (step S1603). Then, the feature amount acquisition unit 1304 calculates a luminance average for each divided rectangular area (step S1604).

次に、判断部1305は、抽出された領域対応情報における矩形領域毎の輝度平均と、特徴量取得部1304が算出した矩形領域毎の輝度平均を比較して、各矩形領域において追記されている領域を判断する(ステップS1605)。   Next, the determination unit 1305 compares the luminance average for each rectangular region in the extracted region correspondence information with the luminance average for each rectangular region calculated by the feature amount acquisition unit 1304, and is added to each rectangular region. The area is determined (step S1605).

そして、電子文書取得部1309は、ステップS1602で抽出された電子文書の保存先を示すURLを通信部1308に出力した後に通信部1308が受信した電子文書を取得する(ステップS1606)。   Then, the electronic document acquisition unit 1309 acquires the electronic document received by the communication unit 1308 after outputting the URL indicating the storage destination of the electronic document extracted in step S1602 to the communication unit 1308 (step S1606).

次に、領域加工処理部1306は、取得した電子文書に対して入力処理された画像と照合を行い、電子文書内で追記された領域を特定する(ステップS1607)。   Next, the area processing unit 1306 collates the acquired electronic document with the input image and specifies the area added in the electronic document (step S1607).

そして、領域加工処理部1306は、特定された領域に対して処理IDと対応付けられた加工処理を行う(ステップS1608)。次に、表示処理部113が加工処理された電子文書をモニタ40に表示する処理を行う(ステップS1609)。   Then, the region processing unit 1306 performs the processing associated with the processing ID on the specified region (step S1608). Next, the display processing unit 113 performs processing for displaying the processed electronic document on the monitor 40 (step S1609).

上述した処理手順により、情報処理装置1300で画像の元となる電子文書を取得して、追記された領域について加工処理した後で電子文書を表示処理することが可能となる。なお、上述した処理手順は、本実施の形態による画像を入力処理してから領域加工処理部1306で加工処理して表示処理部113で表示するまでの処理手順の例を示したものであり、本発明をこの処理手順に制限するものではない。   With the processing procedure described above, the electronic document that is the source of the image is acquired by the information processing apparatus 1300, and the electronic document can be displayed and processed after processing the added area. Note that the processing procedure described above is an example of a processing procedure from input processing of an image according to the present embodiment to processing by the region processing processing unit 1306 and display by the display processing unit 113. The present invention is not limited to this processing procedure.

また、本実施の形態では、情報処理装置1300をスキャナ30とプリンタ21と接続することとしたが、第1の実施の形態と同様にMFP170と接続してもよい。この場合、情報処理装置1300は、MFP170で読み取った画像の電子文書を取得して、加工処理を行った後にMFP170で出力する。   In the present embodiment, the information processing apparatus 1300 is connected to the scanner 30 and the printer 21, but may be connected to the MFP 170 as in the first embodiment. In this case, the information processing apparatus 1300 acquires an electronic document of an image read by the MFP 170, performs a processing process, and outputs the processed electronic document with the MFP 170.

また、追記された領域に対して加工処理や関連文書の取得に制限するものではなく、例えば二次元バーコード内で領域毎に輝度平均等の特徴情報と処理IDとを対応付けて保持して、追記された領域に対応する処理IDを取得し、処理IDに対応付けられた処理を情報処理装置1300が行うこと等が考えられる。   In addition, it is not limited to the processing processing and the acquisition of related documents for the added area. For example, in the two-dimensional barcode, the feature information such as luminance average and the processing ID are stored in association with each other. It is conceivable that the process ID corresponding to the added area is acquired, and the information processing apparatus 1300 performs the process associated with the process ID.

上述した情報処理装置により、装置上で処理を行わずとも電子文書を加工編集することができるので、利用者の利便性が向上する。   With the information processing apparatus described above, the electronic document can be processed and edited without performing any processing on the apparatus, so that convenience for the user is improved.

(第2の実施の形態の変形例1)
上述した第2の実施の形態においては、矩形状の領域毎に特徴情報(例えば輝度平均)を対応付けて保持していた。しかし、本発明は領域を矩形の領域毎に制限するものではない。特に領域と処理IDを対応付けて領域毎に異なる処理を行うことを考慮すると、所定のサイズの矩形の領域毎に意味を持たせるのが難しく、領域毎に特徴のある処理を割り当てるのが難しい場合も考えられる。そこで本変形例では、電子文書中で特徴のある文字列を特定し、この特定された文字列毎に領域を割り当てて、処理IDと対応付けることにした例とする。
(Modification 1 of the second embodiment)
In the second embodiment described above, feature information (for example, luminance average) is stored in association with each rectangular region. However, the present invention does not limit the area for each rectangular area. In particular, it is difficult to assign meaning to each rectangular area of a predetermined size, and it is difficult to assign a characteristic process to each area, considering that different processes are performed for each area by associating the area with the process ID. Cases are also conceivable. Therefore, in this modification, a character string having a characteristic in the electronic document is specified, and an area is assigned to each specified character string, and is associated with the process ID.

図17は、本変形例にかかる情報処理装置が読み込む対象となる紙文書で処理と対応付けられた領域と、この紙文書に付加された二次元バーコードが保持する領域対応情報の一例を示した説明図である。本図に示すように、領域対応情報では、「電子透かし」、「著作権」、「品質」を示す領域座標と輝度平均と処理IDとを対応付けて保持する。これにより、例えば「電子透かし」に追記されていれば関連する電子文書を取得し、「著作権」に追記されていれば著作権を強調して印刷する等、領域毎に異なる処理を割り当てることができる。   FIG. 17 shows an example of an area associated with processing in a paper document to be read by the information processing apparatus according to this modification, and area correspondence information held by a two-dimensional barcode added to the paper document. FIG. As shown in the figure, in the area correspondence information, area coordinates indicating “digital watermark”, “copyright”, and “quality”, a luminance average, and a process ID are stored in association with each other. Thus, for example, a related electronic document is acquired if it is added to the “digital watermark”, and a different process is assigned to each area, such as printing with the copyright emphasized if it is added to the “copyright”. Can do.

(変形例)
また、上述した各実施の形態に限定されるものではなく、以下に例示するような種々の変形が可能である。
(Modification)
Moreover, it is not limited to each embodiment mentioned above, The various deformation | transformation which is illustrated below is possible.

(変形例1)
上述する実施の形態では、二次元バーコード等の埋込情報に埋め込む情報より関連文書や画像と対応する電子文書を取得した。これらの電子文書を取得するための二次元バーコードが付加された紙文書はどのようなものでもよい。そこで、変形例1では、対応する電子文書を取得できる紙文書の一例について説明する。具体的には、対応する電子文書を取得するため、電子文書の各ページに二次元バーコード等情報を埋め込む。そして、電子文書を印刷した場合、1ページのみであっても必ず二次元バーコード等が付加されている。これにより、この1ページをMFPやスキャナで読み取ることで、読み取られたページを含む電子文書全体を取得することができる。
(Modification 1)
In the embodiment described above, an electronic document corresponding to a related document or image is acquired from information embedded in embedded information such as a two-dimensional barcode. Any paper document to which a two-dimensional barcode for acquiring these electronic documents is added may be used. Therefore, in Modification 1, an example of a paper document from which a corresponding electronic document can be acquired will be described. Specifically, in order to acquire a corresponding electronic document, information such as a two-dimensional barcode is embedded in each page of the electronic document. When an electronic document is printed, a two-dimensional bar code or the like is always added even if only one page is printed. Thus, the entire electronic document including the read page can be acquired by reading this one page with the MFP or the scanner.

(変形例2)
次に、変形例1とは異なる例における対応する電子文書を取得可能な紙文書の一例について説明する。本変形例では、取得する対象となる電子文書の概要を記載した電子文書を生成し、取得する対象となる電子文書を特定する情報を含んだ二次元バーコードを生成した電子文書に付加する。利用者は、二次元バーコードを付加した概要のみ記載されている電子文書を印刷し、紙文書として他の利用者に配布する。他の利用者は、概要のみ記載されている紙文書に対してスキャナあるいはMFPで読み取りを行い、上述した実施の形態と同様の処理を行うことで紙文書に付加されていた二次元バーコードより全てが記載された電子文書を特定して、この特定された電子文書をネットワーク等を介して取得する。
(Modification 2)
Next, an example of a paper document capable of acquiring a corresponding electronic document in an example different from Modification 1 will be described. In this modification, an electronic document describing an outline of an electronic document to be acquired is generated, and a two-dimensional barcode including information for specifying the electronic document to be acquired is added to the generated electronic document. The user prints an electronic document in which only a summary with a two-dimensional barcode is added and distributes it as a paper document to other users. Other users read a paper document with only an outline read by a scanner or MFP, and perform the same processing as in the above-described embodiment to obtain a two-dimensional barcode added to the paper document. The electronic document in which all are described is specified, and the specified electronic document is acquired through a network or the like.

(変形例3)
次に、変形例1、2とは異なる例における対応する電子文書を取得可能な紙文書の一例について説明する。本変形例では、取得する対象となる電子文書はフルカラーで生成されており、この電子文書で二次元バーコードが付加されたページをモノクロで印刷する。そして、利用者は、この印刷されたモノクロのページによる紙文書を他の利用者に配布する。そして、他の利用者はこのモノクロのページによる紙文書をスキャナあるいはMFPで読み取りを行い、上述した実施の形態と同様の処理を行うことで紙文書に付加された二次元バーコードからフルカラーの電子文書を取得することができる。
(Modification 3)
Next, an example of a paper document capable of acquiring a corresponding electronic document in an example different from the first and second modifications will be described. In this modification, the electronic document to be acquired is generated in full color, and a page to which a two-dimensional barcode is added is printed in monochrome in this electronic document. Then, the user distributes the paper document with the printed monochrome page to other users. Then, the other user reads the paper document with the monochrome page with a scanner or MFP, and performs the same processing as in the above-described embodiment, so that the two-dimensional barcode added to the paper document is used as a full color electronic document. Documents can be acquired.

(変形例4)
上述した実施の形態において加工処理部は、予め設定されているか、入力デバイスから入力された設定を用いて加工処理を行うこととしたがこれらに制限されるものではない。そこで本変形例では、利用者毎に異なる加工処理を行う場合について説明する。具体的には利用者毎に適した設定を記憶部で保持する。そして、利用者が利用者認証部で認証された後に出力処理部から出力する場合、利用者毎に適した設定で印刷するよう取得した電子文書の設定を変更してから出力する。
(Modification 4)
In the above-described embodiment, the processing unit is set in advance or performs processing using the setting input from the input device. However, the processing unit is not limited thereto. Therefore, in this modification, a case will be described in which different processing is performed for each user. Specifically, a setting suitable for each user is held in the storage unit. When the user is authenticated by the user authentication unit and then output from the output processing unit, the setting is changed after changing the setting of the acquired electronic document so that printing is performed with a setting suitable for each user.

図18は、利用者毎の設定に応じて加工処理された電子文書の一例を示した説明図である。利用者毎の設定において、利用者が見ることを容易にするために文字サイズを大きくする設定が予め行われていたとする。そして、この利用者が情報処理装置に対して認証処理を行い、上述した実施の形態の処理手順により電子文書を取得した場合、取得した電子文書に対して加工処理部は、電子文書に含まれる文字に対して文字サイズを大きくする加工処理を行う。これにより、利用者は、自分に適した電子文書を取得することが可能になり、利便性が向上することになる。   FIG. 18 is an explanatory diagram showing an example of an electronic document processed according to the setting for each user. In the setting for each user, it is assumed that the setting for increasing the character size has been made in advance for easy viewing by the user. When this user performs an authentication process on the information processing apparatus and acquires the electronic document by the processing procedure of the above-described embodiment, the processing unit is included in the electronic document for the acquired electronic document. Processing to increase the character size for characters. As a result, the user can acquire an electronic document suitable for him / her and convenience is improved.

(変形例5)
上述した実施の形態においては、電子文書を出力する際に特に出力時の設定の変更は行っていない。そこで本変形例では、二次元バーコードに出力する際の設定を保持した場合の例について説明する。本変形例では二次元バーコードの出力する際の設定を保持するので、情報抽出部が出力する際の設定を抽出できる。そして、出力処理部は、この抽出された設定を利用して電子文書を出力する。これにより、最適な設定で電子文書を出力することができ、利便性が向上する。
(Modification 5)
In the above-described embodiment, the output setting is not particularly changed when an electronic document is output. Therefore, in the present modification, an example in which settings for outputting to a two-dimensional barcode are held will be described. In this modification, since the setting when outputting the two-dimensional barcode is held, the setting when the information extraction unit outputs can be extracted. Then, the output processing unit outputs an electronic document using the extracted setting. As a result, the electronic document can be output with the optimum settings, and convenience is improved.

以上のように、本発明にかかる情報処理装置、情報処理方法、情報処理プログラム、コンピュータに読み取り可能な記録媒体及び情報処理システムは、画像に付加された情報を抽出する技術に有用であり、特に、画像から抽出された情報を用いて電子文書を取得する技術に適している。   As described above, the information processing apparatus, the information processing method, the information processing program, the computer-readable recording medium, and the information processing system according to the present invention are useful for a technique for extracting information added to an image. It is suitable for a technique for acquiring an electronic document using information extracted from an image.

第1の実施の形態にかかる情報処理装置、MFP及び公衆ネットワークを介して接続された埋込文書生成装置の構成を示すブロック図である。1 is a block diagram showing a configuration of an information processing apparatus, an MFP, and an embedded document generation apparatus connected via a public network according to a first embodiment. 第1の実施の形態にかかる埋込文書生成装置が保持するID文書対応テーブルのテーブル構造を示した図である。It is the figure which showed the table structure of the ID document corresponding table which the embedded document production | generation apparatus concerning 1st Embodiment hold | maintains. 第1の実施の形態にかかる埋込文書生成装置による取得した電子文書から二次元バーコードを付加するまでの概要を示した説明図である。It is explanatory drawing which showed the outline | summary until it adds a two-dimensional barcode from the electronic document acquired by the embedded document production | generation apparatus concerning 1st Embodiment. 第1の実施の形態にかかる情報処理装置で取得してきた電子文書を保存する際に表示される保存の確認を促すウィンドウの一例を示した図である。It is the figure which showed an example of the window which prompts the confirmation of preservation | save displayed when preserve | saving the electronic document acquired with the information processing apparatus concerning 1st Embodiment. 第1の実施の形態にかかる情報処理装置で入力処理した画像から関連する電子文書を取得するまでの概要を示した説明図である。It is explanatory drawing which showed the outline | summary until it acquires the related electronic document from the image input-processed with the information processing apparatus concerning 1st Embodiment. 第1の実施の形態にかかる情報処理装置の加工処理部による取得した2段組の電子文書から、1段組のレイアウトに変更する加工処理が行われた場合の一例を示した図である。It is the figure which showed an example at the time of the process which changes into the layout of 1 column from the 2-column electronic document acquired by the process part of the information processing apparatus concerning 1st Embodiment. 第1の実施の形態にかかる情報処理装置のキーワード領域取得部で取得したページを表示処理部で表示処理した画面例を示した図である。It is the figure which showed the example of a screen which displayed the page acquired by the keyword area | region acquisition part of the information processing apparatus concerning 1st Embodiment by the display process part. 第1の実施の形態にかかる埋込文書生成装置における文書の取得から二次元バーコードを付加して出力するまでの処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the process from the acquisition of the document in the embedded document production | generation apparatus concerning 1st Embodiment until it adds and outputs a two-dimensional barcode. 第1の実施の形態にかかる情報処理システムにおける紙文書の読み込みから、利用者が紙文書に追記した行と対応した関連する電子文書を取得して印刷するまでの処理の手順を示すフローチャートである。6 is a flowchart illustrating a processing procedure from reading a paper document to acquiring and printing an associated electronic document corresponding to a line added to the paper document by the user in the information processing system according to the first embodiment. . 第1の実施の形態にかかる情報処理装置におけるMFPから画像を入力処理してから関連する電子文書に対してキーワード検索して結果を表示するまでの処理手順を示すフローチャートである。6 is a flowchart illustrating a processing procedure from input processing of an image from the MFP in the information processing apparatus according to the first embodiment to keyword search for a related electronic document and display of a result. 第1の実施の形態にかかる情報処理装置と埋込文書生成装置の機能を実現するためのプログラムを実行したPCのハードウェア構成を示した図である。It is the figure which showed the hardware constitutions of PC which performed the program for implement | achieving the function of the information processing apparatus concerning 1st Embodiment, and an embedded document production | generation apparatus. 第1の実施の形態にかかるMFPのハードウェア構成の一例を示すブロック図である。2 is a block diagram illustrating an example of a hardware configuration of the MFP according to the first embodiment. FIG. 第2の実施の形態にかかる情報処理装置の構成を示すブロック図である。It is a block diagram which shows the structure of the information processing apparatus concerning 2nd Embodiment. 第2の実施の形態にかかる情報処理装置が読み込む対象となる紙文書に付加された二次元バーコードが保持する領域対応情報を説明した説明図である。It is explanatory drawing explaining the area | region correspondence information which the two-dimensional barcode added to the paper document used as the object read by the information processing apparatus concerning 2nd Embodiment hold | maintains. 第2の実施の形態にかかる情報処理装置が入力処理した画像から対応する電子文書を取得して加工処理するまでの概要を示した説明図である。It is explanatory drawing which showed the outline | summary until it acquires and processes a corresponding electronic document from the image which the information processing apparatus concerning 2nd Embodiment input-processed. 第2の実施の形態にかかる情報処理装置における画像を入力処理してから領域加工処理部で加工処理されて表示処理部で表示するまでの処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the process after carrying out the input process of the image in the information processing apparatus concerning 2nd Embodiment after being processed by the area | region process process part, and displaying on a display process part. 第2の実施の形態の変形例1にかかる情報処理装置が読み込む対象となる紙文書で処理と対応付けられた領域と、この紙文書に付加された二次元バーコードが保持する領域対応情報の一例を示した説明図である。The area associated with the processing in the paper document to be read by the information processing apparatus according to the first modification of the second embodiment, and the area correspondence information held by the two-dimensional barcode added to the paper document It is explanatory drawing which showed an example. 変形例4にかかる情報処理装置の加工処理部で利用者毎の設定に応じて加工処理された電子文書の一例を示した説明図である。It is explanatory drawing which showed an example of the electronic document processed according to the setting for every user in the processing part of the information processing apparatus concerning the modification 4.

符号の説明Explanation of symbols

10、11 紙文書
20、21 プリンタ
30 スキャナ
40 モニタ
50 キーボード
60、61 公衆ネットワーク
70 サーバ
100、1300 情報処理装置
101 記憶部
102、1301 利用者入力処理部
103 利用者認証部
104 キーワード入力受付部
105、1302 画像入力処理部
106、1303 情報抽出部
107、1304 特徴量取得部
108、1305 判断部
109、1309 電子文書取得部
110 キーワード検索部
111 キーワード領域取得部
112 加工処理部
113 表示処理部
114、1307 出力処理部
115、1308 通信部
150 埋込文書生成装置
151 記憶部
152 対象文書取得部
153 領域分割部
154 関連文書取得部
155 関連文書登録部
156 領域特徴抽出部
157 埋込情報生成部
158 埋込情報付加部
159 埋込文書出力処理部
160 通信部
161 関連文書取得部
170 MFP
171 文書読取処理部
172 印刷処理部
173 記憶部
174 電子文書入力処理部
175 画像出力処理部
176 通信部
301 処理対象電子文書
302 領域分割された電子文書
303 生成された領域対応情報
304 二次元バーコード
305 二次元バーコードが付加された電子文書
501 入力処理画像
502 画像から分離された二次元バーコード
503 二次元バーコードから抽出した領域対応情報
504 画像の各行から算出された輝度平均
505 文書IDで埋込文書生成装置に検索
506 取得した関連する電子文書
1101 CPU
1102 ROM
1103 RAM
1104 外部記憶装置
1105 表示装置
1106 入力装置
1107 通信I/F
1108 バス
1201 システム制御部
1202 システムメモリ
1203 パラメータメモリ
1204 時計回路
1205 操作表示部
1206 ページメモリ
1207 プリンタエンジン
1208 給紙搬送系ユニット
1209 通信インターフェース回路
1210 磁気ディスク装置
1211 スキャナエンジン
1212 内部バス
1306 領域加工処理部
1501 入力処理画像
1502 追記領域の特定
1503 画像と電子文書の照合
1504 加工処理後の電子文書

10, 11 Paper document 20, 21 Printer 30 Scanner 40 Monitor 50 Keyboard 60, 61 Public network 70 Server 100, 1300 Information processing device 101 Storage unit 102, 1301 User input processing unit 103 User authentication unit 104 Keyword input reception unit 105 1302 Image input processing unit 106, 1303 Information extraction unit 107, 1304 Feature quantity acquisition unit 108, 1305 Judgment unit 109, 1309 Electronic document acquisition unit 110 Keyword search unit 111 Keyword region acquisition unit 112 Processing processing unit 113 Display processing unit 114, 1307 Output processing unit 115, 1308 Communication unit 150 Embedded document generation device 151 Storage unit 152 Target document acquisition unit 153 Region division unit 154 Related document acquisition unit 155 Related document registration unit 156 Region feature extraction unit 157 Embedding Information generation unit 158 Embedded information addition unit 159 Embedded document output processing unit 160 Communication unit 161 Related document acquisition unit 170 MFP
171 Document Reading Processing Unit 172 Printing Processing Unit 173 Storage Unit 174 Electronic Document Input Processing Unit 175 Image Output Processing Unit 176 Communication Unit 301 Processing Target Electronic Document 302 Electronic Document Divided into Region 303 Generated Region Corresponding Information 304 Two-dimensional Bar Code 305 Electronic document with two-dimensional barcode added 501 Input processing image 502 Two-dimensional barcode separated from image 503 Area correspondence information extracted from two-dimensional barcode 504 Brightness average calculated from each line of image 505 Document ID Search in embedded document generation apparatus 506 Acquired related electronic document 1101 CPU
1102 ROM
1103 RAM
1104 External storage device 1105 Display device 1106 Input device 1107 Communication I / F
1108 Bus 1201 System control unit 1202 System memory 1203 Parameter memory 1204 Clock circuit 1205 Operation display unit 1206 Page memory 1207 Printer engine 1208 Paper feed / conveyance unit 1209 Communication interface circuit 1210 Magnetic disk unit 1211 Scanner engine 1212 Internal bus 1306 Area processing unit 1501 Input processing image 1502 Specifying additional write area 1503 Collation of image and electronic document 1504 Electronic document after processing

Claims (9)

電子文書を所定の領域に分割し、分割された領域毎に、該領域の特徴情報及び他の電子文書を特定する文書特定情報が埋め込まれた前記電子文書の画像情報を入力する入力手段と、
前記電子文書に埋め込まれていた領域毎の該領域の特徴情報、及び当該領域毎に対応付けられた文書特定情報を抽出する抽出手段と、
前記入力手段により入力された前記画像情報から、前記分割された領域毎の特徴情報を取得する特徴情報取得手段と、
前記領域毎に、前記抽出手段により抽出された前記特徴情報と、前記特徴情報取得手段により取得された前記特徴情報と、を比較する比較手段と、
前記比較手段による比較の結果に基づいて、分割された領域のうち、前記電子文書に対する追記が行われた領域を判断する判断手段と、
前記判断手段により追記が行われたと判断された前記領域と対応付けられている前記文書特定情報に基づいて、前記他の電子文書を取得する電子文書取得手段と、
を備えることを特徴とする情報処理装置。
Input means for dividing the electronic document into a predetermined area, for each divided region, and inputs the image information of the electronic document document specifying information for specifying the feature information and other electronic documents of the region is embedded,
Extraction means for extracting feature information of each area embedded in the electronic document and document specifying information associated with each area ;
Feature information acquisition means for acquiring feature information for each of the divided areas from the image information input by the input means;
Comparison means for comparing the feature information extracted by the extraction means with the feature information acquired by the feature information acquisition means for each region.
Based on the result of the comparison by the comparison unit, a determination unit that determines a region in which the electronic document is additionally written among the divided regions;
An electronic document acquisition means for acquiring the other electronic document based on the document specifying information associated with the area determined to have been additionally written by the determination means;
An information processing apparatus comprising:
前記抽出手段は、さらに、領域毎に対応付けられた、前記領域の範囲を示す領域情報を前記電子文書から抽出し、
前記特徴情報取得手段は、前記領域情報から特定される領域に対する特徴情報を取得すること、
を特徴とする請求項1に記載の情報処理装置。
The extracting means further extracts associated with each area, the area information indicating the range of the previous SL region from the electronic document,
The feature information acquisition means acquires feature information for a region specified from the region information ;
The information processing apparatus according to claim 1.
前記特徴情報は、前記領域における輝度の平均である輝度平均値であり、
前記判断手段は、前記比較手段によって比較された、前記抽出手段により抽出された前記領域の前記特徴情報と、前記特徴情報取得手段により取得された前記領域の特徴情報と、の差が所定の閾値以上であった場合に、該領域に追記が行われたと判断すること、
を特徴とする請求項1又は2に記載の情報処理装置。
The feature information is a luminance average value that is an average of luminance in the region,
The determination unit is configured such that a difference between the feature information of the region extracted by the extraction unit and the feature information of the region acquired by the feature information acquisition unit compared by the comparison unit is a predetermined threshold value. If it is the above, determining that additional writing has been made in the area;
The information processing apparatus according to claim 1 or 2.
前記特徴情報取得手段は、前記電子文書から前記特徴情報が埋め込まれている領域を取り除いて、前記領域毎に前記領域の特徴情報を取得することを特徴とする、請求項1乃至3のいずれか1つに記載の情報処理装置。 The feature information acquisition unit removes a region in which the feature information is embedded from the electronic document, and acquires feature information of the region for each of the regions. The information processing apparatus according to one. 入力手段は、電子文書を所定の領域に分割し、分割された領域毎に、該領域の特徴情報及び他の電子文書を特定する文書特定情報が埋め込まれた前記電子文書の画像情報を入力する入力ステップと、
抽出手段は、前記電子文書に埋め込まれていた領域毎の該領域の特徴情報、及び当該領域毎に対応付けられた文書特定情報を抽出する抽出ステップと、
特徴情報取得手段は、前記入力ステップにより入力された前記画像情報から、前記分割された領域毎の特徴情報を取得する特徴情報取得ステップと、
比較手段は、前記領域毎に、前記抽出ステップにより抽出された前記特徴情報と、前記特徴情報取得ステップにより取得された前記特徴情報と、を比較する比較ステップと、
判断手段は、前記比較ステップによる比較の結果に基づいて、分割された領域のうち、前記電子文書に対する追記が行われた領域を判断する判断ステップと、
電子文書取得手段は、前記判断ステップにより追記が行われたと判断された前記領域と対応付けられている前記文書特定情報に基づいて、前記他の電子文書を取得する電子文書取得ステップと、
を備えることを特徴とする取得方法。
Input means divides the electronic document in a predetermined area, for each divided region, and inputs the image information of the electronic document document specifying information for specifying the feature information and other electronic documents of the region is embedded An input step;
An extracting means for extracting feature information of each area embedded in the electronic document and document specifying information associated with each area ;
A feature information acquisition unit acquires feature information for each of the divided areas from the image information input in the input step; and
The comparing means compares, for each region, the feature information extracted by the extraction step and the feature information acquired by the feature information acquisition step;
The determining means determines a region in which the electronic document has been additionally written out of the divided regions based on the result of the comparison in the comparing step;
An electronic document acquisition unit acquires the other electronic document based on the document specifying information associated with the area determined to have been additionally written by the determination step;
An acquisition method comprising:
前記抽出ステップは、さらに、領域毎に対応付けられた、前記領域の範囲を示す領域情報を前記電子文書から抽出し、
前記特徴情報取得ステップは、前記領域情報から特定される領域に対する特徴情報を取得すること、
を特徴とする請求項5に記載の取得方法。
The extracting step further extracts associated with each area, the area information indicating the range of the previous SL region from the electronic document,
The feature information acquisition step acquires feature information for a region specified from the region information ;
The acquisition method according to claim 5.
前記特徴情報は、前記領域における輝度の平均である輝度平均値であり、
前記判断ステップは、前記比較ステップによって比較された、前記抽出ステップにより抽出された前記領域の前記特徴情報と、前記特徴情報取得ステップにより取得された前記領域の特徴情報と、の差が所定の閾値以上であった場合に、該領域に追記が行われたと判断すること、
を特徴とする請求項5又は6に記載の取得方法。
The feature information is a luminance average value that is an average of luminance in the region,
In the determination step, a difference between the feature information of the region extracted by the extraction step and the feature information of the region acquired by the feature information acquisition step compared by the comparison step is a predetermined threshold value. If it is the above, determining that additional writing has been made in the area;
The acquisition method according to claim 5 or 6.
前記特徴情報取得ステップは、前記電子文書から前記特徴情報が埋め込まれている領域を取り除いて、前記領域毎に前記領域の特徴情報を取得することを特徴とする、請求項5乃至7のいずれか1つに記載の取得方法。 The feature information acquisition step removes a region in which the feature information is embedded from the electronic document, and acquires the feature information of the region for each region. The acquisition method according to one. 請求項5乃至8のいずれか1つに記載された取得方法をコンピュータに実行させるための取得プログラム。   The acquisition program for making a computer perform the acquisition method described in any one of Claims 5 thru | or 8.
JP2005044503A 2005-02-21 2005-02-21 Information processing apparatus, acquisition method, and acquisition program Expired - Fee Related JP4754236B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005044503A JP4754236B2 (en) 2005-02-21 2005-02-21 Information processing apparatus, acquisition method, and acquisition program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005044503A JP4754236B2 (en) 2005-02-21 2005-02-21 Information processing apparatus, acquisition method, and acquisition program

Publications (3)

Publication Number Publication Date
JP2006229874A JP2006229874A (en) 2006-08-31
JP2006229874A5 JP2006229874A5 (en) 2008-04-10
JP4754236B2 true JP4754236B2 (en) 2011-08-24

Family

ID=36990788

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005044503A Expired - Fee Related JP4754236B2 (en) 2005-02-21 2005-02-21 Information processing apparatus, acquisition method, and acquisition program

Country Status (1)

Country Link
JP (1) JP4754236B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007299321A (en) 2006-05-02 2007-11-15 Ricoh Co Ltd Information processor, information processing method, information processing program and information storage medium
JP4697189B2 (en) * 2007-05-30 2011-06-08 村田機械株式会社 Digital multifunction device
JP2010055259A (en) * 2008-08-27 2010-03-11 Konica Minolta Business Technologies Inc Image processing apparatus, image processing program, and image processing method
KR101038108B1 (en) 2009-05-22 2011-06-08 주식회사 파일태그 Method of generating image file for forgery verification and method of forgery verification

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278533A (en) * 1999-03-26 2000-10-06 Minolta Co Ltd Image processor
JP2001075867A (en) * 1999-09-02 2001-03-23 Canon Inc Computer-readable storage medium and system and method for managing picture
JP2001256187A (en) * 2000-03-10 2001-09-21 Hitachi Ltd Digital watermark information in mark image and method for referring to the information
JP2002183520A (en) * 2000-12-12 2002-06-28 Ricoh Co Ltd Printed matter, image processing system and computer system
JP2002279433A (en) * 2001-03-22 2002-09-27 Hitachi Ltd Method and device for retrieving character in video
JP2002300338A (en) * 2001-03-30 2002-10-11 Fujitsu Ltd Image data distribution method, image data purchase method and program
JP2003337823A (en) * 2002-05-17 2003-11-28 Mitsubishi Electric Corp Map information providing device
JP2004070382A (en) * 2002-08-01 2004-03-04 Fuji Xerox Co Ltd Ordering system and ordering method
JP2004080601A (en) * 2002-08-21 2004-03-11 Canon Inc Device, system, and method for processing image and control program
JP2004151957A (en) * 2002-10-30 2004-05-27 Onda Techno:Kk Document search support program
JP2004164218A (en) * 2002-11-12 2004-06-10 Seiko Epson Corp Receipt processor and its method and computer program
JP2004172930A (en) * 2002-11-20 2004-06-17 Ricoh Co Ltd Image processor, image reader, image formation device, program and storage medium
JP2004186850A (en) * 2002-12-02 2004-07-02 Nec Infrontia Corp Wireless network service providing method, and wireless network system
JP2004274632A (en) * 2003-03-11 2004-09-30 Ricoh Co Ltd Image processing apparatus, method and recording medium
JP2004282709A (en) * 2003-02-28 2004-10-07 Fuji Photo Film Co Ltd Information imparting apparatus and method, information detection apparatus and method, and program
JP2004328496A (en) * 2003-04-25 2004-11-18 Toshiba Corp Image processing method
JP2005011216A (en) * 2003-06-20 2005-01-13 Toshiba Corp Image retrieval output device and image retrieval output method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3634099B2 (en) * 1997-02-17 2005-03-30 株式会社リコー Document information management system, media sheet information creation device, and document information management device
JP2003018393A (en) * 2001-07-03 2003-01-17 Ricoh Co Ltd Image processing system

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278533A (en) * 1999-03-26 2000-10-06 Minolta Co Ltd Image processor
JP2001075867A (en) * 1999-09-02 2001-03-23 Canon Inc Computer-readable storage medium and system and method for managing picture
JP2001256187A (en) * 2000-03-10 2001-09-21 Hitachi Ltd Digital watermark information in mark image and method for referring to the information
JP2002183520A (en) * 2000-12-12 2002-06-28 Ricoh Co Ltd Printed matter, image processing system and computer system
JP2002279433A (en) * 2001-03-22 2002-09-27 Hitachi Ltd Method and device for retrieving character in video
JP2002300338A (en) * 2001-03-30 2002-10-11 Fujitsu Ltd Image data distribution method, image data purchase method and program
JP2003337823A (en) * 2002-05-17 2003-11-28 Mitsubishi Electric Corp Map information providing device
JP2004070382A (en) * 2002-08-01 2004-03-04 Fuji Xerox Co Ltd Ordering system and ordering method
JP2004080601A (en) * 2002-08-21 2004-03-11 Canon Inc Device, system, and method for processing image and control program
JP2004151957A (en) * 2002-10-30 2004-05-27 Onda Techno:Kk Document search support program
JP2004164218A (en) * 2002-11-12 2004-06-10 Seiko Epson Corp Receipt processor and its method and computer program
JP2004172930A (en) * 2002-11-20 2004-06-17 Ricoh Co Ltd Image processor, image reader, image formation device, program and storage medium
JP2004186850A (en) * 2002-12-02 2004-07-02 Nec Infrontia Corp Wireless network service providing method, and wireless network system
JP2004282709A (en) * 2003-02-28 2004-10-07 Fuji Photo Film Co Ltd Information imparting apparatus and method, information detection apparatus and method, and program
JP2004274632A (en) * 2003-03-11 2004-09-30 Ricoh Co Ltd Image processing apparatus, method and recording medium
JP2004328496A (en) * 2003-04-25 2004-11-18 Toshiba Corp Image processing method
JP2005011216A (en) * 2003-06-20 2005-01-13 Toshiba Corp Image retrieval output device and image retrieval output method

Also Published As

Publication number Publication date
JP2006229874A (en) 2006-08-31

Similar Documents

Publication Publication Date Title
CN100448257C (en) Image processing apparatus and method therefor
JP4557765B2 (en) Image processing apparatus and method
CN101820491B (en) Document managing apparatus, document managing system, and document managing method
US9454696B2 (en) Dynamically generating table of contents for printable or scanned content
US20070153303A1 (en) Image processing device, image processing method, image processing system, and information recording medium
JP2005159517A (en) Image processor and its control method, program
JP2006065524A (en) Document processing apparatus and method
JP7337612B2 (en) Image processing device, image processing system, image processing method, and program
JP4631900B2 (en) Information processing apparatus, information processing system, and information processing program
JP4673200B2 (en) Print processing system and print processing method
JP4338189B2 (en) Image processing system and image processing method
JP2006025129A (en) System and method for image processing
JP4754236B2 (en) Information processing apparatus, acquisition method, and acquisition program
JP2008035240A (en) Scanning system, scanning device, and data processing method
JP2006023944A (en) Image processing system and image processing method
JP2007005950A (en) Image processing apparatus and network system
JP2005149097A (en) Image processing system and image processing method
JP5673277B2 (en) Image processing apparatus and program
JP2008244612A (en) Image processing apparatus and method
JP2006293970A (en) Image processor, image processing method and image processing program
JP4340900B2 (en) Image information processing system, image information processing apparatus, image information processing method, image information processing program, and storage medium
JP2010109653A (en) Image reader, image forming apparatus, image reading method, and image reading program
JP4651407B2 (en) Image processing apparatus, computer program, and storage medium
JP2009093627A (en) Document-image-data providing system, document-image-data providing device, information processing device, document-image-data providing method, information processing method, document-image-data providing program, and information processing program
JP2023031908A (en) Image processing device, program, and image processing method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080220

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100907

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100914

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110308

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110524

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110525

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140603

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4754236

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees