JP4821629B2 - Image processing apparatus and image processing program - Google Patents

Image processing apparatus and image processing program Download PDF

Info

Publication number
JP4821629B2
JP4821629B2 JP2007015051A JP2007015051A JP4821629B2 JP 4821629 B2 JP4821629 B2 JP 4821629B2 JP 2007015051 A JP2007015051 A JP 2007015051A JP 2007015051 A JP2007015051 A JP 2007015051A JP 4821629 B2 JP4821629 B2 JP 4821629B2
Authority
JP
Japan
Prior art keywords
image
document
embedding
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007015051A
Other languages
Japanese (ja)
Other versions
JP2008182551A (en
Inventor
賢治 蛯谷
武史 野口
純一 松野下
健司 大西
弘文 小松原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2007015051A priority Critical patent/JP4821629B2/en
Publication of JP2008182551A publication Critical patent/JP2008182551A/en
Application granted granted Critical
Publication of JP4821629B2 publication Critical patent/JP4821629B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

本発明は、画像処理装置および画像処理プログラムに関する。   The present invention relates to an image processing apparatus and an image processing program.

機密文書に対する無断複製を防止するために、出力ドキュメントの背景全面に繰り返して、禁複写コード等を埋め込む方法として、特許文献1に記載された「画像読み取り装置および複写装置」が考案されている。   In order to prevent unauthorized copying of a confidential document, an “image reading apparatus and copying apparatus” described in Patent Document 1 has been devised as a method of repeatedly embedding a prohibited copy code or the like over the entire background of an output document.

この特許文献1の発明は、画像読み取り装置において、機密原稿を読み取る際に、無断複製を防止することを課題とし、複製操作を禁止あるいは禁止を解除するための制御情報をあらわすことが可能なようにパターン画像が配列された画像を読み取り対象の画像とする。パターン画像には、複製禁止コードや、複製禁止の解除条件コードを割り当てる。複写機の「通常モード」では、複製禁止情報検出部により読取画像中から複製禁止コードを検出し、制御部は、複製禁止コードが検出された場合には複写動作を中止する。条件情報検出部により、読取画像中から条件コードを検出し、条件が一致した場合には複写動作を許可する複写モードを設け、制御部は、特定ユーザや所定日時を過ぎた場合などの条件に合致する場合には、複写を許可する。   The invention of Patent Document 1 has an object to prevent unauthorized duplication when an confidential image is read in an image reading apparatus, and can represent control information for prohibiting or releasing the duplication operation. An image on which pattern images are arranged is set as an image to be read. A copy prohibition code and a copy prohibition release condition code are assigned to the pattern image. In the “normal mode” of the copying machine, the copy prohibition information detection unit detects the copy prohibition code from the read image, and the control unit stops the copying operation when the copy prohibition code is detected. The condition information detection unit detects a condition code from the scanned image and provides a copy mode that permits a copy operation when the conditions match, and the control unit sets a condition such as when a specific user or a predetermined date and time has passed. If they match, allow copying.

また、イエロー成分を用いて情報を埋め込む方法として、特許文献2に記載された「画像データ処理装置、画像データ処理方法および画像データ処理プログラム」が考案されている。 この特許文献2の発明は、画像データに対するコードの埋め込みやデコードに要する処理を低減することを課題とし、原稿画像データを複数のブロック配列に分割するブロック分割部と、複数のブロックにおける各平均濃度(特徴量)を抽出する平均化部と、複数のブロックにおける各ペアブロックにおける濃度差にて1ビット分のコード(コードのうちの1ビット)を対応付けて、複数のビットを上記複数のブロックに埋め込むエンコード部とを備えている。   As a method for embedding information using a yellow component, “an image data processing device, an image data processing method, and an image data processing program” described in Patent Document 2 have been devised. The invention of this Patent Document 2 has an object to reduce processing required for embedding and decoding codes in image data, and includes a block dividing unit that divides document image data into a plurality of block arrays, and average densities in the plurality of blocks. The averaging unit for extracting (feature amount) and the one-bit code (one bit of the code) are associated with the density difference in each pair block in the plurality of blocks, and a plurality of bits are assigned to the plurality of blocks. And an encoding unit embedded in the.

また、紙文書から元文書を示す文書識別情報を文書の画像を読み取って抽出する技術として、特許文献3に記載された「セキュリティサーバ、文書セキュリティ管理システムおよび文書セキュリティ管理方法」が考案されている。   Further, as a technique for extracting document identification information indicating an original document from a paper document by reading a document image, “Security Server, Document Security Management System, and Document Security Management Method” described in Patent Document 3 has been devised. .

この特許文献3の発明は、文書の印刷、複写などが繰り返される状況でも、文書のセキュリティ状態を継続して追跡することのできる文書セキュリティシステムを提供することを課題とし、文書セキュリティシステムは、画像形成装置と、この画像形成装置にネットワークを介して接続されるセキュリティサーバを含む。セキュリティサーバは、画像形成装置で電子文書が生成される際に、電子文書のプロファイルを生成して記録する第1のプロファイル管理テーブルと、画像形成装置で印刷文書が生成されるときに、印刷文書のプロファイルを、当該印刷文書の派生元の文書のIDと関連付けて生成し、記録する第2のプロファイル管理テーブルとを備える。画像形成装置は、前記印刷文書を出力する時に、この印刷文書に新たなプリントIDを埋め込んで印刷する。   An object of the invention of Patent Document 3 is to provide a document security system capable of continuously tracking the security state of a document even in a situation where printing and copying of the document are repeated. And a security server connected to the image forming apparatus via a network. The security server includes a first profile management table that generates and records a profile of an electronic document when the electronic document is generated by the image forming apparatus, and a print document when the print document is generated by the image forming apparatus. Is generated in association with the ID of the document from which the print document is derived, and a second profile management table is recorded. When outputting the print document, the image forming apparatus embeds a new print ID in the print document and prints it.

また、読み取った文書の画像に埋め込まれたパターン画像にて情報を抽出し、例えば、その情報が文書の識別情報を示す場合、文書の識別情報をポリシーサーバに通知して、文書に設定されたセキュリティレベルに応じて複写もしくは画像読み取り処理を制御する複合機等が提案されている。
特開2003−280469号公報。 特開2004−349879号公報。 特開2005−259108号公報。
Also, information is extracted with a pattern image embedded in the read document image. For example, when the information indicates document identification information, the document identification information is notified to the policy server and set in the document. A multi-function machine that controls copying or image reading processing according to the security level has been proposed.
JP2003-280469A. JP 2004-349879 A. JP-A-2005-259108.

本発明は、機密文書に対する複製処理の実施の可否および処理が許可される場合の処理条件をセキュリティポリシーに従って取得して複製処理を制御する符号化情報を、異なる複数のコード画像の埋め込み方法によって埋め込んだ画像を用紙に印刷し、印刷した紙文書の複製処理においては、画像の画像読み取り条件にて取得される読み取り画像データに最適なコード画像による符号化情報の復号方法を決定して、文書に対する複製処理を制御する画像処理装置および画像処理プログラムを提供することを目的とする。   The present invention embeds encoded information for controlling the duplication process by acquiring the processing conditions when the duplication process for the confidential document is executed and the process is permitted in accordance with the security policy by embedding a plurality of different code images. In the copy processing of the printed paper document, the decoding method of the encoded information by the code image that is most suitable for the read image data acquired under the image reading condition of the image is determined, and the document It is an object of the present invention to provide an image processing apparatus and an image processing program for controlling duplication processing.

上記課題を解決するために、請求項1の画像処理装置の発明は、文書に付与する情報を取得する取得手段と、前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第1の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第1の符号化情報として前記文書の画像に埋め込む第1の埋め込み手段と、前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第2の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第2の符号化情報として前記文書の背景画像に埋め込む第2の埋め込み手段と、前記第1の埋め込み手段および前記第2の埋め込み手段により前記第1の符号化情報および第2の符号化情報が埋め込まれた前記文書の画像と背景画像を合成して前記文書の画像を出力する出力手段とを具備する。 In order to solve the above problems, the invention of the image processing apparatus according to claim 1 is characterized in that an acquisition unit that acquires information to be added to a document, and a first information after the information acquired by the acquisition unit is printed together with the image of the document. reading a first embedding means for embedding the image of the document as the first encoded information extraction is easy of the information when reading the printed image by method information acquired by the acquisition unit, of the document A second embedding means for embedding in the background image of the document as second encoded information that allows easy extraction of the information when the print image is read by the second reading method after printing together with the image ; out to output an image of the embedding unit and the second embedding means by the first encoded information and second encoded information by synthesizing an image and a background image of the document that is embedded the document And means.

また、請求項2の発明は、請求項1の発明おいて、前記第1の埋め込み手段は、前記出力手段で出力された画像を白黒で読み取る前記第1の読取方式で読み取った場合に前記情報の抽出が容易な第1の埋め込み方式で前記情報を埋め込み、前記第2の埋め込み手段は、前記出力手段で出力された画像をカラーで読み取る前記第2の読取方式で読み取った場合に前記情報の抽出が容易な第2の埋め込み方式で前記情報を埋め込む。 Further, the invention of claim 2, Oite to the invention of claim 1, wherein the first embedding means, wherein, when read by the first reading method for reading an image output by the output means in black and white The information is embedded by a first embedding method that allows easy extraction of information, and the second embedding unit reads the image output by the output unit by using the second reading method for reading in color. The information is embedded by a second embedding method that facilitates the extraction of .

また、請求項3の発明は、請求項1または請求項2の発明おいて、前記第1の埋め込み手段および前記第2の埋め込み手段は、前記文書の画像および前記文書の背景画像に対してそれぞれ異なる領域に前記情報の埋め込みを行う。 The invention of claim 3 is Oite the invention of claim 1 or claim 2, wherein the first embedding unit and the second embedding means, the background image of the image and the document of the document The information is embedded in different areas .

また、請求項4の発明は、請求項3の発明おいて、前記第2の埋め込み手段は、前記文書の背景画像の四隅に前記第2の埋め込み方式で前記情報を埋め込み、前記第1の埋め込み手段は、前記文書の画像の残りの領域の全面に前記第1の埋め込み方式で前記情報を埋め込む。 Further, the invention of claim 4, Oite to the invention of claim 3, wherein the second embedding unit embeds said information with a second embedding method in the four corners of the background image of the document, the first The embedding unit embeds the information by the first embedding method on the entire remaining area of the image of the document.

また、請求項5の発明は、請求項3の発明おいて、前記第2の埋め込み手段は、前記文書の背景画像の上下の端に前記第2の埋め込み方式で前記情報を埋め込み、前記第1の埋め込み手段は、前記文書の画像の残りの領域の全面に前記第1の埋め込み方式で前記情報を埋め込む。 The invention of claim 5 is Oite to the invention of claim 3, wherein the second embedding unit embeds the information in the second embedding method the upper and the lower edges of the background image of the document, the first The first embedding unit embeds the information by the first embedding method on the entire remaining area of the image of the document.

また、請求項6の発明は、請求項3の発明おいて、前記第1の埋め込み手段は、前記情報を前記第1の埋め込み方式に対応した第1のコード化方式でコード化した第1の画像を生成する第1の手段と、前記第1の手段で生成した前記第1の画像を前記文書の画像の第1の領域に埋め込む第2の手段とを具備し、前記第2の埋め込み手段は、前記情報を前記第2の埋め込み方式に対応した第2のコード化方式でコード化した第2の画像を生成する第3の手段と、前記第3の手段で生成した前記第2の画像を前記文書の背景画像の第2の領域に埋め込む第4の手段とを具備する。 The invention of claim 6 is Oite to the invention of claim 3, wherein the first embedding means, first obtained by coding the information in the first coding scheme corresponding to the first embedding method And a second means for embedding the first image generated by the first means in a first area of the image of the document, and the second embedding. The means includes: a third means for generating a second image obtained by encoding the information by a second encoding method corresponding to the second embedding method; and the second means generated by the third means. And a fourth means for embedding the image in a second region of the background image of the document.

また請求項7の画像処理プログラムの発明は、コンピュータを、文書に付与する情報を取得する取得手段、前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第1の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第1の符号化情報として前記文書の画像に埋め込む第1の埋め込み手段、前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第2の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第2の符号化情報として前記文書の背景画像に埋め込む第2の埋め込み手段、前記第1の埋め込み手段および前記第2の埋め込み手段により前記第1の符号化情報および第2の符号化情報が埋め込まれた前記文書の画像と背景画像を合成して前記文書の画像を出力する出力手段として機能させるために動作する。
The invention of an image processing program according to claim 7, the computer, acquiring means for acquiring information to be applied to the document, the information acquired by the acquisition unit, the first read mode after printing with the image of the document After printing the information obtained by the first embedding means and the obtaining means to be embedded in the image of the document as the first encoded information from which the information can be easily extracted when reading the print image, together with the image of the document A second embedding unit, the first embedding unit, and the second embedding unit embed the second encoded information in the background image of the document as the second encoded information that allows easy extraction of the information when the print image is read by the second reading method . output hand for outputting an image of the first encoded information and second encoded information by synthesizing an image and a background image of the document that is embedded the document by embedding means It operates to function as a.

本発明の請求項1の発明によれば、文書の画像の読み取り条件にて取得される画像データに最適な埋め込み情報の抽出処理を選択することができる。   According to the first aspect of the present invention, it is possible to select an extraction process for embedding information that is optimal for image data acquired under document image reading conditions.

また、請求項2の発明によれば、白黒による画像読み取り処理、カラーによる画像読み取り処理のいずれの読み取り条件にて読み取られた画像データであっても、埋め込み情報の抽出処理を行うことができる。   According to the invention of claim 2, embedded information extraction processing can be performed for image data read under any reading condition of monochrome image reading processing or color image reading processing.

また、請求項3の発明によれば、読み取り可能な領域の画像に最適な埋め込み情報の抽出処理を選択して処理することができる。   According to the third aspect of the invention, it is possible to select and process the extraction process of the embedded information that is optimal for the image of the readable area.

また、請求項4の発明によれば、文書における一部の領域が欠損あるいは読み取り不可であった場合であっても、読み取り可能な領域の画像に最適な埋め込み情報の抽出処理を選択して処理することができる。   According to the invention of claim 4, even when a partial area in the document is missing or cannot be read, an extraction process for extracting embedded information optimum for an image of the readable area is selected and processed. can do.

また、請求項5の発明によれば、文書における一部の領域が欠損あるいは読み取り不可であった場合でも、読み取り可能な領域の画像に最適な埋め込み情報の抽出処理を選択して処理することができる。   According to the fifth aspect of the present invention, even when a partial area of a document is missing or cannot be read, it is possible to select and process an extraction process of embedded information that is optimal for an image of a readable area. it can.

また、請求項6の発明によれば、画像読み取り条件の画像データに最適なコード画像にて情報を読み取ることができる。   According to the sixth aspect of the present invention, information can be read with a code image that is optimal for image data under image reading conditions.

また、請求項7の発明によれば、文書の画像の読み取り条件にて取得される画像データに最適な埋め込み情報の抽出処理を選択することができる。   According to the seventh aspect of the present invention, it is possible to select a process for extracting embedded information that is optimal for image data acquired under document image reading conditions.

本発明の実施例について、添付図面を参照しながら説明する。   Embodiments of the present invention will be described with reference to the accompanying drawings.

以下、「文書の複製」とは、画像読み取り処理、複写処理を示し、また、符号化情報が所定の規則にて埋め込まれた画像を「コード画像」と称し、また、印刷装置は、以下に示す印刷機能を有した複合機を含むものとする。   Hereinafter, “document duplication” refers to image reading processing and copying processing, and an image in which encoded information is embedded according to a predetermined rule is referred to as a “code image”. It is assumed to include a multifunction device having the printing function shown.

図1は、本発明の画像処理装置を配した文書処理システムの構成の一例を示した図である。   FIG. 1 is a diagram showing an example of a configuration of a document processing system provided with an image processing apparatus of the present invention.

図1において、文書処理システム10は、文書データベース210(以下、文書DBと称す)に文書220を登録して管理する文書管理装置200と、ユーザを登録するとともに、文書220に対する各種操作を行うユーザの認証処理を行う認証サーバ700と、文書220に対するセキュリティレベルが設定して保護された機密文書221に対する処理の実施可否を機密文書221毎に設定されたユーザのセキュリティレベル、文書に対する処理種別の組み合わせ毎に設定し、処理可能な場合の処理条件(印刷条件を含む)を、設定した機密文書管理情報921に基づいて判断するポリシーサーバ900と、文書220に対するユーザのセキュリティレベルに応じて文書識別情報(以下、文書IDと称す)、複製禁止を示す情報を異なる種類のコード画像の埋め込み方法を用いて埋め込んだコード画像埋め込み文書800の印刷制御を印刷装置300、あるいは、複合機400に対して行うユーザ端末100と、機密文書221の画像に所定のコード画像(詳細は後述する)にて符号化情報を埋め込んだコード画像埋め込み文書800に対する複製処理(複写、画像読み取り処理)の実施可否をポリシーサーバ900に問い合わせ、問い合わせ結果に基づいてコード画像埋め込み文書800に対する複製処理、ファクシミリ送信(以下、FAX送信と称する)処理を制御する複合機400とがそれぞれネットワーク7を介して接続して構成される。   In FIG. 1, a document processing system 10 includes a document management apparatus 200 that registers and manages a document 220 in a document database 210 (hereinafter referred to as a document DB), and a user who registers a user and performs various operations on the document 220. A combination of the authentication server 700 that performs the authentication process, the security level of the document 220, the security level of the user set for each confidential document 221, and the processing type for the document. Document identification information corresponding to a policy server 900 that determines processing conditions (including printing conditions) that are set for each process and that can be processed based on the set confidential document management information 921 and the security level of the user for the document 220 (Hereinafter referred to as document ID), different types of information indicating copy prohibition The code image embedded document 800 embedded using the above-described code image embedding method is printed on the printing apparatus 300 or the user terminal 100 that performs the control on the multifunction machine 400, and a predetermined code image (details) The policy server 900 is inquired as to whether or not the duplication processing (copying and image reading processing) can be performed on the code image embedded document 800 in which the encoded information is embedded, and the duplication processing on the code image embedded document 800 based on the inquiry result. The MFP 400 that controls facsimile transmission (hereinafter referred to as FAX transmission) processing is connected via the network 7.

ポリシーサーバ900は、文書管理装置200の文書DB210に登録して管理される文書220に対するユーザの各種文書処理(印刷処理、印刷した紙文書に対する複写、スキャン、FAX送信)に対する処理条件を機密文書管理情報921に設定して管理し、ポリシーサーバ900は、システムに配置されたユーザ端末100あるいは複合機400からネットワーク7を介して通知される文書ID、処理種別、ユーザIDにて機密文書管理情報921の設定内容を参照し、セキュリティレベルが設定された機密文書221である場合は、文書220に対する処理の実施可否、処理条件を処理種別毎に判定し、判定結果を問合せ元のユーザ端末100、複合機400に応答する。   The policy server 900 manages confidential document processing conditions for various types of user document processing (print processing, copying of printed paper documents, scanning, and FAX transmission) for a document 220 registered and managed in the document DB 210 of the document management apparatus 200. The policy server 900 sets and manages the information 921, and the policy server 900 uses confidential document management information 921 based on the document ID, processing type, and user ID notified via the network 7 from the user terminal 100 or the multifunction device 400 arranged in the system. In the case of a confidential document 221 in which the security level is set, whether or not the processing of the document 220 can be executed and the processing condition are determined for each processing type, and the determination result is determined as the inquiry source user terminal 100 and the composite Responds to machine 400.

ポリシーサーバ900にて管理される機密文書管理情報921は、例えば、図2に示すように、文書220を操作するユーザ、もしくは、ユーザが属するユーザグループに設定される各機密文書221に対するセキュリティレベルと、機密文書221に対する処理の種別(文書の印刷、複写、FAX送信、読み取り)との組み合わせ毎に、処理の禁止、許可の別と、処理が許可される場合は処理条件をそれぞれ設定して記録した情報である。   The confidential document management information 921 managed by the policy server 900 includes, for example, a security level for each confidential document 221 set for the user operating the document 220 or the user group to which the user belongs, as shown in FIG. For each combination with the processing type (printing, copying, FAX transmission, reading) of the confidential document 221, the processing is prohibited and permitted, and the processing condition is set and recorded when the processing is permitted. Information.

また、図1において、ユーザ端末100は、認証サーバ700との間にて文書220に対する印刷操作を行うユーザの認証処理を行って、認証されたユーザのユーザIDを取得し、取得したユーザID、入力操作の解析にて特定した印刷する文書220の文書IDおよび処理種別(印刷処理)をポリシーサーバ900に通知して処理の実施可否を問い合わせを行う。   In FIG. 1, the user terminal 100 performs an authentication process for a user who performs a printing operation on the document 220 with the authentication server 700, acquires the user ID of the authenticated user, and acquires the acquired user ID, The policy server 900 is notified of the document ID of the document 220 to be printed and the processing type (printing process) specified by the analysis of the input operation, and an inquiry is made as to whether or not the process can be performed.

問合せの結果として、ポリシーサーバ900にて印刷処理が許可された場合、ユーザ端末100は、ポリシーサーバ900から通知される処理条件(印刷条件)に基づいて、文書処理システム10に属する画像読み取り機能を有した装置(図1では複合機400)にて検出可能な異なる生成方法にて文書ID、複製禁止を示す複製禁止コードをコード画像に埋め込んだコード画像埋め込み文書800を印刷装置300にて印刷する。   As a result of the inquiry, when the policy server 900 permits the printing process, the user terminal 100 has an image reading function belonging to the document processing system 10 based on the processing condition (printing condition) notified from the policy server 900. The printing apparatus 300 prints the code image embedded document 800 in which the document ID and the copy prohibition code indicating the copy prohibition are embedded in the code image by different generation methods that can be detected by the apparatus (the MFP 400 in FIG. 1). .

複合機400は、文書の印刷、文書を印刷した紙文書に対する複写、画像読み取り処理、FAX送信といった従来の複合機が有する機能以外に、コード画像の検出を伴う動作モードの場合は、ユーザが指定した読み取り条件に最適なコード画像の検出による符号化情報の復号処理を決定し、読取画像データに対するコード画像の検出にて復号された符号化情報に基づく文書の複製処理を行う。   The MFP 400 is designated by the user in an operation mode that involves detection of a code image in addition to the functions of a conventional MFP such as document printing, copying a paper document on which the document is printed, image reading processing, and FAX transmission. The decoding process of the encoded information based on the detection of the code image optimal for the read condition is determined, and the document is copied based on the encoded information decoded by the detection of the code image for the read image data.

コード画像の検出処理を伴う文書の複製処理を行う際、複合機は、認証サーバ700との間にて文書の複製操作を行うユーザの認証処理を行い、認証されたユーザのユーザIDを取得する。   When performing document duplication processing with code image detection processing, the multi-function peripheral performs authentication processing of a user who performs document duplication operation with the authentication server 700, and acquires the user ID of the authenticated user. .

また、複合機400は、コード画像埋め込み文書800の複写、画像読み取り処理が行われた場合は、読み取ったコード画像埋め込み文書800の画像の読み取り条件にて取得される画像データにて容易にコード検出が可能なコード画像の検出方法にて符号化情報の復号処理を行い、復号した符号化情報に記録されている文書ID、場合によってはさらに複製禁止コードを読み取る。   In addition, when copying and image reading processing of the code image embedded document 800 is performed, the multi-function device 400 easily detects the code from the image data acquired under the image reading conditions of the read code image embedded document 800. The encoded information is decoded by the code image detection method that can detect the document ID, and the document ID recorded in the decoded encoded information, and in some cases, the copy prohibition code is read.

特に、符号化情報から複製禁止コードを読み取った場合、複合機400は、ポリシーサーバ900に対して処理の実施可否を問い合わせることなく、コード画像埋め込み文書800に対する画像読み取り処理、複写処理を中止して、文書の複製を禁止する。   In particular, when the copy prohibition code is read from the encoded information, the multi-function peripheral 400 stops the image reading process and the copying process for the code image embedded document 800 without inquiring of the policy server 900 whether the process can be executed. Prohibit document duplication.

また、符号化情報から複製禁止コードが読み取られずに、文書IDのみが符号化情報から読み取れた場合、複製操作を行うユーザのユーザのユーザID、符号化情報から読み取った文書ID、処理種別(複写、画像読み取り処理、FAX送信の別)をポリシーサーバ900に通知し、コード画像埋め込み文書800に対する処理の可否を問い合わせ、ポリシーサーバ900にて処理が許可された場合、複合機400は、コード画像埋め込み文書800の複製処理を行う。   Further, when only the document ID can be read from the encoded information without reading the copy prohibition code from the encoded information, the user ID of the user performing the copying operation, the document ID read from the encoded information, the processing type (copy) In addition, the MFP 400 notifies the policy server 900 of the image reading process and FAX transmission), inquires whether the code image embedded document 800 can be processed, and if the process is permitted by the policy server 900, the MFP 400 embeds the code image embedded. The document 800 is copied.

図3は、二種類のコード画像の埋め込み方法にて符号化情報を埋め込んだ印刷文書の印刷イメージを示した図である。   FIG. 3 is a diagram showing a print image of a print document in which encoded information is embedded by two types of code image embedding methods.

コード画像Aは、例えば、特開2004−349879号公報にて開示されている埋め込み方式にて作成され、文書画像を所定のブロックサイズにて分割した各ブロック画像の特徴量として、特定の色成分における濃度を算出し、隣接する2つのペアブロック画像の間の所定方向における濃度を示す値の増減を用いて1ビットの情報を表現するために、必要に応じて隣接する2つのぺアブロック画像の間における特定の色成分の濃度を調整する画像処理を行い、誤り訂正符号を含んだ符号化情報(図3の812を表現するコード画像(図3の811)である。   The code image A is created by, for example, an embedding method disclosed in Japanese Patent Application Laid-Open No. 2004-349879, and a specific color component is used as a feature amount of each block image obtained by dividing a document image by a predetermined block size. In order to express 1-bit information using the increase / decrease of the value indicating the density in a predetermined direction between two adjacent pair block images, two adjacent pair block images are calculated as necessary. 3 is encoded information (a code image (811 in FIG. 3) expressing 812 in FIG. 3) including an error correction code by performing image processing for adjusting the density of a specific color component between the two.

一方、コード画像Bは、例えば、特開2003−280469号公報にて開示されている埋め込み方式にて行われ、1ビットの値を表現するパターン画像(図3の823)が所定サイズの二次元配列として配置されたブロック画像を形成することにより、複製禁止を示すコードが埋め込まれた複製禁止コード画像(図3の821)、文書IDコード画像(図3の822)を有する。   On the other hand, the code image B is performed by, for example, an embedding method disclosed in Japanese Patent Application Laid-Open No. 2003-280469, and a pattern image (823 in FIG. 3) expressing a 1-bit value is a two-dimensional image having a predetermined size. By forming a block image arranged as an array, it has a copy prohibition code image (821 in FIG. 3) and a document ID code image (822 in FIG. 3) in which a code indicating copy prohibition is embedded.

また、コード画像埋め込み文書800におけるコード画像の描画位置として、コード画像B(図3の820)は、用紙の上端部あるいは下端部を含む一部の領域に印刷され、コード画像Aは、印刷用紙において、コード画像Bの描画領域を除いた文書画像の所定領域に印刷される。   In addition, as a drawing position of the code image in the code image embedded document 800, the code image B (820 in FIG. 3) is printed in a partial area including the upper end or the lower end of the paper, and the code image A is printed on the printing paper. Are printed in a predetermined area of the document image excluding the drawing area of the code image B.

なお、コード画像A、コード画像Bが印刷される位置は、上記実施例の説明の図3に示した位置に制限されず、コード画像A、コード画像Bの2種類の画像が描画されていればよく、例えば、図7に示すように、四隅の領域にコード画像Bを描画し、それ以外の残りの領域全体にコード画像Aを描画する等適宜変更可能である。   Note that the positions where the code image A and the code image B are printed are not limited to the positions shown in FIG. 3 in the description of the above embodiment, and two types of images, the code image A and the code image B, are drawn. For example, as shown in FIG. 7, the code image B can be drawn in the four corner areas and the code image A can be drawn in the other remaining areas as appropriate.

次に、図1に示した装置のうち、コード画像埋め込み文書800の印刷制御およびコード画像埋め込み文書800の複製制御に関するユーザ端末100、印刷装置300、複合機400の各機能構成の一例を図4に示して説明する。   Next, examples of functional configurations of the user terminal 100, the printing apparatus 300, and the multifunction machine 400 relating to the print control of the code image embedded document 800 and the copy control of the code image embedded document 800 of the apparatuses illustrated in FIG. Will be described.

図4において、ユーザ端末100は、プログラムをCPU(Central Processing Unit)が実行することによりユーザ端末100全体を制御するユーザ端末制御部110に、RAM(Random Access Memory)や、ROM(Read Only Memory)等のメモリ素子、並びにハードディスク等によって実現され、CPU(Central Processing Unit)によって実行されるプログラムが保持され、各プログラム処理の過程で利用される種々のデータを保持するワークメモリとして動作するユーザ端末記憶部180、LAN(Local Area Network)接続ボード等の回線終端装置を有するユーザ端末通信部170、入力操作部191、表示部192がそれぞれ接続して構成される。   In FIG. 4, a user terminal 100 has a RAM (Random Access Memory) and a ROM (Read Only Memory) in a user terminal control unit 110 that controls the entire user terminal 100 by a CPU (Central Processing Unit) executing a program. User terminal memory that is realized by a memory device such as a hard disk and the like, stores a program executed by a CPU (Central Processing Unit), and operates as a work memory that stores various data used in the course of each program processing Unit 180, user terminal communication unit 170 having a line termination device such as a LAN (Local Area Network) connection board, input operation unit 191, and display unit 192 are connected to each other. And configured.

ユーザ端末制御部110は、文書220の表示、印刷を行うための機能ブロックとして、アプリケーション部111、印刷制御部120、認証処理部190を有する。   The user terminal control unit 110 includes an application unit 111, a print control unit 120, and an authentication processing unit 190 as functional blocks for displaying and printing the document 220.

ユーザ認証処理部190は、入力操作部191による文書220に対する表示、編集操作、あるいは、印刷操作を検出すると、文書に対する操作を行うユーザのユーザ認証を行うための操作画面を表示部192に表示し、入力されたユーザID、パスワードに基づいて、ユーザ端末通信部150を介してデータ通信可能な認証サーバ700との間にてユーザ認証処理を行い、認証されたユーザのユーザIDを取得する。   When the input operation unit 191 detects a display, edit operation, or print operation on the document 220 by the input operation unit 191, the user authentication processing unit 190 displays an operation screen for performing user authentication of the user who performs the operation on the document on the display unit 192. Based on the input user ID and password, user authentication processing is performed with the authentication server 700 capable of data communication via the user terminal communication unit 150, and the user ID of the authenticated user is acquired.

アプリケーション部111は、入力操作部191による文書220の表示操作あるいは文書220の印刷操作を、表示部に表示した操作画面にて検出すると、ユーザ認証処理部190にて文書220に対する印刷操作を行うユーザ認証処理を指示し、処理種別と処理対象となる文書220の文書IDを入力操作の解析により特定して取得し、取得した処理種別と文書ID、および、ユーザ認証処理部190にて取得したユーザIDを含む問合せデータを、ユーザ端末通信部170を介してポリシーサーバ900に送信して文書に対する処理の実施可否を問い合わせる。   When the application unit 111 detects the display operation of the document 220 by the input operation unit 191 or the print operation of the document 220 on the operation screen displayed on the display unit, the user authentication processing unit 190 performs a print operation on the document 220. The authentication processing is instructed, the processing type and the document ID of the document 220 to be processed are specified and acquired by analyzing the input operation, the acquired processing type and the document ID, and the user acquired by the user authentication processing unit 190 Inquiry data including an ID is transmitted to the policy server 900 via the user terminal communication unit 170 to inquire whether or not processing can be performed on the document.

印刷制御部120は、ネットワーク7を介して接続される複合機400、印刷装置300のプリンタドライバとして動作し、アプリケーション部111からの要求により印刷する文書220の文書データを受け取り、印刷文書の出力先として指定された印刷装置300、あるいは、複合機400にてコード画像埋め込み文書800を印刷するための印刷データを印刷設定に基づいて作成し、作成した印刷データをユーザ端末通信部170を介して出力先として指定された印刷装置300あるいは複合機400に送信して印刷制御を行う印刷データ生成部140と、コード画像A、コード画像Bにて印刷する文書の画像あるいは背景に埋め込む符号化情報を生成する符号化情報取得部130と、印刷する文書220の文書IDを含む符号化情報をコード画像として文書の画像に埋め込むための機能ブロックとしてコード画像A生成部150、コード画像B生成部160とを有する。   The print control unit 120 operates as a printer driver of the multifunction peripheral 400 and the printing apparatus 300 connected via the network 7, receives document data of the document 220 to be printed in response to a request from the application unit 111, and outputs an output destination of the print document Print data for printing the code image embedded document 800 by the printing apparatus 300 or MFP 400 designated as the print data is created based on the print settings, and the created print data is output via the user terminal communication unit 170 A print data generation unit 140 that performs print control by transmitting to the printing apparatus 300 or the multifunction device 400 designated as the destination, and generates encoding information to be embedded in the image or background of the document to be printed with the code image A and the code image B Encoding information acquisition unit 130 that performs encoding, and encoding information that includes the document ID of document 220 to be printed Code image A generating unit 150 as functional blocks for embedding a code image in a document image, and a code image B generating unit 160.

印刷装置300は、プログラムをCPU(Central Processing Unit)が実行することにより印刷装置300全体を制御する印刷装置制御部310に、LAN(Local Area Network)接続ボード等の回線終端装置にて実現され、ユーザ端末100との間にてネットワークを介して印刷データを含む印刷制御のためのデータ通信を行う印刷装置通信部330、RAM(Random Access Memory)や、ROM(Read Only Memory)等のメモリ素子、並びにハードディスク等によって実現され、CPU(Central Processing Unit)によって実行されるプログラムが保持され、印刷処理の過程で利用される種々のデータを保持するワークメモリとして動作する印刷装置記憶部320、文書220のページ画像を用紙に転写して印刷する画像形成部350がバスを介して接続して構成される。   The printing apparatus 300 is realized by a line termination device such as a LAN (Local Area Network) connection board in a printing apparatus control unit 310 that controls the entire printing apparatus 300 by executing a program by a CPU (Central Processing Unit). A printing device communication unit 330 that performs data communication for print control including print data with the user terminal 100 via a network, a memory element such as a RAM (Random Access Memory), a ROM (Read Only Memory), In addition, it is realized by a hard disk or the like, holds a program executed by a CPU (Central Processing Unit), and operates as a work memory that holds various data used in the printing process. That the printing device a storage unit 320, the image forming unit 350 for printing by transferring the page image of the document 220 on the paper is connected via a bus.

複合機400は、プログラムをCPU(Central Processing Unit)が実行することにより複合機400全体を制御する複合機主制御部410に、画像読み取り部420、印刷部430、画像処理部440、LAN(Local Area Network)接続ボード等の回線終端装置にて実現される複合機通信部460、RAM(Random Access Memory)や、ROM(Read Only Memory)等のメモリ素子、並びにハードディスク等によって実現され、CPU(Central Processing Unit)によって実行されるプログラムが保持され、各プログラム処理の過程で利用される種々のデータを保持するワークメモリとして動作する複合機主記憶部450が接続された構成を有する。   The multi-function device 400 includes an image reading unit 420, a printing unit 430, an image processing unit 440, a LAN (Local), and a multi-function device main control unit 410 that controls the entire multi-function device 400 by executing a program by a CPU (Central Processing Unit). Realized by a multi-function device communication unit 460, a RAM (Random Access Memory), a ROM (Read Only Memory), a memory device such as a ROM (Read Only Memory), a hard disk, etc., and a CPU (Central A program executed by the processing unit) is held, and a multi-function machine main storage unit 450 that operates as a work memory that holds various data used in the process of each program processing is connected. Having.

画像処理部440は、ユーザにて指定された所定の読み取り条件にて画像読み取り部420が読み取った紙文書の画像読取データ451を画像読み取り部420から受信し、読取画像データ451に対する画像の補正処理(自動正立補正、ノイズ除去等)を行い、処理された読取画像データ451を、複製処理が完了するまでの間、複合機主記憶部450に一時保存する。   The image processing unit 440 receives the image reading data 451 of the paper document read by the image reading unit 420 under a predetermined reading condition designated by the user from the image reading unit 420, and performs an image correction process on the read image data 451. (Auto erecting correction, noise removal, etc.) are performed, and the processed read image data 451 is temporarily stored in the MFP main storage unit 450 until the copying process is completed.

複合機主制御部410は、画像読み取り部420による文書220の画像読み取り処理、画像読み取り部420に対する読取画像データを所定の転送先に転送して格納する読み取り画像の転送格納処理、あるいは、読取画像データ451に基づいて作成される複写画像を印刷部430にて用紙に印刷する複写処理、複合機通信部460を介してユーザ端末100から受信した印刷データに基づく印刷部430による文書220の印刷処理といった従来の複合機の制御に加え、文書の複製処理においては、動作モードの設定により、複製する文書の読み取り画像データに対してコード画像の検出処理による符号化情報の復号処理を行い、復号処理によって複製禁止コードを読み取った場合は、複製処理を中止し、符号化情報から文書IDが読み取れた場合、複製操作を行うユーザのユーザ認証処理を行い、ユーザID、文書ID、複製操作の処理種別をポリシーサーバ900に通知して複製処理の実施可否、および、処理可能な場合の処理条件を問い合わせて文書の複製処理を制御する。   The MFP main control unit 410 reads the image of the document 220 by the image reading unit 420, transfers the read image to the image reading unit 420, stores the read image data to a predetermined transfer destination, or stores the read image. Copy processing for printing a copy image created based on the data 451 on a sheet by the printing unit 430, and print processing for the document 220 by the printing unit 430 based on print data received from the user terminal 100 via the multi-function peripheral communication unit 460. In addition to the control of the conventional multifunction peripherals, in the document duplication processing, the decoding processing of the encoded information by the code image detection processing is performed on the read image data of the document to be duplicated by setting the operation mode. If the duplication prohibition code is read by, the duplication process is stopped and the document ID is read from the encoded information. If it is, the user authentication process of the user who performs the duplication operation is performed, the user ID, the document ID, and the duplication operation process type are notified to the policy server 900, and whether or not the duplication process can be performed, and the processing conditions when the process is possible To control the document duplication process.

複合機主制御部410は、文書220に対する複製操作を行うユーザに対する認証処理を認証サーバ700との間にて行って、認証されたユーザのユーザIDを取得するユーザ認証処理部415と、コード画像の検出による複製処理を制御するための機能ブロックとして、コード画像の検出による符号化情報の復号処理を行う機能ブロックとして、コード画像復号処理部411、処理実施可否判定部414を有する。   The MFP main control unit 410 performs an authentication process for a user who performs a duplication operation on the document 220 with the authentication server 700, and acquires a user ID of the authenticated user. As a functional block for controlling a duplication process based on detection of a code image, a code image decoding processing unit 411 and a process execution determination unit 414 are provided as functional blocks for performing a decoding process of encoded information by detecting a code image.

コード画像復号処理部411は、コード画像A復号処理部412、コード画像B復号処理部413を有し、画像読み取り部420から転送されて複合機主記憶部450に格納された読取画像データ451に対し、画像読み取り部420にて読み取られる画像の読み取り条件と、読み取り条件に最適なコード画像による符号化情報の復号処理方法(コード画像Aの検出による符号化情報の復号処理、コード画像Bによる符号化情報の復号処理のいずれかを予め対応付けて決定するための制御情報にて決定し、コード画像Aの検出による符号化情報の復号処理の場合は、コード画像A復号処理部412により符号化情報の復号処理を行い、コード画像Bによる符号化情報の復号処理の場合は、コード画像B復号処理部413により符号化情報の復号処理を行い、読取画像データに埋め込まれた符号化情報を符号化情報解析結果452として複合機主記憶部450に一時保存する。   The code image decoding processing unit 411 includes a code image A decoding processing unit 412 and a code image B decoding processing unit 413. The code image decoding processing unit 411 stores the read image data 451 transferred from the image reading unit 420 and stored in the MFP main storage unit 450. On the other hand, the reading conditions of the image read by the image reading unit 420 and the decoding processing method of the encoded information by the code image optimal for the reading conditions (decoding processing of the encoded information by detecting the code image A, the code by the code image B) In the case of the decoding process of the encoded information based on the detection of the code image A, the code image A decoding processing unit 412 performs encoding. In the case of the decoding process of the information and the decoding process of the encoded information by the code image B, the code image B decoding processing unit 413 restores the encoded information. Performs processing, temporarily stored in the MFP main memory unit 450 the coded information embedded in the read image data as coded information analysis results 452.

コード画像A復号処理部412による符号化情報の復号処理は、ユーザ端末100におけるコード画像A生成部150の符号化処理に対応した復号処理であり、特開2004−349879号公報にて開示されている技術を使用して処理される。   The decoding process of the encoded information by the code image A decoding processing unit 412 is a decoding process corresponding to the encoding process of the code image A generating unit 150 in the user terminal 100, and is disclosed in Japanese Patent Application Laid-Open No. 2004-349879. Processed using existing technology.

コードA復号処理部412は、読み取り画像データ451における所定領域の画像を、所定のブロックサイズにて分割したブロック画像の画像データを抽出し、分割した各ブロック画像における特定の色成分の濃度を特徴量として個別に算出する。   The code A decoding processing unit 412 extracts image data of a block image obtained by dividing an image of a predetermined area in the read image data 451 by a predetermined block size, and features the density of a specific color component in each divided block image. Calculate individually as quantities.

次に、隣接するペアブロック画像における所定の方向において、算出した特徴量としての濃度を示す値の増減を判定し、判定した所定の方向における濃度値の増減に対応する値を各ペアブロック画像の間にて取得して所定サイズのコードデータを生成する。   Next, increase / decrease in the value indicating the density as the calculated feature amount in a predetermined direction in the adjacent pair block image is determined, and a value corresponding to the determined increase / decrease in the density value in the predetermined direction is determined for each pair block image. The code data of a predetermined size is generated in the meantime.

コード画像B復号処理部413による符号化情報の復号処理は、ユーザ端末100におけるコード画像B生成部160の符号化処理に対応した復号処理であり、例えば、特開2003−280469号公報にて開示されている技術を使用して処理される。   The decoding process of the encoded information by the code image B decoding processing unit 413 is a decoding process corresponding to the encoding process of the code image B generating unit 160 in the user terminal 100, and is disclosed in, for example, Japanese Patent Application Laid-Open No. 2003-280469. Processed using technology.

一方、コード画像B復号処理部413は、読み取り画像データ451に対して、例えば、図3の820に示した、上端部、下端部を含む領域において、図3の823に示したパターン画像の検出を行い、パターン画像が所定の二次元配列にて配置された一単位のコード画像を検出する同期化コードの検出処理、スキュー角の検出による画像データの補正処理を行って、分割したブロック画像毎に埋め込まれた「0」、「1」の値を示すパターン画像823のマッチング処理を行ってコードデータを生成し、生成したコードデータを所定規則にて解読することによって、符号化情報として埋め込まれた文書ID、複製禁止コードの値を符号化情報解析結果452として複合機主記憶部450に保存する。   On the other hand, the code image B decoding processing unit 413 detects the pattern image indicated by 823 in FIG. 3 for the read image data 451, for example, in the region including the upper end and the lower end shown in 820 in FIG. For each divided block image by performing detection processing of a synchronization code for detecting one unit of code image in which a pattern image is arranged in a predetermined two-dimensional array, and correction processing of image data by detecting a skew angle. The code image is generated by performing a matching process on the pattern image 823 indicating the values of “0” and “1” embedded in the code, and the generated code data is decoded according to a predetermined rule, thereby being embedded as encoded information. The document ID and the copy prohibition code value are stored in the multi-function peripheral main storage unit 450 as the encoded information analysis result 452.

処理実施可否判定部414は、操作表示部470による紙文書の複製操作、FAX送信操作を検出すると、ユーザ認証処理部417に対するユーザ認証処理を指示し、認証されたユーザのユーザID、文書に対する処理種別を特定し、特定した処理種別と、コード画像A復号処理部412あるいはコード画像B復号処理部413にて復号した文書IDを示す符号化情報解析結果452を、複合機通信部460を介してポリシーサーバ900に送信して、処理実施可否の問い合わせを行う。   When the operation display unit 470 detects a duplication operation and a FAX transmission operation of the paper document by the operation display unit 470, the process execution propriety determination unit 414 instructs the user authentication processing unit 417 to perform user authentication processing, and processes the user ID of the authenticated user and the document. The type is specified, and the specified processing type and the encoded information analysis result 452 indicating the document ID decoded by the code image A decoding processing unit 412 or the code image B decoding processing unit 413 are transmitted via the multi-function peripheral communication unit 460. It is transmitted to the policy server 900 to inquire whether processing can be executed.

次に、ユーザ端末100による文書220の印刷処理の一例を図5のフローチャートに示して説明する。   Next, an example of print processing of the document 220 by the user terminal 100 will be described with reference to the flowchart of FIG.

ユーザ端末100は、文書220の印刷指示操作を入力操作部191にて検出すると、ユーザ認証処理部190にて認証サーバ700との間にて印刷操作を行うためのUI画面を表示部192に表示して認証処理を行い、印刷操作を行うユーザのユーザIDと、印刷する文書220の文書IDを文書属性にて取得し(S101)、文書IDと処理種別(本ステップの処理においては印刷処理)、ユーザIDをポリシーサーバ900に通知して、印刷可能な文書であるかを問い合わせる(S102)。   When the user terminal 100 detects the print instruction operation of the document 220 using the input operation unit 191, the user authentication processing unit 190 displays a UI screen for performing a print operation with the authentication server 700 on the display unit 192. The user ID of the user who performs the printing operation and the document ID of the document 220 to be printed are acquired from the document attributes (S101), and the document ID and the processing type (print processing in the processing of this step) The user ID is notified to the policy server 900 to inquire whether the document is a printable document (S102).

ポリシーサーバ900からの応答により印刷が禁止されている文書である場合(S103NO)、機密文書管理情報921の設定により印刷が禁止されていることを通知するエラーメッセージを表示部192に出力して印刷処理を終了する(S104)。   If the document is prohibited from printing due to a response from the policy server 900 (NO in S103), an error message notifying that printing is prohibited by the setting of the confidential document management information 921 is output to the display unit 192 and printed. The process ends (S104).

ポリシーサーバ900にて文書の印刷が許可された場合(S103YES)、ユーザ端末100は、出力先として指定可能な印刷装置を抽出する(S105)。   When the policy server 900 permits printing of the document (S103 YES), the user terminal 100 extracts a printing device that can be specified as an output destination (S105).

出力先として指定可能な印刷装置が無い場合(S105NO)、印刷エラーを報知するエラーメッセージを表示部912に表示して印刷処理を中止し(S106)、一方、指定可能な印刷装置がネットワーク7上に存在する場合(S105YES)で、なおかつ、機密文書管理情報921の設定によりコード画像による符号化情報の埋め込みが印刷条件として指示されている場合(S107YES)、ユーザ端末100は、コード画像による符号化情報の埋め込み機能を有する印刷装置が、ステップS105にて抽出した指定可能な印刷装置の中に存在するか否かを判別する(S108)。   If there is no printing device that can be designated as an output destination (NO in S105), an error message for notifying a printing error is displayed on the display unit 912 and the printing process is stopped (S106). If the print information is instructed to embed the encoded information by the code image by the setting of the confidential document management information 921 (YES in S107), the user terminal 100 performs the encoding by the code image. It is determined whether or not a printing apparatus having an information embedding function exists in the printable printers extracted in step S105 (S108).

符号化情報を埋め込んだコード画像の印刷機能を有した印刷装置がステップS105にて抽出した指定可能な印刷装置の中に存在しない場合(S108NO)、ユーザ端末100は、エラーメッセージを表示部192に表示して印刷処理を終了する(S109)。   If the printing device having the code image printing function in which the encoded information is embedded does not exist in the printable printers extracted in step S105 (NO in S108), the user terminal 100 displays an error message on the display unit 192. Display and finish the printing process (S109).

コード画像の印刷機能を有した印刷装置がステップS105にて抽出した指定可能な印刷装置の中に存在し、ポリシーサーバ900から通知された印刷条件により、コード画像埋め込み文書800の印刷指示が行われた場合(S108YES)、ユーザ端末100のアプリケーション部111は、印刷する文書220の文書ID、印刷操作を行うユーザのユーザID、さらにポリシーサーバ900からの応答による処理条件として、機密文書管理情報921にて印刷後の複製処理が禁止されている場合、複製禁止コードを符号化情報に追加し、生成した符号化情報を印刷制御部120に対して文書データとともに出力し、ユーザが指定した出力先の印刷装置に対するコード画像埋め込み文書800の印刷処理を印刷制御部120に指示する(S110)。   A printing apparatus having a code image printing function exists in the print apparatus that can be specified extracted in step S105, and a print instruction for the code image embedded document 800 is issued according to the printing conditions notified from the policy server 900. In this case (YES in S108), the application unit 111 of the user terminal 100 stores the confidential document management information 921 as the processing condition according to the document ID of the document 220 to be printed, the user ID of the user who performs the printing operation, and the response from the policy server 900. If the copy process after printing is prohibited, the copy prohibition code is added to the encoded information, the generated encoded information is output to the print control unit 120 together with the document data, and the output destination specified by the user is output. The print control unit 120 is instructed to print the code image embedded document 800 to the printing apparatus ( 110).

印刷制御部120は、アプリケーション部111から受け取った印刷する文書220の文書データ、印刷操作画面にてユーザが指定した印刷設定に基づいて印刷ページ毎の文書画像を生成し、アプリケーション部111から受け取った符号化情報を所定規則にてコード化して誤り訂正符号を付加し、コード画像A生成部150によってコード画像Aとして印刷ページにおける文書画像の所定のブロック化した領域に埋め込む(S111)。   The print control unit 120 generates a document image for each print page based on the document data of the document 220 to be printed received from the application unit 111 and the print setting designated by the user on the print operation screen, and receives the document image from the application unit 111. The encoded information is encoded according to a predetermined rule, an error correction code is added, and the code image A generation unit 150 embeds it as a code image A in a predetermined block area of the document image on the print page (S111).

次に、コード画像B生成部160は、符号化情報としての文書ID、コード画像Bとして複製禁止コードを埋め込んだ背景画像を生成する(S112)。   Next, the code image B generation unit 160 generates a background image in which the document ID as the encoding information and the copy prohibition code as the code image B are embedded (S112).

コード画像Aにて符号化情報を埋め込んだ印刷ページの文書画像と、コード画像Bにて符号化情報を埋め込んだ背景画像の合成を行ってページイメージを生成し(S113)、生成したページイメージを用紙に描画するための印刷データを印刷データ生成部140にて生成し、生成した印刷データをユーザ端末通信部170を介して出力先として指定された印刷装置に送信する(S114)。   A page image is generated by synthesizing the document image of the print page in which the encoding information is embedded in the code image A and the background image in which the encoding information is embedded in the code image B (S113), and the generated page image is Print data for drawing on the paper is generated by the print data generation unit 140, and the generated print data is transmitted to the printing apparatus designated as the output destination via the user terminal communication unit 170 (S114).

次に、複合機400によるコード画像埋め込み文書800に対する複製処理の例を図6のフローチャートに示して説明する。
複合機400は、複製処理を行う文書の画像読み取り条件として、カラーによる画像読み取り処理、白黒による画像読み取り処理の別を、操作表示部470による入力操作の解析にて判別する(S201)。
Next, an example of a duplication process for the code image embedded document 800 by the MFP 400 will be described with reference to the flowchart of FIG.
The multi-function peripheral 400 determines whether the image reading process for color or the black and white image reading process is an analysis of the input operation by the operation display unit 470 as the image reading condition of the document to be copied (S201).

複合機400は、コード画像の検出処理を伴う動作モードであるか否かを、複合機主記憶部450に記録された制御パラメータの値に基づいて判断する(S202)。   The multi-function device 400 determines whether or not the operation mode is accompanied by the code image detection process based on the value of the control parameter recorded in the multi-function device main memory 450 (S202).

コード画像の検出処理を伴う動作モードでない場合(S202NO)、複合機400は、通常の文書に対する複製処理を行う(S212)。   If the operation mode is not accompanied by the code image detection process (NO in S202), the multi-function peripheral 400 performs a copy process for a normal document (S212).

コード画像の検出を伴う動作モードである場合(S202YES)、複合機400は、複製する文書に対する画像の読み取り条件としてカラーによる文書画像の読み取りが指示されている場合(S203YES)、複合機400は、コード画像A復号処理部412によってコード画像Aの検出による符号化情報の復号処理を選択して実行する(S204)。   When the operation mode is accompanied by the detection of the code image (YES in S202), the multifunction device 400 is instructed to read the document image in color as the image reading condition for the document to be copied (YES in S203). The code image A decoding processing unit 412 selects and executes a decoding process of the encoded information by detecting the code image A (S204).

一方、複製する文書に対する画像の読み取り条件として白黒による文書画像の読み取りが指示されている場合(S203NO)、複合機400は、コード画像B復号処理部413によって読取画像データからコード画像Bの検出による符号化情報の復号処理を行う(S205)。   On the other hand, when reading of a black and white document image is instructed as an image reading condition for a document to be copied (NO in S203), the multi-function peripheral 400 detects code image B from read image data by the code image B decoding processing unit 413. The encoded information is decoded (S205).

ステップS204あるいはステップS205の処理にて実施したコード画像の検出による符号化情報の復号処理に失敗した場合(S206NO)、複合機400は、コード画像による符号化情報の復号エラーをユーザに報知するエラー画面を操作表示部470に出力し、文書の複製処理を中止する(S207)。   When the decoding process of the encoded information by the detection of the code image performed in the process of step S204 or step S205 fails (S206 NO), the multi-function device 400 notifies the user of the decoding error of the encoded information by the code image. The screen is output to the operation display unit 470, and the document duplication process is stopped (S207).

符号化情報の復号処理に成功した場合(S206YES)、複合機400は、符号化情報解析結果425を読み取り、複製禁止コードが符号化情報として復号されたか否かを判断する(S208)。   If the decoding process of the encoded information is successful (S206 YES), the multi-function device 400 reads the encoded information analysis result 425 and determines whether or not the copy prohibition code is decoded as the encoded information (S208).

符号化情報解析結果425に複製禁止コードが記録されている場合(S208YES)、複合機400は、ポリシーサーバ900に問い合わせることなく複製処理を中止し、複製禁止コードを示すコード画像の検出による複製処理の中止をユーザに報知するエラー画面を操作表示部470に出力する(S209)。   When a copy prohibition code is recorded in the encoded information analysis result 425 (S208 YES), the multi-function peripheral 400 stops the copy process without inquiring of the policy server 900, and performs a copy process by detecting a code image indicating the copy prohibition code. An error screen for notifying the user of the cancellation of the operation is output to the operation display unit 470 (S209).

符号化情報解析結果425に複製禁止コードが記録されていない場合(S208NO)、複合機400は、符号化情報解析結果452から取得した文書IDと、複製操作に対して認証処理が行われたユーザのユーザID、処理種別(ここでは、文書の複写、あるいは画像読み取り処理)を含み、ポリシーサーバ900に対して処理の実施可否を問い合わせる問合せデータを作成し、作成した問合せデータを複合機通信部460を介してポリシーサーバ900に送信する(S210)。   When the copy prohibition code is not recorded in the encoded information analysis result 425 (S208 NO), the multi-function peripheral 400 recognizes the document ID acquired from the encoded information analysis result 452 and the user who has been authenticated for the copy operation. User ID and processing type (here, document copying or image reading processing), query data for inquiring whether or not the policy server 900 can execute the processing is created, and the created query data is sent to the MFP communication unit 460. To the policy server 900 (S210).

複合機400は、ポリシーサーバ900から受信した応答データを解析し、処理の実施可否を判定し(S211)、複製処理が許可された場合(S211YES)、複合機400は紙文書に対する複製処理を実施し(S212)、複製処理が許可されなかった場合(S211NO)、文書に対する複製処理が禁止されている旨を通知するエラーメッセージを操作表示部470に出力して処理を終了する(S213)。   The multi-function device 400 analyzes the response data received from the policy server 900, determines whether or not the processing can be performed (S211), and if the copy processing is permitted (S211 YES), the multi-function device 400 performs the copy processing on the paper document. If the copying process is not permitted (NO in S211), an error message notifying that the copying process for the document is prohibited is output to the operation display unit 470, and the process ends (S213).

なお、上記実施例では、ユーザ端末100と印刷装置300との間にてコード画像埋め込み文書800の印刷を行う構成を示して説明したが、ユーザ端末100のコード画像A生成部、コード画像B生成部に対応するてコード画像A、コード画像Bの印刷処理を行う手段を複合機400の複合機制御部410に追加し、ユーザ端末100と複合機400との間にてコード画像埋め込み文書800の印刷を行う構成にしてもよい。   In the above embodiment, the configuration in which the code image embedded document 800 is printed between the user terminal 100 and the printing apparatus 300 has been described. However, the code image A generation unit and the code image B generation of the user terminal 100 are described. A means for printing the code image A and the code image B corresponding to the copy unit is added to the multifunction device control unit 410 of the multifunction device 400, and the code image embedded document 800 between the user terminal 100 and the multifunction device 400 is added. You may make it the structure which prints.

また、コード画像A、コード画像Bの埋め込み印刷処理、および、コード画像A、コード画像Bによる符号化情報の復号処理を行う画像処理プログラムを、複合機400に実装して機能させる構成以外に、画像処理プログラムを、CDROM等の記憶媒体に格納し、ユーザ端末100、複合機400による記憶媒体の読み取り、あるいは、記憶媒体の読み取り手段を備える装置とのネットワークを介したデータ通信にて提供するようにしてもよい。   In addition to the configuration in which the image processing program for performing the embedded printing process of the code image A and the code image B and the decoding process of the encoded information by the code image A and the code image B is implemented in the multifunction device 400 and functions. The image processing program is stored in a storage medium such as a CD-ROM, and is provided by reading data from the user terminal 100 or the multi-function peripheral 400 or by data communication via a network with an apparatus provided with storage medium reading means. It may be.

本発明の画像処理装置および画像処理プログラムは、機密文書に対する各種処理の処理条件をユーザの文書に対するセキュリティレベルと処理種別との組み合わせ毎に設定して管理し、特に、機密文書の印刷に対しては、コード画像にて符号化情報を埋め込んだ紙文書の印刷処理、印刷したコード画像埋め込み文書の複製処理に適用可能である。   The image processing apparatus and the image processing program according to the present invention set and manage processing conditions for various types of processing for confidential documents for each combination of security level and processing type for a user document, and particularly for printing confidential documents. Can be applied to a printing process of a paper document in which encoded information is embedded in a code image, and a copying process of a printed code image embedded document.

本発明の画像処理装置を配した文書処理システムの構成の一例を示す図。1 is a diagram illustrating an example of a configuration of a document processing system provided with an image processing apparatus of the present invention. 機密文書管理情報の登録データの一例を示す図。The figure which shows an example of the registration data of confidential document management information. コード画像埋め込み文書の印刷イメージの一例を示す図。The figure which shows an example of the printing image of a code image embedding document. 図1に示したユーザ端末、印刷装置、複合機の各機能構成の一例を示す図。FIG. 2 is a diagram illustrating an example of each functional configuration of a user terminal, a printing apparatus, and a multifunction peripheral illustrated in FIG. 1. 図1に示した文書処理システムのユーザ端末による文書の印刷処理の動作の一例を示すフローチャート。3 is a flowchart showing an example of an operation of document printing processing by a user terminal of the document processing system shown in FIG. 1. コード画像埋め込み文書に対する複製処理の一例を示すフローチャート。10 is a flowchart illustrating an example of a copy process for a code image embedded document. コード画像埋め込み文書におけるコード画像A、コード画像Bの描画領域の変形例を示す図。The figure which shows the modification of the drawing area | region of the code image A and the code image B in a code image embedding document.

符号の説明Explanation of symbols

10 文書処理システム
100 ユーザ端末
110 ユーザ端末制御部
111 アプリケーション部
120 印刷制御部
130 符号化情報取得部
140 印刷データ生成部
150 コード画像A生成部
160 コード画像B生成部
170 ユーザ端末通信部
180 ユーザ端末記憶部
190 ユーザ認証処理部
191 入力操作部
192 表示部
200 文書管理装置
210 文書DB
220 文書
221 機密文書
300 印刷装置
310 印刷装置制御部
320 印刷装置記憶部
350 画像形成部
400 複合機
410 複合機主制御部
420 画像読み取り部
430 印刷部
440 画像処理部
450 複合機主記憶部
451 読取画像データ
452 符号化情報解析結果
460 複合機通信部
470 操作表示部
411 コード画像復号処理部
412 コード画像A復号処理部
413 コード画像B復号処理部
414 処理実施可否判定部
415 ユーザ認証処理部
800 コード画像埋め込み文書
810 コード画像A
811 複製禁止コード画像
812 複製禁止コード
820 コード画像B
821 複製禁止コード画像
822 文書識別コード画像
823 パターン画像
900 ポリシーサーバ
921 機密文書管理情報
700 認証サーバ
7 ネットワーク
DESCRIPTION OF SYMBOLS 10 Document processing system 100 User terminal 110 User terminal control part 111 Application part 120 Print control part 130 Encoding information acquisition part 140 Print data generation part 150 Code image A generation part 160 Code image B generation part 170 User terminal communication part 180 User terminal Storage unit 190 User authentication processing unit 191 Input operation unit 192 Display unit 200 Document management device 210 Document DB
220 Document 221 Confidential Document 300 Printing Device 310 Printing Device Control Unit 320 Printing Device Storage Unit 350 Image Forming Unit
400 MFP 410 MFP main control unit 420 image reading unit 430 printing unit 440 image processing unit 450 MFP main storage unit 451 read image data 452 encoded information analysis result 460 MFP communication unit 470 operation display unit 411 code image decoding process Unit 412 code image A decoding processing unit 413 code image B decoding processing unit 414 processing execution determination unit 415 user authentication processing unit 800 code image embedded document 810 code image A
811 Copy prohibited code image 812 Copy prohibited code 820 Code image B
821 Copy prohibition code image 822 Document identification code image 823 Pattern image 900 Policy server 921 Confidential document management information 700 Authentication server 7 Network

Claims (7)

文書に付与する情報を取得する取得手段と、
前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第1の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第1の符号化情報として前記文書の画像に埋め込む第1の埋め込み手段と、
前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第2の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第2の符号化情報として前記文書の背景画像に埋め込む第2の埋め込み手段と、
前記第1の埋め込み手段および前記第2の埋め込み手段により前記第1の符号化情報および第2の符号化情報が埋め込まれた前記文書の画像と背景画像を合成して前記文書の画像を出力する出力手段と
を具備する画像処理装置。
An acquisition means for acquiring information to be added to the document;
The information acquired by the acquisition unit is embedded in the image of the document as first encoded information that allows easy extraction of the information when the print image is read by the first reading method after printing together with the image of the document. First embedding means;
The information acquired by the acquisition means is printed on the background image of the document as second encoded information that can be easily extracted when the print image is read by the second reading method after being printed together with the image of the document. A second embedding means for embedding;
The image of the document and the image of the document in which the first encoded information and the second encoded information are embedded by the first embedding unit and the second embedding unit are synthesized and the image of the document is output. An image processing apparatus comprising: output means.
前記第1の埋め込み手段は、
前記出力手段で出力された画像を白黒で読み取る前記第1の読取方式で読み取った場合に前記情報の抽出が容易な第1の埋め込み方式で前記情報を埋め込み、
前記第2の埋め込み手段は、
前記出力手段で出力された画像をカラーで読み取る前記第2の読取方式で読み取った場合に前記情報の抽出が容易な第2の埋め込み方式で前記情報を埋め込む
請求項1記載の画像処理装置。
The first embedding means includes
When the image output by the output means is read in black and white by the first reading method, the information is embedded by the first embedding method that allows easy extraction of the information,
The second embedding means includes
The image processing apparatus according to claim 1, wherein the information is embedded by a second embedding method that facilitates extraction of the information when the image output by the output unit is read by the second reading method that reads the color.
前記第1の埋め込み手段および前記第2の埋め込み手段は、
前記文書の画像および前記文書の背景画像に対してそれぞれ異なる領域に前記情報の埋め込みを行う
請求項1または2記載の画像処理装置。
The first embedding means and the second embedding means are:
The image processing apparatus according to claim 1, wherein the information is embedded in different areas with respect to the document image and the background image of the document .
前記第2の埋め込み手段は、
前記文書の背景画像の四隅に前記第2の埋め込み方式で前記情報を埋め込み、
前記第1の埋め込み手段は、
前記文書の画像の残りの領域の全面に前記第1の埋め込み方式で前記情報を埋め込む
請求項3記載の画像処理装置。
The second embedding means includes
The information is embedded in the four corners of the background image of the document by the second embedding method,
The first embedding means includes
The image processing apparatus according to claim 3, wherein the information is embedded in the entire remaining area of the image of the document by the first embedding method.
前記第2の埋め込み手段は、
前記文書の背景画像の上下の端に前記第2の埋め込み方式で前記情報を埋め込み、
前記第1の埋め込み手段は、
前記文書の画像の残りの領域の全面に前記第1の埋め込み方式で前記情報を埋め込む
請求項3記載の画像処理装置。
The second embedding means includes
The information is embedded in the upper and lower edges of the background image of the document by the second embedding method,
The first embedding means includes
The image processing apparatus according to claim 3, wherein the information is embedded in the entire remaining area of the image of the document by the first embedding method.
前記第1の埋め込み手段は、
前記情報を前記第1の埋め込み方式に対応した第1のコード化方式でコード化した第1の画像を生成する第1の手段と、
前記第1の手段で生成した前記第1の画像を前記文書の画像の第1の領域に埋め込む第2の手段と
を具備し、
前記第2の埋め込み手段は、
前記情報を前記第2の埋め込み方式に対応した第2のコード化方式でコード化した第2の画像を生成する第3の手段と、
前記第3の手段で生成した前記第2の画像を前記文書の背景画像の第2の領域に埋め込む第4の手段と
を具備する請求項3記載の画像処理装置。
The first embedding means includes
First means for generating a first image in which the information is encoded by a first encoding method corresponding to the first embedding method;
And second means for embedding the first image generated by the first means in a first area of the image of the document,
The second embedding means includes
A third means for generating a second image obtained by encoding the information by a second encoding method corresponding to the second embedding method;
The image processing apparatus according to claim 3, further comprising: fourth means for embedding the second image generated by the third means in a second region of a background image of the document.
コンピュータを、
文書に付与する情報を取得する取得手段、
前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第1の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第1の符号化情報として前記文書の画像に埋め込む第1の埋め込み手段、
前記取得手段で取得した情報を、前記文書の画像と共に印刷した後に第2の読取方式により該印刷画像を読み取る際に前記情報の抽出が容易な第2の符号化情報として前記文書の背景画像に埋め込む第2の埋め込み手段、
前記第1の埋め込み手段および前記第2の埋め込み手段により前記第1の符号化情報および第2の符号化情報が埋め込まれた前記文書の画像と背景画像を合成して前記文書の画像を出力する出力手段
として機能させるための画像処理プログラム。
Computer
An acquisition means for acquiring information to be given to the document;
The information acquired by the acquisition unit is embedded in the image of the document as first encoded information that allows easy extraction of the information when the print image is read by the first reading method after printing together with the image of the document. First embedding means,
The information acquired by the acquisition means is printed on the background image of the document as second encoded information that can be easily extracted when the print image is read by the second reading method after being printed together with the image of the document. A second embedding means for embedding,
The image of the document and the image of the document in which the first encoded information and the second encoded information are embedded by the first embedding unit and the second embedding unit are synthesized and the image of the document is output. An image processing program for functioning as an output means.
JP2007015051A 2007-01-25 2007-01-25 Image processing apparatus and image processing program Expired - Fee Related JP4821629B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007015051A JP4821629B2 (en) 2007-01-25 2007-01-25 Image processing apparatus and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007015051A JP4821629B2 (en) 2007-01-25 2007-01-25 Image processing apparatus and image processing program

Publications (2)

Publication Number Publication Date
JP2008182551A JP2008182551A (en) 2008-08-07
JP4821629B2 true JP4821629B2 (en) 2011-11-24

Family

ID=39726102

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007015051A Expired - Fee Related JP4821629B2 (en) 2007-01-25 2007-01-25 Image processing apparatus and image processing program

Country Status (1)

Country Link
JP (1) JP4821629B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4449931B2 (en) * 2006-03-30 2010-04-14 ブラザー工業株式会社 Management device and management system
JP5081122B2 (en) * 2008-10-20 2012-11-21 株式会社リコー Image processing apparatus, control method therefor, and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001268336A (en) * 2000-03-15 2001-09-28 Canon Inc Image processing apparatus and method, and storage medium
JP2001309155A (en) * 2000-04-25 2001-11-02 Canon Inc Image processing unit, method and computer-readable recording medium
JP4192886B2 (en) * 2004-11-30 2008-12-10 沖電気工業株式会社 Tamper detection system, tamper detection device, threshold determination device, tamper detection method, threshold determination method

Also Published As

Publication number Publication date
JP2008182551A (en) 2008-08-07

Similar Documents

Publication Publication Date Title
JP4039093B2 (en) Image reading apparatus, copying apparatus, and program
JP2008160760A (en) Document processing system, document processing instructing apparatus, and document processing program
JP4999730B2 (en) Image processing apparatus, image processing method, and control program
JP2003283790A (en) Image generating method, image generating apparatus, program, and illegitimate copy preventing system
US8427708B2 (en) Apparatus and method for controlling printing of information embedded in a document
US9509880B2 (en) Device capable of reading plural documents, method of controlling the device, and program
JP4821630B2 (en) Image processing apparatus, image processing system, and image processing program
CN101674384A (en) Apparatus and method
JP2007060220A (en) Image forming apparatus
US7894104B2 (en) Apparatus for embedding information and performing processing based on embedded information, and method of controlling same
JP4853308B2 (en) Image processing apparatus and image processing program
JP4135758B2 (en) Image forming apparatus, image forming system, and program
JP2007166222A (en) Image forming apparatus, image processing apparatus, confidential document reading method, image processing method, and image forming method
JP4821629B2 (en) Image processing apparatus and image processing program
JP2006229709A (en) Network imaging apparatus
JP4587123B2 (en) Image processing apparatus, image processing method, and image processing program
US20090009794A1 (en) Image processing apparatus capable of tracing printed image, image processing method executed in the image processing apparatus, and image processing program embodied on computer readable medium
EP2464090B1 (en) Device capable of reading plurality of documents, control method, and program thereof
JP4793256B2 (en) Document processing apparatus and document processing system
JP2007194811A (en) Image processing apparatus
JP4764371B2 (en) Image processing apparatus and image processing method
JP2009141918A (en) Multifunction machine
JP2008263593A (en) Image processing device, image processing method, program, and recording medium
JP2008160675A (en) Image generator, copy controller, program and printing medium
JP2013143707A (en) Image forming apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110531

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110721

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110809

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110822

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140916

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees