JP5633204B2 - Image processing apparatus and image processing program - Google Patents

Image processing apparatus and image processing program Download PDF

Info

Publication number
JP5633204B2
JP5633204B2 JP2010137121A JP2010137121A JP5633204B2 JP 5633204 B2 JP5633204 B2 JP 5633204B2 JP 2010137121 A JP2010137121 A JP 2010137121A JP 2010137121 A JP2010137121 A JP 2010137121A JP 5633204 B2 JP5633204 B2 JP 5633204B2
Authority
JP
Japan
Prior art keywords
information
image
determined
module
information image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010137121A
Other languages
Japanese (ja)
Other versions
JP2012004788A (en
Inventor
野口 武史
武史 野口
小松原 弘文
弘文 小松原
賢治 蛯谷
賢治 蛯谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2010137121A priority Critical patent/JP5633204B2/en
Publication of JP2012004788A publication Critical patent/JP2012004788A/en
Application granted granted Critical
Publication of JP5633204B2 publication Critical patent/JP5633204B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Editing Of Facsimile Originals (AREA)

Description

本発明は、画像処理装置及び画像処理プログラムに関する。   The present invention relates to an image processing apparatus and an image processing program.

画像に情報画像を合成する技術がある。
これに関連する技術として、例えば、特許文献1には、極秘マークなどの付加画像が付加された原稿や印刷データを、その付加画像の付加が必要な期間に出力あるいは複写した場合にだけ、元画像に付加画像の付加された画像を出力する画像処理装置を提供することを課題とし、元画像にウォーターマークなどの付加画像とその有効期限を示す情報マークとが合成された原稿をスキャナ部で読み取り、情報マークを画像解析して有効期限を認識し、現在日時が有効期限内であれば読み取った画像をそのまま出力し、有効期限経過後であれば、読み取った画像から付加画像と情報マークとを除去して元画像のみを出力し、また、印刷データに有効期限情報が含まれている場合は、現在日時が有効期限内であれば、指定された付加画像を印刷データが示す元画像に付加して印刷し、有効期限経過後であれば元画像のみを印刷することが開示されている。
There is a technique for synthesizing an information image with an image.
As a technology related to this, for example, in Patent Document 1, a document or print data to which an additional image such as a top secret mark is added is output or copied only when the additional image needs to be added. An object of the present invention is to provide an image processing apparatus that outputs an image in which an additional image is added to an image. A scanner unit combines a document in which an additional image such as a watermark and an information mark indicating the expiration date are combined with the original image. Scan, analyze the image of the information mark and recognize the expiration date. If the current date is within the expiration date, the scanned image is output as it is. If the print data contains expiration date information, if the current date is within the expiration date, the specified additional image is printed. Printed in addition to the original image shown is disclosed to be printed only original image as long as it is after the expiration date.

特開2006−166155号公報JP 2006-166155 A

本発明は、既に利用できなくなった情報を表している情報画像が画像内に含まれたままになってしまうことを防止するようにした画像処理装置及び画像処理プログラムを提供することを目的としている。   An object of the present invention is to provide an image processing apparatus and an image processing program that prevent an information image representing information that can no longer be used from being included in the image. .

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項1の発明は、情報を表す画像である情報画像が含まれている画像から情報画像を検知する検知手段と、前記検知手段によって検知された情報画像から情報を読み取れるか否かを判定する判定手段と、前記判定手段によって情報を読み取れると判定された情報画像内の情報形式は対応できるか否かを確認する形式確認手段と、前記形式確認手段によって対応できると確認された情報画像内の情報を抽出する情報抽出手段と、前記情報抽出手段によって抽出された情報は利用できるか否かを判断する情報利用判断手段と、(1)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できると確認され、前記情報抽出手段によって抽出され、前記情報利用判断手段によって利用できると判断された第1の場合と、(2)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できると確認され、前記情報抽出手段によって抽出され、前記情報利用判断手段によって利用できないと判断された第2の場合と、(3)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できないと確認された第3の場合と、(4)前記判定手段によって読み取れないと判定された第4の場合に分類し、それぞれの場合で異なる処理を行い、該第2の場合と分類した場合は、前記情報利用判断手段によって利用できないと判断された情報が抽出された情報画像を変更する情報画像変更手段を具備することを特徴とする画像処理装置である。
The gist of the present invention for achieving the object lies in the inventions of the following items.
According to the first aspect of the present invention, a detection unit that detects an information image from an image including an information image that is an image representing information, and determines whether or not information can be read from the information image detected by the detection unit A determination means, a format confirmation means for confirming whether or not the information format in the information image determined to be readable by the determination means is compatible, and an information image in the information image confirmed to be compatible by the format confirmation means An information extracting means for extracting information; an information utilization determining means for determining whether or not the information extracted by the information extracting means can be used; (1) it is determined that the information can be read by the determining means; A first case where it is confirmed that the information can be handled, extracted by the information extraction unit, and determined to be usable by the information use determination unit; (2 2) a second case where it is determined that the information can be read by the determination means, confirmed that it can be handled by the format confirmation means, extracted by the information extraction means, and cannot be used by the information use determination means; The cases are classified into a third case where it is determined that the data can be read by the determination means and it is confirmed that the format confirmation means cannot cope with, and (4) a fourth case where the determination means determines that the data cannot be read. The information image changing means for changing the information image from which the information determined to be unusable by the information use determining means is changed when performing the different processing in the second case is classified. An image processing apparatus.

請求項2の発明は、前記情報利用判断手段によって利用できると判断された場合、前記情報画像が表す情報を利用したことによって発生した情報を表す第2の情報画像を生成し、前記画像内の該情報画像の位置又は該画像内の空白領域に該第2の情報画像を合成する合成手段をさらに具備することを特徴とする請求項1に記載の画像処理装置である。   The invention according to claim 2 generates a second information image representing information generated by using the information represented by the information image when the information utilization determining unit determines that the information can be used. The image processing apparatus according to claim 1, further comprising a combining unit that combines the second information image with a position of the information image or a blank area within the image.

請求項3の発明は、前記情報画像変更手段は、情報画像の変更として、該情報画像を予め定められた色に変更すること、該情報画像のコントラストを弱めた情報画像に変更すること、又は予め定められた画像を付加することのいずれか一つ又はこれらの組み合わせを行うことを特徴とする請求項1又は2に記載の画像処理装置である。   According to a third aspect of the present invention, the information image changing means changes the information image to a predetermined color, changes the information image to a reduced information image, or changes the information image. The image processing apparatus according to claim 1, wherein any one of adding predetermined images or a combination thereof is performed.

請求項4の発明は、前記情報利用判断手段は、日時に関する情報、利用者に関する情報のいずれか一方又はこれらの組み合わせを用いて、前記情報抽出手段によって抽出された情報は利用できるか否かを判断することを特徴とする請求項1から3のいずれか一項に記載の画像処理装置である。   In the invention according to claim 4, the information use determination means determines whether the information extracted by the information extraction means can be used by using either one of date information, user information, or a combination thereof. The image processing apparatus according to claim 1, wherein the determination is performed.

請求項5の発明は、前記判定手段によって情報を読み取れないと判定された場合、前記形式確認手段によって対応できないと確認された場合、又は前記情報抽出手段によって情報が抽出できなかった場合には、該判定手段、該形式確認手段、該情報抽出手段の対象となった情報画像に対しては、変更を行わないように制御する制御手段をさらに具備することを特徴とする請求項1から4のいずれか一項に記載の画像処理装置である。   In the invention of claim 5, when it is determined that the information cannot be read by the determination means, when it is confirmed that the information cannot be extracted by the format confirmation means, or when the information extraction means cannot extract information, 5. The information processing apparatus according to claim 1, further comprising a control unit configured to control the information image targeted by the determination unit, the format confirmation unit, and the information extraction unit so as not to be changed. An image processing apparatus according to any one of the preceding claims.

請求項6の発明は、コンピュータを、情報を表す画像である情報画像が含まれている画像から情報画像を検知する検知手段と、前記検知手段によって検知された情報画像から情報を読み取れるか否かを判定する判定手段と、前記判定手段によって情報を読み取れると判定された情報画像内の情報形式は対応できるか否かを確認する形式確認手段と、前記形式確認手段によって対応できると確認された情報画像内の情報を抽出する情報抽出手段と、前記情報抽出手段によって抽出された情報は利用できるか否かを判断する情報利用判断手段と、(1)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できると確認され、前記情報抽出手段によって抽出され、前記情報利用判断手段によって利用できると判断された第1の場合と、(2)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できると確認され、前記情報抽出手段によって抽出され、前記情報利用判断手段によって利用できないと判断された第2の場合と、(3)前記判定手段によって読み取れると判定され、前記形式確認手段によって対応できないと確認された第3の場合と、(4)前記判定手段によって読み取れないと判定された第4の場合に分類し、それぞれの場合で異なる処理を行い、該第2の場合と分類した場合は、前記情報利用判断手段によって利用できないと判断された情報が抽出された情報画像を変更する情報画像変更手段として機能させるための画像処理プログラムである。 According to the sixth aspect of the present invention, there is provided a detection means for detecting an information image from an image including an information image that is an image representing information, and whether or not information can be read from the information image detected by the detection means. Determination means for determining whether the information format in the information image determined to be readable by the determination means is compatible, and information confirmed to be compatible by the format confirmation means An information extracting means for extracting information in the image; an information usage determining means for determining whether or not the information extracted by the information extracting means can be used; (1) it is determined that the information can be read by the determining means; Confirmed by the confirming means, extracted by the information extracting means, and determined to be usable by the information use determining means And (2) second that is determined to be readable by the determination means, confirmed to be compatible by the format confirmation means, extracted by the information extraction means, and unusable by the information use determination means And (3) a third case where it is determined that it can be read by the determination means and it is confirmed that the format confirmation means cannot cope with, and (4) a fourth case where it is determined that the determination means cannot read. Information image changing means for changing the information image from which the information determined to be unusable by the information use judging means is extracted when the processing is classified into the second case and the processing is classified as the second case. Is an image processing program for functioning as

請求項1の画像処理装置によれば、既に利用できなくなった情報を表している情報画像が画像内に含まれたままになってしまうことを防止することができる。   According to the image processing apparatus of the first aspect, it is possible to prevent the information image representing the information that can no longer be used from being included in the image.

請求項2の画像処理装置によれば、情報画像の数を増やすことなく新たな情報画像を合成することができる。   According to the image processing apparatus of the second aspect, a new information image can be synthesized without increasing the number of information images.

請求項3の画像処理装置によれば、既に利用できなくなった情報を表している情報画像が画像内に含まれていることを表現することができる。   According to the image processing apparatus of the third aspect, it is possible to express that the information image representing the information that can no longer be used is included in the image.

請求項4の画像処理装置によれば、情報画像が表している日時に関する情報、利用者に関する情報を用いて、抽出した情報は利用できるか否かの判断を行うことができる。   According to the image processing apparatus of the fourth aspect, it is possible to determine whether or not the extracted information can be used by using the information regarding the date and time represented by the information image and the information regarding the user.

請求項5の画像処理装置によれば、他の画像処理装置に対応する可能性がある情報画像を画像内に残すことができる。   According to the image processing apparatus of the fifth aspect, an information image that may correspond to another image processing apparatus can be left in the image.

請求項6の画像処理プログラムによれば、既に利用できなくなった情報を表している情報画像が画像内に含まれたままになってしまうことを防止することができる。   According to the image processing program of the sixth aspect, it is possible to prevent the information image representing the information that can no longer be used from being included in the image.

本実施の形態の構成例についての概念的なモジュール構成図である。It is a conceptual module block diagram about the structural example of this Embodiment. 対象とする画像の例を示す説明図である。It is explanatory drawing which shows the example of the image made into object. 対象リストのデータ構造例を示す説明図である。It is explanatory drawing which shows the data structure example of a target list. 印刷結果の例を示す説明図である。It is explanatory drawing which shows the example of a printing result. 本実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by this Embodiment. 本実施の形態による処理例を示すフローチャートである。It is a flowchart which shows the process example by this Embodiment. 埋め込み情報フォーマットの例を示す説明図である。It is explanatory drawing which shows the example of an embedded information format. 情報利用モジュール等による処理例を示すフローチャートである。It is a flowchart which shows the process example by an information utilization module. 情報利用モジュール等による処理例を示すフローチャートである。It is a flowchart which shows the process example by an information utilization module. 本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。It is a block diagram which shows the hardware structural example of the computer which implement | achieves this Embodiment.

以下、図面に基づき本発明を実現するにあたっての好適な一実施の形態の例を説明する。
図1は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア(コンピュータ・プログラム)、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、それらのモジュールとして機能させるためのコンピュータ・プログラム(コンピュータにそれぞれの手順を実行させるためのプログラム、コンピュータをそれぞれの手段として機能させるためのプログラム、コンピュータにそれぞれの機能を実現させるためのプログラム)、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能に一対一に対応していてもよいが、実装においては、1モジュールを1プログラムで構成してもよいし、複数モジュールを1プログラムで構成してもよく、逆に1モジュールを複数プログラムで構成してもよい。また、複数モジュールは1コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって1モジュールが複数コンピュータで実行されてもよい。なお、1つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続(データの授受、指示、データ間の参照関係等)の場合にも用いる。「予め定められた」とは、対象としている処理の前に定まっていることをいい、本実施の形態による処理が始まる前はもちろんのこと、本実施の形態による処理が始まった後であっても、対象としている処理の前であれば、そのときの状況・状態に応じて、又はそれまでの状況・状態に応じて定まることの意を含めて用いる。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク(一対一対応の通信接続を含む)等の通信手段で接続されて構成されるほか、1つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。もちろんのことながら、「システム」には、人為的な取り決めである社会的な「仕組み」(社会システム)にすぎないものは含まない。
また、各モジュールによる処理毎に又はモジュール内で複数の処理を行う場合はその処理毎に、対象となる情報を記憶装置から読み込み、その処理を行った後に、処理結果を記憶装置に書き出すものである。したがって、処理前の記憶装置からの読み込み、処理後の記憶装置への書き出しについては、説明を省略する場合がある。なお、ここでの記憶装置としては、ハードディスク、RAM(Random Access Memory)、外部記憶媒体、通信回線を介した記憶装置、CPU(Central Processing Unit)内のレジスタ等を含んでいてもよい。
Hereinafter, an example of a preferred embodiment for realizing the present invention will be described with reference to the drawings.
FIG. 1 shows a conceptual module configuration diagram of a configuration example of the present embodiment.
The module generally refers to components such as software (computer program) and hardware that can be logically separated. Therefore, the module in the present embodiment indicates not only a module in a computer program but also a module in a hardware configuration. Therefore, the present embodiment is a computer program for causing these modules to function (a program for causing a computer to execute each procedure, a program for causing a computer to function as each means, and a function for each computer. This also serves as an explanation of the program and system and method for realizing the above. However, for the sake of explanation, the words “store”, “store”, and equivalents thereof are used. However, when the embodiment is a computer program, these words are stored in a storage device or stored in memory. It is the control to be stored in the device. Modules may correspond to functions one-to-one, but in mounting, one module may be configured by one program, or a plurality of modules may be configured by one program, and conversely, one module May be composed of a plurality of programs. The plurality of modules may be executed by one computer, or one module may be executed by a plurality of computers in a distributed or parallel environment. Note that one module may include other modules. Hereinafter, “connection” is used not only for physical connection but also for logical connection (data exchange, instruction, reference relationship between data, etc.). “Predetermined” means that the process is determined before the target process, and not only before the process according to this embodiment starts but also after the process according to this embodiment starts. In addition, if it is before the target processing, it is used in accordance with the situation / state at that time or with the intention to be decided according to the situation / state up to that point.
In addition, the system or device is configured by connecting a plurality of computers, hardware, devices, and the like by communication means such as a network (including one-to-one correspondence communication connection), etc., and one computer, hardware, device. The case where it implement | achieves by etc. is also included. “Apparatus” and “system” are used as synonymous terms. Of course, the “system” does not include a social “mechanism” (social system) that is an artificial arrangement.
In addition, when performing a plurality of processes in each module or in each module, the target information is read from the storage device for each process, and the processing result is written to the storage device after performing the processing. is there. Therefore, description of reading from the storage device before processing and writing to the storage device after processing may be omitted. Here, the storage device may include a hard disk, a RAM (Random Access Memory), an external storage medium, a storage device via a communication line, a register in a CPU (Central Processing Unit), and the like.

本実施の形態である画像処理装置100は、情報を表す画像である情報画像が含まれている画像を処理するものであって、図1の例に示すように、画像処理装置100は、制御モジュール105、画像受付モジュール110、情報画像検知モジュール115、ビット判定モジュール120、フォーマット確認モジュール125、情報抽出モジュール130、情報利用モジュール135、情報更新モジュール140、情報画像貼付位置特定モジュール145、情報画像生成モジュール150、情報画像合成モジュール155、判断モジュール160、情報画像変更モジュール165、対象リスト記憶モジュール170、印刷モジュール175を有している。   The image processing apparatus 100 according to the present embodiment processes an image including an information image that is an image representing information. As illustrated in the example of FIG. 1, the image processing apparatus 100 performs control. Module 105, image reception module 110, information image detection module 115, bit determination module 120, format confirmation module 125, information extraction module 130, information utilization module 135, information update module 140, information image pasting position specifying module 145, information image generation The module 150 includes an information image synthesis module 155, a determination module 160, an information image change module 165, a target list storage module 170, and a print module 175.

画像受付モジュール110は、情報を表す画像である情報画像が含まれている画像を受け付ける。画像を受け付けるとは、例えば、スキャナ、カメラ等で画像を読み込むこと、ファックス等で通信回線を介して外部機器から画像を受信すること、ハードディスク(コンピュータに内蔵されているものの他に、ネットワークを介して接続されているもの等を含む)等に記憶されている画像を読み出すこと等が含まれる。画像は、2値画像、多値画像(カラー画像を含む)であってもよい。受け付ける画像は、1枚であってもよいし、複数枚であってもよい。また、画像の内容として、情報画像が含まれていれば、ビジネスに用いられる文書、広告宣伝用のパンフレット等であってもよい。
情報画像とは、機械可読な態様で情報を表すために体系的に作られた画像コードをいう。例えば、1次元バーコード、2次元コード等がある。より具体的には、2次元コードとして、QRコード(Quick Response code)がある。情報画像の合成は、貼り付け合成(情報画像と重なる下地の部分は見えなくなってしまう合成)である。
The image reception module 110 receives an image including an information image that is an image representing information. Accepting an image means, for example, reading an image with a scanner, a camera, etc., receiving an image from an external device via a communication line by fax, etc., a hard disk (in addition to what is built in a computer, via a network) And the like, and the like read out the images stored in the device etc.). The image may be a binary image or a multi-value image (including a color image). One image may be received or a plurality of images may be received. Further, as long as an information image is included as the content of the image, it may be a document used for business, a pamphlet for advertisement, or the like.
An information image refers to an image code that is systematically created to represent information in a machine-readable manner. For example, there are a one-dimensional barcode, a two-dimensional code, and the like. More specifically, there is a QR code (Quick Response code) as the two-dimensional code. The composition of the information image is pasting composition (composition in which the portion of the ground that overlaps the information image becomes invisible).

画像受付モジュール110が受け付ける画像内には、複数の情報画像が含まれていてもよい。
複数の情報画像が含まれているとは、次の3つの形態がある。
(形態1)種類の異なる情報画像が複数形成される場合(例えば、1次元バーコードとQRコードが混在している場合)
(形態2)種類が同じ情報画像が複数形成される場合(例えば、複数の1次元バーコードがある場合)
(形態3)前記(形態1)(形態2)との組み合わせの場合
(形態1)は、例えば、複数の読取装置(例えば、スキャナ、ハンディースキャナ、スキャナ付き携帯電話等)に対応した情報画像を同一面に合成する場合が該当する。具体例として、スキャナ用に多くの情報を表すことができる情報画像を合成し、さらにスキャナ付き携帯電話用に適した簡易な情報画像(例えば、文書を識別する文書識別符号だけを表している情報画像)を同一面に合成した場合である。
(形態2)は、例えば、スキャナで情報画像の検知に失敗し、情報画像が削除されなかった画像に、新しく生成した情報画像を付加して印刷した場合や、電子文書の状態で既に情報画像が描画されている電子文書に対して、さらに情報画像付きで印刷させた場合等である。このように、誤動作や誤操作によって発生しうる場合がある。
画像受付モジュール110は、例えば、図2に示す画像200を受け付ける。画像200内には、情報画像210、情報画像220、情報画像230、情報画像240が含まれている。
The image received by the image receiving module 110 may include a plurality of information images.
A plurality of information images are included in the following three forms.
(Mode 1) When a plurality of different types of information images are formed (for example, when one-dimensional barcode and QR code are mixed)
(Mode 2) When a plurality of information images of the same type are formed (for example, when there are a plurality of one-dimensional barcodes)
(Embodiment 3) In the case of combination with (Embodiment 1) and (Embodiment 2) In (Embodiment 1), for example, an information image corresponding to a plurality of reading devices (for example, a scanner, a handy scanner, a mobile phone with a scanner, etc.) is used. This is the case when they are combined on the same surface. As a specific example, an information image that can represent a lot of information for a scanner is synthesized, and a simple information image suitable for a mobile phone with a scanner (for example, information representing only a document identification code for identifying a document) This is a case where (image) is synthesized on the same surface.
(Mode 2) is, for example, when the information image is not detected by the scanner and the information image is not deleted and the newly generated information image is added and printed, or the information image is already in the electronic document state. This is a case where an electronic document on which is drawn is further printed with an information image. Thus, it may occur due to a malfunction or an operation error.
The image reception module 110 receives, for example, the image 200 shown in FIG. In the image 200, an information image 210, an information image 220, an information image 230, and an information image 240 are included.

情報画像検知モジュール115は、画像受付モジュール110によって受け付けられた画像から情報画像を検知する。例えば、情報画像内の規定されている同期信号を検出すること等によって、情報画像があることを検知する。そして、その検知した情報画像の位置として、例えば、情報画像の左上のX座標、Y座標、その情報画像の幅、高さを抽出する。
ビット判定モジュール120は、情報画像検知モジュール115によって検知された情報画像から情報を読み取れるか否かを判定する。具体的には、情報画像のコード体系に沿って、情報画像内の個々の画像は情報(ビット「0」又は「1」)に対応しているか否かを判定する。
The information image detection module 115 detects an information image from the image received by the image reception module 110. For example, the presence of an information image is detected by detecting a synchronization signal defined in the information image. Then, as the detected position of the information image, for example, the upper left X coordinate and Y coordinate of the information image, and the width and height of the information image are extracted.
The bit determination module 120 determines whether information can be read from the information image detected by the information image detection module 115. Specifically, it is determined whether or not each image in the information image corresponds to information (bit “0” or “1”) in accordance with the code system of the information image.

フォーマット確認モジュール125は、ビット判定モジュール120によって情報を読み取れると判定された情報画像内の情報形式(一般的には、フォーマットと呼ばれており、以下、フォーマットともいう)は対応できるか否かを確認する。具体的には、画像処理装置100が対応できるフォーマットを予め記憶しており、その記憶されているフォーマットと情報画像内のフォーマットは合致するか否かによって確認する。
情報抽出モジュール130は、フォーマット確認モジュール125によって対応できると確認された情報画像内から情報を抽出できるか否かを判断し、抽出できると判断した場合は、その情報画像内の情報(以下、埋め込み情報ともいう)を抽出する。つまり、その情報画像が表している情報を読み取る。
The format confirmation module 125 determines whether or not the information format (generally referred to as format, hereinafter also referred to as format) in the information image determined to be readable by the bit determination module 120 is compatible. Check. Specifically, a format that can be supported by the image processing apparatus 100 is stored in advance, and the stored format is confirmed by whether or not the format in the information image matches.
The information extraction module 130 determines whether or not information can be extracted from the information image confirmed to be supported by the format confirmation module 125. If it is determined that the information can be extracted, information in the information image (hereinafter, embedded) (Also referred to as information). That is, the information represented by the information image is read.

情報利用モジュール135は、情報抽出モジュール130によって抽出された情報は利用できるか否かを判断する。利用できる情報が表されている情報画像を情報画像Aとする。また、情報利用モジュール135は、日時に関する情報、利用者に関する情報のいずれか一方又はこれらの組み合わせを用いて、情報抽出モジュール130によって抽出された情報は利用できるか否かを判断するようにしてもよい。例えば、日時に関する情報を用いる場合として、有効期限が設定されているが、現在はその有効期限を過ぎているか否かの判断等が該当し、利用者に関する情報を用いる場合として、情報画像は作成者を表しているが、その利用者はその文書を正式に作成した者であるべきか否かの判断等が該当する。
そして、情報利用モジュール135は、情報画像Aが表している情報を利用する。情報を利用するとは、情報画像を扱うアプリケーションプログラムによるが、例えば、その情報画像には禁複写の期限が表されているが、その期限が変更された場合に、情報画像を書き換える等が該当する。
The information use module 135 determines whether the information extracted by the information extraction module 130 can be used. An information image representing usable information is referred to as an information image A. In addition, the information use module 135 may determine whether the information extracted by the information extraction module 130 can be used by using either one of the date information, the user information, or a combination thereof. Good. For example, an expiration date is set when using information related to date and time, but it is currently determined whether or not the expiration date has passed, and an information image is created when using information related to a user. The user is a person who has officially created the document.
The information use module 135 uses information represented by the information image A. The use of information depends on the application program that handles the information image. For example, the information image has a deadline for prohibition of copying, but when the deadline is changed, the information image is rewritten. .

情報更新モジュール140は、情報利用モジュール135によって情報画像が表している情報を利用した結果として、その情報を更新する。前述の例では、禁複写の期限を変更すること等が該当する。
情報画像貼付位置特定モジュール145は、画像受付モジュール110によって受け付けられた画像内に情報画像を貼り付ける位置を特定する。つまり、画像内から予め定められた面積(合成しようとする情報画像の面積)以上の空白を検知し、その検知した位置を情報画像を貼り付ける位置として決定する。また、複数の位置を検知した場合には、予め定められた位置の優先順位(例えば、優先順位として、右下、左下、・・・等)にしたがうようにしてもよい。
The information update module 140 updates the information as a result of using the information represented by the information image by the information use module 135. In the above example, changing the deadline of prohibited copying is applicable.
The information image pasting position specifying module 145 specifies the position where the information image is pasted in the image received by the image receiving module 110. That is, a blank space larger than a predetermined area (the area of the information image to be combined) is detected from the image, and the detected position is determined as the position where the information image is pasted. Further, when a plurality of positions are detected, the position priority may be determined in accordance with a predetermined priority order (for example, the lower right, lower left,... As the priority order).

情報画像生成モジュール150は、情報利用モジュール135によって利用できると判断された場合、情報画像Aが表す情報を利用したことによって発生した情報を表す新たな情報画像Bを生成する。例えば、情報画像Bが表す情報としては、情報更新モジュール140によって更新された情報等がある。
情報画像合成モジュール155は、画像受付モジュール110によって受け付けられた画像内の情報画像Aの位置に情報画像Bを合成する。つまり、情報画像Aの上に情報画像Bを貼り付け合成するので、情報画像Aは削除され、情報画像Bに書き換えられたことになる。また、情報画像貼付位置特定モジュール145によって特定された位置に情報画像Bを合成するようにしてもよい。この場合、画像内には、情報画像Aと情報画像Bの両方があることになる。また、既にある情報画像Aを削除するようにしてもよい。
When it is determined that the information use module 135 can use the information image generation module 150, the information image generation module 150 generates a new information image B representing information generated by using the information represented by the information image A. For example, the information represented by the information image B includes information updated by the information update module 140.
The information image synthesis module 155 synthesizes the information image B with the position of the information image A in the image received by the image reception module 110. That is, since the information image B is pasted and synthesized on the information image A, the information image A is deleted and rewritten to the information image B. Further, the information image B may be synthesized at the position specified by the information image pasting position specifying module 145. In this case, both the information image A and the information image B exist in the image. Further, the existing information image A may be deleted.

判断モジュール160は、ビット判定モジュール120、フォーマット確認モジュール125、情報抽出モジュール130、情報利用モジュール135の判断結果に基づいて、情報画像に関する処理を行う。
具体的には、以下の4つのパターンに分かれる。
(パターン1)
ビット判定モジュール120によって情報画像から情報を読み取れると判定し、フォーマット確認モジュール125によって対応できるフォーマットであると確認され、情報抽出モジュール130によって情報が抽出できると判断され、情報利用モジュール135によって抽出された情報は利用できると判断された場合は、情報画像生成モジュール150による処理を行わせる。なお、情報利用モジュール135によって抽出された情報は利用できると判断された場合とは、ビット判定モジュール120によって情報画像から情報を読み取れると判定し、フォーマット確認モジュール125によって対応できるフォーマットであると確認され、情報抽出モジュール130によって情報が抽出できると判断された後であるので、判断としては、情報利用モジュール135によって抽出された情報は利用できると判断されたか否かの判断をすればよい。
(パターン2)
ビット判定モジュール120によって情報画像から情報を読み取れると判定し、フォーマット確認モジュール125によって対応できるフォーマットであると確認され、情報抽出モジュール130によって情報が抽出できると判断され、情報利用モジュール135によって抽出された情報は利用できないと判断された場合は、情報画像変更モジュール165による処理を行わせる。なお、情報利用モジュール135によって抽出された情報は利用できないと判断された場合とは、ビット判定モジュール120によって情報画像から情報を読み取れると判定し、フォーマット確認モジュール125によって対応できるフォーマットであると確認され、情報抽出モジュール130によって情報が抽出できると判断された後であるので、判断としては、情報利用モジュール135によって抽出された情報は利用できると判断されたか否かの判断をすればよい。
(パターン3)
ビット判定モジュール120によって情報画像から情報を読み取れると判定し、フォーマット確認モジュール125によって対応できるフォーマットではないと確認された場合は、制御モジュール105にその情報画像に対しては何も処理をしないように制御させる。前述の(形態1)のように、複数の読取装置に対応させるための情報画像である場合があるためである。
(パターン4)
ビット判定モジュール120によって情報画像から情報が読み取れないと判定された場合は、制御モジュール105にその情報画像に対しては何も処理をしないように制御させる。前述の(形態1)のように、複数の読取装置に対応させるための情報画像である場合があるためである。
The determination module 160 performs processing related to the information image based on the determination results of the bit determination module 120, the format confirmation module 125, the information extraction module 130, and the information use module 135.
Specifically, it is divided into the following four patterns.
(Pattern 1)
The bit determination module 120 determines that the information can be read from the information image, the format confirmation module 125 confirms that the format is compatible, the information extraction module 130 determines that the information can be extracted, and the information utilization module 135 extracts the information. If it is determined that the information can be used, the information image generation module 150 performs processing. When the information extracted by the information use module 135 is determined to be usable, the bit determination module 120 determines that the information can be read from the information image, and the format check module 125 confirms that the information can be handled. Since the information extraction module 130 determines that the information can be extracted, the determination may be made as to whether or not the information extracted by the information use module 135 is determined to be usable.
(Pattern 2)
The bit determination module 120 determines that the information can be read from the information image, the format confirmation module 125 confirms that the format is compatible, the information extraction module 130 determines that the information can be extracted, and the information utilization module 135 extracts the information. If it is determined that the information cannot be used, the information image change module 165 performs processing. When it is determined that the information extracted by the information use module 135 cannot be used, the bit determination module 120 determines that the information can be read from the information image, and the format check module 125 confirms that the information can be handled. Since the information extraction module 130 determines that the information can be extracted, the determination may be made as to whether or not the information extracted by the information use module 135 is determined to be usable.
(Pattern 3)
If the bit determination module 120 determines that the information can be read from the information image and the format confirmation module 125 confirms that the information is not a compatible format, the control module 105 does not process the information image. Let me control. This is because the information image may correspond to a plurality of reading devices as described above (Form 1).
(Pattern 4)
If the bit determination module 120 determines that information cannot be read from the information image, the control module 105 is controlled to perform no processing on the information image. This is because the information image may correspond to a plurality of reading devices as described above (Form 1).

情報画像変更モジュール165は、情報利用モジュール135によって利用できないと判断された情報が抽出された情報画像を画像受付モジュール110によって受け付けられた画像から削除する又はその情報画像を変更する。また、情報画像変更モジュール165は、情報画像の変更として、その情報画像を予め定められた色に変更すること、その情報画像のコントラストを弱めた情報画像に変更すること、又は予め定められた画像を付加することのいずれか一つ又はこれらの組み合わせを行うようにしてもよい。予め定められた色としては、例えば、赤色があり、情報画像を赤色に変更して、注意を喚起するようにしてもよい。また、付加する予め定められた画像とは、注意を喚起する文字画像、例えば「改竄の可能性あり」等の文字画像であり、これを情報画像の周辺に付加、又はその情報画像に重ね合わせて合成するようにしてもよい。もちろん、これらの組み合わせ、例えば、情報画像を赤色に変更して、「改竄の可能性あり」等の文字画像を付加してもよい。   The information image changing module 165 deletes or changes the information image from the image received by the image receiving module 110 from the information image extracted from the information determined to be unavailable by the information using module 135. Further, the information image change module 165 changes the information image to a predetermined color, changes the information image to an information image in which the contrast of the information image is weakened, or determines a predetermined image. Any one of or a combination thereof may be performed. The predetermined color may be red, for example, and the information image may be changed to red to call attention. The predetermined image to be added is a character image that calls attention, for example, a character image such as “possible tampering”, and is added to the periphery of the information image or superimposed on the information image. May be combined. Of course, a combination of these, for example, the information image may be changed to red and a character image such as “possibly altered” may be added.

対象リスト記憶モジュール170は、情報画像検知モジュール115によって検知された情報画像の位置、ビット判定モジュール120による判定結果、フォーマット確認モジュール125による確認結果、情報抽出モジュール130による判断結果、情報利用モジュール135による判断結果を記憶し、判断モジュール160によってアクセスされ判断される。例えば、対象リスト300を記憶する。図3は、対象リスト300のデータ構造例を示す説明図である。対象リスト300は、情報画像位置欄310、ビット判定結果欄320、フォーマット確認結果欄330、埋め込み情報抽出結果欄340、埋め込み情報利用結果欄350を有している。
情報画像位置欄310は、情報画像検知モジュール115によって検知された情報画像の位置を記憶し、X欄312、Y欄314、W欄316、H欄318を有している。X欄312はその情報画像の左上のX座標、Y欄314はその情報画像の左上のY座標、W欄316はその情報画像の幅、H欄318はその情報画像の高さをそれぞれ記憶する。
ビット判定結果欄320は、ビット判定モジュール120による判定結果を記憶する。
フォーマット確認結果欄330は、フォーマット確認モジュール125による確認結果を記憶する。
埋め込み情報抽出結果欄340は、情報抽出モジュール130による判断結果を記憶する。
埋め込み情報利用結果欄350は、情報利用モジュール135による判断結果を記憶する。
なお、図3に例示した行391は前述の(パターン1)に対応し、行392は前述の(パターン2)に対応し、行393は前述の(パターン3)に対応し、行394は前述の(パターン4)に対応している。図2の例に示した情報画像210が行391に対応し、情報画像220が行392に対応し、情報画像230が行393に対応し、情報画像240が行394に対応している。
The target list storage module 170 includes the position of the information image detected by the information image detection module 115, the determination result by the bit determination module 120, the confirmation result by the format confirmation module 125, the determination result by the information extraction module 130, and the information utilization module 135. The determination result is stored and accessed and determined by the determination module 160. For example, the target list 300 is stored. FIG. 3 is an explanatory diagram showing an example of the data structure of the target list 300. The target list 300 includes an information image position field 310, a bit determination result field 320, a format confirmation result field 330, an embedded information extraction result field 340, and an embedded information utilization result field 350.
The information image position column 310 stores the position of the information image detected by the information image detection module 115 and includes an X column 312, a Y column 314, a W column 316, and an H column 318. The X column 312 stores the upper left X coordinate of the information image, the Y column 314 stores the upper left Y coordinate of the information image, the W column 316 stores the width of the information image, and the H column 318 stores the height of the information image. .
The bit determination result column 320 stores the determination result by the bit determination module 120.
The format confirmation result column 330 stores the confirmation result by the format confirmation module 125.
The embedded information extraction result column 340 stores the determination result by the information extraction module 130.
The embedded information use result column 350 stores the determination result by the information use module 135.
Note that the row 391 illustrated in FIG. 3 corresponds to the above (pattern 1), the row 392 corresponds to the above (pattern 2), the row 393 corresponds to the above (pattern 3), and the row 394 corresponds to the above. (Pattern 4). The information image 210 shown in the example of FIG. 2 corresponds to the line 391, the information image 220 corresponds to the line 392, the information image 230 corresponds to the line 393, and the information image 240 corresponds to the line 394.

印刷モジュール175は、情報画像合成モジュール155によって情報画像が合成された画像、情報画像変更モジュール165によって情報画像が削除又は変更された画像を印刷する。例えば、プリンタ等の印刷装置で印刷すること、ファックス等の画像送信装置で画像を送信すること等が含まれる。
印刷モジュール175は、例えば、図4に示す印刷結果400を印刷する。印刷結果400内には、情報画像410、情報画像230、情報画像240が含まれている。印刷結果400は、図2の例に示した画像200の画像処理装置100による処理結果であり、情報画像210が(パターン1)に対応していることから、情報画像合成モジュール155によって情報画像410に書き換えられ、情報画像220が(パターン2)に対応していることから、情報画像変更モジュール165によって削除され、情報画像230が(パターン3)に対応していることから、制御モジュール105によってそのまま残され、情報画像240が(パターン4)に対応していることから、制御モジュール105によってそのまま残されている。
The print module 175 prints the image in which the information image is combined by the information image combining module 155 and the image in which the information image is deleted or changed by the information image changing module 165. For example, printing with a printing apparatus such as a printer, and transmitting an image with an image transmission apparatus such as a fax are included.
For example, the printing module 175 prints the printing result 400 shown in FIG. The print result 400 includes an information image 410, an information image 230, and an information image 240. The print result 400 is a processing result of the image 200 shown in the example of FIG. 2 by the image processing apparatus 100, and the information image 210 corresponds to (Pattern 1). Since the information image 220 corresponds to (Pattern 2), the information image change module 165 deletes the information image 230, and the information image 230 corresponds to (Pattern 3). Since the information image 240 corresponds to (Pattern 4), it is left as it is by the control module 105.

制御モジュール105は、画像処理装置内にあるモジュールを制御する。例えば、判断モジュール160によって、(パターン3)又は(パターン4)であると判断された場合、つまり、ビット判定モジュール120によって情報を読み取れないと判定された場合、又はフォーマット確認モジュール125によって対応できないと確認された場合には、ビット判定モジュール120、フォーマット確認モジュール125の対象となった情報画像に対しては、変更を行わないように制御する。これらの情報画像は、本画像処理装置が対応できない情報画像である可能性があるため、そのまま画像内に残すこととするものである。   The control module 105 controls modules in the image processing apparatus. For example, when it is determined by the determination module 160 that (Pattern 3) or (Pattern 4), that is, when it is determined that the information cannot be read by the bit determination module 120, or when the format confirmation module 125 cannot cope with it. When the information is confirmed, control is performed so that the information image targeted by the bit determination module 120 and the format confirmation module 125 is not changed. Since these information images may be information images that cannot be handled by the image processing apparatus, they are left as they are in the image.

図5、図6は、本実施の形態による処理例を示すフローチャートである。
ステップS502では、画像受付モジュール110が、画像を受け付ける。
ステップS504では、情報画像検知モジュール115が、情報画像領域の位置を検知する。
ステップS506では、情報画像検知モジュール115が、対象リスト300を作成する。そして、対象リスト300の情報画像位置欄310にその情報画像の位置を記憶させる。
ステップS508では、ビット判定モジュール120が、ビットを判定する。
ステップS510では、ビット判定モジュール120が、ビット判定の結果を対象リスト300のビット判定結果欄320に格納する。
5 and 6 are flowcharts showing an example of processing according to the present embodiment.
In step S502, the image reception module 110 receives an image.
In step S504, the information image detection module 115 detects the position of the information image area.
In step S506, the information image detection module 115 creates the target list 300. Then, the position of the information image is stored in the information image position column 310 of the target list 300.
In step S508, the bit determination module 120 determines a bit.
In step S <b> 510, the bit determination module 120 stores the bit determination result in the bit determination result column 320 of the target list 300.

ステップS512では、フォーマット確認モジュール125が、埋め込み情報のフォーマットを確認する。
フォーマットについて、具体例としての埋め込み情報フォーマット700を用いて説明する。図7は、埋め込み情報フォーマット700の例を示す説明図である。埋め込み情報フォーマット700は、6つフィールド(フォーマット形式、作成ユーザー、作成日時、更新ユーザー、更新日時、追加情報)を有しており、それぞれのフィールドは番号710、type720、意味730、最大容量740、アドレス範囲750、初期値760によって規定されている。例えば、最初のフィールド(番号1)は、データ形式としてのtype720は「string」であり、意味730はフォーマット形式であり、最大容量740は固定の8バイトであり、アドレス範囲750は0x0000〜0x0007バイト目(ただし、16進数表記)であり、初期値760は“FORMAT01”である。
フォーマット確認モジュール125は、画像処理装置100が対応できるフォーマット名として、1番目のフォールド内のフォーマット名(“FORMAT01”)が含まれているか否かを判断する。含まれていれば対応できると判断し、含まれていなければ対応できないと判断する。
In step S512, the format confirmation module 125 confirms the format of the embedded information.
The format will be described using an embedded information format 700 as a specific example. FIG. 7 is an explanatory diagram showing an example of the embedded information format 700. The embedded information format 700 has six fields (format format, creation user, creation date / time, update user, update date / time, and additional information). Each field has a number 710, type 720, meaning 730, maximum capacity 740, It is defined by an address range 750 and an initial value 760. For example, in the first field (number 1), the type 720 as the data format is “string”, the meaning 730 is the format, the maximum capacity 740 is a fixed 8 bytes, and the address range 750 is 0x0000 to 0x0007 bytes. (The hexadecimal notation), and the initial value 760 is “FORMAT01”.
The format confirmation module 125 determines whether or not the format name (“FORMAT01”) in the first fold is included as a format name that can be supported by the image processing apparatus 100. If it is included, it is determined that it can be handled, and if it is not included, it is determined that it cannot be handled.

ステップS514では、フォーマット確認モジュール125が、フォーマット確認の結果を対象リスト300のフォーマット確認結果欄330に格納する。
ステップS516では、情報抽出モジュール130が、埋め込み情報を抽出する。前述のフォーマットにしたがって、各フィールドが読めるか否かを判断することによって、情報画像内から情報を抽出できるか否かを判断する。具体的には、図7の例に示した埋め込み情報フォーマット700のアドレス範囲750にそれぞれのデータが含まれているか否かを判断し、含まれている場合は抽出する。なお、そのフィールドとして、あり得ないデータであるか否かによって判断してもよい。例えば、作成日時フィールドにおいて日時として不当なデータである場合は、情報を抽出できないと判断してもよい。
ステップS518では、情報抽出モジュール130が、埋め込み情報抽出結果を対象リスト300の埋め込み情報抽出結果欄340に格納する。
ステップS520では、情報利用モジュール135が、埋め込み情報を利用する。この処理の詳細については、図8、図9を用いて後述する。
ステップS522では、情報利用モジュール135が、埋め込み情報の利用結果を対象リスト300の埋め込み情報利用結果欄350に格納する。
In step S <b> 514, the format confirmation module 125 stores the format confirmation result in the format confirmation result column 330 of the target list 300.
In step S516, the information extraction module 130 extracts embedded information. It is determined whether or not information can be extracted from the information image by determining whether or not each field can be read in accordance with the format described above. Specifically, it is determined whether or not each data is included in the address range 750 of the embedded information format 700 shown in the example of FIG. 7, and if it is included, it is extracted. Note that the field may be determined based on whether or not the data is impossible. For example, it may be determined that information cannot be extracted when the date / time is invalid in the creation date / time field.
In step S518, the information extraction module 130 stores the embedded information extraction result in the embedded information extraction result column 340 of the target list 300.
In step S520, the information use module 135 uses embedded information. Details of this processing will be described later with reference to FIGS.
In step S <b> 522, the information use module 135 stores the use result of the embedded information in the embedded information use result column 350 of the target list 300.

ステップS524では、判断モジュール160が、対象リスト300に沿った判断を行い、(パターン1)の場合はステップS528へ進み、(パターン2)の場合はステップS526へ進み、(パターン3)又は(パターン4)の場合は、ステップS536へ進む。
ステップS526では、情報画像変更モジュール165が、対象としている情報画像を削除又は変更する。
ステップS528では、情報更新モジュール140が、埋め込み情報を更新する。
ステップS530では、情報画像貼付位置特定モジュール145が、情報画像の貼り付け位置を特定する。
ステップS532では、情報画像生成モジュール150が、情報画像を生成する。
In step S524, the determination module 160 performs determination according to the target list 300. If (pattern 1), the process proceeds to step S528. If (pattern 2), the process proceeds to step S526, and (pattern 3) or (pattern In the case of 4), the process proceeds to step S536.
In step S526, the information image change module 165 deletes or changes the target information image.
In step S528, the information update module 140 updates the embedded information.
In step S530, the information image pasting position specifying module 145 specifies the pasting position of the information image.
In step S532, the information image generation module 150 generates an information image.

ステップS534では、情報画像合成モジュール155が、生成した情報画像を画像に合成する。
ステップS536では、制御モジュール105が、未処理の情報画像があるか否かを判断し、ある場合はステップS524からの処理を繰り返し、それ以外の場合はステップS538へ進む。
ステップS538では、印刷モジュール175が、印刷する。
In step S534, the information image synthesis module 155 synthesizes the generated information image with an image.
In step S536, the control module 105 determines whether or not there is an unprocessed information image, and if there is, repeats the processing from step S524, otherwise proceeds to step S538.
In step S538, the printing module 175 performs printing.

図8は、情報利用モジュール135等による処理例を示すフローチャートであり、図5の例に示したフローチャート内のステップS520の処理である。
ステップS802では、情報抽出モジュール130が、埋め込み情報内の作成日時を抽出する。例えば、情報画像が図7の例に示した埋め込み情報フォーマット700である場合、フィールド3(アドレス範囲0x0018〜0x0027)のデータを抽出する。
ステップS804では、情報利用モジュール135が、各情報画像の作成日時を比較し、最も古い日時の情報画像を選択する。例えば、最初に合成された情報画像を対象として、処理を行う場合である。また、各情報画像の作成日時を比較し、最も新しい日時の情報画像を選択するようにしてもよい。
ステップS806では、情報利用モジュール135が、選択した情報画像内の埋め込み情報が利用可能か否かを判断し、利用可能の場合はステップS808へ進み、それ以外の場合はステップS522へ進む。例えば、その作成日時から現在は、有効期限内であるか否かを判断するようにしてもよい。この場合、有効期限内であれば埋め込み情報は利用可能であると判断し、有効期限内でなければ埋め込み情報は利用可能でないと判断する。
ステップS808では、情報利用モジュール135が、埋め込み情報を利用する。
ステップS810では、情報利用モジュール135が、埋め込み情報を変更する。
FIG. 8 is a flowchart showing an example of processing by the information use module 135 or the like, and is the processing of step S520 in the flowchart shown in the example of FIG.
In step S802, the information extraction module 130 extracts the creation date and time in the embedded information. For example, when the information image has the embedded information format 700 shown in the example of FIG. 7, the data in the field 3 (address range 0x0018 to 0x0027) is extracted.
In step S804, the information use module 135 compares the creation date and time of each information image and selects the information image with the oldest date and time. For example, this is a case where processing is performed on the first synthesized information image. In addition, the creation date and time of each information image may be compared to select the information image with the latest date and time.
In step S806, the information utilization module 135 determines whether or not the embedded information in the selected information image can be used. If it is usable, the process proceeds to step S808. Otherwise, the process proceeds to step S522. For example, it may be determined whether or not the current date is within the expiration date from the creation date. In this case, if it is within the expiration date, it is determined that the embedded information is usable, and if it is not within the expiration date, it is determined that the embedded information is not usable.
In step S808, the information use module 135 uses embedded information.
In step S810, the information utilization module 135 changes the embedded information.

図9は、情報利用モジュール135等による処理例を示すフローチャートである。図8の例に示したフローチャート内のステップS806でYesの場合とステップS808の間に行う処理である。
ステップS902では、情報抽出モジュール130が、埋め込み情報内の作成ユーザー情報を抽出する。例えば、情報画像が図7の例に示した埋め込み情報フォーマット700である場合、フィールド2(アドレス範囲0x0008〜0x0017)のデータを抽出する。
ステップS904では、情報利用モジュール135が、抽出した作成ユーザー情報のユーザーが有効か否かを判断し、有効の場合はステップS808へ進み、それ以外の場合はステップS522へ進む。例えば、予め有効であるユーザーのリストを記憶しておき、抽出した作成ユーザーはそのリスト内にあるか否かによって判断してもよい。この場合、ユーザーが有効であれば埋め込み情報は利用可能であると判断し、有効でなければ埋め込み情報は利用可能でないと判断する。
FIG. 9 is a flowchart illustrating an example of processing performed by the information use module 135 or the like. This process is performed between step S806 and step S808 in the flowchart shown in the example of FIG.
In step S902, the information extraction module 130 extracts created user information in the embedded information. For example, when the information image has the embedded information format 700 shown in the example of FIG. 7, data in field 2 (address range 0x0008 to 0x0017) is extracted.
In step S904, the information use module 135 determines whether or not the user of the extracted created user information is valid. If valid, the process proceeds to step S808, otherwise proceeds to step S522. For example, a list of valid users may be stored in advance, and determination may be made based on whether or not the extracted created user is in the list. In this case, if the user is valid, it is determined that the embedded information is usable, and if it is not valid, it is determined that the embedded information is not usable.

図10を参照して、本実施の形態の画像処理装置のハードウェア構成例について説明する。図10に示す構成は、例えばパーソナルコンピュータ(PC)などによって構成されるものであり、スキャナ等のデータ読み取り部1017と、プリンタなどのデータ出力部1018を備えたハードウェア構成例を示している。   A hardware configuration example of the image processing apparatus according to the present embodiment will be described with reference to FIG. The configuration illustrated in FIG. 10 is configured by, for example, a personal computer (PC), and illustrates a hardware configuration example including a data reading unit 1017 such as a scanner and a data output unit 1018 such as a printer.

CPU1001は、前述の実施の形態において説明した各種のモジュール、すなわち、制御モジュール105、情報画像検知モジュール115、ビット判定モジュール120、フォーマット確認モジュール125、情報抽出モジュール130等の各モジュールの実行シーケンスを記述したコンピュータ・プログラムにしたがった処理を実行する制御部である。   The CPU 1001 describes execution sequences of various modules described in the above-described embodiments, that is, the control module 105, the information image detection module 115, the bit determination module 120, the format confirmation module 125, the information extraction module 130, and the like. The control unit executes processing according to the computer program.

ROM(Read Only Memory)1002は、CPU1001が使用するプログラムや演算パラメータ等を格納する。RAM1003は、CPU1001の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を格納する。これらはCPUバスなどから構成されるホストバス1004により相互に接続されている。   A ROM (Read Only Memory) 1002 stores programs used by the CPU 1001, calculation parameters, and the like. The RAM 1003 stores programs used in the execution of the CPU 1001, parameters that change as appropriate during the execution, and the like. These are connected to each other by a host bus 1004 including a CPU bus.

ホストバス1004は、ブリッジ1005を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス1006に接続されている。   The host bus 1004 is connected to an external bus 1006 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 1005.

キーボード1008、マウス等のポインティングデバイス1009は、操作者により操作される入力デバイスである。ディスプレイ1010は、液晶表示装置又はCRT(Cathode Ray Tube)などがあり、各種情報をテキストやイメージ情報として表示する。   A keyboard 1008 and a pointing device 1009 such as a mouse are input devices operated by an operator. The display 1010 includes a liquid crystal display device or a CRT (Cathode Ray Tube), and displays various types of information as text or image information.

HDD(Hard Disk Drive)1011は、ハードディスクを内蔵し、ハードディスクを駆動し、CPU1001によって実行するプログラムや情報を記録又は再生させる。ハードディスクには、受け付けた画像、対象リスト300、生成した情報画像などが格納される。さらに、その他の各種のデータ処理プログラム等、各種コンピュータ・プログラムが格納される。   An HDD (Hard Disk Drive) 1011 includes a hard disk, drives the hard disk, and records or reproduces a program executed by the CPU 1001 and information. The received image, the target list 300, the generated information image, and the like are stored in the hard disk. Further, various computer programs such as various other data processing programs are stored.

ドライブ1012は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体1013に記録されているデータ又はプログラムを読み出して、そのデータ又はプログラムを、インタフェース1007、外部バス1006、ブリッジ1005、及びホストバス1004を介して接続されているRAM1003に供給する。リムーバブル記録媒体1013も、ハードディスクと同様のデータ記録領域として利用可能である。   The drive 1012 reads data or a program recorded on a removable recording medium 1013 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and the data or program is read out to the interface 1007 and the external bus 1006. , The bridge 1005, and the RAM 1003 connected via the host bus 1004. The removable recording medium 1013 can also be used as a data recording area similar to a hard disk.

接続ポート1014は、外部接続機器1015を接続するポートであり、USB、IEEE1394等の接続部を持つ。接続ポート1014は、インタフェース1007、及び外部バス1006、ブリッジ1005、ホストバス1004等を介してCPU1001等に接続されている。通信部1016は、ネットワークに接続され、外部とのデータ通信処理を実行する。データ読み取り部1017は、例えばスキャナであり、ドキュメントの読み取り処理を実行する。データ出力部1018は、例えばプリンタであり、ドキュメントデータの出力処理を実行する。   The connection port 1014 is a port for connecting the external connection device 1015 and has a connection unit such as USB and IEEE1394. The connection port 1014 is connected to the CPU 1001 and the like via the interface 1007, the external bus 1006, the bridge 1005, the host bus 1004, and the like. A communication unit 1016 is connected to a network and executes data communication processing with the outside. The data reading unit 1017 is a scanner, for example, and executes document reading processing. The data output unit 1018 is a printer, for example, and executes document data output processing.

なお、図10に示す画像処理装置のハードウェア構成は、1つの構成例を示すものであり、本実施の形態は、図10に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア(例えば特定用途向け集積回路(Application Specific Integrated Circuit:ASIC)等)で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図10に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、複写機、ファックス、スキャナ、プリンタ、複合機(スキャナ、プリンタ、複写機、ファックス等のいずれか2つ以上の機能を有している画像処理装置)などに組み込まれていてもよい。   Note that the hardware configuration of the image processing apparatus illustrated in FIG. 10 shows one configuration example, and the present embodiment is not limited to the configuration illustrated in FIG. 10, and the modules described in the present embodiment are executed. Any configuration is possible. For example, some modules may be configured with dedicated hardware (for example, Application Specific Integrated Circuit (ASIC), etc.), and some modules are in an external system and connected via a communication line In addition, a plurality of systems shown in FIG. 10 may be connected to each other via communication lines so as to cooperate with each other. Further, it may be incorporated in a copying machine, a fax machine, a scanner, a printer, a multifunction machine (an image processing apparatus having any two or more functions of a scanner, a printer, a copying machine, a fax machine, etc.).

なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク(DVD)であって、DVDフォーラムで策定された規格である「DVD−R、DVD−RW、DVD−RAM等」、DVD+RWで策定された規格である「DVD+R、DVD+RW等」、コンパクトディスク(CD)であって、読出し専用メモリ(CD−ROM)、CDレコーダブル(CD−R)、CDリライタブル(CD−RW)等、ブルーレイ・ディスク(Blu−ray Disc(登録商標))、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、ハードディスク、読出し専用メモリ(ROM)、電気的消去及び書換可能な読出し専用メモリ(EEPROM)、フラッシュ・メモリ、ランダム・アクセス・メモリ(RAM)等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク(LAN)、メトロポリタン・エリア・ネットワーク(MAN)、ワイド・エリア・ネットワーク(WAN)、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
The program described above may be provided by being stored in a recording medium, or the program may be provided by communication means. In that case, for example, the above-described program may be regarded as an invention of a “computer-readable recording medium recording the program”.
The “computer-readable recording medium on which a program is recorded” refers to a computer-readable recording medium on which a program is recorded, which is used for program installation, execution, program distribution, and the like.
The recording medium is, for example, a digital versatile disc (DVD), which is a standard established by the DVD Forum, such as “DVD-R, DVD-RW, DVD-RAM,” and DVD + RW. Standard “DVD + R, DVD + RW, etc.”, compact disc (CD), read-only memory (CD-ROM), CD recordable (CD-R), CD rewritable (CD-RW), Blu-ray disc ( Blu-ray Disc (registered trademark), magneto-optical disk (MO), flexible disk (FD), magnetic tape, hard disk, read-only memory (ROM), electrically erasable and rewritable read-only memory (EEPROM), flash Includes memory, random access memory (RAM), etc. .
The program or a part of the program may be recorded on the recording medium for storage or distribution. Also, by communication, for example, a local area network (LAN), a metropolitan area network (MAN), a wide area network (WAN), a wired network used for the Internet, an intranet, an extranet, etc., or wireless communication It may be transmitted using a transmission medium such as a network or a combination of these, or may be carried on a carrier wave.
Furthermore, the program may be a part of another program, or may be recorded on a recording medium together with a separate program. Moreover, it may be divided and recorded on a plurality of recording media. Further, it may be recorded in any manner as long as it can be restored, such as compression or encryption.

100…画像処理装置
105…制御モジュール
110…画像受付モジュール
115…情報画像検知モジュール
120…ビット判定モジュール
125…フォーマット確認モジュール
130…情報抽出モジュール
135…情報利用モジュール
140…情報更新モジュール
145…情報画像貼付位置特定モジュール
150…情報画像生成モジュール
155…情報画像合成モジュール
160…判断モジュール
165…情報画像変更モジュール
170…対象リスト記憶モジュール
175…印刷モジュール
DESCRIPTION OF SYMBOLS 100 ... Image processing apparatus 105 ... Control module 110 ... Image reception module 115 ... Information image detection module 120 ... Bit determination module 125 ... Format confirmation module 130 ... Information extraction module 135 ... Information utilization module 140 ... Information update module 145 ... Information image sticking Position specifying module 150... Information image generating module 155. Information image synthesizing module 160. Judging module 165. Information image changing module 170... Target list storage module 175.

Claims (6)

情報を表す画像である情報画像が含まれている画像から情報画像を検知する検知手段と、
前記検知手段によって検知された情報画像から情報を読み取れるか否かを判定する判定手段と、
前記判定手段によって情報を読み取れると判定された情報画像内の情報形式は対応できるか否かを確認する形式確認手段と、
前記形式確認手段によって対応できると確認された情報画像内の情報を抽出する情報抽出手段と、
前記情報抽出手段によって抽出された情報は利用できるか否かを判断する情報利用判断手段と、
(1)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できると確認され、
前記情報抽出手段によって抽出され、
前記情報利用判断手段によって利用できると判断された第1の場合と、
(2)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できると確認され、
前記情報抽出手段によって抽出され、
前記情報利用判断手段によって利用できないと判断された第2の場合と、
(3)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できないと確認された第3の場合と、
(4)前記判定手段によって読み取れないと判定された第4の場合
に分類し、それぞれの場合で異なる処理を行い、該第2の場合と分類した場合は、前記情報利用判断手段によって利用できないと判断された情報が抽出された情報画像を変更する情報画像変更手段
を具備することを特徴とする画像処理装置。
Detecting means for detecting an information image from an image including an information image which is an image representing information;
Determination means for determining whether information can be read from the information image detected by the detection means;
A format confirmation unit for confirming whether or not the information format in the information image determined to be readable by the determination unit is compatible;
Information extraction means for extracting information in the information image confirmed to be supported by the format confirmation means;
Information usage determining means for determining whether or not the information extracted by the information extracting means can be used;
(1) It is determined that it can be read by the determination means,
It is confirmed that it can be handled by the format confirmation means,
Extracted by the information extraction means,
A first case where it is determined that the information use determination unit can use the information;
(2) It is determined that the determination means can read,
It is confirmed that it can be handled by the format confirmation means,
Extracted by the information extraction means,
A second case where the information use determining means determines that the information cannot be used;
(3) It is determined that it can be read by the determination means,
A third case where it is confirmed by the format confirmation means that it cannot be handled;
(4) Fourth case where it is determined that the determination means cannot read.
Information image changing means for changing the information image from which the information determined to be unusable by the information use judging means is extracted when the processing is classified into the second case and the processing is classified as the second case. An image processing apparatus comprising:
前記情報利用判断手段によって利用できると判断された場合、前記情報画像が表す情報を利用したことによって発生した情報を表す第2の情報画像を生成し、前記画像内の該情報画像の位置又は該画像内の空白領域に該第2の情報画像を合成する合成手段
をさらに具備することを特徴とする請求項1に記載の画像処理装置。
When it is determined that the information use determination unit determines that the information can be used, a second information image representing information generated by using the information represented by the information image is generated, and the position of the information image in the image or the The image processing apparatus according to claim 1, further comprising: a combining unit that combines the second information image with a blank area in the image.
前記情報画像変更手段は、情報画像の変更として、該情報画像を予め定められた色に変更すること、該情報画像のコントラストを弱めた情報画像に変更すること、又は予め定められた画像を付加することのいずれか一つ又はこれらの組み合わせを行う
ことを特徴とする請求項1又は2に記載の画像処理装置。
The information image changing means changes the information image to a predetermined color, changes the information image to a reduced information image, or adds a predetermined image as the information image change. The image processing apparatus according to claim 1, wherein one or a combination thereof is performed.
前記情報利用判断手段は、日時に関する情報、利用者に関する情報のいずれか一方又はこれらの組み合わせを用いて、前記情報抽出手段によって抽出された情報は利用できるか否かを判断する
ことを特徴とする請求項1から3のいずれか一項に記載の画像処理装置。
The information use judging means judges whether or not the information extracted by the information extracting means can be used by using either one of date-time information, user-related information, or a combination thereof. The image processing apparatus according to claim 1.
前記判定手段によって情報を読み取れないと判定された場合、前記形式確認手段によって対応できないと確認された場合、又は前記情報抽出手段によって情報が抽出できなかった場合には、該判定手段、該形式確認手段、該情報抽出手段の対象となった情報画像に対しては、変更を行わないように制御する制御手段
をさらに具備することを特徴とする請求項1から4のいずれか一項に記載の画像処理装置。
When it is determined that the information cannot be read by the determination means, when it is confirmed that the information cannot be extracted by the format confirmation means, or when the information extraction means cannot extract information, the determination means and the format confirmation 5. The apparatus according to claim 1, further comprising: a control unit configured to control the information image that is the target of the information extraction unit so as not to change the information image. 5. Image processing device.
コンピュータを、
情報を表す画像である情報画像が含まれている画像から情報画像を検知する検知手段と、
前記検知手段によって検知された情報画像から情報を読み取れるか否かを判定する判定手段と、
前記判定手段によって情報を読み取れると判定された情報画像内の情報形式は対応できるか否かを確認する形式確認手段と、
前記形式確認手段によって対応できると確認された情報画像内の情報を抽出する情報抽出手段と、
前記情報抽出手段によって抽出された情報は利用できるか否かを判断する情報利用判断手段と、
(1)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できると確認され、
前記情報抽出手段によって抽出され、
前記情報利用判断手段によって利用できると判断された第1の場合と、
(2)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できると確認され、
前記情報抽出手段によって抽出され、
前記情報利用判断手段によって利用できないと判断された第2の場合と、
(3)前記判定手段によって読み取れると判定され、
前記形式確認手段によって対応できないと確認された第3の場合と、
(4)前記判定手段によって読み取れないと判定された第4の場合
に分類し、それぞれの場合で異なる処理を行い、該第2の場合と分類した場合は、前記情報利用判断手段によって利用できないと判断された情報が抽出された情報画像を変更する情報画像変更手段
として機能させるための画像処理プログラム。
Computer
Detecting means for detecting an information image from an image including an information image which is an image representing information;
Determination means for determining whether information can be read from the information image detected by the detection means;
A format confirmation unit for confirming whether or not the information format in the information image determined to be readable by the determination unit is compatible;
Information extraction means for extracting information in the information image confirmed to be supported by the format confirmation means;
Information usage determining means for determining whether or not the information extracted by the information extracting means can be used;
(1) It is determined that it can be read by the determination means,
It is confirmed that it can be handled by the format confirmation means,
Extracted by the information extraction means,
A first case where it is determined that the information use determination unit can use the information;
(2) It is determined that the determination means can read,
It is confirmed that it can be handled by the format confirmation means,
Extracted by the information extraction means,
A second case where the information use determining means determines that the information cannot be used;
(3) It is determined that it can be read by the determination means,
A third case where it is confirmed by the format confirmation means that it cannot be handled;
(4) Fourth case where it is determined that the determination means cannot read.
Information image changing means for changing the information image from which the information determined to be unusable by the information use judging means is extracted when the processing is classified into the second case and the processing is classified as the second case. Image processing program to function as
JP2010137121A 2010-06-16 2010-06-16 Image processing apparatus and image processing program Expired - Fee Related JP5633204B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010137121A JP5633204B2 (en) 2010-06-16 2010-06-16 Image processing apparatus and image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010137121A JP5633204B2 (en) 2010-06-16 2010-06-16 Image processing apparatus and image processing program

Publications (2)

Publication Number Publication Date
JP2012004788A JP2012004788A (en) 2012-01-05
JP5633204B2 true JP5633204B2 (en) 2014-12-03

Family

ID=45536284

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010137121A Expired - Fee Related JP5633204B2 (en) 2010-06-16 2010-06-16 Image processing apparatus and image processing program

Country Status (1)

Country Link
JP (1) JP5633204B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6201653B2 (en) * 2013-11-07 2017-09-27 凸版印刷株式会社 Authentication system and digital watermark authentication device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002140196A (en) * 2001-09-11 2002-05-17 Olympus Optical Co Ltd Information reproducing device and information recording medium
JP2006166155A (en) * 2004-12-09 2006-06-22 Konica Minolta Business Technologies Inc Image processor and image processing method

Also Published As

Publication number Publication date
JP2012004788A (en) 2012-01-05

Similar Documents

Publication Publication Date Title
JP5480462B2 (en) Document processing program, document processing apparatus, and document processing system
JP4796830B2 (en) Information processing method and information processing apparatus
JP2006229670A (en) Image formation device and program
JP2007036406A (en) Image editing device
JP4943354B2 (en) Information identification device, information identification method, program, and recording medium
JP2008061068A (en) Image forming apparatus
JP5633204B2 (en) Image processing apparatus and image processing program
JP5732866B2 (en) Image processing apparatus and image processing program
JP2007174616A (en) Image processing apparatus, image processing method, image processing program and recording medium
CN101277358A (en) Apparatus, method, and computer product for image processing
JP2010039783A (en) Device, system, method and program of document processing
JP6582663B2 (en) Image processing apparatus and image processing program
JP5906969B2 (en) Image processing apparatus and image processing program
JP2009049899A (en) Printer having scanner, and printing system
JP4535176B2 (en) Work control program and work control system
JP6682827B2 (en) Information processing apparatus and information processing program
JP5521530B2 (en) Information processing apparatus, information processing system, information processing method, program, and storage medium
JP5531661B2 (en) Image processing apparatus and image processing program
JP2010129031A (en) Apparatus, system and program for processing image
US10963194B2 (en) Information processing apparatus and non-transitory computer readable medium for restricting simultaneous access to a print job
JP2008035164A (en) Image processing system, image processing device, and image processing program
JP6606885B2 (en) Image processing apparatus and image processing program
JP5176940B2 (en) Image processing apparatus and program
JP5720166B2 (en) Image processing apparatus and image processing program
JP2010147923A (en) Image processing apparatus and image processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130522

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140520

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140603

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140804

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140916

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140929

R150 Certificate of patent or registration of utility model

Ref document number: 5633204

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees