JP6950431B2 - Information processing equipment, image control method and image control program - Google Patents
Information processing equipment, image control method and image control program Download PDFInfo
- Publication number
- JP6950431B2 JP6950431B2 JP2017194445A JP2017194445A JP6950431B2 JP 6950431 B2 JP6950431 B2 JP 6950431B2 JP 2017194445 A JP2017194445 A JP 2017194445A JP 2017194445 A JP2017194445 A JP 2017194445A JP 6950431 B2 JP6950431 B2 JP 6950431B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- image
- defect
- image processing
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Accessory Devices And Overall Control Thereof (AREA)
- Record Information Processing For Printing (AREA)
- Facsimiles In General (AREA)
- Editing Of Facsimile Originals (AREA)
Description
この発明は、情報処理装置、画像制御方法および画像制御プログラムに関し、特に、画像を処理する情報処理装置、その情報処理装置で実行される画像制御方法および画像制御プログラムに関する。 The present invention relates to an information processing apparatus, an image control method and an image control program, and more particularly to an information processing apparatus for processing an image, an image control method and an image control program executed by the information processing apparatus.
近年、複合機(以下「MFP」という)で代表される画像形成装置は、画像を処理する機能を備えており、その画像処理を実行中にエラーが発生する場合がある。この場合、エラーが再発しないように画像形成装置の設定を変更したり、修理したりする必要がある。画像形成装置の設定の変更箇所または修理箇所を特定するためには、画像形成装置でエラーが発生する事象を再現しなければならない場合があり、この場合には、画像処理の対象となったデータが必要となる。一方、画像形成装置を使用するユーザーとは別の外部の業者が画像形成装置の設定の変更または修理する作業を担当する場合がある。外部の業者は、例えば、画像形成装置を製造したメーカーまたは画像形成装置のメンテナンスを担当する会社等である。このため、画像形成装置でエラーが発生する事象を再現するために必要とされるデータが機密情報を含む場合に、外部に機密が漏洩するといった問題がある。 In recent years, an image forming apparatus represented by a multifunction device (hereinafter referred to as "MFP") has a function of processing an image, and an error may occur during the execution of the image processing. In this case, it is necessary to change or repair the settings of the image forming apparatus so that the error does not recur. In order to identify the changed part or the repaired part of the setting of the image forming apparatus, it may be necessary to reproduce the event in which the error occurs in the image forming apparatus. In this case, the data targeted for image processing. Is required. On the other hand, an external contractor other than the user who uses the image forming apparatus may be in charge of the work of changing or repairing the setting of the image forming apparatus. The external contractor is, for example, a manufacturer of the image forming apparatus or a company in charge of maintenance of the image forming apparatus. For this reason, there is a problem that confidential information is leaked to the outside when the data required for reproducing an event in which an error occurs in the image forming apparatus contains confidential information.
例えば、特開2012−51296号公報には、上位側の装置から受信した印刷データを印刷出力する印刷装置において、印刷データを印刷イメージデータに変換するイメージデータ変換部を備え、該イメージデータ変換部は文字データ置換部を有し、イメージデータ変換部は、文字データの置換モードが指示されているかを判定し、置換モードに設定されている場合には、文字データ置換部にて、乱数によってランダム文字コードを生成し、生成された文字コードに対応する文字フォントデータにて印刷イメージデータを生成することを特徴とする画像形成装置が記載されている。 For example, Japanese Patent Application Laid-Open No. 2012-51296 includes an image data conversion unit that converts print data into print image data in a printing device that prints and outputs print data received from a higher-level device. Has a character data replacement unit, the image data conversion unit determines whether the character data replacement mode is instructed, and if the replacement mode is set, the character data replacement unit randomly uses a random number. Described is an image forming apparatus characterized in that a character code is generated and print image data is generated with character font data corresponding to the generated character code.
しかしながら、特開2012−51296号公報に記載の画像形成装置においては、文字データを乱数によって生成されたランダム文字コードに対応する文字フォントデータで置換するため、文字に含まれる機密を含まないデータを生成することができるが、文字以外の情報に機密が含まれる場合に、機密が漏洩するのを防止することができないといった問題がある。
この発明は上述した問題点を解決するためになされたもので、この発明の目的の一つは、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な情報処理装置を提供することである。 The present invention has been made to solve the above-mentioned problems, and one of the purposes of the present invention is to provide an information processing device capable of generating image data capable of reproducing defects while removing confidential information. To provide.
この発明の他の目的は、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な画像制御方法を提供することである。 Another object of the present invention is to provide an image control method capable of generating image data capable of reproducing defects while removing confidential information.
この発明のさらに他の目的は、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な画像制御プログラムを提供することである。 Still another object of the present invention is to provide an image control program capable of generating image data capable of reproducing defects while removing confidential information.
この発明は上述した問題点を解決するためになされたもので、この発明のある局面によれば、情報処理装置は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出手段と、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成手段と、を備え、生成手段は、画像データを分割する分割手段と、分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成手段と、中間データを画像処理手段に実行させ、基準不具合が発生することを確認する確認手段と、を含む。 The present invention has been made to solve the above-mentioned problems, and according to a certain aspect of the present invention, the information processing apparatus detects a defect in image processing by an image processing means for image processing image data as a reference defect. Defect detection means to perform, and a generation means to generate verification data that includes at least a part of image data when a defect in image processing is detected and causes a reference defect when image processing is performed by the image processing means. The generation means includes a dividing means for dividing the image data, an intermediate data generating means for generating intermediate data including at least one of the divided plurality of divided portions, and an image processing means for executing the intermediate data. Includes confirmation means for confirming that a reference defect occurs .
この局面に従えば、画像処理に基準不具合が検出される場合、画像処理の対象となった画像データの少なくとも一部を含み、画像処理されると基準不具合が発生する検証用データが生成される。このため、不具合を再現可能な検証用データを生成することができる。また、画像データが機密情報を含む場合にその機密情報が含まれない検証用データを生成することができる。その結果、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な情報処理装置を提供することができる。 According to this aspect, when a reference defect is detected in the image processing, verification data is generated that includes at least a part of the image data targeted for the image processing and causes the reference defect when the image processing is performed. .. Therefore, it is possible to generate verification data that can reproduce the defect. Further, when the image data contains confidential information, it is possible to generate verification data that does not include the confidential information. As a result, it is possible to provide an information processing device capable of generating image data capable of reproducing a defect while removing confidential information.
また、画像処理に不具合が検出される場合、画像データを分割した複数の分割部分の少なくとも1つを含む中間データが生成され、画像処理して基準不具合が発生することが確認された中間データが検証用データとして生成される。このため、検証用データを容易に生成することができる。 Further , when a defect is detected in the image processing, intermediate data including at least one of a plurality of divided portions obtained by dividing the image data is generated, and the intermediate data confirmed to cause a reference defect in the image processing is generated. Generated as verification data. Therefore, verification data can be easily generated.
好ましくは、分割手段は、画像データを第1の個数の分割部分に分割し、中間データ生成手段は、第1の個数の分割部分のうちから選択された1つの分割部分のみを含む第1の個数の中間データを生成し、分割手段は、第1の個数の中間データのいずれにおいても基準不具合が発生することが確認手段により確認されない場合、画像データを第1の個数より小さい第2の個数の分割部分に分割する。 Preferably, the dividing means divides the image data into a first number of divided portions, and the intermediate data generating means includes only one divided portion selected from the first number of divided portions. When the number of intermediate data is generated and the confirmation means does not confirm that the reference defect occurs in any of the first number of intermediate data, the dividing means divides the image data into a second number smaller than the first number. Divide into the divided parts of.
この局面によれば、第1の個数の分割部分のうちから選択された1つの分割部分のみを含む第1の個数の中間データが生成され、第1の個数の中間データのいずれにおいても基準不具合が発生することが確認されない場合、画像データが第1の個数より小さい第2の個数の分割部分に分割される。このため、画像データを画像処理する場合と同じ不具合が発生する中間データを容易に生成することができる。 According to this aspect, the first number of intermediate data including only one divided portion selected from the first number of divided portions is generated, and the reference defect in any of the first number of intermediate data. If it is not confirmed that the above occurs, the image data is divided into a second number of divided portions smaller than the first number. Therefore, it is possible to easily generate intermediate data in which the same problems as in the case of image processing of image data occur.
好ましくは、生成手段は、基準不具合が発生することが確認手段により確認された中間データに含まれる分割部分を複数の詳細部分に分割する部分分割手段と、複数の詳細部分のうちから選択された詳細部分を中間データから削除する削除手段と、選択された詳細部分が削除された後の中間データを画像処理手段に実行させ、基準不具合が発生することが確認手段により確認されない場合、中間データを選択された詳細部分が削除される前の状態に復元する復元手段と、を含む。 Preferably, the generation means is selected from a partial division means for dividing the divided portion included in the intermediate data confirmed by the confirmation means that a reference defect occurs into a plurality of detailed portions, and a plurality of detailed portions. If the deletion means for deleting the detailed part from the intermediate data and the intermediate data after the selected detailed part is deleted are executed by the image processing means and the confirmation means does not confirm that the reference defect occurs, the intermediate data is deleted. Includes a restore means that restores the selected details to their pre-deleted state.
この局面に従えば、基準不具合が発生することが確認された中間データに含まれる分割部分が複数の詳細部分に分割され、複数の詳細部分のうちから選択された詳細部分を中間データから削除し、選択された詳細部分が削除された後の中間データを画像処理する場合に、基準不具合が発生することが確認されない場合、中間データが選択された詳細部分が削除される前の状態に復元される。このため、中間データから基準不具合の発生の原因とならない詳細部分を中間データから削除するので、検証用データの情報量をできるだけ小さくすることができる。 According to this aspect, the divided part included in the intermediate data in which the reference defect is confirmed to occur is divided into a plurality of detailed parts, and the detailed part selected from the plurality of detailed parts is deleted from the intermediate data. , When image processing of the intermediate data after the selected detail is deleted, if it is not confirmed that a reference defect occurs, the intermediate data is restored to the state before the selected detail was deleted. NS. Therefore, since the detailed part that does not cause the occurrence of the reference defect is deleted from the intermediate data, the amount of information of the verification data can be reduced as much as possible.
好ましくは、中間データ生成手段は、複数の分割部分のうちから第1の個数の分割部分を選択し、選択された第1の個数の分割部分のみを含む複数の中間データを生成する選択手段を含み、選択手段は、複数の中間データのいずれにおいても画像処理手段に実行した場合に基準不具合が発生することが確認手段により確認されない場合、複数の分割部分のうちから第1の個数より大きな第2の個数の分割部分を選択する。 Preferably, the intermediate data generation means is a selection means that selects a first number of divided portions from the plurality of divided portions and generates a plurality of intermediate data including only the selected first number of divided portions. Including, if the confirmation means does not confirm that a reference defect occurs when the image processing means executes any of the plurality of intermediate data, the selection means is a number larger than the first number among the plurality of divided portions. Select the number of divided parts of 2.
この局面に従えば、複数の分割部分のうちから第1の個数の分割部分を選択し、選択された第1の個数の分割部分のみを含む複数の中間データを生成し、複数の中間データのいずれにおいても画像処理した場合に基準不具合が発生することが確認されない場合、複数の分割部分のうちから第1の個数より大きな第2の個数の分割部分を選択し、選択された第2の個数の分割部分のみを含む複数の中間データを生成する。このため、画像データ中で、画像データを画像処理する場合と同じ不具合が発生する中間データを生成することができる。 According to this aspect, a first number of divided portions are selected from the plurality of divided portions, a plurality of intermediate data including only the selected first number of divided portions are generated, and a plurality of intermediate data are generated. In any case, if it is not confirmed that a reference defect occurs in the case of image processing, a second number of divided parts larger than the first number is selected from the plurality of divided parts, and the selected second number is selected. Generate multiple intermediate data including only the divided part of. Therefore, in the image data, it is possible to generate intermediate data in which the same problem as in the case of image processing the image data occurs.
この発明の他の局面によれば、情報処理装置は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出手段と、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成手段と、検証用データにぼかし処理を実行するぼかし手段と、を備える。 According to another aspect of the present invention, the information processing apparatus has a defect detecting means for detecting an image processing defect by an image processing means for image processing of image data as a reference defect, and a defect detecting means for detecting an image processing defect. It is provided with a generation means for generating verification data including at least a part of the image data and causing a reference defect when the image is processed by the image processing means, and a blurring means for executing the blurring process on the verification data.
この局面に従えば、検証用データにぼかし処理を実行するので、検証用データの情報量をできるだけ小さくして、画像データの再現をできるだけ困難にすることができる。
この発明のさらに他の局面によれば、情報処理装置は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出手段と、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成手段と、画像処理手段を備えた画像処理装置から画像データを取得する画像データ取得手段と、画像処理装置をシミュレートするシミュレート手段と、を備える。
According to this aspect, since the verification data is blurred, the amount of information in the verification data can be made as small as possible and the reproduction of the image data can be made as difficult as possible.
According to still another aspect of the present invention, the information processing apparatus includes a defect detecting means for detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. Acquires image data from a generation means that includes at least a part of the image data and generates verification data that causes a reference defect when the image is processed by the image processing means, and an image processing device provided with the image processing means. It includes an image data acquisition means and a simulation means for simulating an image processing device.
好ましくは、生成手段は、画像処理の不具合が検出される場合に、ユーザーにより入力される出力の許可を示す操作を受け付けるまで、検証用データを生成しない。 Preferably, when a defect in image processing is detected, the generation means does not generate verification data until it accepts an operation indicating permission for output input by the user.
この局面に従えば、出力の許可を示す操作がユーザーにより入力される場合に、検証用データが生成されるので、出力の許可を示す操作がユーザーにより入力されない場合に検証用データを生成しないようにして、処理の負荷を低減することができる。 According to this aspect, the verification data is generated when the operation indicating the output permission is input by the user, so that the verification data is not generated when the operation indicating the output permission is not input by the user. Therefore, the processing load can be reduced.
好ましくは、検証用データを画像データに代えて外部に出力する出力手段を、さらに備える。 Preferably, an output means for outputting the verification data to the outside instead of the image data is further provided.
この局面に従えば、外部で不具合を再現可能な検証用データを生成することができる。また、画像データが機密情報を含む場合に外部に機密情報が漏洩する確率を低くすることができる。 According to this aspect, it is possible to generate verification data that can reproduce the defect externally. Further, when the image data contains confidential information, the probability that the confidential information is leaked to the outside can be reduced.
好ましくは、出力手段が検証用データを外部に出力する前の段階で、検証用データの画像を表示する表示制御手段を、さらに備え、出力手段は、検証用データの画像が表示された後に、ユーザーにより入力される出力の許可を示す操作を受け付けるまで、検証用データを外部に出力しない。 Preferably, the output means further includes display control means for displaying the image of the verification data before the output means outputs the verification data to the outside, and the output means is after the image of the verification data is displayed. The verification data is not output to the outside until the operation indicating the permission of the output input by the user is accepted.
この局面に従えば、検証用データが外部に出力される前に、検証用データの画像が表示されるので、ユーザーに外部に出力されるデータを通知することができる。また、出力の許可を示す操作がユーザーにより入力されるまで検証用データが外部に出力されないので、ユーザーは、画像データに含まれる機密が外部に流出しないようにすることができる。 According to this aspect, since the image of the verification data is displayed before the verification data is output to the outside, the user can be notified of the data to be output to the outside. Further, since the verification data is not output to the outside until the operation indicating the output permission is input by the user, the user can prevent the confidentiality contained in the image data from being leaked to the outside.
この局面に従えば、画像処理装置をシミュレートし、画像処理装置から取得される画像データから検証用データを生成し、検証用データを外部に出力するので、画像処理装置と情報処理装置以外に機密が漏洩するのを防止することができる。 According to this aspect, the image processing device is simulated, the verification data is generated from the image data acquired from the image processing device, and the verification data is output to the outside. Therefore, in addition to the image processing device and the information processing device, It is possible to prevent the leakage of confidential information.
この発明の他の局面によれば、画像制御方法は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、を情報処理装置に実行させ、生成ステップは、画像データを分割する分割ステップと、分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成ステップと、中間データを画像処理手段に実行させ、基準不具合が発生することを確認する確認ステップと、を含む。 According to another aspect of the present invention, the image control method includes a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a defect in image processing when a defect in image processing is detected. , A generation step of generating verification data including at least a part of the image data and causing a reference defect when the image is processed by the image processing means is executed by the information processing apparatus, and the generation step divides the image data. An intermediate data generation step for generating intermediate data including at least one of a plurality of divided divided portions, and a confirmation step for causing an image processing means to execute the intermediate data and confirming that a reference defect occurs. And, including .
この局面に従えば、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な画像制御方法を提供することができる。
この発明のさらに他の局面によれば、画像制御方法は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、検証用データにぼかし処理を実行するぼかしステップと、を情報処理装置に実行させる。
この発明のさらに他の局面によれば、画像制御方法は、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、画像処理手段を備えた画像処理装置から画像データを取得する画像データ取得ステップと、画像処理装置をシミュレートするシミュレートステップと、を情報処理装置に実行させる。
According to this aspect, it is possible to provide an image control method capable of generating image data capable of reproducing defects while removing confidential information.
According to still another aspect of the present invention, the image control method includes a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. Information on a generation step that includes at least a part of the image data and generates verification data that causes a reference defect when the image is processed by the image processing means, and a blur step that executes the blur processing on the verification data. Let the processing device execute.
According to still another aspect of the present invention, the image control method includes a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. In addition, a generation step of generating verification data that includes at least a part of the image data and causes a reference defect when the image is processed by the image processing means, and the image data is acquired from an image processing device provided with the image processing means. The information processing apparatus is made to execute the image data acquisition step and the simulation step of simulating the image processing apparatus.
この発明のさらに他の局面によれば、画像制御プログラムは、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、をコンピューターに実行させ、生成ステップは、画像データを分割する分割ステップと、分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成ステップと、中間データを画像処理手段に実行させ、基準不具合が発生することを確認する確認ステップと、を含む。 According to still another aspect of the present invention, the image control program has a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. In addition, a computer is made to execute a generation step of generating verification data that includes at least a part of the image data and causes a reference defect when the image is processed by the image processing means , and the generation step divides the image data. A division step, an intermediate data generation step for generating intermediate data including at least one of a plurality of divided divided portions, and a confirmation step for causing an image processing means to execute the intermediate data and confirming that a reference defect occurs. , Including .
この局面に従えば、機密情報を除去しつつ不具合を再現可能な画像データを生成することが可能な画像制御プログラムを提供することができる。
この発明のさらに他の局面によれば、画像制御プログラムは、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、検証用データにぼかし処理を実行するぼかしステップと、をコンピューターに実行させる。
この発明のさらに他の局面によれば、画像制御プログラムは、画像データを画像処理する画像処理手段による画像処理の不具合を基準不具合として検出する不具合検出ステップと、画像処理の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理手段により画像処理されると基準不具合が発生する検証用データを生成する生成ステップと、画像処理手段を備えた画像処理装置から画像データを取得する画像データ取得ステップと、画像処理装置をシミュレートするシミュレートステップと、をコンピューターに実行させる。
According to this aspect, it is possible to provide an image control program capable of generating image data capable of reproducing defects while removing confidential information.
According to still another aspect of the present invention, the image control program has a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. A computer that includes at least a part of the image data and generates a verification data that causes a reference defect when the image is processed by the image processing means, and a blur step that executes the blur processing on the verification data. To execute.
According to still another aspect of the present invention, the image control program has a defect detection step of detecting a defect in image processing by an image processing means that processes image data as a reference defect, and a case where a defect in image processing is detected. In addition, a generation step of generating verification data that includes at least a part of the image data and causes a reference defect when the image is processed by the image processing means, and the image data is acquired from an image processing device provided with the image processing means. Have the computer execute the image data acquisition step and the simulation step of simulating the image processing device.
以下、本発明の実施の形態について図面を参照して説明する。以下の説明では同一の部品には同一の符号を付してある。それらの名称および機能も同じである。従ってそれらについての詳細な説明は繰り返さない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are designated by the same reference numerals. Their names and functions are the same. Therefore, detailed explanations about them will not be repeated.
<第1の実施の形態>
図1は、本発明の実施の形態の一つにおける情報処理システムの全体概要の一例を示す図である。図1を参照して、情報処理システム1は、MFP(Multi Function Peripheral)100と、内部サーバー200と、検証サーバー500と、を含む。
<First Embodiment>
FIG. 1 is a diagram showing an example of an overall outline of an information processing system according to one of the embodiments of the present invention. With reference to FIG. 1, the
MFP100は、画像形成装置の一例であり、処理対象となるデータを画像処理する画像処理機能、画像データに基づいて用紙などの記録媒体に画像を形成するための画像形成機能を少なくとも備えている。MFP100は、画像処理機能および画像形成機能に加えて、原稿を読み取るための原稿読取機能、およびファクシミリデータを送受信するファクシミリ送受信機能を備えてもよい。画像処理は、限定するものではないが、画像データを画像形成可能なラスターデータに変換する処理、画像中のエッジを強調する先鋭化処理、画像中の色の変化を滑らかにするスムージング処理、データをよりサイズの小さな符号化データに変換する符号化処理、符号化データを復号する復号処理、画像データのフォーマットを変換する変換処理を含む。内部サーバー200は、一般的なコンピューターである。
The
内部サーバー200および検証サーバー500は、一般的なコンピューターである。内部サーバー200およびMFP100それぞれは、ローカルエリアネットワーク(LAN)3に接続される。検証サーバー500は、インターネット5に接続されている。
The
LAN3に接続されるMFP100および内部サーバー200それぞれは、LAN3を介してデータの送受信が可能である。LAN3は、それに接続される装置が限定された閉じた環境となるため、LAN3に接続される複数の装置間、ここではMFP100と内部サーバー200との間で送受信されるデータが外部に漏れないようにセキュリティが確保されている。なお、LAN3の接続形態は有線または無線を問わない。また、LAN3に代えて、セキュリティが確保されるのであれば、公衆交換電話網(Public Switched Telephone Networks)を用いたネットワーク、ワイドエリアネットワーク(WAN)を用いるようにしてもよい。
Each of the
LAN3は、インターネット5に接続される。このため、MFP100および内部サーバー200それぞれは、ネットワーク3を介してインターネット5に接続された検証サーバー500と互いに通信可能である。MFP100および内部サーバー200は内部に配置される装置であるのに対して、検証サーバー500は、MFP100および内部サーバー200に対して外部に配置される装置である。
本実施の形態における情報処理システム1において、MFP100で不具合が発生する場合に、検証サーバー500で、MFP100において発生した不具合を検証する。そして、検証結果に基づいて、MFP100で発生した不具合が次に発生しないように、MFP100に設定するパラメータを決定したり、MFP100で実行されるプログラムを改変したり、ハードウェア資源を交換または増設することができる。検証サーバー500において、MFP100において発生した不具合を再現するために、MFP100において発生した不具合の原因となるデータが必要となるが、そのデータが機密情報を含んでいる場合があるので、MFP100は、そのデータそのものを検証サーバー500に送信するのではなく、そのデータを検証用データに変換し、検証用データを検証サーバー500に送信する。検証用データがLAN3に接続されたMFP100と内部サーバー200とを含む閉じた環境の外部の検証サーバー500に送信されるが、検証用データからデータに含まれる機密情報を再現できなければ機密が外部に漏洩するのを防止することができる。
In the
図2は、本実施の形態におけるMFPのハードウェア構成の概要の一例を示すブロック図である。図2を参照して、MFP100は、メイン基板111と、原稿を読み取るための原稿読取部130と、原稿を原稿読取部130に搬送するための自動原稿搬送装置120と、原稿読取部130が原稿を読み取って出力する画像データに基づいて用紙等に画像を形成するための画像形成部140と、画像形成部140に用紙を供給するための給紙部150と、通信インターフェース(I/F)部160と、ファクシミリ部170と、外部記憶装置180と、大容量記憶装置としてのハードディスクドライブ(HDD)113と、ユーザーインターフェースとしての操作パネル115とを含む。
FIG. 2 is a block diagram showing an example of an outline of the hardware configuration of the MFP in the present embodiment. With reference to FIG. 2, the
メイン基板111は、自動原稿搬送装置120、原稿読取部130、画像形成部140および給紙部150、通信I/F部160、ファクシミリ部170、外部記憶装置180、HDD113、および操作パネル115と接続され、MFP100の全体を制御する。
The
自動原稿搬送装置120は、原稿トレイ上にセットされた複数枚の原稿を1枚ずつ自動的に原稿読取部130のプラテンガラス上に設定された所定の原稿読み取り位置まで搬送し、原稿読取部130により原稿に形成された画像が読み取られた原稿を原稿排紙トレイに排出する。原稿読取部130は、原稿読取位置に搬送されてきた原稿に光を照射する光源と、原稿で反射した光を受光する光電変換素子とを含み、原稿のサイズに応じた原稿画像を走査する。光電変換素子は、受光した光を電気信号である画像データに変換して、画像形成部140に出力する。
The automatic
給紙部150は、給紙トレイに収納された用紙を画像形成部140に搬送する。画像形成部140は、周知の電子写真方式により画像を形成するものであって、原稿読取部130から入力される画像データにシェーディング補正などの各種のデータ処理を施した、データ処理後の画像データまたは、外部から受信された画像データに基づいて、給紙部150により搬送される用紙に画像を形成し、画像を形成した用紙を排紙トレイに排出する。
The
通信I/F部160は、ネットワーク3にMFP100を接続するためのインターフェースである。通信I/F部160は、TCP(Transmission Control Protocol)またはUDP(User Datagram Protocol)等の通信プロトコルで、ネットワークに接続された他のコンピューターと通信する。なお、通信のためのプロトコルは、特に限定されることはなく、任意のプロトコルを用いることができる。
The communication I /
通信I/F部160は、ネットワーク3から受信されるデータをメイン基板111に出力し、メイン基板111から入力されるデータをネットワーク3に出力する。通信I/F部160は、ネットワーク3から受信されるデータのうちMFP100宛てのデータのみを、メイン基板111に出力し、ネットワーク3から受信されるデータのうちMFP100とは異なる装置宛てのデータを廃棄する。
The communication I /
ファクシミリ部170は、公衆交換電話網(PSTN)に接続され、ファクシミリデータを送受信する。外部記憶装置180は、CD−ROM181または半導体メモリが装着される。外部記憶装置180は、CD−ROM181または半導体メモリに記憶されたデータを読み出す。また、外部記憶装置180は、CD−ROM181または半導体メモリにデータを記憶する。
The
操作パネル115は、MFP100の上面に設けられ、表示部118と操作部119とを含む。表示部118は、液晶表示装置(LCD)、有機ELD等の表示装置であり、ユーザーに対する指示メニューや取得した画像データに関する情報等を表示する。操作部119は、複数のハードキーと、タッチパネルと、を含む。タッチパネルは、表示部118の上面または下面に表示部に重畳して設けられたマルチタッチ対応のタッチパネルであり、表示部118の表示面中でユーザーにより指示された位置を検出する。
The
図3は、本実施の形態におけるメイン基板の詳細な構成の一例を示すブロック図である。図3を参照して、メイン基板111は、CPU171と、ROM(Read Only Memory)173と、RAM(Random Access Memory)175と、画像制御ASIC(Application Specific Integrated Circuit)177と、を含む。
FIG. 3 is a block diagram showing an example of a detailed configuration of the main board according to the present embodiment. With reference to FIG. 3, the
CPU171、ROM173、RAM175および画像制御ASIC177それぞれは、バス179に接続されており、データの転送が可能である。CPU171は、MFP100の全体を制御する。ROM173は、CPU171が実行するプログラムを記憶する。RAM175は、CPU171の作業領域として用いられる揮発性の半導体メモリである。
The
CPU171は、HDD113に記憶されたプログラムをRAM175にロードして実行する。CPU171が実行するプログラムは、ハードウェア資源を制御するための制御プログラム、およびアプリケーションプログラムを含む。ハードウェア資源は、自動原稿搬送装置120、原稿読取部130、画像形成部140、給紙部150、の通信I/F部160、ファクシミリ部170、HDD113および操作パネル115を含む。アプリケーションプログラムは、例えば、ファクシミリ部170を制御してファクシミリデータを送信するファクシミリ送信プログラム、ファクシミリ部170を制御してファクシミリデータを受信するファクシミリ受信プログラム、通信I/F部160を制御してプリントジョブを受信し、画像形成部140および給紙部150を制御してプリントジョブに基づいて画像を形成するプリントプログラム、原稿読取部130を制御して原稿を読み取る原稿読取プログラムを含む。また、アプリケーションプログラムは、MFP100が備える消耗品を管理するメンテナンスプログラム、エラー状態を通知するエラー状態通知プログラムを、含んでもよい。なお、CPU171が実行するアプリケーションプログラムを、これらに限定するものではない。
The
画像制御ASIC177は、CPU171により制御され、原稿読取部130、画像形成部140およびファクシミリ部170と接続され、それらを制御する。また、画像制御ASIC177は、原稿読取部130が原稿を読み取って出力する画像データをRAM175に記憶する処理、画像データをラスターデータに変換して画像形成部140に出力する処理、ファクシミリ部170が受信したファクシミリデータを画像データに変換してRAM175に記憶する処理、画像データをファクシミリデータに変換しファクシミリ部170に出力する処理、RAM175に記憶された画像データの解像度を変換して変換後の画像データをRAM175に記憶する処理、RAM175に記憶された2以上の画像データを合成した合成データをRAM175に記憶する処理、RAM175に記憶されたデータのフォーマットを変換してRAM175に記憶する処理、画像データを暗号化した符号化データに変換する暗号化処理、暗号化データを復号する復号処理を実行する。
The
図4は、第1の実施の形態におけるMFPが備えるCPUが有する機能の一例を示すブロック図である。図4に示す機能は、MFP100が備えるCPU171が、ROM173、HDD113またはCD−ROM181に記憶された画像制御プログラムを実行することにより、CPU171により実現される機能である。図4を参照して、CPU171は、処理データを受け付けるデータ受付部51と、データに対して画像処理を実行する画像処理部53と、画像処理部53による画像処理の不具合を検出する不具合検出部55と、検証用データを生成する生成部59と、検証用データを外部に出力する出力部61と、表示部118を制御する表示制御部63と、を含む。
FIG. 4 is a block diagram showing an example of the functions of the CPU included in the MFP in the first embodiment. The function shown in FIG. 4 is a function realized by the
データ受付部51は、MFP100が処理の対象とする処理データを受け付ける。データ受付部51は、処理データを受け付けることに応じて、その処理データを画像処理部53および生成部59に出力する。データ受付部51は、原稿読取部130が原稿を読み取る場合、原稿読取部130が原稿を読み取って出力する画像データを受け付ける。データ受付部51は、通信I/F部160が、LAN3に接続されたパーソナルコンピューター(以下PCという)からプリントジョブを受信する場合、プリントジョブに含まれるプリントデータを処理データとして受け付ける。データ受付部51は、通信I/F部160がインターネット5に接続されたウェブ(Web)サーバーからWebデータを受信する場合、Webデータを処理データとして受け付ける。また、データ受付部51は、HDD113に記憶されたデータをプリントする指示を受け付ける場合、HDD113に記憶されたデータを処理データとして受け付ける。
The
画像処理部53は、データを画像処理し、画像データを生成する。画像処理部53は、データ受付部51から処理データが入力されることに応じて、処理データを画像処理する。画像処理部53が実行する画像処理は、画像制御ASIC177に画像処理させるために、画像制御ASIC177を制御する処理を含む。例えば、処理データがプリントデータの場合、プリントジョブによって定められた条件に従ってプリントデータを画像処理する。画像処理部53は、処理データが、原稿読取部130が出力する画像データ、WebデータまたはHDD113に記憶されたデータの場合、ユーザーが操作部119に入力するプリント条件に従って処理データを画像処理する。ここで、画像処理部53が実行する画像処理は、画像制御ASIC177が実行する画像処理に加えて、画像中のエッジを強調する先鋭化処理、画像中の色の変化を滑らかにするスムージング処理を含んでもよい。
The
不具合検出部55は、画像処理部53が画像処理を実行中に発生する不具合を検出する。画像処理部53は、CPU171が画像処理プログラムを実行する画像処理タスクである。不具合検出部55は、画像処理タスクが、画像処理プログラムにより予め定められたエラーを検出する場合に、不具合を検出する。画像処理プログラムにより予め定められたエラーは、画像処理部53が画像処理を開始してから予め定められた時間が経過するタイムアウトエラーを含む。予め定められた時間は、例えば、画像処理の対象となるデータのデータ量に比例する時間としてもよい。換言すれば、不具合検出部55は、画像処理部53が画像処理の対象となるデータを画像処理する処理速度が所定の値より小さい場合に、不具合を検出するようにしてもよい。
The
また、不具合検出部55は、画像処理が画像データを符号化データに変換する符号化処理であって、可逆圧縮処理の場合、符号化データを復号した復号データを、画像データと比較し、両者が一致しない場合に不具合を検出するようにしてもよい。また、不具合検出部55は、画像処理が画像データを符号化データに変換する符号化処理の場合、画像処理した後のデータのデータ量が予め定められた上限値を超える場合に、不具合を検出するようにしてもよい。この場合における上限値は、画像処理後のデータを処理対象とするタスクによって定まる値であり、予め定められている。例えば、画像処理後のデータを処理対象とするタスクは、CPU171がデータを外部に送信するプログラム、例えば、電子メール送信プログラムを実行するタスクである。
Further, the
不具合検出部55は、不具合を検出する場合、検出された不具合を特定するための不具合情報を生成部59に出力する。不具合情報は、画像処理プログラムにより予め定められたエラーを識別するためのエラー識別情報を含む。ここで、画像処理部53が処理データを処理する場合に不具合検出部55により検出された不具合を基準不具合という。
When the
生成部59は、データ受付部51から入力される処理データに基づいて、処理データの少なくとも一部を含み、基準不具合と同じ不具合が発生する検証用データを生成する。生成部59は、確認部71と、分割部73と、中間データ生成部75と、ぼかし部77と、を含む。
The
分割部73は、処理データを分割し、複数の分割部分を生成する。ここでは、分割部73は、処理データを第1の個数に等分し、第1の個数の分割部分を生成する。分割部分のサイズを予め定めておき、処理データのサイズと分割部分のサイズとから第1の個数を決定すればよい。
The
確認部71は、不具合検出部55が基準不具合を検出して出力する不具合情報を基準エラー情報としてRAM175に記憶する。確認部71は、分割部73により生成された第1の個数の分割部分それぞれを画像処理部53に実行させ、不具合検出部55から基準エラー情報と同じ不具合情報が入力される場合、その分割部分を中間データ生成部75に出力する。
The
中間データ生成部75は、部分分割部81と、削除部83と、復元部85と、を含む。中間データ生成部75は、確認部71から1以上の分割部分が入力される場合、1以上の分割部分のうち任意の1つを含む中間データを生成し、中間データを部分分割部81に出力する。
The intermediate
部分分割部81は、中間データを、分割部分を分割部分よりもサイズの小さい複数の詳細部分に分割する。削除部83は、中間データから複数の詳細部分のいずれか1つを削除する。確認部71は、削除部83により詳細部分が削除された中間データを画像処理部53に実行させ、不具合検出部55から基準エラー情報と同じ不具合情報が入力される場合、中間データを検証用データに設定し、不具合検出部55から基準エラー情報と同じ不具合情報が入力されない場合、復帰指示を復元部85に出力する。
The
復元部85は、確認部71から復帰指示が入力されることに応じて、削除部83により削除された詳細部分を中間データに復帰させる。換言すれば、復元部85は、削除部83により削除された詳細部分を中間データに追加することにより、詳細部分が削除される前の中間データを生成する。削除部83により詳細部分が削除される前の中間データを一時記憶しておき、削除部83により詳細部分が削除された中間データを、一時記憶された中間データに置き換えるようにしてもよい。中間データは、複数の詳細部分のうち、それを中間データから削除しても基準不具合が発生する詳細部分のすべてを中間データから削除したデータである。中間データ生成部75は、削除部83が複数の詳細部分の全てを処理対象とした後の中間データを検証用データに決定する。
The
ぼかし部77は、中間データ生成部75により生成された検証用データに対して、ぼかし処理を実行する。ぼかし処理は、例えば、所定のフィルターを用いて、検証用データに含まれる複数の画素それぞれにおいて、処理対象となる画素の画素値を、周辺の複数の画素の画素値を用いて補正する処理である。確認部71は、ぼかし部77により処理された後の検証用データを画像処理部53に実行させ、不具合検出部55から基準エラー情報と同じ不具合情報が入力される場合、検証用データを出力部61および表示制御部63に出力し、不具合検出部55から基準エラー情報と同じ不具合情報が入力されない場合、ぼかし部77に再設定指示を出力する。ぼかし部77は、中間データ生成部75により生成された検証用データに対して、より程度の小さいぼかし処理を実行する。例えば、ぼかし部77は、補正量のより小さいフィルターを用いてぼかし処理を実行する。
The
このため、ぼかし部77が出力部61および表示制御部63に出力する検証用データは、画像処理部53が画像処理すると基準不具合が発生するデータである。
Therefore, the verification data output by the blurring
表示制御部63は、検証用データが入力されることに応じて、表示部118に通知画面を表示する。通知画面は、生成部59により生成された検証用データの画像と、出力を許可するユーザーによる操作を受け付けるボタンと、を含む。
The
出力部61は、表示制御部63により通知画面が表示される場合は操作部119が通知画面に含まれる出力を許可する操作を受け付けるボタンを指示する操作を受け付けることに応じて、検証用データを検証サーバー500に送信する。出力部61は、表示制御部63により通知画面が表示される場合は操作部119が通知画面に含まれる出力を許可する操作を受け付けるボタンを指示する操作を受け付けるまで、検証用データを検証サーバー500に送信しない。
When the notification screen is displayed by the
図5は、処理データから検証用データを作成する手順の一例を示す図である。図5(A)は、処理データの分割の一例を示す図である。処理データ400は、縦横それぞれに10等分され、100個の分割部分を含む。図中のハッチングが付された6個の分割部分それぞれは、それに対して画像処理部53で画像処理が実行されると、不具合検出部55によって基準不具合が検出される分割部分を示す。ハッチングが付された6個の分割部分のうち任意の1つを含む中間データが生成される。ここでは、分割部分410を含む中間データが生成される場合を例に説明する。
FIG. 5 is a diagram showing an example of a procedure for creating verification data from processed data. FIG. 5A is a diagram showing an example of division of processed data. The processed
図5(B)は、分割部分と詳細部分の一例を示す図である。図5(B)は、図5(A)の処理データ400中の分割部分410を拡大して示している。分割部分410は、縦横それぞれに10等分され、100個の詳細部分を含む。図中のハッチングが付されていない詳細部分は、それに対して画像処理部53で画像処理が実行されると、不具合検出部55によって基準不具合が検出されない詳細部分を示す。したがって、図中のハッチングが付された複数の詳細部分が、検証用データの一部となる。
FIG. 5B is a diagram showing an example of a divided portion and a detailed portion. FIG. 5 (B) shows an enlarged view of the divided
図6は、第1の実施の形態における画像制御処理の流れの一例を示すフローチャートである。画像制御処理は、MFP100が備えるCPU171が、ROM173、HDD113またはCD−ROM181に記憶された画像制御プログラムを実行することにより、CPU171により実行される処理である。図6を参照して、CPU171は、画像処理の対象となる処理データを取得する(ステップS01)。原稿読取部130が原稿を読み取る場合、原稿読取部130が原稿を読み取って出力する画像データを処理データとして受け付ける。通信I/F部160が、LAN3に接続されたPCからプリントジョブを受信する場合、プリントジョブに含まれるプリントデータを処理データとして受け付ける。通信I/F部160がインターネット5に接続されたWebサーバーからWebデータを受信する場合、Webデータを処理データとして受け付ける。また、HDD113に記憶されたデータをプリントする指示を受け付ける場合、HDD113に記憶されたデータを処理データとして受け付ける。
FIG. 6 is a flowchart showing an example of the flow of the image control process according to the first embodiment. The image control process is a process executed by the
次のステップS02においては、処理データを画像処理する(ステップS02)。そして、画像処理の不具合を検出したか否かを判断する(ステップS03)。画像処理プログラムを実行するタスクが、画像処理プログラムにより予め定められたエラーを検出する場合、不具合を検出する。不具合を検出したならば処理をステップS04に進めるが、そうでなければ処理をステップS12に進める。ステップS12においては、画像形成部140を制御して、画像処理した処理データの画像を用紙に形成し、処理を終了する。
In the next step S02, the processed data is image-processed (step S02). Then, it is determined whether or not a defect in image processing has been detected (step S03). When the task of executing the image processing program detects an error predetermined by the image processing program, a defect is detected. If a defect is detected, the process proceeds to step S04, but if not, the process proceeds to step S12. In step S12, the
ステップS04においては、セキュリティ保護モードか否かを判断する。処理データにセキュリティ保護モードが設定されている場合、セキュリティ保護モードと判断する。セキュリティ保護モードならば処理をステップS05に進めるが、そうでなければ処理をステップS11に進める。ステップS11においては、通信I/F部160を制御して、検証サーバー500に処理データを送信し、処理を終了する。
In step S04, it is determined whether or not the security protection mode is set. If the security protection mode is set for the processed data, it is judged to be the security protection mode. If it is in the security protection mode, the process proceeds to step S05, but if not, the process proceeds to step S11. In step S11, the communication I /
ステップS05においては、ステップS03において検出された不具合を基準不具合に設定する。不具合は、画像処理プログラムを実行するタスクが検出するエラーであるため、そのエラーのエラー識別情報を、基準不具合を示す不具合情報としてRAM175に記憶する。
In step S05, the defect detected in step S03 is set as the reference defect. Since the defect is an error detected by the task that executes the image processing program, the error identification information of the error is stored in the
次のステップS06においては、検証用データ生成処理を実行し、処理をステップS07に進める。検証用データ生成処理の詳細は後述するが、処理データに基づいて生成されるデータであって、画像処理されると基準不具合と同じ不具合が発生する検証用データを生成する処理である。ステップS07においては、表示モードが設定されているか否かを判断する。表示モードは、ユーザーによりMFP100に予め設定される。表示モードが設定されているならば処理をステップS08に進めるが、そうでなければ処理をステップS10に進める。
In the next step S06, the verification data generation process is executed, and the process proceeds to step S07. The details of the verification data generation process will be described later, but it is a process of generating verification data that is generated based on the processed data and in which the same defect as the reference defect occurs when the image is processed. In step S07, it is determined whether or not the display mode is set. The display mode is preset in the
ステップS08においては、通知画面を表示し、処理をステップS09に進める。通知画面は、検証用データの画像と、出力を許可するユーザーによる操作を受け付けるボタンと、を含む。そして、ユーザーによる許可を受け付けたか否かを判断する(ステップS09)。通知画面に含まれる出力を許可するユーザーによる操作を受け付けるボタンを指示する操作を受け付けたならば、ユーザーによる許可を受け付ける。ユーザーによる許可を受け付けたならば処理をステップS10に進めるが、そうでなければ処理を終了する。ステップS10においては、通信I/F部160を制御して、検証用データを検証サーバー500に送信し、処理を終了する。
In step S08, the notification screen is displayed and the process proceeds to step S09. The notification screen includes an image of verification data and a button that accepts an operation by a user who permits output. Then, it is determined whether or not the permission by the user has been accepted (step S09). If the operation of instructing the button to accept the operation by the user who permits the output included in the notification screen is accepted, the permission by the user is accepted. If the permission from the user is accepted, the process proceeds to step S10, but if not, the process ends. In step S10, the communication I /
図7は、検証用データ生成処理の流れの一例を示すフローチャートである。検証用データ生成処理は、図6のステップS06において実行される処理である。検証用データ生成処理が実行される前の段階で、処理データが取得されており、基準不具合が設定されている。図7を参照して、CPU171は、処理データを第1の個数に分割し(ステップS21)、処理をステップS22に進める。ここでは、処理データを、縦横それぞれ10等分し、100個の分割部分に分割する場合を例に説明する。
FIG. 7 is a flowchart showing an example of the flow of the verification data generation process. The verification data generation process is a process executed in step S06 of FIG. The processed data has been acquired and the standard defect has been set before the verification data generation process is executed. With reference to FIG. 7, the
ステップS22においては、100個の分割部分のうちから1つを処理対象に選択する。そして、選択された分割部分を画像処理する。そして、基準不具合を検出したか否かを判断する(ステップS24)。基準不具合を検出したならば処理をステップS25に進めるが、そうでなければ処理をステップS26に進める。ステップS25においては、処理対象の分割部分を中間データに設定し、処理をステップS28に進める。 In step S22, one of the 100 divided portions is selected as the processing target. Then, the selected divided portion is image-processed. Then, it is determined whether or not a reference defect has been detected (step S24). If a reference defect is detected, the process proceeds to step S25, otherwise the process proceeds to step S26. In step S25, the divided portion to be processed is set as intermediate data, and the process proceeds to step S28.
ステップS26においては、100個の分割部分のうちステップS22において処理対象に選択されていない分割部分が存在するか否かを判断する。未選択の分割部分が存在するならば処理をステップS22に戻すが、そうでなければ処理をステップS27に進める。ステップS27においては、分割数を小さな値に変更し、処理をステップS21に戻す。なお、分割数が最小の2となった場合には、分割数を小さな値に変更できないので、処理をステップS28に進める。この場合の中間データは、処理データと同じとなる。 In step S26, it is determined whether or not there is a divided portion that is not selected as the processing target in step S22 out of the 100 divided portions. If there is an unselected partition portion, the process returns to step S22, otherwise the process proceeds to step S27. In step S27, the number of divisions is changed to a small value, and the process returns to step S21. When the number of divisions is 2, which is the minimum, the number of divisions cannot be changed to a small value, so the process proceeds to step S28. The intermediate data in this case is the same as the processed data.
ステップS28においては、中間データを分割する。ここでは、中間データを、縦横それぞれ10等分し、100個の詳細部分に分割する場合を例に説明する。次のステップS29においては、100個の詳細部分のうちから1つを処理対象に選択する。そして、中間データを保管データとして一時記憶する(ステップS30)。次のステップS31においては、中間データから処理対象の詳細部分を削除し、処理をステップS32に進める。ステップS32においては、中間データを画像処理する。そして、基準不具合を検出したか否かを判断する(ステップS33)。基準不具合を検出したならば処理をステップS35に進めるが、そうでなければ処理をステップS34に進める。ステップS34においては、中間データに保管データを設定し、処理をステップS35に進める。これにより、中間データがステップS31において詳細部分が削除される前の状態に復元される。 In step S28, the intermediate data is divided. Here, a case where the intermediate data is divided into 10 equal parts vertically and horizontally and divided into 100 detailed parts will be described as an example. In the next step S29, one of the 100 detailed parts is selected as the processing target. Then, the intermediate data is temporarily stored as storage data (step S30). In the next step S31, the detailed portion of the processing target is deleted from the intermediate data, and the processing proceeds to step S32. In step S32, the intermediate data is image-processed. Then, it is determined whether or not a reference defect has been detected (step S33). If a reference defect is detected, the process proceeds to step S35, otherwise the process proceeds to step S34. In step S34, the stored data is set in the intermediate data, and the process proceeds to step S35. As a result, the intermediate data is restored to the state before the detailed portion is deleted in step S31.
ステップS35においては、100個の詳細部分のうちステップS29において処理対象に選択されていない詳細部分が存在するか否かを判断する。未選択の詳細部分が存在するならば処理をステップS29に戻すが、そうでなければ処理をステップS36に進める。処理がステップS36に進む場合、中間データを分割した100個の詳細部分のうち、画像処理が実行されることにより、基準不具合と同じ不具合が発生する1以上の詳細部分を含む中間データが生成される。 In step S35, it is determined whether or not there is a detail portion that is not selected as the processing target in step S29 among the 100 detail portions. If there is an unselected detail portion, the process returns to step S29, otherwise the process proceeds to step S36. When the process proceeds to step S36, out of the 100 detailed parts obtained by dividing the intermediate data, the image processing is executed to generate intermediate data including one or more detailed parts in which the same defect as the reference defect occurs. NS.
ステップS36においては、中間データを検証用データに設定し、処理をステップS37に進める。ステップS37においては、検証用データに対してぼかし処理を実行し、処理を画像制御処理に戻す。 In step S36, the intermediate data is set as the verification data, and the process proceeds to step S37. In step S37, the blurring process is executed on the verification data, and the process is returned to the image control process.
<変形例>
上述した第1の実施の形態におけるMFP100においては、処理データから基準不具合の発生する1つの分割部分を含む中間データを生成し、検証用データは分割部分から基準不具合の発生しない1以上の詳細部分を中間データから削除したデータとする。変形例におけるMFP100においては、処理データを複数の分割部分に分割し、複数の分割部分のうちから1以上を組合せた中間データであって、基準不具合が発生する中間データを検証用データとする。
<Modification example>
In the
図8は、変形例におけるMFPが備えるCPUが有する機能の一例を示すブロック図である。図4に示した機能と異なる点は、生成部59が生成部59Aに変更された点である。その他の機能は、図4に示した機能と同じなので、ここでは説明を繰り返さない。生成部59Aは、データ受付部51から入力される処理データに基づいて、処理データの少なくとも一部を含み、基準不具合と同じ不具合が発生する検証用データを生成する。生成部59Aは、確認部71Aと、分割部73と、中間データ生成部75Aと、ぼかし部77と、を含む。分割部73およびぼかし部77は、図4に示した機能と同じなので、ここでは説明を繰り返さない。
FIG. 8 is a block diagram showing an example of the function of the CPU included in the MFP in the modified example. The difference from the function shown in FIG. 4 is that the
中間データ生成部75Aは、分割部73によって生成された複数の分割部分の少なくとも1つを含む中間データを生成し、中間データを確認部71Aに出力する。中間データ生成部75Aは、選択部87を含む。選択部87は、分割部73により生成された複数の分割部分から分割部分を1以上選択する。中間データ生成部75Aは、選択された1以上の分割部分を含む中間データを生成する。
The intermediate
確認部71Aは、不具合検出部55が基準不具合を検出して出力する不具合情報を基準エラー情報としてRAM175に記憶する。確認部71Aは、中間データ生成部75Aにより生成される中間データを画像処理部53に実行させ、不具合検出部55から基準エラー情報と同じ不具合情報が入力される場合、その中間データを検証用データに決定する。
The
具体的には、選択部87は、選択数を決定し、複数の分割部分から選択数の分割部分を選択し、選択された選択数の分割部分を含む中間データを生成する。この場合、複数の分割部分のうちから選択数の分割部分の組合せの数だけ中間データが生成される。選択部87は、確認部71Aによって検証用データが決定されるまで、換言すれば、画像処理部53によりその中間データが画像処理されると、不具合検出部55によって基準不具合が検出される中間データが出現するまで、選択数を1から順に増加する。
Specifically, the
例えば、選択部87は、最初に選択数を1とし、複数の分割部分をそれぞれ含む複数の中間データを生成する。この場合、複数の分割部分の数と同じ数の中間データが生成される。確認部71Aは、中間データ生成部75Aにより生成される複数の中間データのいずれかにおいて、画像処理部53に画像処理させると不具合検出部55から基準エラー情報と同じ不具合情報が入力される場合、その中間データを検証用データに決定する。一方、確認部71Aは、中間データ生成部75Aにより生成される複数の中間データのいずれにおいても、画像処理部53に実行させても不具合検出部55から基準エラー情報と同じ不具合情報が入力されない場合、中間データ生成部75Aに再生成指示を出力する。
For example, the
中間データ生成部75Aは、確認部71Aから再生成指示が入力される場合、選択数を1つだけ増加した2とし、複数の分割部分のうちから2つを選択し、選択された2つの分割部分を含む中間データを生成する。この場合、複数の分割部分のうち2つの組合せの数と同じ数の中間データが生成される。このように、選択部87は、確認部71Aによって検証用データが決定されるまで、選択数を増加し、中間データを生成する。
When a regeneration instruction is input from the
図9は、変形例における中間データ生成処理の流れの一例を示すフローチャートである。変形例における検証用データ生成処理は、図6のステップS06において実行される処理である。変形例における検証用データ生成処理が実行される前の段階で、処理データが取得されており、基準不具合が設定されている。図9を参照して、CPU171は、処理データを複数の分割部分に分割し(ステップS41)、処理をステップS42に進める。ここでは、処理データを、縦横それぞれ10等分し、100個の分割部分に分割する場合を例に説明する。
FIG. 9 is a flowchart showing an example of the flow of the intermediate data generation process in the modified example. The verification data generation process in the modified example is the process executed in step S06 of FIG. The processed data has been acquired and the standard defect has been set before the verification data generation process in the modified example is executed. With reference to FIG. 9, the
ステップS42においては、選択数に「1」を設定し、処理をステップS43に進める。選択数は、分割部分を選択する数を示す変数である。ステップS43においては、選択数と同じ数の分割部分の組を決定し、処理をステップS44に進める。選択数が1の場合には、1つの分割部分を含む組を、分割部分の数だけ決定する。ステップS44においては、複数の組のうちから処理対象となる組を選択し、処理をステップS45に進める。ステップS45においては、処理対象に選択された組に含まれる1以上の分割部分を含む中間データを生成し、処理をステップS46に進める。 In step S42, the number of selections is set to "1", and the process proceeds to step S43. The number of selections is a variable indicating the number of selections of the divided portion. In step S43, the same number of sets of divided portions as the selected number is determined, and the process proceeds to step S44. When the number of selections is 1, the set including one divided portion is determined by the number of divided portions. In step S44, a set to be processed is selected from the plurality of sets, and the process proceeds to step S45. In step S45, intermediate data including one or more divided portions included in the set selected as the processing target is generated, and the processing proceeds to step S46.
ステップS46においては、中間データを画像処理し、処理をステップS47に進める。ステップS47においては、基準不具合が検出されたか否かを判断する。基準不具合が検出されたならば処理をステップS48に進めるが、そうでなければ処理をステップS50に進める。ステップS48においては、中間データを検証用データに設定し、処理をステップS49に進める。ステップS49においては、検証用データに対してぼかし処理を実行し、処理を画像制御処理に戻す。 In step S46, the intermediate data is image-processed, and the processing proceeds to step S47. In step S47, it is determined whether or not a reference defect has been detected. If a reference defect is detected, the process proceeds to step S48, otherwise the process proceeds to step S50. In step S48, the intermediate data is set as the verification data, and the process proceeds to step S49. In step S49, the blurring process is executed on the verification data, and the process is returned to the image control process.
一方、ステップS50においては、処理対象に選択されていない組が存在するか否かを判断する。未選択の組が存在するならば処理をステップS44に戻すが、そうでなければ処理をステップS51に進める。ステップS51においては、選択数をインクリメントし、処理をステップS43に戻す。選択数がN(Nは0以上の整数)の場合は、複数の分割部分から選択されたN個を含む組を組合せの数だけを決定する。ステップS43においては、複数の分割部分からN個を選択し、選択されたN個の分割部分を含む組を、分割部分の組合せの数だけ決定する。分割部分の組合せの数は、100個の分割部分からN個を組合せる数である。 On the other hand, in step S50, it is determined whether or not there is a set that has not been selected as the processing target. If there is an unselected pair, the process returns to step S44, otherwise the process proceeds to step S51. In step S51, the number of selections is incremented and the process returns to step S43. When the number of selections is N (N is an integer of 0 or more), only the number of combinations of pairs including N selected from a plurality of divided portions is determined. In step S43, N pieces are selected from the plurality of divided parts, and the number of pairs including the selected N divided parts is determined by the number of combinations of the divided parts. The number of combinations of the divided portions is the number of combinations of N out of 100 divided portions.
以上説明したように、第1の実施の形態におけるMFP100は、情報処理装置として機能し、画像処理部53が画像データを画像処理している間の不具合が検出される場合に、画像データの少なくとも一部を含み、画像処理部53が画像処理すると画像データを画像処理して発生する不具合と同じ基準不具合が発生する検証用データを生成する。このため、不具合を再現可能な検証用データを生成することができる。また、画像データが機密情報を含む場合にその機密情報が含まれない検証用データを生成することができる。
As described above, the
また、MFP100は、画像処理に不具合が検出される場合、画像データを分割した複数の分割部分の少なくとも1つを含む中間データを生成し、画像処理して基準不具合が発生することが確認された中間データを検証用データとして生成する。このため、検証用データを容易に生成することができる。
Further, it was confirmed that when a defect is detected in the image processing, the
また、MFP100は、画像データを第1の個数の分割部分に分割し、第1の個数の分割部分のうちから選択された1つの分割部分のみを含む第1の個数の中間データを生成し、第1の個数の中間データのいずれにおいても基準不具合が発生することが確認されない場合、画像データを第1の個数より小さい第2の個数の分割部分に分割する。このため、画像データを画像処理する場合と同じ不具合が発生する中間データを容易に生成することができる。
Further, the
さらに、MFP100は、基準不具合が発生することが確認された中間データに含まれる分割部分を複数の詳細部分に分割し、複数の詳細部分のうちから選択された1つを中間データから削除し、詳細部分が削除された後の中間データを画像処理する場合に、基準不具合が発生することが確認されない場合、中間データを詳細部分が削除される前の状態に復元し、詳細部分が削除された後の中間データを画像処理する場合に、基準不具合が発生することが確認される場合は、詳細部分が削除された後の中間データを検証用データに決定する。このため、中間データから基準不具合の発生の原因とならない詳細部分を中間データから削除するので、検証用データの情報量をできるだけ小さくすることができる。
Further, the
また、MFP100は、検証用データにぼかし処理を実行するので、検証用データの情報量をできるだけ小さくして、画像データの再現をできるだけ困難にすることができる。
Further, since the
また、MFP100は、出力の許可を示す操作がユーザーにより入力される場合に、検証用データを生成し、出力の許可を示す操作がユーザーにより入力されない場合に検証用データを生成しないので、処理の負荷を低減することができる。
Further, the
また、MFP100は、検証用データを画像データに代えて検証サーバー500に送信するので、外部の検証サーバー500で不具合を再現可能な検証用データを生成することができる。また、画像データが機密情報を含む場合に外部の検証サーバー500に機密情報が漏洩する確率を低くすることができる。
Further, since the
また、MFP100は、検証用データを検証サーバー500に送信する前に、検証用データの画像を表示するので、ユーザーに外部の検証サーバー500に送信されるデータを通知することができる。また、出力の許可を示す操作がユーザーにより入力されるまで検証用データを検証サーバー500に送信しないので、ユーザーは、画像データに含まれる機密が外部に流出しないようにすることができる。
Further, since the
変形例におけるMFP100は、画像データを第1の個数の分割部分に分割し、複数の分割部分のうちから第1の個数の分割部分を選択し、選択された第1の個数の分割部分のみを含む複数の中間データを生成し、複数の中間データのいずれかで基準不具合が発生することが確認される場合には、その中間データを検証用データに決定し、複数の中間データのいずれにおいても画像処理した場合基準不具合が発生することが確認されない場合、複数の分割部分のうちから第1の個数より大きな第2の個数の分割部分を選択し、選択された第2の個数の分割部分のみを含む複数の中間データを生成する。このため、画像データ中で、画像データを画像処理する場合と同じ不具合が発生する中間データを容易に生成することができる。検証用データを外部に送信する場合には、MFP100と内部サーバー200以外に機密が漏洩するのを防止することができる。
The
<第2の実施の形態>
第1の実施の形態においては、MFP100が検証用データを生成する機能を有するが、第2の実施の形態における情報処理システム1は、内部サーバー200が、MFP100に代わって、検証用データを生成する機能を有するようにしたものである。
<Second Embodiment>
In the first embodiment, the
第2の実施の形態における情報処理システム1の全体概要は、図1に示した全体概要と同じである。第2の実施の形態におけるMFP100のハードウェア構成は、図2および図3に示したブロック図と同じである。
The overall outline of the
図10は、本実施の形態における内部サーバーのハードウェア構成の概要の一例を示すブロック図である。図10を参照して、内部サーバー200は、内部サーバー200の全体を制御するための中央演算装置(CPU)201と、CPU201が実行するためのプログラムを記憶するROM202と、CPU201の作業領域として使用されるRAM203と、データを不揮発的に記憶するハードディスクドライブ(HDD)204と、CPU201をネットワーク3に接続する通信部205と、情報を表示する表示部206と、ユーザーの操作の入力を受け付ける操作部207と、外部記憶装置208と、を含む。
FIG. 10 is a block diagram showing an example of an outline of the hardware configuration of the internal server according to the present embodiment. With reference to FIG. 10, the
表示部206は、液晶表示装置(LCD)、有機ELD(Electro−Luminescence Display)等の表示装置である。操作部207は、キーボードなどのハードキーである。また、操作部207は、タッチパネルであってもよい。タッチパネルは、表示部206の上面または下面に表示部206に重畳して設けられる。タッチパネルは、表示部206の表示面中でユーザーにより指示された位置を検出する。
The
通信部205は、CPU201をネットワーク3に接続するためのインターフェースである。通信部205は、TCPまたはUDP等の通信プロトコルで、ネットワークに接続されたMFP100と通信する。なお、通信のためのプロトコルは、特に限定されることはなく、任意のプロトコルを用いることができる。内部サーバー200に、MFP100のIP(Internet Protocol)アドレスを登録しておくことにより、内部サーバー200は、MFP100と通信することができ、データの送受信が可能となる。
The
HDD204は、CPU201が実行するプログラム、またはそのプログラムを実行するために必要なデータを記憶する。CPU201は、HDD204に記録されたプログラムを、RAM203にロードして実行する。
The
外部記憶装置208は、プログラムを記憶したCD−ROM(Compact Disk ROM)209が装着される。CPU201は、外部記憶装置208を介してCD−ROM209にアクセス可能である。CPU201は、外部記憶装置208に装着されたCD−ROM209に記録されたプログラムをRAM203にロードして実行する。なお、CPU201が実行するプログラムを記憶する媒体としては、CD−ROM209に限られず、光ディスク(MO(Magnetic Optical Disc)/MD(Mini Disc)/DVD(Digital Versatile Disc))、ICカード、光カード、マスクROMまたはEPROM(Erasable Programmable ROM)などの半導体メモリであってもよい。
The
また、CPU201が実行するプログラムは、CD−ROM209に記録されたプログラムに限られず、HDD204に記憶されたプログラムをRAM203にロードして実行するようにしてもよい。この場合、ネットワーク3に接続された他のコンピューターが、HDD204に記憶されたプログラムを書き換える、または、新たなプログラムを追加して書き込むようにしてもよい。さらに、内部サーバー200が、ネットワーク3またはインターネットに接続された他のコンピューターからプログラムをダウンロードして、そのプログラムをHDD204に記憶するようにしてもよい。ここでいうプログラムは、CPU201が直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
Further, the program executed by the
第2の実施の形態における内部サーバー200は、MFP100をシミュレートするシミュレータを備えている。
The
図11は、第2の実施の形態における内部サーバーが備えるシミュレータの概要の一例を示す図である。このシミュレータは、CPU201がシミュレートプログラムを実行することにより、CPU201に形成される。図11を参照して、シミュレータは、CPU周辺シミュレータ300と、ハードウェア(HW)シミュレータ320と、を含む。CPU周辺シミュレータ300は、MFP100が備えるCPU171をシミュレートする仮想CPU301と、ROM173およびRAM175をエミュレートする仮想メモリ303と、周辺モデル305と、同期設定モデル307と、割込制御部309と、を含む。仮想CPU301、仮想メモリ303、周辺モデル305および同期設定モデル307は、バス(Bus)311に接続されている。
FIG. 11 is a diagram showing an example of an outline of the simulator provided in the internal server according to the second embodiment. This simulator is formed in the
周辺モデル305は、MFP100が備えるHDD113、操作パネル115、通信I/F部160および外部記憶装置180をそれぞれエミュレートするHDD113A、操作パネル115A、通信I/F部160Aおよび外部記憶装置180Aを含む。
The
同期設定モデル307は、仮想CPU301が、仮想メモリ303および周辺モデル305と同期するための設定をする。割込制御部309は、仮想CPU301が仮想メモリ303および周辺モデル305と同期するための設定時に、仮想CPU301に割り込みを発生させる。
The
HWシミュレータ320は、PCI−ExpressBusモデル321と、画像制御ASICモデル323と、ハードウェア資源モデル325と、を含む。PCI−ExpressBusモデル321は、バス311に接続され、PCI−Express規格に従った接続をエミュレートする。画像制御ASICモデル323は、MFP100が備える画像制御ASIC177をエミュレートする。ハードウェア資源モデル325は、MFP100が備えるハードウェア資源をエミュレートする。具体的には、ハードウェア資源モデル325は、MFP100が備える自動原稿搬送装置120、原稿読取部130、画像形成部140、給紙部150およびファクシミリ部170をそれぞれエミュレートする自動原稿搬送装置120A、原稿読取部130A、画像形成部140A、給紙部150Aおよびファクシミリ部170Aを含む。
The
図12は、第2の実施の形態におけるMFPが備えるCPUが有する機能の一例を示すブロック図である。図12に示す機能は、MFP100が備えるCPU171が、ROM173、HDD113またはCD−ROM181に記憶された装置側画像制御プログラムを実行することにより、CPU171により実現される機能である。装置側画像制御プログラムは、画像制御プログラムの一部である。図12を参照して、図4に示した機能と異なる点は、生成部59が、検証依頼部59Bに変更された点である。その他の機能は、図4に示した機能と同じなので、ここでは説明を繰り返さない。
FIG. 12 is a block diagram showing an example of the functions of the CPU included in the MFP in the second embodiment. The function shown in FIG. 12 is a function realized by the
検証依頼部59Bは、データ受付部51から処理データが入力される。検証依頼部59Bは、処理データ送信部91と、装置情報送信部93と、検証用データ受信部95と、を含む。処理データ送信部91は、不具合検出部55から不具合情報が入力されることに応じて、通信I/F部160を制御して、処理データと不具合情報とを内部サーバー200に送信する。
The
装置情報送信部93は、不具合検出部55から不具合情報が入力されることに応じて、装置情報を生成し、生成された装置情報を、通信I/F部160を制御して内部サーバー200に送信する。装置情報は、MFP100に搭載されているCPU171に関する情報、MFP100にインストールされたハードウェア資源に関するハード情報と、MFP100にインストールされたソフトウェア資源に関するソフト情報と、を含む。CPU171に関する情報は、CPU171の機種名を含む。ハード情報は、ハードウェア資源を識別するためのハード識別情報と、ハードウェア資源を制御するために設定されているハードパラメータとを含む。ハード情報は、ハードウェア資源が複数の場合には、複数のハードウェア資源ごとに、ハード識別情報とハードパラメータとを含む。ソフト情報は、MFP100にインストールされているプログラムのプログラム名と、そのプログラムを実行するために設定されているソフトパラメータと、を含む。
The device
処理データ送信部91が内部サーバー200に処理データと不具合情報とを送信した後、内部サーバー200が検証用データを返信する場合がある。検証用データ受信部95は、通信I/F部160が内部サーバー200から検証用データを受信する場合、検証用データを取得し、出力部61および表示制御部63に出力する。
After the processing
図13は、第2の実施の形態における内部サーバーが備えるCPUが有する機能の一例を示すブロック図である。図13に示す機能は、内部サーバー200が備えるCPU201が、ROM202、HDD204またはCD−ROM209に記憶されたサーバー側画像制御プログラムを実行することにより、CPU201により実現される機能である。サーバー側画像制御プログラムは、画像制御プログラムの一部である。
FIG. 13 is a block diagram showing an example of a function of the CPU included in the internal server according to the second embodiment. The function shown in FIG. 13 is a function realized by the
図13を参照して、内部サーバー200が備えるCPU201は、装置情報取得部251と、処理データ受信部253と、シミュレート部255と、仮想不具合検出部257と、サーバー側生成部259と、検証用データ送信部261と、を含む。
With reference to FIG. 13, the
装置情報取得部251は、MFP100から装置情報を取得する。上述したように、MFP100は、処理データの画像処理で不具合が検出される場合に、装置情報を送信する。装置情報取得部251は、通信部205がMFP100から装置情報を受信すると、通信部205が受信した装置情報を取得する。装置情報取得部251は、装置情報を取得する場合、装置情報をシミュレート部255に出力する。
The device
処理データ受信部253は、MFP100から処理データと不具合情報とを取得する。MFP100は、装置情報とともに処理データと不具合情報を送信するので、通信部205がMFP100から処理データと不具合情報を受信すると、通信部205が受信した処理データと不具合情報とを取得する。処理データ受信部253は、処理データと不具合情報とを取得する場合、処理データと不具合情報とをサーバー側生成部259に出力する。
The processing
シミュレート部255は、装置情報取得部251から入力される装置情報に基づいてMFP100をシミュレートし、処理データ受信部253から入力される処理データを画像処理する。まず、シミュレート部255は、装置情報に基づいて、MFP100に装着されたハードウェア資源を設定し、MFP100のCPU171が実行するソフトウェア資源を仮想CPU301に実行させ、ハードパラメータを設定する。
The simulating
MFP100は、ハードウェア資源として、画像制御ASIC177、自動原稿搬送装置120、原稿読取部130、画像形成部140、給紙部150、通信I/F部160、ファクシミリ部170、外部記憶装置180、HDD113および操作パネル115を含む。このため、装置情報に含まれるハード情報は、画像制御ASIC177、自動原稿搬送装置120、原稿読取部130、画像形成部140、給紙部150、通信I/F部160、ファクシミリ部170、外部記憶装置180、HDD113および操作パネル115をハードウェア資源として定める。シミュレート部255は、装置情報に含まれるハード情報で定められた画像制御ASIC177、自動原稿搬送装置120、原稿読取部130、画像形成部140、給紙部150、通信I/F部160、ファクシミリ部170、外部記憶装置180、HDD113および操作パネル115それぞれをエミュレートするエミュレータを設定するとともに、ハード情報に含まれるハードパラメータを設定する。さらに、シミュレート部255は、エミュレートするハードウェア資源との同期を設定する。例えば、図11に示したCPU周辺シミュレータ300の同期設定モデル307に、仮想CPU301が、ハードウェア資源のエミュレータと同期するように仮想CPU301のレジスタ値を設定させるとともに、仮想メモリ303のメモリマップを書き換える。
As hardware resources, the
また、シミュレート部255は、装置情報に含まれるソフト情報で定められたソフトウェア資源を仮想CPUが実行する状態に設定し、装置情報に含まれる設定値を設定する。具体的には、シミュレート部255は、装置情報に含まれるソフト情報で定められたソフトウェア資源をインストールし、装置情報に含まれる設定値を設定する。これにより、シミュレート部255において、MFP100をシミュレートした仮想装置が完成する。なお、MFP100のRAM175に記憶されたデータをスナップショットとして取得し、仮想メモリ303に記憶するようにしてもよい。
Further, the
仮想不具合検出部257は、シミュレート部255が画像処理を実行中に発生する不具合を検出する。シミュレート部255は、仮想CPU301が画像処理プログラムを実行する画像処理タスクおよび画像制御ASIC177をエミュレートするエミュレータである。仮想不具合検出部257は、画像処理タスクが、画像処理プログラムにより予め定められたエラーを検出する場合に、不具合を検出する。画像処理プログラムにより予め定められたエラーは、画像処理タスクが画像処理を開始してから予め定められた時間が経過するタイムアウトエラーを含む。予め定められた時間は、例えば、画像処理の対象となるデータのデータ量に比例する時間としてもよい。仮想不具合検出部257は、不具合を検出する場合、検出された不具合を特定するための不具合情報をサーバー側生成部259に出力する。不具合情報は、画像処理プログラムにより予め定められたエラーを識別するためのエラー識別情報を含む。
The virtual
サーバー側生成部259は、処理データ受信部253から入力される処理データに基づいて、画像処理タスクにより画像処理されると仮想不具合検出部257により検出された不具合と同じ不具合が発生する検証用データを生成する。サーバー側生成部259は、確認部71と、分割部73と、中間データ生成部75と、ぼかし部77と、を含む。確認部71と、分割部73と、中間データ生成部75と、ぼかし部77は、図4に示した第1の実施の形態におけるMFP100が備えるCPU171が有する機能として示した確認部71と、分割部73と、中間データ生成部75と、ぼかし部77とそれぞれ同じである。したがって、ここでは説明を繰り返さない。
The server-
検証用データ送信部261は、確認部71から検証用データが入力されることに応じて、通信部205を制御して、検証用データをMFP100に送信する。
The verification
図14は、第2の実施の形態における画像制御処理の流れの一例を示すフローチャートである。図14を参照して、図6に示した第1の実施の形態における画像制御処理と異なる点は、ステップS06に代えて、ステップS06A〜ステップS06Cが実行される点である。その他の処理は、図6に示した処理と同じなので、ここでは説明を繰り返さない。 FIG. 14 is a flowchart showing an example of the flow of the image control process according to the second embodiment. With reference to FIG. 14, the difference from the image control process in the first embodiment shown in FIG. 6 is that steps S06A to S06C are executed instead of step S06. Since the other processes are the same as the processes shown in FIG. 6, the description will not be repeated here.
CPU171は、ステップS06Aにおいて、通信I/F部160を制御して、ステップS01において取得された処理データと、ステップS05において設定された基準不具合を特定するための基準不具合情報と、を内部サーバー200に送信する。次のステップS06Bにおいては、通信I/F部160を制御して、装置情報を内部サーバー200に送信する。次のステップS06Cにおいては、通信I/F部160を制御して、内部サーバー200から検証用データを受信するまで待機状態となり、検証用データを受信したならば処理をステップS07に進める。
In step S06A, the
図15は、サーバー側検証用データ生成処理の流れの一例を示すフローチャートである。サーバー側検証用データ生成処理は、内部サーバー200が備えるCPU201が、サーバー側検証用データ生成プログラムを実行することにより、CPU201により実行される処理である。サーバー側検証用データ生成プログラムは、画像制御プログラムの一部である。図15を参照して、内部サーバー200が備えるCPU201は、通信部205を制御して、MFP100から処理データと不具合情報とを受信したか否かを判断する(ステップS201)。処理データと不具合情報とを受信するまで待機状態となり(ステップS201でNO)、処理データと不具合情報とを受信したならば(ステップS201でYES)、処理をステップS202に進める。
FIG. 15 is a flowchart showing an example of the flow of the server-side verification data generation process. The server-side verification data generation process is a process executed by the
ステップS202においては、ステップS201において受信された不具合情報を基準不具合情報に設定し、処理をステップS203に進める。ステップS203においては、通信部205を制御して、MFP100から装置情報を受信する。そして、図7に示した検証用データ生成処理を実行し(ステップS204)、処理をステップS205に進める。ステップS205においては、通信部205を制御して、MFP100に検証用データを送信し、処理を終了する。
In step S202, the defect information received in step S201 is set as the reference defect information, and the process proceeds to step S203. In step S203, the
なお、第2の実施の形態において、内部サーバー200がMFP100の全体をシミュレートするようにしたが、MFP100において画像処理を担当するCPU171および画像制御ASICをシミュレートするようにしてもよい。具体的には、図11において、周辺モデル305は、不要であり、HWシミュレータ320において、ハードウェア資源モデル325は不要である。
In the second embodiment, the
以上説明したように、第2の実施の形態における内部サーバー200は、情報処理装置として機能し、MFP100が画像データを画像処理している間の不具合が検出される場合に、MFP100をシミュレートして、画像データの少なくとも一部を含み、画像処理部53が画像処理すると画像データを画像処理して発生する不具合と同じ基準不具合が発生する検証用データを生成する。このため、不具合を再現可能な検証用データを生成することができる。また、画像データが機密情報を含む場合にその機密情報が含まれない検証用データを生成することができる。
As described above, the
なお、上述した第1および第2の実施の形態においては、情報処理装置の一例としてMFP100、または内部サーバー200を例に示したが、図6および図7、または図6および図9に示した画像制御処理を、MFP100に実行させる画像制御方法、また、その画像制御方法をMFP100が備えるCPU171に実行させる画像制御プログラムとして発明を捉えること、および、図15および図7、または図15および図9に示したサーバー側検証用データ生成処理を内部サーバー200に実行させる画像制御方法、また、その画像制御方法を内部サーバー200が備えるCPU201に実行させる画像制御プログラムとして発明を捉えること、ができるのは言うまでもない。
In the first and second embodiments described above, the
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 It should be considered that the embodiments disclosed this time are exemplary in all respects and not restrictive. The scope of the present invention is shown by the scope of claims rather than the above description, and it is intended to include all modifications within the meaning and scope equivalent to the scope of claims.
<付記>
(1) 前記不具合検出手段は、前記画像処理が前記画像データを符号化する処理の場合、画像データを符号化した符号データを復号した復号データと、前記画像データとが一致しない不具合を検出する、請求項1〜10のいずれかに記載の情報処理装置。
(2) 前記不具合検出手段は、前記画像処理が前記画像データの処理速度が所定の値より小さい不具合を検出する、請求項1〜10および(1)のいずれかに記載の情報処理装置。
(3) 前記不具合検出手段は、前記画像データを前記画像処理した後のデータのデータ量が予め定められた上限値を超える不具合を検出する、請求項1〜10、(1)および(2)のいずれかに記載の情報処理装置。
<Additional notes>
(1) When the image processing is a process of encoding the image data, the defect detecting means detects a defect in which the decoded data obtained by decoding the code data in which the image data is encoded does not match the image data. , The information processing apparatus according to any one of
(2) The information processing apparatus according to any one of
(3)
1 情報処理システム、3 ネットワーク、5 インターネット、100 MFP、200 内部サーバー、500 検証サーバー、111 メイン基板、115 操作パネル、115A 操作パネル、118 表示部、119 操作部、120,120A 自動原稿搬送装置、130,130A 原稿読取部、140,140A 画像形成部、150,150A 給紙部、160,160A 通信I/F部、170,170A ファクシミリ部、171 CPU、173 ROM、175 RAM、177 画像制御ASIC、179 バス、180,180A 外部記憶装置、201 CPU、202 ROM、203 RAM、204 HDD、205 通信部、206 表示部、207 操作部、209 外部記憶装置、300 CPU周辺シミュレータ、301 仮想CPU、303 仮想メモリ、305 周辺モデル、307 同期設定モデル、309 割込制御部、311 バス、320 HWシミュレータ、321 PCI−ExpressBusモデル、323 画像制御ASICモデル、325 ハードウェア資源モデル、51 データ受付部、53 画像処理部、55 不具合検出部、57 不具合検出部、59,59A 生成部、59B 検証依頼部、61 出力部、63 表示制御部、71,71A 確認部、73 分割部、75,75A 中間データ生成部、77 ぼかし部、81 部分分割部、83 削除部、85 復元部、87 選択部、91 処理データ送信部、93 装置情報送信部、95 検証用データ受信部、251 装置情報取得部、253 処理データ受信部、255 シミュレート部、257 仮想不具合検出部、259 サーバー側生成部、261 検証用データ送信部。 1 Information processing system, 3 networks, 5 Internet, 100 MFP, 200 internal server, 500 verification server, 111 main board, 115 operation panel, 115A operation panel, 118 display unit, 119 operation unit, 120, 120A automatic document transfer device, 130, 130A document reading unit, 140, 140A image forming unit, 150, 150A paper feeding unit, 160, 160A communication I / F unit, 170, 170A facsimile unit, 171 CPU, 173 ROM, 175 RAM, 177 image control ASIC, 179 bus, 180, 180A external storage device, 201 CPU, 202 ROM, 203 RAM, 204 HDD, 205 communication unit, 206 display unit, 207 operation unit, 209 external storage device, 300 CPU peripheral simulator, 301 virtual CPU, 303 virtual Memory, 305 peripheral model, 307 synchronous setting model, 309 interrupt control unit, 311 bus, 320 HW simulator, 321 PCI-ExpressBus model, 323 image control ASIC model, 325 hardware resource model, 51 data reception unit, 53 image processing Unit, 55 Defect detection unit, 57 Defect detection unit, 59, 59A generation unit, 59B verification request unit, 61 output unit, 63 display control unit, 71, 71A confirmation unit, 73 division unit, 75, 75A intermediate data generation unit, 77 Blur part, 81 Partial division part, 83 Delete part, 85 Restoration part, 87 Selection part, 91 Processing data transmission part, 93 Device information transmission section, 95 Verification data reception section, 251 Device information acquisition section, 253 Processing data reception Unit, 255 Simulation unit, 257 Virtual defect detection unit, 259 Server side generation unit, 261 Verification data transmission unit.
Claims (15)
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成手段と、を備え、
前記生成手段は、前記画像データを分割する分割手段と、
前記分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成手段と、
前記中間データを前記画像処理手段に実行させ、前記基準不具合が発生することを確認する確認手段と、を含む情報処理装置。 Defect detection means that detects the defect of the image processing by the image processing means that processes the image data as a reference defect, and
A generation means that includes at least a part of the image data when a defect in the image processing is detected and generates verification data in which the reference defect occurs when the image is processed by the image processing means. ,
The generation means includes a division means for dividing the image data and a division means.
An intermediate data generation means for generating intermediate data including at least one of the plurality of divided portions,
The intermediate data is the execution in the image processing unit, the reference and confirmation means for confirming that a trouble occurs, the including information processing apparatus.
前記中間データ生成手段は、前記第1の個数の分割部分のうちから選択された1つの分割部分のみを含む第1の個数の中間データを生成し、
前記分割手段は、前記第1の個数の中間データのいずれにおいても前記基準不具合が発生することが前記確認手段により確認されない場合、前記画像データを前記第1の個数より小さい第2の個数の分割部分に分割する、請求項1に記載の情報処理装置。 The dividing means divides the image data into a first number of divided portions, and then divides the image data into a first number of divided portions.
The intermediate data generation means generates a first number of intermediate data including only one divided portion selected from the first number of divided portions.
When the confirmation means does not confirm that the reference defect occurs in any of the first number of intermediate data, the dividing means divides the image data into a second number smaller than the first number. It is divided into parts, the information processing apparatus according to claim 1.
前記複数の詳細部分のうちから選択された詳細部分を前記中間データから削除する削除手段と、
前記選択された詳細部分が削除された後の前記中間データを前記画像処理手段に実行させ、前記基準不具合が発生することが前記確認手段により確認されない場合、前記中間データを前記選択された詳細部分が削除される前の状態に復元する復元手段と、を含む請求項1または2に記載の情報処理装置。 The generation means includes a partial division means for dividing the division portion included in the intermediate data for which the reference defect has been confirmed by the confirmation means into a plurality of detailed parts.
A deletion means for deleting a detail portion selected from the plurality of detail portions from the intermediate data, and
When the image processing means executes the intermediate data after the selected detailed portion is deleted and the confirmation means does not confirm that the reference defect occurs, the intermediate data is transferred to the selected detailed portion. The information processing apparatus according to claim 1 or 2 , further comprising a restoration means for restoring the state before the deletion.
前記選択手段は、前記複数の中間データのいずれにおいても前記画像処理手段に実行した場合に前記基準不具合が発生することが前記確認手段により確認されない場合、前記複数の分割部分のうちから第1の個数より大きな第2の個数の分割部分を選択する、請求項1に記載の情報処理装置。 The intermediate data generation means selects a first number of divided portions from the plurality of divided portions, and selects means for generating a plurality of intermediate data including only the selected first number of divided portions. Including
When the confirmation means does not confirm that the reference defect occurs when the selection means is executed by the image processing means in any of the plurality of intermediate data, the first of the plurality of divided portions. selecting a split part of a larger second number than the number, the information processing apparatus according to claim 1.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成手段と、
前記検証用データにぼかし処理を実行するぼかし手段と、を備えた情報処理装置。 Defect detection means that detects the defect of the image processing by the image processing means that processes the image data as a reference defect, and
A generation means that includes at least a part of the image data when a defect in the image processing is detected and generates verification data that causes the reference defect when the image processing is performed by the image processing means.
An information processing device including a blurring means for executing a blurring process on the verification data.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成手段と、
前記画像処理手段を備えた画像処理装置から前記画像データを取得する画像データ取得手段と、
前記画像処理装置をシミュレートするシミュレート手段と、を備えた情報処理装置。 Defect detection means that detects the defect of the image processing by the image processing means that processes the image data as a reference defect, and
A generation means that includes at least a part of the image data when a defect in the image processing is detected and generates verification data that causes the reference defect when the image processing is performed by the image processing means.
An image data acquisition means for acquiring the image data from an image processing apparatus provided with the image processing means, and an image data acquisition means.
An information processing device including a simulation means for simulating the image processing device.
前記出力手段は、前記検証用データの画像が表示された後に、ユーザーにより入力される出力の許可を示す操作を受け付けるまで、前記検証用データを外部に出力しない、請求項8に記載の情報処理装置。 A display control means for displaying an image of the verification data is further provided before the output means outputs the verification data to the outside.
The information processing according to claim 8, wherein the output means does not output the verification data to the outside until an operation indicating permission for output input by the user is received after the image of the verification data is displayed. Device.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、を情報処理装置に実行させ、
前記生成ステップは、前記画像データを分割する分割ステップと、
前記分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成ステップと、
前記中間データを前記画像処理手段に実行させ、前記基準不具合が発生することを確認する確認ステップと、を含む、画像制御方法。 A defect detection step for detecting a defect in the image processing by an image processing means that processes image data as a reference defect, and a defect detection step.
Information on a generation step that includes at least a part of the image data when a defect in the image processing is detected and generates verification data in which the reference defect occurs when the image is processed by the image processing means. is performed to the processing unit,
The generation step includes a division step for dividing the image data and a division step.
An intermediate data generation step that generates intermediate data including at least one of the plurality of divided portions,
An image control method including a confirmation step of causing the image processing means to execute the intermediate data and confirming that the reference defect occurs.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、A generation step of generating verification data that includes at least a part of the image data when a defect in the image processing is detected and causes the reference defect when the image is processed by the image processing means.
前記検証用データにぼかし処理を実行するぼかしステップと、を情報処理装置に実行させる画像制御方法。An image control method for causing an information processing apparatus to execute a blur step for executing a blur process on the verification data.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、A generation step of generating verification data that includes at least a part of the image data when a defect in the image processing is detected and causes the reference defect when the image is processed by the image processing means.
前記画像処理手段を備えた画像処理装置から前記画像データを取得する画像データ取得ステップと、An image data acquisition step of acquiring the image data from an image processing apparatus provided with the image processing means, and an image data acquisition step.
前記画像処理装置をシミュレートするシミュレートステップと、を情報処理装置に実行させる画像制御方法。An image control method for causing an information processing device to execute a simulation step for simulating the image processing device.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、をコンピューターに実行させ、
前記生成ステップは、前記画像データを分割する分割ステップと、
前記分割された複数の分割部分の少なくとも1つを含む中間データを生成する中間データ生成ステップと、
前記中間データを前記画像処理手段に実行させ、前記基準不具合が発生することを確認する確認ステップと、を含む画像制御プログラム。 A defect detection step for detecting a defect in the image processing by an image processing means that processes image data as a reference defect, and a defect detection step.
A computer that includes at least a part of the image data when a defect in the image processing is detected, and generates verification data in which the reference defect occurs when the image is processed by the image processing means. to run in,
The generation step includes a division step for dividing the image data and a division step.
An intermediate data generation step that generates intermediate data including at least one of the plurality of divided portions,
An image control program including a confirmation step of causing the image processing means to execute the intermediate data and confirming that the reference defect occurs.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、A generation step of generating verification data that includes at least a part of the image data when a defect in the image processing is detected and causes the reference defect when the image is processed by the image processing means.
前記検証用データにぼかし処理を実行するぼかしステップと、をコンピューターに実行させる画像制御プログラム。An image control program that causes a computer to execute a blur step that executes a blur process on the verification data.
前記画像処理の不具合が検出される場合に、前記画像データの少なくとも一部を含み、前記画像処理手段により画像処理されると前記基準不具合が発生する検証用データを生成する生成ステップと、A generation step of generating verification data that includes at least a part of the image data when a defect in the image processing is detected and causes the reference defect when the image is processed by the image processing means.
前記画像処理手段を備えた画像処理装置から前記画像データを取得する画像データ取得ステップと、An image data acquisition step of acquiring the image data from an image processing apparatus provided with the image processing means, and an image data acquisition step.
前記画像処理装置をシミュレートするシミュレートステップと、をコンピューターに実行させる画像制御プログラム。An image control program that causes a computer to execute a simulation step that simulates the image processing device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017194445A JP6950431B2 (en) | 2017-10-04 | 2017-10-04 | Information processing equipment, image control method and image control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017194445A JP6950431B2 (en) | 2017-10-04 | 2017-10-04 | Information processing equipment, image control method and image control program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019064227A JP2019064227A (en) | 2019-04-25 |
JP6950431B2 true JP6950431B2 (en) | 2021-10-13 |
Family
ID=66337213
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017194445A Active JP6950431B2 (en) | 2017-10-04 | 2017-10-04 | Information processing equipment, image control method and image control program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6950431B2 (en) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006335046A (en) * | 2005-06-06 | 2006-12-14 | Sharp Corp | Printer and data processor |
JP2007334539A (en) * | 2006-06-14 | 2007-12-27 | Fuji Xerox Co Ltd | Image processor, image processing system, image processing method, and program |
JP2008117255A (en) * | 2006-11-07 | 2008-05-22 | Fuji Xerox Co Ltd | Image processing failure reproduction method, image processor and program |
JP2010269498A (en) * | 2009-05-20 | 2010-12-02 | Fuji Xerox Co Ltd | Image output device and program |
JP2012051296A (en) * | 2010-09-02 | 2012-03-15 | Ricoh Co Ltd | Image forming apparatus |
JP2012186603A (en) * | 2011-03-04 | 2012-09-27 | Ricoh Co Ltd | Image processing apparatus, image processing method, and program |
-
2017
- 2017-10-04 JP JP2017194445A patent/JP6950431B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019064227A (en) | 2019-04-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20080209143A1 (en) | Digital multi-function peripheral and control method for the same | |
JP4834970B2 (en) | Information processing apparatus and information processing system using the same | |
JP5893294B2 (en) | Image processing apparatus, control method therefor, and program | |
JP2007316952A (en) | Information processor and data management method for the processor | |
JP6950431B2 (en) | Information processing equipment, image control method and image control program | |
CN102025873B (en) | The functional simulation method of information processor and image processing apparatus | |
JP7081120B2 (en) | Information processing equipment, image control method and image control program | |
JP2006293833A (en) | Image processing apparatus, image processing method, and program | |
JP4628130B2 (en) | Image processing apparatus and method for controlling display / non-display of image thumbnails, and image processing program | |
CN104601857A (en) | DISPLAY APPARATUS and display method | |
JP7087755B2 (en) | Data transmission system and data transmission device | |
JP7027827B2 (en) | Server, job management method and job management program | |
JP6996216B2 (en) | Simulation device, information processing device, device setting method and device setting program | |
US8634093B2 (en) | Image processing apparatus capable of recording user information into external recording medium, and control method and recording medium therefor | |
JP6953994B2 (en) | Simulation device, image forming device, device setting method and device setting program | |
JP6573162B2 (en) | Image reading apparatus, image forming apparatus, and program | |
JP7098899B2 (en) | Virtual Execution Device, Virtual Execution Method and Virtual Execution Program | |
JP2020170984A (en) | Information processing device, image processing device, and program | |
JP6958264B2 (en) | Server, data generation method for reproduction and data generation program for reproduction | |
JP6972882B2 (en) | Simulation device, device setting method and device setting program | |
JP2019102980A (en) | Server, data generation method for reproduction, and data generation program for reproduction | |
JP2012096405A (en) | Image processing system | |
JP4499074B2 (en) | Dynamic document creation system | |
JP2008182472A (en) | Image forming apparatus, reprinting method, and reprint program | |
US20110242608A1 (en) | Image forming apparatus and storage control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200819 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210629 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210812 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210824 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210906 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6950431 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |