JP2013120951A - Image processor - Google Patents

Image processor Download PDF

Info

Publication number
JP2013120951A
JP2013120951A JP2011266432A JP2011266432A JP2013120951A JP 2013120951 A JP2013120951 A JP 2013120951A JP 2011266432 A JP2011266432 A JP 2011266432A JP 2011266432 A JP2011266432 A JP 2011266432A JP 2013120951 A JP2013120951 A JP 2013120951A
Authority
JP
Japan
Prior art keywords
image
resolution
signal value
pattern
low
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011266432A
Other languages
Japanese (ja)
Inventor
Koya Shimamura
航也 島村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2011266432A priority Critical patent/JP2013120951A/en
Publication of JP2013120951A publication Critical patent/JP2013120951A/en
Pending legal-status Critical Current

Links

Landscapes

  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

PROBLEM TO BE SOLVED: To generate pattern data in consideration of the MTF characteristic of an image input apparatus, the pattern data being used to perform resolution conversion from a low resolution image by matching the pattern data from within a data base and replacing it.SOLUTION: A high resolution image is acquired and downsampled 102 to generate a low resolution image. From the same coordinates of an inputted high resolution image 103 and a generated low resolution image 104, a signal value gradient pattern is acquired. Signal values acquired from both of the images are associated 105 and held in a database 106.

Description

本発明は画像処理装置及び画像処理方法に関するものであり、入力される画像の解像度を低解像度から高解像度に解像度変換し出力することを可能とする画像処理装置及び画像処理方法に用いる信号値置換パターンデータの生成に関するものである。   The present invention relates to an image processing apparatus and an image processing method, and relates to an image processing apparatus and an image processing method for converting an input image resolution from a low resolution to a high resolution and outputting the same. It relates to generation of pattern data.

スキャナ等の画像読み取り装置により取得した低解像度の画像を高解像度で印刷する場合には、画像の解像度を低解像度から高解像度に解像度変換する必要がある。また、ネットワークを介して画像を転送する際にネットワーク負荷を低減する為に低解像度で転送し高解像度にして表示および印刷する場合には、画像の解像度を低解像度から高解像度に解像度変換を行う必要がある。   When printing a low resolution image acquired by an image reading device such as a scanner at a high resolution, it is necessary to convert the resolution of the image from a low resolution to a high resolution. In addition, when transferring images over a network, the resolution of the image is converted from a low resolution to a high resolution when transferring and displaying at a high resolution to reduce the network load. There is a need.

従来、入力される低解像度の画像を高解像度に解像度変換する方法として多くの方法が提案されている。多階調の画像に対して解像度変換を行う場合に多く用いられる内挿法として、内挿を行いたい内挿点から最も近い格子点の信号値を内挿点の信号値としてそのまま決定する最近隣内挿法がある。また、内挿点の周囲2×2画素(4画素)の格子点の信号値を元に線形式により内挿点の信号値を決定する共一次内挿法(Bi−Linear法)がある。さらに、内挿点の周囲4×4画素(16画素)から三次式により内挿点の信号値を決定する三次畳み込み内挿法(Bi−Cubic法)がある。   Conventionally, many methods have been proposed as a method for converting the resolution of an input low resolution image to a high resolution. As an interpolation method often used for resolution conversion of multi-gradation images, the signal value of the grid point closest to the interpolation point to be interpolated is determined as it is as the signal value of the interpolation point. There is a neighborhood interpolation method. In addition, there is a bilinear interpolation method (Bi-Linear method) in which the signal value of the interpolation point is determined in a linear format based on the signal values of 2 × 2 pixels (4 pixels) around the interpolation point. Further, there is a cubic convolution interpolation method (Bi-Cubic method) that determines a signal value of an interpolation point from 4 × 4 pixels (16 pixels) around the interpolation point by a cubic equation.

また、低解像度の画像内から特定の形状のパターンを取得し、データベース内に事前に取得した形状の信号値に対応する高解像度画像のパターンを準備し、そのデータベース内からパターンマッチングを行い置換により補間する手法がある。   In addition, a pattern of a specific shape is acquired from the low-resolution image, a pattern of a high-resolution image corresponding to the signal value of the shape acquired in advance is prepared in the database, pattern matching is performed from the database, and replacement is performed. There is a method of interpolation.

しかし、上記の従来方法を用いて解像度変換を行った場合に次に示す課題がある。最近隣内挿法の場合はアルゴリズムが簡単で高速に処理を行うことは可能であるが、拡大比率が高くなるにつれエッジ部においてモザイク状の模様や、斜線部においてはジャギー等の画質劣化が見られる。また、内挿点を複数個の周辺画素の信号値を元に決定する共一次内挿法や三次畳み込み内挿法は、最近隣内挿法に比べジャギー等の画質劣化は低減されるが、複数点の信号値が平均化されることで、画像が平滑化されてしまう。よって、画像のエッジ部や文字などのシャープな画質が求められる部分においてはなまりが目立ってしまう。   However, when resolution conversion is performed using the above-described conventional method, there are the following problems. In the nearest neighbor interpolation method, the algorithm is simple and high-speed processing is possible, but as the enlargement ratio increases, the mosaic pattern at the edge and the image quality degradation such as jaggy at the shaded area are observed. It is done. In addition, image quality degradation such as jaggy is reduced in the bilinear interpolation method and the cubic convolution interpolation method in which the interpolation point is determined based on the signal values of a plurality of surrounding pixels, compared to the nearest neighbor interpolation method. By averaging the signal values at a plurality of points, the image is smoothed. Therefore, rounding becomes conspicuous in a portion where sharp image quality is required, such as an edge portion of an image or characters.

特許文献1では、輪郭部に対してパターンマッチングを用いてスムージングする手法が開示されている。パターンマッチングよる手法の場合にはジャギーや平滑化等の問題に対しては使用するパターン作成もMTF(Modulation Transfer Function) 特性を加味するなどの工夫により低減は可能である。   Patent Document 1 discloses a method of performing smoothing on a contour portion using pattern matching. In the case of the method using pattern matching, it is possible to reduce the generation of a pattern to be used for problems such as jaggy and smoothing by taking into account the MTF (Modulation Transfer Function) characteristics.

特開平6−227048号公報JP-A-6-227048

しかしながら、特許文献1の手法の場合、パターンマッチングに使用するパターンを取得する際に画像読み取り装置のMTF特性を加味した作成を行っておらず、解像度変換の際に画像入力装置のパターンの生成手法として最適とは言えない。   However, in the case of the technique disclosed in Patent Document 1, creation is not performed in consideration of the MTF characteristics of the image reading apparatus when a pattern used for pattern matching is acquired, and a pattern generation technique for the image input apparatus is used for resolution conversion. Is not optimal.

本発明は、データベース内からマッチングを行い置換することで低解像度画像から解像度変換を行う際に使用するパターンデータの生成において、画像入力装置のMTF特性を加味した生成を行う画像処理装置及び画像処理方法を提供することを目的とする。   The present invention relates to an image processing apparatus and image processing that perform generation taking into account the MTF characteristics of an image input device in generation of pattern data used when performing resolution conversion from a low-resolution image by performing matching and replacement from within a database. It aims to provide a method.

本発明は、上述した課題を解決することを目的としてなされたものである。本発明に係る画像処理装置は、高解像度画像を入力する画像取得手段(101)と、高解像度画像を低解像度化にした低解像度画像を生成する補間手段(102)と、前記低解像度画像内から複数の信号値パターンを取得する取得手段(103)と、前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内の対応する同座標から複数の信号値パターンを取得する取得手段(104)と、前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内から取得した信号値パターンを対応付けると処理手段(105)と、対応付けを行った信号値データを記憶する記憶手段(106)を備えたことを特徴とする画像処理装置。   The present invention has been made for the purpose of solving the above-described problems. An image processing apparatus according to the present invention includes an image acquisition unit (101) for inputting a high resolution image, an interpolation unit (102) for generating a low resolution image obtained by reducing the resolution of the high resolution image, Acquisition means (103) for acquiring a plurality of signal value patterns from, a signal value pattern acquired from within the low resolution image, and an acquisition means for acquiring a plurality of signal value patterns from the corresponding coordinates in the high resolution image (104), a signal value pattern acquired from within the low resolution image and a signal value pattern acquired from within the high resolution image are associated with each other, and processing means (105) is stored with the associated signal value data. An image processing apparatus comprising storage means (106).

本発明によれば、低解像度画像を高解像度画像へ解像度変換する際に使用するパターン生成の際に信号値(濃度または輝度)勾配を取得し、画像入力装置のMTF特性を加味したパターンの生成ができる。   According to the present invention, a signal value (density or luminance) gradient is acquired at the time of pattern generation used when converting a resolution from a low resolution image to a high resolution image, and a pattern is generated in consideration of the MTF characteristics of the image input device. Can do.

実施例1において低・高解像度対応パターン記憶部に記憶されるパターンを作成するための機能の構成を示すフローチャートである。6 is a flowchart illustrating a configuration of a function for creating a pattern stored in a low / high resolution correspondence pattern storage unit according to the first exemplary embodiment. 実施例1において低・高解像度対応パターン記憶部に記憶されるパターンの作成方法を具体的に説明する為のイメージ図である。FIG. 5 is an image diagram for specifically explaining a method of creating a pattern stored in a low / high resolution correspondence pattern storage unit in the first embodiment. 実施例1において解像度変換後の画像からノイズを低減とする低・高解像度対応パターン記憶部に記憶されるパターンを作成するための機能の構成を示すフローチャートである。6 is a flowchart illustrating a configuration of a function for creating a pattern stored in a low / high resolution correspondence pattern storage unit that reduces noise from an image after resolution conversion in the first embodiment. 実施例1において解像度変換後の画像にフィルタリング効果を出す低・高解像度対応パターン記憶部に記憶されるパターンを作成するための機能の構成を示すフローチャートである。6 is a flowchart illustrating a configuration of a function for creating a pattern stored in a low / high resolution correspondence pattern storage unit that produces a filtering effect on an image after resolution conversion in the first embodiment. 実施例1において低・高解像度対応パターン記憶部に記憶されたパターンを使用した解像度変換をするための構成を示すフローチャートである。5 is a flowchart illustrating a configuration for performing resolution conversion using a pattern stored in a low / high resolution correspondence pattern storage unit according to the first exemplary embodiment. 実施例1において低・高解像度対応パターン記憶部に記憶されたパターンを使用した解像度変換をするための構成を示すフローチャートである。5 is a flowchart illustrating a configuration for performing resolution conversion using a pattern stored in a low / high resolution correspondence pattern storage unit according to the first exemplary embodiment. 実施例2において低・高解像度対応パターン記憶部に記憶されるパターンを作成するための機能の構成を示すフローチャートである。10 is a flowchart illustrating a configuration of a function for creating a pattern stored in a low / high resolution correspondence pattern storage unit in the second embodiment. 実施例2において低・高解像度対応パターン記憶部に記憶されたパターンを使用した解像度変換をするための構成を示すフローチャートである。10 is a flowchart illustrating a configuration for performing resolution conversion using a pattern stored in a low / high resolution correspondence pattern storage unit in the second embodiment. 実施例3において低・高解像度対応パターン記憶部に記憶されるパターンを作成するための機能の構成を示すフローチャートである。10 is a flowchart illustrating a configuration of a function for creating a pattern stored in a low / high resolution correspondence pattern storage unit in the third embodiment. 実施例3において低・高解像度対応パターン記憶部に記憶されたパターンを使用した解像度変換をするための構成を示すフローチャートである。12 is a flowchart illustrating a configuration for performing resolution conversion using a pattern stored in a low / high resolution correspondence pattern storage unit in the third embodiment. 実施例3において低・高解像度対応パターン記憶部に記憶されたパターンを使用した解像度変換をするための構成を示すフローチャートである。12 is a flowchart illustrating a configuration for performing resolution conversion using a pattern stored in a low / high resolution correspondence pattern storage unit in the third embodiment.

以下、図面を用いて本発明に係る一実施形態を詳細に説明する。ただし、この実施形態に記載されている構成要素はあくまで例示であり、この発明の範囲をそれらに限定する趣旨のものではない。   Hereinafter, an embodiment according to the present invention will be described in detail with reference to the drawings. However, the components described in this embodiment are merely examples, and are not intended to limit the scope of the present invention thereto.

[実施例1]
図1に本発明の実施例1における画像処理を実行するためのフローチャートを示す。本実施例によるデータベースを使用する画像処理は、主として複写機等の画像出力装置内部やディスプレイ等によるによる画像表示装置内部において使用することが効率的であるが、上記以外の画像処理装置やアプリケーションでも適用可能である。このデータベースを使用した画像処理装置のソフトウェア構成については後述する。
[Example 1]
FIG. 1 shows a flowchart for executing image processing in Embodiment 1 of the present invention. The image processing using the database according to the present embodiment is efficient mainly in the image output apparatus such as a copying machine or in the image display apparatus using a display or the like, but also in image processing apparatuses and applications other than the above. Applicable. The software configuration of the image processing apparatus using this database will be described later.

図1を参照して、画像処理装置に入力した画像データの解像度を横i倍、縦j倍に解像度変換する処理に利用可能な信号値マッチングパターン及びその信号値マッチングパターンに対応した多階調の信号値置換パターンを生成する処理の例を示す。   Referring to FIG. 1, a signal value matching pattern that can be used for processing for converting the resolution of image data input to the image processing apparatus to i-fold and j-fold resolution, and tones corresponding to the signal value matching pattern An example of a process for generating a signal value replacement pattern is shown.

高解像度画像データ入力部101は、高解像度画像が入力される入力部である。ダウンサンプリング処理部102は、高解像度画像データ入力部101から入力された画像の解像度を横1/i倍、縦1/j倍の解像度にダウンサンプリングする。ダウンサンプリング処理は、処理時間を考慮しニアレストネイバ法による単純縮小でも可能であるが、ダウンサンプリングによる干渉縞(モアレ)発生を懸念し、例えば、三次畳み込み内挿法等の内挿法により画像の位相ズレを発生させないように行われる。   The high resolution image data input unit 101 is an input unit to which a high resolution image is input. The downsampling processing unit 102 downsamples the resolution of the image input from the high resolution image data input unit 101 to a resolution of 1 / i times horizontal and 1 / j times vertical. The downsampling processing can be performed by simple reduction by the nearest neighbor method in consideration of the processing time, but there is concern about the occurrence of interference fringes (moire) due to downsampling. For example, the image is obtained by interpolation such as cubic convolution interpolation. This is done so as not to cause a phase shift.

上記の手法で横1/i倍、縦1/j倍でのダウンサンプリング処理を行った場合は、下記の解像度変換処理で変倍を行う事が出来ない為、1つの入力画像に対して、異なる複数の倍率により複数回行う事で他解像度変換にも利用可能なパターンを作成することが可能である。   When downsampling processing at 1 / i times horizontal and 1 / j times vertical is performed by the above method, scaling cannot be performed by the following resolution conversion processing, so for one input image, It is possible to create a pattern that can also be used for other resolution conversions by performing multiple times with different multiple magnifications.

低解像度信号値パターン取得部103では、ダウンサンプリング処理により得られた低解像度画像内から、N×M画素の信号値が信号値マッチングパターンとして取得される。取得する信号値マッチングパターンのサイズは任意であるが、大きいサイズの信号値マッチングパターンを取得することで、より広域まで考慮して、後述する解像度変換を行うことができる。尚、信号値マッチングパターンのサイズとしては、入力される高解像度画像の解像度によりサイズ変更が可能であるが、サイズを大きくした場合の効果及びCPUのスペック等を考慮して、2×2画素又は4×4画素程度が妥当である。   The low resolution signal value pattern acquisition unit 103 acquires N × M pixel signal values as signal value matching patterns from the low resolution image obtained by the downsampling process. The size of the signal value matching pattern to be acquired is arbitrary, but by acquiring a large signal value matching pattern, resolution conversion described later can be performed in consideration of a wider area. Note that the size of the signal value matching pattern can be changed depending on the resolution of the input high-resolution image. However, in consideration of the effect of increasing the size and the specifications of the CPU, 2 × 2 pixels or About 4 × 4 pixels is appropriate.

また、高解像度信号値パターン取得部104では、高解像度画像データ入力部101から入力された高解像度画像の所定の領域の画素の信号値が信号値置換パターンとして取得される。信号値置換パターンが取得される画素の座標は、低解像度信号値パターン取得部103で取得した信号値マッチングパターンが取得された画素に対応する画素を全て含むように決められる。また、信号値マッチングパターンの画素サイズが例えば2×2であるのに対して、信号値置換パターンの画素サイズは例えば3×3である。   Further, the high resolution signal value pattern acquisition unit 104 acquires the signal value of the pixel in a predetermined region of the high resolution image input from the high resolution image data input unit 101 as a signal value replacement pattern. The coordinates of the pixels from which the signal value replacement pattern is acquired are determined so as to include all the pixels corresponding to the pixels from which the signal value matching pattern acquired by the low resolution signal value pattern acquisition unit 103 has been acquired. Further, the pixel size of the signal value matching pattern is, for example, 2 × 2, whereas the pixel size of the signal value replacement pattern is, for example, 3 × 3.

対応信号値統合部105では、取得部103及び104において取得した複数個の信号値マッチングパターンと信号値置換パターンとが互いに対応づけられて低・高解像度対応パターン記憶部106に書き込まれ、保持される。   In the corresponding signal value integration unit 105, a plurality of signal value matching patterns and signal value replacement patterns acquired by the acquisition units 103 and 104 are associated with each other and written and held in the low / high resolution corresponding pattern storage unit 106. The

パターン作成時に使用する高解像度画像として例えば高解像度スキャナ等から取得した画像を利用することで、解像度変換を行った際にデバイスのMTF特性を加味した学習パターンが作成できる。デバイスのMTF特性を加味したパターンを用い後述の解像度変換手法を用いていることで低解像度スキャナによる画像の解像度変換に加え、ネットワーク負荷等を考慮しダウンサンプリングを行った画像に対しても高解像度スキャナで取得した画質と同等の画像へと変換することが可能となる。   By using, for example, an image acquired from a high-resolution scanner or the like as a high-resolution image used when creating a pattern, a learning pattern can be created that takes into account the MTF characteristics of the device when resolution conversion is performed. Using the resolution conversion method described later using a pattern that takes into account the MTF characteristics of the device, in addition to converting the resolution of the image by a low resolution scanner, it also provides high resolution for images that have been downsampled in consideration of the network load etc. It is possible to convert to an image equivalent to the image quality acquired by the scanner.

図2は低・高解像度対応パターン記憶部106に記憶される信号値マッチングパターン及び信号値置換パターンの例を示している。   FIG. 2 shows an example of a signal value matching pattern and a signal value replacement pattern stored in the low / high resolution correspondence pattern storage unit 106.

図2(a)は、低解像度信号値パターン取得部103より低解像度画像内から取得される信号値マッチングパターンの1つの例を示している。信号値マッチングパターンは、横N画素、縦M画素の領域で形成され、この領域の各画素から取得された多階調の信号値で表される。この図2(a)の例においての取得画素サイズはN=2、M=2としており、A1からA4画素の信号値を取得する。   FIG. 2A shows an example of a signal value matching pattern acquired from the low resolution image by the low resolution signal value pattern acquisition unit 103. The signal value matching pattern is formed by a region of horizontal N pixels and vertical M pixels, and is represented by a multi-tone signal value acquired from each pixel in this region. In the example of FIG. 2A, the acquisition pixel size is N = 2 and M = 2, and signal values of A1 to A4 pixels are acquired.

また、図2(b)は、高解像度信号値パターン取得部104により高解像度画像内から取得される信号値置換パターンの1つの例を示している。この信号値置換パターンは、図2(a)の信号値マッチングパターンと同一箇所についての信号値置換パターンを示している。信号値置換パターンは、横(iN−(i−1))画素、縦(jM−(j−1))画素の領域で形成され、この領域の各画素から取得された多階調の信号値で表される。この図2(b)の例においての取得画素サイズは横2倍、縦2倍の解像度とするためのものでi=2、j=2で信号値取得を行う。   FIG. 2B shows an example of a signal value replacement pattern acquired from the high resolution image by the high resolution signal value pattern acquisition unit 104. This signal value replacement pattern is a signal value replacement pattern for the same location as the signal value matching pattern of FIG. The signal value replacement pattern is formed by regions of horizontal (iN- (i-1)) pixels and vertical (jM- (j-1)) pixels, and multi-tone signal values acquired from the respective pixels in this region. It is represented by In the example of FIG. 2B, the acquired pixel size is for making the resolution twice horizontal and double vertical, and signal values are acquired at i = 2 and j = 2.

できるだけ多くの信号値パターンの組合せを取得する為に、数多くの画像内から信号値マッチングパターンの組合せを取得して低・高解像度対応パターン記憶部106に書き込む。なお、同信号値の信号値マッチングパターンの組合せの場合は、信号値置換パターンの平均を求めた上で書き込む。   In order to acquire as many signal value pattern combinations as possible, signal value matching pattern combinations are acquired from a large number of images and written to the low / high resolution correspondence pattern storage unit 106. In the case of a combination of signal value matching patterns having the same signal value, the average of the signal value replacement patterns is obtained and written.

また、信号値マッチングパターンを8bit画像から作成する場合、パターンの組合せとして最大で(N×M)種類となりマッチング時間や多メモリ容量となることが懸念される為、必要に応じて書き込みの際に低解像度信号値パターン取得部103において量子化を行う事も可能である。 In addition, when creating a signal value matching pattern from an 8-bit image, there are concerns that there may be a maximum of (N × M) 8 combinations of patterns, resulting in a matching time and a large memory capacity. In addition, the low-resolution signal value pattern acquisition unit 103 can perform quantization.

図3は画像圧縮により発生するノイズによる影響を解像度変換の際に同時に低減を可能とする低・高解像度対応パターン作成処理の例を示している。図3において、上述した図1に示す構成と同一構成のものには同一番号を付ける。このフローチャートには、図1に示した構成と同様に、高解像度画像データ入力部101、ダウンサンプリング部102、低解像度信号値パターン取得部103、高解像度信号値パターン取得部104、及び対応信号値統合部105、低・高解像度対応パターン記憶部106が示されている。さらにこれらの構成に加えて、画像圧縮部(圧縮ノイズ付加)301が示されている。   FIG. 3 shows an example of low / high resolution compatible pattern creation processing that can simultaneously reduce the influence of noise generated by image compression during resolution conversion. In FIG. 3, the same components as those shown in FIG. In this flowchart, similarly to the configuration shown in FIG. 1, the high-resolution image data input unit 101, the downsampling unit 102, the low-resolution signal value pattern acquisition unit 103, the high-resolution signal value pattern acquisition unit 104, and the corresponding signal values An integration unit 105 and a low / high resolution correspondence pattern storage unit 106 are shown. In addition to these components, an image compression unit (adding compression noise) 301 is shown.

ネットワークを介して低解像度画像転送や画像保存を行う際にJPEG等の画像圧縮を行う場合にブロックノイズやモスキートノイズ等の画像劣化が発生する。それらのノイズを低解像度信号値パターン取得部の前に画像圧縮部301を設け圧縮ノイズを低解像度画像の方にのみ付加し、ノイズ付低解像度画像とノイズなし高解像度画像を対応信号値統合部105で対応付け、低・高解像度対応パターン記憶部106に収録する。ノイズを含めたパターンを用いて後述の解像度変換を行う事で、ブロックノイズやモスキートノイズ等のノイズがある低解像度画像を入力した際に、ノイズが低減された高解像度画像の生成が可能である。上記の通り、低解像度画像に取り除くべき画像ノイズ等の画像劣化が発生すること考えられる場合には、事前に低解像度画像信号値を取得する前に付加しパターンを作成し使用することで、解像度変換時に同時に画像劣化を低減することが可能である。   Image compression such as block noise and mosquito noise occurs when image compression such as JPEG is performed when transferring low-resolution images or storing images via a network. An image compression unit 301 is provided in front of the low-resolution signal value pattern acquisition unit to add those noises, and compression noise is added only to the low-resolution image, and a low-resolution image with noise and a high-resolution image without noise are associated with the signal value integration unit. Corresponding at 105 and recorded in the low / high resolution correspondence pattern storage unit 106. By performing resolution conversion described later using a pattern including noise, it is possible to generate a high-resolution image with reduced noise when a low-resolution image with noise such as block noise or mosquito noise is input. . As described above, if image degradation such as image noise that should be removed from the low-resolution image is considered to occur, the resolution can be obtained by creating and using the pattern before acquiring the low-resolution image signal value in advance. It is possible to reduce image degradation at the same time as conversion.

図4は解像度変換後の画像にエッジ強調等のフィルタリング効果をもたらす低・高解像度対応パターン作成処理の例を示している。図4において、上述した図1に示す構成と同一構成のものには同一番号を付ける。このフローチャートには、図1に示した構成と同様に、高解像度画像データ入力部101、ダウンサンプリング部102、低解像度信号値パターン取得部103、高解像度信号値パターン取得部104、及び対応信号値統合部105、低・高解像度対応パターン記憶部106が示されている。さらにこれらの構成に加えて、フィルタリング部401が示されている。   FIG. 4 shows an example of low / high resolution correspondence pattern creation processing that brings about a filtering effect such as edge enhancement on an image after resolution conversion. In FIG. 4, the same components as those shown in FIG. In this flowchart, similarly to the configuration shown in FIG. 1, the high-resolution image data input unit 101, the downsampling unit 102, the low-resolution signal value pattern acquisition unit 103, the high-resolution signal value pattern acquisition unit 104, and the corresponding signal values An integration unit 105 and a low / high resolution correspondence pattern storage unit 106 are shown. Further, in addition to these configurations, a filtering unit 401 is shown.

画像に対しエッジ強調を必要とする際は、出力画像毎に空間フィルタリングを行う必要がある。しかし、高解像度信号値パターン取得部104の前の段階のフィルタリング部401においてフィルタリングを行い、低・高解像度対応パターン記憶部106を生成し後述の解像度変換を行う事で、解像度変換後の画像に鮮鋭化の効果を出すことが可能である。   When edge enhancement is required for an image, it is necessary to perform spatial filtering for each output image. However, filtering is performed in the filtering unit 401 in the previous stage of the high resolution signal value pattern acquisition unit 104 to generate a low / high resolution correspondence pattern storage unit 106 and perform resolution conversion described later, so that an image after resolution conversion is obtained. It is possible to achieve a sharpening effect.

上記の通り、パターンを作成する際に用いる画像として、低解像度画像に関しては解像度変換する際のより現実性の高い画像を用い、高解像度画像に関しては解像度変換した際により理想的な画像を用いて作成し解像度変換に使用することで、目的に合った復元効果を出すことが可能となる。   As described above, as an image used for creating a pattern, a low-resolution image uses a more realistic image when converting the resolution, and a high-resolution image uses a more ideal image when converting the resolution. By creating and using it for resolution conversion, it is possible to produce a restoration effect that suits the purpose.

以上で説明した低・高解像度対応パターン記憶部106を使用する為の画像処理装置(画像処理システム)の構成を図5に示す。図5を参照して、画像処理装置に入力した画像データの解像度を横i倍、縦j倍に解像度変換する処理の例について述べる。   FIG. 5 shows a configuration of an image processing apparatus (image processing system) for using the low / high resolution correspondence pattern storage unit 106 described above. With reference to FIG. 5, an example of processing for converting the resolution of image data input to the image processing apparatus to i times horizontal and j times vertical will be described.

低解像度画像データ入力部501は、解像度変換処理の対象となる低解像度画像データを入力するための入力部である。低解像度画像データ入力部501で入力した低解像度画像は信号値取得部502に送信される。信号値取得部502は、受信した低解像度画像内のN×M画素の画像の各画素の信号値を信号値パターンとして取得する(N、Mは任意の自然数)。詳細には、信号値取得部502は、低解像度画像から高解像度画像に解像度変換した際に補間が必要な注目画素を囲むN×M個の画素の信号値を信号値パターンとして取得する。信号値取得部502で取得した信号値パターンは、パターンマッチング部503に送信される。   The low resolution image data input unit 501 is an input unit for inputting low resolution image data to be subjected to resolution conversion processing. The low resolution image input by the low resolution image data input unit 501 is transmitted to the signal value acquisition unit 502. The signal value acquisition unit 502 acquires the signal value of each pixel of the N × M pixel image in the received low-resolution image as a signal value pattern (N and M are arbitrary natural numbers). Specifically, the signal value acquisition unit 502 acquires, as a signal value pattern, signal values of N × M pixels surrounding a target pixel that needs to be interpolated when resolution conversion is performed from a low resolution image to a high resolution image. The signal value pattern acquired by the signal value acquisition unit 502 is transmitted to the pattern matching unit 503.

パターンマッチング部503は、受信した信号値パターンと一致する信号値パターン又は同様の信号値パターンを持つ信号値マッチングパターンを、上記で生成した低・高解像度対応パターン記憶部106から検索する。そして、パターンマッチング部503は、得られた信号値マッチングパターンを横i倍、縦j倍にしたものとして当該信号値マッチングパターンに対応付けられた多階調の信号値置換パターンを低・高解像度対応パターン記憶部106から取得する。パターンマッチング部で低・高解像度対応パターン記憶部106から取得した高解像度の信号値パターンは、パターンマッチング部503から信号値置換部504に送信される。信号値置換部504で受信した信号値を高解像度の信号値として補間信号値として置換を行う。以上のフローを全補間座標において行い高解像度画像データ出力部505より高解像度画像として出力する。   The pattern matching unit 503 searches the low / high resolution correspondence pattern storage unit 106 generated above for a signal value pattern that matches the received signal value pattern or has a similar signal value pattern. Then, the pattern matching unit 503 converts the obtained signal value matching pattern into i × horizontal and j × vertical, and converts the multi-tone signal value replacement pattern associated with the signal value matching pattern to low / high resolution. Acquired from the corresponding pattern storage unit 106. The high resolution signal value pattern acquired from the low / high resolution correspondence pattern storage unit 106 by the pattern matching unit is transmitted from the pattern matching unit 503 to the signal value replacement unit 504. The signal value received by the signal value replacement unit 504 is replaced as a high-resolution signal value as an interpolation signal value. The above flow is performed for all interpolation coordinates, and the high resolution image data output unit 505 outputs the high resolution image.

画像処理装置の上記のソフトウェア構成は一例にすぎず、これに限定されない。例えば、低解像度画像に対し像域分離やエッジ箇所抽出等の処理を行い、解像度変換手法を領域により分岐する構成を備えるものであってもよい。図6に解像度変換手法を領域により分岐する構成で行う解像度変換のフローチャートを示す。図6において、上述した図5に示す実施例1の構成と同一構成のものには同一番号を付ける。このフローチャートには、図5に示した構成と同様に、低解像度画像データ入力部501、信号値取得部502、パターンマッチング部503、信号値置換部504、及び高解像度画像データ出力部505が示されている。さらにこれらの構成に加えて、エッジ箇所抽出部601、及びアップサンプリング部602が示されている。例えば、低解像度画像内に文字部を持つ場合、エッジ箇所抽出部601においてエッジ抽出を行い下地(背景)部とエッジ(文字)部に分割を行う。下地(背景)部に関してはアップサンプリング部602において例えばニアレストネイバ法や三次畳み込み内挿法により解像度変換を行い、エッジ(文字)部に対してはパターンマッチングも用いた解像度変換を行うように、適応的に解像度変換手法を変えることも可能である。尚、上記の例ではエッジ抽出による分岐を示したが、像域分離により分割し解像度変換手法を変えるなども挙げられ、エッジ抽出に限定するものではない。   The above software configuration of the image processing apparatus is merely an example, and the present invention is not limited to this. For example, a configuration may be provided in which processing such as image area separation and edge location extraction is performed on a low-resolution image, and the resolution conversion method is branched according to the region. FIG. 6 shows a flowchart of resolution conversion performed in a configuration in which the resolution conversion method is branched according to regions. In FIG. 6, the same components as those of the first embodiment shown in FIG. This flowchart shows a low-resolution image data input unit 501, a signal value acquisition unit 502, a pattern matching unit 503, a signal value replacement unit 504, and a high-resolution image data output unit 505 in the same manner as the configuration shown in FIG. Has been. In addition to these configurations, an edge location extraction unit 601 and an upsampling unit 602 are shown. For example, when a low resolution image has a character part, the edge part extraction unit 601 performs edge extraction and divides the background (background) part and the edge (character) part. For the background (background) portion, the upsampling unit 602 performs resolution conversion by, for example, nearest neighbor method or cubic convolution interpolation, and the edge (character) portion performs resolution conversion using pattern matching. It is also possible to change the resolution conversion method adaptively. In the above example, branching by edge extraction is shown. However, it is possible to divide by image area separation and change the resolution conversion method, and the present invention is not limited to edge extraction.

[実施例2]
実施例1においては、低解像度画像を高解像度画像に解像度変換を行う際に利用する信号値マッチングパターンを複数枚の高解像度画像内から生成する方法を説明した。複数枚の高解像度画像全面からパターンを生成することで、多くの低解像度画像に対応する汎用性の高い信号値マッチングパターンデータの生成が可能であるが、その代わりに写真や文字等の各々の画像属性に特化したパターンの生成は難しい。そこで、実施例2では、画像をオブジェクトごとに分離し属性に特化した置換を可能とするマッチングパターンの生成を可能とする構成を説明する。
[Example 2]
In the first embodiment, a method of generating a signal value matching pattern used when converting a resolution from a low resolution image to a high resolution image from a plurality of high resolution images has been described. By generating a pattern from the entire surface of a plurality of high-resolution images, it is possible to generate highly versatile signal value matching pattern data corresponding to many low-resolution images. Instead, each of photos, characters, etc. It is difficult to generate patterns specialized for image attributes. Therefore, in the second embodiment, a configuration that enables generation of a matching pattern that separates an image for each object and enables replacement specialized for an attribute will be described.

図7に本発明の実施例2における処理のフローチャートを示す。図7において、上述した図1に示す実施例1の構成と同一構成のものには同一番号を付ける。このフローチャートには、図1に示した構成と同様に、高解像度画像データ入力部101、ダウンサンプリング部102、低解像度信号値パターン取得部103、高解像度信号値パターン取得部104、対応信号値統合部105、及び低・高解像度対応パターン記憶部106が示されている。さらにこれらの構成に加えて、画像属性分離部701、及び属性分岐部702が示されている。なお、低・高解像度対応パターン記憶部106は実施例1と同じ機能であるが、属性毎に分けて収録するものであり、実施例2では文字、写真、及びイラストの3種類に分割した構成となっており、必要に応じて分割数を変えることも可能である。   FIG. 7 shows a flowchart of processing in Embodiment 2 of the present invention. In FIG. 7, the same components as those of the first embodiment shown in FIG. In this flowchart, similar to the configuration shown in FIG. 1, the high-resolution image data input unit 101, the downsampling unit 102, the low-resolution signal value pattern acquisition unit 103, the high-resolution signal value pattern acquisition unit 104, and the corresponding signal value integration A unit 105 and a low / high resolution correspondence pattern storage unit 106 are shown. In addition to these configurations, an image attribute separation unit 701 and an attribute branching unit 702 are shown. The low / high resolution correspondence pattern storage unit 106 has the same function as that of the first embodiment, but is recorded separately for each attribute. In the second embodiment, the structure is divided into three types of characters, photographs, and illustrations. It is also possible to change the number of divisions as necessary.

画像属性分離部701は、高解像度画像データ入力部101から入力された画像に対し、注目画素毎に注目画素及びその周辺画素の信号値を元に画像の属性をオブジェクト毎に分離する。オブジェクト毎の分離の種類としては、例えば文字部、写真部、イラスト部、下地(背景)等に分離を行う。画像属性分離部701により取得した属性データを元に、属性分岐部702において低解像度信号値パターン取得部103及び高解像度信号値パターン取得部104において取得した信号値を分岐し、オブジェクト毎に対応信号値統合部105において高・低解像度信号値を対応付け各々の低・高解像度対応パターン記憶部106に書き込む。   The image attribute separation unit 701 separates image attributes for each object based on the signal values of the target pixel and its surrounding pixels for each target pixel with respect to the image input from the high resolution image data input unit 101. As the type of separation for each object, for example, separation is performed on a character portion, a photograph portion, an illustration portion, a background (background), and the like. Based on the attribute data acquired by the image attribute separation unit 701, the signal value acquired by the low resolution signal value pattern acquisition unit 103 and the high resolution signal value pattern acquisition unit 104 is branched by the attribute branching unit 702, and a corresponding signal is provided for each object. In the value integration unit 105, the high / low resolution signal values are associated and written to the low / high resolution correspondence pattern storage units 106.

以上に示す通り分岐を行う事で、例えば文字部にはより急峻な濃度(信号値)勾配を持つ置換パターンが多く取得されるほか、写真部ではよりなだらかな濃度(信号値)勾配を持つ置換パターンが取得され、後述の解像度変換手法により属性に応じて別パターンを用いて解像度変換を行うとより高精度の解像度変換が可能となる。   By branching as shown above, for example, many replacement patterns with a steeper density (signal value) gradient are acquired in the character part, and replacement with a gentler density (signal value) gradient is obtained in the photograph part. When a pattern is acquired and resolution conversion is performed using another pattern according to the attribute by the resolution conversion method described later, higher-precision resolution conversion is possible.

尚、上記では画像属性分離部701において高解像度画像で属性を決めたが、処理時間を抑えるという観点でダウンサンプリング後の低解像度画像において行う事も適応可能である。   In the above description, the attribute is determined by the high-resolution image in the image attribute separation unit 701. However, it is also possible to perform the processing on the low-resolution image after downsampling from the viewpoint of reducing processing time.

図8に上記に示す手法を用い作成した低・高解像度対応パターン記憶部106を使用し行う解像度変換手法例を示す。図8において、上述した実施例1における図5に示した構成と同一の構成には同一番号を付ける。このフローチャートには、図5に示した構成と同様に、低解像度画像データ入力部501、信号値取得部502、パターンマッチング部503、信号値置換部504、及び高解像度画像データ出力部505が示されている。さらにこれらの構成に加えて、画像属性分離部701、及び、各低・高解像度対応パターン記憶部106が示されており、共に図7において使用した機能を持つものである。   FIG. 8 shows an example of a resolution conversion technique performed using the low / high resolution correspondence pattern storage unit 106 created using the technique described above. In FIG. 8, the same components as those shown in FIG. This flowchart shows a low-resolution image data input unit 501, a signal value acquisition unit 502, a pattern matching unit 503, a signal value replacement unit 504, and a high-resolution image data output unit 505 in the same manner as the configuration shown in FIG. Has been. In addition to these configurations, an image attribute separation unit 701 and low / high resolution correspondence pattern storage units 106 are shown, both having the functions used in FIG.

低解像度画像データ入力部501は、解像度変換処理の対象となる低解像度画像データを入力するための入力部である。低解像度画像データ入力部501で入力した画像に対し画像属性分離部701において画像の属性判断を行う。当実施例の場合、文字部、写真部、及びイラスト部の3種類に分割したが、分割の数は保持するマッチングパターンデータの数に合わせ変更することも可能である。画像属性分離部701から信号値取得部502に、入力された低解像度画像の信号値と、属性分離結果が送信される。信号値取得部502は、受信した低解像度画像内のN×M画素の画像の各画素の信号値を信号値パターンとして取得する。取得したN×Mサイズの信号値パターンを属性分離結果に応じて分岐し、属性に対応した低・高解像度対応パターン記憶部106を持つパターンマッチング部503に送信される。パターンマッチング部503では属性に特化した低・高解像度対応パターン記憶部106内から検索を行う事で、より適応的な置換パターンを選択し解像度変換が可能となる。パターンマッチング部503から信号値置換部504に取得した置換パターンを送信し、信号値を高解像度の信号値として補間信号値として置換を行う。以上のフローを全補間座標において行い高解像度画像データ出力部505より高解像度画像として出力する。   The low resolution image data input unit 501 is an input unit for inputting low resolution image data to be subjected to resolution conversion processing. The image attribute separation unit 701 performs image attribute determination on the image input by the low resolution image data input unit 501. In this embodiment, the character part, the photograph part, and the illustration part are divided into three types. However, the number of divisions can be changed according to the number of matching pattern data to be held. The signal value of the input low-resolution image and the attribute separation result are transmitted from the image attribute separation unit 701 to the signal value acquisition unit 502. The signal value acquisition unit 502 acquires the signal value of each pixel of the N × M pixel image in the received low-resolution image as a signal value pattern. The obtained N × M size signal value pattern is branched according to the attribute separation result, and transmitted to the pattern matching unit 503 having the low / high resolution correspondence pattern storage unit 106 corresponding to the attribute. The pattern matching unit 503 performs a search from the low / high resolution correspondence pattern storage unit 106 specialized for attributes, thereby selecting a more suitable replacement pattern and performing resolution conversion. The replacement pattern acquired from the pattern matching unit 503 is transmitted to the signal value replacement unit 504, and the signal value is replaced as an interpolated signal value as a high-resolution signal value. The above flow is performed for all interpolation coordinates, and the high resolution image data output unit 505 outputs the high resolution image.

以上のように、入力された画像に対し画素毎に属性分離を行う事で、属性毎にパターン生成可能となり、属性に応じたパターン生成ができる。また、属性毎のパターンを用いることで、解像度変換の際により適応的なパターンを選択することが可能となり、より最適な解像度変換が可能となる。   As described above, by performing attribute separation for each pixel on the input image, a pattern can be generated for each attribute, and a pattern can be generated according to the attribute. Further, by using a pattern for each attribute, an adaptive pattern can be selected at the time of resolution conversion, and more optimal resolution conversion can be performed.

[実施例3]
実施例1及び実施例2では解像度変換を行う際に使用するマッチングパターン生成する際、解像度変換を行う原稿によらない汎用性のあるパターンの生成方法を説明した。しかし、他原稿にも対応可能な汎用性の高い学習パターンを生成する事が可能であるが、一度作成すると更新が困難である。そこで、実施例3ではユーザー等でパターンのデータベースをより強固なものに変更・更新できる構成を説明する。
[Example 3]
In the first and second embodiments, a method for generating a versatile pattern that does not depend on a document for which resolution conversion is performed when generating a matching pattern used for resolution conversion has been described. However, it is possible to generate a highly versatile learning pattern that can be applied to other manuscripts, but once created, it is difficult to update. Therefore, in the third embodiment, a configuration in which a user or the like can change / update the pattern database to a stronger one will be described.

スキャナ等の画像読み込み装置を持つデバイスからネットワークを介して複写機へ画像を転送する際には、ネットワーク負荷を考慮しスキャン時の解像度から低解像度化し転送を行う。ネットワークでつながるデバイス同士が同様のスキャナまたは、類似したMTF特性を持つスキャナの場合、実施例1及び実施例2で示した低・高解像度対応パターン記憶部106は同様のものを使用できる。画像を受信する側のデバイスのパターン作成モード等で、そのスキャナに特化したオリジナルのパターンを作成可能として、追記可能な低・高解像度対応パターン記憶部に作り貯めしておくことで同じMTF特性を持つスキャナから低解像度画像を受信した際に、その送信側のデバイスに特化したMTF特性を考慮したパターンを使用し、より高精度に解像度変換を可能とする。   When transferring an image from a device having an image reading device such as a scanner to a copying machine via a network, the resolution is reduced from the resolution at the time of scanning in consideration of the network load. When the devices connected via the network are similar scanners or scanners having similar MTF characteristics, the same low / high resolution corresponding pattern storage unit 106 shown in the first and second embodiments can be used. The same MTF characteristics can be created and stored in a low- and high-resolution compatible pattern storage unit that can create an original pattern specialized for the scanner in the pattern creation mode of the device that receives the image. When a low-resolution image is received from a scanner having the above, a pattern considering MTF characteristics specialized for the device on the transmission side is used to enable resolution conversion with higher accuracy.

図9に本発明の実施例3を示すフローチャートを示す。図9において、上述した図1に示す実施例1の構成と同一構成のものには同一番号を付ける。このフローチャートには、図1に示した構成と同様に、ダウンサンプリング部102、低解像度信号値パターン取得部103、高解像度信号値パターン取得部104、及び対応信号値統合部105が示されている。さらにこれらの構成に加えて、スキャナ画像入力部901、スキャナ情報902、及び低・高解像度対応パターン累積記憶部903が示されている。   FIG. 9 shows a flowchart showing the third embodiment of the present invention. In FIG. 9, the same components as those of the first embodiment shown in FIG. This flowchart shows a downsampling unit 102, a low resolution signal value pattern acquisition unit 103, a high resolution signal value pattern acquisition unit 104, and a corresponding signal value integration unit 105, as in the configuration shown in FIG. . In addition to these components, a scanner image input unit 901, scanner information 902, and a low / high resolution correspondence pattern accumulation storage unit 903 are shown.

ユーザーによりパターン作成モード等でパターン作成の合図があった場合は、スキャナ上のチャートがスキャンされ、スキャナ画像入力部901から画像が入力される。その際の入力画像はスキャナの最高スペックでの画像解像度が最適である。スキャナ画像入力部901より入力された画像に関してはパターン作成可能な全画素において実施例1と同様に高解像度画像及び低解像度画像が生成され対応信号値統合部105で対応付けられ低・高解像度対応パターン累積記憶部903に書き込まれる。しかし、実施例1では複数個見つかった同種類のパターンに関しては平均化を行っていたが、実施例3では各々の信号値を加算し累積で記録していく。また加えて、最終的にパターンの平均化を行う為に加算を行ったパターンのカウンタ数も同様に書き込んでおく。実施例3では、解像度変換を行う画像がどの機種のスキャナで取得されたのかを判断する必要がある為、低・高解像度対応パターン累積記憶部903にパターン生成に用いたスキャナ情報902をデータのヘッダ情報として書き込んでおく。以上の通り、低・高解像度対応パターン累積記憶部903には対応付けられた低・高解像度画像より取得した信号値の累積値、累積のカウンタ数、及びスキャナの機種を特定できるスキャナ情報を同時に書き込み保持する。   When the user gives a pattern creation signal in the pattern creation mode or the like, the chart on the scanner is scanned and an image is input from the scanner image input unit 901. The input image at that time has an optimal image resolution at the highest spec of the scanner. As for the image input from the scanner image input unit 901, a high-resolution image and a low-resolution image are generated in all pixels capable of pattern generation, as in the first embodiment, and are associated by the corresponding signal value integration unit 105. It is written in the pattern accumulation storage unit 903. However, in the first embodiment, averaging is performed for the same type of patterns found in plural, but in the third embodiment, each signal value is added and recorded cumulatively. In addition, the number of counters of the pattern added for final pattern averaging is similarly written. In the third embodiment, since it is necessary to determine which type of scanner the image to be subjected to resolution conversion was acquired, the scanner information 902 used for pattern generation is stored in the low / high resolution corresponding pattern cumulative storage unit 903. Write as header information. As described above, the low / high resolution correspondence pattern cumulative storage unit 903 simultaneously stores the cumulative value of signal values acquired from the associated low / high resolution image, the number of cumulative counters, and scanner information that can specify the scanner model. Keep writing.

図10に上記に示す手法を用い作成した低・高解像度対応パターン累積記憶部803を使用し行う解像度変換手法例を示す。図10において、上述した実施例1に示した構成と同一の構成には同一番号を付ける。このフローチャートには、図5に示した構成と同様に、信号値取得部502、パターンマッチング部503、信号値置換部504、及び高解像度画像データ出力部505が示されている。さらにこれらの構成に加えて、スキャン画像入力部1001、信号値演算部1002が示されている。   FIG. 10 shows an example of a resolution conversion technique performed using the low / high resolution correspondence pattern accumulation storage unit 803 created using the technique shown above. In FIG. 10, the same reference numerals are given to the same components as those described in the first embodiment. In this flowchart, a signal value acquisition unit 502, a pattern matching unit 503, a signal value replacement unit 504, and a high-resolution image data output unit 505 are shown, as in the configuration shown in FIG. In addition to these components, a scan image input unit 1001 and a signal value calculation unit 1002 are shown.

スキャン画像入力部1001より解像度変換を行う画像に加えスキャナの機種情報であるスキャナ情報が入力される。例えばスキャン画像入力部1001の画像はネットワークを際して送られる低解像度画像である。低・高解像度対応パターン累積記憶部903内に書き込まれているスキャナ情報と、スキャン画像入力部1001より入力された画像のスキャナ情報が一致しない場合は図5に示す実施例1のフローを行う。スキャナ情報が一致した場合は、実施例3が実行され、実施例1同様に信号値取得部502で信号値が取得され、パターンマッチング部503での検索がなされる。パターンマッチング部503において、低・高解像度対応パターン累積記憶部903から置換パターンを検索し取得する。取得された信号値パターンは信号値演算部1002に送信され、低・高解像度画像より取得した信号値の累積値及び、累積のカウンタ数も用いてパターンの平均化が行われる。平均化した画像は高解像度画像の補間値として信号値置換部504で置換され、全補間画素を処理した上で高解像度画像として高解像度画像データ出力部505から出力される。   In addition to the image whose resolution is to be converted, scanner information, which is scanner model information, is input from the scan image input unit 1001. For example, the image of the scanned image input unit 1001 is a low-resolution image sent over the network. When the scanner information written in the low / high resolution correspondence pattern accumulation storage unit 903 and the scanner information of the image input from the scan image input unit 1001 do not match, the flow of Example 1 shown in FIG. 5 is performed. If the scanner information matches, the third embodiment is executed, and the signal value is acquired by the signal value acquisition unit 502 as in the first embodiment, and the search by the pattern matching unit 503 is performed. The pattern matching unit 503 searches for and acquires a replacement pattern from the low / high resolution correspondence pattern accumulation storage unit 903. The acquired signal value pattern is transmitted to the signal value calculation unit 1002, and the pattern is averaged using the cumulative value of the signal value acquired from the low / high resolution image and the cumulative counter number. The averaged image is replaced by the signal value replacement unit 504 as an interpolation value of the high resolution image, and after processing all the interpolation pixels, the high resolution image data output unit 505 outputs the high resolution image.

以上の通り行う事で、そのスキャナに特化したオリジナルのパターンをユーザー等により作成が可能となる。尚、本実施例ではパターン作成モードでのパターンとしたが通常のコピー等の際にも実施可能であり、限定するものではない。   By performing as described above, an original pattern specialized for the scanner can be created by a user or the like. In this embodiment, the pattern is used in the pattern creation mode. However, the present invention can be applied to normal copying and the like, and is not limited.

また、本実施例ではネットワークを介した転送の例を記述したが、ハードディスクを保持する複写機の場合にも有効な活用が可能である。画像をスキャンしハードディスクに保持する場合、高画質のまま保持すると容量が多くなってしまうが、本実施例を用いることで低解像度化し保持し、プリントやパソコンへの転送の前にオリジナルのパターンを用い高解像度化も可能である。   In this embodiment, an example of transfer via a network has been described. However, the present invention can also be effectively used in the case of a copying machine holding a hard disk. When scanning an image and storing it on the hard disk, the capacity increases if the image quality is maintained as it is. However, using this example, the resolution can be reduced and the original pattern can be stored before printing or transfer to a computer. Higher resolution is also possible.

図11にハードディスクを保持する複写機の場合の解像度変換手法例を示す。図11において、図10に示した構成と同一の構成には同一番号を付ける。このフローチャートには、図10に示した構成と同様に、スキャン画像入力部1001、信号値取得部502、パターンマッチング部503、信号値置換部504、高解像度画像データ出力部505、信号値演算部1002、及び低・高解像度対応パターン累積記憶部903が示されている。さらにこれらの構成に加えて、ダウンサンプリング部1101、ハードディスク1102が示されている。   FIG. 11 shows an example of resolution conversion technique in the case of a copying machine holding a hard disk. In FIG. 11, the same components as those shown in FIG. In this flowchart, similarly to the configuration shown in FIG. 10, a scanned image input unit 1001, a signal value acquisition unit 502, a pattern matching unit 503, a signal value replacement unit 504, a high-resolution image data output unit 505, a signal value calculation unit 1002 and a low / high resolution correspondence pattern accumulation storage unit 903 are shown. In addition to these components, a downsampling unit 1101 and a hard disk 1102 are shown.

スキャンした画像を複写機内のハードディスクに保存する場合にはハードディスク負荷低減のためダウンサンプリング部1101において低解像度化され、ハードディスク1102に保存される。ダウンサンプリング部1101では例えば三次畳み込み内挿法により低解像度化を行い保存する。低解像度化されハードディスク1102に保存された画像をプリントする際は既にスキャンしたスキャナ情報は分かっているため確認を行う必要はない。解像度変換手法に関しては図10に示した手法と同等の処理を行い、スキャナに適した解像度変換を行う事ができる。   When the scanned image is stored in the hard disk in the copying machine, the resolution is reduced in the downsampling unit 1101 and stored in the hard disk 1102 in order to reduce the hard disk load. The downsampling unit 1101 reduces the resolution by, for example, cubic convolution interpolation and saves it. When printing an image whose resolution has been reduced and stored on the hard disk 1102, it is not necessary to check because the scanned scanner information is already known. With regard to the resolution conversion method, processing equivalent to the method shown in FIG. 10 can be performed, and resolution conversion suitable for the scanner can be performed.

101 高解像度画像データ入力部
102 ダウンサンプリング処理部
101 High-resolution image data input unit 102 Downsampling processing unit

Claims (5)

高解像度画像を入力する画像取得手段(101)と、
高解像度画像を低解像度化にした低解像度画像を生成する補間手段(102)と、
前記低解像度画像内から複数の信号値パターンを取得する取得手段(103)と、
前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内の対応する同座標から複数の信号値パターンを取得する取得手段(104)と、
前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内から取得した信号値パターンを対応付けると処理手段(105)と、
対応付けを行った信号値データを記憶する記憶手段(106)と、
を備えたことを特徴とする画像処理装置。
Image acquisition means (101) for inputting a high-resolution image;
Interpolation means (102) for generating a low resolution image obtained by reducing the resolution of the high resolution image;
Obtaining means (103) for obtaining a plurality of signal value patterns from within the low resolution image;
An acquisition means (104) for acquiring a plurality of signal value patterns from the same coordinate in the high-resolution image and the signal value pattern acquired from the low-resolution image;
When the signal value pattern acquired from within the low-resolution image is associated with the signal value pattern acquired from within the high-resolution image, processing means (105);
Storage means (106) for storing the associated signal value data;
An image processing apparatus comprising:
高解像度画像または高解像度画像を低解像度化した低解像度画像を画像内の属性をオブジェクト毎に分離を行う像域分離手段(601)と、
前記像域分離により分離結果に応じて分岐する分岐手段(602)と、
を備えたことを特徴とする請求項1に記載の画像処理装置。
An image area separation means (601) for separating a high-resolution image or a low-resolution image obtained by reducing the resolution of a high-resolution image for each object with an attribute in the image;
Branching means (602) for branching according to the separation result by the image area separation;
The image processing apparatus according to claim 1, further comprising:
高解像度画像を入力する画像取得手段(101)と、
高解像度画像を低解像度化にした低解像度画像を生成する補間手段(102)と、
前記低解像度画像内から複数の信号値パターンを取得する取得手段(103)と、
前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内の対応する同座標から複数の信号値パターンを取得する取得手段(104)と、
前記低解像度画像内から取得した信号値パターンと、前記高解像度画像内から取得した信号値パターンを対応付けると処理手段(105)と、
対応付けを行った信号値データを記憶する記憶手段(106)と、
高解像度画像を取得した画像入力装置情報を取得する取得手段(802)と、
を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。
Image acquisition means (101) for inputting a high-resolution image;
Interpolation means (102) for generating a low resolution image obtained by reducing the resolution of the high resolution image;
Obtaining means (103) for obtaining a plurality of signal value patterns from within the low resolution image;
An acquisition means (104) for acquiring a plurality of signal value patterns from the same coordinate in the high-resolution image and the signal value pattern acquired from the low-resolution image;
When the signal value pattern acquired from within the low-resolution image is associated with the signal value pattern acquired from within the high-resolution image, processing means (105);
Storage means (106) for storing the associated signal value data;
Acquisition means (802) for acquiring image input device information for acquiring a high-resolution image;
The image processing apparatus according to claim 1, further comprising:
入力される高解像度画像から低解像度画像にした画像対しノイズを付加するノイズ付加手段(301)と、
を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。
Noise adding means (301) for adding noise to an image from a high resolution image inputted to a low resolution image;
The image processing apparatus according to claim 1, further comprising:
入力される高解像度画像対しフィルタリングを行うフィルタリング手段(401)と、
を備えたことを特徴とする請求項1又は請求項2に記載の画像処理装置。
Filtering means (401) for filtering the input high resolution image;
The image processing apparatus according to claim 1, further comprising:
JP2011266432A 2011-12-06 2011-12-06 Image processor Pending JP2013120951A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011266432A JP2013120951A (en) 2011-12-06 2011-12-06 Image processor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011266432A JP2013120951A (en) 2011-12-06 2011-12-06 Image processor

Publications (1)

Publication Number Publication Date
JP2013120951A true JP2013120951A (en) 2013-06-17

Family

ID=48773424

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011266432A Pending JP2013120951A (en) 2011-12-06 2011-12-06 Image processor

Country Status (1)

Country Link
JP (1) JP2013120951A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130120802A1 (en) * 2011-11-15 2013-05-16 Canon Kabushiki Kaisha Image processing apparatus and image processing method
JP2020162025A (en) * 2019-03-27 2020-10-01 キヤノン株式会社 Image processing system, image processing method, and image processing device
WO2023013856A1 (en) * 2021-08-04 2023-02-09 삼성전자 주식회사 Electronic device and operation method thereof

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130120802A1 (en) * 2011-11-15 2013-05-16 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US8743419B2 (en) * 2011-11-15 2014-06-03 Canon Kabushiki Kaisha Image processing apparatus and method converting low-resolution image to high-resolution using signal value patterns
JP2020162025A (en) * 2019-03-27 2020-10-01 キヤノン株式会社 Image processing system, image processing method, and image processing device
WO2023013856A1 (en) * 2021-08-04 2023-02-09 삼성전자 주식회사 Electronic device and operation method thereof

Similar Documents

Publication Publication Date Title
US5832141A (en) Image processing method and apparatus using separate processing for pseudohalf tone area
US20130028538A1 (en) Method and system for image upscaling
US20030179935A1 (en) Image processing apparatus, image processing method, image processing program, and computer-readable record medium storing image processing program
Liang et al. Improved non-local iterative back-projection method for image super-resolution
JP5875336B2 (en) Image processing apparatus and image processing method
KR20100077307A (en) Image texture filtering method, storage medium of storing program for executing the same and apparatus performing the same
JPH07131634A (en) Image processor
JP2013120951A (en) Image processor
JPH08294001A (en) Image processing method and image processing unit
JP2005326977A (en) Image magnification device and program
JP2006221221A (en) Generation of high resolution image using two or more low resolution image
JP2011119824A (en) Image processor and image processing program
JP3912971B2 (en) Image processing apparatus and method
JP6157234B2 (en) Image processing apparatus, image processing method, and program
JP2005293265A (en) Image processing device, and method
KR101332030B1 (en) Method of magnifying image and computer readable medium storing the program thereof
JP2004304543A (en) Halftoning processing method and halftoning processing system
JP3624153B2 (en) Image processing apparatus and image processing method
Savagave et al. Study of image interpolation
JPH0993424A (en) Image processor
JP6661434B2 (en) Image processing device
JP5085589B2 (en) Image processing apparatus and method
JP4517288B2 (en) Image processing apparatus, image processing method, and program thereof
JP2016174306A (en) Image processing apparatus, screen processing method and program
Shen et al. Spatially-varying super-resolution for HDTV