JPH11313205A - Image processing unit and image processing method - Google Patents
Image processing unit and image processing methodInfo
- Publication number
- JPH11313205A JPH11313205A JP10132699A JP13269998A JPH11313205A JP H11313205 A JPH11313205 A JP H11313205A JP 10132699 A JP10132699 A JP 10132699A JP 13269998 A JP13269998 A JP 13269998A JP H11313205 A JPH11313205 A JP H11313205A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- frequency component
- frequency
- image
- constant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、デジタル複写機、
レーザプリンタ、ファクシミリ、画像ファイリング装置
等の画像処理装置および画像処理方法に関し、特に入力
された二つの画像を合成して合成画像を得る画像処理装
置及び画像処理方法に関するものである。The present invention relates to a digital copying machine,
The present invention relates to an image processing apparatus and an image processing method such as a laser printer, a facsimile, and an image filing apparatus, and more particularly to an image processing apparatus and an image processing method for combining two inputted images to obtain a combined image.
【０００２】[0002]
【従来の技術】画像処理方法の一つとして、第１の物体
の画像と第２の物体の画像が与えられたときに、第１の
物体の表面（あるいは輪郭）の質感があたかも第２の物
体の表面（あるいは輪郭）のそれと同じであるかのよう
に見えるように画像合成する手法がある。従来この種の
技術として、例えば、特許番号第２５９９０４０号公報
に記載のように、第１の画像データから抽出した低周波
成分と、第２の画像データから抽出した高周波成分とを
合成することにより第３の画像データを得る方法が知ら
れている。2. Description of the Related Art As one of image processing methods, when an image of a first object and an image of a second object are given, the texture of the surface (or contour) of the first object is as if it were in the second object. There is a method of synthesizing an image so that it looks as if it is the same as that of the surface (or contour) of the object. Conventionally, as this kind of technology, for example, as described in Japanese Patent No. 2599040, by combining a low frequency component extracted from the first image data and a high frequency component extracted from the second image data, A method for obtaining third image data is known.
【０００３】[0003]
【発明が解決しようとする課題】しかしながら、特許番
号第２５９９０４０号公報の画像処理方法では、第２の
画像データから抽出した高周波成分によって画像の表面
の質感やざらつき感を表す成分を抜き出し、第１の画像
データから抽出した低周波成分の画像データ上に抜き出
した成分を重畳し第３の画像データを得ているが、第１
の画像データの高周波成分を利用していないため、第３
の画像データでは高精細な画像が得られないと云う不具
合が生じていた。そこで、本発明が解決しようとする課
題は、第１の画像データの高周波成分と第２の画像デー
タの高周波成分とを加え第３の高周波成分とし、第３の
高周波成分と第１の画像データの低周波成分とから第３
の画像データを生成するようにして、合成画像の画質を
向上する画像処理装置および画像処理方法を提供するこ
とにある。However, in the image processing method disclosed in Japanese Patent No. 2599040, a component representing the texture and roughness of the surface of the image is extracted by using the high-frequency component extracted from the second image data, and the first component is extracted. Although the extracted component is superimposed on the image data of the low-frequency component extracted from the image data of No. 3 to obtain the third image data,
Since the high-frequency component of the image data is not used, the third
However, a problem that a high-definition image cannot be obtained with the image data has occurred. The problem to be solved by the present invention is to add a high-frequency component of the first image data and a high-frequency component of the second image data to obtain a third high-frequency component, and to obtain a third high-frequency component and the first image data. From the low frequency component of
It is an object of the present invention to provide an image processing apparatus and an image processing method for improving the image quality of a composite image by generating the image data of (1).
【０００４】[0004]
【課題を解決するための手段】上記課題を解決するため
に、請求項１記載の発明は、第１の画像データと第２の
画像データとを合成して第３の画像データを得る画像処
理装置において、第１の画像データの高周波成分と第２
の画像データの高周波成分とを加算する高周波成分合成
手段と、前記高周波成分合成手段の出力と第１の画像デ
ータの低周波成分とから第３の画像データを生成する画
像生成手段とを備えたことを特徴としている。また、請
求項２記載の発明は、請求項１記載の画像処理装置にお
いて、高周波成分合成手段は、第１の画像データの高周
波成分を定数倍し、第２の画像データの高周波成分を定
数倍して、定数倍したそれぞれの高周波成分を加算する
ことを特徴としている。また、請求項３記載の発明は、
請求項１または２記載の画像処理装置において、高周波
成分合成手段は、第１の画像データの高周波成分を各々
の周波数に応じた倍数により定数倍し、第２の画像デー
タの高周波成分を各々の周波数に応じた倍数により定数
倍して、定数倍したそれぞれの高周波成分を加算するこ
とを特徴としている。また、請求項４記載の発明は、第
１の画像データと第２の画像データとを合成して第３の
画像データを得る画像処理方法において、第１の画像デ
ータの高周波成分と第２の画像データの高周波成分とを
加算した高周波成分を第３の高周波成分とし、前記第３
の高周波成分と第１の画像データの低周波成分とから第
３の画像データを生成することを特徴としている。ま
た、請求項５記載の発明は、請求項４記載の画像処理方
法において、第１の画像データの高周波成分を定数倍
し、第２の画像の高周波成分を定数倍して、定数倍した
それぞれの高周波成分を加算し、加算した高周波成分を
第３の高周波成分とすることを特徴としている。請求項
６の発明は、請求項４または５記載の画像処理方法にお
いて、第１の画像データの高周波成分を各々の周波数に
応じた倍数により定数倍し、第２の画像データの高周波
成分を各々の周波数に応じた倍数により定数倍して、定
数倍したそれぞれの高周波成分を加算し、加算した高周
波成分を第３の高周波成分とすることを特徴としてい
る。According to a first aspect of the present invention, there is provided an image processing apparatus for synthesizing first image data and second image data to obtain third image data. A high-frequency component of the first image data and a second
High-frequency component synthesizing means for adding the high-frequency component of the image data, and image generating means for generating third image data from the output of the high-frequency component synthesizing means and the low-frequency component of the first image data. It is characterized by: According to a second aspect of the present invention, in the image processing apparatus of the first aspect, the high frequency component synthesizing means multiplies the high frequency component of the first image data by a constant and multiplies the high frequency component of the second image data by a constant. Then, each high-frequency component multiplied by a constant is added. The invention according to claim 3 is:
3. The image processing apparatus according to claim 1, wherein the high-frequency component synthesizing unit multiplies the high-frequency component of the first image data by a constant according to a multiple corresponding to each frequency, and multiplies the high-frequency component of the second image data by each frequency. It is characterized by multiplying a constant by a multiple corresponding to the frequency, and adding the respective high-frequency components multiplied by the constant. According to a fourth aspect of the present invention, in the image processing method of combining the first image data and the second image data to obtain the third image data, the high-frequency component of the first image data and the second image data A high-frequency component obtained by adding the high-frequency component of the image data is referred to as a third high-frequency component.
The third image data is generated from the high-frequency component of the first image data and the low-frequency component of the first image data. According to a fifth aspect of the present invention, in the image processing method of the fourth aspect, the high-frequency component of the first image data is multiplied by a constant, and the high-frequency component of the second image is multiplied by a constant. , And the added high-frequency component is used as a third high-frequency component. According to a sixth aspect of the present invention, in the image processing method according to the fourth or fifth aspect, the high-frequency component of the first image data is multiplied by a constant according to a multiple corresponding to each frequency, and the high-frequency component of the second image data is respectively converted. And a high frequency component multiplied by a constant is added, and the added high frequency component is used as a third high frequency component.
【０００５】上記のように、請求項１記載の発明に係る
画像処理装置では、高周波成分合成手段によって第１の
画像データの高周波成分と第２の画像データの高周波成
分とを加算したものを第３の画像データの高周波成分と
し、画像生成手段によって第１の画像データの低周波成
分と第３の画像データの高周波成分とから第３の画像デ
ータを生成するようにしたので、第３の画像データの中
には第１の画像データと第２の画像データの高周波成分
も含まれており、高精細な合成画像を得ることができ
る。また、請求項２の発明では、請求項１記載の画像処
理装置において、第１の画像データの高周波成分を定数
倍したものと、第２の画像データの高周波成分を定数倍
したものとを高周波成分合成手段によって加算し、加算
したそれぞれの高周波成分を第３の画像データの高周波
成分とみなして、画像生成手段によって第１の画像デー
タの低周波成分と第３の画像データの高周波成分とを合
成して第３の画像データを生成するようにしているの
で、第１の画像データおよび第２の画像データの高周波
成分をそれぞれの画像の特徴に合わせて強調もしくは低
減させた高精細な合成画像を得ることができる。また、
請求項３の発明では、請求項１または２記載の画像処理
装置において、第１の画像データの高周波成分を各々の
周波数に応じた倍数により定数倍したものと、第２の画
像データの高周波成分を各々の周波数に応じた倍数によ
り定数倍したものとを高周波成分合成手段によって加算
し、加算したそれぞれの高周波成分を第３の画像データ
の高周波成分とみなして、画像生成手段によって第１の
画像データの低周波成分と第３の画像データの高周波成
分とを合成して第３の画像データを生成するようにして
いるので、第１の画像データおよび第２の画像データの
高周波成分を各々の周波数に応じて強調もしくは低減さ
せた高精細な合成画像を得ることができる。また、請求
項４の発明に係る画像処理方法によれば、第１の画像デ
ータの高周波成分と第２の画像データの高周波成分とを
加算したものを第３の高周波成分とし、第１の画像デー
タの低周波成分と第３の画像データの高周波成分とから
第３の画像データを生成するようにしているので、第３
の画像データの中には第１の画像データと第２の画像デ
ータの高周波成分も含まれており、高精細な合成画像を
得ることができる。また、請求項５の発明は、請求項４
記載の画像処理方法において、第１の画像データの高周
波成分を定数倍したものと、第２の画像データの高周波
成分を定数倍したものとを加算し、加算したそれぞれの
高周波成分を第３の画像データの高周波成分として、第
１の画像データの低周波成分と第３の画像データの高周
波成分とを合成して第３の画像データを生成するように
しているので、第１の画像データおよび第２の画像デー
タの高周波成分をそれぞれの画像の特徴に合わせて強調
もしくは低減する高精細な合成画像を得ることができ
る。また、請求項６の発明は、請求項４または５記載の
画像処理方法において、第１の画像データの高周波成分
を各々の周波数に応じた倍数により定数倍したものと、
第２の画像データの高周波成分を各々の周波数に応じた
倍数により定数倍したものとを加算し、加算したそれぞ
れの高周波成分を第３の画像データの高周波成分とみな
して、第１の画像データの低周波成分と第３の画像デー
タの高周波成分とを合成して第３の画像データを生成す
るようにしているので、第１の画像データおよび第２の
画像データの高周波成分を各々の周波数に応じて強調も
しくは低減する高精細な合成画像を得ることができる。[0005] As described above, in the image processing apparatus according to the first aspect of the invention, the high-frequency component synthesizing means adds the high-frequency component of the first image data and the high-frequency component of the second image data to the second image data. Since the third image data is generated from the low frequency component of the first image data and the high frequency component of the third image data by the image generating means as the high frequency component of the third image data, The data includes high-frequency components of the first image data and the second image data, and a high-definition composite image can be obtained. According to a second aspect of the present invention, in the image processing apparatus of the first aspect, the high frequency component of the first image data is multiplied by a constant and the high frequency component of the second image data is multiplied by a constant. The high frequency components added by the component synthesizing unit are regarded as the high frequency components of the third image data, and the low frequency components of the first image data and the high frequency components of the third image data are determined by the image generating unit. Since the third image data is generated by synthesis, a high-definition synthesized image in which the high-frequency components of the first image data and the second image data are enhanced or reduced in accordance with the characteristics of each image. Can be obtained. Also,
According to a third aspect of the present invention, in the image processing apparatus according to the first or second aspect, the high frequency component of the first image data is multiplied by a constant according to a multiple corresponding to each frequency, and the high frequency component of the second image data is Are added by a high-frequency component synthesizing means, and the added high-frequency components are regarded as high-frequency components of the third image data, and the first image is generated by the image generating means. Since the third image data is generated by combining the low frequency component of the data and the high frequency component of the third image data, the high frequency components of the first image data and the second image data are A high-definition composite image emphasized or reduced according to the frequency can be obtained. Further, according to the image processing method of the fourth aspect of the present invention, the sum of the high-frequency component of the first image data and the high-frequency component of the second image data is used as the third high-frequency component, Since the third image data is generated from the low frequency component of the data and the high frequency component of the third image data, the third image data is generated.
The image data includes high-frequency components of the first image data and the second image data, so that a high-definition composite image can be obtained. Further, the invention of claim 5 is based on claim 4
In the image processing method described above, a value obtained by multiplying the high-frequency component of the first image data by a constant and a value obtained by multiplying the high-frequency component of the second image data by a constant are added, and the added high-frequency components are added to a third value. As the high frequency component of the image data, the low frequency component of the first image data and the high frequency component of the third image data are combined to generate the third image data. A high-definition composite image in which the high-frequency component of the second image data is enhanced or reduced in accordance with the characteristics of each image can be obtained. According to a sixth aspect of the present invention, in the image processing method according to the fourth or fifth aspect, the high frequency component of the first image data is multiplied by a constant corresponding to a multiple corresponding to each frequency.
A high-frequency component of the second image data is added with a constant multiplied by a multiple corresponding to each frequency, and the added high-frequency component is regarded as a high-frequency component of the third image data. Is synthesized with the high-frequency component of the third image data to generate the third image data, so that the high-frequency components of the first image data and the second image data are , It is possible to obtain a high-definition composite image that is emphasized or reduced according to.
【０００６】[0006]
【発明の実施の形態】次に、本発明の実施の形態を添付
図面に基づいて詳細に説明する。図１は、請求項１の画
像処理装置及び請求項４の画像処理方法に関する実施の
形態の一例を示す機能ブロック図である。この形態例で
は、第２の画像の輪郭を高周波成分の抽出動作によって
抜き出し、第１の画像データに加算して第３の画像デー
タとすることで説明するが、逆に第１の画像の輪郭を高
周波成分の抽出動作によって抜き出し、第２の画像デー
タに加算して第３の画像データとして処理することも、
第１の画像データと第２の画像データを入れ替えただけ
で全く同じことある。図１に示すように、画像処理装置
１０は、第１の画像データと第２の画像データとが入力
され、画像処理装置１０内にて両画像データの必要な周
波数成分を抽出し、両成分を合成して第３の画像データ
として出力する構成になっている。詳細には、画像処理
装置１０に入力された第１の画像データは、低周波成分
抽出部３によって低周波成分が抽出され、後述する画像
生成部２に第１の画像データの低周波成分として導かれ
る。また、第１の画像データは高周波第１抽出部４によ
って高周波成分が抽出され、高周波成分合成部１に伝達
される。一方、画像処理装置１０に入力された第２の画
像データは、高周波第２抽出部５によって高周波成分が
抽出され、高周波成分合成部１に導かれる。また、上述
したように高周波第１抽出部４の出力と高周波第２抽出
部５の出力とが高周波成分合成部１に導かれて、合成さ
せられ、第３の画像データの高周波成分として画像生成
部２に伝達される。画像生成部２では前記低周波成分抽
出部３からの第１の画像データの低周波成分の出力と、
高周波成分合成部１からの第３の画像データの高周波成
分としての出力とから第３の画像データを生成させ、画
像処理装置１０より出力する。DESCRIPTION OF THE PREFERRED EMBODIMENTS Next, embodiments of the present invention will be described in detail with reference to the accompanying drawings. FIG. 1 is a functional block diagram showing an example of an embodiment relating to the image processing apparatus of claim 1 and the image processing method of claim 4. In this embodiment, the outline of the second image is extracted by a high-frequency component extraction operation and added to the first image data to form third image data. However, the outline of the first image is conversely described. Can be extracted by a high-frequency component extraction operation, added to the second image data, and processed as third image data.
There is exactly the same thing except that the first image data and the second image data are interchanged. As shown in FIG. 1, the image processing apparatus 10 receives first image data and second image data, extracts necessary frequency components of both image data in the image processing apparatus 10, Are combined and output as third image data. Specifically, the low-frequency component of the first image data input to the image processing apparatus 10 is extracted by the low-frequency component extraction unit 3, and the low-frequency component is output to the image generation unit 2 described below as the low-frequency component of the first image data. Be guided. Further, high-frequency components are extracted from the first image data by the high-frequency first extracting unit 4 and transmitted to the high-frequency component synthesizing unit 1. On the other hand, high-frequency components are extracted from the second image data input to the image processing device 10 by the second high-frequency extraction unit 5 and guided to the high-frequency component synthesis unit 1. Further, as described above, the output of the first high-frequency extracting unit 4 and the output of the second high-frequency extracting unit 5 are guided to the high-frequency component synthesizing unit 1 and synthesized, and the image is generated as the high-frequency component of the third image data. It is transmitted to the unit 2. The image generation unit 2 outputs the low frequency component of the first image data from the low frequency component extraction unit 3,
The third image data is generated from the output of the third image data as the high frequency component from the high frequency component synthesizing unit 1, and is output from the image processing device 10.
【０００７】次に、画像データから低周波成分を抽出し
たり高周波成分を抽出したりする周波数分解装置の構成
を説明する。図４はウェーブレット変換を用いた周波数
分解装置の構成を例示したものであり、この周波数分解
装置２０では、下記の式（１−１）〜（１−４）に示す
Ｘ方向（主走査方向）とＹ方向（副走査方向）の各々に
対するローパスフィルタｓ（ｘ）、ｓ（ｙ）とハイパス
フィルタｈ（ｘ）、ｈ（ｙ）を用いて周波数分解を行
う。ローパスフィルタｓ（ｘ）, ｓ（ｙ）とハイパスフ
ィルタｈ（ｘ）、ｈ（ｙ）は下記の式（１−１）〜（１
−４）に示す。 ｓ（ｘ）＝（ｘn ＋ｘn+1 ）／２ ・・・・（１−１） ｓ（ｙ）＝（ｙn ＋ｙn+1 ）／２ ・・・・（１−２） ｈ（ｘ）＝ｘn −ｘn+1 ・・・・（１−３） ｈ（ｙ）＝ｙn −ｙn+1 ・・・・（１−４） すなわち、実空間画像信号ｄijは、ローパスフィルタｓ
（ｘ）２１とハイパスフィルタｈ（ｘ）２２により各々
主走査方向の低周波成分と高周波成分の係数信号に分解
された後、ダウンサンプラー２３、２４により１／２に
ダウンサンプリングされ、係数信号ｗ１、ｗ２を得る。
さらに、各々の係数信号ｗ１、ｗ２に対してローパスフ
ィルタｓ（ｙ）２５、２７とハイパスフィルタｈ（ｙ）
２６、２８により副走査方向の低周波成分と高周波成分
の係数信号に分解され、その後ダウンサンプラー２９、
３０、３１、３２により１／２にダウンサンプリングさ
れ、係数信号ＬＬ、ＬＨ、ＨＬ、ＨＨを得る。Next, a description will be given of the configuration of a frequency decomposer for extracting low-frequency components and high-frequency components from image data. FIG. 4 exemplifies a configuration of a frequency decomposition apparatus using a wavelet transform. In this frequency decomposition apparatus 20, the X direction (main scanning direction) shown in the following equations (1-1) to (1-4) is used. And frequency decomposition using low-pass filters s (x) and s (y) and high-pass filters h (x) and h (y) for the X and Y directions (sub-scanning direction). The low-pass filters s (x) and s (y) and the high-pass filters h (x) and h (y) are expressed by the following equations (1-1) to (1).
-4). s (x) = (x n + x n + 1) / 2 ···· (1-1) s (y) = (y n + y n + 1) / 2 ···· (1-2) h ( x) = x n −x n + 1 ... (1-3) h (y) = y n −y n + 1 ... (1-4) That is, the real space image signal d ij is Low pass filter
After being decomposed into low frequency component and high frequency component coefficient signals in the main scanning direction by the (x) 21 and the high-pass filter h (x) 22, the signal is down-sampled by サ ン by the down samplers 23 and 24, and the coefficient signal w 1 , W2.
Furthermore, low-pass filters s (y) 25 and 27 and high-pass filters h (y) are applied to the respective coefficient signals w1 and w2.
The signal is decomposed into low-frequency component and high-frequency component coefficient signals in the sub-scanning direction by 26 and 28, and then down-sampler 29,
Down-sampling is performed by 30, 31, and 32 to obtain coefficient signals LL, LH, HL, and HH.
【０００８】図５（Ａ）は低周波成分抽出のための基本
ウェーブレット関数波形を表し、図４のローパスフィル
タｓ（ｘ）とｓ（ｙ）に該当する。また、図５（Ｂ）は
高周波成分抽出のための基本ウェーブレット関数波形を
表し、図４のハイパスフィルタｈ（ｘ）とｈ（ｙ）に該
当する。また、図１に示した低周波成分と高周波成分の
周波数抽出部に図４の周波数分解装置２０を用いた場合
には、低周波成分抽出部３は、図４に示す周波数分解装
置２０により第１の画像データに対して周波数分解を行
い、低周波成分である信号ＬＬを画像生成部２に出力す
る。同時に、高周波第１抽出部４は周波数分解装置２０
により高周波成分である信号ＬＨ、ＨＬ、ＨＨを高周波
成分合成部１に出力する。また、高周波第２抽出部５は
周波数分解装置２０により第２の画像データに対して周
波数分解を行い、高周波成分である信号ＬＨ、ＨＬ、Ｈ
Ｈを高周波成分合成部１に出力する。さらに、高周波成
分合成部１は、高周波第１抽出部４と高周波第２抽出部
５とから入力された高周波成分に対して、下記の式（２
−１）〜（２−３）を用いて第３の画像データの高周波
成分ＬＨ3 、ＨＬ3 、ＨＨ3 を求め、画像生成部２に出
力させる。FIG. 5A shows a basic wavelet function waveform for extracting low-frequency components, which corresponds to the low-pass filters s (x) and s (y) in FIG. FIG. 5B shows a basic wavelet function waveform for extracting high frequency components, which corresponds to the high-pass filters h (x) and h (y) in FIG. When the frequency decomposing device 20 shown in FIG. 4 is used as the low frequency component and high frequency component frequency extracting unit shown in FIG. 1, the low frequency component extracting unit 3 uses the frequency decomposing device 20 shown in FIG. One image data is subjected to frequency decomposition, and a signal LL, which is a low frequency component, is output to the image generation unit 2. At the same time, the high frequency first extraction unit 4
Thus, the signals LH, HL, and HH, which are high frequency components, are output to the high frequency component synthesizing unit 1. Further, the high frequency second extraction unit 5 performs frequency decomposition on the second image data by the frequency decomposition device 20, and outputs the signals LH, HL, H
H is output to the high frequency component synthesis unit 1. Further, the high frequency component synthesizing unit 1 applies the following formula (2) to the high frequency components input from the first high frequency extracting unit 4 and the second high frequency extracting unit 5.
The high frequency components LH 3 , HL 3 , and HH 3 of the third image data are obtained by using -1) to (2-3), and are output to the image generation unit 2.
【０００９】 ＬＨ3 ＝ＬＨ1 ＋ＬＨ2 ・・・・（２−１） ＨＬ3 ＝ＨＬ1 ＋ＨＬ2 ・・・・（２−２） ＨＨ3 ＝ＨＨ1 ＋ＨＨ2 ・・・・（２−３） 式（２−１）〜（２−３）では、第１の画像データの高
周波成分ＬＨ1 、ＨＬ1 、ＨＨ1 と、第２の画像データ
の高周波成分ＬＨ2 、ＨＬ2 、 ＨＨ 2から第３の画像デ
ータの高周波成分ＬＨ3 、ＨＬ3 、ＨＨ 3を求めてい
る。また、画像生成部２は、低周波成分抽出部３と高周
波成分合成部１とから入力された画像データを、低周波
成分抽出部３からの入力を第３の画像データの低周波成
分と見なし、高周波成分合成部１からの入力を第３の画
像データの高周波成分と見なして、図４で示す周波数分
解装置２０と逆の処理を行う図示しない装置により画像
を生成し、第３の画像データとして画像生成部２から出
力する。図４に示す周波数分解装置２０と逆の処理を行
う装置では、式（３−１）〜（３−４）に示すフィルタ
に対する逆フィルタである式（３−１）〜（３−４）を
用いて処理を行う。 ｘn ＝ ｓ（ｘ）＋ｈ（ｘ）／２ ・・・・（３−１） ｘn+1 ＝ ｓ（ｘ）−ｈ（ｘ）／２ ・・・・（３−２） ｙn ＝ ｓ（ｙ）＋ｈ（ｙ）／２ ・・・・（３−３） ｙn+1 ＝ ｓ（ｙ）−ｈ（ｙ）／２ ・・・・（３−４） 図２は、請求項２の画像処理装置と請求項５の画像処理
方法に関する実施の形態の一例を示す機能ブロック図で
ある。図２において、画像処理装置１０に入力された第
１の画像データは、低周波成分抽出部３によって低周波
成分が抽出され、画像生成部２に第３の画像データの低
周波成分として伝達される。また、第１の画像データは
高周波第１抽出部４によって高周波成分が抽出され、高
周波第１定数倍部６によってさらに定数倍され、高周波
成分合成部１に渡される。一方、画像処理装置１０に入
力された第２の画像データは高周波第２抽出部５によっ
て高周波成分が抽出され、高周波第２定数倍部７によっ
てさらに定数倍され、高周波成分合成部１に導かれる。
また、図２では、請求項２の通り高周波第１定数倍部６
と高周波第２定数倍部７の機能は高周波成分合成部１に
属するようになっているが、別に高周波成分合成部１外
にあっても差し支えない。さらに、高周波成分合成部１
では、上述した高周波第１定数倍部６の出力と高周波第
２定数倍部７の出力とを、下記の式（４−１）〜（４−
３）に示すように合成させ、第３の画像データの高周波
成分ＬＨ3 、ＨＬ3 、ＨＨ3 として画像生成部２に伝達
する。 ＬＨ3 ＝ａＬＨ1 ＋ｂＬＨ2 ・・・・（４−１） ＨＬ3 ＝ａＨＬ1 ＋ｂＨＬ2 ・・・・（４−２） ＨＨ3 ＝ａＨＨ1 ＋ｂＨＨ2 ・・・・（４−３） 画像生成部２は、前記低周波成分抽出部３からの第３の
画像データの低周波成分としての出力と、高周波成分合
成部１の第３の画像データの高周波成分としての出力と
から、図４のような周波数分解装置２０と逆の処理を行
う図示しない装置によって画像を生成し、第３の画像デ
ータとして画像処理装置１０より出力する。ここで、上
記の式（４−１）〜（４−３）で、第１の画像データの
高周波成分ＬＨ1 、ＨＬ1、ＨＨ1と、第２の画像データ
の高周波成分ＬＨ 2、ＨＬ2、ＨＨ 2とから、第３の画像
データの高周波成分ＬＨ3 、ＨＬ3 、ＨＨ3 を求める。
また、この中での定数ａとｂは、それぞれ高周波第１定
数倍部６と高周波第２定数倍部７での定数倍値を示して
いる。請求項１及び４に対応する実施の形態はａ＝１、
ｂ＝１の場合に相当する。定数ａとｂを変えることで出
力画像の高周波成分が変化し、例えば、ｂを大きい値と
することで第２の画像データの高周波成分が強調される
ため、第２の画像の輪郭が強く現れる第３の画像が得ら
れることになる。LH 3 = LH 1 + LH 2 (2-1) HL 3 = HL 1 + HL 2 (2-2) HH 3 = HH 1 + HH 2 (2-3) ) in formulas (2-1) to (2-3), a high frequency component LH 1, HL 1, HH 1 of the first image data, from high frequency component LH 2, HL 2, HH 2 of the second image data The high-frequency components LH 3 , HL 3 , and HH 3 of the third image data are obtained. Further, the image generating unit 2 regards the image data input from the low frequency component extracting unit 3 and the high frequency component synthesizing unit 1 as the low frequency component of the third image data based on the input from the low frequency component extracting unit 3. The input from the high-frequency component synthesizing unit 1 is regarded as a high-frequency component of the third image data, and an image is generated by a device (not shown) that performs a process reverse to that of the frequency decomposition device 20 shown in FIG. Is output from the image generation unit 2. In a device that performs processing reverse to that of the frequency decomposition device 20 illustrated in FIG. 4, Expressions (3-1) to (3-4) that are inverse filters to the filters illustrated in Expressions (3-1) to (3-4) are used. Processing is performed using x n = s (x) + h (x) / 2 ···· (3-1) x n + 1 = s (x) -h (x) / 2 ···· (3-2) y n = s (y) + h (y) / 2 (3-3) yn + 1 = s (y) -h (y) / 2 (3-4) FIG. FIG. 13 is a functional block diagram showing an example of an embodiment relating to an image processing device of the second aspect and an image processing method of the fifth aspect. In FIG. 2, low-frequency components of the first image data input to the image processing apparatus 10 are extracted by the low-frequency component extraction unit 3 and transmitted to the image generation unit 2 as low-frequency components of the third image data. You. The high-frequency component is extracted from the first image data by the high-frequency first extraction unit 4, further multiplied by a constant by the high-frequency first constant multiplication unit 6, and passed to the high-frequency component synthesis unit 1. On the other hand, the second image data input to the image processing apparatus 10 is extracted with a high frequency component by the second high frequency extraction unit 5, further multiplied by a constant by the second high frequency constant multiplication unit 7, and guided to the high frequency component synthesis unit 1. .
In FIG. 2, the high-frequency first constant multiplying unit 6 according to the second aspect is provided.
Although the function of the high frequency second constant multiplying unit 7 belongs to the high frequency component synthesizing unit 1, it may be provided outside the high frequency component synthesizing unit 1. Further, a high frequency component synthesizing unit 1
Then, the output of the high-frequency first constant multiplying unit 6 and the output of the high-frequency second constant multiplying unit 7 are calculated by the following equations (4-1) to (4-
The image data is synthesized as shown in 3) and transmitted to the image generation unit 2 as high frequency components LH 3 , HL 3 , and HH 3 of the third image data. LH 3 = aLH 1 + bLH 2 (4-1) HL 3 = aHL 1 + bHL 2 (4-2) HH 3 = aHH 1 + bHH 2 (4-3) Image generation The unit 2 outputs the third image data from the low-frequency component extraction unit 3 as a low-frequency component and the high-frequency component synthesis unit 1 outputs the third image data as a high-frequency component as shown in FIG. An image is generated by a device (not shown) that performs a process reverse to that of the frequency decomposition device 20 and output from the image processing device 10 as third image data. Here, in the above formulas (4-1) to (4-3), a high frequency component LH 1, HL 1, HH 1 of the first image data, high frequency components LH 2 of the second image data, HL 2 , HH 2 , the high-frequency components LH 3 , HL 3 , and HH 3 of the third image data are obtained.
Further, the constants a and b in these represent the constant multiplication values in the high frequency first constant multiplication unit 6 and the high frequency second constant multiplication unit 7, respectively. An embodiment corresponding to claims 1 and 4 has a = 1,
This corresponds to the case where b = 1. By changing the constants a and b, the high-frequency component of the output image changes. For example, by setting b to a large value, the high-frequency component of the second image data is emphasized, so that the outline of the second image appears strongly. A third image will be obtained.
【００１０】また、上記の説明では、第３の画像データ
のＬＨ、ＨＬ、ＨＨ成分を、第１の画像データの対応す
る成分に対してはａを乗じ、第２の画像データの対応す
る成分に対してはｂを乗じ、両者を加算することで求め
た。しかしながら、各成分に対して別の定数を乗ずるこ
とで求めることもできる。例えば、ＬＨ、ＨＬ成分に対
しては第１の画像データの対応する成分に対してｐを乗
じ、第２の画像データの対応する成分に対してはｑを乗
じて、両者を加算する。さらに、ＨＨ成分に対しては第
１の画像データの対応する成分に対してｒを乗じ、第２
の画像データの対応する成分に対してはｓを乗じて、両
者を加算することで第３の画像データの対応する成分を
求めることもできる。また、図３は請求項３の画像処理
装置１０と請求項６の画像処理方法に関する実施の形態
の一例を示す機能ブロック図である。図２と図３とは基
本的には同じ構成を示している。ただし、請求項２及び
請求項５に対応する図２の例では、高周波第１定数倍部
６と高周波第２定数倍部７は、第１の画像データと第２
の画像データの高周波成分に対して定数倍するように動
作したが、請求項３及び請求項６に対応する図３の例で
は、第１の画像データと第２の画像データの高周波成分
に対して各々の周波数に応じた倍数により定数倍するよ
うに動作することが異なっている。In the above description, the LH, HL, and HH components of the third image data are multiplied by a for the corresponding components of the first image data, and the corresponding components of the second image data are multiplied by a. Was multiplied by b and the two were added. However, it can also be obtained by multiplying each component by another constant. For example, for the LH and HL components, the corresponding component of the first image data is multiplied by p, and for the corresponding component of the second image data, q is multiplied, and both are added. Further, for the HH component, the corresponding component of the first image data is multiplied by r,
The corresponding component of the third image data can be obtained by multiplying the corresponding component of the third image data by s and adding the two. FIG. 3 is a functional block diagram showing an example of an embodiment relating to the image processing apparatus 10 of the third aspect and the image processing method of the sixth aspect. 2 and 3 show basically the same configuration. However, in the example of FIG. 2 corresponding to claim 2 and claim 5, the high-frequency first constant multiplying unit 6 and the high-frequency second constant multiplying unit 7 include the first image data and the second high-frequency constant constant.
In the example of FIG. 3 corresponding to claims 3 and 6, the high frequency components of the first image data and the second image data are However, they are different from each other in that they operate so as to be multiplied by a constant depending on the frequency.
【００１１】図３において、画像処理装置１０に入力さ
れた第１の画像データは、低周波成分抽出部３によって
低周波成分が抽出され、画像生成部２に第３の画像デー
タの低周波成分として伝達される。また、第１の画像デ
ータは高周波第１抽出部４によって高周波成分が抽出さ
れ、さらに高周波第３定数倍部８によって各々の周波数
に応じた倍数により定数倍され、高周波成分合成部１に
伝達される。一方、画像処理装置１０に入力した第２の
画像データは高周波第２抽出部５によって高周波成分が
抽出され、さらに高周波第４定数倍部９によって各々の
周波数に応じた倍数により定数倍され、高周波成分合成
部１に導かれる。また、ここで高周波第１定数倍部６と
高周波第２定数倍部７の機能は高周波成分合成部１に属
する用になっているが、別に高周波成分合成部１外にあ
っても差し支えない。さらに、高周波成分合成部１で
は、上述した高周波第３定数倍部８の出力と高周波第４
定数倍部９との出力とを合成させ、第３の画像データの
高周波成分として画像生成部２に伝達する。画像生成部
２は、前記低周波成分抽出部３からの第３の画像データ
の低周波成分としての出力と、高周波成分合成部１から
の第３の画像データの高周波成分としての出力とから第
３の画像データを生成させ、画像処理装置１０より出力
する。In FIG. 3, a low-frequency component is extracted from a first image data input to an image processing apparatus 10 by a low-frequency component extraction unit 3, and the low-frequency component of the third image data is output to an image generation unit 2. Conveyed as The high-frequency component is extracted from the first image data by the high-frequency first extraction unit 4, further multiplied by a constant corresponding to a frequency according to each frequency by the high-frequency third constant multiplication unit 8, and transmitted to the high-frequency component synthesis unit 1. You. On the other hand, high-frequency components are extracted from the second image data input to the image processing apparatus 10 by the high-frequency second extraction unit 5, and further multiplied by a constant corresponding to each frequency by the high-frequency fourth constant multiplication unit 9. It is led to the component synthesizing unit 1. Although the functions of the first high frequency constant multiplier 6 and the second high frequency constant multiplier 7 belong to the high frequency component synthesizing unit 1, they may be provided outside the high frequency component synthesizing unit 1 separately. Further, in the high frequency component synthesizing unit 1, the output of the high frequency third constant multiplying unit 8 and the high frequency
The output from the constant multiplying unit 9 is synthesized and transmitted to the image generating unit 2 as a high-frequency component of the third image data. The image generation unit 2 outputs the third image data from the low-frequency component extraction unit 3 as a low-frequency component and the third image data from the high-frequency component synthesis unit 1 as a high-frequency component. 3 is generated and output from the image processing apparatus 10.
【００１２】次に、画像データから低周波成分を抽出し
たり、高周波成分を抽出したりする周波数分解装置の構
成例を説明する。図６の周波数分解装置４０は、Ｘ方向
（主走査方向）とＹ方向（副走査方向）の各々に対する
ローパスフィルタｓ（ｘ）、ｓ（ｙ）とハイパスフィル
タｈ（ｘ）、ｈ（ｙ）を用いて周波数分解を行う。実空
間画像信号ｄijは、ローパスフィルタｓ（ｘ）４１とハ
イパスフィルタｈ（ｘ）４２により各々主走査方向の低
周波成分と高周波成分の係数信号に分解された後、ダウ
ンサンプラー４３、４４により１/ ２にダウンサンプリ
ングされ、係数信号ｗ１、ｗ２を得る。さらに、各々の
係数信号ｗ１、ｗ２に対してローパスフィルタｓ（ｙ）
４５、４７とハイパスフィルタｈ（ｙ）４６、４８によ
り副走査方向の低周波成分と高周波成分の係数信号に分
解され、しかる後ダウンサンプラー４９、５０、５１、
５２により１/ ２にダウンサンプリングされ、係数信号
ｗ３、１ＬＨ、１ＨＬ、１ＨＨを得る。さらに、係数信
号ｗ３は主走査方向に対するローパスフィルタｓ（ｘ）
５３とハイパスフィルタｈ（ｘ）５４により各々主走査
方向の低周波成分と高周波成分の係数信号に分解され、
しかる後にダウンサンプラー５５、５６により１／２に
ダウンサンプリングされ、係数信号ｗ４、ｗ５を得る。
次に、係数信号ｗ４、ｗ５のそれぞれに対してローパス
フィルタｓ（ｙ）５７、５９とハイパスフィルタｈ
（ｙ）５８、６０により副走査方向の低周波成分と高周
波成分の係数信号に分解され、その後ダウンサンプラー
６１、６２、６３、６４により１／２にダウンサンプリ
ングされ、係数信号ＬＬ、２ＬＨ、２ＨＬ、２ＨＨを得
る。Next, a description will be given of an example of the configuration of a frequency decomposer for extracting low-frequency components and high-frequency components from image data. The frequency decomposition device 40 in FIG. 6 includes low-pass filters s (x) and s (y) and high-pass filters h (x) and h (y) in the X direction (main scanning direction) and the Y direction (sub scanning direction). Is used to perform frequency decomposition. The real space image signal dij is decomposed into low frequency component and high frequency component coefficient signals in the main scanning direction by a low-pass filter s (x) 41 and a high-pass filter h (x) 42, respectively. The signal is down-sampled by ２ to obtain coefficient signals w1 and w2. Further, a low-pass filter s (y) is applied to each of the coefficient signals w1 and w2.
45, 47 and high-pass filters h (y) 46, 48, which are decomposed into low-frequency component and high-frequency component coefficient signals in the sub-scanning direction, and then down-samplers 49, 50, 51,
The signal is down-sampled by a factor of 52 to obtain coefficient signals w3, 1LH, 1HL, and 1HH. Further, the coefficient signal w3 is a low-pass filter s (x) in the main scanning direction.
53 and a high-pass filter h (x) 54 for decomposing into low frequency component and high frequency component coefficient signals in the main scanning direction, respectively.
Thereafter, down-sampling is performed by the down-samplers 55 and 56 to obtain the coefficient signals w4 and w5.
Next, the low-pass filters s (y) 57 and 59 and the high-pass filter h are applied to the coefficient signals w4 and w5, respectively.
(Y) The signal is decomposed into low-frequency component and high-frequency component coefficient signals in the sub-scanning direction by 58 and 60, and then down-sampled by 1/2 by downsamplers 61, 62, 63 and 64 to obtain coefficient signals LL, 2LH and 2HL. , 2HH.
【００１３】したがって、図３に示した画像処理装置１
０のそれぞれの周波数抽出部に図６のような周波数分解
装置４０を用いた場合には、低周波成分抽出部３は、図
６に示す周波数分解装置４０により第１の画像データに
対して周波数分解を行い、低周波成分である信号ＬＬを
画像生成部２に出力する。また、高周波第１抽出部４は
周波数分解装置４０により高周波成分である信号１Ｌ
Ｈ、１ＨＬ、１ＨＨ、２ＬＨ、２ＨＬ、２ＨＨを抽出
し、さらに高周波第３定数倍部８によって各々の周波数
に応じた倍数により定数倍させ、高周波成分合成部１に
出力する。さらに、高周波第２抽出部５は周波数分解装
置４０により第２の画像データに対して周波数分解を行
い、高周波成分である信号１ＬＨ、１ＨＬ、１ＨＨ、２
ＬＨ、２ＨＬ、２ＨＨを抽出し、さらに高周波第４定数
倍部９によって各々の周波数に応じた倍数により定数倍
させ、高周波成分合成部１に出力する。さらに、高周波
成分合成部１は、高周波第３定数倍部８と高周波第４定
数倍部９とから入力された高周波成分に対して、下記の
式（５−１）〜（５−６）を用いて第３の画像データの
高周波成分を求め、画像生成部２に出力させる。Therefore, the image processing apparatus 1 shown in FIG.
When the frequency decomposer 40 as shown in FIG. 6 is used for each of the frequency extractors 0, the low-frequency component extractor 3 uses the frequency decomposer 40 shown in FIG. The signal is decomposed and the signal LL, which is a low-frequency component, is output to the image generation unit 2. Further, the high frequency first extracting unit 4 uses the frequency decomposing device 40 to output a signal 1L as a high frequency component.
H, 1HL, 1HH, 2LH, 2HL, and 2HH are extracted, further multiplied by a constant corresponding to each frequency by a third high frequency constant multiplying unit 8, and output to the high frequency component synthesizing unit 1. Further, the high-frequency second extraction unit 5 performs frequency decomposition on the second image data by the frequency decomposition device 40, and outputs signals 1LH, 1HL, 1HH,
LH, 2HL, and 2HH are extracted, further multiplied by a constant corresponding to each frequency by a high-frequency fourth constant multiplier 9, and output to the high-frequency component synthesizer 1. Further, the high-frequency component synthesizing unit 1 calculates the following equations (5-1) to (5-6) for the high-frequency components input from the high-frequency third constant multiplication unit 8 and the high-frequency fourth constant multiplication unit 9. The high frequency component of the third image data is obtained by using the image data, and the image generation unit 2 outputs the high frequency component.
【００１４】 １ＬＨ3 ＝ａ×１ＬＨ1 ＋ｂ×１ＬＨ2 ・・・・（５−１） １ＨＬ3 ＝ａ×１ＨＬ1 ＋ｂ×１ＨＬ2 ・・・・（５−２） １ＨＨ3 ＝ａ×１ＨＨ1 ＋ｂ×１ＨＨ2 ・・・・（５−３） ２ＬＨ3 ＝ｃ×２ＬＨ1 ＋ｄ×２ＬＨ2 ・・・・（５−４） ２ＨＬ3 ＝ｃ×２ＨＬ1 ＋ｄ×２ＨＬ2 ・・・・（５−５） ２ＨＨ3 ＝ｃ×２ＨＨ1 ＋ｄ×２ＨＨ2 ・・・・（５−６） また、上記の式（５−１）〜（５−６）では、第１の画
像データの高周波成分１ＬＨ1 、１ＨＬ1 、１ＨＨ1 、
２ＬＨ 1、２ＨＬ1 、２ＨＨ 1と、第２の画像データの
高周波成分１ＬＨ2、１ＨＬ 2、１ＨＨ2、２ＬＨ 2、２Ｈ
Ｌ2、２ＨＨ 2とから、第３の画像データの高周波成分１
ＬＨ3、１ＨＬ 3、１ＨＨ3、２ＬＨ 3、２ＨＬ3、２ＨＨ 3
を求める。また、この中でのａ、ｂ、ｃ，ｄは定数であ
り、実施例の請求項３に基づく画像処理装置１０では高
周波成分を各々の周波数に応じた倍数により定数倍され
るように定められており、実施例の請求項１に基づく画
像処理装置１０ではａ＝１、ｂ＝１、ｃ＝１、ｄ＝１で
ある。画像生成部２は、低周波成分抽出部３からの第３
の画像データの低周波成分としての出力と、高周波成分
合成部１からの第３の画像データの高周波成分としての
出力とから、図６のような周波数分解装置４０と逆の処
理を行う図示しない装置によって画像データを生成し、
第３の画像データとして画像処理装置１０より出力す
る。1LH 3 = a × 1LH 1 + b × 1LH 2 (5-1) 1HL 3 = a × 1HL 1 + b × 1HL 2 (5-2) 1HH 3 = a × 1HH 1 + B × 1HH 2 (5-3) 2LH 3 = c × 2 LH 1 + d × 2 LH 2 (5-4) 2HL 3 = c × 2HL 1 + d × 2HL 2 (5) −5) 2HH 3 = c × 2HH 1 + d × 2HH 2 (5-6) Also, in the above equations (5-1) to (5-6), the high-frequency component 1LH of the first image data 1, 1HL 1, 1HH 1,
2LH 1 , 2HL 1 , 2HH 1 and high frequency components 1LH 2 , 1HL 2 , 1HH 2 , 2LH 2 , 2H of the second image data
From L 2 and 2HH 2 , the high-frequency component 1 of the third image data
LH 3 , 1HL 3 , 1HH 3 , 2LH 3 , 2HL 3 , 2HH 3
Ask for. Further, a, b, c, and d in the above are constants, and in the image processing apparatus 10 according to the third embodiment of the present invention, it is determined that the high frequency component is multiplied by a constant according to a multiple corresponding to each frequency. In the image processing apparatus 10 according to the first embodiment, a = 1, b = 1, c = 1, and d = 1. The image generation unit 2 receives the third
The processing reverse to that of the frequency decomposer 40 as shown in FIG. 6 is performed from the output of the image data as a low-frequency component and the output of the third image data from the high-frequency component synthesizer 1 as a high-frequency component, not shown. Generating image data by the device,
Output from the image processing apparatus 10 as third image data.
【００１５】また、図７（Ａ）〜（Ｄ）は、第１の画像
と第２の画像を合成して第３の画像を得る際に、従来の
画像処理装置または画像処理方法と、請求項１記載の発
明を適用した画像処理装置または画像処理方法とにおい
て、得られた第３の画像を比較したものである。すなわ
ち、図７（Ａ）を第１の画像とし、（Ｂ）を第２の画像
として、両方の画像を従来の画像処理装置または画像処
理方法で合成させたものが図７（Ｃ）であり、請求項１
記載の発明を適用した画像処理装置または画像処理方法
で合成させたものが図７（Ｄ）である。図７（Ｄ）で
は、図７（Ｃ）に較べて第１の画像データの高周波成分
まで利用した画像となっているため、明らかに第１の画
像の人物図がシャープに描かれる。また、図示はしてい
ないが、請求項２または請求項３記載の発明を適用した
画像処理装置または画像処理方法での画像も、従来の画
像処理装置または画像処理方法での画像と較べてみる
と、非常に高精細になっているのが判る。FIGS. 7A to 7D show a conventional image processing apparatus or image processing method when a first image and a second image are combined to obtain a third image. FIG. 9 is a diagram comparing a third image obtained with an image processing apparatus or an image processing method to which the invention described in item 1 is applied. That is, FIG. 7C is a diagram in which FIG. 7A is a first image and FIG. 7B is a second image, and both images are synthesized by a conventional image processing apparatus or image processing method. , Claim 1
FIG. 7D shows an image synthesized by the image processing apparatus or the image processing method to which the described invention is applied. In FIG. 7D, since the image uses the high-frequency components of the first image data as compared to FIG. 7C, the portrait of the first image is clearly drawn. Although not shown, an image obtained by the image processing apparatus or the image processing method to which the invention described in claim 2 or 3 is applied is compared with an image obtained by a conventional image processing apparatus or image processing method. It turns out that it is very high definition.
【００１６】また、図１〜図３の実施の形態では、画像
処理装置１０内に周波数を分解するものを持っているた
め実画像データを入力したが、あらかじめ周波数分解さ
れている画像データを高周波成分合成部１および画像生
成部２に入力して処理することも可能である。また、第
２の画像データの低周波成分は利用しないため、第２の
画像データをあらかじめ周波数分解し高周波成分のみを
保存しておき、利用することで保存のために必要な記憶
領域を少なくできる。また、この実施の形態では画像デ
ータの周波数分解を行うにあたりウェーブレット変換を
用いた。ウェーブレット変換はピラミット構造、即ち高
域になるにつれて帯域幅が広がるように周波数帯域を分
割した特徴を持つものである。このようなピラミット構
造の周波数分解方式をとることで、第１の画像データと
第２の画像データとで周波数分解の階層数が異なってい
る場合においても合成を行うことができる。即ち、第１
の画像データに対しては図４に示す画像処理装置１０に
より低周波成分ＬＬ1および高周波成分１ＬＨ 1、１Ｈ
Ｌ1、１ＨＨ 1を抽出し、第２の画像データに対しては図
６に示す画像処理装置１０により高周波成分２ＬＨ2、２
ＨＬ 2、２ＨＨ2、１ＬＨ 2、１ＨＬ2、１ＨＨ 2を抽出
し、高周波成分合成部１において１ＬＨ3、１ＨＬ 3、１
ＨＨ3を求め、画像生成部２においてＬＬ 1と１ＬＨ
3 、１ＨＬ3 、１ＨＨ 3とから第３の画像データを求め
ることができる。これは、第１の画像データを１ＬＬ、
１ＬＨ、１ＨＬ、１ＨＨと周波数分解し、第２の画像デ
ータを２ＬＬ、２ＬＨ、２ＨＬ、２ＨＨ、１ＬＨ、１Ｈ
Ｌ、１ＨＨと周波数分解し、高周波成分合成部１におい
て１ＬＨ、１ＨＬ、１ＨＨを合成し、画像生成部２で高
周波成分合成部１の出力と第１の画像データの１ＬＬ成
分とから第３の画像データを生成し出力することができ
る。In the embodiment shown in FIGS. 1 to 3, the actual image data is input because the image processing apparatus 10 has a device for resolving the frequency. It is also possible to input to the component synthesizing unit 1 and the image generating unit 2 for processing. Further, since the low-frequency component of the second image data is not used, the second image data is frequency-decomposed in advance and only the high-frequency component is stored, and the storage area required for storage can be reduced by using the high-frequency component. . In this embodiment, a wavelet transform is used to perform frequency decomposition of image data. The wavelet transform has a pyramid structure, that is, a feature in which a frequency band is divided so that the bandwidth increases as the frequency increases. By using such a pyramid-structured frequency decomposition method, synthesis can be performed even when the first image data and the second image data are different in the number of frequency decomposition layers. That is, the first
The image data of the low frequency component LL 1 and the high frequency components 1LH 1 , 1H
L 1 and 1HH 1 are extracted, and high-frequency components 2LH 2 , 2H 2 are extracted from the second image data by the image processing apparatus 10 shown in FIG.
HL 2 , 2HH 2 , 1LH 2 , 1HL 2 , and 1HH 2 are extracted, and 1 LH 3 , 1HL 3 , 1
HH 3 is obtained, and LL 1 and 1LH
The third image data can be obtained from 3 , 1HL 3 and 1HH 3 . This means that the first image data is 1LL,
The frequency is decomposed into 1LH, 1HL, and 1HH, and the second image data is divided into 2LL, 2LH, 2HL, 2HH, 1LH, and 1H.
L, 1HH, and the high frequency component synthesizing unit 1 synthesizes 1LH, 1HL, and 1HH, and the image generating unit 2 calculates the third image from the output of the high frequency component synthesizing unit 1 and the 1LL component of the first image data. Data can be generated and output.
【００１７】また逆に、第１の画像データに対しては図
６に示す画像処理装置１０により低周波成分ＬＬ1 およ
び高周波成分２ＬＨ1 、２ＨＬ 1、２ＨＨ1 、１ＬＨ
1、１ＨＬ1 、１ＨＨ 1を抽出し、第２の画像データに
対しては図４に示す画像処理装置１０により高周波成分
１ＬＨ2 、１ＨＬ2 、１ＨＨ2 を抽出し、高周波成分合
成部１において１ＬＨ 3、１ＨＬ3 、１ＨＨ 3を求め、
画像生成部２においてＬＬ1、２ＬＨ 1、２ＨＬ1、２ＨＨ
1と１ＬＨ3、１ＨＬ 3、１ＨＨ3 とから第３の画像デー
タを求めることができる。これは、第１の画像データを
２ＬＬ、２ＬＨ、２ＨＬ、２ＨＨ、１ＬＨ、１ＨＬ、１
ＨＨと周波数分解し、第２の画像データを１ＬＬ、１Ｌ
Ｈ、１ＨＬ、１ＨＨと周波数分解し、高周波成分合成部
１において１ＬＨ、１ＨＬ、１ＨＨを合成し、画像生成
部２で高周波成分合成部１の出力と第１の画像データの
２ＬＬ、２ＬＨ、２ＨＬ、２ＨＨ成分とから第３の画像
データを生成し出力することができる。また、上述した
実施の形態の例では画像データの周波数分解を行うにあ
たり、図４と図６および式（１−１）〜（１−４）に示
すウェーブレット変換を用いたが、離散余弦変換等の他
の周波数分割方法を用いることが可能である。Conversely, for the first image data, a low frequency component LL 1 and high frequency components 2LH 1 , 2HL 1 , 2HH 1 and 1LH are processed by the image processing apparatus 10 shown in FIG.
1 , 1HL 1 and 1HH 1 are extracted, and high-frequency components 1LH 2 , 1HL 2 and 1HH 2 are extracted from the second image data by the image processing device 10 shown in FIG. 3 , 1HL 3 , 1HH 3 ,
LL 1 , 2LH 1 , 2HL 1 , 2HH
Third image data can be obtained from 1 and 1LH 3 , 1HL 3 , 1HH 3 . This means that the first image data is 2LL, 2LH, 2HL, 2HH, 1LH, 1HL,
HH and the second image data is 1LL, 1L
H, 1HL, and 1HH, and the high-frequency component synthesizing unit 1 synthesizes 1LH, 1HL, and 1HH, and the image generation unit 2 outputs the output of the high-frequency component synthesizing unit 1 and 2LL, 2LH, and 2HL of the first image data. Third image data can be generated and output from the 2HH component. Further, in the example of the embodiment described above, when performing the frequency decomposition of the image data, the wavelet transform shown in FIGS. 4 and 6 and the equations (1-1) to (1-4) is used. Other frequency division methods can be used.
【００１８】[0018]
【発明の効果】以上のように、本発明は以下のような優
れた効果を発揮する。請求項１記載の発明に係る画像処
理装置によれば、高周波成分合成手段により第１の画像
データの高周波成分と第２の画像データの高周波成分と
を加算し、画像生成手段により高周波成分合成手段の出
力と第１の画像データの低周波成分とから第３の画像デ
ータを生成するように構成したことにより、第１の画像
データの低周波成分と第３の画像データの高周波成分と
から生成された第３の画像データには、第２の画像デー
タの高周波成分だけでなく第１の画像データの高周波成
分も含まれるようになるので、高精細な合成画像を得る
ことができるようになった。また、請求項２記載の発明
では、請求項１の効果に加え、第３の画像データは、第
１の画像データの低周波成分と、第１の画像データおよ
び第２の画像データの高周波成分を強調もしくは低減さ
せ加算させた高周波成分とから生成されるので、第１画
像および第２画像の特徴を活かした高精細な合成画像が
得られるようになった。また、請求項３記載の発明で
は、請求項１または２の効果に加え、第３の画像データ
は、第１の画像データの低周波成分と、第１および第２
の画像データの高周波成分を各々の周波数に応じて強調
もしくは低減させ加算させた高周波成分とから生成され
るので、第１画像および第２画像の特徴をより活かした
高精細な合成画像が得られるようになった。また、請求
項４記載の発明に係る画像処理方法によれば、第１の画
像データの低周波成分と第３の画像データの高周波成分
とから生成された第３の画像データは、第２の画像デー
タの高周波成分だけでなく第１の画像データの高周波成
分も含まれるようになるので、高精細な合成画像が得ら
れるようになった。また、請求項５記載の発明によれ
ば、請求項４の効果に加え、第３の画像データは、第１
の画像データの低周波成分と、第１の画像データおよび
第２の画像データの高周波成分を強調もしくは低減させ
加算させた高周波成分とから生成されるので、第１画像
および第２画像の特徴を活かした高精細な合成画像が得
られるようになった。また、請求項６記載の発明によれ
ば、請求項４または５の効果に加えて、第３の画像デー
タは、第１の画像データの低周波成分と、第１の画像デ
ータおよび第２の画像データの高周波成分を各々の周波
数に応じて強調もしくは低減させ加算させた高周波成分
とから生成されるので、第１画像および第２画像の特徴
をより活かした高精細な合成画像が得られるようになっ
た。As described above, the present invention exhibits the following excellent effects. According to the image processing apparatus of the first aspect, the high frequency component of the first image data and the high frequency component of the second image data are added by the high frequency component synthesizing unit, and the high frequency component synthesizing unit is added by the image generating unit. Is configured to generate the third image data from the output of the first image data and the low frequency component of the first image data, thereby generating the third image data from the low frequency component of the first image data and the high frequency component of the third image data. Since the obtained third image data includes not only the high frequency component of the second image data but also the high frequency component of the first image data, a high-definition composite image can be obtained. Was. According to the second aspect of the invention, in addition to the effect of the first aspect, the third image data includes a low frequency component of the first image data and a high frequency component of the first image data and the second image data. Is generated from high-frequency components obtained by emphasizing or reducing and adding, so that a high-definition composite image utilizing the features of the first image and the second image can be obtained. According to the third aspect of the present invention, in addition to the effects of the first or second aspect, the third image data includes a low-frequency component of the first image data and the first and second frequency components.
Is generated from the high-frequency component of the image data of the first image and the high-frequency component obtained by adding the emphasized or reduced high-frequency components according to the respective frequencies, so that a high-definition composite image that further utilizes the features of the first image and the second image is obtained. It became so. According to the image processing method of the fourth aspect, the third image data generated from the low-frequency component of the first image data and the high-frequency component of the third image data is the second image data. Since not only the high-frequency component of the image data but also the high-frequency component of the first image data is included, a high-definition composite image can be obtained. According to the fifth aspect of the present invention, in addition to the effect of the fourth aspect, the third image data includes the first image data.
Are generated from the low-frequency component of the image data and the high-frequency component obtained by enhancing or reducing the high-frequency components of the first image data and the second image data, and adding the characteristics of the first image and the second image. Utilizing high-definition composite images can now be obtained. According to the sixth aspect of the invention, in addition to the effect of the fourth or fifth aspect, the third image data includes a low-frequency component of the first image data and the first image data and the second image data. Since the high-frequency components of the image data are generated from the high-frequency components that are emphasized or reduced according to the respective frequencies and added, a high-definition composite image that further utilizes the features of the first image and the second image can be obtained. Became.
【図１】請求項１及び請求項４に対応する実施の形態の
一例を示す機能ブロック図である。FIG. 1 is a functional block diagram showing an example of an embodiment corresponding to claims 1 and 4;
【図２】請求項２及び請求項５に対応する実施の形態の
一例を示す機能ブロック図である。FIG. 2 is a functional block diagram showing an example of an embodiment corresponding to claims 2 and 5;
【図３】請求項３及び請求項６に対応する実施の形態の
一例を示す機能ブロック図である。FIG. 3 is a functional block diagram showing an example of an embodiment corresponding to claims 3 and 6;
【図４】画像データに対して周波数分解を行う周波数分
解装置の詳細なブロック図である。FIG. 4 is a detailed block diagram of a frequency decomposition device that performs frequency decomposition on image data.
【図５】（Ａ）は低周波成分抽出のための基本ウェーブ
レット関数の説明図、（Ｂ）は高周波成分抽出のための
基本ウェーブレット関数の説明図である。5A is an explanatory diagram of a basic wavelet function for extracting low frequency components, and FIG. 5B is an explanatory diagram of a basic wavelet function for extracting high frequency components.
【図６】画像データに対して周波数分解を行う他の周波
数分解装置の詳細なブロック図である。FIG. 6 is a detailed block diagram of another frequency decomposition device that performs frequency decomposition on image data.
【図７】（Ａ）は合成前の第１画像の説明図、（Ｂ）は
合成前の第２画像の説明図、（Ｃ）は従来の画像処理装
置または画像処理方法によって第１画像と第２画像を合
成した画像の説明図、（Ｄ）は本発明の画像処理装置ま
たは画像処理方法によって第１画像と第２画像を合成し
た画像の説明図である。7A is an explanatory diagram of a first image before composition, FIG. 7B is an explanatory diagram of a second image before composition, and FIG. 7C is a diagram illustrating the first image by a conventional image processing apparatus or image processing method. FIG. 2D is an explanatory diagram of an image obtained by synthesizing the second image, and FIG. 2D is an explanatory diagram of an image obtained by synthesizing the first image and the second image by the image processing device or the image processing method of the present invention.
１ 高周波成分合成部（高周波成分合成手段）、２
画像生成部（画像生成手段）、３ 低周波成分抽出部、
４ 高周波第１抽出部、５ 高周波第２抽出部、６
高周波第１定数倍部、７ 高周波第２定数倍部、８
高周波第３定数倍部、９ 高周波第４定数倍部、１０
画像処理装置。1. High frequency component synthesizing section (high frequency component synthesizing means), 2
Image generation unit (image generation means), 3 low frequency component extraction unit,
4 High frequency first extractor, 5 High frequency second extractor, 6
High frequency first constant multiple part, 7 High frequency second constant multiple part, 8
High frequency third constant multiple part, 9 High frequency fourth constant multiple part, 10
Image processing device.
───────────────────────────────────────────────────── フロントページの続き (72)発明者 大久保 宏美 東京都大田区中馬込一丁目３番６号 株式 会社リコー内 (72)発明者 芝木 弘幸 東京都大田区中馬込一丁目３番６号 株式 会社リコー内 (72)発明者 山崎 由希子 東京都大田区中馬込一丁目３番６号 株式 会社リコー内 ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Hiromi Okubo 1-3-6 Nakamagome, Ota-ku, Tokyo Inside Ricoh Co., Ltd. (72) Inventor Hiroyuki Shibaki 1-3-6 Nakamagome, Ota-ku, Tokyo Inside Ricoh Co., Ltd. (72) Inventor Yukiko Yamazaki 1-3-6 Nakamagome, Ota-ku, Tokyo Inside Ricoh Co., Ltd.
Claims (6)
を合成して第３の画像データを得る画像処理装置におい
て、第１の画像データの高周波成分と第２の画像データ
の高周波成分とを加算する高周波成分合成手段と、前記
高周波成分合成手段の出力と第１の画像データの低周波
成分とから第３の画像データを生成する画像生成手段と
を備えたことを特徴とする画像処理装置。An image processing apparatus for obtaining third image data by synthesizing first image data and second image data, comprising: a high-frequency component of the first image data and a high-frequency component of the second image data. And an image generating means for generating third image data from an output of the high frequency component synthesizing means and a low frequency component of the first image data. Processing equipment.
高周波成分合成手段は、第１の画像データの高周波成分
を定数倍し、第２の画像データの高周波成分を定数倍し
て、定数倍したそれぞれの高周波成分を加算することを
特徴とする画像処理装置。2. The image processing apparatus according to claim 1, wherein
Image processing means for multiplying the high-frequency component of the first image data by a constant, multiplying the high-frequency component of the second image data by a constant, and adding the high-frequency components multiplied by the constant; apparatus.
おいて、高周波成分合成手段は、第１の画像データの高
周波成分を各々の周波数に応じた倍数により定数倍し、
第２の画像データの高周波成分を各々の周波数に応じた
倍数により定数倍して、定数倍したそれぞれの高周波成
分を加算することを特徴とする画像処理装置。3. The image processing apparatus according to claim 1, wherein the high frequency component synthesizing unit multiplies the high frequency component of the first image data by a constant according to a multiple corresponding to each frequency.
An image processing apparatus, wherein a high-frequency component of second image data is multiplied by a constant according to a multiple corresponding to each frequency, and the high-frequency components multiplied by the constant are added.
を合成して第３の画像データを得る画像処理方法におい
て、第１の画像データの高周波成分と第２の画像データ
の高周波成分とを加算した高周波成分を第３の高周波成
分とし、前記第３の高周波成分と第１の画像データの低
周波成分とから第３の画像データを生成することを特徴
とする画像処理方法。4. A high-frequency component of the first image data and a high-frequency component of the second image data in an image processing method for combining the first image data and the second image data to obtain third image data. A third high-frequency component obtained by adding the first and second high-frequency components to generate a third image data from the third high-frequency component and a low-frequency component of the first image data.
第１の画像データの高周波成分を定数倍し、第２の画像
の高周波成分を定数倍して、定数倍したそれぞれの高周
波成分を加算し、加算した高周波成分を第３の高周波成
分とすることを特徴とする画像処理方法。5. The image processing method according to claim 4, wherein
Multiplying the high-frequency component of the first image data by a constant, multiplying the high-frequency component of the second image by a constant, add the constant-multiplied high-frequency components, and use the added high-frequency component as a third high-frequency component An image processing method characterized by the following.
おいて、第１の画像データの高周波成分を各々の周波数
に応じた倍数により定数倍し、第２の画像データの高周
波成分を各々の周波数に応じた倍数により定数倍して、
定数倍したそれぞれの高周波成分を加算し、加算した高
周波成分を第３の高周波成分とすることを特徴とする画
像処理方法。6. The image processing method according to claim 4, wherein the high-frequency component of the first image data is multiplied by a constant according to a multiple corresponding to each frequency, and the high-frequency component of the second image data is multiplied by each frequency. Multiplied by a constant according to the multiple according to
An image processing method characterized by adding respective high-frequency components multiplied by a constant and using the added high-frequency component as a third high-frequency component.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13269998A JP3691247B2 (en) | 1998-04-27 | 1998-04-27 | Image processing apparatus and image processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13269998A JP3691247B2 (en) | 1998-04-27 | 1998-04-27 | Image processing apparatus and image processing method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH11313205A true JPH11313205A (en) | 1999-11-09 |
| JP3691247B2 JP3691247B2 (en) | 2005-09-07 |
Family
ID=15087493
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13269998A Expired - Fee Related JP3691247B2 (en) | 1998-04-27 | 1998-04-27 | Image processing apparatus and image processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3691247B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100407784C (en) * | 2002-11-11 | 2008-07-30 | 佳能株式会社 | Image processing apparatus and method |
| US7706583B2 (en) | 2002-11-11 | 2010-04-27 | Canon Kabushiki Kaisha | Image processing apparatus and method |
| JP2016134075A (en) * | 2015-01-21 | 2016-07-25 | 日本放送協会 | Super-resolution device and program |
| US10438327B2 (en) | 2016-09-08 | 2019-10-08 | Fujifilm Corporation | Image processing apparatus, image processing method, and image processing program |
-
1998
- 1998-04-27 JP JP13269998A patent/JP3691247B2/en not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100407784C (en) * | 2002-11-11 | 2008-07-30 | 佳能株式会社 | Image processing apparatus and method |
| US7706583B2 (en) | 2002-11-11 | 2010-04-27 | Canon Kabushiki Kaisha | Image processing apparatus and method |
| JP2016134075A (en) * | 2015-01-21 | 2016-07-25 | 日本放送協会 | Super-resolution device and program |
| US10438327B2 (en) | 2016-09-08 | 2019-10-08 | Fujifilm Corporation | Image processing apparatus, image processing method, and image processing program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3691247B2 (en) | 2005-09-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Eslami et al. | Translation-invariant contourlet transform and its application to image denoising | |
| US6215908B1 (en) | Symmetric filtering based VLSI architecture for image compression | |
| Fowler | The redundant discrete wavelet transform and additive noise | |
| TW451160B (en) | A DWT-based up-sampling algorithm suitable for image display in an LCD panel | |
| TWI556227B (en) | Systems and methods for generating a high frequency component of a signal from a low frequency component of the signal, a set-top box, a computer program product and storage medium thereof | |
| CN110889895B (en) | Face video super-resolution reconstruction method fusing single-frame reconstruction network | |
| JP5640071B2 (en) | Image enlargement apparatus, image enlargement program, storage medium storing image enlargement program, and display apparatus | |
| US6553396B1 (en) | Filter bank constituting method and filter bank apparatus | |
| CN113066033A (en) | Multi-stage denoising system and method for color image | |
| Agrawal et al. | Image resolution enhancement using lifting wavelet and stationary wavelet transform | |
| Karunakar et al. | Discrete wavelet transform-based satellite image resolution enhancement | |
| Khalil | Applying quaternion Fourier transforms for enhancing color images | |
| JPH11313205A (en) | Image processing unit and image processing method | |
| JP6165491B2 (en) | Image processing apparatus and image processing method | |
| CN102269824A (en) | Phase conversion processing method for wavelet of seismic data | |
| US12087267B2 (en) | Method and system for implementing a modal processor | |
| JP2007280202A (en) | Image processing method and device using wavelet transformation | |
| Demirel et al. | Video resolution enhancement by using complex wavelet transform | |
| JP3977661B2 (en) | Filter coefficient conversion method and filter coefficient conversion apparatus | |
| JP2003283839A (en) | Image transforming method and apparatus | |
| JP2000215305A (en) | Image expanding device | |
| Jarande et al. | Comparative analysis of image enhancement techniques | |
| Hsung et al. | Generalized discrete multiwavelet transform with embedded orthogonal symmetric prefilter bank | |
| TWI783834B (en) | Super-resolution image processing method and system thereof | |
| Fahmy | Fast Multiplier-less Implementation of Bspline Basis with Enhanced Compression Performance |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050223 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050322 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050523 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050613 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050615 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080624 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090624 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090624 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100624 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110624 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |