【特許請求の範囲】
【請求項１】 互いに連続する第１のフレーム及び第２のフレームを入力する入力手段と、
該第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部及び該第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数の一部から、Ｎ×Ｎの新たな直交変換係数を生成し、該新たな直交変換係数に基づいて補間画像を生成する合成手段と、
前記補間画像及び該第２のフレームを用いて該第１のフレーム及び該第２のフレームよりも高い高解像度の画像を形成する生成手段とを備えることを特徴とする画像処理装置。
【請求項２】 前記第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部は高周波成分であり、前記第２のフレーム内のＮ×Ｎ画素のｐ個のブロックを直交変換することで得られた直交変換係数の一部は低周波成分であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】 前記合成手段は、前記ｐ個のブロックを直交変換することで得られたｐ個の直交変換係数の低周波領域から１つの合成された低周波領域を算出することを特徴とする請求項１に記載の画像処理装置。
【請求項４】 前記ｐは４であり、前記第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数は、前記第２のフレーム内のＮ×Ｎ画素の第１のブロックの直交変換係数並びに該第１のブロックを左右及び／又は上下１画素ずらせた第２、第３及び第４のブロックの直交変換係数を合成することで得られることを特徴とする請求項１に記載の画像処理装置。
【請求項５】 さらに、前記第１のフレームと前記第２のフレームとの相対位置を検出する検出手段を備え、前記ｐ個のブロックは、該相対位置に基づいて得られることを特徴とする前記請求項１に記載の画像処理装置。
【請求項６】 前記合成手段は前記合成された直交変換係数を逆直交変換して補間画像を生成することを特徴とする請求項１に記載の画像処理装置。
【請求項７】 互いに連続する第１のフレーム及び第２のフレームを入力する入力工程と、
該第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部及び該第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数の一部から、Ｎ×Ｎの新たな直交変換係数を生成し、該新たな直交変換係数に基づいて補間画像を生成する合成工程と、
前記補間画像及び該第２のフレームを用いて該第１のフレーム及び該第２のフレームよりも高い高解像度の画像を形成する生成工程とを備えることを特徴とする画像処理方法。
【請求項８】 コンピュータに、
互いに連続する第１のフレーム及び第２のフレームを入力する入力手順と、
該第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部及び該第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数の一部から、Ｎ×Ｎの新たな直交変換係数を生成し、該新たな直交変換係数に基づいて補間画像を生成する合成手順と、
前記補間画像及び該第２のフレームを用いて該第１のフレーム及び該第２のフレームよりも高い高解像度の画像を形成する生成手順とを実行させるためのプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
[Claims]
1. An input means for inputting a first frame and a second frame that are continuous with each other.
A part of the orthogonal transformation coefficient obtained by orthogonally converting the blocks of N × N pixels in the first frame and p blocks (p ≧ 1) of N × N pixels in the second frame. A synthesis means that generates a new orthogonal transformation coefficient of N × N from a part of the orthogonal transformation coefficients obtained by orthogonal transformation of, and generates an interpolated image based on the new orthogonal transformation coefficient.
An image processing apparatus comprising the interpolated image and a generation means for forming a high-resolution image higher than the first frame and the second frame by using the second frame.
2. A part of the orthogonal transformation coefficient obtained by orthogonally converting a block of N × N pixels in the first frame is a high frequency component, and the N × N pixels in the second frame. The image processing apparatus according to claim 1, wherein a part of the orthogonal transformation coefficients obtained by orthogonally converting the p blocks of the above is a low frequency component.
3. The synthesis means is characterized in that one synthesized low frequency region is calculated from a low frequency region of p orthogonal conversion coefficients obtained by orthogonally converting the p blocks. The image processing apparatus according to claim 1.
4. The orthogonal conversion coefficient obtained by orthogonally converting p (p ≧ 1) blocks of N × N pixels in the second frame is the second. The orthogonal transformation coefficient of the first block of N × N pixels in the frame and the orthogonal transformation coefficient of the second, third, and fourth blocks in which the first block is shifted left and right and / or up and down by one pixel are combined. The image processing apparatus according to claim 1, wherein the image processing apparatus can be obtained.
5. Further, a detection means for detecting a relative position between the first frame and the second frame is provided, and the p blocks are obtained based on the relative position. The image processing apparatus according to claim 1.
6. The image processing apparatus according to claim 1, wherein the synthesizing means inversely orthogonally transforms the synthesized orthogonal transformation coefficients to generate an interpolated image.
7. An input step of inputting a first frame and a second frame that are continuous with each other.
A part of the orthogonal transformation coefficient obtained by orthogonally converting the blocks of N × N pixels in the first frame and p blocks (p ≧ 1) of N × N pixels in the second frame. A new orthogonal transformation coefficient of N × N is generated from a part of the orthogonal transformation coefficients obtained by orthogonal transformation, and an interpolated image is generated based on the new orthogonal transformation coefficient.
An image processing method comprising a generation step of forming an image having a higher resolution than the first frame and the second frame by using the interpolated image and the second frame.
8. To a computer
An input procedure for inputting a first frame and a second frame that are continuous with each other,
A part of the orthogonal transformation coefficient obtained by orthogonally converting the blocks of N × N pixels in the first frame and p blocks (p ≧ 1) of N × N pixels in the second frame. A new orthogonal transformation coefficient of N × N is generated from a part of the orthogonal transformation coefficients obtained by orthogonal transformation, and an interpolated image is generated based on the new orthogonal transformation coefficient.
It is characterized in that a program for executing a generation procedure for forming a high-resolution image higher than the first frame and the second frame by using the interpolated image and the second frame is recorded. A computer-readable recording medium.
【００２１】
【課題を解決するための手段】
本発明に係る画像処理装置は、互いに連続する第１のフレーム及び第２のフレームを入力する入力手段と、該第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部及び該第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数の一部から、Ｎ×Ｎの新たな直交変換係数を生成し、該新たな直交変換係数に基づいて補間画像を生成する合成手段と、前記補間画像及び該第２のフレームを用いて該第１のフレーム及び該第２のフレームよりも高い高解像度の画像を形成する生成手段とを備えることを特徴とする。
0021.
[Means for solving problems]
The image processing apparatus according to the present invention is obtained by orthogonally converting an input means for inputting a first frame and a second frame that are continuous with each other and a block of N × N pixels in the first frame. A new N × N is obtained from a part of the orthogonal transformation coefficient and a part of the orthogonal transformation coefficient obtained by orthogonally converting p (p ≧ 1) blocks of N × N pixels in the second frame. Orthogonal conversion coefficient is generated, and an interpolated image is generated based on the new orthogonal transformation coefficient, and the interpolated image and the second frame are used from the first frame and the second frame. It is also characterized in that it is provided with a generation means for forming a high-resolution image.
また、本発明に係る画像処理方法は、互いに連続する第１のフレーム及び第２のフレームを入力する入力工程と、該第１のフレーム内のＮ×Ｎ画素のブロックを直交変換することで得られた直交変換係数の一部及び該第２のフレーム内のＮ×Ｎ画素のｐ個（ｐ≧１）のブロックを直交変換することで得られた直交変換係数の一部から、Ｎ×Ｎの新たな直交変換係数を生成し、該新たな直交変換係数に基づいて補間画像を生成する合成工程と、前記補間画像及び該第２のフレームを用いて該第１のフレーム及び該第２のフレームよりも高い高解像度の画像を形成する生成工程とを備えることを特徴とする。
Further, the image processing method according to the present invention is obtained by orthogonally converting an input step of inputting a first frame and a second frame that are continuous with each other and a block of N × N pixels in the first frame. N × N from a part of the obtained orthogonal transformation coefficient and a part of the orthogonal transformation coefficient obtained by orthogonally converting p (p ≧ 1) blocks of N × N pixels in the second frame. A synthesis step of generating a new orthogonal transformation coefficient of the above and generating an interpolated image based on the new orthogonal transformation coefficient, and the first frame and the second frame using the interpolated image and the second frame. It is characterized by including a generation step of forming a high-resolution image higher than a frame.