JP2001238209A - Time space and control method, time spatial filter, and storage medium recording time space band limit program - Google Patents

Time space and control method, time spatial filter, and storage medium recording time space band limit program

Info

Publication number
JP2001238209A
JP2001238209A JP2000042878A JP2000042878A JP2001238209A JP 2001238209 A JP2001238209 A JP 2001238209A JP 2000042878 A JP2000042878 A JP 2000042878A JP 2000042878 A JP2000042878 A JP 2000042878A JP 2001238209 A JP2001238209 A JP 2001238209A
Authority
JP
Japan
Prior art keywords
edge
pixel
filter
interest
density
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000042878A
Other languages
Japanese (ja)
Inventor
Hideaki Kimata
英明 木全
Yoshiyuki Yashima
由幸 八島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2000042878A priority Critical patent/JP2001238209A/en
Publication of JP2001238209A publication Critical patent/JP2001238209A/en
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Picture Signal Circuits (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a time spatial filter that increase an information amount whose band is limited even from a video image including multiple edge pixels at the outside of a target area. SOLUTION: An edge detection section 103 detects an edge of a received image and an edge information storage section 104 stores edge information. An edge density measurement section 105 measures the edge density of an edge pixel and an edge target area discrimination section 105 determines whether or not the edge pixel is in a target area. When the edge pixel is in the target area, a filter control section 107 sets a frequency characteristic of a filter F1 to a characteristic C1. When the edge pixel is in a non-target area, the filter control section 107 sets the frequency characteristic of the filter F1 to a characteristic C2. A filter selection section 108 selects the filter F1 when a pixel receiving filtering is an edge pixel. The filter selection section 108 selects a filter F2 when a pixel receiving filtering is not an edge pixel.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は動画像信号の帯域制
限方法およびフィルタ装置に関する。
[0001] 1. Field of the Invention [0002] The present invention relates to a band limiting method and a filter device for a moving image signal.

【0002】[0002]

【従来の技術】一般に、画像の高周波成分は視覚に与え
る影響が少ないため、高周波成分を削除しても視覚的な
劣化は少ない。このため動画像の符号化において、符号
化前に予め入力画像にフィルタを施して帯域を制限する
ことにより、符号化効率を向上させることが行われてい
る。
2. Description of the Related Art In general, since high-frequency components of an image have little effect on vision, even if high-frequency components are deleted, visual deterioration is small. For this reason, in coding moving images, it has been practiced to improve the coding efficiency by applying a filter to the input image in advance before coding to limit the band.

【0003】帯域を制限するフィルタには、画面内画素
間の相関を利用する空間フィルタとフレーム間画素間の
相関を利用する時間フィルタがある。
[0003] Filters that limit the band include a spatial filter that uses correlation between pixels in a screen and a time filter that uses correlation between pixels between frames.

【0004】このうち、空間フィルタの1つには移動平
均フィルタがある。このフィルタでは、図9に示すよう
に、求める画素を中心とした、縦N画素、横N画素(Nタ
ップ)の正方形の領域を設定し、その正方形に含まれる
画素の画像情報を式(1)に示す重み付け加算をするこ
とによって、その画素の画像情報を求める。この処理を
画面内の各画素に施すことによって、画面全体に移動平
均フィルタを施す。このフィルタの周波数特性はタップ
数Nと重み付け係数Wによって特徴付けられ、帯域制限後
の視覚特性はこれらの値に依存する。一般的にタップ数
Nが大きいほど広範囲な画素の平均となるため、隣り合
う画素間の差が少なくなり、より高周波成分が削除され
る。
One of the spatial filters is a moving average filter. In this filter, as shown in FIG. 9, a square area of N pixels vertically and N pixels horizontally (N taps) is set around the pixel to be obtained, and the image information of the pixels included in the square is expressed by the formula (1). ) Is performed to obtain image information of the pixel. By performing this process on each pixel in the screen, a moving average filter is applied to the entire screen. The frequency characteristic of this filter is characterized by the number of taps N and the weighting coefficient W, and the visual characteristic after band limitation depends on these values. Generally the number of taps
As N is larger, the average of a wider range of pixels is averaged, so the difference between adjacent pixels is reduced, and higher frequency components are deleted.

【0005】[0005]

【数1】 さらに、隣接画素間の画像情報が大きく変化するエッジ
は、一般的に顕著な視覚的情報を与えることから注目領
域と考えられる。そのため、画像の視覚的品質を維持す
るためにエッジを保存しつつ、帯域制限するエッジ保存
型フィルタもある。また、エッジ画素とその他の画素と
で、周波数特性の異なるフィルタを施す方法も提案され
ている。このようなフィルタでは、エッジ画素の高周波
成分を低減せず、エッジ以外の画素の高周波成分を低減
する帯域制限を行う。
(Equation 1) Further, an edge in which image information between adjacent pixels greatly changes is generally considered to be a region of interest because it gives remarkable visual information. Therefore, there is an edge-preserving filter that limits the band while preserving the edges in order to maintain the visual quality of the image. In addition, a method has been proposed in which filters having different frequency characteristics are applied to edge pixels and other pixels. In such a filter, band limitation is performed to reduce high-frequency components of pixels other than edges without reducing high-frequency components of edge pixels.

【0006】なお、エッジ画素の検出方法は多種のもの
が知られており、例えば、塚原、長谷川、北島、“画像
のエッジ保存を考慮した適応ウィナーフィルタによる加
法性白色雑音の除去”、信学論D−II, vol. J81−D−I
I, No. 4, pp.623-631, 1998. および八木ら、“C言語
で学ぶ実践画像処理”、pp. 44-47, オーム社、1993.に
記載されている。
[0006] A variety of edge pixel detection methods are known. For example, Tsukahara, Hasegawa, Kitajima, "Removal of Additive White Noise by Adaptive Wiener Filter Considering Image Edge Preservation", IEICE. Theory D-II, vol. J81-DI
I, No. 4, pp. 623-631, 1998. and Yagi et al., "Practical image processing learned in C language", pp. 44-47, Ohmsha, 1993.

【0007】[0007]

【発明が解決しようとする課題】しかし、エッジ画素は
必ずしも注目領域とは考えられない場合がある。エッジ
は顕著な視覚的情報を与えるが、画像内容において必ず
しも必要ではない領域中のエッジ画素は、注目領域とは
考えられない場合がある。すなわち、エッジ画素をすべ
て注目領域と考えて高周波成分を低減しない方法では、
注目領域でない領域(非注目領域)であってもエッジ画
素が多い場合には、帯域制限によって低減される情報量
が少なく、帯域制限の効果が低くなる。例えば、テニス
やサッカー等の試合の映像中継における、スタジアム観
客席のエッジ画素は、注目領域ではない場合がある。し
かし、非注目領域であってもエッジ画素の高周波成分を
低減しない帯域制限を行うと、観客席ではエッジ画素が
多く高周波成分が低減されない。したがって、観客席が
画面中の多くの領域を占めている画像では、帯域制限さ
れる情報量が少なく、帯域制限の効果が低くなる。
However, there are cases where edge pixels are not always considered as a region of interest. Edges provide noticeable visual information, but edge pixels in regions that are not necessarily required in the image content may not be considered as regions of interest. In other words, in a method in which all edge pixels are considered as a region of interest and high-frequency components are not reduced,
If there are many edge pixels even in an area that is not the attention area (non-interest area), the amount of information reduced by the band limitation is small, and the effect of the band limitation is reduced. For example, an edge pixel of a stadium spectator seat in a video relay of a game such as tennis or soccer may not be the attention area. However, if the band is limited so as not to reduce the high-frequency components of the edge pixels even in the non-interest area, the number of edge pixels is large at the audience seat, and the high-frequency components are not reduced. Therefore, in an image in which the audience seats occupy a large area on the screen, the amount of band-limited information is small, and the effect of the band limitation is reduced.

【0008】本発明の目的は、注目領域以外でエッジ画
素が多い映像に対しても帯域制限される情報量が多く、
したがって帯域制限の効果が高い時空間帯域制御方法、
時空間フィルタ装置、および時空間帯域制限プログラム
を記録した記録媒体を提供することにある。
An object of the present invention is to provide a large amount of band-limited information even for an image having many edge pixels outside the region of interest.
Therefore, a space-time band control method with a high band-limiting effect,
It is an object of the present invention to provide a spatio-temporal filter device and a recording medium recording a spatio-temporal band limiting program.

【0009】[0009]

【課題を解決するための手段】上記の目的を達成するた
めに、本発明では、エッジ画素が注目領域の画素である
かどうかを判断し、その画素に適用するフィルタの周波
数特性を変更する。すなわち、非注目領域の画素の高周
波成分を低減する場合には、エッジ画素に対して注目領
域かどうかを判断し、注目領域のエッジ画素では高周波
成分を低減せず、非注目領域のエッジ画素では高周波成
分を低減する。例えば、サッカーの試合中継における観
客席は非注目領域であるため、観客席のエッジ画素に対
しては高周波成分を低減し、選手やボールを示すエッジ
画素は注目領域であるため高周波成分を低減しない。
In order to achieve the above object, according to the present invention, it is determined whether or not an edge pixel is a pixel in a region of interest, and the frequency characteristic of a filter applied to the pixel is changed. That is, when reducing the high-frequency component of the pixel of the non-interest area, it is determined whether or not the edge pixel is the area of interest, and the high-frequency component is not reduced at the edge pixel of the area of interest. Reduce high frequency components. For example, a spectator seat in a live broadcast of a soccer match is a non-attention area, so that high-frequency components are reduced for edge pixels of the spectator seat, and high-frequency components are not reduced because edge pixels indicating a player or a ball are attention areas. .

【0010】画面中のエッジ画素に対して注目領域なの
かどうかを判断する方法としては、手動で行う方法と画
像から得られる情報から自動的に行う方法がある。画像
から得られる情報から自動的に判断する方法としては、
予め画面中のエッジ画素を検出しておき、各画素周辺に
おけるエッジ画素の密度を計測し、その密度の大小から
判断する方法がある。例えば、サッカー等の試合中継の
観客席は、選手よりもエッジ画素の密度が大きいと考え
られるため、この方法では、周囲のエッジ画素の密度が
大きい画素は非注目領域と判断し、密度が小さい画素は
注目領域と判断する。具体的には、画面中のエッジ画素
を検出した後、個々の画素に対して、それを中心とした
縦N画素で横N画素の正方形を設定し、その正方形に含ま
れるエッジ画素数を計測する。エッジ画素数がN×Nの例
えば半数以上の場合は、周辺のエッジ画素の密度が大き
いため非注目領域と判断し、正方形の中心エッジ画素の
高周波成分を低減する。エッジ画素数が例えば半数未満
の場合には、周辺エッジ画素の密度が小さいため注目領
域と判断し、高周波成分を低減しない。
As a method of determining whether or not an edge pixel in a screen is a region of interest, there are a method of manually performing the method and a method of automatically performing the method based on information obtained from an image. As a method of automatically judging from information obtained from images,
There is a method in which edge pixels in a screen are detected in advance, the density of edge pixels around each pixel is measured, and judgment is made based on the magnitude of the density. For example, a spectator seat of a live game such as a soccer game is considered to have a higher density of edge pixels than a player. Therefore, in this method, a pixel having a higher density of surrounding edge pixels is determined as a non-attention area, and a lower density is determined. The pixel is determined to be a region of interest. Specifically, after detecting an edge pixel in the screen, a square of N pixels horizontally by N pixels centered on the pixel is set for each pixel, and the number of edge pixels included in the square is measured. I do. If the number of edge pixels is, for example, half or more of N × N, the density of peripheral edge pixels is high, so that the region is determined to be a non-attention area, and the high-frequency component of the square central edge pixel is reduced. If the number of edge pixels is less than half, for example, the density of peripheral edge pixels is low, so it is determined to be a region of interest, and high-frequency components are not reduced.

【0011】さらに1種類の範囲のエッジ画素密度だけ
ではなく、複数の範囲を設定し、それぞれの範囲のエッ
ジ画素密度から、その画素が非注目領域かどうかを判断
する方法も好適である。この方法は、エッジ画素密度の
大きい画素が広範囲に存在する領域のみ非注目領域とす
る場合に有効である。すなわち、エッジの狭い範囲の密
度と広範囲の密度を計測することによって、エッジ密度
の大きい画素のうち、注目領域の画素を除外することに
利用できる。
It is also preferable to set not only one type of edge pixel density but also a plurality of ranges, and determine from the edge pixel density of each range whether or not the pixel is a non-interest area. This method is effective when only a region where a pixel having a large edge pixel density exists in a wide range is set as a non-target region. In other words, by measuring the density in the narrow range of the edge and the density in the wide range, it can be used to exclude the pixel of the attention area from the pixels having the high edge density.

【0012】また、エッジ画素密度の計測から注目領域
を決定した後、非注目領域の画素の周辺に存在する非注
目領域画素の密度を計測し、その密度から、その画素を
非注目領域から除外するかどうかを判断する方法も好適
である。この方法は、エッジ画素密度の計測から、誤っ
て非注目領域と判断された画素を除外する。
After determining the region of interest from the measurement of the edge pixel density, the density of the non-target region pixels around the pixels of the non-target region is measured, and the pixel is excluded from the non-target region from the density. A method of determining whether or not to do so is also suitable. This method excludes a pixel erroneously determined as a non-interest area from the measurement of the edge pixel density.

【0013】以上のように本発明によれば、エッジ画素
密度を計測によって注目領域を自動的に判断することに
よって、非注目領域のエッジ画素は高周波成分を低減す
るように、そして注目領域のエッジ画素は高周波成分を
低減しないようにフィルタの周波数特性を変更すること
が可能となる。したがって、非注目領域でエッジ画素が
多い映像に対しても帯域制限される情報量が多くなり、
帯域制限の効果が高くなる。
As described above, according to the present invention, by automatically judging a region of interest by measuring the edge pixel density, the edge pixels of the non-region of interest are reduced in high frequency components, and the edge of the region of interest is reduced. The pixel can change the frequency characteristic of the filter so as not to reduce the high frequency component. Therefore, the amount of information band-limited to a video having many edge pixels in the non-interest area increases,
The effect of the band limitation increases.

【0014】[0014]

【発明の実施の形態】次に、本発明の実施形態について
図面を参照して説明する。第1の実施形態 図1を参照すると、本発明の第1の実施形態の時空間フ
ィルタ装置は画像入力部101とフィルタ処理部102
とエッジ検出部103とエッジ情報蓄積部104とエッ
ジ密度計測部105とエッジ注目判断部106とフィル
タ制御部107とフィルタ選択部108と画像出力部1
09で構成されている。
Next, embodiments of the present invention will be described with reference to the drawings. First Embodiment Referring to FIG. 1, a spatio-temporal filter device according to a first embodiment of the present invention includes an image input unit 101 and a filter processing unit 102.
, An edge detection unit 103, an edge information storage unit 104, an edge density measurement unit 105, an edge attention determination unit 106, a filter control unit 107, a filter selection unit 108, and an image output unit 1.
09.

【0015】本実施形態は、画素周辺のエッジ密度を1
つの範囲に対して計測し、そのエッジ密度の大小によっ
て画素が注目領域かどうかを判断し、エッジ画素に適用
するフィルタの周波数特性を変更するものである。エッ
ジ密度の計測は、正方形の範囲に対して行い、エッジ画
素の割合が半分未満の場合には注目領域と判断し、半分
以上の場合には非注目領域と判断する。
In this embodiment, the edge density around the pixel is set to 1
The measurement is performed for two ranges, and it is determined whether or not the pixel is the attention area based on the magnitude of the edge density, and the frequency characteristic of the filter applied to the edge pixel is changed. The measurement of the edge density is performed on the range of the square. If the ratio of the edge pixels is less than half, the region is determined to be the region of interest.

【0016】画像入力部101は画像を入力する。エッ
ジ検出部103は入力された画像のエッジを検出する。
エッジ情報蓄積部104は検出されたエッジ情報を蓄積
する。エッジ密度計測部105は各エッジ画素に対し
て、その画素を中心とした縦横3画素の正方形の形状を
した範囲を設定し、その範囲に含まれるエッジ画素数を
計測する。エッジ注目判断部106は、エッジ密度計測
部105で計測されたエッジ画素数が範囲内画素の半数
以上(すなわち5以上)かどうかを検査し、半数未満の
場合には、その画素を注目領域の画素と判断し、半数以
上の場合には、その画素を非注目領域の画素と判断す
る。ここに示した縦横3画素は一例であり、それ以外の
大きさの正方形に設定することも可能である。フィルタ
選択部108には、エッジ画素用のフィルタF1、エッ
ジ以外の画素用のフィルタF2が設定されており、エッ
ジ情報蓄積部104からのエッジの有無の情報に基づい
て、2つのうちいずれかのフィルタを選択する。フィル
タ制御部107は、エッジ画素が注目領域かどうかにし
たがって、フィルタ選択部108におけるエッジ画素用
のフィルタF1の周波数特性を制御する。エッジ画素が
注目領域の場合には、特性C1にF1を設定し、非注目領
域の場合には、C1よりも高周波成分を削除する特性C2
にF1を設定する。
The image input unit 101 inputs an image. The edge detection unit 103 detects an edge of the input image.
The edge information storage unit 104 stores the detected edge information. The edge density measuring unit 105 sets, for each edge pixel, a square-shaped range of three pixels vertically and horizontally around the pixel, and measures the number of edge pixels included in the range. The edge attention determination unit 106 checks whether the number of edge pixels measured by the edge density measurement unit 105 is half or more (ie, 5 or more) of the pixels in the range. The pixel is determined to be a pixel. If the number of pixels is half or more, the pixel is determined to be a pixel of the non-interest area. The three vertical and horizontal pixels shown here are merely examples, and it is also possible to set a square of any other size. In the filter selection unit 108, a filter F1 for an edge pixel and a filter F2 for a pixel other than an edge are set. Based on information on the presence or absence of an edge from the edge information storage unit 104, one of the two is selected. Select a filter. The filter control unit 107 controls the frequency characteristics of the filter F1 for edge pixels in the filter selection unit 108 according to whether the edge pixel is a region of interest. If the edge pixel is a region of interest, the characteristic C1 is set to F1, and if the edge pixel is a region of non-interest, a characteristic C2 that removes higher frequency components than C1.
To F1.

【0017】エッジ画素用のフィルタF1であって、注
目領域に対応した特性C1と非注目領域に対応した特性C
2を有するフィルタの、式(1)の係数W(i,j)の
例をそれぞれ表1と表2に、エッジ以外の画素用のフィ
ルタF2の例を表3に示す。なお、ここで示したフィル
タは一例であって、異なるものを用いてもよい。例え
ば、特性C1に設定されたF1としてメディアンフィルタ
を用いれば、エッジをそのまま保存することができる。
A filter F1 for an edge pixel, wherein a characteristic C1 corresponding to a region of interest and a characteristic C1 corresponding to a non-region of interest
Tables 1 and 2 show examples of the coefficient W (i, j) in the equation (1) of the filter having 2 respectively, and Table 3 shows an example of the filter F2 for pixels other than edges. Note that the filters shown here are merely examples, and different filters may be used. For example, if a median filter is used as F1 set to the characteristic C1, the edge can be stored as it is.

【0018】[0018]

【表1】 [Table 1]

【0019】[0019]

【表2】 [Table 2]

【0020】[0020]

【表3】 以下に、各画素に適用するフィルタの選択手順を、図2
に示した流れ図を用いて説明する。
[Table 3] The procedure for selecting a filter to be applied to each pixel is described below with reference to FIG.
This will be described with reference to the flowchart shown in FIG.

【0021】1. エッジ検出部103は、入力画像の
エッジを検出し、エッジ情報蓄積部104にエッジ情報
を蓄積する(ステップ201)。
1. The edge detection unit 103 detects an edge of an input image and stores edge information in an edge information storage unit 104 (step 201).

【0022】2. エッジ画素の場合には、エッジ密度
計測部105によって、エッジ密度を計測し、エッジ注
目判断部106にてエッジ画素が注目領域かどうかを判
断する(ステップ202、203)。
2. In the case of an edge pixel, the edge density is measured by the edge density measurement unit 105, and the edge attention determination unit 106 determines whether or not the edge pixel is a region of interest (steps 202 and 203).

【0023】3. エッジ画素が注目領域の場合には、
フィルタ制御部107はフィルタF1の周波数特性をC1
に設定する(ステップ204)。
3. When the edge pixel is a region of interest,
The filter control unit 107 sets the frequency characteristic of the filter F1 to C1.
(Step 204).

【0024】4. エッジ画素が非注目領域の場合に
は、フィルタ制御部107はフィルタF1の周波数特性
をC2に設定する(ステップ205)。
4. If the edge pixel is a non-interest area, the filter control unit 107 sets the frequency characteristic of the filter F1 to C2 (step 205).

【0025】5. フィルタを適用する画素がエッジ画
素の場合には、フィルタ選択部108はフィルタF1を
選択する(ステップ206)。
5. If the pixel to which the filter is applied is an edge pixel, the filter selection unit 108 selects the filter F1 (step 206).

【0026】6. フィルタを適用する画素がエッジ画
素でない場合には、フィルタ選択部108はフィルタF
2を選択する(ステップ207)。
6. If the pixel to which the filter is applied is not an edge pixel, the filter selection unit 108
2 is selected (step 207).

【0027】フィルタ処理部102は、以上説明した、
フィルタ選択部108におけるフィルタの選択と、フィ
ルタ制御部107におけるフィルタF1の周波数特性の
選択にしたがって、入力画像に対してフィルタ処理を施
す。
The filter processing unit 102 has been described above.
According to the selection of the filter by the filter selection unit 108 and the selection of the frequency characteristic of the filter F1 by the filter control unit 107, the input image is filtered.

【0028】このようにエッジ画素の密度を計測するこ
とによって、サッカーの試合中継映像におけるスタジア
ム観客画像のようなエッジ画素の密度が大きい画素を非
注目領域と判断することができる。したがって、非注目
領域のエッジ画素の高周波成分を低減することができ
る。第2の実施形態 図3を参照すると、本発明の第2の実施形態の時空間フ
ィルタ装置は画像入力部101とフィルタ処理部102
とエッジ検出部103とエッジ情報蓄積部104とエッ
ジ注目判断部106’とフィルタ制御部107とフィル
タ選択部108と第1エッジ密度計測部110と第2エ
ッジ密度計測部111で構成されている。
By measuring the density of edge pixels in this manner, a pixel having a high edge pixel density, such as a stadium spectator image in a soccer game relay video, can be determined to be a non-attention area. Therefore, it is possible to reduce the high-frequency components of the edge pixels in the non-interest area. Second Embodiment Referring to FIG. 3, a spatiotemporal filter device according to a second embodiment of the present invention includes an image input unit 101 and a filter processing unit 102.
An edge detection unit 103, an edge information storage unit 104, an edge attention determination unit 106 ', a filter control unit 107, a filter selection unit 108, a first edge density measurement unit 110, and a second edge density measurement unit 111.

【0029】本実施形態は、第1の実施形態と異なり、
画素周辺のエッジ密度を2つの範囲に対して計測し、そ
の2種類のエッジ密度から画素が注目領域かどうかを判
断する。
This embodiment differs from the first embodiment in that
The edge density around the pixel is measured for two ranges, and it is determined from the two types of edge densities whether the pixel is a target area.

【0030】エッジ密度の計測は、大きさの異なる2種
類の正方形の範囲に対して行い、両方の範囲に対してエ
ッジ画素の割合が半分以上の場合には非注目領域と判断
し、それ以外の場合には注目領域と判断する。
The measurement of the edge density is performed for two types of squares having different sizes. If the ratio of the edge pixels is more than half in both ranges, it is determined that the region is the non-interest area. Is determined to be the attention area.

【0031】例えば、縦3画素で横3画素の正方形の範
囲(A)と、それよりも大きい縦7画素で横7画素の正
方形の範囲(B)を定義し、それぞれの範囲に含まれる
エッジ画素を計測する。図6(a)に示すように、範囲
(A)にはエッジ画素が8個と半数以上であるが、範囲
(B)ではエッジ画素が8個と半数未満となる場合に
は、その画素付近にエッジ画素密度が大きい画素が存在
しないと考えられる。したがって、この画素を非注目領
域から除外することができる。逆に、図6(b)に示す
ように、範囲(A)にはエッジ画素が3個と半数未満で
あるが、範囲(B)ではエッジ画素が28個と半数以上
となる場合には、その画素付近にエッジ画素密度が大き
い画素が存在するが、その画素はエッジ画素密度が小さ
いと考えられる。したがって、この画素を非注目領域か
ら除外することができる。
For example, a square range (A) of three vertical pixels and three horizontal pixels and a square range (B) of seven larger vertical pixels and seven horizontal pixels are defined, and the edge included in each range is defined. Measure pixels. As shown in FIG. 6A, when the range (A) has eight edge pixels and more than half, but in the range (B), there are eight edge pixels and less than half, the vicinity of the pixel It is considered that there is no pixel having a large edge pixel density. Therefore, this pixel can be excluded from the non-interest area. Conversely, as shown in FIG. 6B, when the range (A) has three edge pixels and less than half, but the range (B) has 28 edge pixels and is half or more, A pixel having a high edge pixel density exists near the pixel, and the pixel is considered to have a low edge pixel density. Therefore, this pixel can be excluded from the non-interest area.

【0032】第1エッジ密度計測部110は各エッジ画
素に対して、その画素を中心とした縦横3画素の正方形
の形状をした範囲を設定し、その範囲に含まれるエッジ
画素数を計測する。また、第2エッジ密度計測部111
は各エッジ画素に対して、その画素を中心とした縦横7
画素の正方形の形状をした範囲を設定し、その範囲に含
まれるエッジ画素数を計測する。ここに示した縦横3画
素と7画素は一例であり、それ以外の範囲に設定するこ
とも可能である。
The first edge density measuring section 110 sets a square-shaped range of three pixels vertically and horizontally around each pixel, and measures the number of edge pixels included in the range. Also, the second edge density measuring unit 111
Is the vertical and horizontal 7 for each edge pixel
A square-shaped range of pixels is set, and the number of edge pixels included in the range is measured. The three pixels and seven pixels in the vertical and horizontal directions shown here are examples, and can be set to other ranges.

【0033】エッジ注目判断部106’は、第1エッジ
密度計測部110で計測されたエッジ画素数が範囲内画
素の半数以上(すなわち5以上)かどうかを検査し、半
数以上の場合には、さらに第2エッジ密度計測部111
で計測されたエッジ画素が範囲内画素の半数以上(すな
わち25以上)かどうかを検査する。第1エッジ密度計
測部110で計測された画素数が範囲内画素の半数以上
であり、第2エッジ密度計測部111で計測された画素
数が範囲内画素の半数以上である場合には、その画素を
非注目領域の画素と判断し、それ以外の場合には、その
画素を注目領域の画素と判断する。
The edge attention judging unit 106 'checks whether or not the number of edge pixels measured by the first edge density measuring unit 110 is half or more (ie, 5 or more) of the pixels in the range. Further, the second edge density measuring unit 111
It is checked whether or not the edge pixels measured in (1) are half or more of the pixels in the range (that is, 25 or more). If the number of pixels measured by the first edge density measurement unit 110 is equal to or greater than half of the pixels in the range, and the number of pixels measured by the second edge density measurement unit 111 is equal to or greater than half of the pixels in the range, The pixel is determined to be a pixel of the non-interest area, and in other cases, the pixel is determined to be a pixel of the attention area.

【0034】各画素のフィルタの選択方法やエッジ画素
のフィルタの周波数特性の変更方法は第1の実施形態と
同様である。フィルタ処理部102はフィルタ選択部1
08におけるフィルタの選択と、フィルタ制御部107
におけるフィルタF1の周波数特性の選択にしたがっ
て、入力画像に対してフィルタ処理を施す。
The method of selecting the filter of each pixel and the method of changing the frequency characteristic of the filter of the edge pixel are the same as in the first embodiment. The filter processing unit 102 is a filter selection unit 1
Selection of filter at 08 and filter control unit 107
Filter processing is performed on the input image in accordance with the selection of the frequency characteristic of the filter F1 in.

【0035】本実施形態のように、2種類の範囲のエッ
ジ画素の密度を計測することによって、サッカーの試合
中継映像におけるスタジアム観客画像のような、エッジ
画素密度の大きい画素が広範囲に存在する領域を検出
し、非注目領域と判断することができる。したがって、
非注目領域のエッジ画素の高周波成分を低減することが
できる。第3の実施形態 図4を参照すると、本発明の第3の実施形態のフィルタ
装置は画像入力部101とフィルタ処理部102とエッ
ジ検出部103とエッジ情報蓄積部104とフィルタ制
御部107とフィルタ選択部108と第1エッジ密度計
測部110と第2エッジ密度計測部111とエッジ注目
判断部106と注目画素計測部112と注目画素補正部
113で構成されている。
As in the present embodiment, by measuring the density of edge pixels in two types of ranges, an area where pixels with a high edge pixel density exist widely, such as a stadium spectator image in a soccer game relay video. Is detected, and it can be determined as a non-attention area. Therefore,
High-frequency components of edge pixels in the non-interest area can be reduced. Third Embodiment Referring to FIG. 4, a filter device according to a third embodiment of the present invention includes an image input unit 101, a filter processing unit 102, an edge detection unit 103, an edge information storage unit 104, a filter control unit 107, and a filter. It comprises a selection unit 108, a first edge density measurement unit 110, a second edge density measurement unit 111, an edge attention determination unit 106, an attention pixel measurement unit 112, and an attention pixel correction unit 113.

【0036】本実施形態では、第2の実施形態におい
て、エッジ画素密度から非注目領域と判断した画素に対
して、その画素周辺の非注目領域画素の密度を計測する
ことにより、誤って非注目領域と判断された画素を除外
することができる。非注目領域画素密度の計測は、正方
形の範囲に対して行い、非注目領域の画素の割合が半分
以上の場合には非注目領域と判断し、半分未満の場合に
は注目領域と判断する。
In the present embodiment, in the second embodiment, for a pixel determined to be a non-attention region from the edge pixel density, the density of a non-attention region pixel around the pixel is erroneously measured. Pixels determined to be regions can be excluded. The measurement of the pixel density of the non-interest area is performed for a square range. When the ratio of pixels in the non-interest area is more than half, it is determined to be the non-interest area, and when less than half, it is determined to be the attention area.

【0037】例えば、図7に示すように、エッジ画素密
度の計測から、誤って非注目領域と判断された画素
(P)があるとすると、その画素(P)周辺の非注目領域
の画素の密度が小さいと考えられる。したがって、画素
(P)の周辺の非注目領域の画素の密度を計測し、密度
が小さいことから、画素(P)は注目領域であると判断
できる。
For example, as shown in FIG. 7, if there is a pixel (P) which is erroneously determined to be a non-interest area from the measurement of the edge pixel density, the pixels of the non-interest area around the pixel (P) It is considered that the density is small. Therefore, the density of the pixels in the non-interest area around the pixel (P) is measured, and since the density is low, the pixel (P) can be determined to be the area of interest.

【0038】第1エッジ密度計測部110、第2エッジ
密度計測部111、エッジ注目判断部106の動作は第
2の実施形態と同様である。
The operations of the first edge density measuring section 110, the second edge density measuring section 111, and the edge attention judging section 106 are the same as those in the second embodiment.

【0039】注目画素計測部112は各非注目領域と判
断された画素に対して、その画素を中心とした縦横3画
素の正方形の形状をした範囲を設定し、その範囲に含ま
れる非注目領域の画素数を計測する。注目画素補正部1
13は、注目画素計測部112で計測された非注目領域
の画素数が範囲内画素の半数以上(すなわち5以上)か
どうかを検査し、半数未満の場合には、その画素を注目
領域の画素と判断し、半数以上の場合には、その画素を
非注目領域の画素と判断する。ここに示した縦横3画素
は一例であり、それ以外の大きさの正方形に設定するこ
とも可能である。
The pixel-of-interest measurement unit 112 sets a square-shaped range of three pixels vertically and horizontally around the pixel determined as each non-interest area, and sets the non-interest area included in the range. Is measured. Attention pixel correction unit 1
13 checks whether the number of pixels of the non-target area measured by the target pixel measuring unit 112 is equal to or greater than half of the pixels in the range (ie, equal to or greater than 5). When the number of pixels is half or more, the pixel is determined to be a pixel of the non-interest area. The three vertical and horizontal pixels shown here are merely examples, and it is also possible to set a square of any other size.

【0040】フィルタ制御部107は、エッジ注目判断
部106または注目画素補正部113における、エッジ
画素が注目領域かどうかの判断にしたがって、フィルタ
選択部108におけるエッジ画素用のフィルタF1の周
波数特性を制御する。エッジ画素が注目領域の場合に
は、特性C1にF1を設定し、非注目領域の場合には、C
1よりも高周波成分を削除する特性C2にF1を設定す
る。
The filter control unit 107 controls the frequency characteristic of the filter F1 for the edge pixel in the filter selection unit 108 according to the judgment by the edge attention judgment unit 106 or the attention pixel correction unit 113 whether the edge pixel is the attention area. I do. If the edge pixel is the region of interest, set F1 to the characteristic C1, and if the edge pixel is the region of non-interest, C1
F1 is set for the characteristic C2 for removing high frequency components from 1.

【0041】以下に、各画素に適用するフィルタの選択
手順を、図5に示した流れ図を用いて説明する。
The procedure for selecting a filter to be applied to each pixel will be described below with reference to the flowchart shown in FIG.

【0042】1. エッジ検出部103は、入力画像の
エッジを検出し、エッジ情報蓄積部104にエッジ情報
を蓄積する(ステップ201)。
1. The edge detector 103 detects an edge of the input image and stores the edge information in the edge information storage 104 (step 201).

【0043】2. エッジ画素の場合には、第1、第2
エッジ密度計測部110、111でエッジ密度を計測
し、エッジ注目判断部106’にてエッジ画素が注目領
域かどうかを判断する(ステップ203)。
2. In the case of an edge pixel, the first and second
The edge density is measured by the edge density measuring units 110 and 111, and it is judged by the edge attention judging unit 106 'whether or not the edge pixel is the attention area (step 203).

【0044】3. エッジ画素が非注目領域と判断され
た場合には、注目画素計測部112で非注目領域の画素
密度を計測し、注目画素補正部113にて画素が本当に
非注目領域かどうか判断する。(ステップ208)。
3. If the edge pixel is determined to be a non-interest area, the pixel density of the non-interest area is measured by the attention pixel measuring unit 112, and whether or not the pixel is really a non-interest area by the attention pixel correction unit 113 to decide. (Step 208).

【0045】4. エッジ画素が注目領域の場合には、
フィルタ制御部107はフィルタF1の周波数特性をC1
に設定する(ステップ204)。
4. When the edge pixel is the region of interest,
The filter control unit 107 sets the frequency characteristic of the filter F1 to C1.
(Step 204).

【0046】5. エッジ画素が非注目領域の場合に
は、フィルタ制御部107はフィルタF1の周波数特性
をC2に設定する(ステップ205)。
5. If the edge pixel is a non-interest area, the filter control unit 107 sets the frequency characteristic of the filter F1 to C2 (step 205).

【0047】6. フィルタを適用する画素がエッジ画
素の場合には、フィルタ選択部108はフィルタF1を
選択する(ステップ206)。
6. If the pixel to which the filter is applied is an edge pixel, the filter selector 108 selects the filter F1 (step 206).

【0048】7. フィルタを適用する画素がエッジ画
素でない場合には、フィルタ選択部108はフィルタF
2を選択する(ステップ207)。
7. If the pixel to which the filter is applied is not an edge pixel, the filter selection unit 108
2 is selected (step 207).

【0049】フィルタ処理部102はフィルタ選択部1
08におけるフィルタの選択と、フィルタ制御部107
におけるフィルタF1の周波数特性の選択にしたがっ
て、入力画像に対してフィルタ処理を施す。
The filter processing unit 102 is a filter selection unit 1
Selection of filter at 08 and filter control unit 107
Filter processing is performed on the input image in accordance with the selection of the frequency characteristic of the filter F1 in.

【0050】本実施形態のように、エッジ密度の計測か
ら一旦非注目領域と誤って判断した画素に対して、非注
目領域の画素の密度を計測することによって、その画素
を非注目領域から除外することができる。したがって、
サッカーの試合中継映像におけるスタジアム観客画像と
選手の画像との境界のような注目領域の画素を非注目領
域から除外することができる。
As in the present embodiment, for a pixel once erroneously determined as a non-interest area from the measurement of the edge density, the pixel density of the non-interest area is measured to exclude the pixel from the non-interest area. can do. Therefore,
Pixels in the attention area such as the boundary between the stadium spectator image and the player image in the soccer game relay video can be excluded from the non-interest area.

【0051】なお、本実施形態ではエッジ密度計測部は
2個であるが、図1のように1個であってもよい。
In the present embodiment, the number of the edge density measuring units is two, but may be one as shown in FIG.

【0052】図8は以上の実施形態をパソコン等のコン
ピュータで実施する場合のブロック図である。
FIG. 8 is a block diagram in the case where the above embodiment is implemented by a computer such as a personal computer.

【0053】入力装置301は画像入力部101に相当
し、画像を入力するスキャナ、カメラ等の入力装置であ
る。記憶装置302はエッジ情報蓄積部104に相当
し、エッジ情報が蓄積される。記憶装置303はハード
ディスクである。出力装置304は画像出力部109に
相当し、フィルタ処理された画像が出力されるディスプ
レイである。記憶装置303はハードディスクである。
記録媒体305は図1〜図5の実施形態における画像入
力部101、エッジ情報蓄積部104、画像出力部10
9を除く各部の処理から構成される帯域制限プログラム
が記録された、フロッピィディスク、CD−ROM、光磁気
等の記録媒体である。データ処理装置306はCPU、各
種インタフェース等を含み、記録媒体305から帯域制
限プログラムを読み込んで記憶装置303に記憶した
後、これを実行する。
The input device 301 corresponds to the image input unit 101 and is an input device such as a scanner or a camera for inputting an image. The storage device 302 corresponds to the edge information storage unit 104, and stores edge information. The storage device 303 is a hard disk. The output device 304 corresponds to the image output unit 109, and is a display that outputs a filtered image. The storage device 303 is a hard disk.
The recording medium 305 corresponds to the image input unit 101, the edge information storage unit 104, and the image output unit 10 in the embodiment of FIGS.
This is a recording medium such as a floppy disk, CD-ROM, or magneto-optical disk on which a band limiting program composed of processing of each part except for the part 9 is recorded. The data processing device 306 includes a CPU, various interfaces, etc., reads the band limiting program from the recording medium 305, stores the program in the storage device 303, and executes the program.

【0054】[0054]

【発明の効果】以上の説明したように本発明によれば、
エッジ画素を注目領域の画素と注目領域以外の画素に区
別し、注目領域ではないエッジ画素は高周波成分を低減
するように、そして注目領域のエッジ画素は高周波成分
を低減しないようにフィルタの周波数特性を変更するこ
とにより、注目領域以外でエッジ画素が多い映像に対し
ても帯域制限される情報量が多くなり、帯域制限の効果
が高くなる。
As described above, according to the present invention,
The frequency characteristics of the filter are such that edge pixels are distinguished into pixels in the region of interest and pixels other than the region of interest, and edge pixels that are not the region of interest reduce high-frequency components, and edge pixels in the region of interest do not reduce high-frequency components Is changed, the amount of information to be band-limited is increased even for an image having a large number of edge pixels outside the region of interest, and the effect of the band restriction is enhanced.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1の実施形態の時空間フィルタ装置
の構成図である。
FIG. 1 is a configuration diagram of a spatiotemporal filter device according to a first embodiment of the present invention.

【図2】第1の実施形態におけるフィルタ決定処理の流
れ図である。
FIG. 2 is a flowchart of a filter determination process according to the first embodiment.

【図3】本発明中の第2の実施形態の時空間フィルタ装
置の構成図である。
FIG. 3 is a configuration diagram of a spatiotemporal filter device according to a second embodiment of the present invention.

【図4】本発明の第3の実施形態の時空間フィルタ装置
の構成図である。
FIG. 4 is a configuration diagram of a spatiotemporal filter device according to a third embodiment of the present invention.

【図5】第3の実施形態におけるフィルタ決定処理の流
れ図である。
FIG. 5 is a flowchart of a filter determination process according to a third embodiment.

【図6】エッジ画素密度計測の例を示す図である。FIG. 6 is a diagram illustrating an example of edge pixel density measurement.

【図7】高いエッジ密度の画素を除外する例を示す図で
ある。
FIG. 7 is a diagram illustrating an example in which pixels with a high edge density are excluded.

【図8】本発明の第4の実施形態の時空間フィルタ装置
の構成図である。
FIG. 8 is a configuration diagram of a spatiotemporal filter device according to a fourth embodiment of the present invention.

【図9】空間フィルタの例を示す図である。FIG. 9 is a diagram illustrating an example of a spatial filter.

【符号の説明】[Explanation of symbols]

101 画像入力部 102 フィルタ処理部 103 エッジ検出部 104 エッジ情報蓄積部 105 エッジ密度計測部 106、106’ エッジ注目判断部 107 フィルタ制御部 108 フィルタ選択部 109 画像出力部 110 第1エッジ密度計測部 111 第2エッジ密度計測部 112 注目画素計測部 113 注目画素補正部 201〜208 ステップ 301 入力装置 302、303 記憶装置 304 出力装置 305 記録媒体 306 データ処理装置 Reference Signs List 101 Image input unit 102 Filter processing unit 103 Edge detection unit 104 Edge information storage unit 105 Edge density measurement unit 106, 106 'Edge attention determination unit 107 Filter control unit 108 Filter selection unit 109 Image output unit 110 First edge density measurement unit 111 Second edge density measuring unit 112 Target pixel measuring unit 113 Target pixel correcting unit 201 to 208 Step 301 Input device 302, 303 Storage device 304 Output device 305 Recording medium 306 Data processing device

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C021 PA32 PA38 PA58 PA62 PA66 PA67 PA72 RA02 RB08 YA01 5C059 KK00 LA00 SS20 TA69 TB08 TC02 TC10 TC42 TD08 UA02 UA12 UA17 5C082 AA01 AA27 AA37 BA41 CA21 CA54 CA85 DA87 MM10  ──────────────────────────────────────────────────続 き Continued on front page F term (reference) 5C021 PA32 PA38 PA58 PA62 PA66 PA67 PA72 RA02 RB08 YA01 5C059 KK00 LA00 SS20 TA69 TB08 TC02 TC10 TC42 TD08 UA02 UA12 UA17 5C082 AA01 AA27 AA37 BA41 CA21 CA10 CA85 DA87 MM

Claims (12)

【特許請求の範囲】[Claims] 【請求項1】 画像の帯域を制限する時空間帯域制限方
法であって、 入力画像のエッジを検出するエッジ検出ステップと、 各画素のエッジ情報を蓄積するエッジ情報蓄積ステップ
と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測ステップと、 エッジ密度からエッジ画素が
注目領域の画素かどうかを判断するエッジ注目判断ステ
ップと、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択ステップと、 エッジ画素が注目領域かどうかの判断にしたがい、フィ
ルタ選択ステップで予め設定されているエッジ画素用フ
ィルタの周波数特性を制御するフィルタ制御ステップ
と、 入力画像にフィルタ処理を施すフィルタ処理ステップと
を有する帯域制限方法。
1. A spatio-temporal band limiting method for limiting a band of an image, comprising: an edge detecting step of detecting an edge of an input image; an edge information storing step of storing edge information of each pixel; An edge density measuring step of measuring the density of the edge pixel in the above; an edge attention determining step of determining whether the edge pixel is a pixel of the attention area from the edge density; and a plurality of filters having different frequency characteristics set in advance. A filter selection step of selecting a filter for an edge pixel for an edge pixel and a filter for a non-edge pixel for a pixel that is not an edge pixel, and a filter selection step in accordance with the determination of whether or not the edge pixel is a region of interest. A filter control step for controlling the frequency characteristics of the set edge pixel filter; Band limiting process and a filtering processing step of performing a filtering process on the image.
【請求項2】 画像の帯域を制限する時空間帯域制限方
法であって、 入力画像のエッジを検出するエッジ検出ステップと、 各画素のエッジ情報を蓄積するエッジ情報蓄積ステップ
と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測する複数のエッジ密度計測ステップと、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断ステップと、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択ステップと、 前記エッジ注目判断ステップにおける、エッジ画素が注
目領域かどうかの判断にしたがい、フィルタ選択ステッ
プで予め設定されているエッジ画素用フィルタの周波数
特性を制御するフィルタ制御ステップと、 入力画像にフィルタ処理を施すフィルタ処理ステップと
を有する帯域制限方法。
2. A spatio-temporal band limiting method for limiting an image band, comprising: an edge detecting step of detecting an edge of an input image; an edge information storing step of storing edge information of each pixel; A plurality of edge density measurement steps for measuring the density of edge pixels in different ranges, and an edge attention determination step for determining whether the edge pixel is a pixel of the attention area based on the edge densities of the plurality of ranges. A filter selecting step of selecting an edge pixel filter for an edge pixel from among a plurality of filters having different frequency characteristics, and selecting a non-edge pixel filter for a pixel that is not an edge pixel; In the filter selection step according to the determination of whether the edge pixel is a region of interest in A band limiting method comprising: a filter control step of controlling a frequency characteristic of an edge pixel filter; and a filter processing step of performing filter processing on an input image.
【請求項3】 画像の帯域を制限する時空間帯域制限方
法であって、 入力画像のエッジを検出するエッジ検出ステップと、 各画素のエッジ情報を蓄積するエッジ情報蓄積ステップ
と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測ステップと、 エッジ密度からエッジ画素が
注目領域の画素かどうかを判断するエッジ注目判断ステ
ップと、 エッジ注目判断ステップによって注目領域ではないと判
断された画素に対して、その画素の周辺の注目領域では
ないと判断された画素の密度を計測する注目画素計測ス
テップと、 注目領域ではないと判断された画素に対して、その周辺
における注目領域ではないと判断された画素の密度か
ら、その画素を注目領域に再度分類するかどうか判断す
る注目画素補正ステップと、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択ステップと、 前記エッジ注目判断ステップにおける、エッジ画素が注
目領域かどうかの判断または前記注目画素補正ステップ
における、画素を注目領域に再度分類するかどうかの判
断にしたがい、フィルタ選択ステップで予め設定されて
いるエッジ画素用フィルタの周波数特性を制御するフィ
ルタ制御ステップと、 入力画像にフィルタ処理を施すフィルタ処理ステップと
を有する帯域制限方法。
3. A spatio-temporal band limiting method for limiting an image band, comprising: an edge detecting step of detecting an edge of an input image; an edge information storing step of storing edge information of each pixel; An edge density measuring step of measuring the density of the edge pixels in, an edge attention determining step of determining whether the edge pixel is a pixel of the attention area based on the edge density, and a pixel determined to be not the attention area by the edge attention determination step. On the other hand, a pixel-of-interest measurement step of measuring the density of a pixel determined not to be the region of interest in the vicinity of the pixel, and determining that the pixel determined not to be the region of interest is not the region of interest in the vicinity A pixel-of-interest correction step of judging whether or not to re-classify the pixel into a region of interest based on the density of the determined pixel; A filter selection step of selecting an edge pixel filter for an edge pixel from among a plurality of filters having different frequency characteristics, and selecting a non-edge pixel filter for a pixel that is not an edge pixel. The frequency of the edge pixel filter preset in the filter selection step is determined according to the determination of whether the edge pixel is a region of interest in the step or the determination of whether the pixel is reclassified to the region of interest in the pixel of interest correction step. A band limiting method including a filter control step of controlling characteristics and a filter processing step of performing filter processing on an input image.
【請求項4】 画像の帯域を制限する時空間帯域制限方
法であって、 入力画像のエッジを検出するエッジ検出ステップと、 各画素のエッジ情報を蓄積するエッジ情報蓄積ステップ
と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測するエッジ密度計測ステップと、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断ステップと、 注目領域ではないと判断された画素に対して、その周辺
における注目領域ではないと判断された画素の密度か
ら、その画素を注目領域に再度分類するかどうかを判断
する注目画素補正ステップと、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択ステップと、 前記エッジ注目判断ステップにおける、エッジ画素が注
目画素かどうかの判断、または前記注目画素補正ステッ
プにおける、画素を注目領域に再度分類するかどうかの
判断にしたがい、フィルタ選択ステップで予め設定され
ているエッジ画素用フィルタの周波数特性を制御するフ
ィルタ制御ステップと、 入力画像にフィルタ処理を施すフィルタ処理ステップと
を有する帯域制限方法。
4. A spatio-temporal band limiting method for limiting a band of an image, comprising: an edge detecting step of detecting an edge of an input image; an edge information storing step of storing edge information of each pixel; An edge density measuring step of measuring the density of the edge pixels in different ranges, an edge attention determining step of determining whether the edge pixels are pixels of the attention area from the edge densities of the plurality of ranges, A pixel-of-interest correction step of determining whether to re-classify the pixel into the area of interest based on the density of the pixels determined not to be the area of interest in the vicinity of the determined pixel; An edge pixel filter is selected as an edge pixel from among a plurality of filters having different characteristics, and a non-edge pixel is selected for a pixel which is not an edge pixel. A filter selecting step of selecting a di-pixel filter; and determining whether an edge pixel is a target pixel in the edge target determining step, or determining whether to re-classify a pixel into a target area in the target pixel correcting step. Accordingly, a band limiting method including a filter control step of controlling a frequency characteristic of an edge pixel filter preset in a filter selection step, and a filter processing step of performing filter processing on an input image.
【請求項5】 画像の帯域を制限する時空間フィルタ装
置であって、 入力画像のエッジを検出するエッジ検出部と、 検出された各画素のエッジ情報を蓄積するエッジ情報蓄
積部と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測部と、 エッジ密度からエッジ画素が注目領域の画素かどうかを
判断するエッジ注目判断部と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択部と、 前記エッジ注目判断部における、エッジ画素が注目領域
かどうかの判断にしたがい、前記フィルタ選択部で予め
設定されているエッジ画素用フィルタの周波数特性を制
御するフィルタ制御部と、 入力画像にフィルタ処理を施すフィルタ処理部とを有す
る時空間フィルタ装置。
5. A spatio-temporal filter device for limiting a band of an image, comprising: an edge detection unit for detecting an edge of an input image; an edge information storage unit for storing edge information of each detected pixel; An edge density measurement unit that measures the density of edge pixels around the edge of the image, an edge attention determination unit that determines whether the edge pixel is a pixel of the attention area based on the edge density, and a plurality of filters having different preset frequency characteristics. From among them, a filter selection unit that selects an edge pixel filter for an edge pixel, and a non-edge pixel filter for a pixel that is not an edge pixel, and the edge attention determination unit determines whether the edge pixel is a region of interest. According to the determination, a filter control unit that controls a frequency characteristic of the edge pixel filter preset by the filter selection unit; Spatial filter apparatus when having a filter processing unit that performs filter processing on the image.
【請求項6】 画像の帯域を制限する時空間フィルタ装
置であって、 入力画像のエッジを検出するエッジ検出部と、 検出された各画素のエッジ情報を蓄積するエッジ情報蓄
積部と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測する複数のエッジ密度計測部と、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断部と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択部と、 前記エッジ注目判断部における、エッジ画素が注目領域
かどうかの判断にしたがい、前記フィルタ選択部で予め
設定されているエッジ画素用フィルタの周波数特性を制
御するフィルタ制御部と、 入力画像にフィルタ処理を施すフィルタ処理部とを有す
る時空間フィルタ装置。
6. A spatio-temporal filter device for limiting a band of an image, comprising: an edge detection unit for detecting an edge of an input image; an edge information storage unit for storing edge information of each detected pixel; A plurality of edge density measurement units that measure the density of edge pixels in the vicinity of a different range, and an edge attention determination unit that determines whether an edge pixel is a pixel of a region of interest based on the edge densities of the plurality of ranges. A filter selection unit that selects an edge pixel filter for an edge pixel from among a plurality of filters having different set frequency characteristics, and selects a non-edge pixel filter for a pixel that is not an edge pixel; The frequency of the edge pixel filter preset by the filter selection unit is determined according to the determination unit determining whether the edge pixel is the attention area. A spatiotemporal filter device having a filter control unit for controlling numerical characteristics and a filter processing unit for performing a filter process on an input image.
【請求項7】 画像の帯域を制限する時空間フィルタ装
置であって、 入力画像のエッジを検出するエッジ検出部と、 検出された各画素のエッジ情報を蓄積するエッジ情報蓄
積部と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測部と、 エッジ密度からエッジ画素が注目領域の画素かどうかを
判断するエッジ注目判断部と、 前記エッジ注目判断部によって注目領域ではないと判断
された画素に対して、その画素の周辺の注目領域ではな
いと判断された画素の密度を計測する注目画素計測部
と、 注目領域ではないと判断された画素に対して、その周辺
における注目領域ではないと判断された画素の密度か
ら、その画素の注目領域に再度分類するかどうかを判断
する注目画素補正部と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択部と、 前記エッジ注目判断部における、エッジ画素が注目領域
かどうかの判断、または前記注目画素補正部における、
画素を注目領域に再度分類するかどうかの判断にしたが
い、前記フィルタ選択ステップで予め設定されているエ
ッジ画素用フィルタの周波数特性を制御するフィルタ制
御部と、 入力画像にフィルタ処理を施すフィルタ処理部とを有す
る時空間フィルタ装置。
7. A spatio-temporal filter device for limiting a band of an image, comprising: an edge detection unit for detecting an edge of an input image; an edge information storage unit for storing edge information of each detected pixel; An edge density measuring unit that measures the density of edge pixels around the edge of the image, an edge attention determining unit that determines whether the edge pixel is a pixel of the attention area based on the edge density, and the edge attention determination unit determines that the pixel is not the attention area. A pixel of interest measurement unit that measures the density of a pixel that is determined not to be a region of interest around the pixel, and a pixel of interest that is determined to be not a region of interest. A pixel-of-interest correction unit that determines whether or not to re-classify the pixel into a region of interest based on the density of the pixel determined to be non-existent; A filter selection unit that selects an edge pixel filter as an edge pixel from among a plurality of filters, and selects a non-edge pixel filter as a non-edge pixel; Judgment whether or not the region, or in the target pixel correction unit,
A filter control unit for controlling a frequency characteristic of an edge pixel filter preset in the filter selection step in accordance with a determination as to whether or not pixels are to be re-classified into a region of interest; a filter processing unit for performing a filter process on an input image And a spatio-temporal filter device comprising:
【請求項8】 画像の帯域を制限する時空間フィルタ装
置であって、 入力画像のエッジを検出するエッジ検出部と、 検出された各画素のエッジ情報を蓄積するエッジ情報蓄
積部と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測するエッジ密度計測部と、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断部と、 前記エッジ注目判断部によって注目領域ではないと判断
された画素に対して、その画素の周辺の注目領域ではな
いと判断された画素の密度を計測する注目画素計測部
と、 注目領域ではないと判断された画素に対して、その周辺
における注目領域ではないと判断された画素の密度か
ら、その画素の注目領域に再度分類するかどうかを判断
する注目画素補正部と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択部と、 前記エッジ注目判断部における、エッジ画素が注目領域
かどうかの判断、または前記注目画素補正部における、
画素を注目領域に再度分類するかどうかの判断にしたが
い、前記フィルタ選択ステップで予め設定されているエ
ッジ画素用フィルタの周波数特性を制御するフィルタ制
御部と、 入力画像にフィルタ処理を施すフィルタ処理部とを有す
る時空間フィルタ装置。
8. A spatio-temporal filter device for limiting a band of an image, comprising: an edge detection unit for detecting an edge of an input image; an edge information storage unit for storing edge information of each detected pixel; An edge density measuring unit that measures the density of edge pixels around different areas in different ranges; an edge attention determining unit that determines whether an edge pixel is a pixel in a region of interest based on a plurality of ranges of edge densities; For a pixel that is determined not to be a region of interest by the determination unit, a pixel of interest measurement unit that measures the density of pixels that are determined to be not a region of interest around the pixel, and a pixel that is determined to be not a region of interest A pixel-of-interest correction unit that determines whether or not to re-classify the pixel into a region of interest based on the density of the pixels that are determined not to be the region of interest in the vicinity thereof; A filter selection unit that selects an edge pixel filter for an edge pixel from among a plurality of filters having different set frequency characteristics, and selects a non-edge pixel filter for a pixel that is not an edge pixel; In the determination unit, whether the edge pixel is a region of interest, or in the pixel of interest correction unit,
A filter control unit for controlling a frequency characteristic of an edge pixel filter preset in the filter selection step in accordance with a determination as to whether or not pixels are to be re-classified into a region of interest; a filter processing unit for performing a filter process on an input image And a spatio-temporal filter device comprising:
【請求項9】 画像の帯域を制限する帯域制限プログラ
ムであって、 入力画像のエッジを検出するエッジ検出手順と、 各画素のエッジ情報を蓄積するエッジ情報蓄積手順と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測手順と、 エッジ密度からエッジ画素が注目領域の画素かどうかを
判断するエッジ注目判断手順と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択手順と、 前記エッジ注目判断手順における、エッジ画素が注目領
域かどうかの判断にしたがい、前記フィルタ選択手順で
予め設定されているエッジ画素用フィルタの周波数特性
を制御するフィルタ制御手順と、 入力画像にフィルタ処理を施すフィルタ処手順をコンピ
ュータに実行させるための帯域制限プログラムを記録し
た記録媒体。
9. A band limiting program for limiting a band of an image, comprising: an edge detecting procedure for detecting an edge of an input image; an edge information storing procedure for storing edge information of each pixel; An edge density measurement procedure for measuring pixel density; an edge attention determination procedure for determining whether an edge pixel is a pixel of an attention area based on the edge density; and an edge among a plurality of filters having different preset frequency characteristics. A filter selection procedure of selecting a filter for an edge pixel for a pixel and a filter for a non-edge pixel for a pixel that is not an edge pixel, and in the edge attention determination procedure, according to the determination of whether the edge pixel is an attention area, A filter control procedure for controlling the frequency characteristics of the edge pixel filter preset in the filter selection procedure; A recording medium on which a band limiting program for causing a computer to execute a filtering process for performing a filtering process on an input image is recorded.
【請求項10】 画像の帯域を制限する帯域制限プログ
ラムであって、 入力画像のエッジを検出するエッジ検出手順と、 各画素のエッジ情報を蓄積するエッジ情報蓄積手順と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測するエッジ密度計測手順と、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断手順と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択手順と、 前記エッジ注目判断手順における、エッジ画素が注目領
域かどうかの判断にしたがい、前記フィルタ選択手順で
予め設定されているエッジ画素用フィルタの周波数特性
を制御するフィルタ制御手順と、 入力画像にフィルタ処理を施すフィルタ処理手順をコン
ピュータに実行させるための帯域制限プログラムを記録
した記録媒体。
10. A band limiting program for limiting a band of an image, comprising: an edge detecting procedure for detecting an edge of an input image; an edge information accumulating procedure for accumulating edge information of each pixel; An edge density measurement procedure for measuring pixel densities in different ranges; an edge attention determination procedure for determining whether an edge pixel is a pixel of an attention area based on a plurality of ranges of edge densities; and a preset frequency characteristic. Among a plurality of filters different from each other, an edge pixel filter is selected for an edge pixel, and a non-edge pixel filter is selected for a pixel that is not an edge pixel. Is a region of interest, the frequency of the edge pixel filter preset in the filter selection procedure is determined. A recording medium recording a band limiting program for causing a computer to execute a filter control procedure for controlling numerical characteristics and a filter processing procedure for performing a filtering process on an input image.
【請求項11】 画像の帯域を制限する帯域制限プログ
ラムであって、 入力画像のエッジを検出するエッジ検出手順と、 各画素のエッジ情報を蓄積するエッジ情報蓄積手順と、 各画素の周辺におけるエッジ画素の密度を計測するエッ
ジ密度計測手順と、 エッジ密度からエッジ画素が注目領域の画素かどうかを
判断するエッジ注目判断手順と、 エッジ注目判断手順によって注目領域ではないと判断さ
れた画素に対して、その画素の周辺の注目領域ではない
と判断された画素の密度を計測する注目画素計測手順
と、 注目領域ではないと判断された画素に対して、その周辺
における注目領域ではないと判断された画素の密度か
ら、その画素の注目領域に再度分類するかどうかを判断
する注目画素補正手順と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択手順と、 前記エッジ注目判断手順における、エッジ画素が注目領
域かどうかの判断、または前記注目画素補正手順におけ
る、画素を注目領域に再度分類するかどうかの判断にし
たがい、前記フィルタ選択手順で予め設定されているエ
ッジ画素用フィルタの周波数特性を制御するフィルタ制
御手順と、 入力画像にフィルタ処理を施すフィルタ処理手順とをコ
ンピュータに実行させるための帯域制限プログラムを記
録した記録媒体。
11. A band limiting program for limiting a band of an image, comprising: an edge detecting procedure for detecting an edge of an input image; an edge information accumulating procedure for accumulating edge information of each pixel; An edge density measurement procedure for measuring pixel density, an edge attention determination procedure for determining whether an edge pixel is a pixel in an attention area based on the edge density, and a pixel determined to be not an attention area by the edge attention determination procedure A pixel-of-interest measurement procedure for measuring the density of pixels determined not to be the region of interest in the vicinity of the pixel; and determining that the pixel determined to be not the region of interest is not the region of interest in the vicinity. A pixel-of-interest correction procedure for determining whether or not to re-classify a pixel into a region of interest based on the pixel density, and a difference in a preset frequency characteristic. A filter selection step of selecting an edge pixel filter as an edge pixel from among a plurality of filters, and a non-edge pixel filter as a non-edge pixel pixel; The frequency characteristics of the edge pixel filter preset in the filter selection procedure are controlled in accordance with the determination as to whether or not the pixel is the area of interest or whether or not to re-classify the pixel into the area of interest in the pixel-of-interest correction procedure. A recording medium storing a band limiting program for causing a computer to execute a filter control procedure and a filter processing procedure for performing a filter process on an input image.
【請求項12】 画像の帯域を制限する帯域制限プログ
ラムであって、 入力画像のエッジを検出するエッジ検出手順と、 各画素のエッジ情報を蓄積するエッジ情報蓄積手順と、 各画素の周辺におけるエッジ画素の密度を相異なる範囲
に対して計測する複数のエッジ密度計測手順と、 複数の範囲のエッジ密度からエッジ画素が注目領域の画
素かどうかを判断するエッジ注目判断手順と、 注目領域ではないと判断された画素に対して、その画素
の周辺の注目領域ではないと判断された画素の密度か
ら、その画素を注目領域に再度分類するかどうかを判断
する注目画素補正手順と、 予め設定されている周波数特性の異なる複数のフィルタ
の中から、エッジ画素にはエッジ画素用フィルタを選択
し、エッジ画素ではない画素には非エッジ画素用フィル
タを選択するフィルタ選択手順と、 前記エッジ注目判断手順における、エッジ画素が注目領
域かどうかの判断、または前記注目画素補正手順におけ
る、画素を注目領域に再度分類するかどうかの判断にし
たがい、前記フィルタ選択手順で予め設定されているエ
ッジ画素用フィルタの周波数特性を制御するフィルタ制
御手順と、 入力画像にフィルタ処理を施すフィルタ処理手順をコン
ピュータに実行させるための帯域制限プログラムを記録
した記録媒体。
12. A band limiting program for limiting a band of an image, comprising: an edge detecting procedure for detecting an edge of an input image; an edge information accumulating procedure for accumulating edge information of each pixel; A plurality of edge density measurement procedures for measuring pixel densities in different ranges; an edge attention determination procedure for determining whether an edge pixel is a pixel of an attention area based on the edge densities of a plurality of ranges; A pixel-of-interest correction procedure for determining whether to re-classify the pixel into a region of interest based on the density of the pixel determined not to be the region of interest surrounding the pixel for the determined pixel; From among a plurality of filters having different frequency characteristics, a filter for edge pixels is selected for edge pixels, and a filter for non-edge pixels is selected for pixels that are not edge pixels. According to a filter selection procedure for selecting a filter, in the edge attention determination procedure, it is determined whether or not an edge pixel is an attention area, or in the attention pixel correction procedure, in accordance with a determination as to whether or not to re-classify a pixel as an attention area. A recording medium on which a band control program for causing a computer to execute a filter control procedure for controlling a frequency characteristic of an edge pixel filter preset in a filter selection procedure and a filter processing procedure for performing a filter process on an input image is recorded.
JP2000042878A 2000-02-21 2000-02-21 Time space and control method, time spatial filter, and storage medium recording time space band limit program Pending JP2001238209A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000042878A JP2001238209A (en) 2000-02-21 2000-02-21 Time space and control method, time spatial filter, and storage medium recording time space band limit program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000042878A JP2001238209A (en) 2000-02-21 2000-02-21 Time space and control method, time spatial filter, and storage medium recording time space band limit program

Publications (1)

Publication Number Publication Date
JP2001238209A true JP2001238209A (en) 2001-08-31

Family

ID=18565890

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000042878A Pending JP2001238209A (en) 2000-02-21 2000-02-21 Time space and control method, time spatial filter, and storage medium recording time space band limit program

Country Status (1)

Country Link
JP (1) JP2001238209A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002152758A (en) * 2000-11-10 2002-05-24 Nippon Telegr & Teleph Corp <Ntt> Image coder and image coding method
JP2006229749A (en) * 2005-02-18 2006-08-31 Sharp Corp Image processor and image processing method
EP1906652A2 (en) * 2006-09-28 2008-04-02 Tandberg Television ASA Image processing
US8704843B2 (en) 2009-12-28 2014-04-22 Canon Kabushiki Kaisha Image processing apparatus and image processing method

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002152758A (en) * 2000-11-10 2002-05-24 Nippon Telegr & Teleph Corp <Ntt> Image coder and image coding method
JP2006229749A (en) * 2005-02-18 2006-08-31 Sharp Corp Image processor and image processing method
EP1906652A2 (en) * 2006-09-28 2008-04-02 Tandberg Television ASA Image processing
EP1906652A3 (en) * 2006-09-28 2009-09-30 Ericsson AB Image processing
US8704843B2 (en) 2009-12-28 2014-04-22 Canon Kabushiki Kaisha Image processing apparatus and image processing method

Similar Documents

Publication Publication Date Title
KR101472483B1 (en) Video screen display method and device
JP3862140B2 (en) Method and apparatus for segmenting a pixelated image, recording medium, program, and image capture device
US20020172420A1 (en) Image processing apparatus for and method of improving an image and an image display apparatus comprising the image processing apparatus
JP5053373B2 (en) Adaptive pixel-based filtering
US8379975B2 (en) Image processing device and method, and program recording medium
US8532428B2 (en) Noise reducing apparatus, noise reducing method, and noise reducing program for improving image quality
JPH11205714A (en) Method and device for automatically detecting aspect format of digital video image
CN101405765B (en) Content self-adapting wave filter technology
KR101034518B1 (en) Image processing apparatus for and method of improving an image and an image display apparatus comprising the image processing apparatus
US7932955B2 (en) Method and system for content adaptive analog video noise detection
JP2002247414A (en) Image data processing method
US20010024515A1 (en) Method and apparatus to interpolate video frames
JP2001238209A (en) Time space and control method, time spatial filter, and storage medium recording time space band limit program
GB2356514A (en) Film defect correction
CN109360189B (en) Method for detecting pixel defect point of image of uncooled infrared movement
JP2000194846A (en) Method for filtering and eliminating noise, and image processing system
KR20090026449A (en) Method and apparatus for compensating color of image obtained from image sensor
JP3628564B2 (en) BAND LIMIT METHOD, FILTER DEVICE, AND RECORDING MEDIUM CONTAINING BAND LIMIT PROGRAM
TW202046699A (en) Method for detecting video quality and image processing circuit thereof
US20080063063A1 (en) Electronic device and method for block-based image processing
CN111476810B (en) Image edge detection method and device, electronic equipment and storage medium
JP2002247412A (en) Method for reducing noise in video signal
KR20080072450A (en) Method for processing images in order to detect properties of image area and to filter images and apparatus thereof
US8358850B2 (en) Determination method of edge direction
KR20060131832A (en) Determining relevance values