WO1999062264A1 - Block noise detector and block noise eliminator - Google Patents

Block noise detector and block noise eliminator Download PDF

Info

Publication number
WO1999062264A1
WO1999062264A1 PCT/JP1999/002589 JP9902589W WO9962264A1 WO 1999062264 A1 WO1999062264 A1 WO 1999062264A1 JP 9902589 W JP9902589 W JP 9902589W WO 9962264 A1 WO9962264 A1 WO 9962264A1
Authority
WO
WIPO (PCT)
Prior art keywords
block
video signal
noise
horizontal
frequency component
Prior art date
Application number
PCT/JP1999/002589
Other languages
English (en)
French (fr)
Inventor
Yutaka Nio
Satoshi Okamoto
Katsumi Terai
Naoji Okumura
Kazuhito Tanaka
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to EP99919649A priority Critical patent/EP0998146A4/en
Priority to US09/463,215 priority patent/US6738528B1/en
Priority to KR10-1999-7012440A priority patent/KR100497606B1/ko
Publication of WO1999062264A1 publication Critical patent/WO1999062264A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H04N19/865Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness with detection of the former encoding block subdivision in decompressed video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Definitions

  • the present invention relates to a block noise detecting device and a block noise removing device, and more particularly, to an image code used when a digital image is compressed and transmitted / recorded.
  • the present invention relates to a block noise detecting device and a block noise removing device for removing block noise generated in a digital image.
  • the decompression method includes a lossless encoding method and an irreversible encoding method.
  • the lossless encoding method uses an encoding method that, when the encoded data is decoded, the data before encoding can be completely restored.
  • the irreversible encoding method is that if the encoded data is decoded, it is returned to data with some errors, and it can be completely restored to the data before encoding Is a method that uses unlimited coding.
  • DCT discrete cosine transform
  • one frame image is divided into a plurality of blocks.
  • One block is, for example, a collection of 8 ⁇ 8 two-dimensional pixel data.
  • DCT performs processing with one block as one unit.
  • the data coded by DCT and quantization can be reconstructed by inverse quantization and inverse DC, and by inverse quantization and inverse DCT, The image containing the noise is restored.
  • FIG. 24 is a diagram illustrating the concept of block noise elimination in the conventional method.
  • FIG. 24 (a) shows a one-frame image 701
  • FIG. 24 (b) shows a block 704 in FIG. 24 (a) adjacent to the block 704.
  • the boundary with the block 705 (hereinafter referred to as the block boundary) is shown by enlarging one line of the block 706.
  • Fig. 24 (c) is the line of Fig. 24 (b) It represents the state of the pixel after each pixel has been smoothed.
  • pixel a of block 704 and pixel b of block 705 are pixels existing at block boundary 706.
  • the pixel level of pixel a and pixel b is If the pixel difference is larger than the level change in the block, such as the pixel level difference between pixel c and pixel d, this part becomes very noisy because it becomes block noise. It looks like a new image.
  • block noise is noise generated due to a level difference between pixels existing before and after a block boundary in a one-frame image. .
  • Block noise occurs when using an irreversible coding method that performs processing as one block, such as DCT and quantization.
  • a process of smoothing the entire image is generally performed. Smoothing means finding the average pixel using several pixels before and after the pixel to be processed. Smoothing an image with a few taps of low-pass filter (hereinafter referred to as LPF) is also a smoothing process.
  • LPF low-pass filter
  • the above conventional method has a problem that block noise can be removed only when the block size and the block boundary are completely known.
  • an object of the present invention is to provide a block noise that accurately detects a block boundary even when the block boundary from which block noise should be removed is unclear. It is to provide a detection device.
  • Another object of the present invention is to remove the block noise without blurring the image, and to reduce the block noise even at the block boundary.
  • an object of the present invention is to provide a block noise removing device attached to a video scene, which does not perform smoothing.
  • another object of the present invention is to provide a multi-format (for example, an interlaced / progressive) analog signal or an external digital signal.
  • An object of the present invention is to provide a block noise eliminator capable of removing a block noise existing in an input signal even in the case of a signal (for example, DVD or STB).
  • the present invention also provides that a block noise detection device is used to reproduce a dot clock in a video processing system. Disclosure of the invention
  • the present invention has the following features in order to achieve the above object.
  • the first aspect is a block generated from a digital video signal subjected to irreversible encoding processing for each predetermined image block in accordance with the decoding processing of the video signal.
  • Means for detecting a block boundary (a position where a block noise is generated) in a video signal Means for detecting a block boundary (a position where a block noise is generated) in a video signal.
  • the block boundary and the block noise level of an image divided into a plurality of blocks are accurately detected, and thus the block is obtained. This enables detection of shock noise.
  • the second aspect is a block noise generated from the digital video signal subjected to the irreversible encoding process for each predetermined image block in accordance with the decoding process of the video signal.
  • Device that detects noise is a block noise generated from the digital video signal subjected to the irreversible encoding process for each predetermined image block in accordance with the decoding process of the video signal.
  • Signal extraction means for inputting a video signal and extracting only high-frequency components from the video signal
  • Absolute value means for converting the high-frequency component signal output by the signal extraction means into an absolute value
  • the accumulating means for accumulating and adding the high-frequency component signal after the absolute value output by the absolute value means in a predetermined period, and the pro- Periodic detection means for detecting periodicity of the noise;
  • a block boundary determining means for obtaining a block boundary from the periodic signal detected by the periodic detecting means.
  • the periodicity of block noise is detected, and the block boundary of an image divided into a plurality of blocks can be accurately detected. To detect block noise It is possible to go out.
  • the fourth phase is a phase subordinate to the second and third phases
  • Frame difference means for receiving a video signal and calculating a signal difference between a plurality of predetermined frames of the video signal
  • the noise region the region where the block noise to be removed exists (hereinafter, the noise region)
  • the block boundary determined by the block boundary determining means is masked with the noise region determined by the region determining means, and a block boundary corresponding to the noise region is determined. Further, a edge control means is provided.
  • the magnitude of the motion of the image including the block noise is finer than that of the second and third aspects.
  • the block boundary can be classified by the correlation. As a result, it is possible to detect only a portion of the video scene having a large block noise as a block boundary.
  • the signal difference between the current frame and the immediately preceding frame is obtained by the frame difference means of the fourth aspect.
  • the area judging means of the fourth and fifth aspects is a part exceeding the threshold value and a part not exceeding the threshold value. Binarization of the part and. This makes it possible to easily provide a noise area.
  • the seventh aspect is a phase subordinate to the fourth to sixth aspects
  • Singular point removing means for excluding a noise portion distributed in a predetermined small area from the noise areas determined by the area determining means, is further provided.
  • the block edge control means is characterized in that the block boundaries determined by the block boundary determination means are masked in a noise region after exclusion output by the singular point removal means.
  • the removal effect by smoothing is difficult to appear, and the image is blurred. I do.
  • the effect of the frame difference processing can be enhanced, high image quality can be obtained, and at the same time, the amount of data can be reduced.
  • the signal extraction means, the absolute value means, the accumulative addition means, and the period detection means in the second to seventh aspects are provided with a horizontal Block boundaries can be detected in either the first direction, the vertical direction, or the bidirectional direction.
  • the ninth aspect is a phase subordinate to the eighth aspect, and when each process is performed in the vertical direction of the video signal,
  • the period detecting means is characterized in that a frame used for detection is sequentially changed in accordance with a format of an input video signal.
  • the format of the input video signal (for example, an interface type Irrespective of the progressive method, it is possible to detect block boundaries accurately without deteriorating the periodicity of the block image.
  • a digital video signal subjected to irreversible encoding processing for each predetermined image block is generated along with the decoding processing of the video signal. This is a device that detects and removes block noise
  • the block boundaries and the block noise level of an image divided into a plurality of blocks can be accurately determined.
  • the block noise can be detected, and the block noise existing at the block boundary can be removed.
  • a digital video signal subjected to irreversible encoding processing for each predetermined image block is accompanied by decoding processing of the video signal. Detecting block noise that occurs Device to remove
  • Signal extraction means for inputting a video signal and extracting only high-frequency components from the video signal
  • Absolute value means for converting the high-frequency component signal output by the signal extraction means into an absolute value
  • a cumulative adding means for cumulatively adding the high-frequency component signal after the absolute value output by the absolute value converting means in a predetermined period, and a block based on the cumulative addition result output from the cumulative adding means.
  • Periodic detection means for detecting the periodicity of noise;
  • Block boundary determining means for obtaining a block boundary from the periodic signal detected by the periodic detecting means
  • Block noise removing means for removing block noise from the block boundary is provided.
  • the periodicity of block noise is detected, and the block boundary of an image divided into a plurality of blocks is accurately detected.
  • the block noise can be detected, and the block noise existing at the block boundary can be removed.
  • the block boundary determination means of the first aspect is used to binarize the position of the block boundary and the other positions. I do. This makes it easy to give block boundaries.
  • the thirteenth phase is a phase subordinate to the first and second phases
  • Frame difference means for receiving a video signal and calculating a signal difference between a plurality of predetermined frames of the video signal; Area determining means for determining a noise area according to whether a difference value of a signal output from the frame difference means exceeds a predetermined threshold value,
  • the block boundary determined by the block boundary determining means is masked with the noise area determined by the area determining means, and the block boundary corresponding to the noise area is masked.
  • a block edge control means for obtaining
  • the block noise removing means removes block noise from a block boundary corresponding to the noise region.
  • the eleventh and the eleventh are identical to the thirteenth aspect.
  • the preferred specific fourteenth aspect is the first one.
  • the signal difference between the current frame and the immediately preceding frame is obtained by the frame difference means of the third phase. This makes it possible to detect only a large portion of the block noise in the video scene as a block boundary.
  • a region exceeding the threshold value by the area judging means in the thirteenth and fourteenth phases is a threshold value. Binarization with the part that does not exceed. This makes it possible to easily provide a noise area.
  • the sixteenth phase is a phase subordinate to the thirteenth to fifteenth phases.
  • a singular point removing means for removing a noise portion distributed in a predetermined small area from the noise areas determined by the area determining means;
  • the block edge control means is characterized in that the block boundaries determined by the block boundary determination means are masked in the noise region after exclusion output by the singular point removal means. I do.
  • the image is blurred because the removal effect by smoothing is hard to appear. Remove small areas. As a result, the effect of the frame difference processing can be enhanced, and high image quality can be obtained, and at the same time, the data amount can be reduced.
  • the signal extraction means, the absolute value means, the accumulative addition means and the period detection means in the eleventh to sixteenth aspects are video images. Block boundaries can be detected in either the horizontal or vertical direction of the signal, or in both directions.
  • the eighteenth aspect is a phase subordinate to the seventeenth aspect, further provided with identification means for identifying a format of the input video signal,
  • the identification means should sequentially change the frame used for the detection by the period detection means according to the format. It is characterized by
  • the format of the input video signal (for example, Regardless of the evening-race method or the progressive method, accurate detection of block boundaries is possible without impairing the periodicity of the block image. You.
  • a digital video signal that has undergone irreversible encoding processing for each predetermined image block is generated along with the decoding processing of the video signal.
  • a vertical block boundary detecting means for inputting a video signal and detecting a horizontal block boundary and a block noise amount on the screen corresponding to the video signal.
  • a video signal is input, and a horizontal block boundary detection is performed to detect a vertical block boundary and a block noise amount on the screen corresponding to the video signal.
  • a block area detecting means for specifying block boundaries in all directions in the vertical and horizontal directions based on detection results of the vertical block boundary detecting means and the horizontal block boundary detecting means;
  • a predetermined smoothing process is performed on an input video signal. And means.
  • the block boundary and the block noise level can be accurately detected.
  • appropriate smoothing corresponding to the block noise level can be performed, and the block noise associated with the video scene can be obtained. Can be removed more effectively.
  • the vertical block boundary detection means in the 19th aspect, the vertical block boundary detection means
  • HPF vertical high-pass filter
  • First absolute value means for converting the high frequency component signal output by the vertical HPF into an absolute value
  • a horizontal accumulator for accumulating the high-frequency component signal after the absolute value output from the first absolute value generator in the horizontal direction; and a high-frequency component signal after the accumulative addition output from the horizontal accumulator.
  • a first HPF for extracting high-frequency components
  • First N-point accumulative adding means for accumulatively adding the signal output from the first HPF for each of preset N points (N is a positive integer);
  • a first temporal filer which calculates a signal output from the first HPF in a time direction to detect a block noise amount of a video signal
  • First maximum value detection means for obtaining a maximum value and a position of the maximum value from among the N cumulative addition values obtained by the first N-point cumulative addition means by the cumulative addition;
  • the block noise amount detected by the first temporal filer is masked at the position of the maximum value output by the first maximum value detecting means, and the vertical noise corresponding to the position is masked.
  • a first masking means for finding a block boundary
  • the horizontal HPF and the high-frequency component signal output by the horizontal HPF are converted to absolute values.
  • Second N-point accumulative addition means for accumulating the signal output by the second HPF for each preset N points, and calculating the signal output by the second HPF in the time direction A second temporal signal for detecting the amount of block noise of the video signal,
  • Second maximum value detection means for obtaining a maximum value and a position of the maximum value from among the N cumulative addition values obtained by the second N-point cumulative addition means by the cumulative addition;
  • the block noise amount detected by the second temporal filter is masked at the position of the maximum value output by the second maximum value detection means, and the vertical noise corresponding to the position is masked. And a second masking means for finding a block boundary.
  • the twenty-first aspect is a block noise generated from a video signal that has been subjected to irreversible encoding processing for each predetermined image block in association with the decoding processing of the video signal.
  • This is a device that detects and removes AD conversion means for inputting analog video signals and converting them to digital;
  • Digital decoding means for receiving an encoded digital video signal, performing decoding processing, and outputting the decoded block boundary information
  • the video signal output from the AD conversion means and the video signal output from the digital decoding means are input, and one of the video signals is selectively output according to an external instruction.
  • Block error detection means for identifying block boundaries in all vertical and horizontal directions from the detection results of the vertical block boundary detection means and the horizontal block boundary detection means;
  • a block boundary smoothing unit that performs a predetermined smoothing process on an input video signal in accordance with the block boundaries in all vertical and horizontal directions specified by the block error detecting unit.
  • the vertical block boundary detection unit and the horizontal block boundary detection unit select the block based on each detection result when the video signal output from the ifi AD conversion unit is selected. Select the boundary and select the video signal output by the selector digital decoding means.
  • Block boundary information output by the decryption means The block boundary according to the report is output to a block area detecting means.
  • the twenty-first aspect it is possible to accurately detect a block boundary and a block noise level corresponding to an input video signal. This makes it possible to perform appropriate smoothing corresponding to the block noise level, and to block noise attached to various input video scenes. It is possible to remove the noise more effectively.
  • the vertical block boundary detection means is a vertical block boundary detection means
  • Vertical HPF that extracts only the vertical high-frequency component of the video signal and first absolute value means for converting the high-frequency component signal output by the vertical HPF into an absolute value
  • a horizontal accumulator for accumulating the high-frequency component signal after the absolute value output from the first absolute value generator in the horizontal direction; and a high-frequency component signal after the accumulative addition output from the horizontal accumulator.
  • a first HPF that extracts high-frequency components
  • a first N-point accumulating means for accumulating and adding signals output by the first HPF for each of the preset N points, and a signal output by the first HPF are calculated in a time direction.
  • a first temporal filter for detecting the amount of block noise of the video signal;
  • one of the block boundary information output by the digital decoding means and the position of the maximum value output by the first maximum value detection means is selectively output.
  • the block noise amount detected by the first temporal filter is masked at the block boundary output by the first selector, and the vertical noise corresponding to the position is masked.
  • a first masking means for finding a block boundary
  • Horizontal HPF for extracting only the horizontal high-frequency component of the video signal
  • second absolute value means for converting the high-frequency component signal output by the horizontal HPF into an absolute value
  • a second N-point accumulating means for accumulating the signal output from the second HPF for each of the preset N points, and a signal output from the second HPF in the time direction to calculate the image.
  • a second temporal filer for detecting the amount of signal block noise;
  • Second maximum value detection means for obtaining the maximum value and the position of the maximum value from among the N cumulative addition values obtained by the second N-point cumulative addition means by the cumulative addition; In synchronization with the selection of the selector, one of the block boundary information output by the digital decoding means and the position of the maximum value output by the second maximum value detection means is selectively selected.
  • a second selector that outputs to
  • the block noise amount detected by the second temporal filter is masked at the block boundary output by the second selector to correspond to the position.
  • a second masking means for obtaining a vertical block boundary to be changed is provided.
  • First multiplication means for multiplying the output of the horizontal HPF and the output of the horizontal HPF for extracting only the horizontal high-frequency component of the video signal and the output of the horizontal block boundary detection means
  • First subtraction means for subtracting the output of the first multiplication means from the video signal
  • a second multiplication means for multiplying a vertical HPF for extracting only the vertical high frequency component of the video signal, an output of the vertical HPF, and an output of the vertical block boundary detection means, And second subtraction means for subtracting the output of the second multiplication means from the video signal.
  • the twenty-fourth phase is a phase subordinate to the nineteenth to twenty-third phases
  • the contour correction amount for enhancing the contour portion of the video signal is controlled.
  • An outline correction means is further provided.
  • the twenty-fifth aspect is an aspect subordinate to the nineteenth to twenty-fourth aspects
  • control means displays an on-screen display on a screen in a predetermined form with a result of the determination.
  • information is provided on an on-screen display ( ⁇ ).
  • SD on-screen display
  • the twenty-sixth aspect is a vertical direction generated from a digital video signal subjected to irreversible encoding for each predetermined image block and accompanying the decoding of the video signal.
  • a device that detects block noise is a device that detects block noise.
  • a vertical H P F that inputs a video signal and extracts only the vertical high frequency component of the video signal
  • Absolute value means for converting the high frequency component signal output from the vertical HPF into an absolute value
  • Horizontal accumulating means for accumulating in the horizontal direction the absolute value-converted high-frequency component signal output by the absolute value means
  • N-point accumulative adding means for accumulatively adding the signal output by the HPF for each of N points set in advance
  • a temporal filter that calculates the signal output from the HPF in the time direction to detect the amount of block noise in the video signal
  • a maximum value detection means for obtaining a maximum value and a position of the maximum value from among the N cumulative addition values obtained by the N-point cumulative addition means by the cumulative addition;
  • the block noise amount detected by the temporal filter is masked at the position of the maximum value output from the maximum value detecting means, and the vertical noise corresponding to the position is masked. And a masking means for finding a mask boundary.
  • the 26th aspect is the vertical block boundary.
  • the device that detects the field is configured independently.
  • the digital video signal subjected to the irreversible encoding process for each of the predetermined image blocks is used in conjunction with the decoding process of the video signal.
  • Absolute value means for converting the high-frequency component signal output by the horizontal HPF into an absolute value
  • N-point accumulative addition means for accumulatively adding the signal output from the HPF at each of preset N points
  • a temporal filter that calculates the output noise of the video signal by calculating the signal output by the HPF in the time direction
  • a maximum value detecting means for obtaining a maximum value and a position of the maximum value from among the N cumulative addition values obtained by the N-point cumulative addition means by the cumulative addition;
  • the block noise amount detected by the temporal filter is masked at the position of the maximum value output by the maximum value detection means, and the position corresponding to the position is masked.
  • Masking means for finding a horizontal block boundary is provided.
  • the twenty-seventh station has a device for independently detecting a horizontal block boundary.
  • reproduction is performed in a video processing system that processes a digital video signal that has been subjected to irreversible encoding for each predetermined image block. It is a device that controls the dot clock.
  • a clock generating means for generating a dot clock for use in a video processing system based on the horizontal synchronization pulse
  • a horizontal block boundary detecting means for inputting a video signal and detecting a vertical block boundary on the screen for the video signal
  • the delay amount of the clock generation means is set so that the block boundary detected by the horizontal block boundary detection means has a single maximum point (peak) periodically. And variable control means.
  • a horizontal block boundary corresponding to an input video signal is detected, and a dot clock is detected based on this position. Play the sound. This makes it possible to accurately reproduce a clock whose phase matches that of the original video signal's dot clock.
  • Absolute value means for converting the high-frequency component signal output by the horizontal HPF into an absolute value
  • Vertical accumulation means for vertically accumulating the absolute value of the high-frequency component signal output by the absolute value means,
  • An HPF for extracting a high-frequency component from the high-frequency component-signal after the cumulative addition output from the vertical cumulative addition means, and
  • N-point accumulating means for accumulatively adding the signal output from the HPF for each of N points set in advance.
  • the 30th phase is a block generated from a digital video signal that has undergone irreversible encoding for each predetermined image block and accompanying the decoding of the video signal.
  • a medium for recording a program for executing a method for detecting noise on a computer device comprising:
  • a program for realizing an operating environment including a step for obtaining a block boundary from a detected periodic signal on a computer device is recorded.
  • the thirty-first phase is a phase subordinate to the thirtieth phase and further includes a step for removing block noise from a block boundary.
  • the third phase is a phase subordinate to the thirtieth to thirty-second phases
  • the method further includes a step of masking the block boundary with the noise region and obtaining a block boundary corresponding to the noise region.
  • a step for calculating the signal difference of the third phase is performed, and the difference between the current frame and the immediately preceding frame is determined. Find the signal difference between them.
  • a step for judging the noise area of the 33rd and 34th aspects is performed. Binarization of the part that exceeds the threshold value and the part that does not exceed the threshold value is performed.
  • the 36th phase is a phase subordinate to the 33rd to 35th phases.
  • noise regions further includes a step for excluding a noise portion distributed within a predetermined small region
  • the step for finding a block boundary corresponding to a noise region is characterized in that the block boundary is masked with the noise region after the exclusion.
  • the preferable 37th aspect is 30th to 36th.
  • Each step in the phase (b) detects a block boundary in either one of the horizontal and vertical directions of the video signal, or in both directions. I can.
  • the 38th aspect is a phase subordinate to the 37th aspect, and when each process is performed in the vertical direction of the video signal, the step of detecting the periodicity is performed by the input video signal.
  • the feature is to sequentially change the frame used for detection according to the signal format.
  • the ninth aspect is a block generated from a digital video signal that has been subjected to irreversible encoding processing for each predetermined image block, along with the decoding processing of the video signal.
  • An operation environment including a step of performing a predetermined smoothing on a video signal according to block boundaries in all directions is realized on a computer. Program for You.
  • the steps to detect the horizontal direction are:
  • Steps to extract only the vertical high-frequency component of the video signal Steps to convert the extracted high-frequency component signal to absolute value, and Step to extract the high-frequency component after absolute value. Steps to accumulate and
  • a step for further extracting high-frequency components from the high-frequency component signals after the cumulative addition is a step for further extracting high-frequency components from the high-frequency component signals after the cumulative addition
  • the step for extracting the high frequency component calculates the signal output in the time direction and detects the block noise amount of the video signal.
  • the step to detect the vertical direction is
  • the swap to be cumulatively added A step for further extracting a high-frequency component from the high-frequency component signal after the cumulative addition;
  • a step of detecting the amount of block noise of the video signal by calculating the signal output by the step for extracting the high frequency component in the time direction;
  • the forty-first aspect is a block generated from a video signal on which irreversible encoding processing has been performed for each predetermined image block and accompanying the decoding processing of the video signal.
  • the selected step displays the video signal output on the screen. Steps to detect horizontal block boundaries and block noise in
  • the step for detecting the horizontal direction and the step for detecting the vertical direction include, in the case of the video signal output by the step to be converted, a block boundary based on each detection result.
  • a computer device is provided with an operating environment characterized by outputting a block boundary according to the decoded block boundary information. The program to realize the above is recorded.
  • the steps to detect the horizontal direction are:
  • a step of further extracting a high-frequency component from the high-frequency component signal after the cumulative addition Further, the signal output by the step for extracting the high frequency component is
  • the step to detect the vertical direction is
  • Step for extracting only the horizontal high-frequency component of the video signal Step for converting the extracted high-frequency component signal to an absolute value, and cumulative addition of the absolute value-converted high-frequency component signal in the vertical direction Steps to perform,
  • the signal output from the step for extracting the high frequency component is calculated in the time direction to detect the block noise amount of the video signal. Steps to perform
  • the steps to perform the smoothing are:
  • a horizontal multiplication step for multiplying the output of the horizontal step and the output of the vertical detection step
  • a vertical multiplication step for multiplying the output of the vertical step by the output of the horizontal detection step
  • the feature is that block noise is removed according to the block noise amount.
  • the forty-fourth phase is a phase subordinate to the thirty-ninth to fourth aspects, and
  • the 45th phase is a phase subordinate to the 39th to 44th phases
  • a step for determining the input video signal is further performed. Included in
  • the step of performing the determination is characterized in that the result of the determination is displayed on the screen in a predetermined form on an on-screen display.
  • a vertical video generated from a digital video signal subjected to irreversible encoding processing for each predetermined image block in accordance with the decoding processing of the video signal is performed.
  • a step for extracting only the vertical or horizontal high frequency components of the video signal is
  • a step of further extracting a high-frequency component from the high-frequency component signal after the cumulative addition A signal for outputting a signal output from a step for extracting a high-frequency component; a step for cumulatively adding a signal to each of preset N points;
  • a step for calculating the amount of block noise of the video signal by calculating the signal output from the step for extracting the high frequency component in the time direction, and
  • a program for realizing the operating environment on a computer device is recorded.
  • the forty-seventh aspect is a video playback system that processes a digital video signal that has undergone irreversible encoding for each predetermined image block.
  • the block Based on the horizontal synchronization pulse, the block detects the block to the clock generator that generates the dot clock for use in the video processing system. A step of varying the amount of clock delay so that the clock boundary has a single maximum point periodically is realized on a computer device. Program is recorded.
  • Step for extracting only the horizontal high-frequency component of the video signal Step for converting the extracted high-frequency component signal to an absolute value, and cumulative addition of the absolute value of the high-frequency component signal in the vertical direction Steps to perform,
  • a step for cumulatively adding the signal output from the step for extracting the high frequency component to each of the preset N points is further included.
  • the 30th to 48th aspects are computer programs for executing the functions realized by the devices of the 1st to 29th aspects.
  • This is a recording medium on which is recorded. This corresponds to supplying the first to 29th aspects in the form of software to existing equipment.
  • FIG. 1 is a block diagram showing a configuration of a block noise detection device 10 according to the first embodiment of the present invention.
  • Fig. 2 explains the operation of the vertical HPF 11 and horizontal HPF 12 and the absolute value converters 13 and 14, the horizontal accumulator 15 and the vertical accumulator 16 of Fig. 1.
  • Fig. 2 explains the operation of the vertical HPF 11 and horizontal HPF 12 and the absolute value converters 13 and 14, the horizontal accumulator 15 and the vertical accumulator 16 of Fig. 1.
  • FIG. 3 is a diagram illustrating an example of an operation performed by the horizontal peak detector 18 (and the vertical peak detector 17) in FIG.
  • FIG. 4 is a diagram for explaining the operation performed by the binarizing section 19 in FIG. is there.
  • FIG. 5 is a block diagram showing a configuration of a block noise detection device 20 according to the second embodiment of the present invention.
  • FIG. 6 is a diagram for explaining an example of the operation performed by the singular point removing unit 24 in FIG.
  • FIG. 7 is a diagram illustrating an example of an operation performed by the BE control unit 31 in FIG.
  • FIG. 8 is a block diagram showing a configuration of a block noise removing device 30 according to a third embodiment of the present invention.
  • FIG. 9 is a block diagram showing an example of the configuration of the format identification circuit 31 of FIG.
  • FIG. 10 is a block diagram showing an example of the configuration of the block noise removing circuit 32 of FIG.
  • FIG. 11 is a diagram illustrating an example of the smoothing process performed by the block noise removal circuit 32 of FIG.
  • FIG. 12 is a block diagram showing a configuration of a block noise removing device 40 according to a fourth embodiment of the present invention.
  • FIG. 13 is a block diagram showing an example of the configuration of the horizontal block boundary detection unit 41 of FIG.
  • FIG. 14 is a block diagram showing an example of the configuration of the vertical block boundary detection section 42 of FIG.
  • FIG. 15 is a block diagram showing an example of the configuration of the block boundary smoothing section 44 of FIG.
  • FIG. 16 is a block diagram showing an example of the configuration of the contour correction section 45 of FIG.
  • FIG. 17 shows a block noise according to a fifth embodiment of the present invention.
  • FIG. 3 is a block diagram showing a configuration of a noise removal device 50.
  • FIG. 18 is a block diagram showing an example of the configuration of the horizontal block boundary detecting section 54 of FIG.
  • FIG. 19 is a block diagram showing an example of the configuration of the vertical block boundary detection unit 55 of FIG.
  • FIG. 20 is a block diagram showing a configuration of a dot clock detection device 60 according to the sixth embodiment of the present invention.
  • FIG. 21 is a block diagram showing an example of the configuration of the horizontal block boundary detection unit 64 of FIG.
  • FIG. 22 is a diagram illustrating an example of the cumulative addition result of the horizontal block noise output from the horizontal block boundary detection unit 64 in FIG. 20.
  • FIG. 23 is a diagram for explaining the relationship between the video signal 601 and the clock (CK).
  • Figure 24 is a diagram illustrating the concept of block noise removal in the conventional method.
  • FIG. 1 is a block diagram showing a configuration of a block noise detecting device according to a first embodiment of the present invention.
  • a block noise detecting device 10 according to the first embodiment includes a vertical high-pass filter (hereinafter, referred to as a vertical HPF) 11, The horizontal eight-in-one filter (hereinafter referred to as the horizontal HPF) 12, the absolute value converters 13 and 14, the horizontal cumulative adder 15, the vertical cumulative adder 16, and the vertical It has a peak detecting section 17, a horizontal peak detecting section 18, and a binarizing section 19.
  • a vertical HPF vertical high-pass filter
  • the horizontal eight-in-one filter hereinafter referred to as the horizontal HPF 12
  • the absolute value converters 13 and 14 the horizontal cumulative adder 15
  • the vertical cumulative adder 16 and the vertical It has a peak detecting section 17, a horizontal peak detecting section 18, and a binarizing section 19.
  • Figure 2 explains the operation of the vertical HPF 11, the horizontal HPF 12, the absolute value converters 13, 14, the horizontal accumulator 15, and the vertical accumulator 16 in Figure 1 Fig.
  • FIG. 3 is a diagram illustrating an example of an operation performed by the horizontal peak detector 18 (and the vertical peak detector 17) of FIG. 3A shows the horizontal one-dimensional signal 115 output from the vertical accumulator 16, and FIG. 3B shows the horizontal peak position 1 output from the horizontal peak detector 18. 2 represents 2.
  • FIG. 4 is a diagram for explaining the operation performed by the binarizing section 19 in FIG. FIG. 4 (a) shows the horizontal peak position 122 and the horizontal binary image 124, and FIG. 4 (b) shows the vertical peak position 122 and the vertical binary image 125.
  • FIG. 4C shows the block boundary image 103 output by the binarizing unit 19.
  • a video signal is a signal in which moving image data composed of three dimensions of horizontal, vertical, and vertical times are arranged in one dimension.
  • the video signal 101 in the present invention is a one-frame image that is a two-dimensional video signal in the horizontal direction and the vertical direction in one frame time unit obtained based on the above video signal. This is a signal sent at a fixed rate.
  • This one frame image 1 1 2 as shown in FIG. 2, each block image 113 is arranged uniformly in the horizontal and vertical directions, and each block image is formed in both directions. Includes noise 114. Also, the block noises 114 appear periodically in the horizontal and vertical directions as shown in FIG.
  • This video signal 101 is input to the vertical HPF 11 and the horizontal HPF 12 respectively.
  • the vertical HPF 11 receives the video signal 101 and extracts only high-frequency components in the vertical direction.
  • the absolute value conversion unit 13 receives the signal output from the vertical HPF 11, takes the absolute value, and converts it to a positive value.
  • the horizontal cumulative adder 15 receives the signal output from the absolute value generator 13, performs cumulative addition, and outputs a vertical one-dimensional signal 1 16 having a vertical periodic peak value.
  • the horizontal HPF 12 receives the video signal 101 and extracts only the high frequency component in the horizontal direction.
  • the absolute value conversion unit 14 receives the signal output by the horizontal HPF 12 and takes the absolute value and converts it to a positive value.
  • the vertical accumulator 16 receives the signal output from the absolute value converter 14, accumulates the signal, and outputs a horizontal one-dimensional signal 115 having a horizontal periodic peak value.
  • the horizontal peak detector 18 detects the horizontal peak position based on the horizontal one-dimensional signal 115 output from the vertical accumulator 16. An example of the horizontal peak position detecting operation performed by the horizontal peak detecting section 18 will be described with reference to FIG.
  • the horizontal peak detector 18 calculates an arbitrary pixel range including three block boundaries from the horizontal one-dimensional signal 115 (for example, if the block size is 8, Select the detection area 1 19 (approximately 30 pixels) (Fig. 3 (a)).
  • a horizontal peak The detection unit 18 detects the top three data having the large cumulative addition level in the selected detection area 1 19 as a peak position.
  • the differential force at the detected peak position is the horizontal block size.
  • the horizontal peak detection unit 18 detects the respective peak positions by moving the detection area 119 left and right with respect to the horizontal direction at horizontal block size intervals. b) Find a horizontal peak as shown in b).
  • the vertical peak detector 17 detects a vertical peak position based on the vertical one-dimensional signal 1 16 output from the horizontal accumulator 15. Note that the vertical peak position detecting operation performed by the vertical peak detecting section 17 is the same as the horizontal peak position detecting operation performed by the horizontal peak detecting section 18 described above. Is omitted. The vertical peak detector 17 obtains a vertical peak position 123 as shown in FIG. 4 (b).
  • the vertical peak detector 17 detects the above-described peak position without distinguishing between the even field and the odd field, an accurate vertical peak can be obtained. Position 1 2 3 cannot be determined. For this reason, the vertical peak detector 17 receives the format identification signal 102 relating to the video signal 101 from the outside, and the format is an interlaced format. If it is determined that the peak position of each of the even and odd fields is individually detected, the vertical peak position 1 for each field is determined. 2 3 Ask for each.
  • the binarization section 19 is composed of a horizontal peak position 1 22 output from the horizontal peak detection section 18 and a vertical peak position 1 2 3 output from the vertical peak detection section 17. Enter and.
  • the binarizing section 19 gives a logical value “1” to a pixel position where a peak exists according to the horizontal peak position 122 and a logical value “0” to other pixel positions, and A horizontal binary image 124 with the same size as the frame image 112 is generated (Fig. 4 (a)).
  • the binarization unit 19 assigns a logical value “1” to a pixel position where a peak exists according to the vertical peak position 123 and a logical value “0” to other pixel positions.
  • a vertical binary image 125 with the same size as the one-frame image 112 is generated (Fig. 4 (b)).
  • the binarizing unit 19 obtains a block boundary image 103 by performing an OR operation on the horizontal binary image 124 and the vertical binary image 125 (see FIG. 4 (c))
  • the portion of the logical value "1" is the block boundary portion, that is, the block noise 1 1 4 This is the place where
  • a block of an image divided into a plurality of blocks is provided.
  • the boundary (block boundary image 103) can be detected accurately.
  • the periodicity of the block image 113 is not impaired. Accurate detection of block noise 1 14 is possible.
  • FIG. 5 is a block diagram showing a configuration of a block noise detection device according to a second embodiment of the present invention.
  • the block noise detection device 20 according to the second embodiment includes a vertical HPF 11, a horizontal HPF 12, and absolute value conversion units 13 and 1. 4, horizontal cumulative addition section 15, vertical cumulative addition section 16, vertical peak detection section 17, horizontal peak detection section 18, binarization section 19, and frame difference section 2 1, a frame memory 22, a binarizing section 23, a singular point removing section 24, and a blockage control section (hereinafter, referred to as a BE control section) 25.
  • a BE control section a blockage control section
  • the vertical HPF 11, the horizontal HPF 12, the absolute value conversion units 13 and 14, and the horizontal cumulative addition unit 15 are configured according to the block noise detection according to the first embodiment.
  • the configuration is the same as that of the device 10, and the configuration is denoted by the same reference numeral and description thereof is omitted.
  • FIG. 6 is a diagram for explaining an example of the operation performed by the singular point removing unit 24 in FIG. Note that Fig. 6 (a) shows the image 2 33 before output of the singular point removal processing output by the binarization section 23, and Fig. 6 (b) outputs the image The image 234 after the singular point removal processing is shown.
  • FIG. 7 is a diagram illustrating an example of an operation performed by BE control unit 31 in FIG. FIG. 8 (a) shows the block boundary image 103 output by the binarizing unit 19, and FIG. 8 (b) shows the singular point removal output by the singular point removal unit 24.
  • FIG. 8C shows the image 235 after the BE control
  • FIG. 8C shows the image 235 after the BE control.
  • the video signal 101 is input to the frame difference unit 21.
  • the frame difference section 21 calculates the signal level difference between the input video signal 101 and the video signal 101 of the previous frame stored in the frame memory 22. Is calculated as a difference value.
  • the frame difference unit 21 In the initial state, the frame difference unit 21 is in a state where nothing is stored in the frame memory 22 such as after the block noise detection device 20 is started. Only the memory in the frame memory 22 is stored.
  • the frame difference unit 21 determines whether or not the calculated difference value is equal to or larger than a predetermined threshold value, and only the difference value equal to or larger than the threshold value is converted to a binarization unit 23. Output to Therefore, by the processing of the frame difference section 21, only a scene portion having a lot of motion in the video signal 101 is output.
  • the level of the threshold value can be arbitrarily set based on desired image quality.
  • the frame difference section 21 stores the video signal 101 of the current frame in the frame memory 22. Thereafter, the frame difference unit 21 repeats the above-described processing every time the next frame is input.
  • the binarizing section 23 receives the difference value output from the frame difference section 21. Then, the binarization unit 23 sets the pixel position (singular point) where the difference value exists in the one-frame image 112 to the logical value “1” and the pixel where the difference value does not exist. Position to logical value "0" , Binarize. As a result, the image 233 before the singularity removal shown in FIG. 6A is obtained. In FIG. 6 (a), the shaded portion corresponds to the pixel position of the logical value “1”.
  • the singularity removal unit 24 inputs the image 233 (Fig. 6 (a)) before singularity removal from the binarization unit 23, and inputs the block size from 19 binaries. I do. Then, the singularity removing unit 24 distributes the logic distributed in a small area of one block size or less (the area shown by the dashed line in FIG. 6) in the image 233 before the singularity removal. Eliminate data with value "1". As a result, an image 234 force after the singular point removal shown in FIG. 6 (b) is obtained.
  • This singular point removing unit 24 makes it possible to enhance the effect of the frame difference processing, and at the same time, it is possible to reduce the amount of data
  • the BE control unit 25 consists of a block boundary image 103 output by the binarization unit 19 (Fig. 7 (a)) and an image 2 after the singular point removal output by the singular point removal unit 24. 3 Enter 4 (Fig. 7 (b)) and. Then, the BE control unit 25 calculates the logical product of the block boundary image 103 and the image 234 after the singular point removal for each pixel. Image power obtained in this way is the BE control image 235 in Fig. 7 (c), and each pixel value in this BE control image 235 is a block image. This is the signal of the edge signal (hereinafter referred to as BE signal) 203. Therefore, the BE signal 203 is a signal that is a block boundary and contains information indicating that the block noise level is high.
  • the block noise detection device 20 As described above, according to the block noise detection device 20 according to the second embodiment of the present invention, the block noise detection according to the first embodiment is performed. In comparison with the device 10, the correlation between the size of the motion of the image including the finer block noise and the block noise is increased.
  • block boundary image 3 image 103 The classification of the block boundary (block boundary image 3 image 103) becomes possible. As a result, only a large portion of the block noise in the video scene can be detected as a block boundary.
  • FIG. 8 is a block diagram showing a configuration of a block noise elimination device according to a third embodiment of the present invention.
  • the block noise removing device 30 according to the third embodiment includes a format identification circuit 31 and a block noise detecting device 2. 0 and a block noise removing circuit 32.
  • the configuration of the block noise detecting device 20 in the block noise removing device 30 according to the third embodiment is similar to the configuration of the block noise detecting device 20 according to the second embodiment.
  • the configuration is the same as that of the lock noise detecting device 20.
  • the same reference numerals are given to the same components, and the description is omitted.
  • FIG. 9 is a block diagram showing an example of the configuration of the format identification circuit 31 of FIG.
  • the format identification circuit 31 includes a double-speed H-pulse generation unit 311 and a bit And 3 and 2.
  • FIG. 10 is a block diagram showing an example of the configuration of the block noise removal circuit 32 of FIG.
  • the block noise elimination circuit 32 includes a smoothing processing section 321 and a selector 322.
  • FIG. 11 is a diagram illustrating an example of the smoothing process performed by the block noise removal circuit 32 of FIG. FIG. 11 (a) shows the state before smoothing processing (block noise removal), and FIG. 11 (b) shows the state after smoothing processing.
  • the block noise detection device 20 outputs the BE signal 203 from the input video signal 101 as described above.
  • the luminance signal (Y signal) is the most preferable as the video signal 101 input to the block noise detecting device 20.
  • This Y signal is composed of, for example, a decoded video signal composed of red, green, and blue (RGB) with luminance and color difference using a matrix circuit. It can be obtained by converting to a YUV signal and extracting only the Y signal (a well-known technique).
  • the format identification circuit 31 includes a horizontal synchronization pulse (hereinafter, referred to as an H pulse) 310 of a television signal and a vertical synchronization pulse.
  • a pulse hereinafter referred to as V pulse
  • the double-speed H-pulse generation unit 311 receives the H pulse 301 and generates a double-speed H-pulse having a frequency twice as high as that of the H / ⁇ ° pulse 301.
  • Bit Count Evening 3 1 2 The double-speed H pulse output from the double-speed H pulse generation unit 311, the pulse and the V pulse 302 are input, and the V pulse 302 is used as a reset signal.
  • bit count 312 is the double-speed H in the cycle (V period) in which the V pulse 302 is generated.
  • the pulse is counted, and the bit count 312 is the lowest bit of the value counted for each V period. Output to the block noise detection device 20 as the packet identification signal 102.
  • the format identification signal 102 can be generated as described above for the following reason.
  • the bit rate is 3 times higher than that of the bit rate using the double-speed H pulse.
  • the number of lines during the V period is 2 62 or less.
  • the bit count 312 is doubled using the double-speed H pulse, which is 5 2 4 times or 5 2 6 times. You will have to do a lot of work. Therefore, the bit count value is determined by the bit count value of the odd-numbered bits (i.e., “5”) by performing an even-odd determination of the least significant bit of the value counted for each V period. )) Can be distinguished from an evening-based method, and an even number (ie, "4" or "6”) can be distinguished from a progressive method.
  • the format identification signal 102 output from the bit counter 50 is a logical value "1" (in the case of the interlacing method). And logical value "0" (progressive method) Output as a binary signal.
  • block noise elimination circuit 32 includes video signal 101 and BE signal 200 3 output from block noise detection device 20. Enter and.
  • the smoothing processing section 321 receives the video signal 101 and smoothes the signal.
  • the selector 32 2 is provided with a smoothed video signal output from the smoothing processing section 3 21, a video signal 101 as it is input, and a BE signal 200. 3 Enter and. Then, the selector 32 2 performs smoothing on the pixel where the BE signal 203 is a logical value “1” (there is a block noise of 46). Select the processed signal, and apply the BE signal 203 (no block noise) to the pixel that has a logical value of “0” and not to smooth the video signal 1 0 1 Select and output the selected item.
  • the block noise removing circuit 32 of the present invention uses the BE signal 203 to reduce the block noise, and at the same time to reduce the noise of the video signal.
  • the smoothing process that blurs the image is performed only at the block boundary where the block noise exists.
  • the signal selected and output by the selector 32 is output as the block noise removal signal 303.
  • FIG. 11 shows an example of the smoothing performed by the smoothing processing section 3 21.
  • the number of taps is "3" and the weight is 1Z3, 1/3, and 1Z3, respectively. ) Indicates smoothing.
  • the smoothing processing unit 32 1 may set the number of pixels to be extracted to two or more, or if the number of LPF taps is increased, the smoothing may be performed. The effect is improved.
  • the block noise removal signal 303 output from the selector 322 is a Y signal
  • the UV converted by the matrix circuit described above is used.
  • the inverse matrix circuit together with the signal to return to the RGB signal, it is possible to obtain an output video signal from which block noise has been removed (known in the art. Technology).
  • the BE signal 203 detected in the second embodiment is blocked.
  • the block noise removal it is possible to effectively remove the block noise attached to the video scene.
  • the block noise detecting device constituting the block noise removing device 30 is the same as the block noise detecting device according to the second embodiment.
  • the block noise detector 20 according to the first embodiment is used, but the block noise detector 10 according to the first embodiment may be used instead. Of course, it is possible.
  • FIG. 12 is a block diagram showing a configuration of a block noise removing device according to a fourth embodiment of the present invention.
  • the block noise elimination device 40 according to the fourth embodiment includes a horizontal block boundary detection unit 41 and a vertical block boundary detection unit.
  • a section 42, a block area detecting section 43, a block boundary smoothing section 44, and a contour correcting section 45 are provided.
  • FIG. 13 is a block diagram showing a more detailed configuration of the horizontal block boundary detection unit 41 of FIG.
  • the horizontal block boundary detection section 41 includes a horizontal HPF 41 1, an absolute value conversion section 4 12, a vertical accumulative addition section 4 13, and a high-pass filter. Evening (hereinafter referred to as HPF) 4 14, Temporal filer 4 15, N-point cumulative addition section 4 16, Masking section 4 17, Maximum value detection section 4 1 and 8 are provided.
  • FIG. 14 is a block diagram showing a more detailed configuration of the vertical block boundary detection unit 42 of FIG.
  • the vertical block boundary detection unit 42 is composed of a vertical HPF 421, an absolute value generation unit 422, a horizontal cumulative addition unit 423, and an HPF 424. It has a temporal filer 425, an N-point accumulator 426, a masking unit 427, and a maximum value detector 428.
  • FIG. 15 is a block diagram showing a more detailed configuration of the block boundary smoothing unit 44 of FIG.
  • the block boundary smoothing unit 44 includes a horizontal HPF 441, a vertical HPF 442, a multiplication unit 443, 4444, and a subtraction unit 4445, 4 4 6 and are provided.
  • FIG. 16 is a block diagram showing a more detailed configuration of the contour correction unit 45 of FIG.
  • the contour correction unit 45 includes a horizontal HPF 451, a vertical HPF 452, subtraction units 453, 4554, multiplication units 4555, 4556, and Power [] arithmetic units 457 and 458 are provided.
  • the operations performed by the block noise removing device 40 according to the fourth embodiment of the present invention will be described in order with reference to FIGS.
  • the horizontal block boundary detection section 41 detects a horizontal block noise level and a block boundary.
  • a horizontal HPF 411 receives a video signal 101 and extracts only a high-frequency component in the horizontal direction.
  • the absolute value conversion unit 412 inputs the signal output from the horizontal HPF 411, takes the absolute value, and converts it to a positive value.
  • the vertical accumulative adder 4 13 receives the signal output from the absolute value converter 4 1 2, accumulates and adds the horizontal one-dimensional signal having a peak value in the horizontal period 1 15 (See Figure 2).
  • the HPF 414 extracts the high frequency component again for the purpose of further improving the accuracy of the signal output from the vertical accumulator 413, and reduces the horizontal block noise level. To detect.
  • the temporary relay filter 415 performs processing to extend the horizontal block noise level output from the HPF 414 in the time direction.
  • the N-point accumulator 416 generates noise at each of the preset N points (N is the number of pixels of the block), that is, the same for each block.
  • the cumulative addition of the noise at the pixel position is calculated and output.
  • the maximum value detection unit 418 finds the maximum value of the N points in the horizontal direction and the block boundary.
  • the maximum value detecting section 418 detects, for example, a block noise that appears at a cycle of 8 (pixels) ⁇ 8 (lines) in the MPEG2 system.
  • the N value of the N-point accumulator 416 is set to “8”, and the horizontal block boundary is obtained.
  • the masking section 4 17 is connected to the horizontal block noise level that outputs the output from the temporary filter.
  • mask processing is performed at the horizontal block boundary obtained by the maximum value detection unit 418, and only the horizontal block noise level existing at the relevant horizontal block boundary is detected. Output.
  • coaling device that allows only the small amplitude signal to pass through the output signal of the horizontal HPF 411 or absolute value conversion unit 412 May be inserted.
  • the vertical block boundary detector 42 detects the vertical block noise level and the block boundary in the same manner as the horizontal block boundary detector 41.
  • the horizontal HPF 421 receives the video signal 101 and extracts only the high frequency component in the vertical direction.
  • the absolute value conversion unit 422 inputs the signal output from the vertical HPF 421, takes the absolute value, and converts it to a positive value.
  • the horizontal cumulative addition section 4 2 3 receives the signal output from the absolute value conversion section 4 2 2, performs cumulative addition, and outputs a vertical one-dimensional signal 1 16 having a peak value in the vertical cycle. (See Figure 2).
  • the HPF 424 extracts the high-frequency component again for the purpose of further improving the accuracy of the signal output from the horizontal accumulator 423, and detects the vertical block noise level.
  • the temporal filter 425 performs a process of extending the vertical block noise level output from the HPF 424 in the time direction.
  • the N-point accumulative adder 426 calculates the cumulative addition of the noise for each of the preset N points, and outputs each. Find the cumulative addition.
  • the maximum value detection unit 428 finds the maximum value of the N points in the vertical direction and the block boundary.
  • the maximum value detecting section 428 is, for example, similarly in the MPEG 2 system.
  • the N value of the N-point accumulator 426 is set to “8”, and the vertical block boundary is obtained.
  • the masking section 427 obtains the vertical block noise level output from the temporal filter 425 by the maximum value detecting section 428. Mask processing is performed at the determined vertical block boundary, and only the vertical block noise level existing at the relevant vertical block boundary is output.
  • a small-amplitude signal is output to the output signal of the vertical HPF 421 or the absolute value conversion unit 422. You can insert a coring device that only allows the passage of light.
  • the block area detection section 43 is a block in the horizontal Z and vertical directions output from the horizontal block boundary detection section 41 and the vertical block boundary detection section 42.
  • Noise level, N-point block noise Level and block noise indicate the position and extent of block noise at each position on the entire screen from each signal at the block boundary. Detects whether it has appeared.
  • the block boundary smoothing section 44 responds to the block noise level signal in the horizontal and vertical directions output from the block area detecting section 43, Performs video signal smoothing.
  • block boundary smoothing section 44 extracts a high-frequency component in the horizontal direction from input video signal 101 with horizontal HPF 441. Then, the block boundary smoothing section 44 multiplies the extracted horizontal high frequency component and the horizontal block noise level by the multiplication section 443, and subtracts it by the subtraction section 44. 5 subtracts from the video signal 101. The same applies to the vertical direction, and the block boundary The field smoothing unit 4 4 calculates the vertical HP from the input video signal 101.
  • the block boundary smoothing section 44 multiplies the extracted vertical high-frequency component by the vertical block noise level in the multiplier section 44 4, and subtracts the subtracted section.
  • the contour corrector 45 receives the block noise gain level signal in the horizontal and vertical directions output from the block detector 41 and outputs a gain Z for contour correction. Change the amount of coaling.
  • the contour correction unit 45 extracts a high-frequency component in the horizontal direction from the input video signal 101 with a horizontal HPF 451. Then, the contour corrector 45 subtracts the horizontal block noise level from the set value of the horizontal contour correction in the subtractor 45 3, and extracts the extracted horizontal high-frequency component and the horizontal block.
  • the multiplication section 455 multiplies the noise signal with the noise level, and then adds the video signal 101 with the addition section 457. The same applies to the vertical direction, and the contour corrector 45 extracts a high-frequency component in the vertical direction from the input video signal 101 with the vertical HPF 452.
  • the contour corrector 45 subtracts the vertical block noise level from the set value of the vertical contour correction by the subtractor 454, and extracts the extracted horizontal high-frequency component and the horizontal block.
  • the multiplication section 456 multiplies the noise level by the multiplication section 456, and then adds the video signal 101 to the addition section 458.
  • each component of the block noise removing device 40 is performed by a CPU (central processing unit). Is controlled. In this case, the output results of the N-point accumulators 4 16 and 4 26 are sent to CPU.
  • the CPU may detect the position of the block boundary, and control the masking sections 417 and 427 from the CPU, or the detected block no.
  • the level of the noise and the block boundary may be sent to the CPU, and the CPU may control the correction amount of the outline correction of the entire screen, the noise removal level, and the like according to the instruction of the CPU.
  • the result of discriminating the type of input source such as “DVD / DVC digital” and video signals (for example,
  • the quality of MPEG can be displayed on an on-screen display (hereinafter referred to as OSD).
  • the block boundary and the block noise level are obtained. Can be detected accurately. As a result, appropriate smoothing and contour correction corresponding to the block noise level can be performed, and the block attached to the video scene can be obtained. Noise can be removed more effectively. In addition, by displaying information at 0SD, it is possible to recognize at a glance the video source and the effect of removing the block noise.
  • the block noise removing device when used in a television system, the input video signal 101 is input from an external terminal in addition to the normal TV video signal. Some video signals have different signal forms.
  • the fifth embodiment provides a block noise elimination device that supports input video signals having a plurality of different signal forms.
  • FIG. 17 is a block diagram showing a configuration of a block noise removing device according to a fifth embodiment of the present invention.
  • a block noise removing device 50 according to the fifth embodiment is composed of an AD connector, an overnight receiver 51, and a digital relay decoder 52. , Selector 53, horizontal block boundary detector 54, vertical block boundary detector 55, block area detector 43, It has a boundary smoothing unit 44 and a contour correcting unit 45.
  • FIG. 18 is a block diagram showing a more detailed configuration of the horizontal block boundary detector 54 of FIG.
  • the horizontal block boundary detection section 54 is composed of a horizontal HPF 411, an absolute value conversion section 412, a vertical cumulative addition section 413, and an HPF 414 , A temporal filer 415, an N-point accumulator 416, a masking unit 417, a maximum value detector 418, and a selector 5 4 1 and are provided.
  • FIG. 19 is a block diagram showing a more detailed configuration of the vertical block boundary detection unit 55 of FIG.
  • the vertical block boundary detection unit 55 includes a vertical HPF 421, an absolute value conversion unit 422, a horizontal cumulative addition unit 423, and an HPF 424 , A temporal filter 4 25, and an N-point accumulator 4 2 6, a soaking section 4 27, a maximum value detecting section 4 28, and a selection section 5 51.
  • block noise removing device 5 according to the fifth embodiment is different from that of the fifth embodiment.
  • the configuration of the block area detection unit 43, block boundary smoothing unit 44, and contour correction unit 45 at 0 is related to the fourth embodiment.
  • the configuration is the same as that of the block noise removing device 40, and the description of the configuration is omitted by attaching the same reference numeral to the same.
  • the horizontal block boundary detection section 54 is configured by adding a cell block 541 to the configuration of the horizontal block boundary detection section 41 described in the fourth embodiment.
  • the vertical block boundary detecting section 55 is configured by adding a selector 551 to the configuration of the vertical block boundary detecting section 42 described in the fourth embodiment. Therefore, the same components are denoted by the same reference numerals and the description is omitted.
  • the analog video signal 501 is input to the AD converter 51.
  • the digital decoding unit 52 includes, for example, a digital video signal 5 such as an MPEG stream or a DV format connected to the IEEE 1394 standard. 0 2 is input.
  • the AD converter 51 converts the input analog video signal 50 ⁇ or to the digital and outputs it to the selector 53.
  • the digital decoding unit 52 decodes the input digital video signal 502 and outputs it to the selector 53.
  • the block 52 provides block information signals 52 1, 52 2 (snacks) indicating whether or not the video signal 502 is decoded by a number of block sizes. In other words, it is possible to output a block boundary.
  • Selector 53 selects one of the two input digital video signals according to the instruction of the user, and outputs it as video signal 101. .
  • the selector 53 outputs a reception pulse 531, which indicates which of the digital video signals has been selected and output. For example, if the output of the AD converter 51 (input is a DVD analog signal) is selected, the logical value “0” 3 ⁇ 4; If the output of the conversion section 52 is selected (the input is a digital video camera (DVD) digital signal), the logical value “1” is output and the reception pulse 5 3 1 Will be output.
  • the received pulse 531 for example, can be used as information indicating what has been input as oSD display. For example, in the above example, "DVD" or "DVC" is used. These characters can be displayed on the video screen as ⁇ SD.
  • the video signal 101 selected in the selection section 53 and the block information signals 52 1 and 52 2 output from the digital decoding section 52 are These are input to the horizontal block boundary detection section 54 and the vertical block boundary detection section 55, respectively.
  • the horizontal block boundary detection unit 54 basically detects the horizontal block noise level and the block boundary as described above, but the horizontal block noise detection unit 54 detects the horizontal block noise level and the block boundary.
  • the maximum value detection section 418 outputs the obtained horizontal block boundary to the selector 541.
  • This selector 541 is composed of a horizontal block boundary output from the maximum value detection section 418 and a block output from the digital decoding section 52.
  • Information signal 5 2 Enter 1 and. Then, in accordance with a given user instruction (in synchronization with a user instruction to the selector 53), the selector 541 makes the selector 53 an AD connector.
  • the horizontal block boundary obtained by the maximum value detecting device 418 is selected, and the selector 53 is connected to the digital decoding unit 52 by the selector 53.
  • a horizontal block boundary given as the block information signal 52 1 is selected and output.
  • the vertical block boundary detecting section 55 basically detects the vertical block noise level and the block boundary as described above.
  • the force maximum value detection unit 428 outputs the obtained vertical block boundary to the selector 551.
  • This selector 55 1 is composed of a vertical block boundary output from the maximum value detecting section 4 28 and block information output from the digital decoding section 52. Input signals 5 2 2 and.
  • the selector 55 3 sets the AD converter to the AD converter. If the output signal of the digital decoder 51 is selected, the vertical block boundary determined by the maximum value detector 428 is selected by the selector 53 when the output signal of the digital decoder 51 is selected. When a force signal is selected, a vertical block boundary given as a block information signal 522 is selected and output.
  • the horizontal block boundary detection unit 54 and the like are input.
  • the block noise is removed using the block boundary obtained by the vertical block boundary detection unit 55, and the block boundary can be determined (given ) Digital video signal 50 If 2 is input, it is possible to remove block noise using the given block boundary.
  • the block boundary and the block corresponding to the input video signal are obtained.
  • the lock noise level can be detected accurately.
  • it is possible to perform appropriate smoothing and contour correction corresponding to the block noise level and furthermore, it is possible to perform a block attached to the image scene. Lock noise can be removed more effectively.
  • by displaying the information as OSD it is possible to recognize at a glance the video source and the block noise removing effect.
  • defective dot clock reproduction is one of the causes of the deterioration of the image quality of the video signal. It will be.
  • the dot clock reproduction failure is originally supported by the analog video signal. This occurs because the sampled clock phase and the sampled clock phase in the video signal after digitization have a power difference between the sampled clock phase and the sampled clock phase. It is something.
  • the sixth embodiment of the present invention also enables accurate dot clock reproduction by using the above-described method of detecting block boundaries. It is.
  • FIG. 20 is a block diagram showing an example of a configuration of a video processing system using a block detection device according to a sixth embodiment of the present invention.
  • the video processing system 60 using the block detection device is composed of an AD converter 61, a video signal processing device 62, a DA converter 63, and a horizontal block boundary detection device.
  • a section 64, a clock generation device 65, and a control section 66 are provided.
  • the clock generator 65 includes a phase comparator 651, an LPF 652, a VC0 563, a variable delay 654, and a frequency divider 655. You.
  • FIG. 21 is a block diagram showing a more detailed configuration of the horizontal block boundary detection unit 64 of FIG.
  • the horizontal block boundary detection section 64 is composed of a horizontal HPF 641, an absolute value conversion section 642, a vertical accumulative addition section 643, and an HPF 644. , And N-point accumulative adder 6 45.
  • FIG. 22 is a diagram illustrating an example of the cumulative addition result of the horizontal block noise output by the horizontal block boundary detection unit 64 in FIG. 20.
  • FIG. 22 shows the cumulative addition result when the N value is set to “8”.
  • FIG. 23 is a diagram illustrating the relationship between the video signal 601 and the clock (CK).
  • the AD converter 61 converts the input analog video signal 601 into a digital video signal.
  • the video signal processing device 62 performs various processes related to the video signal such as contour correction.
  • the DA converter 63 converts digital video signals into analog video signals. Convert to number.
  • the horizontal block boundary detection section 64 detects a horizontal block boundary from an input digital video signal.
  • the clock generator 65 constitutes a line clock PLL circuit, and each component generates a regenerative clock (CK) used for processing.
  • the configuration of the clock generator 65 is a well-known configuration that has been generally used in the related art, and a description thereof will be omitted. For example, a time-dependent file is applied to a control device such as a CPU or an output signal of the horizontal block boundary detection unit 64, and the horizontal block boundary is used.
  • the clock generator 65 is controlled according to the signal output from the detector 64.
  • the video signal 601 input to the AD converter 61 is converted into a digital video signal based on the playback clock (CK) generated by the clock generator 65. Converted.
  • the converted digital signal is subjected to desired video signal processing in a video signal processing device 62, and is converted to an analog video signal in a DA connector 63.
  • the converted digital video signal is input to the horizontal block boundary detection means 64, where the horizontal block noise is cumulatively added, and the result is obtained.
  • the horizontal HPF 641 receives the video signal 601, and only the high frequency component in the horizontal direction is input. Is extracted.
  • Absolute value conversion unit 642 receives the signal output by horizontal HPF 641, takes the absolute value, and converts it to a positive value You.
  • the vertical accumulative adder 643 receives the signal output from the absolute value converter 642, accumulates and outputs a horizontal one-dimensional signal 115 having a peak value in the horizontal period. (See Figure 2).
  • the HPF 644 extracts the high-frequency component again for the purpose of further improving the accuracy of the signal output from the vertical accumulator 643, and reduces the horizontal block noise level. To detect.
  • the N-point accumulative adder 645 calculates the noise at each of the predetermined N points (N is the number of pixels of the block), that is, the same pixel position of each block. The cumulative addition of the noise in the above is calculated and output.
  • the N-point accumulator 645 is, for example, a block noise that appears at a period of 8 (pixels) X 8 (lines) in the MPEG2 system.
  • the N value is set to “8” to obtain a horizontal block boundary, and the result is output to the control unit 66.
  • the dot clock reproduction is not performed well (that is, the dot clock of the original video signal 601 and the reproduction clock (CK) are different from each other). If they do not match, the sampling clock is out of phase with the video signal (Fig. 23 (a)) (Fig. 23 (b)).
  • the cumulative addition result at N points output from the N-point cumulative addition section 645 to the control section 66 has a high level at a plurality of points as shown in Fig. 22 (a).
  • the existing result In the figure, two positions 4 and 5).
  • the dot clock reproduction is performed well (that is, the dot clock of the original video signal 601 and the reproduction clock (CK) are different from each other). If they match, the sampling clock phase does not deviate from the video signal (Fig. 23 (a)) (Fig. 23 (c)). In this case, the N-point cumulative addition unit 645 outputs the N-point cumulative addition result output to the control unit 66 with only one high level as shown in Fig. 22 (b). The result exists (in the figure, position 5).
  • control unit 66 obtains a result in which only one high level of the N-point cumulative addition result output from the N-point cumulative addition unit 645 exists. In this manner, feedback control is performed to change the delay amount of the variable delay 654 in the clock generator 65. Therefore, the clock phase in which the input video signal 601 was sampled can be accurately reproduced in the video processing system 60. It becomes.
  • a horizontal video signal corresponding to an input video signal is provided. Detects block boundaries and plays back the dot clock based on this location. This makes it possible to accurately reproduce a clock whose phase matches that of the original video signal's dot clock.
  • the block noise detection devices 10, 20, and block noise according to the above-described first to sixth embodiments are used.
  • the functions realized by the noise eliminators 30, 40, 50, and the video processing system 60 are implemented in a predetermined program format. This is realized by a storage device (RM, RAM, hard disk, etc.) in which the program is stored, and a CPU that executes the program.
  • each program data may be introduced via a recording medium such as a CD-ROM or a floppy disk.
  • the present invention provides a video processing device (for example, a television) using a digital video signal subjected to irreversible encoding for each predetermined image block.
  • a video processing device for example, a television
  • the purpose is to accurately detect and remove block noise generated in the decoding process of the video signal concerned. It can be used for accurate clock playback.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)

Description

明細書 ブロ ッ ク ノ イ ズ検出装置お よびブロ ッ ク ノ イ ズ除去装置 技術分野
本発明は、 ブロ ッ ク ノ イ ズ検出装置およびブロ ッ ク ノ ィ ズ除去装置に関 し、 よ り 特定的には、 デジタ ル画像を圧縮 して伝送 · 記録する 際に用 い る画像符号化にお いて、 デジ タル画像に生 じ る ブロ ッ ク ノ イ ズを除去する ブ ロ ッ ク ノ ィ ズ検出装置およ びブロ ッ ク ノ イ ズ除去装置に関する。 背景技術
従来か ら、 デジタ ル画像を保存する場合等において、 画 像のデー タ 量を減 ら す 目 的でデジタ ル画像のデー タ圧縮が 行われて い る。 こ のデ一 夕 圧縮の方法に は、 可逆符号化方 法と不可逆符号化方法 と があ る。 可逆符号化方法は、 符号 化 したデー タ を復号化する と、 符号化前のデー タ に完全に 戻す こ と ができ る 符号化 を用 い る方法であ る。 一方、 不可 逆符号化方法は、 符号化 し たデータ を復号化する と多少の 誤差を含んだデー タ に戻 さ れ、 符号化する 前のデー タ に完 全に戻す こ と ができ る と は限 ら な い符号化を用 い る方法で あ る。
一般に、 可逆符号化 と し て用 い ら れる 方式に は、 離散コ サイ ン変換 (以下、 D C T と記す) が存在する。 しか し、 通常、 D C T を行っ た後 に は、 量子化等の処理 を行 う。 こ のため、 D C T を行っ た後に量子化等の処理 を行っ て符号 化 したつ 夕 は、 復号化 し て も符号化前のつ— 夕 に完全に 戻す こ と ができず、 復号化 し たデ一夕 に ノ ィ ズ (誤差) を 含む こ と にな る。 すなわち、 D C T を行つ た後に量子化等 の処理を行 う 符号化は、 不可逆符号化 と な る。
D C T を行 う には、 まず、 前処理 と し て 、 1 フ レー ム の 画像を複数のブロ ッ ク に領域分割する。 1 ブロ ッ ク は、 例 えば、 8 X 8 の 2 次元画素データ の集ま り であ る , D C T は、 ブロ ッ ク を 1 単位 と し て処理を行う。 D C T および量 子化によ り 符号化さ れたデー タ は . 逆量子化お よび逆 D C 丁する こ と によ り データ を復元する こ とができ る , 逆量子 化および逆 D C Tする と、 ブ口 ッ ク ノ イ ズを含んだ画像デ 一 夕 が復元 さ れる。
で、 ブロ ッ ク ノ ィ ズにつ いて図 2 4 を用 いて説明す る。
図 2 4 は、 従来の手法にお ける ブロ ッ ク ノ イ ズ除去の概 念を説明する 図であ る。 なお、 図 2 4 ( a ) は、 1 フ レー ム画像 7 0 1 を表 し、 図 2 4 ( b ) は、 図 2 4 ( a ) にお ける ブ □ ッ ク 7 0 4 と隣接する ブロ ッ ク 7 0 5 と の境界 ( 以下、 ブ 口 ッ ク 境界 と い う ) 7 0 6 の 1 ラ イ ン を拡大 して 表 し、 図 2 4 ( c ) は、 図 2 4 ( b ) の各画素 を平滑化 し た後の画素の状態を表 し た も のであ る。
今、 図 2 4 ( a ) にお いて、 1 フ レーム画像 7 0 1 の特 定の ブロ ッ ク を隔てて画素が並んでい る と見た と き を考え る。 こ の と き、 図 2 4 ( b ) にお いて、 ブロ ッ ク 7 0 4 の 画素 a と ブ 口 ッ ク 7 0 5 の画素 b と は、 ブロ ッ ク 境界 7 0 6 で存在する 画素であ り , こ の画素 a と 画素 b の画素 レべ ル差が、 画素 c と画素 d の画素 レベル差のよ う なブロ ッ ク 内の レベル変化に比べ大き い場合、 こ の部分がブロ ッ ク ノ ィ ズとな り こ のため非常に見苦 し い画像 と なっ て見え る。
こ のよ う にブ ロ ッ ク ノ イ ズと は、 1 フ レーム画像にお い て、 ブロ ッ ク境界前後に存在する画素間の レベル差に起因 して生 じ る ノ イ ズであ る。
ブロ ッ ク ノ イ ズは、 D C Tおよ び量子化の よ う にブロ ッ ク を 1 単位 と し て処理を行 う 不可逆符号化方式を用 い る と 生 じ る。 画像に生 じ る ノ イ ズを除去する に は、 一般的に、 画像全体を平滑化する処理が行われる。 平滑化 と は処理 し た い画素の前後数画素を用 いて平均画素 を求め る こ とであ る。 また、 数タ ッ プの低域通過フ ィ ル夕 (以下、 L P F と 記す) によ り 画像を滑 ら か にする こ と も平滑化であ る。 平 滑化を行う と図 2 4 ( c ) のよ う に、 ブロ ッ ク ノ イ ズのみ な らず、 画像全体の ノ イ ズを除去する こ とができ る。
しカゝ しなが ら、 画素の平滑化は、 ブロ ッ ク ノ イ ズを除去 でき る利点を有する一方、 ブロ ッ ク ノ イ ズ以外の画像のェ ッ ジ も滑 ら かに して し ま う ため、 画像がぼけた も の になつ て し ま う 欠点があ る。
また、 上記従来の手法では、 ブロ ッ ク サイ ズと ブロ ッ ク 境界が完全に分か る 場合のみ しか ブ ロ ッ ク ノ イ ズを除去す る こ とができな い 問題があ る。
さ ら に、 ブロ ッ ク 境界に画像のエ ッ ジが存在 した場合、 ブロ ッ ク ノ イ ズの影響は、 画像のエ ッ ジに比べ少な い。 し か し、 上記従来の手法ではブロ ッ ク 境界であればすべて平 滑化を行っ てい る。 そのため、 ブ ロ ッ ク 境界に存在 した画 像エ ツ ジはぼけて し ま い、 実際に はブロ ッ ク 境界に平滑-化 を行っ た方が画質劣化が見 ら れる場合 も あ る。
それ故、 本発明の 目 的は、 本来ブロ ッ ク ノ イ ズ除去を行 う べき ブ ロ ッ ク 境界が不明確な場合で も、 正確に ブロ ッ ク 境界を検出する ブロ ッ ク ノ イ ズ検出装置を提供する こ とで あ る。
また、 本発明の他の 目 的は、 画像を ぼけ さ せる こ とな く 、 ブロ ッ ク ノ イ ズを除去 し、 なおかつ、 ブロ ッ ク 境界で も ブロ ッ ク ノ ィ ズが少な い画像に対 し ては、 平滑化を行わな い、 映像シー ン に付随 し た ブロ ッ ク ノ イ ズ除去装置を提供 する こ と であ る。
さ ら に、 本発明の他の 目 的は、 入力信号が多 フ ォ ーマ ツ 卜 (例え ば、 イ ン夕 レース方式 · プロ グ レ ッ シ ブ方式) の アナ ロ グ信号や外部デジタ ル信号 (例えば、 D V D や S T B ) の場合で も、 入力信号に存在する ブロ ッ ク ノ イ ズを除 去でき る ブ ロ ッ ク ノ イ ズ除去装置を提供する こ とであ る。
加えて、 本発明では、 ブロ ッ ク ノ イ ズ検出装置を用 いて 、 映像処理 シス テム にお ける ド ッ ト ク ロ ッ ク 再生を行 こ と も提供する。 発明の開示
本発明 は、 上記 目 的 を達成する ため に、 以下に示すよ う な特徴を有 し て い る。
第 1 の局面は、 予め定めた画像ブ ロ ッ ク 毎に不可逆符号 化処理が施 さ れたデジタ ルの映像信号か ら、 当 該映像信号 の復号化処理 に伴っ て生 じ る ブロ ッ ク ノ イ ズを検出する装 置であ っ て、
映像信号にお ける ブロ ッ ク ノ イ ズの レベルを検出する手 段 と、
映像信号にお ける ブロ ッ ク 境界 ( ブ ロ ッ ク ノ イ ズの発生 位置) を検出する手段 と を備え る。
上記のよ う に、 第 1 の局面によれば、 複数の ブロ ッ ク に 領域分割さ れる画像のブロ ッ ク境界お よびブロ ッ ク ノ イ ズ の レベルを正確に検出する こ で、 ブ ロ ッ ク ノ イ ズの検出が 可能とな る。
第 2 の局面は、 予め定めた画像ブ ロ ッ ク 毎に不可逆符号 化処理が施 さ れたデジタルの映像信号か ら、 当該映像信号 の復号化処理に伴っ て生 じ る ブロ ッ ク ノ イ ズを検出する装 置であ っ て、
映像信号を入力 し、 当該映像信号か ら 高域成分のみを抽 出する信号抽出手段 と、
信号抽出手段が出力する 高域成分信号を絶対値化する絶 対値化手段 と、
絶対値化手段が出力する絶対値化後の高域成分信号を、 予め定めた期間 にお いて累積加算する 累積加算手段 と、 累積加算手段が出力する累積加算結果に基づいて、 プロ ッ ク ノ イ ズの周期性を検知する周期検知手段 と、
周期検知手段が検知 し た周期性信号か ら、 ブ ロ ッ ク境界 を求め る プ ロ ッ ク境界判定手段 と を備え る。
上記のよ う に、 第 2 の局面 に よれば、 ブロ ッ ク ノ イ ズの 周期性を検知 し、 複数の ブ ロ ッ ク に領域分割さ れる画像の ブロ ッ ク 境界を正確に検出する こ で、 ブロ ッ ク ノ イ ズの検 出が可能 と なる。
こ こで、 好ま し い具体的な第 3 の局面 と しては、 第 2 の 局面のブロ ッ ク境界判定手段で、 ブロ ッ ク 境界の位置 とそ れ以外の位置 と の 2 値化 を行 う。 これによ り、 簡単にプロ ッ ク 境界を与え る こ とができ る。
第 4 の局面は、 第 2 お よ び第 3 の局面に従属する 局面で あ っ て、
映像信号を入力 し、 当該映像信号の予め定めた複数の フ レーム間の信号差分を求め る フ レーム差分手段 と、
フ レーム差分手段の 出 力する信号の差分値が、 予め定め た し き い値を越える か否か に従っ て、 除去すべき ブロ ッ ク ノ イ ズが存在する領域 (以下、 ノ イ ズ領域と い う ) を判断 する領域判断手段 と、
ブロ ッ ク 境界判定手段が求めたブロ ッ ク境界 を、 領域判 断手段が判断 した ノ イ ズ領域でマス ク化 し、 当該ノ イ ズ領 域に対応する ブロ ッ ク 境界 を求め る ブロ ッ ク エ ッ ジ制御手 段 と を さ ら に備え る。
上記の よ う に、 第 4 の局面 によれば、 第 2 お よ び第 3 の 局面よ り も、 さ ら に細か く ブ ロ ッ ク ノ イ ズを含んだ画像の 動き の大き さ と の相関 に よ っ てブロ ッ ク 境界の分類が可能 となる。 こ の結果、 映像 シー ン に あ っ た、 ブ ロ ッ ク ノ イ ズ の大き い部分のみを プ ロ ッ ク 境界 と して検出する こ と がで き る。
こ こ で、 好ま し い具体的な第 5 の局面 と し て は、 第 4 の 局面の フ レーム差分手段で、 現在フ レーム と 直前 フ レーム と の間の信号差分を求め る。 こ れによ り、 映像 シー ン に あ T JP9 /02589 つ た、 ブ ロ ッ ク ノ イ ズの大き い部分のみを ブ ロ ッ ク 境界と して検出す る こ とができ る。
また、 他の好ま し い具体的な第 6 の局面 と し て は、 第 4 および第 5 の局面の領域判断手段で、 し き い値を越え る部 分 と し き い値を越えな い部分 と の 2 値化を行 う。 こ れによ り、 簡単 に ノ イ ズ領域を与え る こ とができ る。
第 7 の局面は、 第 4 〜第 6 の局面に従属する 局面であ つ て、
領域判断手段が判断 し た ノ イ ズ領域の う ち、 予め定めた 小領域内 に分布する ノ イ ズ部分を除外する特異点除去手段 を さ ら に備え、
ブロ ッ ク エ ツ ジ制御手段は、 ブ ロ ッ ク境界判定手段が求 めた ブロ ッ ク境界を、 特異点除去手段が出力する 除外後の ノ イ ズ領域でマス ク 化する こ と を特徴 とする。
上記の よ う に、 第 7 の局面に よれば、 第 4 〜第 6 の局面 において、 平滑化によ る 除去効果が現れに く く 画像を ぼか して し ま う 画像の細かい領域を除去する。 こ れに よ り、 フ レーム差分処理の効果を高め る こ と が可能 と な り 高画質を 得 られ、 同時にデ一夕 量を削減する こ と も 可能 と な る。
こ こで、 好ま し い第 8 の局面 と し て、 第 2 〜第 7 の局面 にお け る 信号抽出手段、 絶対値化手段、 累積加算手段およ び周期検知手段は、 映像信号の水平方向 また は垂直方向の いずれカゝ 1 方向、 若 し く は双方向 に関 して、 それぞれプロ ッ ク 境界の検出処理を行 う こ と ができ る。
第 9 の局面は、 第 8 の局面 に従属する 局面であ っ て、 各処理 を映像信号の垂直方向 に 関 し て行 う 場合、 周期検知手段 は、 入力す る 映像信号の フ ォ ーマ ッ ト に-応 じ て、 検知 に用 い る フ レー ム を逐次変更す る こ と を特徴 と す る。
上記の よ う に、 第 9 の 局面 に よ れば、 第 8 の 局面 にお い て、 入力 す る 映像信号の フ ォ ーマ ッ ト (例 え ば、 イ ン タ レ ー ス方式ノ プ ロ グ レ ッ シ ブ方式) に 関わ ら ず、 ブ ロ ッ ク 画 像の周期性 を損な う こ と な く、 ブ ロ ッ ク 境界の正確な検出 が可能 と な る。
第 1 0 の 局面 は、 予め定め た画像ブ ロ ッ ク 毎に不可逆符 号化処理が施 さ れたデジ タ ルの映像信号か ら、 当 該映像信 号の復号化処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズを検出 し て 除去する 装置で あ っ て、
映像信号 にお け る ブ ロ ッ ク ノ イ ズの レ ベル を検出する 手 段 と、
映像信号 にお け る ブ ロ ッ ク 境界 を検 出す る 手段 と、 ブ ロ ッ ク 境界 に お いて、 検出 し た レ ベルが予 め定め た し き い値以上で あ る ブ ロ ッ ク ノ イ ズの み を 除去す る 手段 と を 備え る。
上記の よ う に、 第 1 0 の局面 に よ れ ば、 複数の ブ ロ ッ ク に領域分割 さ れ る 画像の ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ ィ ズの レベル を正確 に検出す る こ で、 ブ ロ ッ ク ノ イ ズの検出 が可能 と な り、 ブ ロ ッ ク 境界 に存在す る ブ ロ ッ ク ノ イ ズを 除去する こ と がで き る。
第 1 1 の局面 は、 予め 定め た画像 ブ ロ ッ ク 毎 に不可逆符 号化処理が施 さ れた デ ジ タ ルの映像信号か ら、 当 該映像信 号の復号化処理 に 伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出 し て 除去する装置であ っ て、
映像信号を入力 し、 当該映像信号か ら 高域成分のみを抽 出する信号抽出手段 と、
信号抽出手段が出力する 高域成分信号を絶対値化する絶 対値化手段 と、
絶対値化手段が出 力する絶対値化後の高域成分信号を、 予め定めた期間 にお いて累積加算する累積加算手段 と、 累積加算手段が出力する 累積加算結果に基づいて、 プロ ッ ク ノ イ ズの周期性を検知する周期検知手段 と、
周期検知手段が検知 し た周期性信号か ら、 ブ ロ ッ ク 境界 を求め る プロ ッ ク 境界判定手段 と、
ブロ ッ ク境界に対 し て、 ブロ ッ ク ノ イ ズを除去する プロ ッ ク ノ イ ズ除去手段 と を備え る。
上記の よ う に、 第 1 1 の局面に よれば、 ブロ ッ ク ノ イ ズ の周期性 を検知 し、 複数の ブロ ッ ク に領域分割 さ れる画像 のブロ ッ ク 境界を正確に検出する こ で、 ブロ ッ ク ノ イ ズの 検出が可能 と な り、 ブ ロ ッ ク 境界に存在する ブ ロ ッ ク ノ ィ ズを除去する こ と ができ る。
こ こ で、 好ま し い具体的な第 1 2 の局面 と し て、 第 1 1 の局面の ブ ロ ッ ク境界判定手段で、 ブロ ッ ク 境界の位置 と それ以外の位置 と の 2 値化 を行 う。 こ れに よ り、 簡単にブ ロ ッ ク 境界を与え る こ と ができ る。
第 1 3 の局面は、 第 1 1 および第 1 2 の局面 に従属する 局面であ っ て、
映像信号を入力 し、 当 該映像信号の予め定め た複数の フ レーム間の信号差分 を求め る フ レーム差分手段 と、 フ レーム差分手段の出力する信号の差分値が、 予め定め た し き い値を越え るか否か に従っ て、 ノ イ ズ領域を判断す る領域判断手段 と、
ブ口 ッ ク 境界判定手段が求めた ブロ ッ ク 境界を、 領域判 断手段が判断 し た ノ イ ズ領域でマ ス ク 化 し、 当 該 ノ イ ズ領 域に対応する ブ ロ ッ ク境界を求め る ブロ ッ ク エ ッ ジ制御手 段 と を さ ら に備え、
ブ口 ッ ク ノ ィ ズ除去手段は、 ノ イ ズ領域に対応する プロ ッ ク境界に対 し て、 ブロ ッ ク ノ イ ズを除去する。
上記の よ う に、 第 1 3 の局面に よれば、 第 1 1 およ び第
1 2 の局面よ り ち、 さ ら に細か く ブロ ッ ク ノ イ ズを含んだ 画像の動き の大き さ と の相関によ っ てブ ロ ッ ク 境界の分類 が可能 とな る。 こ の結果、 映像シー ン に あ っ た、 ブロ ッ ク ノ イ ズの大き い部分のみを ブロ ッ ク 境界 と して検出 し て除 去する こ と がでさ る。
で、 好ま し い具体的な第 1 4 の局面 と し ては、 第 1
3 の局面の フ レーム差分手段で、 現在フ レーム と 直前 フ レ —ム と の間の信号差分を求め る。 こ れによ り、 映像シー ン に あ つ た、 ブロ ッ ク ノ ィ ズの大き い部分のみを ブ ロ ッ ク 境 界 と して検出する こ とができ る。
また、 他の好 ま し い具体的な第 1 5 の局面 と し ては、 第 1 3 および第 1 4 の局面の領域判断手段で、 し き い値を越 え る部分 と し き い値を越えな い部分 と の 2 値化 を行 う。 こ れによ り、 簡単 に ノ イ ズ領域を与え る こ とがで き る。
第 1 6 の局面は、 第 1 3 〜第 1 5 の局面に従属する 局面 であ つ て、 領域判断手段が判断 し た ノ イ ズ領域の う ち、 予め定め-た 小領域内 に分布する ノ ィ ズ部分を除外する特異点除去手段 を さ ら に備え、
ブロ ッ ク エ ッ ジ制御手段は、 ブロ ッ ク 境界判定手段が求 めたブロ ッ ク 境界を、 特異点除去手段が出力する 除外後の ノ イ ズ領域でマス ク 化する こ と を特徵 とする。
上記のよ う に、 第 1 6 の局面によれば、 第 1 3 〜第 1 5 の局面にお いて、 平滑化に よ る除去効果が現れに く く 画像 を ぼか して し ま う 画像の細か い領域を除去する。 こ れによ り、 フ レーム差分処理の効果を高め る こ と が可能 とな り 高 画質を得 ら れ、 同時にデー タ 量を削減する こ と も 可能 とな る。
こ こ で、 好ま し い第 1 7 の局面 と して、 第 1 1 〜第 1 6 の局面にお ける信号抽出手段、 絶対値化手段、 累積加算手 段およ び周期検知手段は、 映像信号の水平方向 または垂直 方向の いずれか 1 方向、 若 し く は双方向 に関 し て、 それぞ れブロ ッ ク 境界の検出処理 を行 う こ と ができ る。
第 1 8 の局面は、 第 1 7 の局面に従属する 局面であ っ て 入力する 映像信号の フ ォ ー マ ツ ト を識別する 識別手段を さ ら に備え、
各処理 を映像信号の垂直方向に関 し て行 う 場合、 識別手段は、 フ ォ ー マ ッ ト に応 じて、 周期検知手段が検 知 に用 い る フ レーム を逐次変更さ せる こ と を特徴 とする。
上記の よ う に、 第 1 8 の局面によれば、 第 1 7 の局面に お いて、 入力する 映像信号の フ ォ ー マ ッ ト (例え ば、 イ ン 夕 レー ス 方式 プ ロ グ レ ッ シ ブ方式) に 関わ ら ず、 プ ロ-ッ ク 画像の 周 期性 を損な う こ と な く、 ブ ロ ッ ク 境界の正確な 検出が可能 と な る。
第 1 9 の 局面は、 予め定め た画像ブ ロ ッ ク 毎 に不可逆符 号化処理が施 さ れたデジ タ ル の映像信号か ら、 当 該映像信 号の復号化処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズを検出 し て 除去す る 装置で あ っ て、
映像信号 を入力 し、 当 該映像信号 に対す る 画面上 に お け る横方向 の ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ量を検出す る垂直 プ ロ ッ ク 境界検出手段 と、
映像信号 を入 力 し、 当 該映像信号 に対す る 画面上 に お け る縦方向 の ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ量を検出す る水平 ブ ロ ッ ク 境界検出手段 と、
垂直 プ ロ ッ ク 境界検出手段お よ び水平 プ ロ ッ ク 境界検出 手段の検出 結果か ら、 縦横全方向 の ブ ロ ッ ク 境界 を特定す る ブ ロ ッ ク エ リ ア検出手段 と、
プ ロ ッ ク ェ リ ァ検出手段が特定 し た縦横全方向 の プ ロ ッ ク 境界 に 応 じ、 入力す る 映像信号 に対 し て予め 定め た平滑 化処理 を 施す プ ロ ッ ク 境界平滑化手段 と を備 え る。
上記 の よ う に、 第 1 9 の 局面 に よ れ ば、 ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ レ ベル を正確 に検出す る こ と がで き る 。 こ れ に よ り、 ブ ロ ッ ク ノ イ ズ レ ベル に 対応 し た適切な平 滑化 を行 う こ と が可能 と な り、 映像 シ ー ン に 付随 し た ブ 口 ッ ク ノ イ ズ を よ り 効果的 に 除去す る こ と が可能 と な る。
こ こ で、 好 ま し い 具体的な構成 を示す第 2 0 の 局面 と し て、 第 1 9 の 局 面 に お い て、 垂直ブロ ッ ク 境界検出手段は、
映像信号の垂直高域成分のみを抽出する垂直ハイ パス フ ィ ルタ (以下、 H P F と 記す) と、
垂直 H P F が出力する 高域成分信号を絶対値化する第 1 の絶対値化手段 と、
第 1 の絶対値化手段が出力する絶対値化後の高域成分 信号を、 水平方向に累積加算する水平累積加算手段 と、 水平累積加算手段が出力する 累積加算後の高域成分信 号か ら、 さ ら に高域成分を抽出する第 1 の H P F と、
第 1 の H P F が出力する信号を、 予め設定 さ れた N点 ( N は、 正の整数) ごと にそれぞれ累積加算する第 1 の N 点累積加算手段 と、
第 1 の H P F が出力する信号を、 時間方向 に演算 して 映像信号の ブロ ッ ク ノ イ ズ量を検出する第 1 のテ ンポ ラル フ イ リレ夕 と、
第 1 の N点累積加算手段が累積加算 によ っ て求めた N 個 の累積加算値の 中か ら、 最大値 と 当 該最大値の位置 と を 求め る第 1 の最大値検出手段 と、
第 1 のテ ンポ ラルフ イ リレ夕 が検出 し た ブロ ッ ク ノ イ ズ 量を、 第 1 の最大値検出手段が出力する最大値の位置でマ ス ク化 し、 当該位置に対応する垂直ブロ ッ ク 境界を求め る 第 1 のマス ク 化手段 と を備え、
水平ブロ ッ ク 境界検出手段は、
映像信号の水平高域成分のみを抽出する 水平 H P F と 水平 H P F が出力する 高域成分信号を絶対値化する第 2 の絶対値化手段と、
第 2 の絶対値化手段が出力する絶対値化後の高域成分 信号を、 垂直方向に累積加算する垂直累積加算手段 と、 垂直累積加算手段が出 力する 累積加算後の高域成分信 号か ら、 さ ら に高域成分を抽出する第 2 の H P F と、
第 2 の H P F が出力す る 信号を、 予め設定 さ れた N点 ごと にそれぞれ累積加算す る第 2 の N点累積加算手段 と、 第 2 の H P F が出力す る 信号を、 時間方向 に演算 して 映像信号の ブロ ッ ク ノ イ ズ量を検出する第 2 のテ ンポ ラ ル フ イ レ夕 と、
第 2 の N点累積加算手段が累積加算によ っ て求めた N 個の累積加算値の中か ら、 最大値 と 当該最大値の位置 と を 求め る第 2 の最大値検出手段 と、
第 2 のテ ンポ ラルフ ィ ル夕 が検出 し たブロ ッ ク ノ イ ズ 量を、 第 2 の最大値検出手段が出力する最大値の位置でマ ス ク化 し、 当該位置に対応する垂直ブ ロ ッ ク 境界を求め る 第 2 のマス ク 化手段 と を備え る。
これに よ り、 時間方向の変動を抑制 し た変動の少な い ブ ロ ッ ク レベルを検出する こ と が可能 とな る と共 に、 ブ ロ ッ ク ノ イ ズ レベルに対応 し た適切な平滑化を行 う こ と が可能 とな り、 映像シー ン に付随 し た ブロ ッ ク ノ イ ズを よ り 効果 的に除去する こ と が可能 と な る。
第 2 1 の局面は、 予め定め た画像ブロ ッ ク 毎に不可逆符 号化処理が施さ れた映像信号か ら、 当該映像信号の復号化 処理に伴っ て生 じ る プ ロ ッ ク ノ ィ ズを検出 し て除去する装 置であ っ て、 アナ 口 グの映像信号を入力 し、 デジタ ルに変換する A D 変換手段 と、
符号化さ れたデジ タ ルの映像信号 を入力 し、 復号化処理 を施す と共 に、 当該復号化処理 し た ブ ロ ッ ク 境界情報 を出 力する デジタ ル復号化手段 と、
A D 変換手段が出力する 映像信号 と デジタ ル復号化手段 が出力する 映像信号 と を入力 し、 外部か ら の指示に従っ て 、 いずれか一方の 当該映像信号を選択的に出力するセ レ ク 夕 と、
セ レ ク 夕 が選択 し た映像信号を入力 し、 当該映像信号に 対する画面上にお ける横方向のブ ロ ッ ク 境界およびブロ ッ ク ノ イ ズ量を検出する垂直フ ロ ッ ク 境界検出手段と、
セ レ ク 夕 が選択 し た映像信号を入力 し、 当該映像信号に 対する画面上にお ける縦方向の ブ ロ ッ ク 境界およびブ ロ ッ ク ノ イ ズ量を検出する水平ブロ ッ ク 境界検出手段 と、
垂直ブロ ッ ク 境界検出手段および水平ブロ ッ ク境界検出 手段の検出結果か ら、 縦横全方向の ブ ロ ッ ク 境界を特定す る ブロ ッ ク エ リ ァ検出手段 と、
ブロ ッ ク エ リ ァ検出手段が特定 し た縦横全方向の プ ロ ッ ク 境界に応 じ、 入力する 映像信号に対 し て予め定めた平滑 化処理を施すブ □ ッ ク 境界平滑化手段 と を備え、
垂直ブ□ ッ ク 境界検出手段およ び水平プロ ッ ク境界検出 手段は、 セ レ ク 夕 ifi A D 変換手段の 出力する 映像信号を選 択 した場合、 各 々 の検出結果に基づいた ブロ ッ ク 境界を、 セ レ ク タ 力 デジ 夕 ル復号化手段の 出 力する映像信号を選択
— 、、、
し た場合 > ァ ン 夕 ル復号化手段が出 力する ブ ロ ッ ク 境界情 報に従っ たブロ ッ ク 境界を、 ブロ ッ ク エ リ ア検出手段へ-出 力する こ と を特徴とする。
上記の よ う に、 第 2 1 の局面によれば、 入力する 映像信 号に対応 し たブロ ッ ク 境界およびブ ロ ッ ク ノ イ ズ レベルを 正確に検出する こ と ができ る。 こ れに よ り、 ブ ロ ッ ク ノ ィ ズ レベルに対応 した適切な平滑化を行 う こ と がさ ら に可能 とな り、 入力する様々 な映像シー ン に付随 し た ブロ ッ ク ノ ィ ズをよ り 効果的に除去する こ と が可能 とな る。
こ こ で、 好ま し い具体的な構成を示す第 2 2 の局面 と し て、 第 2 1 の局面にお いて、
垂直プロ ッ ク 境界検出手段は、
映像信号の垂直高域成分のみを抽出する 垂直 H P F と 垂直 H P F が出力する 高域成分信号を絶対値化する第 1 の絶対値化手段 と、
第 1 の絶対値化手段が出力する絶対値化後の高域成分 信号を、 水平方向に累積加算する水平累積加算手段 と、 水平累積加算手段が出力する 累積加算後の高域成分信 号か ら、 さ ら に高域成分 を抽出する 第 1 の H P F と、
第 1 の H P F が出 力する信号を、 予め設定さ れた N点 ごと にそれぞれ累積加算する第 1 の N点累積加算手段 と、 第 1 の H P F が出力する信号を、 時間方向 に演算 して 映像信号の プロ ッ ク ノ イ ズ量を検出する第 1 のテ ンポ ラル フ ィ ル夕 と、
第 1 の N点累積加算手段が累積加算に よ っ て求めた N 個 の累積加算値の 中か ら、 最大値 と 当 該最大値の位置 と を 求め る第 1 の最大値検出手段 と、
セ レ ク タ の選択に同期 し、 デジタル復号化手段が出力 する ブロ ッ ク 境界情報 と、 第 1 の最大値検出手段が出力す る最大値の位置 と の いずれか一方 を選択的に出力する第 1 のセ レ ク タ と、
第 1 のテ ンポ ラ ルフ ィ ル夕 が検出 したブロ ッ ク ノ イ ズ 量を、 第 1 のセ レ ク タ が出力する ブロ ッ ク境界でマス ク 化 · し、 当該位置に対応する垂直ブロ ッ ク境界を求め る第 1 の マス ク化手段 と を備え、
水平プ ロ ッ ク 境界検出手段は、
映像信号の水平高域成分のみ を抽出する水平 H P F と 水平 H P F が出力する 高域成分信号を絶対値化する第 2 の絶対値化手段 と、
第 2 の絶対値化手段が出力す る絶対値化後の高域成分 信号を、 垂直方向 に累積加算する垂直累積加算手段 と、
垂直累積加算手段が出力する 累積加算後の高域成分信 号か ら、 さ ら に高域成分を抽出す る第 2 の H P F と、
第 2 の H P F が出力する 信号 を、 予め設定 さ れた N点 ごと にそれぞれ累積加算する 第 2 の N点累積加算手段 と、 第 2 の H P F が出力する 信号を、 時間方向 に演算 して 映像信号の プ ロ ッ ク ノ イ ズ量を検出する第 2 のテ ンポ ラ ル フ イ リレ夕 と、
第 2 の N点累積加算手段が累積加算によ っ て求めた N 個の累積加算値の 中か ら、 最大値 と 当該最大値の位置 と を 求める第 2 の最大値検出手段 と、 セ レ ク タ の選択に同期 し、 デジタ ル復号化手段が出-力 する ブロ ッ ク境界情報 と、 第 2 の最大値検出手段が出力す る最大値の位置 と の いずれか一方を選択的に 出 力する第 2 のセ レ ク タ と、
第 2 のテ ンポ ラル フ ィ ル夕 が検出 し た ブ ロ ッ ク ノ イ ズ 量を、 第 2 のセ レ ク タ が出 力する ブロ ッ ク 境界でマス ク化 し、 当該位置に対応する垂直ブロ ッ ク境界を求め る第 2 の マス ク 化手段 と を備え る。
これに よ り、 時間方向の変動を抑制 した変動の少な い ブ ロ ッ ク レベルを検出する こ と が可能 とな る と 共 に、 ブロ ッ ク ノ イ ズ レベルに対応 し た適切な平滑化を行 う こ とが可能 と な り、 入力する様々 な映像シー ン に付随 し た ブ ロ ッ ク ノ ィ ズをよ り 効果的に除去する こ と が可能 とな る。
また、 好ま し い具体的な構成を示す第 2 3 の局面 と して 、 第 2 0 お よび第 2 2 の局面にお いて、
ブロ ッ ク 境界平滑化手段は、
映像信号の水平高域成分のみを抽出する 水平 H P F と 水平 H P F の出力 と 水平ブロ ッ ク 境界検出手段の出力 と を乗算する第 1 の乗算手段 と、
映像信号か ら 第 1 の乗算手段の出力 を減算す る 第 1 の 減算手段 と、
映像信号の垂直高域成分のみを抽出する 垂直 H P F と 垂直 H P F の出力 と垂直ブロ ッ ク境界検出手段の 出力 と を乗算す る第 2 の乗算手段 と、 映像信号か ら 第 2 の 乗算手段 の 出 力 を減算す る 第 2 の 減算手段 と を備え、
ブ 口 ッ ク ノ ィ ズ量 に応 じ て ブ ロ ッ ク ノ イ ズ を除去す る こ と を特徴 と する
こ れ に よ り、 入力 す る 映像信号 を劣化 さ せ る こ と な く、 ブ ロ ッ ク ノ イ ズ を効果的 に 除去す る こ と が可能 と な る。
第 2 4 の 局面 は、 第 1 9 〜第 2 3 の局面 に従属す る 局面 であ つ て、
水平ブ ロ ッ ク 境界検出手段お よ び垂直 プ ロ ッ ク 境界検出 手段が検出 す る ブ ロ ッ ク ノ イ ズ量 に応 じ、 映像信号の輪郭 部分 を 強調する 輪郭補正量 を 制御す る 輪郭補正手段 を さ ら に備え る。
上記 の よ う に , 第 2 4 の局面 に よ れば、 第 1 9 〜第 2 3 の局面 に お いて , ブ ロ ッ ク ノ イ ズ レ ベル に対応 し た適切な 輪郭補正 を行 う こ と が可能 と な り、 ブ ロ ッ ク ノ イ ズを強調 し な い映像信号の輪郭補正 を行 う こ と が可能 と な る。
第 2 5 の 局面 は、 第 1 9 〜第 2 4 の 局面 に従属す る 局面 であ つ て、
水平 ブ ロ ッ ク 境界検出手段お よ び垂直 プ ロ ッ ク 境界検出 手段が検出す る ブ ロ ッ ク ノ イ ズ量 に基づいて、 入 力する 映 像信号の判別 (種類や品位等) を行 う 制御手段 を さ ら に備 え、
制御手段が、 判別 の結果 を 予 め 定め た形態で画面上 に ォ ンス ク リ ー ン ァ イ ス プ レ イ 表示す る こ と を特徴 と す る。
上記 の よ う に 第 2 5 の 局 面 に よ れば、 第 1 9 〜第 2 4 の局面 に お い て 情報 を オ ン ス ク リ ー ン デ ィ ス プ レ イ ( 〇 S D ) 表示する こ とで、 映像ソースやブ ロ ッ ク ノ イ ズ除去 効果を、 一 目 で認識する こ とが可能 と な る。
第 2 6 の局面は、 予め定めた画像ブロ ッ ク 毎に不可逆符 号化処理が施さ れたデジタ ルの映像信号か ら、 当該映像信 号の復号化処理 に伴っ て生 じ る垂直方向の ブロ ッ ク ノ イ ズ を検出する装置であ っ て、
映像信号を入力 し、 当該映像信号の垂直高域成分のみを 抽出する垂直 H P F と、
垂直 H P F が出力する 高域成分信号を絶対値化する絶対 値化手段 と、
絶対値化手段が出 力する絶対値化後の高域成分信号を、 水平方向 に累積加算する水平累積加算手段 と、
水平累積加算手段が出力する累積加算後の高域成分信号 か ら、 さ ら に高域成分を抽出する H P F と、
H P F が出力する信号を、 予め設定 さ れた N点 ごと にそ れぞれ累積加算する N点累積加算手段 と、
H P F が出力 する 信号を、 時間方向 に演算 して映像信号 のブロ ッ ク ノ ィ ズ量を検出する テ ンポ ラ ル フ ィ ル夕 と、
N点累積加算手段が累積加算に よ っ て求めた N個 の累積 加算値の 中か ら、 最大値と 当該最大値の位置 と を求め る最 大値検出手段 と、
テ ンポ ラ ル フ ィ ル夕 が検出 し た ブ ロ ッ ク ノ イ ズ量を、 最大値検出手段が出 力する 最大値の位置でマ ス ク 化 し、 当 該位置に対応する 垂直ブロ ッ ク 境界を求め る マ ス ク 化手段 と を備え る。
上記の よ う に、 第 2 6 の局面は、 垂直方向の ブロ ッ ク 境 界 を検出す る 装置 を独立 に構成 し た も の で あ る。
第 2 7 の 局面は、 予め定 め た画像ブ ロ ッ ク 毎 に 不可逆符 号化処理が施 さ れたデジ タ ルの映像信号か ら、 当 該映像信 号の復号化処理 に伴 っ て生 じ る 水平方向の ブ ロ ッ ク ノ イ ズ を検出す る 装置で あ っ て、
映像信号 を入 力 し、 当 該映像信号の垂直高域成分の み を 抽 出す る 水平 H P F と、
水平 H P F が出 力す る 高域成分信号 を絶対値化す る 絶対 値化手段 と、
絶対値化手段が出 力 す る 絶対値化後の 高域成分信号 を、 垂直方向 に 累積加算す る 垂直累積加算手段 と、
垂直累 積加算手段が出 力 す る 累 積加算後の 高域成分信号 力ゝ ら、 さ つ に 商域成分 を抽 出する H P F と、
H P F が出 力 する 信号 を、 予め 設定 さ れた N 点 ご と にそ れぞれ累積加算す る N 点累積加算手段 と、
H P F が出 力 す る 信号 を、 時間方向 に演算 し て映像信号 の ブ 口 ッ ク ノ ィ ズ量 を検 出す る テ ン ポ ラ ル フ ィ ル 夕 と、
N 点累 積加算手段が累 積加算 に よ っ て求め た N 個 の 累積 加算値の 中 カゝ ら、 最大値 と 当 該最大値の位置 と を求め る 最 大値検出手段 と
テ ン ポ ラ ル フ ィ ル 夕 が検出 し た ブ ロ ッ ク ノ イ ズ量 を、 最大値検出 手段が出 力 す る 最大値 の位置でマ ス ク 化 し、 当 該位置 に対応す る 水平 ブ ロ ッ ク 境界 を求め る マ ス ク 化手段 と を備え る。
上記 の よ う に 、 第 2 7 の 局 面は、 水平方向 の ブ ロ ッ ク 境 界 を検出す る 装置 を 独立 に構成 し た も の で あ る。 第 2 8 の 局面 は、 予め定め た画像ブ ロ ッ ク 毎 に不可逆符 号化処理が施 さ れたデジ タ ル の映像信号 を処理す る 映像処 理 シ ス テム にお いて、 再生す る ド ッ 卜 ク ロ ッ ク の制御 を行 う 装置で あ っ て、
水平同期パルス に基づい て、 映像処理 シ ス テ ム で用 い る ド ッ ト ク ロ ッ ク を 生成す る ク ロ ッ ク 発生手段 と、
映像信号 を入力 し、 当 該映像信号 に対する 画面上 に お け る 縦方向の プ ロ ッ ク 境界 を検出す る 水平プ ロ ッ ク 境界検出 手段 と、
水平プ ロ ッ ク 境界検出手段が検出 す る プ ロ ッ ク 境界が、 周 期的 に単一の最大点 ( ピー ク ) を 有す る よ う に、 ク ロ ッ ク 発生手段 の遅延量 を可変す る 制御手段 と を備 え る。
上記の よ う に、 第 2 8 の 局面 に よ れば、 入力 す る 映像信 号 に対応 し た水平ブ ロ ッ ク 境界 を検出 し、 こ の位置 に基づ レ て ド ッ ト ク ロ ッ ク の再生 を行 う。 こ れ に よ り、 本来の映 像信号の ド ッ ト ク ロ ッ ク と 位相が一致 し た ク ロ ッ ク を、 正 確 に再生す る こ と が可能 と な る。
こ こ で、 好ま し い具体的な構成 を示す第 2 9 の 局面 と し て、 第 2 8 の 局面 に お い て、
水平ブ ロ ッ ク 境界検出手段 は、
映像信号 を 入力 し、 当 該映像信号の垂直高域成分 の み を抽出する 水平 H P F と、
水平 H P F が出 力 す る 高域成分信号 を絶対値化す る 絶 対値化手段 と、
絶対値化手段が出 力 す る 絶対値化後の 高域成分信号 を 、 垂直方向 に 累 積加算す る 垂直累 積加算手段 と、 垂直累積加算手段が出力する 累積加算後の高域成分-信 号か ら、 さ ら に高域成分を抽出する H P F と、
H P F が出力する 信号を、 予め設定さ れた N点 ごと にそ れぞれ累積加算する N点累積加算手段 と を備え る。
これに よ り、 本来の映像信号の ド ッ ト ク ロ ッ ク と位相が 一致 し た ク ロ ッ ク を、 正確に再生する こ と が可能 となる。
第 3 0 の局面は、 予め定めた画像ブロ ッ ク 毎に不可逆符 号化処理が施さ れたデジタ ルの映像信号か ら、 当該映像信 号の復号化処理 に伴っ て生 じ る ブロ ッ ク ノ イ ズを検出する 方法を、 コ ン ピ ュー タ 装置上で実行する ため の プロ グラム を記録 した媒体であ っ て、
映像信号に対 し、 当 該映像信号か ら 高域成分のみを抽出 する ステ ッ プと、
抽出 した高域成分信号を絶対値化する ス テ ツ プと、 絶対値化後の高域成分信号を、 予め定めた期間 にお いて 累積加算する ス テ ツ プと、
累積加算の結果に基づいて、 ブ ロ ッ ク ノ イ ズの周期性を 検知する ス テ ッ プと、
検知 し た周期性の信号か ら、 ブロ ッ ク 境界を求め る ステ ッ プと を含む動作環境を、 コ ン ピ ュ ー タ 装置上で実現する ため のプロ グラ ム を記録 してい る。
第 3 1 の局面は、 第 3 0 の局面に従属する 局面であ っ て ブロ ッ ク境界に対 し て、 ブロ ッ ク ノ イ ズを除去する ス テ ッ プを さ ら に含む。
こ こで、 好ま し い具体的な第 3 2 の局面 と し て、 第 3 0 お よ び第 3 1 の 局面の ブ ロ ッ ク 境界 を求め る ス テ ッ プで、- ブ ロ ッ ク 境界 と それ以外の位置 と の 2 値化 を行 う。
第 3 3 の 局面は、 第 3 0 〜 第 3 2 の 局面 に従属す る 局面 で あ っ て、
映像信号 に対 し、 当 該映像信号の予め定め た 複数 の フ レ — ム 間 の信号差分を求め る ス テ ッ プ と、
信号差分の値が、 予め定め た し き い値 を越え る か否か に 従 っ て、 ノ イ ズ領域 を判断す る ス テ ッ プ と、
ブ ロ ッ ク 境界 を ノ イ ズ領域でマ ス ク イ匕 し、 当 該 ノ イ ズ領 域 に対応す る ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を さ ら に含 む。
こ こ で、 好 ま し い具体的な第 3 4 の局面 と し て、 第 3 3 の 局面 の信号差分 を求め る ス テ ッ プで、 現在 フ レ ー ム と 直 前 フ レー ム と の 間 の信号差分 を求め る。
こ こ で、 他の好 ま し い具体的な第 3 5 の 局面 と し て、 第 3 3 お よ び第 3 4 の局面 の ノ イ ズ領域 を 判断す る ス テ ッ プ で、 し き い値 を越え る 部分 と し き い値 を越え な い 部分 と の 2 値化 を 行 う。
第 3 6 の 局面 は、 第 3 3 〜第 3 5 の 局面 に従属す る 局面 で あ っ て、
ノ イ ズ領域の う ち、 予め定め た 小領域内 に分布す る ノ ィ ズ部分 を 除外す る ス テ ッ プを さ ら に含み、
ノ イ ズ領域 に 対応す る ブ ロ ッ ク 境界 を 求め る ス テ ッ プは 、 ブ ロ ッ ク 境界 を、 除外後の ノ イ ズ領域でマ ス ク 化す る こ と を特徴 と す る。
こ こ で、 好 ま し い第 3 7 の 局面 と し て、 第 3 0 〜 第 3 6 の局面にお ける 各ス テ ッ プは、 映像信号の水平方向 または 垂直方向の いずれか 1 方向、 若 し く は双方向 に関 して、 そ れぞれブロ ッ ク 境界の検出処理を行 う こ とがで き る。
第 3 8 の局面は、 第 3 7 の局面に従属する 局面であ っ て 各処理を映像信号の垂直方向 に関 して行 う 場合、 周期性を検知する ス テ ッ プは、 入力する 映像信号の フ ォ —マ ツ 卜 に応 じて、 検知 に用 い る フ レーム を逐次変更する こ と を特徵 とする。
第 3 9 の局面は、 予め定めた画像ブロ ッ ク 毎に不可逆符 号化処理が施さ れたデジ タ ルの映像信号か ら、 当該映像信 号の復号化処理 に伴っ て生 じ る ブロ ッ ク ノ イ ズを検出する 方法を、 コ ン ビ ュ 一タ 装置上で実行する ため の プロ グラム
§ 球 し た媒体であ っ て、
映像信号に対 し、 当該映像信号に対する画面上にお ける 横方向のブ 口 ッ ク 境界お よ びブロ ッ ク ノ イ ズ量を検出する ス テ ッ フ と、
映像信号に対 し、 当 該映像信号に対する画面上 にお ける 縦方向のブ 口 ッ ク 境界お よ びブロ ッ ク ノ イ ズ量を検出する ス テ ツ フ と、
横方向を検出する ス テ ツ プおよ び縦方向を検出する ステ ッ プの検出結果か ら、 縦横全方向のブロ ッ ク 境界を特定す る ステ ツ プ と、
縦横全方向の ブロ ッ ク 境界 に応 じ、 映像信号に対 して予 め定めた平滑化 を行 う ス テ ッ プと を含む動作環境を、 コ ン ピ ュ ー 夕装置上で実現す る ため の プロ グ ラ ム を記録 し てい る。
こ こ で. 好 ま し い具体的な手法 を示す第 4 0 の 局面 と し て、 第 3 9 の局面 にお い て、
横方向 を検出す る ス テ ッ プは、
映像信号の垂直高域成分のみ を抽出す る ス テ ッ プ と、 抽出 し た高域成分信号 を絶対値化す る ス テ ッ プ と、 絶対値化後の高域成分.信号を水平方向 に 累 積加算する ス テ ッ プ と、
累積加算後の高域成分信号か ら さ ら に 高域成分 を抽出 す る ス テ ッ プ と、
さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信号を
、 予め設定 さ れた N 点 ご と に それぞれ累積加算す る ス テ ツ プ と、
さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信号を 、 時間方向 に演算 し て映像信号の ブ ロ ッ ク ノ イ ズ量 を検出 す る ス テ ッ プ と
累積加算 に よ っ て求め た N個 の 累 積加算値 の 中 か ら、 最大値 と 当 該最大値の位置 と を求め る ス テ ツ プ と、
検 (ϋ し た ブ ロ ッ ク ノ イ ズ量を最大値の位置で マ ス ク 化 し、 当 該位置 に対応す る 垂直 ブ ロ ッ ク 境界 を 求め る ス テ ツ プ と を含み、
縦方向 を検出す る ス テ ッ プは、
映像信 号の水平高域成分 のみ を抽出す る ス テ ッ プ と、 抽出 し た 高域成分信号 を 絶対値化す る ス テ ッ プ と、 絶対値化後の 高域成分信号 を垂直方向 に 累 積加算す る ス ァ ッ プ と、 累積加算後 の 高域成分信号か ら さ ら に高域成分 を抽出 す る ス テ ツ プ と、
さ ら に 高域成分 を抽出す る ス テ ツ プが出 力す る 信号を
、 予め設定 さ れた N 点 ご と にそれぞれ累 積加算す る ス テ ツ プ と、
さ ら に 高域成分 を抽出す る ス テ ッ プが出 力 す る 信号を 、 時間方向 に演算 し て映像信号の ブ ロ ッ ク ノ イ ズ量を検出 する ス テ ツ プ と、
累積加算 に よ っ て求め た N個 の 累 積加算値の 中 か ら、 最大値 と 当 該最大値の位置 と を求め る ス テ ッ プ と、
検出 し た ブ ロ ッ ク ノ イ ズ量を最大値の位置でマ ス ク 化 し、 当 該位置 に 対応する 垂直 ブ ロ ッ ク 境界 を求め る ス テ ツ プ と を含む。
第 4 1 の局面 は、 予め定め た画像 ブ ロ ッ ク 毎 に不可逆符 号化処理が施 さ れた映像信号か ら、 当 該映像信号の復号化 処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 方法 を、 コ ン ピ ュ ー 夕 装置上で実行す る た め の プ ロ グ ラ ム を記録 し た 媒体であ っ て、
アナ ロ グの映像信号を デジ タ ル に 変換する ス テ ッ プと、 符号化 さ れた デジ タ ルの映像信号 を復号化す る ス テ ッ プ と、
復号化 し た ブ ロ ッ ク 境界情報 を 出 力 す る ス テ ッ プ と、 外部か ら の指示 に従 っ て、 変換す る ス テ ッ プが出 力 す る 映像信号 ま た は復号化す る ス テ ツ プが出 力す る 映像信号の い ずれか一方の 当 該映像信号 を選択す る ス テ ッ プ と、
選択す る ス テ ッ プが出 力 し た映像信号 に対 し、 画面上 に お ける横方向の ブロ ッ ク 境界およびブロ ッ ク ノ イ ズ量を検 出する ス テ ッ プと、
選択する ステ ッ プが出力 し た映像信号に対 し、 画面上に お ける縦方向の ブロ ッ ク 境界およ びブロ ッ ク ノ イ ズ量を検 出する ス テ ッ プと、
横方向 を検出する ス テ ッ プおよび縦方向 を検出する ステ ッ プの検出結果か ら、 縦横全方向の ブロ ッ ク 境界を特定す る ステ ッ プと、
縦横全方向の ブロ ッ ク 境界に応 じ、 映像信号 に対 して予 め定めた平滑化処理を施すス テ ッ プと を さ ら に含み、
横方向 を検出する ス テ ツ プおよ び縦方向 を検出する ステ ッ プは、 変換する ステ ッ プが出力する 映像信号の場合、 各 々 の検出結果に基づいた ブ ロ ッ ク 境界を、 復号化する ステ ッ プが出力する 映像信号の場合、 復号化 した ブ ロ ッ ク境界 情報に従っ たブ ロ ッ ク 境界を出力する こ と を特徴 とする動 作環境を、 コ ン ピュー タ装置上で実現する た め の プロ グラ ム を記録 してい る。
こ こ で、 好ま し い具体的な手法を示す第 4 2 の局面 と し て、 第 4 1 の局面にお いて、
横方向 を検出する ス テ ッ プは、
映像信号の垂直高域成分のみを抽出する ス テ ッ プと、 抽出 し た高域成分信号を絶対値化する ス テ ッ プと、 絶対値化後の高域成分信号を水平方向に累積加算する ス テ ツ プと、
累積加算後の高域成分信号か ら さ ら に高域成分を抽出 する ス テ ッ プと、 さ ら に高域成分を抽出する ス テ ッ プが出力する 信号-を
、 予め設定 さ れた N点 ごと にそれぞれ累積加算する ス テ ツ プと、
さ ら に高域成分を抽出する ス テ ッ プが出力する 信号を 、 時間方向 に演算 して映像信号の ブロ ッ ク ノ イ ズ量を検出 する ス テ ツ プと、
累積加算によ っ て求めた N個の累積加算値の 中か ら、 最大値 と 当該最大値の位置 と を求め る ス テ ツ プと、
選択する ス テ ッ プに 同期 し、 ブロ ッ ク境界情報 と最大 値の位置 と の いずれか一方を選択的 に出 力する ス テ ッ プと ブロ ッ ク ノ イ ズ量を、 選択的 に出力する ス テ ッ プが出 力する ブロ ッ ク 境界でマス ク 化 し、 当該位置に対応する垂 直ブロ ッ ク 境界を求め る ス テ ッ プと を含み、
縦方向 を検出する ス テ ッ プは、
映像信号の水平高域成分のみを抽出する ス テ ツ プと、 抽出 し た高域成分信号 を絶対値化する ス テ ッ プと、 絶対値化後の高域成分信号を垂直方向 に累積加算する ス テ ツ プと、
累積加算後の高域成分信号か ら さ ら に高域成分を抽出 する ス テ ッ プと、
さ ら に高域成分を抽出する ス テ ッ プが出力する信号を 、 予め設定 さ れた N点 ご と にそれぞれ累積加算する ス テ ツ プと、
さ ら に 高域成分を抽出す る ス テ ッ プが出 力 する 信号を 、 時間方向 に演算 して映像信号の ブ ロ ッ ク ノ イ ズ量を検出 する ス テ ッ プと、
累積加算によ っ て求めた N個の累積加算値の中か ら、 最大値と 当該最大値の位置 と を求め る ス テ ッ プと、
選択する ス テ ッ プに 同期 し、 ブロ ッ ク 境界情報 と最大 値の位置 と のいずれか一方を選択的に出力する ス テ ッ プと ブロ ッ ク ノ イ ズ量を、 選択的に出力する ス テ ッ プが出 力する ブロ ッ ク 境界でマ ス ク 化 し、 当該位置に対応する水 平ブロ ッ ク 境界を求め る ス テ ッ プと を含む。
また、 好ま し い具体的な手法を示す第 4 3 の局面 と して 、 第 4 0 および第 4 2 の局面にお いて、
平滑化を行 う ステ ッ プは、
映像信号の水平高域成分のみを抽出する水平ス テ ッ プ と、
水平ス テ ッ プの出力 と縦検出ス テ ッ プの 出力 と を乗算 する水平乗算ス テ ツ プと、
映像信号か ら 水平乗算ス テ ッ プの出 力 を減算する ス テ ッ プと、
映像信号の垂直高域成分のみを抽出する垂直ス テ ッ プ と、
垂直ス テ ッ プの 出力 と横検出ス テ ッ プの出 力 と を乗算 する垂直乗算ス テ ツ プ と、
映像信号か ら 垂直乗算ス テ ッ プの出 力 を減算する ス テ ッ プと を さ ら に含み、
ブロ ッ ク ノ イ ズ量に応 じ て ブ ロ ッ ク ノ イ ズを除去する こ と を特徴 と する。 第 4 4 の局面は、 第 3 9 〜第 4 3 の局面に従属する局面 であ っ て、
縦方向 を検出する ステ ッ プおよ び横方向を検出する ステ ッ プが検出する ブロ ッ ク ノ イ ズ量に応 じ、 映像信号の輪郭 部分を強調する輪郭補正量を制御する ス テ ッ プを さ ら に含 む。
第 4 5 の局面は、 第 3 9 〜第 4 4 の局面に従属する 局面 であ っ て、
縦方向を検出する ステ ッ プおよ び横方向を検出する ステ ッ プが検出する ブロ ッ ク ノ イ ズ量に基づいて、 入力する 映 像信号の判別 を行 う ス テ ッ プを さ ら に含み、
判別 を行 う ス テ ッ ブが、 判別の結果を予め定めた形態で 画面上にオ ンス ク リ ー ンディ ス プ レイ 表示する こ と を特徵 とする。
第 4 6 の局面は、 予め定めた画像ブロ ッ ク 毎に不可逆符 号化処理が施さ れたデジタ ルの映像信号か ら、 当該映像信 号の復号化処理 に伴っ て生 じ る垂直 ま た は水平方向の プロ ッ ク ノ イ ズを検出する方法を、 コ ン ピュータ 装置上で実行 するため の プロ グラ ム を記録 し た媒体であ っ て、
映像信号の垂直または水平高域成分のみを抽出する ス テ ッ プと、
抽出 し た高域成分信号を絶対値化する ス テ ッ プと、 絶対値化後の高域成分信号を水平ま た は垂直方向 に累積 加算する ス テ ッ プと、
累積加算後の高域成分信号か ら さ ら に高域成分を抽出す る ス テ ッ プ と、 さ ら に 高域成分 を抽出す る ス テ ッ プが出 力 す る 信号 を; 予め設定 さ れた N 点 ご と に それぞれ累 積加算す る ス テ ッ プ と、
さ ら に 高域成分 を抽出す る ス テ ッ プが出 力す る 信号 を、 時間方向 に演算 し て映像信号の プ ロ ッ ク ノ ィ ズ量 を検出す る ス テ ッ プ と、
累積加算 に よ っ て求め た N個 の 累 積加算値の 中 か ら、 最 大値 と 当 該最大値の位置 と を求め る ス テ ッ プ と、
検出 し た ブ ロ ッ ク ノ イ ズ量 を最大値の位置でマ ス ク 化 し 、 当 該位置 に対応す る 垂直 ま た は水平 ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を含む動作環境 を、 コ ン ピ ュ ー タ 装置上で実 現する た め の プ ロ グ ラ ム を記録 し て い る。
第 4 7 の 局面 は、 予め定め た画像 ブ ロ ッ ク 毎 に不可逆符 号化処理が施 さ れたデジ タ ルの映像信号 を処理す る 映像処 理 シス テム にお い て、 再生する ド ッ ト ク ロ ッ ク の制御 を行 う 方法を、 コ ン ピ ュ ー タ 装置上で実行す る た め の プ ロ グ ラ ム を記録 し た媒体で あ っ て、
映像信号 を入 力 し、 当 該映像信号 に 対す る 画面上 にお け る 縦方向の ブ ロ ッ ク 境界 を検出す る ス テ ッ プ と、
水平同期パル ス に基づい て、 映像処理 シ ス テ ム で用 い る ド ッ ト ク ロ ッ ク を 生成す る ク ロ ッ ク 発 生装置 に対 し、 ス テ ッ プが検出する ブ ロ ッ ク 境界が、 周期 的 に単一の最大点 を 有する よ う に ク ロ ッ ク 遅延量 を 可変す る ス テ ッ プ と を含む 動作環境 を、 コ ン ピ ュ ー タ 装置上で実現す る た め の プ ロ グ ラ ム を記録 し て い る。
こ こ で、 好 ま し い具体的な手法 を 示す第 4 8 の 局面 と し て、 第 4 7 の局面にお いて、
検出する ステ ッ プは、
映像信号の水平高域成分のみを抽出する ス テ ッ プと、 抽出 し た高域成分信号を絶対値化する ス テ ッ プと、 絶対値化後の高域成分信号を垂直方向に累積加算する ス テ ツ プ と、
累積加算後の高域成分信号か ら さ ら に高域成分を抽出 する ステ ッ プと、
さ ら に高域成分 を抽出する ス テ ッ プが出 力する 信号を 、 予め設定 さ れた N点 ご と にそれぞれ累積加算する ス テ ツ プと を さ ら に含む。
上記の よ う に、 第 3 0 〜第 4 8 の局面は、 第 1 〜第 2 9 の局面の各装置が実現す る 各機能を実行する た め の コ ン ピ ユ ー夕 プ ロ グラ ム を記録 し た記録媒体であ る。 こ れは、 既 存の装置に対 し、 第 1 〜第 2 9 の局面を、 ソ フ ト ウェアの 形態で供給する こ と に対応さ せた も のであ る。 図面の簡単な説明
図 1 は、 本発明の第 1 の実施形態に係る ブ ロ ッ ク ノ イ ズ 検出装置 1 0 の構成 を示すブロ ッ ク 図であ る。
図 2 は、 図 1 の垂直 H P F 1 1、 水平 H P F 1 2、 絶対 値化部 1 3, 1 4、 水平累積加算部 1 5 およ び垂直累積加 算部 1 6 にお け る 動作を説明する 図であ る。
図 3 は、 図 1 の水平 ピー ク 検出部 1 8 (お よ び、 垂直 ピ ー ク検出部 1 7 ) が行 う 動作の一例 を説明する 図であ る。
図 4 は、 図 1 の 2 値化部 1 9 が行 う 動作を説明する 図で あ る。
図 5 は、 本発明の第 2 の実施形態に係る ブ ロ ッ ク ノ イ ズ 検出装置 2 0 の構成を示すブ ロ ッ ク 図であ る。
図 6 は、 図 5 の特異点除去部 2 4 が行 う 動作の一例 を説 明する 図で あ る。
図 7 は、 図 5 の B E 制御部 3 1 が行 う 動作の一例 を説明 する 図であ る。
図 8 は、 本発明の第 3 の実施形態に係る ブ ロ ッ ク ノ イ ズ 除去装置 3 0 の構成を示すブロ ッ ク 図であ る。
図 9 は、 図 8 の フ ォ ーマ ッ ト 識別回路 3 1 の構成の一例 を示すブ ロ ッ ク 図であ る。
図 1 0 は、 図 8 のブロ ッ ク ノ イ ズ除去回路 3 2 の構成の 一例 を示すブロ ッ ク 図であ る。
図 1 1 は、 図 8 の ブロ ッ ク ノ イ ズ除去回路 3 2 が行 う 平 滑化処理の一例 を説明する 図であ る。
図 1 2 は、 本発明の第 4 の実施形態に係る ブ ロ ッ ク ノ ィ ズ除去装置 4 0 の構成を示すプロ ッ ク 図であ る。
図 1 3 は、 図 1 2 の水平ブ ロ ッ ク 境界検出部 4 1 の構成 の一例 を示すブ ロ ッ ク 図であ る。
図 1 4 は、 図 1 2 の垂直ブ ロ ッ ク 境界検出部 4 2 の構成 の一例 を示すブ ロ ッ ク 図であ る。
図 1 5 は、 図 1 2 の ブ ロ ッ ク 境界平滑化部 4 4 の構成の 一例を示すプロ ッ ク 図であ る。
図 1 6 は、 図 1 2 の輪郭補正部 4 5 の構成の一例 を示す ブロ ッ ク 図であ る。
図 1 7 は、 本発明の第 5 の実施形態に係る ブ ロ ッ ク ノ ィ ズ除去装置 5 0 の構成を示すブロ ッ ク 図であ る。
図 1 8 は、 図 1 7 の水平ブロ ッ ク境界検出部 5 4 の構成 の一例 を示すブロ ッ ク 図であ る。
図 1 9 は、 図 1 7 の垂直ブロ ッ ク 境界検出部 5 5 の構成 の一例 を示すブ ロ ッ ク 図であ る。
図 2 0 は、 本発明の第 6 の実施形態に係る ド ッ ト ク ロ ッ ク検出装置 6 0 の構成を示すブロ ッ ク 図であ る。
図 2 1 は、 図 2 0 の水平ブロ ッ ク 境界検出部 6 4 の構成 の一例 を示すブロ ッ ク 図であ る。
図 2 2 は、 図 2 0 の水平ブロ ッ ク 境界検出部 6 4 が出力 する水平ブ ロ ッ ク ノ イ ズの累積加算結果の一例 を示す図で あ る。
図 2 3 は、 映像信号 6 0 1 と ク ロ ッ ク ( C K ) と の関係 を説明する 図であ る。
図 2 4 は、 従来の手法にお ける ブ ロ ッ ク ノ イ ズ除去の概 念を説明す る 図であ る。 発明 を実施する ため の最 良 の形態
以下、 本発明 にお ける ブロ ッ ク ノ イ ズ検出装置およびブ ロ ッ ク ノ イ ズ除去装置を、 各機能ブ ロ ッ ク ごと に順に説明 する。
(第 1 の実施形態)
図 1 は、 本発明の第 1 の実施形態に係る ブ ロ ッ ク ノ イ ズ 検出装置の構成 を示すブ ロ ッ ク 図であ る。 図 1 にお いて、 第 1 の実施形態に係 る ブ ロ ッ ク ノ イ ズ検出装置 1 0 は、 垂 直ハイ パ ス フ ィ ル夕 (以下、 垂直 H P F と 記す) 1 1 と、 水平八イ ノ° ス フ ィ ル夕 (以下、 水平 H P F と記す) 1 2 と 、 絶対値化部 1 3 および 1 4 と、 水平累積加算部 1 5 と、 垂直累積加算部 1 6 と、 垂直 ピー ク検出部 1 7 と、 水平 ピ — ク検出部 1 8 と、 2 値化部 1 9 と を備え る。
図 2 は、 図 1 の垂直 H P F 1 1 , 水平 H P F 1 2、 絶対 値化部 1 3, 1 4、 水平累積加算部 1 5 およ び垂直累積加 算部 1 6 にお け る動作を説明する 図であ る。
図 3 は、 図 1 の水平 ピー ク 検出部 1 8 (およ び、 垂直 ピ — ク検出部 1 7 ) が行 う 動作の一例 を説明する 図であ る。 なお、 図 3 ( a ) は、 垂直累積加算部 1 6 が出 力する水平 1 次元信号 1 1 5 を、 図 3 ( b ) は、 水平 ピー ク検出部 1 8 が出力する 水平 ピー ク 位置 1 2 2 を表 して い る。
図 4 は、 図 1 の 2 値化部 1 9 が行 う 動作を説明する 図で あ る。 なお、 図 4 ( a ) は , 水平 ピー ク 位置 1 2 2 および 水平 2 値画像 1 2 4 を、 図 4 ( b ) は、 垂直 ピー ク 位置 1 2 3 およ び垂直 2 値画像 1 2 5 を , 図 4 ( c ) は、 2 値化 部 1 9 が出力する ブ ロ ッ ク 境界画像 1 0 3 を表 し て い る。
以下 図 1 〜図 4 を参照 し て、 本発明の第 1 の実施形態 に係る ブロ ッ ク ノ イ ズ検出 0 が行 う 動作 を順に説明 する。
映像信号は、 一般に、 水平 Z垂直ノ時間の 3 次元で構成 さ れた動画像デ一夕 を 1 次元に配置 し た信号で あ る。 本発 明 にお け る 映像信号 1 0 1 は、 上記映像信号に基づいて得 ら れる 1 フ レ —ム時間単位の水平方向 z垂直方向 に関す る 2 次元映像信号であ る 1 フ レーム画像 1 1 2 で あ り、 一 定 レー 卜 で送 ら れる 信号で あ る。 こ の 1 フ レー ム画像 1 1 2 は、 図 2 に示すよ う に、 各ブロ ッ ク 画像 1 1 3 が水平… 垂直方向 に一様に配置さ れて構成さ れてお り、 双方向にそ れぞれブ ロ ッ ク ノ イ ズ 1 1 4 を含んでい る。 ま た、 ブロ ッ ク ノ イ ズ 1 1 4 は、 図 2 に示すよ う に水平お よ び垂直方向 に対 し て周期的に出現する。 こ の映像信号 1 0 1 は、 垂直 H P F 1 1 およ び水平 H P F 1 2 にそれぞれ入力 さ れる。
垂直 H P F 1 1 は、 映像信号 1 0 1 を入力 し、 垂直方向 に関 して高域成分のみを抽出する。 絶対値化部 1 3 は、 垂 直 H P F 1 1 が出力する 信号を入力 し、 絶対値を取っ て正 の値に変換する。 水平累積加算部 1 5 は、 絶対値化部 1 3 が出力する 信号を入力 し、 累積加算 して垂直周期的 に ピー ク 値を持っ た垂直 1 次元信号 1 1 6 を出力する。 一方、 水 平 H P F 1 2 は、 映像信号 1 0 1 を入力 し、 水平方向に関 して高域成分のみを抽出する。 絶対値化部 1 4 は、 水平 H P F 1 2 が出力する信号を入力 し、 絶対値を取っ て正の値 に変換する。 垂直累積加算部 1 6 は、 絶対値化部 1 4 が出 力する 信号を入力 し、 累積加算 し て水平周期的 に ピー ク 値 を持っ た水平 1 次元信号 1 1 5 を 出力する。
水平 ピー ク検出部 1 8 は、 垂直累積加算部 1 6 が出力す る水平 1 次元信号 1 1 5 に基づいて、 水平 ピー ク 位置を検 出する。 こ の水平 ピー ク 検出部 1 8 が行 う 水平 ピー ク 位置 検出動作の一例 を、 図 3 を用 いて説明する。
まず、 水平 ピー ク 検出部 1 8 は、 水平 1 次元信号 1 1 5 か ら ブロ ッ ク境界が 3 箇所含 まれる任意の画素範囲 (例え ば、 ブ ロ ッ ク サイ ズが 8 の場合は、 3 0 画素程度) の検出 領域 1 1 9 を選択す る (図 3 ( a ) ) 。 次に、 水平 ピー ク 検出部 1 8 は、 選択 し た検出領域 1 1 9 内の累積加算 レべ ルの大き い上位 3 つのデー タ を ピー ク位置 と し て検出する 。 こ の検出 した ピー ク 位置の差力 水平方向の ブ ロ ッ クサ ィ ズとな る。 以下、 水平 ピー ク検出部 1 8 は、 水平方向の ブロ ッ ク サイ ズ間隔で検出領域 1 1 9 を水平方向 に対 して 左右に移動 してそれぞれの ピー ク 位置を検出 し、 図 3 ( b ) に示すよ う な水平 ピー ク .位置 1 2 2 を求め る。
垂直 ピー ク検出部 1 7 は、 水平累積加算部 1 5 が出力す る垂直 1 次元信号 1 1 6 に基づいて、 垂直 ピー ク 位置を検 出する。 なお、 こ の垂直 ピー ク検出部 1 7 が行 う 垂直 ピ一 ク 位置検出動作は、 上述 し た水平 ピー ク検出部 1 8 が行 う 水平 ピー ク 位置検出動作 と 同様で あ り、 その説明 を省略す る。 垂直 ピー ク 検出部 1 7 は、 図 4 ( b ) に示すよ う な垂 直 ピー ク 位置 1 2 3 を求め る。
と こ ろ で、 映像信号 1 0 1 の フ ォ ーマ ツ 卜 がイ ン タ レ一 ス方式であ る場合、 水平累積加算部 1 5 が出 力する垂直 1 次元信号 1 1 6 の ピー ク 位置力 偶数 フ ィ ー ル ド と奇数フ ィ ール ド と で異な る場合が発生する。 こ の場合、 偶数フ ィ 一ル ド と奇数フ ィ ール ド と を 区別せずに、 垂直 ピー ク検出 部 1 7 が上述 し た ピー ク 位置検出 を行 う と、 正確な垂直 ピ ー ク位置 1 2 3 を求め る こ と ができな い。 そのため、 垂直 ピー ク検出部 1 7 は、 外部か ら 映像信号 1 0 1 に関する フ ォ ーマ ッ ト 識別信号 1 0 2 を入力 し、 フ ォ ーマ ッ ト がイ ン 夕 レース方式で あ る と判断 し た場合 には、 偶数 フ ィ ール ド および奇数 フ ィ ール ド の各々 に関 し、 個別に ピ ー ク 位置検 出 を行っ て各 フ ィ ール ド に対する垂直 ピー ク 位置 1 2 3 を それぞれ求め る。
2 値化部 1 9 は、 水平 ピー ク 検 出部 1 8 が出 力す る 水平 ピー ク 位置 1 2 2 と、 垂直 ピー ク 検出部 1 7 が出 力す る 垂 直 ピー ク 位置 1 2 3 と を 入力す る。 2 値化部 1 9 は、 水平 ピー ク 位置 1 2 2 に従っ て ピー ク が存在す る 画素位置 に論 理値 「 1 」 を、 それ以外 の画素位置 に論理値 「 0 」 を与え 、 1 フ レ ー ム画像 1 1 2 と 同一サイ ズの水平 2 値画像 1 2 4 を生成す る ( 図 4 ( a ) ) 。 ま た、 2 値化部 1 9 は、 垂 直 ピー ク 位置 1 2 3 に従 っ て ピー ク が存在す る 画素位置に 論理値 「 1 」 を、 それ以外 の画素位置 に論理値 「 0 」 を与 え、 1 フ レ ー ム 画像 1 1 2 と 同一サイ ズの垂直 2 値画像 1 2 5 を 生成す る (図 4 ( b ) ) 。 そ し て、 2 値化部 1 9 は 、 水平 2 値画像 1 2 4 と 垂直 2 値画像 1 2 5 と の論理和 を と っ て、 ブ ロ ッ ク 境界画像 1 0 3 を求め る (図 4 ( c ) ) こ の ブ ロ ッ ク 境界画像 1 0 3 で論理値 「 1 」 の部分がブ ロ ッ ク 境界部分で あ り、 すな わ ち、 ブ ロ ッ ク ノ イ ズ 1 1 4 が発生す る 箇所で あ る。
以上の よ う に、 本発明 の第 1 の 実施形態 に係 る ブ ロ ッ ク ノ イ ズ検出装置 1 0 に よ れば、 複数 の ブ ロ ッ ク に領域分割 さ れる画像の ブ ロ ッ ク 境界 ( ブ ロ ッ ク 境界画像 1 0 3 ) を 正確 に検出す る こ と がで き る。 ま た、 イ ン 夕 レ ー ス 方式の フ ォ ーマ ツ 卜 の 映像信号 1 0 1 に 対 し て も、 ブ ロ ッ ク 画像 1 1 3 の周 期性 を損な う こ と な く、 ブ ロ ッ ク ノ イ ズ 1 1 4 の正確な検 出 が可能 と な る。
(第 2 の実施形態) 図 5 は、 本発明の第 2 の実施形態に係る ブ ロ ッ ク ノ イ ズ 検出装置の構成を示すブ ロ ッ ク 図であ る。 図 5 にお いて、 第 2 の実施形態に係 る ブ ロ ッ ク ノ イ ズ検出装置 2 0 は、 垂 直 H P F 1 1 と、 水平 H P F 1 2 と、 絶対値化部 1 3 およ び 1 4 と、 水平累積加算部 1 5 と、 垂直累積加算部 1 6 と 、 垂直 ピー ク検出部 1 7 と、 水平 ピー ク 検出部 1 8 と、 2 値化部 1 9 と、 フ レーム差分部 2 1 と、 フ レーム メ モ リ 2 2 と、 2 値化部 2 3 と、 特異点除去部 2 4 と、 ブロ ッ ク ェ ッ ジ制御部 (以下、 B E 制御部 と記す) 2 5 と を備え る。
なお、 第 2 の実施形態に係る ブロ ッ ク ノ イ ズ検出装置 2 0 にお ける垂直 H P F 1 1 , 水平 H P F 1 2 , 絶対値化部 1 3 およ び 1 4, 水平累積加算部 1 5, 垂直累積加算部 1 6, 垂直 ピー ク検出部 1 7 , 水平 ピー ク検出部 1 8, 2 値 化部 1 9 の構成は、 上記第 1 の実施形態に係 る ブロ ッ ク ノ ィ ズ検出装置 1 0 の構成 と 同様であ り、 当該構成につ いて は同一の参照番号を付 し て説明を省略する。
図 6 は、 図 5 の特異点除去部 2 4 が行 う 動作の一例 を説 明する 図であ る。 なお、 図 6 ( a ) は、 2 値化部 2 3 が出 力する特異点除去処理 を行 う 前の画像 2 3 3 を、 図 6 ( b ) は、 特異点除去部 2 4 が出力する特異点除去処理 を行つ た後の画像 2 3 4 を表 し て い る。
図 7 は、 図 5 の B E 制御部 3 1 が行 う 動作の一例 を説明 する 図であ る。 なお、 図 8 ( a ) は、 2 値ィ匕部 1 9 が出力 する ブ ロ ッ ク 境界画像 1 0 3 を、 図 8 ( b ) は、 特異点除 去部 2 4 が出力する 特異点除去後の画像 2 3 4 を、 図 8 ( c ) は、 B E 制御 を行 っ た後の画像 2 3 5 を表 し て い る。 以下、 図 5 〜図 7 を参照 し て、 本発明の第 2 の実施形-態 に係る ブロ ッ ク ノ イ ズ検出装置 2 0 が行 う 動作を順に説明 する。
映像信号 1 0 1 は、 フ レーム差分部 2 1 に入力 さ れる。 まず、 フ レーム差分部 2 1 は、 入力 さ れる 映像信号 1 0 1 に対 し、 フ レーム メ モ リ 2 2 に記憶 し た 1 フ レーム前の映 像信号 1 0 1 と の信号 レベル差を、 差分値と し て算出する 。 なお、 フ レーム差分部 2 1 は、 初期状態にお いては (ブ ロ ッ ク ノ イ ズ検出装置 2 0 の起動後等の フ レーム メ モ リ 2 2 に何 も記憶 し ていな い状態) 、 フ レーム メ モ リ 2 2 への 記憶だけを行う。 次に、 フ レーム差分部 2 1 は、 算出 した 差分値が予め定めた し き い値以上であ る か否か を判断 し、 し き い値以上の差分値のみを 2 値化部 2 3 へ出力する。 従 つ て、 こ の フ レーム差分部 2 1 の処理によ り、 映像信号 1 0 1 の 中で動き の多い シー ン部分のみが出力 さ れる こ と と な る。 なお、 上記 し き い値の レベルは、 所望する 画像品質 に基づいて、 任意に設定す る こ と ができ る。
そ し て、 2 値化部 2 3 への差分値の出力が終わ る と、 フ レーム差分部 2 1 は、 現在 フ レーム の映像信号 1 0 1 を フ レーム メ モ リ 2 2 に記憶する。 以後、 フ レーム差分部 2 1 は、 次の フ レームが入力 さ れる ご と に、 上述 し た処理 を繰 り 返す。
2 値化部 2 3 は、 フ レー ム差分部 2 1 が出 力する差分値 を入力する。 そ して、 2 値化部 2 3 は、 1 フ レーム画像 1 1 2 の中で差分値が存在す る 画素位置 (特異点) を論理値 「 1 」 に、 差分値が存在 し な い画素位置を論理値 「 0 」 に 、 2 値化する。 これによ り、 図 6 ( a ) に示す特異点除去 前の画像 2 3 3 が得 ら れる。 なお、 図 6 ( a ) 中、 網掛け 部分が論理値 「 1 」 の画素位置に あたる。
特異点除去部 2 4 は、 2 値化部 2 3 か ら特異点除去前の 画像 2 3 3 (図 6 ( a ) ) を、 2 値化部 1 9 カゝ ら ブロ ッ ク サイ ズを入力する。 そ し て、 特異点除去部 2 4 は、 特異点 除去前の画像 2 3 3 の内、 1 ブロ ッ ク サイ ズ (図 6 中、 波 線で示す領域) 以下の細か い領域に分布する 論理値 「 1 」 のデー夕 を除去する。 こ れによ り、 図 6 ( b ) に示す特異 点除去後の画像 2 3 4 力 得 ら れる。
こ のよ う な特異点デ一 夕 の除去を行 う のは、 次の理由 に よ る。 特異点除去前の画像 2 3 3 の細か い領域は、 後段の 処理で行 う ノ ィ ズ除去を行っ て も除去効果が現れに く く、 逆に ノ ィ ズ除去によ っ てデータ を平滑化 して し ま い、 画像 を ぼか して し ま う。 従っ て、 これ ら の細か い領域を特異点 と して除去する 方が、 よ り 高画質 を得 ら れる か ら であ る。
こ の特異点除去部 2 4 によ り、 フ レーム差分処理の効果 を高める こ とが可能 と な り、 同時 にデータ 量を 削減する こ と も可能 と なる
B E 制御部 2 5 は、 2 値化部 1 9 が出力する ブロ ッ ク境 界画像 1 0 3 (図 7 ( a ) ) と、 特異点除去部 2 4 が出力 する特異点除去後の画像 2 3 4 (図 7 ( b ) ) と を入力す る。 そ して、 B E 制御部 2 5 は、 各画素 ごと に、 ブロ ッ ク 境界画像 1 0 3 と特異点除去後の画像 2 3 4 と の論理積を と る。 こ う して得た画像力 図 7 ( c ) の B E 制御画像 2 3 5 であ り、 こ の B E 制御画像 2 3 5 内の各画素値がブ ロ ッ ク エ ッ ジ信号 (以下、 B E 信号 と 記す) 2 0 3 で あ る。 従 っ て、 B E 信号 2 0 3 は、 ブ ロ ッ ク 境界で あ っ て、 かつ 、 ブ ロ ッ ク ノ イ ズ レベル の高 い と レ う 情報 を 含 ん だ信号 と な る。
以上の よ う に、 本発明 の第 2 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ検出 装置 2 0 に よ れば、 上記第 1 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ検出装置 1 0 よ り も、 さ ら に細カゝ く ブ ロ ッ ク ノ イ ズを含ん だ画像の動き の大 き さ と の相 関 に よ っ てブ
4
ロ ッ ク 境界 ( ブ ロ ッ ク 境界画 3像 1 0 3 ) の分類が可能 と な る。 こ の結果、 映像 シー ン に あ っ た、 ブ ロ ッ ク ノ イ ズの大 き い部分の み を ブ ロ ッ ク 境界 と し て検出す る こ と がで き る
(第 3 の実施形態)
図 8 は、 本発 明 の第 3 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ 除去装置の構成 を示すブ ロ ッ ク 図 で あ る。 図 8 にお いて、 第 3 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 3 0 は、 フ ォ ーマ ツ ト 識別 回路 3 1 と、 ブ ロ ッ ク ノ イ ズ検 出 装置 2 0 と、 ブ ロ ッ ク ノ イ ズ除去回路 3 2 と を備え る。
なお、 第 3 の 実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 3 0 にお け る ブ ロ ッ ク ノ イ ズ検出装置 2 0 の構成 は、 上記第 2 の実施形態 に 係 る ブ ロ ッ ク ノ イ ズ検出装置 2 0 の構成 と 同様であ り、 当 該構成に つ い て は 同一の参照番号 を付 し て 説明 を省略す る。
図 9 は、 図 8 の フ ォ ー マ ッ ト 識別 回路 3 1 の構成の一例 を示すブ ロ ッ ク 図で あ る。 図 9 に お い て、 フ ォ ー マ ッ ト 識 別回路 3 1 は、 倍速 H パ ルス 生成部 3 1 1 と、 ビ ッ ト カ ウ ン タ 3 1 2 と を備え る。
図 1 0 は、 図 8 の ブ ロ ッ ク ノ イ ズ除去回路 3 2 の構成の 一例 を示す ブ ロ ッ ク 図 で あ る。 図 1 0 に お い て、 ブ ロ ッ ク ノ イ ズ除去回路 3 2 は、 平滑化処理部 3 2 1 と、 セ レ ク タ 3 2 2 と を備え る。
図 1 1 は、 図 8 の ブ ロ ッ ク ノ イ ズ除去回路 3 2 が行 う 平 滑化処理 の 一例 を説明す る 図であ る。 なお、 図 1 1 ( a ) は、 平滑化処理 ( ブ ロ ッ ク ノ イ ズ除去) 前、 図 1 1 ( b ) は、 平滑化処理後の状態 を表 し て い る。
以下、 図 8 〜 図 1 1 を参照 し て、 本発明 の第 3 の実施形 態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 3 0 が行 う 動作 を順に説 明す る。
ブ ロ ッ ク ノ イ ズ検出装置 2 0 は、 入力 す る 映像信号 1 0 1 力、 ら 上述 し た よ う に B E 信号 2 0 3 を 出 力 す る。 こ こ で 、 ブ ロ ッ ク ノ イ ズ検出装置 2 0 に 入力 さ れ る 映像信号 1 0 1 と し て は、 輝度信号 ( Y 信号) が最 も 好 ま し い。 こ の Y 信 号は、 例 え ば、 赤, 緑, 青 ( R G B ) で構成 さ れたデコ ー ド 映像信号を、 マ ト リ ク ス 回路 を 用 い て輝度 ' 色差で構 成 さ れた Y U V 信号 に変換 し、 そ の う ち Y 信号の み を抽出 すれば得る こ と がで き る (周知 の 技術で あ る ) 。
図 9 を参照 し て、 フ ォ ー マ ッ ト 識別 回路 3 1 は、 テ レ ビ 信号の 内、 水平方向 の 同期パル ス (以下、 H パルス と 記す ) 3 0 1 と、 垂直方向 の 同期パ ル ス (以下、 V パル ス と 記 す) 3 0 2 と を 入 力 す る。 倍速 H パ ル ス 生成部 3 1 1 は、 H ノ ルス 3 0 1 を 入 力 し、 H /\° ル ス 3 0 1 の 2 倍の 周波数 を 持つ倍速 H パ ル ス を 生成す る。 ビ ッ ト カ ウ ン 夕 3 1 2 は 、 倍速 H パルス 生成部 3 1 1 が出 力す る 倍速 H ノ、" ル ス と V パ ルス 3 0 2 と を入力 し、 V パ レス 3 0 2 を リ セ ッ 卜 信号 に用 い て、 倍速 Hパル ス の発生回数 を カ ウ ン ト す る。 すな わ ち , ビ ッ 卜 カ ウ ン 夕 3 1 2 は、 V パル ス 3 0 2 が発生す る 周期 ( V 期間) で倍速 H パルス を 力 ゥ ン ト す る。 そ し て 、 ビ ッ 卜 カ ゥ ン 夕 3 1 2 は、 V期 間 ご と に カ ウ ン ト し た値 の最下位 ビ ッ 卜 ¾:、 フ ォ ー ッ ト 識別信号 1 0 2 と し て ブ Π ッ ク ノ ィ ズ検出装置 2 0 へ出 力 する,
の よ う に し て、 フ ォ ー マ ッ ト 識別信号 1 0 2 を 生成す る こ と がで き る の は、 以下 の理 由 に よ る。
本来、 ィ ン 夕 レー ス 方式で は、 V期 間 中 の ラ イ ン数が 2 6 2 5 本存在する。 こ の た め、 イ ン 夕 レ ー ス 方式の場合 、 ビ ッ 卜 カ ゥ ン 夕 3 1 2 は、 倍速 H パルス を 用 い て 2 倍の
5 2 5 回 の カ ウ ン 卜 を行 う こ と に な る, , 一方 . プ 口 フ レ ツ シ ブ方式で は、 V期 間 中 の ラ ィ ン数が 2 6 2 本 め る い は 2
6 3 本存在する。 こ の た め、 プ ロ グ レ ッ シ フ 方式の場合、 ビ ッ 卜 カ ウ ン 夕 3 1 2 は、 倍速 H パルス を 用 い て 2 倍の 5 2 4 回 あ る い は 5 2 6 回 の 力 ゥ ン 卜 を行 う こ と に な る。 従 つ て , ビ ッ 卜 カ ウ ン 夕 3 1 2 が V 期間 ご と に カ ウ ン 卜 し た 値の最下位 ビ ッ 卜 の偶奇判定 を行 う こ と で、 奇数 (すなわ ち 「 5 」 ) だ と イ ン 夕 レ ー ス 方式 と、 偶数 ( すな わ ち 「 4 」 か 「 6 」 ) だ と プ ロ ク レ ツ シ ブ方式 と 識別 で き る の であ る。
なお、 具体的 に は、 ビ ッ 卜 カ ウ ン タ 5 0 が 出 力 す る フ ォ 一マ ッ ト 識別信号 1 0 2 は、 論理値 「 1 」 ( イ ン 夕 レ ー ス 方式 ) お よ び論理値 「 0 」 ( プ ロ グ レ ッ シ ブ方式) を示す バイ ナ リ 信号で 出 力 さ れる。
図 1 0 を 参照 し て、 ブ ロ ッ ク ノ イ ズ除去回路 3 2 は、 映 像信号 1 0 1 と、 ブ ロ ッ ク ノ イ ズ検出装置 2 0 が出 力 す る B E 信号 2 0 3 と を入力す る。 平滑化処理部 3 2 1 は、 映 像信号 1 0 1 を 入力 し、 信号の平滑化 を行 う。 セ レ ク タ 3 2 2 は、 平滑化処理部 3 2 1 が出 力 す る 平滑化処理後の映 像信号 と、 入力 さ れる そ の ま ま の映像信号 1 0 1 と、 B E 信号 2 0 3 と を 入力す る。 そ し て、 セ レ ク タ 3 2 2 は、 B E 信号 2 0 3 が ( ブ ロ ッ ク ノ 4 6イ ズが存在する ) 論理値 「 1 」 であ る 画素 に つ い て は、 平滑化処理 し た信号 を選択 し、 B E 信号 2 0 3 力 S ( ブ ロ ッ ク ノ イ ズが存在 し な い ) 論理値 「 0 」 で あ る 画素 につ いて は、 平滑化 し な い 映像信号 1 0 1 その も の を選択 し て出 力 す る。 こ の よ う に、 本発明 の ブ ロ ッ ク ノ イ ズ除去回路 3 2 は、 B E 信号 2 0 3 を用 いて、 ブ ロ ッ ク ノ イ ズ を軽減す る と 同時 に 映像信号の エ ッ ジ を も ぼけ さ せて し ま う 平滑化処理 を、 ブ ロ ッ ク ノ イ ズが存在す る ブ ロ ッ ク 境界 だけで行 う。
こ のセ レ ク タ 3 2 2 が選択 し て 出 力 し た信号 は、 ブ ロ ッ ク ノ イ ズ除去信号 3 0 3 と し て 出 力 さ れる。
図 1 1 に、 平滑化処理部 3 2 1 が行 う 平滑化 の一例 を示 す。 なお、 図 1 1 に お い て は、 タ ッ プ数が 「 3 」 で、 重み がそれぞれ 1 Z 3 , 1 / 3 , 1 Z 3 の 口 一ノ \° ス フ ィ ル 夕 ( 以下、 L P F と 記す) で の平滑化 を示 し て い る。
図 1 1 ( a ) にお い て、 B E 信号 の 論理値 「 1 」 で あ る ブ ロ ッ ク 境界 を 平滑化す る 場合 に は、 隣接す る ブ ロ ッ ク A の右端の 画素 a と ブ ロ ッ ク B の 左端の画素 b の 2 画素が抽 出 さ れ、 平滑化 さ れる。 こ の結果、 図 1 1 ( b ) に示すよ う に、 ブ ロ ッ ク 境界部分で の画素 の格差 を な く す こ と が可 能 と な る。 なお、 平滑化 の効果を 強 く 出す場合、 平滑化処 理部 3 2 1 にお いて抽出す る 画素 を 2 画素以上 に設定 し た り、 L P F の タ ッ プ数 を 多 く する と 平滑化の効果が向上す る。
なお、 セ レ ク タ 3 2 2 が出 力す る ブ ロ ッ ク ノ イ ズ除去信 号 3 0 3 が Y 信号で あ る 場合 は、 上述 し た マ ト リ ク ス 回路 で変換 し た U V 信号 と と も に、 逆マ ト リ ク ス 回路 を用 い て R G B 信号 に戻す こ と で、 ブ ロ ッ ク ノ イ ズ を 除去 し た 出力 映像信号 を 得 る こ と がで き る (周知の技術で あ る ) 。
以上 の よ う に、 本発明 の第 3 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 3 0 に よ れば、 上記第 2 の実施形態で検出 し た B E 信号 2 0 3 を ブ ロ ッ ク ノ イ ズ除去 に使用 する こ と に よ り、 映像 シ ー ン に付随 し た ブ ロ ッ ク ノ イ ズ を効果的 に 除去す る こ と がで き る。
なお、 上記第 3 の実施形態 にお い て は、 ブ ロ ッ ク ノ イ ズ 除去装置 3 0 を構成す る ブ ロ ッ ク ノ イ ズ検 出装置 と し て、 上記第 2 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ検出装置 2 0 を 用 いたが、 こ れ に 代え て上記第 1 の実施形態 に 係 る プ ロ ッ ク ノ イ ズ検出装置 1 0 を用 い る こ と も 勿論可能で あ る。
(第 4 の実施形態)
図 1 2 は、 本発明 の第 4 の実施形態 に 係 る ブ ロ ッ ク ノ ィ ズ除去装置の構成 を 示すブ ロ ッ ク 図 で あ る。 図 1 2 にお い て、 第 4 の実施形態 に 係 る ブ ロ ッ ク ノ イ ズ除去装置 4 0 は 、 水平 ブ ロ ッ ク 境界検出 部 4 1 と、 垂直 ブ ロ ッ ク 境界検出 部 4 2 と、 ブロ ッ ク エ リ ア検出部 4 3 と、 ブ ロ ッ ク 境界平 滑化部 4 4 と、 輪郭補正部 4 5 と を備え る。
図 1 3 は、 図 1 2 の水平ブロ ッ ク 境界検出部 4 1 の さ ら に詳細な構成を示すブロ ッ ク 図であ る。 図 1 3 にお いて、 水平ブ ロ ッ ク境界検出部 4 1 は、 水平 H P F 4 1 1 と、 絶 対値化部 4 1 2 と、 垂直累積加算部 4 1 3 と、 ハイ パス フ ィ ル夕 (以下、 H P F と記す ) 4 1 4 と、 テ ンポ ラ ルフ ィ ル夕 4 1 5 と、 N点累積加算部 4 1 6 と、 マス ク 化部 4 1 7 と、 最大値検出部 4 1 8 と を備え る。
図 1 4 は、 図 1 2 の垂直ブ ロ ッ ク 境界検出部 4 2 の さ ら に詳細な構成を示すブ ロ ッ ク 図であ る。 図 1 4 にお いて、 垂直ブ ロ ッ ク境界検出部 4 2 は、 垂直 H P F 4 2 1 と、 絶 対値化部 4 2 2 と、 水平累積加算部 4 2 3 と、 H P F 4 2 4 と、 テ ンポ ラルフ ィ ル夕 4 2 5 と、 N点累積加算部 4 2 6 と、 マス ク 化部 4 2 7 と、 最大値検出部 4 2 8 と を備え る。
図 1 5 は、 図 1 2 の ブ ロ ッ ク境界平滑化部 4 4 の さ ら に 詳細な構成 を示すブロ ッ ク 図であ る。 図 1 5 にお いて、 ブ ロ ッ ク 境界平滑化部 4 4 は、 水平 H P F 4 4 1 と、 垂直 H P F 4 4 2 と、 乗算部 4 4 3, 4 4 4 と、 減算部 4 4 5, 4 4 6 と を備え る。
図 1 6 は、 図 1 2 の輪郭補正部 4 5 の さ ら に詳細な構成 を示すブ ロ ッ ク 図であ る。 図 1 6 にお いて、 輪郭補正部 4 5 は、 水平 H P F 4 5 1 と、 垂直 H P F 4 5 2 と、 減算部 4 5 3 , 4 5 4 と、 乗算部 4 5 5 , 4 5 6 と、 力 []算部 4 5 7, 4 5 8 と を備え る。 以下、 図 1 2 〜図 1 6 を参照 し て、 本発明 の第 4 の実-施 形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 4 0 が行 う 動作 を順に 説明す る。
水平ブ ロ ッ ク 境界検出 部 4 1 は、 水平方向 の ブ ロ ッ ク ノ ィ ズ レ ベルお よ びプ ロ ッ ク 境界 を検出す る。
図 1 3 に お い て、 水平 H P F 4 1 1 は、 映像信号 1 0 1 を入力 し、 水平方向 に 関 し て高域成分のみ を抽 出す る。 絶 対値化部 4 1 2 は、 水平 H P F 4 1 1 が出 力 す る 信号 を入 力 し、 絶対値 を取 っ て正 の値 に変換す る。 垂直累積加算部 4 1 3 は、 絶対値化部 4 1 2 が出 力 す る 信号 を 入力 し、 累 積加算 し て水平周期 的 に ピ ー ク 値 を 持 っ た水平 1 次元信号 1 1 5 を 出 力す る ( 図 2 を参照) 。 H P F 4 1 4 は、 垂直 累積加算部 4 1 3 が出 力 す る 信号の精度 を さ ら に上 げる 目 的で再び高域成分 を抽 出 し、 水平 ブ ロ ッ ク ノ イ ズ レベル を 検出す る。 テ ン ポ ラ リレ フ イ リレタ 4 1 5 は、 H P F 4 1 4 が 出 力す る 水平ブ ロ ッ ク ノ イ ズ レベル を、 時間方向 に 引 き 延 ばす処理 を行 う。 N 点累 積加算部 4 1 6 は、 予 め設定 さ れ た N点 ( N は、 ブ ロ ッ ク の画素数) ご と の ノ イ ズ、 すなわ ち、 各 ブ ロ ッ ク の 同 一画素位置 に あ る ノ イ ズの 累積加算 を 求め、 それぞれ出 力 す る。 最大値検出部 4 1 8 は、 水平方 向 の N点 の最大値 と ブ ロ ッ ク 境界 と を求め る。 こ こ で、 最 大値検出部 4 1 8 は、 例 え ば、 M P E G 2 方式 にお け る 8 (画素) X 8 ( ラ イ ン ) の 周期で 出現す る ブ ロ ッ ク ノ イ ズ の場合、 N点累 積加算部 4 1 6 の N 値 を 「 8 」 に し て、 水 平 ブ ロ ッ ク 境界 を 求め る。 マ ス ク ィヒ部 4 1 7 は、 テ ン ポ ラ ル フ ィ ル 夕 4 1 5 力 出 力 す る 水平 ブ ロ ッ ク ノ イ ズ レ ベル に 対 し、 最大値検出部 4 1 8 で求め ら れた水平ブ ロ ッ ク 境界 でマス ク 処理を行い、 当 該水平ブ ロ ッ ク 境界に存在する水 平ブロ ッ ク ノ イ ズ レベルだけを出力する。
なお、 水平ブロ ッ ク ノ イ ズ検出 の精度を上げる ため に、 水平 H P F 4 1 1 または絶対値化部 4 1 2 の 出 力信号に、 小振幅信号のみを通過 さ せる コ ア リ ン グ装置 を挿入 して も よ い。
垂直ブロ ッ ク 境界検出部 4 2 は、 水平ブ ロ ッ ク 境界検出 部 4 1 と 同様に、 垂直方向のブロ ッ ク ノ イ ズ レベルおよび ブロ ッ ク 境界を検出する。
図 1 4 にお いて、 水平 H P F 4 2 1 は、 映像信号 1 0 1 を入力 し、 垂直方向 に関 し て高域成分のみを抽出する。 絶 対値化部 4 2 2 は、 垂直 H P F 4 2 1 が出力す る信号を入 力 し、 絶対値を取っ て正の値に変換する。 水平累積加算部 4 2 3 は、 絶対値化部 4 2 2 が出 力する信号 を入力 し、 累 積加算 して垂直周期的に ピー ク 値を持っ た垂直 1 次元信号 1 1 6 を 出 力する (図 2 を参照) 。 H P F 4 2 4 は、 水平 累積加算部 4 2 3 が出力する信号の精度を さ ら に上げる 目 的で再び高域成分を抽出 し、 垂直ブ ロ ッ ク ノ イ ズ レベルを 検出する。 テ ンポ ラ ル フ ィ ル夕 4 2 5 は、 H P F 4 2 4 が 出力する垂直ブ ロ ッ ク ノ イ ズ レベル を、 時間方向 に 引 き延 ばす処理 を行 う。 N点累積加算部 4 2 6 は、 予め設定さ れ た N点 ご と の ノ イ ズの累積加算を求め、 それぞれ出 力する 。 累積加算 を求め る。 最大値検出部 4 2 8 は、 垂直方向の N点の最大値 と ブ ロ ッ ク 境界 と を求め る。 こ こ で、 最大値 検出部 4 2 8 は、 例え ば、 同様に M P E G 2 方式にお ける 8 X 8 の 周 期で出現す る ブ ロ ッ ク ノ イ ズの場合、 N 点累積 加算部 4 2 6 の N値を 「 8 」 に し て、 垂直 ブ ロ ッ ク 境界を 求め る。 マ ス ク 化部 4 2 7 は、 テ ン ポ ラ ル フ ィ ルタ 4 2 5 が出 力 す る 垂直 ブ ロ ッ ク ノ イ ズ レ ベ ル に対 し、 最大値検出 部 4 2 8 で求め ら れた垂直 ブ ロ ッ ク 境界でマ ス ク 処理 を行 い、 当 該垂直 ブ ロ ッ ク 境界 に存在す る 垂直 ブ ロ ッ ク ノ イ ズ レベルだ け を 出 力する。
なお、 上記 と 同様 に、 垂直 ブ ロ ッ ク ノ イ ズ検出 の精度 を 上 げる た め に、 垂直 H P F 4 2 1 ま た は絶対値化部 4 2 2 の 出 力 信号 に、 小振幅信号の み を通過 さ せ る コ ア リ ン グ装 置 を挿入 し て も よ い。
ブ ロ ッ ク エ リ ア検出部 4 3 は、 水平 ブ ロ ッ ク 境界検出部 4 1 お よ び垂直 ブ ロ ッ ク 境界検出部 4 2 が出 力 す る 水平 Z 垂直方向 の ブ ロ ッ ク ノ イ ズ レ ベル、 N 点 ブ ロ ッ ク ノ イ ズ レ ベルお よ びプ ロ ッ ク 境界の各信号か ら、 画面全体の どの位 置 に ど の程度の ブ ロ ッ ク ノ イ ズが出現 し て い る か を検出す る。
ブ ロ ッ ク 境界平滑化部 4 4 は、 ブ ロ ッ ク エ リ ア検出部 4 3 か ら 出 力 さ れ る 水平 Z垂直方向 の ブ ロ ッ ク ノ イ ズ レ ベル 信号に応 じ て、 映像信号の平滑化 を行 う。
図 1 5 を 参照 し て、 ブ ロ ッ ク 境界平滑化部 4 4 は、 入力 す る 映像信号 1 0 1 か ら 水平 H P F 4 4 1 で水平方向 の高 域成分 を抽 出す る。 そ し て、 ブ ロ ッ ク 境界平滑化部 4 4 は 、 抽出 し た水平高域成分 と 水平 ブ ロ ッ ク ノ イ ズ レ ベル と を 乗算部 4 4 3 で乗算 し て、 減算部 4 4 5 で映像信号 1 0 1 か ら 減算す る。 ま た、 垂直方向 も 同様で あ り、 ブ ロ ッ ク 境 界平滑化部 4 4 は、 入力 す る 映像信号 1 0 1 か ら 垂直 H P
F 4 4 2 で垂叵方向 の 高域成分 を抽出す る。 そ し て、 プロ ッ ク 境界平滑化部 4 4 は、 抽出 し た垂直高域成分 と 垂直ブ □ ッ ク ノ ィ ズ レ ベル と を 乗算部 4 4 4 で乗算 し て、 減算部
4 4 6 で映像信号 1 0 1 カゝ ら 減算す る。
こ れ に よ り、 水平 Z垂直方向の ブ ロ ッ ク ノ イ ズ レ ベルが 大き い ほ ど . 映像信号 1 0 1 に対 し て、 大 き な平滑化処理 を行 う こ と がで き る
輪郭補正部 4 5 は . ブ 口 ッ ク ェ リ ア検出部 4 3 か ら 出力 さ れる 水平 Z垂直方向 の ブ ロ ッ ク ノ イ ズ レ ベ ル信号 に応 じ て、 輪郭補正のゲイ ン Z コ ア リ ン グ量等 を変化 さ せ る。
図 1 6 を参照 し て . 輪郭補正部 4 5 は , 入 力 す る 映像信 号 1 0 1 か ら 水平 H P F 4 5 1 で水平方向 の 高域成分 を抽 出する。 そ し て、 輪郭補正部 4 5 は、 水平輪郭補正 の設定 値か ら 水平 ブ ロ ッ ク ノ イ ズ レベル を減算部 4 5 3 で減算 し 、 抽出 し た水平高域成分 と 水平 ブ ロ ッ ク ノ イ ズ レ ベリレ と を 乗算部 4 5 5 で乗算 し た後、 加算部 4 5 7 で映像信号 1 0 1 と加算す る。 ま た . 垂直方向 も 同様で あ り、 輪郭補正部 4 5 は、 入 力す る 映像信号 1 0 1 か ら 垂直 H P F 4 5 2 で 垂直方向 の 高域成分 を抽 出す る。 そ し て. 輪郭補正部 4 5 は、 垂直輪郭補正 の 設定値か ら 垂直 ブ 口 ッ ク ノ ィ ズ レ ベル を減算部 4 5 4 で減算 し、 抽出 し た水平高域成分 と 水平ブ ロ ッ ク ノ ィ ズ レ ベル を と 乗算部 4 5 6 で乗算 し た後、 加算 部 4 5 8 で映像信号 1 0 1 と 加算す る。
こ れ に よ り、 水平 Z垂直方向 の ブ 口 ッ ク ノ イ ズ レ ベルが 大 き い ほ ど. 映像信 号 1 0 1 に対 し て、 水平 Z垂直輪郭補 正 のゲイ ン を下 げ、 ブ ロ ッ ク ノ イ ズ を 強調 し な い 輪郭補正 を行 う こ と がで さ る。
なお、 典型的 に は、 本発明 の第 4 の実施形態 に 係 る プ ロ ッ ク ノ ィ ズ除去装置 4 0 の 各構成が行 う 処理 は、 C P U ( 中 央演算処理装置) に よ つ て制御 さ れ る。 こ の 場合 . N点 累 積加算部 4 1 6 , 4 2 6 の 出 力 結果 を C P U に 送出 し て
、 C P U で ブ ロ ッ ク 境界の位置 を検出 し、 C P U か ら マ ス ク 化部 4 1 7, 4 2 7 の制御 を行 つ て も よ い , ま た . 検出 し た ブ 口 ッ ク ノ ィ ズ レベル と ブ ロ ッ ク 境界 を C P U に送出 し、 C P U の指示 に よ り 画面全体の輪郭補正 の補正量ゃ ノ ィ ズ除去 レ ベル等の 制御 を 行 っ て も よ い。 さ ら に、 ブ ロ ッ ク ノ イ ズが検出 さ れ る と、 画面上 に 「 D V D / D V C デ ジ タ ル」 等の入 力 ソ ー ス の種類の判別結果や映像信号 (例 え ば、 M P E G ) の 品位 を , オ ン ス ク リ ー ンデ イ ス プ レイ (以下、 O S D と 記す) 表示す る こ と も で き る。
以上の よ う に、 本発明 の第 4 の実施形態 に 係 る ブ □ ッ ク ノ イ ズ除去装置 4 0 に よ れ ば、 ブ 口 ッ ク 境界お よ びブ 口 ッ ク ノ イ ズ レ ベル を正確 に検出す る こ と がで き る。 こ れ に よ り、 ブ ロ ッ ク ノ ィ ズ レ ベル に対応 し た適切な平滑化お よ び 輪郭補正 を行 う こ と が可能 と な り、 映像 シー ン に 付随 し た ブ ロ ッ ク ノ イ ズ を よ り 効果的 に 除去す る こ と が可能 と な る 。 ま た、 情報 を 0 S D 表示す る こ と で、 映像 ソ ー ス や ブ 口 ッ ク ノ ィ ズ除去効果 を、 一目 で認識す る こ と が可能 と な る
(第 5 の実施形態)
上記第 4 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 を 例 え ば、 テ レ ビ ジ ョ ン シ ス テ ム等 に用 い た場合、 入力す る 映像信号 1 0 1 と し て、 通常のテ レ ビ映像信号の他 に、 外 部端子か ら 入力 さ れ る 信号形態が異な る 映像信号 も 存在す る。
そ こ で、 第 5 の実施形態は、 複数の 異な る 信号形態の入 力 映像信号 に対応す る ブ ロ ッ ク ノ イ ズ除去装置 を提供す る も のであ る。
図 1 7 は、 本発明 の第 5 の実施形態 に 係 る ブ ロ ッ ク ノ ィ ズ除去装置の構成 を 示すブ ロ ッ ク 図 で あ る。 図 1 7 にお い て、 第 5 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 5 0 は 、 A D コ ン ノ、一 夕 5 1 と、 デ ジ夕 リレ復号化部 5 2 と、 セ レ ク タ 5 3 と、 水平ブ ロ ッ ク 境界検 出部 5 4 と、 垂直 ブ ロ ッ ク 境界検出 部 5 5 と、 ブ ロ ッ ク エ リ ア検 出部 4 3 と、 プ ロ ッ ク 境界平滑化部 4 4 と、 輪郭補正部 4 5 と を備え る。
図 1 8 は、 図 1 7 の水平ブ ロ ッ ク 境界検出部 5 4 の さ ら に詳細な構成 を 示すブ ロ ッ ク 図で あ る。 図 1 8 にお いて、 水平ブ ロ ッ ク 境界検 出部 5 4 は、 水平 H P F 4 1 1 と、 絶 対値化部 4 1 2 と、 垂直累積加算部 4 1 3 と、 H P F 4 1 4 と、 テ ン ポ ラ ル フ ィ ル 夕 4 1 5 と、 N点累 積加算部 4 1 6 と、 マ ス ク 化部 4 1 7 と、 最大値検出部 4 1 8 と、 セ レ ク タ 5 4 1 と を備え る。
図 1 9 は、 図 1 7 の垂直 ブ ロ ッ ク 境界検出 部 5 5 の さ ら に詳細な構成 を 示す ブ ロ ッ ク 図で あ る。 図 1 9 に お いて、 垂直ブ ロ ッ ク 境界検出部 5 5 は、 垂直 H P F 4 2 1 と、 絶 対値化部 4 2 2 と、 水平累 積加算部 4 2 3 と、 H P F 4 2 4 と、 テ ン ポ ラ ル フ ィ ル タ 4 2 5 と、 N点累 積加算部 4 2 6 と、 ス ク 化部 4 2 7 と、 最大値検出部 4 2 8 と、 セ レ ク 夕 5 5 1 と を備え る。
なお 第 5 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 5
0 にお け る ブ ロ ッ ク エ リ ア検出部 4 3, ブ ロ ッ ク 境界平滑 化部 4 4 お よ び輪郭補正部 4 5 の各構成は、 上記第 4 の実 施形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 4 0 の構成 と 同様で あ り、 当 該構成 につ い て は周一の参照番号を 付 し て説明 を 略す る
ま た 水平ブ ロ ッ ク 境界検出部 5 4 は、 上記第 4 の実施 形態で述ベた水平ブ ロ ッ ク 境界検出部 4 1 の構成 にセ レ ク 夕 5 4 1 を加え た構成で あ り、 垂直 ブ ロ ッ ク 境界検出部 5 5 は、 上記第 4 の実施形態で述べた垂直 プ ロ ッ ク 境界検出 部 4 2 の構成 にセ レ ク タ 5 5 1 を加 え た構成で あ る ので、 同一の構成部分 につ い て は同一の参照番号 を 付 し て説明 を 略す る
以下 図 1 7 〜図 1 9 を参照 し て、 本発明 の第 5 の実施 形態 に係 る ブ ロ ッ ク ノ イ ズ除去装置 5 0 が行 う 動作 を順に 明す る
A D コ ンノ 一 夕 5 1 に は、 ア ナ ロ グの映像信号 5 0 1 が 入 力 さ れ る。 デ ジ タ ル復号化部 5 2 に は、 例 え ば、 I E E E 1 3 9 4 規格で接続 さ れ る M P E G ス ト リ ー ムゃ D V フ ォ一マ V ト 等の デジ タ ル の 映像信号 5 0 2 が入 力 さ れ る。 A D コ バー 夕 5 1 は、 入 力 す る ア ナ ロ グの 映像信号 5 0 ■orテ シ タ ル に 変換 し て、 セ レ ク タ 5 3 へ出 力 す る。 デジ 夕 ル復 化部 5 2 は、 入 力 す る デ ジ タ ル の 映像信号 5 0 2 を 復号 し て、 セ レ ク タ 5 3 へ出 力 す る。 こ の デ ジ タ ル復号 化部 5 2 は、 映像信号 5 0 2 がい く つ の ブ ロ ッ ク サィ ズで デコ ー ド さ れて い る か と い う ブ ロ ッ ク 情報信号 5 2 1 , 5 2 2 (すな わち、 ブ 口 ッ ク 境界) を 出 力 で き る。
セ レ ク 夕 5 3 は、 ュ一ザの指示 に従 っ て、 入 力 す る 2 つ のデジ 夕 ル映像信号の いずれか 1 つ を選択 し . 映像信号 1 0 1 と し て 出 力する。 こ こ で、 こ のセ レ ク タ 5 3 は , ど ち ら のデジ タ ル映像信号 を選択出 力 し たか を示す受信パルス 5 3 1 を 出 力 す る。 例 え ば、 A D コ ンバ一 夕 5 1 の 出 力 ( 入力 は、 D V D の ア ナ ロ グ信号 と す る ) を選択 し た 場 口' に は論理値 「 0 」 ¾;、 デジ 夕 ル復号化部 5 2 の 出 力 (入 力 は 、 デジ 夕 ル ビデォカ メ ラ ( D V D ) のデジ 夕 ル信号 と す る ) を選択 し た場合 に は論理値 「 1 」 を、 受信パ ルス 5 3 1 と し て 出 力 する。 こ の受信パルス 5 3 1 は、 例 え ば. 何 を 入力 し た か を o S D 表示す る 情報 と し て利用 で き る, , 例 え ば、 上記例 では 「 D V D 」 や 「 D V C 」 と い う 文字 を、 丁 レ ビ画面上 に 〇 S D 表示す る こ と がで き る。
セ レ ク 夕 5 3 で選択 さ れた映像信号 1 0 1 お よ びデ ジ 夕 ル復号化部 5 2 か ら 出 力 さ れ る ブ 口 ッ ク 情報信号 5 2 1 , 5 2 2 は , 水平 ブ 口 ッ ク 境界検出 部 5 4 お よ び垂直 ブ 口 ッ ク 境界検 出部 5 5 に それぞれ入 力 さ れる。
水平 ブ □ ッ ク 境界検出 部 5 4 は、 基本的 に 上述 し た よ う に、 水平方向の ブ 口 ッ ク ノ ィ ズ レ べルお よ びブ ロ ッ ク 境界 の検出 を 行 う が、 最大値検出部 4 1 8 は、 求め た水平 ブ 口 ッ ク 境界 を セ レ ク タ 5 4 1 に 出 力 す る。 こ のセ レ ク タ 5 4 1 は、 最大値検 出部 4 1 8 が出 力 す る 水平 ブ ロ ッ ク 境界 と 、 テ ジ タ ル復号化部 5 2 が出 力 す る ブ ロ ッ ク 情報信号 5 2 1 と を入力す る。 そ し て、 セ レ ク タ 5 4 1 は、 与え ら れる ユーザ指示 (セ レ ク タ 5 3 へ のユーザ指示 に 同期する ) に 従 っ て、 セ レ ク タ 5 3 が A D コ ン ノ — 夕 5 1 の 出 力 信号を 選択 し た 場合 に は、 最大値検 出装置 4 1 8 が求め た水平ブ ロ ッ ク 境界 を、 セ レ ク タ 5 3 がデジ タ ル復号化部 5 2 の 出 力 信号を選択 し た場合 に は、 ブ ロ ッ ク 情報信号 5 2 1 と し て与え ら れ る 水平ブ ロ ッ ク 境界 を、 選択 し て 出 力す る。
同様に、 垂直 ブ ロ ッ ク 境界検出部 5 5 は、 基本的 に上述 し た よ う に、 垂直方向 の ブ ロ ッ ク ノ イ ズ レ ベルお よ びプ ロ ッ ク 境界の検出 を行 う 力 最大値検出部 4 2 8 は、 求めた 垂直 ブ ロ ッ ク 境界を セ レ ク タ 5 5 1 に 出 力 す る。 こ のセ レ ク タ 5 5 1 は、 最大値検 出 部 4 2 8 が出 力 す る 垂直 ブ ロ ッ ク 境界 と、 デジ タ ル復号化部 5 2 が出 力 す る ブ ロ ッ ク 情報 信号 5 2 2 と を 入力 す る。 そ し て、 セ レ ク タ 5 5 1 は、 与 え ら れる ユーザ指示 (セ レ ク タ 5 3 へのユーザ指示 に 同期 す る ) に従 っ て、 セ レ ク タ 5 3 が A D コ ンバー タ 5 1 の 出 力 信号 を選択 し た場合 に は、 最大値検出装置 4 2 8 が求め た垂直 ブ ロ ッ ク 境界 を、 セ レ ク タ 5 3 がデジ タ ル復号化部 5 2 の 出 力 信号 を選択 し た 場合 に は、 ブ ロ ッ ク 情報信号 5 2 2 と し て与え ら れ る 垂直 ブ ロ ッ ク 境界 を、 選択 し て出力 す る。
こ れに よ り、 ブ ロ ッ ク 境界が判断で き な い ア ナ ロ グの映 像信号 5 0 1 が入 力 さ れた 場合 に は、 水平ブ ロ ッ ク 境界検 出 部 5 4 お よ び垂直 ブ ロ ッ ク 境界検出部 5 5 で求め た プ ロ ッ ク 境界 を用 い て ブ ロ ッ ク ノ イ ズの除去 を行 い、 ブ ロ ッ ク 境界が判断で き る ( 与 え ら れ る ) デジ タ ル の 映像信号 5 0 2 が入力 さ れた場合 に は、 そ の与え ら れ る ブ ロ ッ ク 境界-を 用 いてブ ロ ッ ク ノ イ ズの除去 を行 う こ と が可能 と な る。
以上 の よ う に、 本発明 の第 5 の実施形態 に 係 る ブ ロ ッ ク ノ イ ズ除去装置 5 0 に よれば、 入力 す る 映像信号 に対応 し た ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ レ ベル を正確 に検出 する こ と がで き る。 こ れ に よ り、 ブ ロ ッ ク ノ イ ズ レ ベル に 対応 し た適切な平滑化お よ び輪郭補正 を行 う こ と が さ ら に 可能 と な り、 映像 シー ン に付随 し た ブ ロ ッ ク ノ イ ズを よ り 効果的 に 除去す る こ と が可能 と な る。 ま た、 情報 を O S D 表示す る こ と で、 映像 ソ ー ス や ブ ロ ッ ク ノ イ ズ除去効果 を 、 一 目 で認識す る こ と が可能 と な る。
(第 6 の実施形態)
と こ ろ で、 映像信号の画質劣化 を 引 き起 こ す要因 と し て は、 上述 し て き た ブ ロ ッ ク ノ イ ズ以外 に、 ド ッ ト ク ロ ッ ク の再生不 良 が挙 げ ら れる。 こ の ド ッ ト ク ロ ッ ク の再生不良 は、 周知 の よ う に、 ア ナ ロ グの映像信号 をデ ジ タ ルの 映像 信号 に変換す る 場合、 本来 ア ナ ロ グ映像信号でサ ン プ リ ン グ し た ク ロ ッ ク 位相 と、 デジ タ ル化 し た 後の映像信号でサ ン プ リ ン グ し た ク ロ ッ ク 位相 と 力 ずれ を 生 じ る た め に起 こ る も の で あ る。
そ こ で、 本発 明 の第 6 の実施形態は、 上述 し た ブ ロ ッ ク 境界検出 を行 う 手法 を用 い て、 正確な ド ッ ト ク ロ ッ ク 再生 を も 可能 にす る も の であ る。
図 2 0 は、 本発明 の第 6 の実施形態 に係 る ブ ロ ッ ク 検出 装置 を用 い た映像処理 シ ス テ ム の構成の一例 を 示す ブ ロ ッ ク 図で あ る。 図 2 0 にお いて、 第 6 の実施形態 に 係 る プ ロ ッ ク 検出装置 を 用 い た映像処理 シ ス テ ム 6 0 は、 A D コ ン バー 夕 6 1 と、 映像信号処理装置 6 2 と、 D A コ ンバー タ 6 3 と、 水平ブ ロ ッ ク 境界検出部 6 4 と、 ク ロ ッ ク 発生装 置 6 5 と、 制御部 6 6 と を備え る。 ク ロ ッ ク 発生装置 6 5 は、 位相比較器 6 5 1 と、 L P F 6 5 2 と、 V C 0 6 5 3 と、 可変デ ィ レ イ 6 5 4 と、 分周器 6 5 5 と を備え る。
図 2 1 は、 図 2 0 の水平ブ ロ ッ ク 境界検出部 6 4 の さ ら に詳細な構成 を示すブ ロ ッ ク 図で あ る。 図 2 1 にお いて、 水平ブ ロ ッ ク 境界検出部 6 4 は、 水平 H P F 6 4 1 と、 絶 対値化部 6 4 2 と、 垂直累積加算部 6 4 3 と、 H P F 6 4 4 と、 N点累積加算部 6 4 5 と を備 え る。
図 2 2 は、 図 2 0 の水平ブ ロ ッ ク 境界検出部 6 4 が出力 す る 水平ブ ロ ッ ク ノ イ ズの累 積加算結果 の一例 を示す図で あ る。 なお、 図 2 2 に お い て は、 N値 を 「 8 」 に し た場合 の累積加算結果 を示 し て い る。
図 2 3 は、 映像信号 6 0 1 と ク ロ ッ ク ( C K ) と の 関係 を説明す る 図で あ る。
以下、 図 2 0 〜 図 2 3 を参照 し て、 本発明 の第 6 の実施 形態 に係 る プ ロ ッ ク 検出装置 を用 い た 映像処理 シ ス テ ム 6 0 が行 う 動作 を 順 に説明す る。
まず、 第 6 の実施形態の映像処理 シ ス テ ム 6 0 の各構成 を説明す る。
A D コ ン ノ 一 夕 6 1 は、 入 力す る ア ナ ロ グ映像信号 6 0 1 をデジタ ル映像信号 に 変換す る。 映像信号処理装置 6 2 は、 輪郭補正等 の 映像信号 に 関す る 種 々 の処理 を 行 う。 D A コ ン バー タ 6 3 は、 デ ジ タ ル映像信号 を ア ナ ロ グ映像信 号 に変換す る。 水平ブ ロ ッ ク 境界検出部 6 4 は、 入力 す-る デジ タ ル映像信号か ら 水平方向の ブ ロ ッ ク 境界 を検出する 。 ク ロ ッ ク 発生装置 6 5 は、 ラ イ ン ク ロ ッ ク の P L L 回路 を構成 し てお り、 各構成が処理 に用 い る 再生 ク ロ ッ ク ( C K ) を 生成する。 なお、 ク ロ ッ ク 発生装置 6 5 の 各構成は 、 従来か ら 一般的 に用 い ら れて い る 周知 の構成で あ る ので 、 こ こ で の説明 は省略す る p 制御部 6 6 は、 例 え ば、 C P U等の制御装置や水平 ブ ロ ッ ク 境界検出部 6 4 の 出 力 信号 に 時間的な フ イ リレ夕 を か け る も ので あ り、 水平 ブ ロ ッ ク 境 界検出部 6 4 が出 力 す る 信号 に従 っ て、 ク ロ ッ ク 発生装置 6 5 を 制御する。
次 に、 第 6 の実施形態 の 映像処理 シ ス テム 6 0 が行 う 処 理動作 を 説明す る。
A D コ ンバー タ 6 1 に 入力 さ れた映像信号 6 0 1 は、 ク ロ ッ ク 発生装置 6 5 で発 生 さ れた再生 ク ロ ッ ク ( C K ) に 基づいて、 デジ タ ル映像信号 に変換 さ れる。 変換 さ れたデ ジ 夕 ル信号は、 映像信号処理装置 6 2 で所望 の 映像信号処 理が施さ れ、 D A コ ンノ '一 夕 6 3 で ア ナ ロ グ映像信号 に変 換 さ れる。 ま た、 変換 さ れた デジ タ ル映像信号 は、 水平ブ ロ ッ ク 境界検出 手段 6 4 に 入 力 さ れ、 水平ブ ロ ッ ク ノ イ ズ の累積加算処理 を行 い、 そ の結果が制御部 6 6 に 送 ら れる 水平 ブ ロ ッ ク 境界検出 部 6 4 にお いて、 水平 H P F 6 4 1 は、 映像信号 6 0 1 を 入 力 し、 水平方向 に 関 し て高域成 分のみ を抽出す る。 絶対値化部 6 4 2 は、 水平 H P F 6 4 1 が出 力す る 信号 を 入 力 し, 絶対値 を取 っ て正 の 値 に変換 す る。 垂直累積加算部 6 4 3 は、 絶対値化部 6 4 2 が出力 す る 信号 を 入 力 し、 累積加算 し て水平周期的 に ピー ク 値を 持 っ た水平 1 次元信号 1 1 5 を 出 力 す る (図 2 を 参照) 。 H P F 6 4 4 は、 垂直累積加算部 6 4 3 が出 力 す る 信号の 精度 を さ ら に上 げる 目 的で再び高域成分 を抽出 し、 水平ブ ロ ッ ク ノ イ ズ レ ベル を検出す る。 N 点累積加算部 6 4 5 は 、 予め設定 さ れた N 点 ( N は、 ブ ロ ッ ク の画素数) ご と の ノ イ ズ、 すなわ ち、 各ブ ロ ッ ク の 同 一画素位置 に あ る ノ ィ ズの累積加算 を 求め、 それぞれ出 力す る。 こ こ で、 N 点累 積加算部 6 4 5 は、 例 え ば、 M P E G 2 方式 に お け る 8 ( 画素) X 8 ( ラ イ ン) の 周期で 出現す る ブ ロ ッ ク ノ イ ズの 場合、 N 値 を 「 8 」 に し て水平ブ ロ ッ ク 境界 を求め、 制御 部 6 6 に 出 力 す る。
なお、 水平 ブ ロ ッ ク ノ イ ズ検出 の精度 を 上 げる た め に、 水平 H P F 6 4 1 ま た は絶対値化部 6 4 2 の 出 力 信号 に、 小振幅信号の み を通過 さ せ る コ ア リ ン グ装置 を挿入 し て も よ い。
次 に、 図 2 2 お よ び図 2 3 を用 い て、 ド ッ ト ク ロ ッ ク 制 御 の動作説明 を 行 う。
まず、 ド ッ ト ク ロ ッ ク 再生が上手 く 行われて い な い (す なわ ち、 本来の 映像信号 6 0 1 の ド ッ ト ク ロ ッ ク と 再生 ク ロ ッ ク ( C K ) と が一致 し て い な い ) 場合、 映像信号 ( 図 2 3 ( a ) ) に 対 し てサ ン プ リ ン グ ク ロ ッ ク の位相 がずれ る (図 2 3 ( b ) ) 。 こ の場合、 N 点累 積加算部 6 4 5 が 制御部 6 6 に 出 力 す る N 点 の 累積加算結果 は、 図 2 2 ( a ) の よ う に 複数 の点で高 い レ ベルが存在す る 結果 と な る ( 同 図 にお い て は、 4 と 5 の 2 つ の位置) 。
一方、 ド ッ ト ク ロ ッ ク 再生が上手 く 行われて い る (すな わ ち、 本来 の映像信号 6 0 1 の ド ッ ト ク ロ ッ ク と 再生 ク ロ ッ ク ( C K ) と が一致 し て い る ) 場合、 映像信号 (図 2 3 ( a ) ) に対 し てサ ン プ リ ン グ ク ロ ッ ク の位相がずれな い (図 2 3 ( c ) ) 。 こ の場合、 N 点累積加算部 6 4 5 が制 御部 6 6 に 出 力 す る N 点 の 累積加算結果は、 図 2 2 ( b ) の よ う に高 い レ ベルが 1 つ だ け存在す る 結果 と な る ( 同 図 にお いて は、 5 の位置) 。
こ の こ と 力ゝ ら、 制御部 6 6 は、 N 点累 積加算部 6 4 5 が 出 力する N 点 の 累積加算結果力 高 い レ ベルが 1 つ だけ存 在する 結果 と な る よ う に、 ク ロ ッ ク 発 生装置 6 5 に お け る 可変ディ レ イ 6 5 4 のデ ィ レ イ 量 を変化 さ せ る 帰還制御 を 行 う。 従 っ て、 入力す る 映像信号 6 0 1 がサ ン プ リ ン グ さ れて いた ク ロ ッ ク 位相 を、 映像処理 シ ス テ ム 6 0 にお いて 正確 に再生す る こ と が可能 と な る。
以上の よ う に、 本発明 の第 6 の実施形態 に 係 る ブ ロ ッ ク 検出装置 を 用 い た 映像処理 シ ス テ ム 6 0 に よ れば、 入力す る 映像信号 に対応 し た水平 ブ ロ ッ ク 境界 を検出 し、 こ の位 置に基づい て ド ッ ト ク ロ ッ ク の再生 を行 う。 こ れ に よ り、 本来の映像信号 の ド ッ ト ク ロ ッ ク と 位相が一致 し た ク ロ ッ ク を、 正確 に再生す る こ と が可能 と な る。
なお、 典型的なハー ド ウ ェ ア環境で は、 上 記第 1 〜第 6 の実施形態 に係 る ブ ロ ッ ク ノ イ ズ検 出装置 1 0, 2 0 お よ びブ ロ ッ ク ノ イ ズ除去装置 3 0 , 4 0, 5 0 お よ び映像処 理 シ ス テ ム 6 0 が実現す る 各機能 は、 所定 の プ ロ グ ラ ムデ 一夕 が格納 さ れた記憶装置 ( R 〇 M, R A M , ハー ドデ-ィ ス ク等) と、 当該プロ グラ ムデ一夕 を実行する C P U と に よ っ て実現 さ れる。 こ の場合、 各プロ グ ラ ム データ は、 C D — R O Mゃ フ ロ ッ ピーディ ス ク 等の記録媒体を介 して導 入さ れて も ょ レ 産業上の利用可能性
上述 し た よ う に、 本発明は、 予め定めた画像ブロ ッ ク 毎 に不可逆符号化処理が施 さ れたデジタ ルの映像信号を用 い る映像処理装置 (例え ば、 テ レ ビジ ョ ン受像機等) にお い て、 第 1 に、 当該映像信号の復号化処理に伴っ て生 じ る ブ ロ ッ ク ノ イ ズを正確に検出 して除去する 目 的で、 第 2 に、 ド ッ ト ク ロ ッ ク の正確な再生 を行 う 目 的で用 い る こ とが可 能であ る。

Claims

請求の範囲
1 . 予め定め た画像ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れた デジタ ルの映像信号か ら、 当 該映像信号 の復号化 処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 装置で あ つ て、
前記映像信号 にお け る 前記 ブ ロ ッ ク ノ イ ズの レベル を検 出する 手段 と、
前記映像信号 にお け る ブ ロ ッ ク 境界 ( 前記 ブ ロ ッ ク ノ ィ ズの発生位置) を検出す る 手段 と を備 え る、 ブ ロ ッ ク ノ ィ ズ検出装置。
2 . 予め定め た画像 ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れた デ ジタ ルの映像信号か ら、 当 該映像信号 の復号化 処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 装置であ つ て、
前記映像信号 を入力 し、 当 該映像信号か ら 高域成分のみ を抽出す る 信号抽出手段 と、
前記信号抽出手段が出 力 す る 高域成分信号 を 絶対値化す る 絶対値化手段 と、
前記絶対値化手段が出 力 す る 絶対値化後の 前記高域成分 信号 を、 予 め定めた期 間 に お い て累積加算す る 累 積加算手 段 と、
前記累 積加算手段が出 力 す る 累積加算結果 に 基づい て、 前記 ブ ロ ッ ク ノ イ ズの周 期性 を検知す る 周期検知手段 と、 前記周期検知 手段が検知 し た周期性信号か ら、 ブ ロ ッ ク 境界 (前記 ブ ロ ッ ク ノ イ ズの発生位置) を求 め る ブ ロ ッ ク 境界判定手段 と を備え る、 ブ ロ ッ ク ノ イ ズ検出 装置。
3 . 前記ブ ロ ッ ク 境界判定手段は、 前記 ブ ロ ッ ク 境界 の位置 と それ以外の位置 と に 2 値化す る こ と を特徴 と する 、 請求項 2 に記載の ブ ロ ッ ク ノ イ ズ検出装置。
4 . 前記映像信号 を 入力 し、 当 該映像信号 の予め定め た複数 の フ レー ム 間 の信号差分 を求め る フ レ ー ム 差分手段 と、
前記 フ レーム差分手段 の 出 力 す る 信号の差分値が、 予め
6
定め た し き い値 を越え る か否 5か に従 っ て、 除去すべ き プ ロ ッ ク ノ イ ズが存在す る 領域 (以下、 ノ イ ズ領域 と い う ) を 判 断す る 領域判断手段 と、
前記 プ ロ ッ ク 境界判定手段が求め た前記 プ ロ ッ ク 境界を 、 前記領域判断手段が判 断 し た 前記 ノ イ ズ領域でマ ス ク 化 し、 当 該 ノ イ ズ領域 に対応す る ブ ロ ッ ク 境界 を求め る プ ロ ッ ク エ ッ ジ制御手段 と を さ ら に備 え る、 請求項 2 ま た は 3 に記載の ブ ロ ッ ク ノ イ ズ検出装置。
5 . 前記 フ レー ム差分手段 は、 現在 フ レー ム と 直前 フ レ ー ム と の間の信号差分 を 求め る こ と を特徴 と す る、 請求 項 4 に記載の ブ ロ ッ ク ノ イ ズ検出 装置。
6 . 前記領域判断手段 は、 前記 し き い値 を越え る 部分 と 前記 し き い値 を越え な い 部分 と に 2 値化す る こ と を特徴 と す る、 請求項 4 ま た は 5 に記載の ブ ロ ッ ク ノ イ ズ検出装 置。
7 . 前記領域判 断手段が判 断 し た 前記 ノ イ ズ領域の う ち、 予 め定め た 小領域内 に 分布す る ノ イ ズ部分 を 除外す る 特異点除去手段 を さ ら に 備 え、 前記ブロ ッ ク エ ッ ジ制御手段は、 前記ブ ロ ッ ク 境界判定 手段が求めた ブ ロ ッ ク境界を、 前記特異点除去手段が出力 する除外後の前記 ノ イ ズ領域でマ ス ク 化する こ と を特徴と する、 請求項 4 〜 6 の いずれかに記載の ブロ ッ ク ノ イ ズ検 出装置。
8 . 前記信号抽出手段、 前記絶対値化手段、 前記累積 加算手段お よ び前記周期検知手段は、 前記映像信号の水平 方向また は垂直方向のいずれか 1 方向、 若 し く は双方向に 関 してそれぞれ処理を行 う こ と を特徴 とする、 請求項 2 〜 7 の いずれか に記載の ブロ ッ ク ノ イ ズ検出装置。
9 . 各処理 を前記映像信号の垂直方向に関 し て行 う 場 前記周期検知手段は、 入力する 前記映像信号の フ ォ ーマ ッ ト に応 じて、 検知 に用 い る フ レーム を逐次変更する こ と を特徴 とする、 請求項 8 に記載の ブ ロ ッ ク ノ イ ズ検出装置
1 0 . 予め定めた画像ブロ ッ ク 毎に不可逆符号化処理が 施さ れたデジタ ルの映像信号か ら、 当 該映像信号の復号化 処理に伴っ て生 じ る ブロ ッ ク ノ イ ズを検出 し て除去する装 置であ っ て、
前記映像信号にお ける 前記プロ ッ ク ノ ィ ズの レベルを検 出する手段 と、
前記映像信号 にお ける ブロ ッ ク 境界 (前記ブ ロ ッ ク ノ ィ ズの発生位置) を検出する手段 と、
前記ブ ロ ッ ク 境界にお いて、 検出 し た前記 レベルが予め 定めた し き い値以上であ る 前記プ ロ ッ ク ノ イ ズのみを除去 する手段 と を備え る、 ブ ロ ッ ク ノ イ ズ除去装置。
1 1 . 予め定めた画像ブロ ッ ク 毎に不可逆符号化処理が 施 さ れたデジタ ルの映像信号か ら、 当該映像信号の復号化 処理に伴っ て生 じ る ブ ロ ッ ク ノ イ ズを検出 し て除去する装 置であ っ て、
前記映像信号を入力 し、 当該映像信号か ら 高域成分のみ を抽出する信号抽出手段 と、
前記信号抽出手段が出力する高域成分信号を絶対値化す る絶対値化手段 と、
前記絶対値化手段が出 力する絶対値化後の前記高域成分 信号を、 予め定めた期間 にお いて累積加算する 累積加算手 段 と、
前記累積加算手段が出力する累積加算結果に基づいて、 前記ブロ ッ ク ノ イ ズの周期性を検知する周期検知手段 と、 前記周期検知手段が検知 し た周期性信号か ら、 ブロ ッ ク 境界 (前記ブロ ッ ク ノ イ ズの発生位置) を求め る ブ ロ ッ ク 境界判定手段 と、
前記ブロ ッ ク 境界 に対 して、 前記ブロ ッ ク ノ イ ズを除去 する ブロ ッ ク ノ イ ズ除去手段 と を備え る、 ブ ロ ッ ク ノ イ ズ 除去装置。
1 2 . 前記ブロ ッ ク 境界判定手段は、 前記ブ ロ ッ ク境界 の位置とそれ以外の位置 と に 2 値化する こ と を特徴 とする 、 請求項 1 1 に記載の ブ ロ ッ ク ノ イ ズ除去装置。
1 3 . 前記映像信号を入力 し、 当該映像信号の予め定め た複数の フ レーム 間の信号差分を求め る フ レ ー ム差分手段 と、 前記 フ レ ーム差分手段 の 出 力 す る 信号の差分値が、 予め 定めた し き い値 を越え る か否か に従 っ て、 除去すべ き プ ロ ッ ク ノ イ ズが存在する 領域 (以下、 ノ イ ズ領域 と い う ) を 判断する 領域判断手段 と、
前記プ ロ ッ ク 境界判定手段が求め た前記プ ロ ッ ク 境界を 、 前記領域判断手段が判断 し た前記 ノ イ ズ領域でマ ス ク 化 し、 当 該 ノ イ ズ領域 に対応す る ブ ロ ッ ク 境界 を求め る プ ロ ッ ク エ ッ ジ制御手段 と を さ ら に備 え、
前記 ブ ロ ッ ク ノ イ ズ除去手段は、 前記 ノ イ ズ領域 に対応 す る ブ ロ ッ ク 境界に対 し て、 前記 ブ ロ ッ ク ノ イ ズ を 除去す る、 請求項 1 1 ま た は 1 2 に記載の ブ ロ ッ ク ノ イ ズ除去装 置。
1 4 . 前記 フ レーム差分手段は、 現在 フ レ ー ム と 直前 フ レーム と の 間の信号差分 を求め る こ と を特徴 と す る、 請求 項 1 3 に記載の ブ ロ ッ ク ノ イ ズ除去装置。
1 5 . 前記領域判断手段 は、 前記 し き い値 を越え る 部分 と 前記 し き い値 を越え な い部分 と に 2 値化す る こ と を特徴 と する、 請求項 1 3 ま た は 1 4 に記載の ブ ロ ッ ク ノ イ ズ除 去装置。
1 6 . 前記領域判断手段が判断 し た前記 ノ イ ズ領域の う ち、 予め定め た 小領域内 に 分布す る ノ イ ズ部分 を 除外す る 特異点除去手段 を さ ら に備 え、
前記ブ ロ ッ ク エ ツ ジ制御手段 は、 前記ブ ロ ッ ク 境界判定 手段が求めた ブ ロ ッ ク 境界 を、 前記特異点除去手段が出 力 する 除外後の前記 ノ イ ズ領域でマ ス ク 化す る こ と を特徴 と す る、 請求項 1 3 〜 1 5 の レゝ ずれか に記載の ブ ロ ッ ク ノ ィ ズ除去装置。
1 7 . 前記信号抽出手段、 前記絶対値化手段、 前記累積 加算手段および前記周期検知手段は、 前記映像信号の水平 方向 また は垂直方向の いずれか 1 方向、 若 し く は双方向に 関 し てそれぞれ処理を行 う こ と を特徴 とする、 請求項 1 1 〜 1 6 の いずれかに記載の ブ ロ ッ ク ノ イ ズ除去装置。
1 8 . 入力する前記映像信号の フ ォ ーマ ツ 卜 を識別する 識別手段 を さ ら に備え、
各処理 を前記映像信号の垂直方向 に関 して行 う 場合、 前記識別手段は、 前記 フ ォ ーマ ッ ト に応 じ て、 前記周期 検知手段が検知 に用 い る フ レーム を逐次変更 さ せる こ と を 特徴 とする、 請求項 1 7 に記載の ブ ロ ッ ク ノ イ ズ除去装置
1 9 . 予め定めた画像ブ ロ ッ ク 毎に不可逆符号化処理が 施さ れたデジタ ルの映像信号か ら、 当該映像信号の復号化 処理 に伴っ て生 じ る ブ ロ ッ ク ノ イ ズを検出 し て除去する装 置であ っ て、
前記映像信号を入力 し、 当 該映像信号に対する画面上に お け る横方向の ブロ ッ ク 境界 (前記ブロ ッ ク ノ イ ズの発生 位置) お よ びブロ ッ ク ノ イ ズ量を検出する垂直 ブロ ッ ク境 界検出手段 と、
前記映像信号を入力 し、 当該映像信号に対す る画面上に お ける縦方向の前記ブ ロ ッ ク 境界お よびブロ ッ ク ノ イ ズ量 を検出す る 水平プロ ッ ク 境界検出手段 と、
前記垂直プロ ッ ク 境界検出手段およ び前記水平プ ロ ッ ク 境界検出手段の検出結果か ら、 縦横全方向の前記ブロ ッ ク 境界 を特定す る ブ ロ ッ ク エ リ ア検出 手段 と、
前記 ブ 口 ッ ク ェ リ ァ検出 手段が特定 し た縦横全方向の前 記ブロ ッ ク 境界 に応 じ、 入力 す る 前記映像信号に対 し て予 め定め た 平滑化処理 を施すプ ロ ッ ク 境界平滑化手段 と を備 え る、 ブ ロ ッ ク ノ イ ズ除去装置。
2 0 . 前記垂直 ブ ロ ッ ク 境界検出手段 は、
前記映像信号の垂直高域成分の み を抽出す る 垂直ハイ パ ス フ ィ ル 夕 (以下、 H P F と 記す) と、
前記垂直 H P F が出 力 す る 高域成分信号 を絶対値化す る 第 1 の絶対値化手段 と、
前記第 1 の絶対値化手段が出 力 す る 絶対値化後の 前記 高域成分信号 を、 水平方向 に 累 積加算す る 水平累積加算手 段 と、
前記水平累 積加算手段が出 力 す る 累積加算後の 高域成 分信号か ら、 さ ら に高域成分 を抽出す る 第 1 の H P F と、 前記第 1 の H P F が出 力 す る 信号 を、 予め設定 さ れた N 点 ( N は、 正 の整数) ご と にそれぞれ累 積加算す る 第 1 の N点累積加算手段 と、
前記第 1 の H P F が出 力 す る 信号 を、 時間方向 に演算 し て前記映像信号の前記 ブ ロ ッ ク ノ イ ズ量 を検 出す る 第 1 のテ ンポ ラ ル フ ィ ル 夕 と、
前記第 1 の N 点累積加算手段が累 積加算 に よ っ て求め た N個 の累 積加算値の 中か ら、 最大値 と 当 該最大値の位置 と を求め る 第 1 の最大値検出手段 と、
前記第 1 の テ ン ポ ラ ル フ ィ ル 夕 が検出 し た 前記 ブ ロ ッ ク ノ イ ズ量 を、 前記第 1 の最大値検出 手段が出 力 す る 前記 最大値の位置でマス ク 化 し、 当該位置に対応する垂直プロ ッ ク境界を求め る第 1 のマス ク化手段 と を備え、
前記水平ブロ ッ ク 境界検出手段は、
前記映像信号の水平高域成分のみを抽出する水平 H P
F と、
前記水平 H P F が出力する 高域成分信号を絶対値化す る第 2 の絶対値化手段 と、
前記第 2 の絶対値化手段が出力する 絶対値化後の前記 高域成分信号を、 垂直方向に累積加算する垂直累積加算手 段 と、
前記垂直累積加算手段が出力する 累積加算後の高域成 分信号か ら、 さ ら に高域成分を抽出する第 2 の H P F と、 前記第 2 の H P F が出力する信号を、 予め設定さ れた N点 ごと にそれぞれ累積加算する第 2 の N点累積加算手段 と、
前記第 2 の H P F が出力する信号を、 時間方向に演算 し て前記映像信号の前記ブ ロ ッ ク ノ イ ズ量を検出する第 2 のテ ンポ ラ ルフ ィ ル夕 と、
前記第 2 の N点累積加算手段が累積加算によ っ て求め た N個の累積加算値の 中か ら、 最大値 と 当該最大値の位置 と を求め る第 2 の最大値検出手段 と、
前記第 2 のテ ンポ ラ ル フ ィ ル夕 が検出 し た前記ブロ ッ ク ノ イ ズ量を、 前記第 2 の最大値検出手段が出力する 前記 最大値の位置でマス ク 化 し、 当該位置に対応する垂直プロ ッ ク 境界を求め る第 2 のマ ス ク 化手段 と を備え る、 請求項 1 9 に記載のブ ロ ッ ク ノ イ ズ除去装置。
2 1 . 予め定めた画像 ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れた映像信号か ら、 当 該映像信号の復号化処理 に伴つ て 生 じ る ブ ロ ッ ク ノ イ ズ を検出 し て除去す る 装置で あ っ て ア ナ ロ グの ¾記映像信 号 を入力 し、 デジ タ ル に変換する A D 変換手段 と、
符号化 さ れたデジ タ ル の 前記映像信号 を入 力 し、 復号化 処理 を施す と 共 に、 当 該復号化処理 し た ブ ロ ッ ク 境界情報 を 出 力す る デジ タ ル複号化手段 と、
前記 A D 変換手段が出 力 す る 映像信号 と 前記 デ ジ タ ル復 号化手段が出力す る 映像信号 と を 入力 し、 外部か ら の指示 に従 っ て、 いずれか一方 の 当 該映像信号 を選択的に 出 力す る セ レ ク タ と、
前記セ レ ク タ が選択 し た映像信号 を入力 し、 当 該映像信 号 に対す る 画面上 に お け る 横方向 の ブ ロ ッ ク 境界 ( 前記ブ ロ ッ ク ノ イ ズの発生位置) お よ びブ ロ ッ ク ノ イ ズ量 を検出 す る 垂直 プ ロ ッ ク 境界検 出 手段 と、
前記セ レ ク タ が選択 し た映像信号 を 入力 し、 当 該映像信 号 に対す る 画面上 に お け る 縦方向の前記 プ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ量 を検 出す る 水平 ブ ロ ッ ク 境界検出手段 と、
前記垂直 プ ロ ッ ク 境界検出 手段お よ び前記水平 プ ロ ッ ク 境界検出手段の検出結果か ら、 縦横全方向 の 前記 ブ ロ ッ ク 境界 を特定する ブ ロ ッ ク エ リ ア検出手段 と、
前記 ブ ロ ッ ク エ リ ァ検 出 手段が特定 し た縦横全方向 の前 記 ブ ロ ッ ク 境界 に応 じ、 入 力 す る 前記映像信号 に対 し て予 め定めた平滑化処理 を施すプロ ッ ク 境界平滑化手段 と を-備 え、
前記垂直 ブロ ッ ク 境界検出手段お よ び前記水平ブロ ッ ク 境界検出手段は、 前記セ レ ク タ が前記 A D 変換手段の出力 する映像信号を選択 した場合、 各々 の検出結果に基づいた 前記ブロ ッ ク 境界を、 前記セ レ ク タ が前記デジタル復号化 手段の出 力する 映像信号を選択 し た場合、 前記デジタル復 号化手段が出力する 前記ブロ ッ ク 境界情報に従っ たブロ ッ ク 境界を、 前記ブロ ッ ク エ リ ア検出手段へ出力する こ と を 特徴とする、 ブ ロ ッ ク ノ イ ズ除去装置。
2 2 . 前記垂直ブロ ッ ク 境界検出手段は、
前記映像信号の垂直高域成分のみを抽出する垂直ハイ パス フ ィ ルタ (以下、 H P F と記す) と、
前記垂直 H P F が出力する 高域成分信号を絶対値化す る第 1 の絶対値化手段 と、
前記第 1 の絶対値化手段が出力する絶対値化後の前記 高域成分信号を、 水平方向 に累積加算する水平累積加算手 段 と、
前記水平累積加算手段が出 力する 累積加算後の高域成 分信号か ら、 さ ら に高域成分を抽出する 第 1 の H P F と、 前記第 1 の H P F が出 力する 信号を、 予め設定さ れた N点 ( N は、 正の整数) ごと にそれぞれ累積加算する第 1 の N点累積加算手段 と、
前記第 1 の H P F が出力する 信号を、 時間方向 に演算 して前記映像信号の前記ブ 口 ッ ク ノ ィ ズ量を検出する 第 1 のテ ンポ ラ ル フ ィ ル 夕 と、 前記第 1 の N点累積加算手段が累積加算によ っ て求-め た N個の累積加算値の 中か ら、 最大値 と 当該最大値の位置 と を求め る第 1 の最大値検出手段 と、
前記セ レ ク タ の選択 に同期 し、 前記デジ タ ル復号化手 段が出力する前記ブ ロ ッ ク境界情報 と、 前記第 1 の最大値 検出手段が出力する 前記最大値の位置 と の いずれか一方を 選択的に出力する第 1 のセ レ ク タ と、
前記第 1 のテ ンポ ラルフ ィ ルタ が検出 し た前記ブロ ッ ク ノ イ ズ量を、 前記第 1 のセ レ ク タ が出力する ブロ ッ ク境 界でマス ク 化 し、 当 該位置に対応する垂直ブ ロ ッ ク 境界を 求め る第 1 のマス ク 化手段 と を備え、
前記水平ブロ ッ ク 境界検出手段は、
前記映像信号の水平高域成分のみを抽出する水平 H P
F と、
前記水平 H P F が出力する 高域成分信号を絶対値化す る第 2 の絶対値化手段 と、
前記第 2 の絶対値化手段が出 力する 絶対値化後の前記 高域成分信号を、 垂直方向 に累積加算する垂直累積加算手 段 と、
前記垂直累積加算手段が出力する 累積加算後の高域成 分信号か ら、 さ ら に高域成分を抽出する 第 2 の H P F と、 前記第 2 の H P F が出力する信号を、 予め設定さ れた N点 ごと にそれぞれ累積加算する第 2 の N点累積加算手段 と、
前記第 2 の H P F が出力する 信号を、 時間方向 に演算 して前記映像信号の前記プロ ッ ク ノ イ ズ量を検出する第 2 のテ ンポ ラ リレフ ィ ルタ と、
前記第 2 の N点累積加算手段が累積加算によ っ て求め た N個の累積加算値の中か ら、 最大値 と 当該最大値の位置 と を求め る第 2 の最大値検出手段 と、
前記セ レ ク タ の選択に同期 し、 前記デジ タ ル復号化手 段が出力する前記ブロ ッ ク 境界情報 と、 前記第 2 の最大値 検出手段が出力する 前記最大値の位置 と の いずれか一方を 選択的に出力する第 2 のセ レ ク タ と、
前記第 2 のテ ンポ ラ ルフ ィ ル夕 が検出 し た前記ブロ ッ ク ノ イ ズ量を、 前記第 2 のセ レ ク タ が出 力する ブ ロ ッ ク境 界でマス ク 化 し、 当該位置に対応する垂直ブ ロ ッ ク 境界を 求め る第 2 のマス ク 化手段 と を備え る、 請求項 2 1 に記載 の ブロ ッ ク ノ イ ズ除去装置。
2 3 . 前記ブロ ッ ク境界平滑化手段は、
前記映像信号の水平高域成分のみを抽出する水平 H P
F と、
前記水平 H P F の 出 力 と 前記水平ブ ロ ッ ク 境界検出手 段の出力 と を乗算する第 1 の乗算手段 と、
前記映像信号か ら 前記第 1 の乗算手段の出力 を減算す る第 1 の減算手段 と、
前記映像信号の垂直高域成分のみを抽出する垂直 H P
F と、
前記垂直 H P F の 出 力 と 前記垂直ブ ロ ッ ク 境界検出手 段の出力 と を乗算する 第 2 の乗算手段 と、
前記映像信号か ら 前記第 2 の乗算手段の 出 力 を減算す る第 2 の減算手段 と を備え、 前記ブ ロ ッ ク ノ イ ズ量 に応 じ て前記 ブ ロ ッ ク ノ イ ズ を-除 去する こ と を特徴 と す る、 請求項 2 0 ま た は 2 2 に記載の ブ ロ ッ ク ノ イ ズ除去装置。
2 4 . 前記水平ブ ロ ッ ク 境界検出手段お よ び前記垂直ブ ロ ッ ク 境界検出手段が検出す る 前記 ブ ロ ッ ク ノ イ ズ量 に応 じ、 前記映像信号の輪郭部分 を強調す る 輪郭補正量 を 制御 する 輪郭補正手段 を さ ら に.備え る、 請求項 1 9 ~ 2 3 の い ずれか に記載の ブ ロ ッ ク ノ イ ズ除去装置。
2 5 . 前記水平ブ ロ ッ ク 境界検出手段お よ び前記垂直 ブ ロ ッ ク 境界検出手段が検出す る 前記 ブ ロ ッ ク ノ イ ズ量 に基 づいて、 入力す る 前記映像信号の判別 (種類や 品位等) を 行 う 制御手段 を さ ら に備 え、
前記制御手段が、 前記判別 の結果 を予 め定め た 形態で画 面上 にオ ン ス ク リ ー ン デ ィ ス プ レイ 表示する こ と を特徴 と する、 請求項 1 9 〜 2 4 の いずれか に記載の ブ ロ ッ ク ノ ィ ズ除去装置。
2 6 . 予め定め た 画像 ブ ロ ッ ク 毎 に 不可逆符号化処理が 施 さ れたデジ タ ル の 映像信号か ら、 当 該映像信号の複号化 処理 に伴 っ て生 じ る 垂直方向 の ブ ロ ッ ク ノ イ ズ を検出する 装置であ っ て、
前記映像信号 を 入力 し、 当 該映像信号の垂直高域成分の み を抽出す る垂直ハ イ パ ス フ ィ ル 夕 (以下、 H P F と 記す ) と、
前記垂直 H P F が出 力 す る 高域成分信号 を絶対値化する 絶対値化手段 と、
前記絶対値化手段が出 力 す る 絶対値化後の 前記高域成分 信号を、 水平方向 に累 積加算す る 水平累積加算手段 と、 ― 前記水平累積加算手段が出 力 す る 累積加算後 の高域成分 信号か ら、 さ ら に高域成分 を抽 出す る H P F と、
前記 H P F が 出 力す る 信号 を、 予 め設定 さ れた N 点 ( N は、 正の整数) ご と に それぞれ累 積加算する N 点累積加算 手段 と、
前記 H P F が出 力す る 信号 を、 時間方向 に演算 し て前記 映像信号の 前記 ブ ロ ッ ク ノ イ ズ量 を検出す る テ ン ポ ラ ル フ ィ ル夕 と、
前記 N 点累積加算手段が累積加算 に よ っ て求め た N個 の 累積加算値の 中 か ら、 最大値 と 当 該最大値の位置 と を求め る 最大値検出手段 と、
前記テ ン ポ ラ ル フ ィ ル 夕 が検出 し た前記 ブ ロ ッ ク ノ ィ ズ量を、 前記最大値検出手段が出 力 す る 前記最大値の位置 でマ ス ク 化 し、 当 該位置 に対応す る 垂直 ブ ロ ッ ク 境界 を求 め る マ ス ク 化手段 と を備え る、 垂直 ブ ロ ッ ク 境界検出装置
2 7 . 予め定め た画像 ブ ロ ッ ク 毎 に 不可逆符号化処理が 施 さ れたデ ジ タ ルの 映像信号か ら、 当 該映像信号の復号化 処理 に伴 っ て生 じ る 水平方向 の ブ ロ ッ ク ノ イ ズ を検出する 装置であ っ て、
前記映像信号 を入力 し、 当 該映像信号の垂直 高域成分の み を抽出す る 水平ハ イ パ ス フ ィ ル 夕 (以下、 H P F と 記す ) と、
前記水平 H P F が出 力 す る 高域成分信号 を絶対値化す る 絶対値化手段 と、 前記絶対値化手段が出 力す る 絶対値化後の 前記高域成-分 信号を、 垂直方向 に累積加算する 垂直累 積加算手段 と、 前記垂直累 積加算手段が出 力す る 累 積加算後の高域成分 信号か ら、 さ ら に高域成分 を抽出す る H P F と、
前記 H P F が出 力する 信号 を、 予め 設定 さ れた N 点 ( N は、 正の整数) ごと にそれぞれ累 積加算す る N 点累積加算 手段 と、
前記 H P F が出 力する 信号 を、 時間方向 に演算 し て前記 映像信号の 前記 ブ ロ ッ ク ノ イ ズ量 を検 出す る テ ンポ ラ ル フ ィ ル夕 と、
前記 N 点累積加算手段が累積加算 に よ っ て求め た N個 の 累積加算値 の 中 か ら、 最大値 と 当 該最大値の位置 と を求め る最大値検出手段 と、
前記テ ンポ ラ ル フ ィ ルタ が検出 し た 前記 ブ ロ ッ ク ノ ィ ズ量を、 前記最大値検出手段が出 力 す る 前記最大値の位置 でマス ク 化 し、 当 該位置 に対応す る 水平 ブ ロ ッ ク 境界 を求 め る マ ス ク 化手段 と を備 え る、 水平 ブ ロ ッ ク 境界検出装置
2 8 . 予め定 め た画像ブ ロ ッ ク 毎 に 不可逆符号化処理が 施さ れたデ ジ タ ルの映像信号 を処理す る 映像処理 シ ス テ ム にお いて、 再生す る ド ッ ト ク ロ ッ ク の制御 を行 う 装置で あ つ て、
水平同期パル ス に基づい て、 前記映像処理 シ ス テ ム で用 い る 前記 ド ッ ト ク ロ ッ ク を 生成す る ク ロ ッ ク 発生手段 と、 前記映像信号 を 入力 し、 当 該映像信号 に対す る 画面上 に お ける縦方向 の ブ ロ ッ ク 境界 (前記 ブ ロ ッ ク ノ イ ズの発生 位置) を検出す る 水平ブ ロ ッ ク 境界検出 手段 と、
前記水平ブ ロ ッ ク 境界検出手段が検出す る 前記 ブ ロ ッ ク 境界が、 周期的 に単一の最大点 ( ピー ク ) を 有す る よ う に 、 前記 ク ロ ッ ク 発生手段 の遅延量 を 可変す る 制御手段 と を 備え る、 ド ッ ト ク ロ ッ ク 制御装置。
2 9 . 前記水平ブ ロ ッ ク 境界検出手段は、
前記映像信号を入力 し、 当 該映像信号の垂直高域成分 の み を抽 出す る 水平ハ イ ノ \° ス フ ィ ル夕 (以下、 H P F と記 す) と、
前記水平 H P F が出 力 す る 高域成分信号 を絶対値化す る 絶対値化手段 と、
前記絶対値化手段が出 力 す る 絶対値化後 の 前記高域成 分信号 を、 垂直方向 に 累積加算す る 垂直累積加算手段 と、 前記垂直累積加算手段が出 力す る 累積加算後の 高域成 分信号か ら、 さ ら に 高域成分 を抽出す る H P F と、
前記 H P F が出 力 す る 信号 を、 予 め設定 さ れた N 点 ( N は、 正 の整数) ご と に それぞれ累 積加算す る N 点累 積加算 手段 と を備え る、 請求項 2 8 に記載の ド ッ ト ク ロ ッ ク 制御 装置。
3 0 . 予め定め た画像 ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れたデジタ ルの 映像信号か ら、 当 該映像信号の復号化 処理 に 伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 方法 を、 コ ン ピ ュ ー 夕 装置上で実行す る た め の プ ロ グ ラ ム を 記録 し た 媒体で あ っ て、
前記映像信号 に対 し、 当 該映像信号か ら 高域成分の み を 抽出す る ス テ ッ プ と、 前記抽 出 し た 高域成分信号 を絶対値化す る ス テ ツ プ と-、 前記絶対値化後の前記高域成分信号 を、 予 め定め た期間 にお い て累 積加算す る ス テ ッ プ と、
前記累 積加算 の結果 に基づ い て、 前記プ ロ ッ ク ノ イ ズの 周期性を検知す る ス テ ツ プ と、
前記検知 し た周期性の信号か ら、 ブ ロ ッ ク 境界 ( 前記ブ ロ ッ ク ノ イ ズの発生位置) を求め る ス テ ッ プ と を含む動作 環境を、 前記 コ ン ピ ュ ー タ 装置上で実現する た め の プ ロ グ ラ ム を記録 し た記録媒体。
3 1 . 前記 ブ ロ ッ ク 境界 に対 し て、 前記ブ ロ ッ ク ノ イ ズ を 除去す る ス テ ッ プを さ ら に含む、 請求項 3 0 に 記載の記 録媒体。
3 2 . 前記 ブ ロ ッ ク 境界 を求め る ス テ ッ プは、 前記 プ ロ ッ ク 境界 の位置 と それ以外の位置 と に 2 値化す る こ と を特 徵 と す る、 請求項 3 0 ま た は 3 1 に記載の記録媒体。
3 3 . 前記映像信号 に対 し、 当 該映像信号の予め 定 め た 複数の フ レ ー ム 間の信号差分 を求め る ス テ ツ プ と、
前記信号差分 の値が、 予め 定め た し き い値 を越え る か否 か に従 っ て、 除去すべき ブ ロ ッ ク ノ イ ズが存在す る 領域 ( 以下、 ノ イ ズ領域 と い う ) を判断す る ス テ ッ プ と、
前記ブ ロ ッ ク 境界 を 前記 ノ イ ズ領域でマ ス ク 化 し、 当 該 ノ イ ズ領域 に対応す る ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を さ ら に含む、 請求項 3 0 〜 3 2 の いずれか に 記載の 記録媒 体。
3 4 . 前記信 号差分 を求め る ス テ ッ プは、 現在 フ レ ー ム と 直前 フ レ ーム と の 間 の信号差分 を求め る こ と を特徴 と す る、 請求項 3 3 に記載の 記録媒体。
3 5 . 前記 ノ イ ズ領域 を判断す る ス テ ッ プは、 前記 し き い値を越え る 部分 と 前記 し き い値 を越え な い 部分 と に 2 値 化する こ と を特徴 と す る、 請求項 3 3 ま た は 3 4 に記載の 記録媒体。
3 6 . 前記 ノ イ ズ領域の う ち、 予め 定め た 小領域内 に分 布する ノ イ ズ部分を除外する ス テ ッ プを さ ら に含み、
前記 ノ イ ズ領域 に対応す る ブ ロ ッ ク 境界 を求め る ス テ ツ プは、 前記 ブ ロ ッ ク 境界 を、 前記除外後の前記 ノ イ ズ領域 でマ ス ク 化す る こ と を特徴 と す る、 請求項 3 3 〜 3 5 の い ずれか に記載の記録媒体。
3 7 . 前記各ス テ ッ プを、 前記映像信号の水平方向 ま た は垂直方向 の いずれか 1 方向、 若 し く は双方向 に 関 し て行 う こ と を特徵 と す る、 請求項 3 0 〜 3 6 の い ずれか に記載 の記録媒体。
3 8 . 各処理 を 前記映像信号の垂直方向 に 関 し て行 う 場 前記周 期性 を検知す る ス テ ッ プは、 入力 す る 前記映像信 号の フ ォ ー マ ッ ト に応 じ て、 検知 に 用 い る フ レ ー ム を逐次 変更す る こ と を特徴 と す る、 請求項 3 7 に記載の記録媒体
3 9 . 予 め定 め た画像ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れた デ ジ タ ル の 映像信号か ら、 当 該映像信号の復号化 処理 に伴 っ て生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 方法 を、 コ ン ピ ュ ー 夕 装置上で実行す る た め の プ ロ グ ラ ム を記録 し た 媒体で あ つ て、 前記映像信号 に対 し、 当 該映像信号 に対す る 画面上 にお け る 横方向 の ブ ロ ッ ク 境界 (前記 ブ ロ ッ ク ノ イ ズの発生位 置) お よ びブ ロ ッ ク ノ イ ズ量 を検出す る ス テ ッ プ と、
前記映像信号 に対 し、 当 該映像信号 に 対す る 画面上 にお け る縦方向 の前記ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ イ ズ量を 検出する ス テ ツ プ と、
前記横方向 を検出す る ステ ツ プお よ び前記縦方向 を検出 する ス テ ッ プの検出結果か ら、 縦横全方向の前記 ブ ロ ッ ク 境界を特定す る ス テ ッ プ と、
前記縦横全方 向 の ブ ロ ッ ク 境界 に応 じ、 前記映像信号に 対 し て予め定め た平滑化 を行 う ス テ ッ プ と を 含む動作環境 を、 前記 コ ン ピ ュ ー タ 装置上で実現す る た め の プ ロ グ ラ ム を記録 し た記録媒体。
4 0 . 前記横方向 を検出す る ス テ ッ プは、
前記映像信号の垂直高域成分 の み を抽出す る ス テ ッ プ と、
前記抽 出 し た高域成分信号 を 絶対値化す る ス テ ッ プ と
前記絶対値化後の 前記高域成分信号 を水平方向 に累積 加算する ス テ ツ プ と、
前記累 積加算後の 高域成分信号か ら さ ら に 高域成分 を 抽出する ス テ ツ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号を、 予め 設定 さ れた N 点 ( N は、 正 の 整数) ご と にそれ ぞれ累積加算す る ス テ ッ プ と、
前記 さ ら に 高域成分 を 抽 出す る ス テ ッ プが出 力 す る 信 号を、 時間方向 に演算 し て前記映像信号の前記 ブ ロ ッ ク-ノ ィ ズ量 を検出す る ス テ ッ プ と、
前記累積加算 に よ っ て求め た N個 の累積加算値の 中か ら、 最大値 と 当 該最大値の位置 と を求め る ス テ ッ プ と、 前記検出 し た ブ ロ ッ ク ノ イ ズ量 を 前記最大値の位置で マ ス ク 化 し、 当 該位置 に対応す る 垂直 ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を含み、
前記縦方向 を検出す る ス テ ッ プは、
前記映像信号の水平高域成分 の み を抽出す る ス テ ッ プ と、
前記抽出 し た高域成分信号 を絶対値化す る ス テ ッ プ と 前記絶対値化後の前記高域成分信号 を垂直方向 に 累積 加算す る ス テ ッ プ と、
前記累積加算後の高域成分信号か ら さ ら に 高域成分 を 抽出す る ス テ ッ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号を、 予 め 設定 さ れた N 点 ご と に それぞれ累 積加算す る ス テ ツ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号 を、 時間方向 に演算 し て前記映像信号の 前記 ブ ロ ッ ク ノ ィ ズ量 を検出す る ス テ ッ プ と、
前記累 積加算 に よ っ て求め た N個 の 累 積加算値の 中 か ら、 最大値 と 当 該最大値 の位置 と を 求め る ス テ ッ プ と、 前記検出 し た プ ロ ッ ク ノ ィ ズ量 を 前記最大値の位置で マ ス ク 化 し、 当 該位置 に 対応す る 垂直 ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を含む、 請求項 3 9 に記載の記録媒体。
4 1 . 予め定めた画像 ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れた 映像信号か ら、 当 該映像信号の複号化処理 に伴 つ て 生 じ る ブ ロ ッ ク ノ イ ズ を検出す る 方法 を、 コ ン ピ ュ ー タ 装置上で実行す る た め の プ ロ グ ラ ム を記録 し た媒体で あ つ て、
ア ナ ロ グの前記映像信号 をデジ タ ル に変換す る ス テ ッ プ と、
符号化 さ れたデジ タ ル の前記映像信号 を復号化す る ス テ ッ プ と、
前記復号化 し た ブ ロ ッ ク 境界情報 を 出 力す る ス テ ッ プ と 外部か ら の指示 に従 っ て、 前記変換す る ス テ ッ プが出 力 す る 映像信号ま た は前記復号化す る ス テ ッ プが出 力 す る 映 像信号の いずれか一方の 当 該映像信号 を選択す る ス テ ッ プ と、
前記選択す る ス テ ッ プが出 力 し た映像信号 に対 し、 画面 上 にお け る横方向の ブ ロ ッ ク 境界 (前記 ブ ロ ッ ク ノ イ ズの 発生位置) お よ びブ ロ ッ ク ノ イ ズ量 を検出す る ス テ ッ プ と 前記選択す る ス テ ッ プが出 力 し た映像信号 に対 し、 画面 上 にお け る縦方向 の 前記 ブ ロ ッ ク 境界お よ びブ ロ ッ ク ノ ィ ズ量を検出する ス テ ッ プ と、
前記横方向 を検出す る ス テ ッ プお よ び前記縦方向 を検出 す る ス テ ッ プの検出 結果か ら、 縦横全方向 の 前記 ブ ロ ッ ク 境界を特定する ス テ ッ プ と、 前記縦横全方向の ブ ロ ッ ク 境界 に応 じ、 前記映像信号-に 対 し て予 め 定め た平滑化処理 を施すス テ ッ プ と を さ ら に含 み、
前記横方向 を検出す る ス テ ッ プお よ び前記縦方向 を検出 する ス テ ッ プは、 前記変換す る ス テ ッ プが出 力す る 映像信 号の場合、 各 々 の検出結果 に基づい た前記プ ロ ッ ク 境界を 、 前記復号化す る ス テ ツ プが出 力す る 映像信号の場合、 前 記復号化 し た ブ ロ ッ ク 境界情報 に従 っ た ブ ロ ッ ク 境界 を 出 力する こ と を特徴 と する 動作環境 を、 前記 コ ン ピ ュ ー タ 装 置上で実現す る た め の プ ロ グ ラ ム を 記録 し た記録媒体。
4 2 . 前記横方向 を検出す る ス テ ッ プは、
前記映像信号の垂直高域成分 の み を抽出す る ス テ ッ プ と、
前記抽 出 し た高域成分信号 を絶対値化す る ス テ ッ プ と
前記絶対値化後の前記高域成分信号 を水平方向 に 累積 加算す る ス テ ッ プ と、
前記累 積加算後の高域成分信号か ら さ ら に高域成分を 抽出す る ス テ ツ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号を、 予 め 設定 さ れた N 点 ( N は、 正 の整数) ご と にそれ ぞれ累積加算す る ス テ ッ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号 を、 時間方向 に演算 し て前記映像信号 の前記 ブ ロ ッ ク ノ ィ ズ量 を検 出す る ス テ ッ プ と、
前記累 積加算 に よ っ て求め た N個 の 累積加算値の 中 力、 ら、 最大値 と 当 該最大値の位置 と を求め る ス テ ッ プ と、 - 前記選択す る ス テ ッ プに 同期 し、 前記 ブ ロ ッ ク 境界情 報 と 前記最大値の位置 と の いずれか一方 を選択的 に 出 力す る ス テ ッ プ と、
前記ブ ロ ッ ク ノ イ ズ量 を、 前記選択的 に 出 力 す る ス テ ッ プが出 力 す る ブ ロ ッ ク 境界でマ ス ク 化 し、 当 該位置 に対 応する 垂直ブ ロ ッ ク 境界 を求め る ス テ ッ プ と を含み、
前記縦方向 を検出す る ス テ ツ プは、
前記映像信号の水平高域成分の み を抽出す る ス テ ッ プ と、
前記抽出 し た 高域成分信号を絶対値化す る ス テ ッ プ と 前記絶対値化後の前記高域成分信号 を垂直方向 に累積 加算する ス テ ツ プ と、
前記累積加算後の 高域成分信号か ら さ ら に 高域成分 を 抽出する ス テ ッ プ と、
前記 さ ら に 高域成分 を抽 出す る ス テ ッ プが出 力 す る 信 号 を、 予め設定 さ れた N 点 ご と に それぞれ累 積加算す る ス テ ツ フ と、
前記さ ら に 高域成分 を抽出す る ス テ ッ プが出 力 す る 信 号 を、 時間方向 に演算 し て前記映像信号 の 前記 ブ ロ ッ ク ノ ィ ズ量を検出す る ス テ ッ プ と、
前記累積加算 に よ っ て求め た N 個 の 累 積加算値の 中か ら、 最大値 と 当 該最大値の位置 と を求 め る ス テ ッ プ と、 前記選択す る ス テ ッ プに 同期 し、 前記 ブ ロ ッ ク 境界情 報 と 前記最大値の位置 と の い ずれか一方 を選択的 に 出 力す る ス テ ッ プ と、
前記 ブ ロ ッ ク ノ イ ズ量 を、 前記選択的 に 出 力 す る ス テ ッ プが出 力 す る ブ ロ ッ ク 境界でマ ス ク 化 し、 当 該位置 に対 応する 水平 ブ ロ ッ ク 境界 を 求め る ス テ ッ プ と を含む、 請求 項 4 1 に記載の記録媒体。
4 3 . 前記平滑化 を行 う ス テ ッ プは、
前記映像信号の水平高域成分のみ を抽 出す る 水平ス テ ッ プ と、
前記水平ス テ ッ プの 出 力 と 前記縦検出 ス テ ッ プの 出 力 と を乗算す る 水平乗算ス テ ッ プ と、
前記映像信号か ら 前記水平乗算ス テ ッ プの 出 力 を減算 す る ス テ ッ プ と、
前記映像信号の垂直高域成分の み を抽出す る 垂直ス テ ッ プ と、
前記垂直ス テ ッ プの 出 力 と 前記横検出 ス テ ッ プの 出力 と を乗算す る 垂直乗算ス テ ツ プ と、
前記映像信号か ら 前記垂直乗算 ス テ ッ プの 出 力 を減算 す る ス テ ッ プ と を さ ら に含み、
前記ブ ロ ッ ク ノ イ ズ量 に応 じ て前記 ブ ロ ッ ク ノ イ ズを 除 去する こ と を特徴 と する、 請求項 4 0 ま た は 4 2 に記載の 記録媒体。
4 4 . 前記縦方向 を検出す る ス テ ッ プお よ び前記横方向 を検出す る ス テ ッ プが検出 す る 前記 ブ ロ ッ ク ノ イ ズ量 に応 じ、 前記映像信号の輪郭部分 を強調す る 輪郭補正量 を 制御 する ス テ ッ プを さ ら に含む、 請求項 3 9 〜 4 3 の い ずれ力 に記載の記録媒体。
4 5 . 前記縦方向を検出する ス テ ッ プおよび前記横方-向 を検出する ステ ッ プが検出する 前記ブロ ッ ク ノ イ ズ量に基 づいて、 入力する 前記映像信号の判別 (種類や品位等) を 行 う ス テ ッ プを さ ら に含み、
前記判別 を行 う ステ ッ プが、 前記判別の結果 を予め定め た形態で画面上にオ ンス ク リ ー ンディ ス プ レイ 表示する こ と を特徴 とする、 請求項 3 9 〜 4 4 の いずれか に記載の記 録媒体。
4 6 . 予め定めた画像ブロ ッ ク 毎に不可逆符号化処理が 施さ れたデジタ ルの映像信号か ら、 当該映像信号の復号化 処理に伴っ て生 じ る垂直 ま た は水平方向のプ ロ ッ ク ノ イ ズ を検出する 方法を、 コ ン ピ ュ ー タ 装置上で実行する ための プロ グ ラ ム を記録 した媒体であ っ て、
前記映像信号の垂直また は水平高域成分のみ を抽出する ス テ ッ プ と、
前記抽出 し た高域成分信号を絶対値化する ス テ ッ プと、 前記絶対値化後の前記高域成分信号を水平 ま た は垂直方 向に累積加算する ス テ ッ プと、
前記累積加算後の高域成分信号か ら さ ら に高域成分を抽 出する ス テ ッ プと、
前記さ ら に高域成分を抽出する ス テ ッ プが出 力する 信号 を、 予め設定さ れた N点 ( N は、 正の整数) ご と にそれぞ れ累積加算する ス テ ッ プと、
前記さ ら に高域成分を抽出する ス テ ッ プが出力 する 信号 を、 時間方向 に演算 し て前記映像信号の前記ブ ロ ッ ク ノ ィ ズ量を検出する ス テ ッ プ と、 前記累 積加算 に よ っ て求め た N個 の 累 積加算値の 中 力 ら 、 最大値 と 当 該最大値の位置 と を求め る ス テ ッ プ と、
前記検出 し た ブ ロ ッ ク ノ イ ズ量 を 前記最大値 の位置でマ ス ク 化 し、 当 該位置 に対応す る 垂直 ま た は水平 ブ ロ ッ ク 境 界 を求め る ス テ ッ プ と を 含む動作環境 を、 前記 コ ン ビ ユ ー 夕 装置上で実現す る た め の プ ロ グ ラ ム を記録 し た記録媒体
4 7 . 予 め定め た画像 ブ ロ ッ ク 毎 に不可逆符号化処理が 施 さ れたデ ジ タ ルの 映像信号 を処理す る 映像処理 シ ス テム にお い て、 再生す る ド ッ ト ク ロ ッ ク の 制御 を 行 う 方法 を、 コ ン ピ ュ ー タ 装置上で実行す る た め の プ ロ グ ラ ム を記録 し た媒体で あ っ て、
前記映像信号 を 入 力 し、 当 該映像信号 に対す る 画面上に お け る 縦方向の ブ ロ ッ ク 境界 (前記 ブ ロ ッ ク ノ イ ズの発生 位置) を検出す る ス テ ッ プ と、
水平同期パルス に基づい て、 前記映像処理 シ ス テム で用 い る 前記 ド ッ ト ク ロ ッ ク を 生成す る ク ロ ッ ク 発 生装置 に対 し、 前記ス テ ッ プが検出す る 前記 ブ ロ ッ ク 境界カ^ 周期的 に単一の最大点 ( ピー ク ) を有す る よ う に ク ロ ッ ク 遅延量 を可変す る ス テ ッ プ と を 含む動作環境 を、 前記 コ ン ビ ユ ー 夕 装置上で実現す る た め の プ ロ グ ラ ム を 記録 し た記録媒体
4 8 . 前記検 出す る ス テ ッ プは、
前記映像信号の水平高域成分 の み を抽 出す る ス テ ッ プ と、
前記抽 出 し た高域成分信号 を 絶対値化す る ス テ ッ プ と 前記絶対値化後の前記高域成分信号を垂直方向 に累積 加算する ス テ ッ プと、
前記累積加算後の高域成分信号か ら さ ら に高域成分を 抽出する ス テ ッ プと、
前記さ ら に高域成分を抽出する ス テ ッ プが出力する信 号を、 予め設定さ れた N点 ( N は、 正の整数) ごと にそれ ぞれ累積加算する ス テ ッ プと を さ ら に含む、 請求項 4 7 に 記載の記録媒体。
PCT/JP1999/002589 1998-05-22 1999-05-18 Block noise detector and block noise eliminator WO1999062264A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP99919649A EP0998146A4 (en) 1998-05-22 1999-05-18 BLOCK NOISE DETECTOR AND BLOCK NOISE REDUCTION SYSTEM
US09/463,215 US6738528B1 (en) 1998-05-22 1999-05-18 Block noise detector and block noise eliminator
KR10-1999-7012440A KR100497606B1 (ko) 1998-05-22 1999-05-18 블럭노이즈 검출장치 및 블럭노이즈 제거장치

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP14088798 1998-05-22
JP10/140887 1998-05-22

Publications (1)

Publication Number Publication Date
WO1999062264A1 true WO1999062264A1 (en) 1999-12-02

Family

ID=15279100

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP1999/002589 WO1999062264A1 (en) 1998-05-22 1999-05-18 Block noise detector and block noise eliminator

Country Status (5)

Country Link
US (1) US6738528B1 (ja)
EP (2) EP1775956B1 (ja)
KR (1) KR100497606B1 (ja)
CN (3) CN1164116C (ja)
WO (1) WO1999062264A1 (ja)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100282147B1 (ko) 1998-11-13 2001-02-15 구자홍 압축 영상 복원 방법
US7003174B2 (en) 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
US7019791B2 (en) * 2001-11-09 2006-03-28 Hitachi, Ltd. Video processing device
FR2841423A1 (fr) * 2002-06-25 2003-12-26 Koninkl Philips Electronics Nv Procede de detection d'artefacts de bloc
FR2841424A1 (fr) * 2002-06-25 2003-12-26 Koninkl Philips Electronics Nv Procede de detection d'artefacts de bloc
EP1527610A1 (en) * 2002-07-31 2005-05-04 Koninklijke Philips Electronics N.V. Dynamic detection of blocking artefacts
GB0222562D0 (en) * 2002-09-28 2002-11-06 Koninkl Philips Electronics Nv Method and apparatus for encoding image and or audio data
US7463688B2 (en) 2003-01-16 2008-12-09 Samsung Electronics Co., Ltd. Methods and apparatus for removing blocking artifacts of MPEG signals in real-time video reception
US7489829B2 (en) * 2003-03-11 2009-02-10 Sightic Vista Ltd. Adaptive low-light image processing
US7218794B2 (en) * 2003-04-10 2007-05-15 Samsung Electronics Co., Ltd. Method for detecting grid in block-based compressed video
JP2007501561A (ja) * 2003-08-06 2007-01-25 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ブロックアーティファクトの検出
KR20050015723A (ko) * 2003-08-07 2005-02-21 삼성전자주식회사 동영상 화면 재생시 발생하는 불량 요소 검출 장치 및검출 방법
JP4526315B2 (ja) * 2004-07-07 2010-08-18 オリンパス株式会社 被検体内導入装置および被検体内情報取得システム
GB2418093B (en) 2004-09-09 2007-03-28 Imagination Tech Ltd Method and apparatus for removing visible artefacts in video images
KR100601702B1 (ko) * 2004-09-30 2006-07-18 삼성전자주식회사 Osd 데이터 출력 제어 방법 및 장치
US7136536B2 (en) * 2004-12-22 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filter
KR100757392B1 (ko) * 2005-07-29 2007-09-10 닛뽕빅터 가부시키가이샤 노이즈검출장치 및 방법과, 이를 이용한 노이즈저감장치 및방법
JP2007067625A (ja) * 2005-08-30 2007-03-15 Matsushita Electric Ind Co Ltd カメラシステムにおけるフィルタ補正回路
JP4961182B2 (ja) * 2005-10-18 2012-06-27 株式会社リコー ノイズ除去装置、ノイズ除去方法、ノイズ除去プログラム及び記録媒体
JP2007206644A (ja) * 2006-02-06 2007-08-16 Seiko Epson Corp 画像表示システム,画像表示方法,画像表示プログラム,記録媒体,データ処理装置,画像表示装置
KR100734373B1 (ko) 2006-03-07 2007-07-03 엘지전자 주식회사 영상의 내용에 기반한 잡음 제거 장치 및 방법
CN101867679B (zh) * 2006-03-27 2013-07-10 三洋电机株式会社 缩略图生成装置及摄像装置
DE602007000224D1 (de) 2006-04-18 2008-12-18 Pioneer Corp Vorrichtung zum Entfernen des Blockrauschens
US7986855B2 (en) * 2007-02-16 2011-07-26 Mitsubishi Electric Corporation Block noise detector and detection method, and block noise reducer and reduction method
CN101193261B (zh) * 2007-03-28 2010-07-21 腾讯科技(深圳)有限公司 一种视频通信系统及方法
US8363734B2 (en) * 2008-01-12 2013-01-29 Huaya Microelectronics Multi-directional comb filtering in a digital video decoder
JP5130983B2 (ja) * 2008-03-25 2013-01-30 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP2010004111A (ja) * 2008-06-18 2010-01-07 Nec Electronics Corp 画像処理装置および画像処理方法並びにプログラム
US8559746B2 (en) 2008-09-04 2013-10-15 Silicon Image, Inc. System, method, and apparatus for smoothing of edges in images to remove irregularities
EP2362347A4 (en) * 2008-12-22 2012-07-18 Mitsubishi Electric Corp IMAGE PROCESSING APPARATUS AND METHOD, AND IMAGE DISPLAY APPARATUS
JP4994355B2 (ja) * 2008-12-22 2012-08-08 三菱電機株式会社 画像処理装置及び方法並びに画像表示装置
TWI422228B (zh) * 2009-01-15 2014-01-01 Silicon Integrated Sys Corp 去方塊濾波方法及影像處理裝置
EP2396966B1 (en) * 2009-02-10 2018-09-05 Lattice Semiconductor Corporation Block noise detection and filtering
US8363978B2 (en) * 2009-03-03 2013-01-29 Samsung Electronics Co., Ltd. System and method for block edge location with varying block sizes and offsets in compressed digital video
US8363974B2 (en) * 2009-07-21 2013-01-29 Qualcomm Incorporated Block artifact reducer
JP5418674B2 (ja) * 2009-10-29 2014-02-19 日本電気株式会社 H.264インループ・デブロッキング・フィルタの並列実行装置及び方法
JP4703759B2 (ja) * 2009-11-27 2011-06-15 株式会社東芝 画像処理装置および同装置における画像処理方法
CN102202025B (zh) * 2010-03-23 2013-11-06 卓胜微电子(上海)有限公司 脉冲干扰检测与消除方法
CN103026708B (zh) * 2010-07-28 2018-01-26 马维尔国际有限公司 数字视频信号中的块压缩赝像检测
US8842930B2 (en) * 2011-04-22 2014-09-23 Panasonic Corporation Image processing device and image processing method
JP2012244319A (ja) * 2011-05-18 2012-12-10 Funai Electric Co Ltd デジタル放送受信機
US8908101B2 (en) * 2012-03-14 2014-12-09 Samsung Techwin Co., Ltd. Method and apparatus for reducing noise of video
US9712348B1 (en) * 2016-01-15 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. System, device, and method for shaping transmit noise
CN107579734B (zh) * 2017-09-28 2020-12-29 北京集创北方科技股份有限公司 信号处理方法、装置、存储介质和处理器
CN108923639B (zh) * 2018-08-28 2020-03-31 南京微盟电子有限公司 一种消除原边反馈开关电源音频噪声的电路

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0346482A (ja) * 1989-07-14 1991-02-27 Kokusai Denshin Denwa Co Ltd <Kdd> 動画像符号化のブロック歪除去方法および装置
JPH04180381A (ja) * 1990-11-14 1992-06-26 Matsushita Electric Ind Co Ltd 画像信号の復号化装置
JPH09247672A (ja) * 1996-03-07 1997-09-19 Matsushita Electric Ind Co Ltd 画像復号方法および画像復号装置

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5758687A (en) * 1980-09-27 1982-04-08 Taisho Pharmaceut Co Ltd Antibiotic
US5625714A (en) * 1991-01-10 1997-04-29 Olympus Optical Co., Ltd. Image signal decoding device capable of removing block distortion with simple structure
KR0148130B1 (ko) * 1992-05-18 1998-09-15 강진구 블럭킹아티팩트를 억제시키는 부호화/복호화 방법 및 그 장치
US5410350A (en) 1992-10-28 1995-04-25 Sony Corporation Motion picture encoding and/or decoding system
JPH06327002A (ja) * 1993-05-11 1994-11-25 Olympus Optical Co Ltd 動画像符号化装置
US5426673A (en) * 1994-02-09 1995-06-20 The Regents Of The University Of California Discrete cosine transform-based image coding and decoding method
KR970010087B1 (en) * 1994-04-30 1997-06-21 Daewoo Electronics Co Ltd Postprocessing method for digital image
EP0721286A3 (en) * 1995-01-09 2000-07-26 Matsushita Electric Industrial Co., Ltd. Video signal decoding apparatus with artifact reduction
US5675666A (en) * 1995-03-02 1997-10-07 Sony Corportion Image data compression method and apparatus with pre-processing to compensate for the blocky effect
US5852475A (en) 1995-06-06 1998-12-22 Compression Labs, Inc. Transform artifact reduction process
US5751861A (en) * 1995-06-30 1998-05-12 Intel Corporation Reducing residual artifacts in video coding schemes with integer motion compensation
US5850294A (en) * 1995-12-18 1998-12-15 Lucent Technologies Inc. Method and apparatus for post-processing images
KR100242636B1 (ko) * 1996-03-23 2000-02-01 윤종용 블록화효과 및 링잉노이즈 감소를 위한 신호적응후처리시스템
KR100242637B1 (ko) * 1996-07-06 2000-02-01 윤종용 동보상된 영상의 블록화효과 및 링잉노이즈 감소를 위한 루프필터링방법
KR100219628B1 (ko) * 1997-02-15 1999-09-01 윤종용 루프필터링 방법 및 루프필터
JP3095140B2 (ja) * 1997-03-10 2000-10-03 三星電子株式会社 ブロック化効果の低減のための一次元信号適応フィルター及びフィルタリング方法
US6226045B1 (en) * 1997-10-31 2001-05-01 Seagate Technology Llc Dot clock recovery method and apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0346482A (ja) * 1989-07-14 1991-02-27 Kokusai Denshin Denwa Co Ltd <Kdd> 動画像符号化のブロック歪除去方法および装置
JPH04180381A (ja) * 1990-11-14 1992-06-26 Matsushita Electric Ind Co Ltd 画像信号の復号化装置
JPH09247672A (ja) * 1996-03-07 1997-09-19 Matsushita Electric Ind Co Ltd 画像復号方法および画像復号装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP0998146A4 *

Also Published As

Publication number Publication date
CN1516473A (zh) 2004-07-28
KR20010014304A (ko) 2001-02-26
KR100497606B1 (ko) 2005-07-01
EP0998146A4 (en) 2001-02-28
EP0998146A1 (en) 2000-05-03
CN1272286A (zh) 2000-11-01
CN1233172C (zh) 2005-12-21
CN1164116C (zh) 2004-08-25
EP1775956B1 (en) 2011-08-03
CN100369488C (zh) 2008-02-13
CN1527605A (zh) 2004-09-08
US6738528B1 (en) 2004-05-18
EP1775956A1 (en) 2007-04-18

Similar Documents

Publication Publication Date Title
WO1999062264A1 (en) Block noise detector and block noise eliminator
JP4383581B2 (ja) ブロックノイズ検出装置およびブロックノイズ除去装置
JP3563422B2 (ja) フィルム/ビデオ検出器
JP3215952B2 (ja) 符号化装置及び復号化装置
US8218083B2 (en) Noise reducer, noise reducing method, and video signal display apparatus that distinguishes between motion and noise
US6904096B2 (en) Video data processing device and video data processing method
JPH06165122A (ja) 多様性信号処理装置
US8023765B2 (en) Block noise removal device
US7974491B2 (en) Block noise removal device
JP5044886B2 (ja) ブロックノイズ低減装置および画像表示装置
KR101007838B1 (ko) 정보 처리 장치 및 기록 매체
JPWO2005004489A1 (ja) ブロック歪検出装置及びブロック歪検出方法、並びに映像信号処理装置
JP4495881B2 (ja) ブロック歪み除去装置
JPH1198475A (ja) 画像信号への情報付加方法および情報付加装置
US20010022889A1 (en) Video recording and playback apparatus and method
JP2004201010A (ja) 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体
JP2012019380A (ja) 画像処理装置及び画像処理方法
JP3916505B2 (ja) シーン変化検出回路
JP2010199994A (ja) 画像処理装置
JP2008124626A (ja) 画像記録制御装置および画像記録制御方法
JP2002247413A (ja) 映像ノイズ除去装置
JP3930360B2 (ja) 動画像復号装置
JP2002016924A (ja) トランスコーダ装置およびトランスコード方法
JP4102620B2 (ja) 映像方式変換装置
JP5257291B2 (ja) 映像信号処理装置、ドット妨害検出方法およびプログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 99800796.X

Country of ref document: CN

AK Designated states

Kind code of ref document: A1

Designated state(s): CN KR US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

WWE Wipo information: entry into national phase

Ref document number: 1019997012440

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 1999919649

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 09463215

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWP Wipo information: published in national office

Ref document number: 1999919649

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 1019997012440

Country of ref document: KR

WWG Wipo information: grant in national office

Ref document number: 1019997012440

Country of ref document: KR

WWW Wipo information: withdrawn in national office

Ref document number: 1999919649

Country of ref document: EP