WO2010007933A1 - 映像信号処理装置及び映像表示装置 - Google Patents

映像信号処理装置及び映像表示装置 Download PDF

Info

Publication number
WO2010007933A1
WO2010007933A1 PCT/JP2009/062512 JP2009062512W WO2010007933A1 WO 2010007933 A1 WO2010007933 A1 WO 2010007933A1 JP 2009062512 W JP2009062512 W JP 2009062512W WO 2010007933 A1 WO2010007933 A1 WO 2010007933A1
Authority
WO
WIPO (PCT)
Prior art keywords
sharpening
video signal
smoothing
input
function
Prior art date
Application number
PCT/JP2009/062512
Other languages
English (en)
French (fr)
Inventor
大塚浩司
萬羽修
萩原泰文
小山雄輔
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to CN2009801274449A priority Critical patent/CN102100060A/zh
Priority to JP2010520841A priority patent/JP5279830B2/ja
Priority to US13/054,003 priority patent/US8351734B2/en
Priority to EP09797858A priority patent/EP2315431A4/en
Publication of WO2010007933A1 publication Critical patent/WO2010007933A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • H04N5/205Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/409Edge or detail enhancement; Noise or error suppression
    • H04N1/4092Edge or detail enhancement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/142Edging; Contouring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation

Definitions

  • the present invention relates to a video signal processing technique, and relates to a video signal processing technique for performing a sharpening process / smoothing process of a video using a spatial filter.
  • the input video contains various noises and distortions. By removing such factors of image degradation, the image can be easily viewed, and useful information can be extracted and emphasized.
  • Typical techniques for image processing include 1) contrast enhancement by density conversion, 2) smoothing for noise removal, and 3) sharpening for enhancing edges. This corresponds to enhancement processing of low frequency components / high frequency components.
  • a sharp image obtained by emphasizing a change in density value for such an image is called sharpening.
  • One of the sharpening methods is a method of subtracting the result of filtering the original image from the original image (sharpening operator).
  • the smoothing process for example, there is a method of moving a 3 ⁇ 3 operator along the original image and calculating the value of each element of the operator and the pixel value of the corresponding original image.
  • FIG. 30 is a diagram illustrating the relationship between the edge amount input (X axis) and the edge amount output (Y axis) of the sharpening process described in Example 1 of Patent Document 1 below.
  • the sharpening processing algorithm unsharp mask (USM) will be described with reference to FIG. 1A and FIG.
  • the difference (edge amount input) between the input video signal (RGB or YUV) and the surrounding input image signal (spatial filter output) is obtained.
  • the spatial filter output is data obtained by smoothing the input video signal.
  • smoothing is synonymous with noise removal.
  • the edge amount is multiplied and added to the target pixel data.
  • a threshold Th
  • gain
  • Sharpening to enhance the sharpness.
  • FIG. 30 when the absolute value of the edge amount input is smaller than the threshold Th, the edge amount input is regarded as noise and sharpening is not performed. This is because the image quality is better when sharpening is not performed, and a range regarded as noise can be designated by a threshold value.
  • the gain is a parameter for converting the edge amount input, and the sharpening strength can be adjusted by the magnitude of the gain.
  • FIG. 31 is a diagram illustrating an outline of a technique described in Example 4 of Patent Document 1 for performing smoothing and sharpening.
  • is a parameter indicating the strength of smoothing
  • is a parameter indicating the strength of sharpening
  • is an intersection parameter with the edge amount output (Y) axis
  • the threshold parameter Th is a smoothing transformation and This is an edge amount input value for switching sharpening conversion.
  • FIGS. 32 to 39 are examples of edge amount input / output characteristics by parameter independent adjustment with respect to the basic conversion characteristics shown in FIG. 31 shown in Example 4 of the above-mentioned Patent Document 1, and ⁇ , It is a figure which shows the input-output characteristic example of the edge amount at the time of changing a parameter small / large largely independently based on (beta), (gamma), Th.
  • FIG. 32 is a diagram showing an example when only ⁇ is changed from FIG. In this case, even if ⁇ indicating the strength of smoothing is reduced, as shown in FIG. 32, since the slope of the smoothing characteristic is reduced, the input / output characteristics of the smoothing near the threshold value and the sharpening are input. The continuity of output characteristics cannot be maintained.
  • the sharpening characteristic has a larger slope, so that the intersection with the X axis is closer to the origin, and smoothing is entered near the threshold. Continuity cannot be maintained in the input / output characteristics of the output characteristics and sharpening.
  • An object of the present invention is to reduce the number of parameters to be used and to maintain continuity in input / output characteristics of smoothing and input / output characteristics even when adjustment is performed by one parameter. Another object is to increase the degree of freedom of parameter adjustment.
  • a video signal circuit that performs smoothing processing and sharpening processing on an input video signal to generate an output video signal, and outputs an edge amount input (X) of the input video signal as an edge amount output.
  • smoothing is performed when X of the XY plane defined by the edge amount input X and the edge amount output Y passes through the origin in the positive range and 0 ⁇ X ⁇ Th1.
  • a smoothing process is performed when 0 ⁇ X ⁇ Th1, passing through a first function (function 1) for processing and a point (Th1, 0) on the X-axis having the threshold value as an X value, and X> Th1
  • a second function (function 2) that sometimes performs a sharpening process, a smoothing coefficient ( ⁇ 1) that determines the strength of the smoothing process, a sharpening coefficient ( ⁇ 1) that determines the strength of the sharpening process,
  • a threshold (Th1) that determines switching between the smoothing process and the sharpening process.
  • a video signal processing circuit is provided that determines input / output characteristics of a video signal using one or more of them as a variable parameter.
  • the video signal circuit performs smoothing processing and sharpening processing on the input video signal to generate an output video signal, and converts an edge amount input (X) of the input video signal into an edge amount output (Y).
  • a video signal processing circuit determines input / output characteristics of a video signal as a parameter.
  • the smoothing coefficients ( ⁇ 1, ⁇ 2) are coefficients of the first function (function 1)
  • the sharpening coefficients ( ⁇ 1, ⁇ 2) are coefficients of the second function (function 2).
  • the coefficient indicates a slope when the functions 1 and 2 are straight lines, for example. In the case of a curve, it indicates the multiplication factor of the variable and constant.
  • the present invention may be a display device characterized by having a display unit that performs display based on the output video signal of the video signal processing circuit described above. Further, a portable terminal device including the display device may be used. According to another aspect of the present invention, there is provided a video signal processing method which performs smoothing processing and sharpening processing on an input video signal to obtain an output video signal, wherein an edge amount input (X) of the input video signal is set as an edge.
  • an XY input / output between an edge amount input X which is a difference between an input video signal and an output signal obtained by processing a spatial filter, and an edge amount output Y obtained by converting the edge amount input X.
  • an edge amount input X which is a difference between an input video signal and an output signal obtained by processing a spatial filter
  • an edge amount output Y obtained by converting the edge amount input X.
  • different output video signals can be obtained for each of the three parameters, and high-quality video can be obtained even during enlargement / reduction (eg, vertical display of TV broadcast, horizontal display). Further, since adjustments can be made in accordance with the characteristics (resolution, screen size, video bit number) of the device that displays the video, a high-quality video can be obtained. Furthermore, the degree of freedom for parameter adjustment can be increased.
  • FIG. 3 is a diagram showing an example of XY conversion characteristics when only ⁇ is changed in FIG.
  • FIG. 3 is a diagram illustrating an example of XY conversion characteristics when only ⁇ is increased in FIG. 2.
  • FIG. 3 is a diagram showing an example of XY conversion characteristics when only ⁇ is changed in FIG.
  • FIG. 3 is a diagram illustrating an example of XY conversion characteristics when only ⁇ is increased in FIG.
  • FIG. 3 is a diagram illustrating an example of XY conversion characteristics when only Th is changed in FIG. 2.
  • FIG. 3 is a diagram illustrating an example of XY conversion characteristics when only Th is changed in FIG. 2.
  • It is a conversion type
  • It is a functional block diagram showing a first example of a video signal conversion circuit according to the first embodiment of the present invention. It is a figure which shows the example of 1 structure of the display apparatus which has the video signal processing circuit (sharpening smoothing process part) by this Embodiment.
  • FIG. 1 It is a figure which shows the outline
  • FIG. 25 it is the figure which showed and compared the example of the smoothing process result at the time of expanding a display twice. It is the figure which showed and compared the example of the sharpening process result based on this Embodiment and the conventional video processing technique.
  • FIG. 27 it is the figure which showed and compared the example of the result of the sharpening process at the time of expanding a display twice.
  • FIG. 28 it is the figure which compared the result of the smoothing process and sharpening process at the time of reducing a display by 1/2 time, showing an example.
  • FIG. 32 is a diagram illustrating an example of XY conversion characteristics when only ⁇ is increased in FIG. 31.
  • FIG. 32 is a diagram showing an example of XY conversion characteristics when only ⁇ is changed in FIG. 31;
  • FIG. 32 is a diagram illustrating an example of an XY conversion characteristic when only ⁇ is largely changed in FIG. FIG.
  • FIG. 32 is a diagram showing an example of XY conversion characteristics when only ⁇ is changed to be smaller in FIG.
  • FIG. 32 is a diagram illustrating an example of XY conversion characteristics when only ⁇ is increased in FIG. 31.
  • FIG. 32 is a diagram illustrating an example of XY conversion characteristics when only Th is changed in FIG. 31.
  • FIG. 32 is a diagram showing an example of XY conversion characteristics when only Th is changed in FIG. 31. It is a figure which shows the example which changed the conversion in FIG. 18 which is a figure which shows the outline
  • 20 is a conversion formula showing an example in which FIG. 19A showing a second example of the video signal conversion circuit according to the second embodiment of the present invention is changed.
  • FIG.19 (b) shows the 2nd example of the video signal converter circuit by the 2nd Embodiment of this invention.
  • FIG. 21 shows the outline
  • formula which shows an example which changed Fig.22 (a) which shows the 3rd example of the video signal converter circuit by the 3rd Embodiment of this invention.
  • FIG.22 (b) shows the 3rd example of the video signal converter circuit by the 3rd Embodiment of this invention. It is a flowchart figure which shows the 5th flow of the process for performing the sharpening smoothing process by this Embodiment by software processing.
  • Third arithmetic circuit to be operated 101 ... input video signal, 103 ... line memory, 105 ... memory controller, 107 ... spatial filter, 111 ... delay circuit, 113 ... subtraction circuit, 115 ... edge amount input, 121 ... display device, 123: External connection terminal, 125: Control unit, 127: External memory in -Face I / F, 131 ... Video signal processing unit, 131a ... Sharpening / smoothing processing unit, 131b ... ⁇ correction unit, 133 ... Display unit, 141 ... Mobile terminal device, 143 ... Operation unit, 145 ... Wireless communication unit, 147 ... Camera, 151 ...
  • Dedicated storage unit 153 ... RAM / ROM, 155 ... Shape detection unit, 157 ... Register, 161 ... TV receiver, 163 ... External connection terminal, 165 ... External memory I / F, 167 ... Power source (battery , 171... Control unit, 181... Video signal processing unit, 181 a... RGBYUV conversion unit, 181 b.
  • Device 192... Th (threshold) setting unit, 193... ⁇ (sharpening) setting unit, 194... ⁇ (smoothing) setting unit, 197... Antenna, 201. ... network, 205 ... server.
  • FIG. 1A is a functional block diagram illustrating an outline of an algorithm of a sharpening process (unsharp mask (USM)).
  • the sharpening processing unit A first obtains a difference (edge amount input) between the input video signal (RGB or YUV) and the surrounding input image signal (spatial filter output) (symbol B).
  • the spatial filter output is data obtained by smoothing the input video signal.
  • the edge amount is multiplied and added to the target pixel data.
  • a threshold Th
  • gain
  • the edge amount input is regarded as noise and sharpening is not performed. This is because the image quality is better when sharpening is not performed, and a range regarded as noise can be designated by a threshold value.
  • the gain used for the gain adjustment is a parameter for converting the edge amount input, and the sharpening intensity is adjusted according to the magnitude of the gain to obtain the output video signal Y. In this way, the input video signal is converted into the output video signal.
  • FIG. 1B is a functional block diagram showing a configuration example of a spatial filter peripheral circuit, which is a detailed configuration shown by reference symbol B in FIG. 1A.
  • the input video signal 101 is accumulated in the line memory 103 (first to third line memories 103a to 103c) controlled by the memory controller 105, and is output to the spatial filter 107 in order.
  • the video signal filtered by the spatial filter 107 is output to the subtraction circuit 113.
  • the output from the line memory 103 is also output to the delay circuit 111 and is output to the subtraction circuit 113 with a delay.
  • both input signals are subtracted and output as the edge amount input 115.
  • FIG. 1C The drawing drawn from each signal line and indicated by reference signs a to f is a schematic diagram at each point when the pixel value of the image is viewed from the side, and the pixel value is shown in the vertical direction.
  • the input video signal 1 is an image as indicated by reference symbol a
  • a 3 ⁇ 3 spatial filter 3 smoothing is performed as indicated by reference symbol b.
  • b is subtracted from a by the subtracter 5
  • a difference is obtained as indicated by reference symbol c.
  • the threshold value determination unit 7 performs the determination using the signal of the code c as indicated by the code d, and the gain adjustment unit 11 performs gain adjustment for a signal equal to or higher than the threshold value. On the other hand, if it is less than the threshold, there is no signal (symbol e).
  • An adder 17 adds the input signal a to a signal in the case where the threshold value is equal to or greater than the threshold value, thereby obtaining an output video signal Y21, that is, a sharpened signal indicated by reference sign f.
  • the parameters ( ⁇ 1, ⁇ 1, Th1) used in the positive range of X and the parameters ( ⁇ 2, ⁇ 2, Th2) used in the negative range of X are the same.
  • a case where conversion can be performed using parameters ( ⁇ , ⁇ , Th) will be described as an example.
  • the smoothing parameter ⁇ is defined as being smaller as it is closer to 0
  • the sharpening parameter ⁇ is defined as being smaller as it is closer to 0
  • the threshold parameter Th is defined as being smaller as it is closer to 0.
  • FIG. 2 is a diagram showing the principle of the video signal adjustment technique according to the present embodiment, and is a diagram for performing XY conversion.
  • FIG. 2 also shows an XY conversion formula.
  • the smoothing process conversion and the sharpening process conversion are switched in the threshold parameter Th.
  • the range from -Th to + Th is defined as the range for performing the smoothing (noise removal) process, and the range outside the range is defined as the range for performing the sharpening process.
  • the inner side on the X-axis is the maximum value and the minimum value of the XY conversion expression.
  • the parameters used are a parameter ⁇ indicating the strength of smoothing, a parameter ⁇ indicating the strength of sharpening, and switching between the smoothing processing and the sharpening processing. Is set to include only three threshold values Th on the X axis.
  • FIG. 3 to 8 are diagrams showing examples of input / output characteristics (Y1, Y2) when the three parameters ⁇ , ⁇ , and Th shown in FIG. 2 are independently reduced or increased.
  • FIG. 3 shows an example in which only ⁇ is changed so that the slope of Y1 is small, but Y2 does not depend on ⁇ , and the maximum and minimum values of Y are Y1. Therefore, the continuity of the XY conversion equation can be maintained.
  • FIG. 4 shows an example in which only ⁇ is increased, and the slope of Y1 is large.
  • Y2 does not depend on ⁇ , and the maximum and minimum values of Y are Y1. Therefore, the continuity of the XY conversion equation can be maintained.
  • FIG. 5 shows an example in which only ⁇ is changed, and the slope of Y2 is small.
  • Y1 does not depend on ⁇ , and the maximum and minimum values of Y are Y1. Therefore, the continuity of the XY conversion equation can be maintained.
  • FIG. 6 shows an example in which only ⁇ is increased, and the slope of Y2 is large.
  • Y1 does not depend on ⁇ , and the maximum and minimum values of Y are Y1. Therefore, the continuity of the XY conversion equation can be maintained.
  • FIG. 7 shows an example in which only Th is changed.
  • the slopes of Y1 and Y2 are not changed, and the maximum and minimum values of Y are the intersections of Y1 and Y2. Therefore, the continuity of the XY conversion formula can be maintained. The same applies to the case where only Th is significantly changed as shown in FIG.
  • the sharpening parameter and the smoothing parameter are switched independently of the threshold value Th and the sharpness is set. Since the smoothing characteristic data and the smoothing characteristic data can always be continuous, a smooth high-quality video can be obtained. Different output video signals can be obtained for each of the three parameters.
  • Table 1 shows an example of parameter settings in the video signal adjustment technique according to the present embodiment. Also shown are ⁇ , ⁇ , and Th when reduced to 1/2 times and enlarged to 2 times.
  • the outline of the display device is a color TFT liquid crystal panel having a size of 24.1 type and a pixel pitch of 0.27 ⁇ 0.27 mm, and a recommended resolution is 1920 ⁇ 1200.
  • the filter size is 5 ⁇ 5 and the filter coefficients are all “1”.
  • the display image has a still image and an image size of 480 ⁇ 640, and a Y (luminance) component of YUV is processed.
  • FIG. 9B is a functional block diagram showing an example of the video signal conversion circuit according to the present embodiment.
  • FIG. 9A is a diagram illustrating an arithmetic expression in each functional block.
  • the video signal conversion circuit C1 shown in FIG. 9B includes a register 31 for storing threshold values Th, ⁇ , and ⁇ , a circuit 32 for determining the threshold value of Expression 1-3, and a first function for calculating Expression 1-2. ,
  • the second arithmetic circuit 34 for calculating the expression 1-1, and the third arithmetic circuit 35 for calculating the expression 1-4.
  • the third arithmetic circuit 35 has a circuit 36 for obtaining the maximum value of Y1 and Y2, a circuit 37 for obtaining the minimum value of Y1 and Y2, and a circuit 38 for obtaining and outputting Y from the respective outputs. is doing.
  • the input signal X is input to the circuits 32, 33, 34, and 38.
  • Y is output from the circuit C1. According to this configuration, it is possible to improve the display quality based on the video signal while reducing the circuit scale.
  • FIG. 10 is a diagram illustrating a configuration example of the display device 121 including the video signal processing circuit (sharpening / smoothing processing unit 131a) according to the present embodiment.
  • the display device 121 includes an external connection terminal 123, a control unit 125, an external memory interface I / F 127, a video signal processing unit 131, and a display unit 133.
  • a video input signal is obtained from the external connection terminal 123 or the external memory interface I / F 127, and based on an instruction from the control unit 125, the video signal processing unit 131 performs ⁇ correction and the above-described sharpening / smoothing processing unit 131a performs signal processing. I do.
  • the output video signal processed in this way can be output to the display unit 133 to display the video.
  • FIG. 11 is a functional block diagram showing a configuration example of the mobile terminal device 141 using the sharpening / smoothing circuit according to the present embodiment.
  • the portable terminal device 141 includes an operation unit 143, a wireless communication unit 145, a camera 147, a dedicated storage unit 151, a RAM / ROM 153, and a foldable portable terminal, for example.
  • a shape detection unit 155 that detects the shape of the device, a register 157, a TV reception unit 161, an external connection terminal 163, an external memory I / F 165, a power source (battery) 167, a control unit (CPU) 171, A video signal processing unit 181 that outputs an output video signal and a display unit 183 that performs display based on the output video signal are provided.
  • the video signal processing unit 181 includes an RGBYUV conversion unit 181a, a sharpening / smoothing processing unit 181b, a YUVRGB conversion unit 181c, and a ⁇ correction unit 181d. In this manner, by using the sharpening / smoothing processing unit according to the present embodiment for the video signal processing unit 181 of the mobile terminal device 141, a high-quality video can be easily obtained.
  • FIG. 12 is a diagram showing an example in which a user interface capable of changing the adjustment parameter of the sharpening / smoothing processing unit is displayed on the display unit 183 of the mobile terminal device shown in FIG.
  • the mobile terminal device 191 is provided with a display unit 183, an operation unit 143, and an antenna 197.
  • the set values of the three parameters Th (threshold value) 192, ⁇ (sharpening) 193, and ⁇ (smoothing) 194 displayed on the display unit 183 can be changed by the operation unit 143, respectively.
  • the manufacturer of the mobile terminal device can adjust parameters to eliminate individual differences in display at the time of shipment, and the user can also adjust according to preferences.
  • the video can be confirmed while changing the adjustment parameter.
  • the menu display may be displayed on the display unit 183 by superimposing so that the adjusted image can be confirmed on the full screen display.
  • a setting display unit may be provided separately.
  • FIG. 13 is a diagram showing an example of a usage scene of the video processing technique according to the present embodiment.
  • the control unit (CPU) 171 controls the whole. Parameter setting from the user can be performed by the operation unit 143. Also, parameters can be set from the wireless communication unit 145 by wireless communication. It is also possible to control the mobile terminal device based on the detection result from the shape detection unit 155. For example, the shape detection unit 155 can detect the vertical display and the horizontal display of the display unit of the mobile terminal device. Further, as will be described later, it is possible to set parameters using broadcast data from a television (TV) receiver 161.
  • TV television
  • the input video signal is acquired from the wireless communication unit 145, the camera 147, the moving image / still image from the external memory I / F, the digital broadcast video from the TV receiving unit 161, and the like, and the video signal processing unit 181 is sharp.
  • the smoothing / smoothing processing unit 181b sharpening / smoothing processing according to the present embodiment is performed.
  • a parameter for performing this processing is set from each of the setting units described above, and the set value set in the register 157 can be updated via the control unit 171. Using the updated parameters, the input video is sharpened and smoothed.
  • the output video signal can be output to the display unit 183 to display the video.
  • the output video signal can also be sent to the control unit 171, and this output video signal (moving image / still image) is sent to the dedicated storage unit 151 such as the wireless communication unit 145, the external connection terminal 163, and a hard disk / memory card. It can also be output. Similarly, parameter values based on the settings can be output to the wireless communication unit 145, the external connection terminal 163, and the dedicated storage unit 151.
  • FIG. 14 is a diagram showing a flow of processing in the video signal processing unit.
  • the input video signal is first input to the RGBYUV conversion unit 181a, then the sharpening / smoothing processing unit 181b performs the conversion process according to the present embodiment, and then the YUVRGB conversion unit 181c converts the input video signal. Then, gamma correction is performed in the gamma correction unit 181d, and an output video signal is output.
  • FIG. 15 is a diagram illustrating an example of a usage scene in which setting values are transmitted and received.
  • the setting value of the mobile terminal device 191 a used by the user A may be transmitted directly to the mobile terminal device 191 b used by the user B via the network 203.
  • This set value is a set value that is transmitted as a parameter in accordance with the self-portrait transmission of a videophone, and is adjusted by the user so as to match a TV broadcast that is broadcast from the radio tower 201 and that is being viewed.
  • the setting value can be shared between users.
  • the image itself of the TV phone converted using the adjusted parameters can be transmitted and received.
  • a setting value may be given to the content (program) of the television broadcast itself.
  • FIG. 16 is a diagram showing an example of display related to enlargement / reduction of displayed video.
  • Reference numeral 197 denotes an antenna for TV reception. If there is a setting based on broadcast data matching the video and a sharing setting between users, it can be displayed based on that setting. Even if there is not, if the user I / F as described above is prepared, it is possible to easily adjust to the video desired by the user.
  • the video display area D2 receives the video D1 received by the video display area D2 when the vertical screen is displayed on the display unit 183 of the mobile terminal device 191.
  • the resolution is small, it is necessary to reduce the TV video in order to display it in the video display area.
  • the video display area D3 has a higher resolution than the received video D1 when the horizontal screen is displayed, it is necessary to enlarge the TV video in order to display the entire display unit.
  • the quality of display can be improved by reducing the ratio of data to be smoothed and increasing the ratio of data to be sharpened.
  • reduction it is possible to make it easy to see a display that is not so tight by adjusting the ratio of data to be smoothed and adjusting the ratio of data to be sharpened.
  • the operation includes not only simple key operation by the user via the operation unit 143 but also includes changing the shape of the housing (for example, rotating operation of the display unit, etc.) and automatically detecting the shape at that time. Operations are included.
  • the shape can be detected by the shape detector 155 of FIG.
  • the control unit (not shown) determines whether the vertical screen display or the horizontal screen display is performed by the shape detection unit, and updates the set value of the register as necessary.
  • FIG. 17 is a flowchart showing the flow of sharpening / smoothing processing according to the present embodiment.
  • processing is started (START).
  • step S3 it is determined whether X is positive or negative. If negative (Yes), the process proceeds to step S4, and if positive (No), the process proceeds to step S5.
  • step S4 Th_t is set to -Th.
  • Th_t is set to Th.
  • the sharpening and smoothing process as shown in FIG. 2 can be performed by software processing.
  • the coefficient of the first function defined as a function passing through the origin is the smoothing parameter ( ⁇ ), and the first function defined as a function passing through the threshold Th is used.
  • the coefficient of the function of 2 is the sharpening parameter ( ⁇ )
  • FIG. 18 is a diagram showing the principle of the video processing technique according to this embodiment, and is a diagram for performing XY conversion.
  • the circuit scale and the processing amount are larger than in the case of the first embodiment, but there is an advantage that the change of the image becomes smoother.
  • FIG. 19 is a functional block diagram showing an example of a video signal conversion circuit according to the present embodiment.
  • FIG. 19A shows an arithmetic expression in each functional block.
  • the video signal conversion circuit C2 shown in FIG. 19B calculates a register 51 for storing threshold values Th, ⁇ , and ⁇ , a circuit 52 for determining the threshold value and ⁇ in Expression 2-3, and Expression 2-2.
  • the third arithmetic circuit 55 includes a circuit 56 for obtaining the maximum value of Y1 and Y2, a circuit 57 for obtaining the minimum value of Y1 and Y2, and a circuit 58 for obtaining and outputting Y from the respective outputs. is doing.
  • the input signal X is input to the circuits 52, 53, 54 and 58.
  • Y is output from the circuit C2. According to this configuration, it is possible to further improve the display quality based on the video signal while reducing the circuit scale.
  • FIG. 20 is a flowchart showing a processing flow for performing the processing according to the present embodiment by software processing.
  • processing is started (START), and in step S12, it is determined whether X is positive or negative. If negative (Yes), the process proceeds to step S13, and if positive (No), the process proceeds to step S14.
  • Y2 ⁇ ⁇ (X ⁇ Th_t) is obtained.
  • step 17 the condition of X is determined.
  • the sharpening / smoothing process can also be performed by software processing.
  • the sharpening parameter ( ⁇ ) which is the second function defined as “2”
  • the sharpening smoothing process is simplified.
  • FIG. 21 is a diagram showing the principle of the video processing technique according to the present embodiment, and is a diagram for performing XY conversion.
  • FIG. 22 is a functional block diagram showing an example of a video signal conversion circuit according to the present embodiment.
  • FIG. 22A shows an arithmetic expression in each functional block.
  • the video signal conversion circuit C3 shown in FIG. 22B includes a register 71 that stores the values of threshold values Th, ⁇ , and ⁇ , a circuit 72 that obtains a threshold value Th_t by Equation 3-3, and ⁇ ⁇ Based on the first arithmetic circuit 73 for obtaining (X ⁇ Th_t), the second arithmetic circuit 74 for obtaining ⁇ ⁇ X (X ⁇ Th_t) ⁇ (X + Th_t) from Equation 3-1, and Equation 3-4 And a third arithmetic circuit 75 for obtaining Y.
  • the third arithmetic circuit 75 has a circuit 76 for obtaining the maximum value of Y1 and Y2, a circuit 77 for obtaining the minimum value of Y1 and Y2, and a circuit 78 for obtaining and outputting Y from the respective outputs. is doing.
  • the input signal X is input to the circuits 72, 73, 74 and 78.
  • Y is output from the circuit C3. According to this configuration, it is possible to further improve the quality of display based on the video signal.
  • FIG. 23 is a flowchart showing a flow of processing for performing processing according to the present embodiment by software processing.
  • processing is started (START), and in step S32, it is determined whether X is positive or negative. If negative (Yes), the process proceeds to step S33, and if positive (No), the process proceeds to step S34.
  • Th_t ⁇ Th
  • Th_t Th.
  • Y1 ⁇ ⁇ X ⁇ (X ⁇ Th_t) ⁇ (X + Th_t)
  • step 37 the condition of X is determined.
  • Step S40 the sharpening / smoothing process can also be performed by software processing.
  • the sharpening parameter ( ⁇ ) which is the second function defined as “2”
  • the sharpening smoothing process is simplified.
  • n is an integer of 4 or more
  • the straight line, the quadratic curve, or the like may not be a complete curve, and the intersection with the X axis may not completely match the origin and the threshold value.
  • an equation as shown in FIG. The input / output characteristics are as shown in FIG. FIG. 41B is a functional block diagram showing an example of the video signal conversion circuit, and FIG. 42 is a flowchart showing the flow of processing to be performed by software processing.
  • FIG. 44B is a functional block diagram showing an example of the video signal conversion circuit
  • FIG. 45 is a flowchart showing the flow of processing to be performed by software processing.
  • the parameters ( ⁇ , ⁇ , Th) are the parameters ( ⁇ 1, ⁇ 1, Th1) used in the positive range of X and the parameters ( ⁇ 2, ⁇ 2, Th2) used in the negative range of X,
  • the threshold parameter may be a fixed value instead of a parameter, and in that case, the circuit scale can be further reduced. That is, it is sufficient that at least one of the three parameters is variable.
  • Example of video processing result according to this embodiment a comparative example of the video processing based on FIG. 2 and the video processing result based on FIG. 30 will be described.
  • a case where the filter size is 3 ⁇ 3 and the filter coefficients are all 1 will be described as an example.
  • a case where the filter size is 5 ⁇ 5, 7 ⁇ 7, or a case where the filter coefficient is different may be set.
  • a case where data is processed with respect to a Y (luminance) component of YUV will be described as an example.
  • the data can be similarly processed for Y of YCbCr, YPbPr, YIQ, L of L * u * v *, L * a * b *, RGB, and the like.
  • FIG. 24 is a schematic diagram showing a range on the X-axis based on the first embodiment (a) of the present invention and the video processing technique (b) of Example 1 of Patent Document 1.
  • FIG. Conventional video processing is divided into a region where sharpening is performed and a region where sharpening is not performed with a threshold Th as a boundary.
  • Processing is performed, sharpening processing is performed in the range where the absolute value of X is larger than the threshold Th, and intermediate processing between smoothing processing and sharpening processing is performed in the intermediate region.
  • FIG. 25 is a diagram showing a comparison between the present embodiment and an example of the smoothing processing result based on the conventional video processing technology.
  • 2 (double)
  • Th 3
  • the standard deviation in the luminance plane is shown.
  • the standard deviation is smaller than in the prior art, and it can be seen that the image is smooth and has high image quality. Even when the sharpening parameter is doubled, since there is no sharpening data, there is no change in normal deviation and standard deviation as in the case where the sharpening parameter is not doubled, and the image is smoother than in the prior art. With high image quality. In addition, when ⁇ was halved, the standard deviation changed (increased) from the normal time because the parameter indicating the level of smoothing was changed to be weaker, but the image was still smoother than the conventional technique. You can see that it has high image quality.
  • FIG. 26 is a diagram showing a comparison of smoothing processing results when the display is enlarged twice in FIG.
  • the edge amount input is smaller than that before enlargement compared to the normal time.
  • the standard deviation is smaller than that of the prior art, and it can be seen that the image is smooth and has high image quality.
  • the edge amount input is smaller than before enlargement, and all pixels are smoothed in this example.
  • FIG. 27 is a diagram showing a comparison between the present embodiment and an example of the sharpening processing result based on the conventional video processing technique, and corresponds to FIG.
  • the switching between the sharpening process and the smoothing process is continuous, it can be seen that the image is smoother and has higher image quality than the prior art.
  • FIG. 28 is a diagram showing a comparison of an example of a sharpening process result when the display is enlarged twice in FIG.
  • we wanted to sharpen but since the edge amount input is smaller than before enlargement, it can be seen that all the data is smoothed.
  • all the output results of the present embodiment are smoothed with the same setting as the normal time.
  • the edge amount input becomes smaller than before the enlargement. For this reason, a large number of pixels are smoothed during enlargement. Accordingly, when the magnification is reduced, the ratio of the data to be smoothed is reduced, and the ratio of the data to be sharpened is increased to improve the image quality. Therefore, the threshold value Th is reduced, and the parameter ⁇ for determining the smoothing amount is reduced.
  • FIG. 29 is a diagram showing the result of smoothing and sharpening processing using the data obtained by reducing the image enlarged in FIG. 28 by a factor of 1/2 as an input video signal.
  • the threshold value Th is increased at the time of reduction, the parameter ⁇ for determining the smoothing amount is increased, and the parameter ⁇ indicating the sharpening amount is decreased.
  • the setting value obtained by performing at least one of the three processes is set to reduction so that the image quality can be improved.
  • XY between an edge amount input X which is a difference from an output signal obtained by processing an input video signal by a spatial filter, and an edge amount output Y obtained by converting the edge amount input X.
  • the switching between the sharpened data and the smoothed data is always continuous, a smooth high-quality image can be obtained.
  • different output video signals can be obtained for each of the three parameters, and high-quality video can be obtained even during enlargement / reduction (eg, vertical display and horizontal display of a TV broadcast).
  • adjustments can be made in accordance with the characteristics (resolution, screen size, video bit number) of the device that displays the video, a high-quality video can be obtained.
  • the degree of freedom of parameter adjustment can be increased.
  • the configuration and the like illustrated in the accompanying drawings are not limited to these, and can be appropriately changed within a range where the effects of the present invention are exhibited.
  • various modifications can be made without departing from the scope of the object of the present invention.
  • the first function (function that performs smoothing processing when X of the XY plane defined by the edge amount input X and the edge amount output Y passes through the origin in the positive range and 0 ⁇ X ⁇ Th1.
  • the first function falls within the scope of the present invention even if it does not pass completely through the origin.
  • Function 2 even if it does not pass through the point (Th1, 0), it will fall within the scope of the present invention if it passes through its vicinity.
  • the present invention is a video signal circuit that performs smoothing processing and sharpening processing on an input video signal to obtain an output video signal, and an edge amount input (X) of the input video signal is output as an edge amount output (Y).
  • a smoothing coefficient ( ⁇ ) that determines the strength of the smoothing process a sharpening coefficient ( ⁇ ) that determines the strength of the sharpening process, and switching between the smoothing process and the sharpening process
  • the feature is that the input / output characteristics of the video signal are determined by a continuous function, at least one of which is a variable parameter.
  • a program for realizing the functions described in the present embodiment is recorded on a computer-readable recording medium, and the program recorded on the recording medium is read into a computer system and executed to execute processing of each unit. May be performed.
  • the “computer system” here includes an OS and hardware such as peripheral devices.
  • the “computer system” includes a homepage providing environment (or display environment) if a WWW system is used.
  • the “computer-readable recording medium” means a storage device such as a flexible disk, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Furthermore, the “computer-readable recording medium” dynamically holds a program for a short time like a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line. In this case, a volatile memory in a computer system serving as a server or a client in that case is also used to hold a program for a certain period of time.
  • the program may be a program for realizing a part of the above-described functions, or may be a program that can realize the above-described functions in combination with a program already recorded in a computer system.
  • the present invention can be used for a video processing circuit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Picture Signal Circuits (AREA)

Abstract

X-Y変換図では、閾値Thは、Y=0、すなわち、X軸上に閾値Thを定め、-Th~+Thまでを平滑化(ノイズ除去)処理を行う範囲と定め、それよりも外側の範囲を、鮮鋭化処理を行う範囲と定めている。この場合には、図中の式に示すように、Y1と、Y2とで示される2つの1次直線による式のうち、Y1とY2との両方の式の交点がX-Y変換式の最大値と最小値となる。また、閾値はY2とX軸との交点で表される。この変換アルゴリズムは、平滑化の強さを示す係数α、鮮鋭化の強さを示す係数β、平滑化処理と鮮鋭化処理の切替りを決めるX軸上の閾値Thの3つのみからなる。これにより用いるパラメータ数を少なくするとともに、1つのパラメータによる調整を行っても、平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てるようになる。

Description

映像信号処理装置及び映像表示装置
 本発明は映像信号処理技術に関し、空間フィルタを用いて映像の鮮鋭化処理・平滑化処理を行う映像信号処理技術に関する。
 入力映像には、様々な雑音や歪みが含まれている。このような映像の劣化の要因を取り除くことにより映像を見やすくすることができ、有用な情報を抽出し強調することができる。このような処理は画像処理の中でも重要な処理の1つである。画像処理の代表的な手法には、1)濃度変換によるコントラストの強調、2)ノイズ除去のための平滑化、3)エッジを強調する鮮鋭化があり、平滑化処理/鮮鋭化処理は、画像の低周波成分/高周波成分の強調処理に相当する。本来、画像の濃度値は急変しているべき輪郭の部分などで濃度値の変化がゆるやかになっている場合、図形の輪郭がぼやけた画像となる。このような画像に対して、濃度値の変化を強調することで鮮明な画像を得ることを鮮鋭化と言う。鮮鋭化の手法の1つに、原画像をフィルタリングした結果を原画像から差し引く方法がある(鮮鋭化オペレータ)。
 一方、平滑化処理は、例えば3×3のオペレータを原画像に沿って移動させ、オペレータの各要素の値と対応する原画像のピクセル値とを演算する手法がある。
 以上のような原理に基づいて、テレビジョン受信装置やパーソナルコンピュータ、携帯電話機などの表示部における画像の鮮鋭化・平滑化を行うことができる回路が知られている。図30は、下記特許文献1の実施例1に記載された鮮鋭化処理のエッジ量入力(X軸)とエッジ量出力(Y軸)との関係を示す図である。
Figure JPOXMLDOC01-appb-M000004
 ここで、鮮鋭化処理アルゴリズムアンシャープマスク(USM)について図1A及び図30を参照しながら説明を行う。まず、入力映像信号(RGBやYUV)とその周辺の入力画像信号(空間フィルタ出力)との差分(エッジ量入力)を求める。ここで、空間フィルタ出力は入力映像信号を平滑化したデータとなっている。以下、平滑化はノイズ除去と同義とする。
 鮮鋭化技術では、X軸上に決められた閾値(Th)やゲイン(β)として定義した鮮鋭化の強さを示すパラメータを用いて、エッジ量を乗算して注目画素データに加算することによって、鮮鋭度を強める鮮鋭化を行う。図30に示すように、エッジ量入力の絶対値が閾値Thに比べて小さいときは、そのエッジ量入力をノイズとみなして鮮鋭化を行わない。これは、鮮鋭化を行わない方が画質的に良好であるためであり、ノイズとみなす範囲を閾値で指定することができる。ゲインはエッジ量入力を変換するパラメータであり、ゲインの大小によって鮮鋭化の強さの調整が可能である。尚、USMによる処理イメージについては、後述する図1Cで説明する。
 図31は、特許文献1の実施例4に記載され平滑化と鮮鋭化とを行う技術の概要について示した図である。
Figure JPOXMLDOC01-appb-M000005
 ここで、αは平滑化の強さを示すパラメータ、βは鮮鋭化の強さを示すパラメータ、γはエッジ量出力(Y)軸との交点パラメータであり、閾値パラメータThは、平滑化変換と鮮鋭化変換の切替えを行うエッジ量入力の値である。この技術(実施例4)を用いると、エッジ量入力の絶対値が閾値以下の場合に平滑化し、閾値以上の場合に鮮鋭化することができる。
特開平3-245675号公報
 上記特許文献1に記載の技術では、閾値Th、α、β、γの4つのパラメータの設定が必要となる(図31及び上記数2参照)。また、X-Yの入出力変換が、閾値Thを境にして入出力特性の連続性を保つためには、上記4つのパラメータの1つのみを単独で調整することはできない。さらに、画像の拡大・縮小時の振る舞いに関する記載はなく、4つのパラメータ設定をそれぞれどのように設定すればよいかなどは不明である。例えば、拡大時に平滑化処理と鮮鋭化処理とを両立させて変換する際に、パラメータ設定をどう設定すれば高画質となり、かつ、連続性が保たれるのかに関する開示もない。
 図32から図39までは、上記特許文献1の実施例4に示した図31に示される基本的な変換特性に対して、パラメータ単独調整によるエッジ量入出力特性の例であって、α、β、γ、Thをベースにしてそれぞれ独立でパラメータを小さく/大きく変化させた場合のエッジ量の入出力特性例を示す図である。図32は、図31からαのみを小さくするように変化させた場合における例を示す図である。この場合には、平滑化の強さを示すαを小さくしても、図32に示すように、平滑化特性の傾きが小さくなるため閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなる。すなわち、パラメータを単独で調整した場合、連続性が保たれなくなることがわかる。また、図33に示すように、αのみを大きくするように変化させた場合には、平滑化特性の傾きが大きくなるため閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなることがわかる。同様に、図34に示すように、βのみを小さくするように変化させた場合には、鮮鋭化の方の特性は傾きが小さくなるためX軸との交点が原点から遠くなり、閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなる。また、図35に示すように、βのみを大きく変化させた場合には、鮮鋭化の方の特性は傾きが大きくなるためX軸との交点が原点に近くなり、閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなる。
 さらに、図36に示すように、γのみを小さくするように変化させると、鮮鋭化の直線の延長線とY軸との交点γが原点に近くなるため、同様に閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなる。図37のようにγのみを大きくするように変化させる場合も同様に連続性が保てなくなる。
 さらに、図38・図39に示すように、Thのみを小さく又は大きくするように変化させると、同様に閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなる。
 以上に説明したように、特許文献1に記載の技術では、4つのパラメータを用いる必要がある上に、1つのパラメータによる調整を行うと、閾値近傍における平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てなくなるという問題がある。
本発明は、用いるパラメータ数を少なくするとともに、1つのパラメータによる調整を行っても、平滑化の入出力特性と鮮鋭化との入出力特性に連続性が保てるようにすることを目的とする。また、パラメータ調整の自由度を高めることを目的とする。
 本発明の一観点によれば、入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号回路であって、前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換する際に、前記エッジ量入力Xと前記エッジ量出力Yとにより画定されるX-Y平面のXが正の範囲において、原点を通り、0<X<Th1の時に平滑化処理を行う第1の関数(関数1)と、前記閾値をX値とするX軸上の点(Th1,0)を通り、0<X<Th1の時に平滑化処理を行い、X>Th1の時に鮮鋭化処理を行う第2の関数(関数2)とを設け、前記平滑化処理の強度を決める平滑化係数(α1)と、前記鮮鋭化処理の強度を決める鮮鋭化係数(β1)と、前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値(Th1)と、の3つのうち1つ以上を可変パラメータとして映像信号の入出力特性を決定することを特徴とする映像信号処理回路が提供される。
 また、入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号回路であって、前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換する際に、前記エッジ量入力Xと前記エッジ量出力Yとにより画定されるX-Y平面のXが負の範囲において、原点を通り、Th2<X<0の時に平滑化処理を行う第1の関数(関数1)と、前記閾値をX値とするX軸上の点(Th2,0)を通り、Th2<X<0の時に平滑化処理を行い、X<Th2の時に鮮鋭化処理を行う第2の関数(関数2)とを設け、前記平滑化処理の強度を決める平滑化係数(α2)と、前記鮮鋭化処理の強度を決める鮮鋭化係数(β2)と、前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値(Th2)との3つのうち1つ以上を可変パラメータとして映像信号の入出力特性を決定することを特徴とする映像信号処理回路が提供される。ここで、平滑化係数(α1、α2)は第1の関数(関数1)の係数であり、鮮鋭化係数(β1、β2)は第2の関数(関数2)の係数である。また、係数とは、例えば前記関数1、2が直線の場合には、傾きを示す。曲線の場合には変数、定数に掛ける倍率を示すものである。
 また、本発明は、上記に記載の映像信号処理回路の出力映像信号に基づく表示を行う表示部を有することを特徴とする表示装置であっても良い。また、当該表示装置を備えることを特徴とする携帯端末装置であっても良い。本発明の他の観点によれば、入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号処理方法であって、前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換することによって得られる関係を示すX-Y入出力特性において、前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値ThをX軸上(Y=0)に設定するステップと、原点を通り、|X|<Th(-Th<X<Th)の時に平滑化処理を行う第1の関数と、前記閾値を通り、|X|<Th(-Th<X<Th)の時に平滑化処理を行い、|X|>Th(X<-Th又はX>Th)の時に鮮鋭化処理を行う第2の関数であって、前記関数1と前記関数2とが交差することにより決められる入出力変換特性に基づく変換処理を行うステップと、を有することを特徴とする映像信号処理方法が提供される。
 本発明によれば、入力映像信号を空間フィルタにより処理した出力信号との差分であるエッジ量入力Xと、エッジ量入力Xを変換することによって得られるエッジ量出力YとのX-Y入出力特性において、鮮鋭化されるデータと平滑化されるデータの切替りが常に連続であるため、滑らかな高画質な映像を得ることができる。
 また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができ、拡大・縮小時(例:TV放送の縦表示、横表示)においても、高画質な映像を得ることができる。また、映像を表示する装置の特性(解像度、画面サイズ、映像のビット数)に合わせた調整ができるため、高画質な映像を得ることができる。さらに、パラメータ調整の自由度を高めることができる。
鮮鋭化処理(アンシャープマスク(USM))のアルゴリズムの概要を示す機能ブロック図である。 図1Aの符号Bに示す構成の詳細である空間フィルタ周辺回路の一構成例を示す機能ブロック図である。 USMによる処理イメージを示す図である。 本発明の第1の実施の形態による映像信号調整技術の概要を示す図である。 図2においてαのみを小さくするように変化させた場合のX-Y変換特性の例を示す図である。 図2においてαのみを大きくするように変化させた場合のX-Y変換特性の例を示す図である。 図2においてβのみを小さくするように変化させた場合のX-Y変換特性の例を示す図である。 図2においてβのみを大きくするように変化させた場合のX-Y変換特性の例を示す図である。 図2においてThのみを小さくするように変化させた場合のX-Y変換特性の例を示す図である。 図2においてThのみを大きくするように変化させた場合のX-Y変換特性の例を示す図である。 本発明の第1の実施の形態による映像信号変換回路の第1例を示す変換式である。 本発明の第1の実施の形態による映像信号変換回路の第1例を示す機能ブロック図である。 本実施の形態による映像信号処理回路(鮮鋭化平滑化処理部)を有する表示装置の一構成例を示す図である。 本実施の形態による鮮鋭化平滑化回路を用いた携帯端末装置の一構成例を示す機能ブロック図である。 図11に示す携帯端末装置の表示部に鮮鋭化平滑化処理部の調整パラメータを変更できるユーザインターフェイスを表示させた例を示す図である。 本実施の形態による映像処理技術の利用シーンの一例を示す図である。 映像信号処理部における処理の流れを示す図である。 設定値の送受信を行う利用シーンの一例を示す図である。 表示される映像の拡大・縮小に関する表示の一例を示す図である。 本実施の形態による鮮鋭化平滑化処理をソフトウェア処理により行うための処理の第1の流れを示すフローチャート図である。 本発明の第2の実施の形態による映像信号調整技術の概要を示す図である。 本発明の第2の実施の形態による映像信号変換回路の第2例の変換式である。 本発明の第2の実施の形態による映像信号変換回路の第2例の機能ブロック図(b)である。 本実施の形態による鮮鋭化平滑化処理をソフトウェア処理により行うための処理の第2の流れを示すフローチャート図である。 本発明の第3の実施の形態による映像信号調整技術の概要を示す図である。 本発明の第3の実施の形態による映像信号変換回路の第3例の変換式である。 本発明の第3の実施の形態による映像信号変換回路の第3例の機能ブロック図である。 本実施の形態による鮮鋭化平滑化処理をソフトウェア処理により行うための処理の第3の流れを示すフローチャート図である。 本実施の形態(a)と従来の映像処理技術(b)に基づく平滑化処理と鮮鋭化処理とのX軸上での範囲を示す模式的な図である。 本実施の形態と従来の映像処理技術に基づく平滑化処理結果の例を示して比較した図である。 図25において、表示を2倍に拡大した場合の平滑化処理結果の例を示して比較した図である。 本実施の形態と従来の映像処理技術に基づく鮮鋭化処理結果の例を示して比較した図である。 図27において、表示を2倍に拡大した場合の鮮鋭化処理の結果の例を示して比較した図である。 図28において、表示を1/2倍に縮小した場合の平滑化処理と鮮鋭化処理の結果を、例を示して比較した図である。 特許文献1の実施例1に記載された鮮鋭化処理のエッジ量入力(X軸)とエッジ量出力(Y軸)との関係を示す図である。 特許文献1の実施例4に記載され平滑化と鮮鋭化とを行う技術の概要について示した図である。 図31においてαのみを小さくするように変化させた場合における変換特性の例を示す図である。 図31においてαのみを大きくするように変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてβのみを小さく変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてβのみを大きく変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてγのみを小さくするように変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてγのみを大きくするように変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてThのみを小さくするように変化させた場合におけるX-Y変換特性の例を示す図である。 図31においてThのみを大きくするように変化させた場合におけるX-Y変換特性の例を示す図である。 本発明の第2の実施の形態による映像信号調整技術の概要を示す図である図18において変換を変更した一例を示す図である。 本発明の第2の実施の形態による映像信号変換回路の第2例を示す図19(a)を変更した一例を示す変換式である。 本発明の第2の実施の形態による映像信号変換回路の第2例を示す図19(b)を変更した一例を示す機能ブロック図である。 本実施の形態による鮮鋭化平滑化処理をソフトウェア処理により行うための処理の第4の流れを示すフローチャート図である。 本発明の第3の実施の形態による映像信号調整技術の概要を示す図である図21において変換を変更した一例を示す図である。 本発明の第3の実施の形態による映像信号変換回路の第3例を示す図22(a)を変更した一例を示す変換式である。 本発明の第3の実施の形態による映像信号変換回路の第3例を示す図22(b)を変更した一例を示す機能ブロック図である。 本実施の形態による鮮鋭化平滑化処理をソフトウェア処理により行うための処理の第5の流れを示すフローチャート図である。
A…鮮鋭化処理部、B…空間フィルタ周辺回路、C1,C2,C3,C4,C5…映像信号変換回路、D1…映像、D2,D3…映像表示エリア、1…入力映像信号、3…空間フィルタ、5…減算器、7…閾値判定部、11…ゲイン調整部、15…乗算器、17…加算器、21…出力映像信号Y、31…レジスタ、32…式1-3を決定する回路、33…式1-2を演算する第1の演算回路、34…式1-1を演算する第2の演算回路、35…式1-4を演算する第3の演算回路、51…レジスタ、52…式2-3を決定する回路、53…式2-2を演算する第1の演算回路、54…式2-1を演算する第2の演算回路、55…式2-4を演算する第3の演算回路、71…レジスタ、72…式3-3の閾値を決定する回路、73…式3-2を演算する第1の演算回路、74…式3-1を演算する第2の演算回路、75…式3-4を演算する第3の演算回路、81…レジスタ、83…式4-3を決定する回路、85…式4-2を演算する第1の演算回路、87…式4-1を演算する第2の演算回路、89…式4-4を演算する第3の演算回路、91…レジスタ、93…式5-3を決定する回路、95…式5-2を演算する第1の演算回路、97…式5-1を演算する第2の演算回路、99…式5-4を演算する第3の演算回路、101…入力映像信号、103…ラインメモリ、105…メモリコントローラ、107…空間フィルタ、111…遅延回路、113…減算回路、115…エッジ量入力、121…表示装置、123…外部接続端子、125…制御部、127…外部メモリインターフェイスI/F、131…映像信号処理部、131a…鮮鋭化平滑化処理部、131b…γ補正部、133…表示部、141…携帯端末装置、143…操作部、145…無線通信部、147…カメラ、151…専用記憶部、153…RAM/ROM、155…形状検出部、157…レジスタ、161…TV受信部、163…外部接続端子、165…外部メモリI/F、167…電源(バッテリ)、171…制御部、181…映像信号処理部、181a…RGBYUV変換部、181b…鮮鋭化平滑化処理部、181c…YUVRGB変換部、181d…γ補正部、183…表示部、191…携帯端末装置、192…Th(閾値)設定部、193…β(鮮鋭化)設定部、194…α(平滑化)設定部、197…アンテナ、201…電波塔、203…ネットワーク、205…サーバ。
 以下、本発明の実施の形態による画像処理技術について図面を参照しながら説明を行う。図1Aは、鮮鋭化処理(アンシャープマスク(USM))のアルゴリズムの概要を示す機能ブロック図である。図1Aに示すように、鮮鋭化処理部Aは、まず、入力映像信号(RGBやYUV)とその周辺の入力画像信号(空間フィルタ出力)との差分(エッジ量入力)を求める(符号B)。ここで、空間フィルタ出力は入力映像信号を平滑化したデータとなっている。
 鮮鋭化技術では、X軸上に決められた閾値(Th)やゲイン(α)として定義した鮮鋭化の強さを示すパラメータを用いて、エッジ量を乗算して注目画素データに加算することによって、鮮鋭度を強める鮮鋭化を行う。閾値判定・ゲイン調整処理において、エッジ量入力の絶対値が閾値Thに比べて小さいときは、そのエッジ量入力をノイズとみなして鮮鋭化を行わない。これは、鮮鋭化を行わない方が画質的に良好であるためであり、ノイズとみなす範囲を閾値で指定することができる。ゲイン調整に用いるゲインはエッジ量入力を変換するパラメータであり、ゲインの大小によって鮮鋭化の強さの調整を行い出力映像信号Yとする。このようにして、入力映像信号を出力映像信号に変換する。
 図1Bは、図1Aの符号Bに示す構成の詳細である空間フィルタ周辺回路の一構成例を示す機能ブロック図である。図1Bに示すように、入力映像信号101は、メモリコントローラ105により制御されるラインメモリ103(第1から第3までのラインメモリ103a~103c)に蓄積され、順番に空間フィルタ107に出力される。空間フィルタ107でフィルタリングされた映像信号は減算回路113に出力される。また、ラインメモリ103からの出力は遅延回路111にも出力され、遅延をもって減算回路113に出力される。減算回路113では、両方の入力信号の減算処理を行い、エッジ量入力115として出力する。
 次に、USMによる処理イメージについては図1Cを参照して説明する。各信号線路から引き出され符号a~fまでにより示された図は、画像の画素値を側面からみた各点における模式的な図であり、画素値を上下の高さ方向で示している。入力映像信号1が符号aに示すような画像であった場合に、例えば3×3の空間フィルタ3によりフィルタリングされると、符号bに示すように、平滑化が行われる。次いで、減算器5によりaからbを減算すると、符号cに示すように差分が求められる。符号cの信号を用い符号dに示すように閾値判定部7により判定を行い、閾値以上の信号についてはゲイン調整部11においてゲイン調整を行う。一方、閾値未満の場合には信号はなくなる(符号e)。閾値以上の場合の信号に加算器17において、入力信号aと加算し、出力映像信号Y21、すなわち、符号fで示される鮮鋭化された信号が得られる。
 まず、本発明の第1の実施の形態による映像処理技術について図面を参照しながら説明を行う。
 ここで、本明細書に記載の全ての実施例において、Xが正の範囲において使用するパラメータ(α1、β1、Th1)とXが負の範囲において使用するパラメータ(α2、β2、Th2)を同じパラメータ(α、β、Th)を用いて変換できるようにした場合を例として記載する。以下、平滑化パラメータαは0に近いほど小さいと定義し、鮮鋭化パラメータβは0に近いほど小さいと定義し、閾値パラメータThは0に近いほど小さいと定義する。
 図2は、本実施の形態による映像信号調整技術の原理を示す図であり、X-Y変換を行うための図である。図2には、X-Y変換の式も示されている。
 図31に示すX-Y変換図では、閾値パラメータThにおいて、平滑化処理変換と鮮鋭化処理変換の切替えを行っている。一方、図2における本実施の形態によるX-Y変換図では、閾値パラメータThは、Y=0、すなわち、X軸上に閾値Thを定め、鮮鋭化を決定する関数がThを通過するように設定している。また、-Th~+Thまでを平滑化(ノイズ除去)処理を行う範囲と定め、それよりも外側の範囲を、鮮鋭化処理を行う範囲と定めている。この場合には、図中の式に示すように、Y1=α・Xと、Y2=β・(X-Th_t)とで示される2つの1次直線による式のうち、X軸上において内側の式Y1と外側の式Y2との両方の式の交点がX-Y変換式の最大値と最小値となる。この変換式では、用いられるパラメータ(1次式の係数α、β)が、平滑化の強さを示すパラメータα、鮮鋭化の強さを示すパラメータβ、平滑化処理と鮮鋭化処理の切替りを決めるX軸上の閾値Thの3つのみからなるように設定している。
 より具体的には、図2において、Xが正の範囲において、(X、Y)=(0、0)及び(X,Y)=(Th、Y1<0)を連続的に結ぶ第1の関数の傾き(平滑化パラメータα)と、(X,Y)=(0、Y2<0)及び(X,Y)=(Th,0)を連続的に結び、さらにX>Th方向に延伸する第2の関数の傾き(鮮鋭化パラメータβ)と、平滑化処理と鮮鋭化処理の切替りを決めるX軸上の値(閾値パラメータTh)の3つのパラメータにより映像信号の入出力特性を決定することができる。α、βの値により関数の形状を変化させることができ、ThによりX軸と関数との交点を決定することができる。
 図3から図8までは、図2に示すα、β、Thの3つのパラメータをそれぞれ独立して小さくしたり大きくしたりした場合の入出力特性例(Y1、Y2)について示す図である。図3は、αのみを小さくするように変化させた場合の例であり、Y1の傾きが小さくなっているが、Y2はαに依存せず、かつ、Yの最大値、最小値は、Y1とY2との交点として定まるため、X-Yの変換式の連続性を保つことができる。
 図4は、αのみを大きくするように変化させた場合の例であり、Y1の傾きが大きくなっているが、Y2はαに依存せず、かつ、Yの最大値、最小値は、Y1とY2との交点として定まるため、X-Yの変換式の連続性を保つことができる。図5は、βのみを小さくするように変化させた場合の例であり、Y2の傾きが小さくなっているが、Y1はβに依存せず、かつ、Yの最大値、最小値は、Y1とY2との交点として定まるため、X-Yの変換式の連続性を保つことができる。図6は、βのみを大きくするように変化させた場合の例であり、Y2の傾きが大きくなっているが、Y1はβに依存せず、かつ、Yの最大値、最小値は、Y1とY2との交点として定まるため、X-Yの変換式の連続性を保つことができる。図7は、Thのみを小さくするように変化させた場合の例であり、Y1とY2の傾きは変化しておらず、また、Yの最大値、最小値は、Y1とY2との交点として定まるため、X-Yの変換式の連続性を保つことができる。図8のように、Thのみを大きく変化させた場合も同様である。
 本実施の形態によれば、鮮鋭化特性データと平滑化特性データとの交点を、閾値Thの内側に設定することにより、鮮鋭化パラメータと平滑化パラメータとを閾値Thとは独立に切替えるとともに鮮鋭化特性データと平滑化特性データとを常に連続にすることができるため、滑らかな高画質な映像を得ることができる。また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができる。
Figure JPOXMLDOC01-appb-T000006
 表1は、本実施の形態による映像信号調整技術におけるパラメータの設定例を示すものである。1/2倍に縮小時、2倍に拡大時のα、β、Thも示している。表示装置の概要としては、サイズが24.1型、画素ピッチが0.27×0.27mmのカラーTFT液晶パネルであり、推奨解像度は1920x1200である。フィルタの設定としては、フィルタサイズが5×5、フィルタ係数が全て“1”である。表示画像は、画像の種類が静止画であり、画像サイズが480×640であり、YUVのY(輝度)成分に対して処理を行った。
 表1に示す3つのパラメータの設定のみで、鮮鋭化と平滑化が両立された高画質な画像表示がされていることを確認できる。モニターのサイズや画素ピッチ、拡大縮小アルゴリズム等の条件に応じた調整が必要になるが、例示的に示す表1の値をベースにして映像の調整を行うことができる。3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができるため、映像を表示する装置の特性(解像度、画面サイズ、映像のビット数)に合わせた調整が可能となり、高画質な映像を得ることができる。
 図9(b)は、本実施の形態による映像信号変換回路の一例を示す機能ブロック図である。図9(a)は、各機能ブロックにおける演算式を示す図である。図9(b)に示す映像信号変換回路C1は、閾値Th、β、αの値を格納するレジスタ31と、式1-3の閾値を決定する回路32、式1-2を演算する第1の演算回路33、式1-1を演算する第2の演算回路34、式1-4を演算する第3の演算回路35、を有している。第3の演算回路35は、Y1とY2との最大値を求める回路36と、Y1とY2との最小値を求める回路37と、それぞれの出力からYを求めて出力する回路38と、を有している。入力信号Xは、回路32・33・34・38に入力されている。回路C1からはYが出力される。この構成によれば回路規模を小さくしながら映像信号に基づく表示の高品質化を図ることができる。
 以下、この鮮鋭化平滑化回路を利用した具体的な装置への応用例について説明する。図10は、本実施の形態による映像信号処理回路(鮮鋭化平滑化処理部131a)を有する表示装置121の一構成例を示す図である。表示装置121は、外部接続端子123と、制御部125と、外部メモリインターフェイスI/F127と、映像信号処理部131と、表示部133とを有している。外部接続端子123又は外部メモリインターフェイスI/F127から、映像入力信号を取得し、制御部125の指示に基づいて、映像信号処理部131でγ補正と前述の鮮鋭化平滑化処理部131aにより信号処理を行う。このようにして処理された出力映像信号を表示部133に出力して映像を表示させることができる。
 図11は、本実施の形態による鮮鋭化平滑化回路を用いた携帯端末装置141の一構成例を示す機能ブロック図である。図11に示すように、本実施の形態による携帯端末装置141は、操作部143と、無線通信部145と、カメラ147と、専用記憶部151と、RAM/ROM153と、例えば折り畳み型の携帯端末装置の形状を検出する形状検出部155と、レジスタ157と、TV受信部161と、外部接続端子163と、外部メモリI/F165と、電源(バッテリ)167と、制御部(CPU)171と、出力映像信号を出力する映像信号処理部181と、出力された映像信号に基づく表示をする表示部183と、を有している。
 映像信号処理部181は、RGBYUV変換部181aと、鮮鋭化平滑化処理部181bと、YUVRGB変換部181cと、γ補正部181dと、を有している。このように、携帯端末装置141の映像信号処理部181に、本実施の形態による鮮鋭化平滑化処理部を利用することで、高画質な映像を簡単に得ることができる。
 図12は、図11に示す携帯端末装置の表示部183に鮮鋭化平滑化処理部の調整パラメータを変更できるユーザインターフェイスを表示させた例を示す図である。携帯端末装置191には、表示部183と、操作部143と、アンテナ197とが設けられている。表示部183に表示した3つのパラメータTh(閾値)192、β(鮮鋭化)193、α(平滑化)194の設定値を操作部143によってそれぞれ変更することができるようになっている。(図では、閾値192を調整している様子が示されている。)。携帯端末装置のメーカ側が、出荷時に表示の個体差を無くすためにパラメータ調整することもできるし、ユーザが好みに応じて調整することもできる。ここで、調整パラメータを変更しながら、映像を確認できる構成が好ましい。例えば、メニュー表示を表示部183にスーパーインポーズにより表示させ、映像は全画面表示で調整後の映像が確認できるようにしておくこともできる。また、設定用の表示部を別途設けておいてもよい。
 図13は、本実施の形態による映像処理技術の利用シーンの一例を示す図である。全体を制御するのは、制御部(CPU)171である。ユーザからのパラメータ設定は操作部143により行うことができる。また、無線通信部145から無線通信によりパラメータ設定することができる。形状検出部155からの検出結果により携帯端末装置を制御することも可能である。例えば、形状検出部155によって、携帯端末装置の表示部の縦表示、横表示を検出することが可能となる。また、後述するように、テレビジョン(TV)受信部161から放送データによるパラメータ設定も可能である。
 入力映像信号は、無線通信部145、カメラ147、外部メモリI/Fからの動画・静止画など及びTV受信部161からのデジタル放送の映像などをソースとして取得され、映像信号処理部181の鮮鋭化平滑化処理部181bにおいて、本実施の形態による鮮鋭化・平滑化処理が行われる。この処理を行うためのパラメータが上記の各設定部から設定され制御部171を介してレジスタ157に設定されている設定値を更新することができる。更新されたパラメータを用いて入力映像の鮮鋭化処理・平滑化処理が行われる。出力映像信号を表示部183に出力して映像を表示させることができる。
 さらに、出力映像信号は、制御部171にも送ることができ、この出力映像信号(動画・静止画)を、無線通信部145、外部接続端子163、ハードディスク・メモリカードなどの専用記憶部151に出力するようにすることもできる。設定に基づくパラメータ値も同様に、無線通信部145、外部接続端子163、専用記憶部151に出力することができる。
 図14は、映像信号処理部における処理の流れを示す図である。図14に示すように、入力映像信号がまず、RGBYUV変換部181aに入力され、次いで、鮮鋭化平滑化処理部181bにおいて本実施の形態による変換処理が行われ、次いで、YUVRGB変換部181cにおいて変換が行われ、次いで、ガンマ補正部181dにおいてガンマ補正が行われ、出力映像信号が出力される。
 図15は、設定値の送受信を行う利用シーンの一例を示す図である。例えば、ユーザAが使用している携帯端末装置191aの設定値を、ネットワーク203を介して直接ユーザBの使用している携帯端末装置191bに送信するようにしても良い。この設定値とは、テレビ電話の自画像送信に合わせたパラメータとして送信する設定値、電波塔201から放送されるTV放送であって視聴中のテレビジョン(TV)放送にマッチングするように自分が調整した結果の設定値などをやり取りすることで、ユーザ同士で調整値を共有するようにすることができる。また、調整したパラメータを用いて変換されたTV電話の画像自体も送受信が可能である。尚、テレビジョン放送のコンテンツ(番組)自体に設定値が付与されていてもよい。サーバ205を介して、設定値付きの映像コンテンツをダウンロードできるようにしてもよい。この場合にも、動画コンテンツにマッチングした設定値を合わせて取得するようにし、映像コンテンツにマッチングした調整値をレジスタに設定することができる。以上のように、様々な形態でコンテンツを取得する際に、コンテンツにマッチングしたパラメータの設定値を合わせて取得することにより、コンテンツに適したパラメータにより鮮鋭化平滑化処理を行うことができる。
 図16は、表示される映像の拡大・縮小に関する表示の一例を示す図である。符号197はTV受信用のアンテナである。この映像にマッチした放送データによる設定、ユーザ同士の共有設定がある場合は、それをベースに表示ができる。無い場合でも、前述のようなユーザI/Fを用意しておけば、ユーザが望む映像に調整することが簡単にできる。
 例えば、携帯端末装置191のテレビで受信した映像をD1で示すと、D2に示すように、携帯端末装置191の表示部183に対して縦画面の表示時に映像表示エリアD2が受信した映像D1よりも解像度が小さい場合、映像表示エリア内に表示させるため、TV映像を縮小する必要がある。一方、D3に示すように、横画面の表示時に映像表示エリアD3が受信した映像D1よりも解像度が大きい場合に表示部全体に表示させるには、TV映像を拡大する必要がある。拡大する場合には、平滑化するデータの割合を少なくし、鮮鋭化するデータの割合を多くすることで、表示の品質を向上させることができる。一方、縮小する場合は、平滑化するデータの割合を多くし、鮮鋭化するデータの割合を少なくするような調整を行うことにより、あまりきつくない表示として見やすくすることができる。
 尚、操作は、操作部143によるユーザの単純なキー操作だけでなく、筐体の形状を変化(例えば表示部の回転動作など)させることを含み、その際の形状検出を行うことによる自動的な操作を含むものである。例えば、図13の形状検出部155などで形状検出が可能となる。この場合には、制御部(図示せず)は、形状検出部により縦画面表示か横画面表示かを判定し、レジスタの設定値を必要に応じて更新する。
 図17は、本実施の形態による鮮鋭化処理・平滑化処理の流れを示すフローチャート図である。まず、ステップS1に示すように、処理を開始し(START)、ステップS2において、Y1=α・Xの演算を行う。次いで、ステップS3において、Xが正か負かを判定する。負の場合には(Yes)ステップS4に進み、正の場合には(No)ステップS5に進む。ステップS4においては、Th_tを-Thとする。ステップS5においては、Th_tをThとする。次いで、ステップS6・S7において、Y2=β・(X-Th_t)を求める。さらに、ステップS8ではY=min(Y1,Y2)を、ステップS9ではY=max(Y1,Y2)を求め、処理を終了する(ステップS10)。このように、ソフトウェア処理により図2に示すような鮮鋭化平滑化処理を行うこともできる。
 以上に説明したように、本実施の形態によれば、原点を通過する関数として定義される第1の関数の係数を平滑化パラメータ(α)とし、閾値Thを通過する関数として定義される第2の関数の係数を鮮鋭化パラメータ(β)とすることにより、鮮鋭化平滑化処理が簡単になる。
 また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができるため、拡大・縮小時(例:TV放送の縦表示、横表示)においても、高画質な映像を得ることができる。
 次に、本発明の第2の実施の形態による映像処理技術について図面を参照しながら説明を行う。
 図18は、本実施の形態による映像処理技術の原理を示す図であり、X-Y変換を行うための図である。図18に示すように、平滑化(ノイズ除去)を行う関数が原点と閾値Th、-Thを通る2次曲線Y1=α_t・X・(X-Th_t)により表され、鮮鋭化を行う関数が閾値Th、-Thを通る直線Y2=β・(X-Th_t)により表される。この手法を用いると、第1の実施の形態の場合よりも回路規模や処理量は大きくなるが、画像の変化がより一層滑らかになるという利点がある。
 図19は、本実施の形態による映像信号変換回路の一例を示す機能ブロック図である。図19(a)に、各機能ブロックにおける演算式を示す。図19(b)に示す映像信号変換回路C2は、閾値Th、β、αの値を格納するレジスタ51と、式2-3の閾値とαとを決定する回路52、式2-2を演算する第1の演算回路53、式2-1を演算する第2の演算回路54、式2-4を演算する第3の演算回路55、を有している。第3の演算回路55は、Y1とY2との最大値を求める回路56と、Y1とY2との最小値を求める回路57と、それぞれの出力からYを求めて出力する回路58と、を有している。入力信号Xは、回路52・53・54・58に入力されている。回路C2からはYが出力される。この構成によれば回路規模を小さくしながら映像信号に基づく表示のより一層の高品質化を図ることができる。
 図20は、本実施の形態による処理をソフトウェア処理による行うための処理の流れを示すフローチャート図である。まず、ステップS11に示すように、処理を開始し(START)、ステップS12において、Xが正か負かを判定する。負の場合には(Yes)ステップS13に進み、正の場合には(No)ステップS14に進む。ステップS13においては、α_t=-α、Th_t=-Thとし、ステップS14においては、α_t=α、Th_t=Thとする。次いで、ステップS15において、Y1 = α_t・X・(X - Th_t)を求める。さらに、ステップS16ではY2=β・(X-Th_t)を求める。ステップ17において、Xの条件を判定する。Yesの場合にはステップ18においてY=max(Y1,Y2)を求め、Noの場合には、ステップS19においてY=min(Y1,Y2)を求め、処理を終了する(ステップS20)。このように、ソフトウェア処理により鮮鋭化平滑化処理を行うこともできる。
 以上に説明したように、本実施の形態によれば、原点を通過する関数として定義される第1の関数である2次曲線の係数を平滑化パラメータ(α)とし、閾値Thを通過する関数として定義される第2の関数である直線の傾きを鮮鋭化パラメータ(β)とすることにより、鮮鋭化平滑化処理が簡単になる。
 また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができるため、拡大・縮小時(例:TV放送の縦表示、横表示)においても、高画質な映像を得ることができる。この構成によれば回路規模を小さくしながら映像信号に基づく表示のより一層の高品質化を図ることができる。
 次に、本発明の第3の実施の形態による映像処理技術について図面を参照しながら説明を行う。
 図21は、本実施の形態による映像処理技術の原理を示す図であり、X-Y変換を行うための図である。図21に示すように、平滑化(ノイズ除去)を行う関数が、原点と閾値Th、-Thを通る3次曲線Y1=α・X・(X-Th_t)・(X+Th_t)により表され、鮮鋭化を行う関数が、閾値Th、-Thを通る直線Y2=β・(X-Th_t)により表される。この手法を用いると、第1の実施の形態の場合よりも回路規模や処理量は大きくなるが、第2の実施例と同様に画像の変化が滑らかになるという利点がある。
 図22は、本実施の形態による映像信号変換回路の一例を示す機能ブロック図である。図22(a)に、各機能ブロックにおける演算式を示す。図22(b)に示す映像信号変換回路C3は、閾値Th、β、αの値を格納するレジスタ71と、式3-3により閾値Th_tを求める回路72と、式3-2より、β・(X-Th_t)を求める第1の演算回路73と、式3-1より、α・X(X-Th_t)・(X+Th_t)を求める第2の演算回路74と、式3-4に基づいてYを求める第3の演算回路75と有している。第3の演算回路75は、Y1とY2との最大値を求める回路76と、Y1とY2との最小値を求める回路77と、それぞれの出力からYを求めて出力する回路78と、を有している。入力信号Xは、回路72・73・74・78に入力されている。回路C3からはYが出力される。この構成によれば映像信号に基づく表示のより一層の高品質化を図ることができる。
 図23は、本実施の形態による処理をソフトウェア処理による行うための処理の流れを示すフローチャート図である。まず、ステップS31に示すように、処理を開始し(START)、ステップS32において、Xが正か負かを判定する。負の場合には(Yes)ステップS33に進み、正の場合には(No)ステップS34に進む。ステップS33においては、Th_t=-Thとし、ステップS34においては、Th_t=Thとする。次にステップS35において、Y1 = α・X・(X-Th_t)・(X+Th_t)を求め、ステップS36において、Y2=β・(X-Th_t)を求める。ステップ37において、Xの条件を判定する。Yesの場合にはステップ38においてY=max(Y1,Y2)を求め、Noの場合には、ステップS39においてY=min(Y1,Y2)を求め、処理を終了する(ステップS40)。このように、ソフトウェア処理により鮮鋭化平滑化処理を行うこともできる。
 以上に説明したように、本実施の形態によれば、原点を通過する関数として定義される第1の関数である3次曲線の係数を平滑化パラメータ(α)とし、閾値Thを通過する関数として定義される第2の関数である直線の傾きを鮮鋭化パラメータ(β)とすることにより、鮮鋭化平滑化処理が簡単になる。
 また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができるため、拡大・縮小時(例:TV放送の縦表示、横表示)においても、高画質な映像を得ることができる。この構成によれば映像信号に基づく表示のより一層の高品質化を図ることができる。
 さらに、n(nは4以上の整数)曲線を用いることもできる。尚、直線、2次曲線などは、完全な曲線でなくても良く、X軸との交点なども完全に原点や閾値と一致していなくても、良い。また、例えば、図19(b)の55で示した演算回路を簡単にしたい場合は必ず閾値で平滑化処理と鮮鋭化処理を切替わるようにすればよい。その場合の演算式は図41(a)のような式を用いればよい。入出力特性は図40のようになる。図41(b)は映像信号変換回路の一例を示す機能ブロック図であり、図42はソフトウェア処理による行うための処理の流れを示すフローチャート図である。また、例えば、図22(b)の75で示した演算回路を簡単にしたい場合は、同様に必ず閾値で平滑化処理と鮮鋭化処理を切替わるようにすればよい。その場合の演算式は図44(a)のような式を用いればよい。入出力特性は図43のようになる。図44(b)は映像信号変換回路の一例を示す機能ブロック図であり、図45はソフトウェア処理による行うための処理の流れを示すフローチャート図である。また、パラメータ(α、β、Th)は、Xが正の範囲において使用するパラメータ(α1、β1、Th1)と、Xが負の範囲において使用するパラメータ(α2、β2、Th2)のように、Xの範囲が正と負との場合において別の値を用いて処理してもよい。また、例えば、閾値パラメータはパラメータではなく固定値としてもよく、その場合は更に回路規模が小さくすることができる。つまり、3つのパラメータのうちの少なくとも1つが可変であれば良い。
(本実施の形態による映像処理結果の例)
 以下に、図2に基づく映像処理と図30に基づく映像処理結果の比較例について説明する。以下、フィルタサイズが3×3、フィルタ係数は全て1の場合を例に説明する。但し、フィルタサイズが、5×5、7×7のような場合や、フィルタ係数が異なるものを設定してもよい。また、データはYUVのY(輝度)成分に対して処理を行う場合を例に説明する。但し、データはYCbCr、YPbPr、YIQのYや、L*u*v*、L*a*b*のL、RGBなどに対しても同様に処理することができる。
 図24は、本発明の第1の実施の形態(a)と特許文献1の実施例1の映像処理技術(b)に基づくX軸上での範囲を示す模式的な図である。従来の映像処理では、閾値Thを境界として、鮮鋭化を行う領域と、鮮鋭化を行わない領域に分けられる。一方、本実施の形態による映像処理においては、エッジ量入力X軸において、X=0から平滑化処理の特性を示すY1と鮮鋭化処理の特性を示すY2との交点までの範囲は、平滑化処理が行われ、Xの絶対値が閾値Thより大きい範囲では鮮鋭化処理が行われ、その中間領域では平滑化処理と鮮鋭化処理との中間的な処理が行われる。
 図25は、本実施の形態と従来の映像処理技術に基づく平滑化処理結果の例を示して比較した図である。上から順番に、パラメータであるβ=1、α=-1、Th=3の場合、β=2(2倍)、α=-1、Th=3の場合、β=1、α=-0.5(半分)、Th=3の場合、β=1、α=-1、Th=6(2倍)の場合の例である。左から順番に、5×5の入力映像信号(輝度)、エッジ量入力(四捨五入した値)、従来技術に基づく出力映像信号、本実施の形態による出力映像信号の例を示す図である。右端には、輝度の面内での標準偏差が示されている。平滑化されるデータがあるため、従来技術より標準偏差が小さくなっており、画像は滑らかで高画質となることがわかる。また、鮮鋭化パラメータを2倍にした場合においても、鮮鋭化データがないため、鮮鋭化パラメータを2倍にしない場合と同様に、通常時と標準偏差に変化がなく、従来技術より画像は滑らかで高画質となる。また、αを半分にした場合には、平滑化の強さを示すパラメータを弱くするように変更したため、通常時から標準偏差が変化(増加)したが、それでも、従来技術よりは画像は滑らかで高画質となっていることがわかる。
 さらに、閾値を変更した場合においても、ノイズとみなす範囲を増やしたことにより、全てのデータがノイズとみなす範囲に含まれることになったため、標準偏差は最も小さくなっており、平滑化効果(ノイズ除去効果)は最も高く、高画質となることがわかる。平滑化から鮮鋭化へ切替わる境目が連続であるため各パラメータを単独で変更できる。また、特許文献1の実施例4ではこのような変換はできない。また従来技術では出力結果に変化が無いが、本実施の形態では出力データに変化があり、様々な平滑化効果を出すことができ高画質化が実現できる。
 図26は、図25において、表示を2倍に拡大した場合の平滑化処理結果の例を示して比較した図である。特徴として、通常時よりもエッジ量入力が拡大前と比べて小さくなっていることが分かる。本実施の形態では、全てが平滑化されるデータとなるため、従来技術より標準偏差が小さく、画像は滑らかで高画質となることがわかる。この場合には、エッジ量入力が拡大前と比較して小さくなっており、この例では全ての画素が平滑化されている。
 図27は、本実施の形態と従来の映像処理技術に基づく鮮鋭化処理結果の例を示して比較した図であり、図25に対応する図である。上から順番に、パラメータであるβ=1、α=-1、Th=6の場合、β=2(2倍)、α=-1、Th=6の場合、β=1、α=-0.5(1/2倍)、Th=6の場合、β=1、α=-1、Th=12(2倍)の場合の例である。本実施の形態では、それぞれ平滑化されるデータと鮮鋭化されるデータがある。また、鮮鋭化処理と平滑化処理の切替りが連続的であるため、従来技術に比べて画像は滑らかで高画質となることがわかる。
 図28は、図27において、表示を2倍に拡大した場合の鮮鋭化処理結果の例を示して比較した図である。ここで、設定値は通常時と同様にβ=1、α=-1、Th=6を用いている。この場合には、鮮鋭化を行いたかったのだが、エッジ量入力が拡大前と比べて小さくなっているため、その結果、全てが平滑化されるデータとなっていることがわかる。2倍拡大時も通常時と同様に鮮鋭化を行いたい場合は、通常時と同様の設定では、本実施の形態の出力結果全てが平滑化されてしまう。図26で示した平滑化効果確認の拡大時も同様であったように、拡大アルゴリズムによっては通常時と同様のパラメータを拡大時にも用いると、エッジ量入力が拡大前と比べて小さくなっているため、拡大時はかなりの画素が平滑化されてしまう結果となる。従って、拡大時は平滑化するデータの割合を少なくし、鮮鋭化するデータの割合を多くする方が高画質化となるため、閾値Thを小さくする、平滑化量を決定するパラメータαを小さくする、鮮鋭化量を示すパラメータβを大きくする、のいずれかの処理のうち、少なくとも3つのうちの1つを行うことで高画質化が可能となる。よってここでは例えば、拡大時はβ=2(2倍)、α=-1、Th=3(1/2倍)に設定すればよい。また、前段の拡大アルゴリズムがどのようなものであるか確認できていなくとも、出力結果を見たうえで、3つのパラメータを調整できるため、ユーザが望む画像に調整できる。
 また、図29は、図28で拡大した画像を1/2倍に縮小した際のデータを入力映像信号として平滑化と鮮鋭化の処理を行った結果を示す図である。ここで、設定値を拡大時の高画質化パラメータとして提案した値であるβ=2、α=-1、Th=3を同様に用いてしまうと、エッジ量入力が縮小前(図28のエッジ量入力)と比べて大きくなっているため、かなりの画素が鮮鋭化されてしまう結果となることが予測できる。よって例えば、1/2倍縮小時に拡大時と同様に高画質化したい場合は、縮小時に閾値Thを大きくする、平滑化量を決定するパラメータαを大きくする、鮮鋭化量を示すパラメータβを小さくする、のいずれかの処理のうち、少なくとも3つのうちの1つを行った設定値を縮小に設定することで高画質化が可能となる。この従来技術及び本実施の形態による出力映像信号は、β=1(1/2倍)、α=-1、Th=6(2倍)を用いて処理を行った場合を示している。本実施の形態の出力結果を見ると、鮮鋭化処理と平滑化処理が共に連続的に行われ、高画質化が可能となっていることが分かる。前段の縮小アルゴリズムがどのようなものであるか確認できていなくとも、出力結果を見たうえで、3つのパラメータを調整できるため、ユーザが望む画像に調整できる。
(まとめ)
 本実施の形態によれば、入力映像信号を空間フィルタにより処理した出力信号との差分であるエッジ量入力Xと、エッジ量入力Xを変換することによって得られるエッジ量出力YとのX-Y入出力特性において、鮮鋭化されるデータと平滑化されるデータの切替りが常に連続であるため、滑らかな高画質な映像を得ることができる。また、3つのパラメータ毎にそれぞれ異なった出力映像信号を得ることができ、拡大・縮小時(例:TV放送の縦表示、横表示)においても、高画質な映像を得ることができる。また、映像を表示する装置の特性(解像度、画面サイズ、映像のビット数)に合わせた調整ができるため、高画質な映像を得ることができる。さらに、パラメータ調整の自由度を高めることができる。
 尚、上記の実施の形態において、添付図面に図示されている構成等については、これらに限定されるものではなく、本発明の効果を発揮する範囲内で適宜変更することが可能である。その他、本発明の目的の範囲を逸脱しない限りにおいて適宜変更して実施することが可能である。例えば、エッジ量入力Xとエッジ量出力Yとにより画定されるX-Y平面のXが正の範囲において、原点を通り、0<X<Th1の時に平滑化処理を行う第1の関数(関数1)と記載されている場合に、第1の関数が原点の近傍を通っていれば、完全に原点を通っていなくても、本発明の範囲内に入るものである。また、閾値をX値とするX軸上の点(Th1,0)を通り、0<X<Th1の時に平滑化処理を行い、X>Th1の時に鮮鋭化処理を行う第2の関数(関数2)に関しても、点(Th1,0)を通っていなくてもその近傍を通っていれば本発明の範囲内に入るものである。
 すなわち、本発明は、入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号回路であって、前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換する際に、前記平滑化処理の強度を決める平滑化係数(α)と、前記鮮鋭化処理の強度を決める鮮鋭化係数(β)と、前記平滑化処理と前記鮮鋭化処理の切替り位置(X)を決める閾値(Th)と、の3つがあり、そのうちの少なくとも1つが可変パラメータである連続した関数により映像信号の入出力特性が決められることが特徴であり、当業者の想到する範囲内で種々の変更・置換等が可能であり、これらの場合であっても本発明の範囲内に入るものである。
 また、本実施の形態で説明した機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。尚、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。
 また、「コンピュータシステム」は、WWWシステムを利用している場合であれば、ホームページ提供環境(あるいは表示環境)も含むものとする。
 また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また前記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
 本発明は、映像処理回路に利用可能である。

Claims (9)

  1.  入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号回路であって、
     前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換する際に、
     前記エッジ量入力Xと前記エッジ量出力Yとにより画定されるX-Y平面のXが正の範囲において、
     原点を通り、0<X<Th1の時に平滑化処理を行う第1の関数(関数1)と、
     前記閾値をX値とするX軸上の点(Th1,0)を通り、0<X<Th1の時に平滑化処理を行い、X>Th1の時に鮮鋭化処理を行う第2の関数(関数2)とを設け、
     前記平滑化処理の強度を決める平滑化係数(α1)と、
     前記鮮鋭化処理の強度を決める鮮鋭化係数(β1)と、
     前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値(Th1)と、
    の3つのうち1つ以上を可変パラメータとして映像信号の入出力特性を決定することを特徴とする映像信号処理回路。
  2.  入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号回路であって、
     前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換する際に、
     前記エッジ量入力Xと前記エッジ量出力Yとにより画定されるX-Y平面のXが負の範囲において、
     原点を通り、Th2<X<0の時に平滑化処理を行う第1の関数(関数1)と、
     前記閾値をX値とするX軸上の点(Th2,0)を通り、Th2<X<0の時に平滑化処理を行い、X<Th2の時に鮮鋭化処理を行う第2の関数(関数2)とを設け、
     前記平滑化処理の強度を決める平滑化係数(α2)と、
     前記鮮鋭化処理の強度を決める鮮鋭化係数(β2)と、
     前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値(Th2)と、
    の3つのうち1つ以上を可変パラメータとして映像信号の入出力特性を決定することを特徴とする映像信号処理回路。
  3.  前記X-Y入出力特性において、0<X<Th1の範囲内において前記関数1と前記関数2とが交差する場合には、大きい方の特性を、Th2<X<0の範囲内において前記関数1と前記関数2とが交差する場合には、小さい方の特性が選択されることを特徴とする請求項1又は2に記載の映像信号処理回路。
  4.  前記関数1又は関数2とは、以下のいずれかの式によって表されることを特徴とする請求項1から3までのいずれか1項に記載の映像信号処理回路。
    Figure JPOXMLDOC01-appb-M000001
    Figure JPOXMLDOC01-appb-M000002
    Figure JPOXMLDOC01-appb-M000003
  5.  前記入力映像信号を拡大する場合に、前記閾値Thを変更して平滑化するデータの割合を少なくし鮮鋭化するデータの割合を多くする第1の処理、前記平滑化係数αを変更して平滑化の強さを小さくする第2の処理、前記鮮鋭化係数βを変更して鮮鋭化の強さを大きくする第3の処理、の少なくともいずれか1つの処理を実行することを特徴とする請求項1から4までのいずれか1項に記載の映像信号処理回路。
  6.  前記入力映像信号を縮小する場合に、前記閾値Thを変更して平滑化するデータの割合を多くし鮮鋭化するデータの割合を少なくする第1の処理、前記平滑化係数αを変更して平滑化の強さを大きくする第2の処理、前記鮮鋭化係数βを変更して鮮鋭化の強さを小さくする第3の処理、の少なくともいずれか1つの処理を実行することを特徴とする請求項1から4までのいずれか1項に記載の映像信号処理回路。
  7.  請求項1から6までのいずれか1項に記載の映像信号処理回路の出力映像信号に基づく表示を行う表示部を有することを特徴とする表示装置。
  8.  請求項7に記載の表示装置を備えることを特徴とする携帯端末装置。
  9.  入力映像信号に平滑化処理と鮮鋭化処理とを行い出力映像信号とする映像信号処理方法であって、
     前記入力映像信号のエッジ量入力(X)をエッジ量出力(Y)に変換することによって得られる関係を示すX-Y入出力特性において、前記平滑化処理と前記鮮鋭化処理の切替りを決める閾値ThをX軸上(Y=0)に設定するステップと、
    原点を通り、|X|<Th(-Th<X<Th)の時に平滑化処理を行う第1の関数と、
    前記閾値を通り、|X|<Th(-Th<X<Th)の時に平滑化処理を行い、|X|>Th(X<-Th又はX>Th)の時に鮮鋭化処理を行う第2の関数であって、前記関数1と前記関数2とが交差することにより決められる入出力変換特性に基づく変換処理を行うステップと、を有することを特徴とする映像信号処理方法。
PCT/JP2009/062512 2008-07-14 2009-07-09 映像信号処理装置及び映像表示装置 WO2010007933A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2009801274449A CN102100060A (zh) 2008-07-14 2009-07-09 视频信号处理装置和视频显示装置
JP2010520841A JP5279830B2 (ja) 2008-07-14 2009-07-09 映像信号処理装置及び映像表示装置
US13/054,003 US8351734B2 (en) 2008-07-14 2009-07-09 Video signal processing device and video display device
EP09797858A EP2315431A4 (en) 2008-07-14 2009-07-09 PICTURE SIGNAL PROCESSING DEVICE AND PICTURE DISPLAY DEVICE

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008182724 2008-07-14
JP2008-182724 2008-07-14

Publications (1)

Publication Number Publication Date
WO2010007933A1 true WO2010007933A1 (ja) 2010-01-21

Family

ID=41550336

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/062512 WO2010007933A1 (ja) 2008-07-14 2009-07-09 映像信号処理装置及び映像表示装置

Country Status (5)

Country Link
US (1) US8351734B2 (ja)
EP (1) EP2315431A4 (ja)
JP (1) JP5279830B2 (ja)
CN (1) CN102100060A (ja)
WO (1) WO2010007933A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013161194A (ja) * 2012-02-02 2013-08-19 Canon Inc 画像処理装置及び画像処理方法
CN106297725A (zh) * 2016-08-26 2017-01-04 南京巨鲨显示科技有限公司 具有一键图像锐化及平滑功能的灰阶显示器及其调节方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011035776A (ja) * 2009-08-04 2011-02-17 Sanyo Electric Co Ltd 映像情報処理装置およびプログラム
US20140241589A1 (en) * 2011-06-17 2014-08-28 Daniel Weber Method and apparatus for the detection of visibility impairment of a pane
WO2016022374A1 (en) * 2014-08-05 2016-02-11 Seek Thermal, Inc. Local contrast adjustment for digital images

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03245675A (ja) 1990-02-23 1991-11-01 Matsushita Electric Ind Co Ltd 画像処理装置
JPH09121366A (ja) * 1995-08-29 1997-05-06 Samsung Electron Co Ltd 色信号に含まれた輪郭を補正する方法及びこれをカラービデオ機器で具現するための回路
JP2008078830A (ja) * 2006-09-19 2008-04-03 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2008113337A (ja) * 2006-10-31 2008-05-15 Konica Minolta Holdings Inc 撮像装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0170657B1 (ko) 1994-08-31 1999-03-30 김광호 색신호에 있는 윤곽을 보정하는 방법 및 이를 칼라 비디오기기에서 구현하기 위한 회로
US6246783B1 (en) * 1997-09-17 2001-06-12 General Electric Company Iterative filter framework for medical images
US7265873B1 (en) * 1999-04-13 2007-09-04 Conexant Systems, Inc. Image processor that performs edge enhancement using a dynamic threshold
US7268916B2 (en) * 2000-09-20 2007-09-11 Nik Software, Inc. Digital image sharpening system
JP4443784B2 (ja) * 2000-12-07 2010-03-31 株式会社エヌ・ティ・ティ・ドコモ 画像符号化・復号方法、画像符号化装置及び画像復号装置
US7206459B2 (en) * 2001-07-31 2007-04-17 Ricoh Co., Ltd. Enhancement of compressed images
US7545976B2 (en) * 2002-05-01 2009-06-09 Hewlett-Packard Development Company, L.P. Method and apparatus for associating image enhancement with color
US7570832B2 (en) * 2004-06-14 2009-08-04 Precoad Inc. Image clean-up and pre-coding
TWI280046B (en) * 2005-09-20 2007-04-21 Novatek Microelectronics Corp Device and method for sharpening image signal
US8442344B2 (en) * 2006-08-07 2013-05-14 Qualcomm Incorporated Adaptive spatial image filter for filtering image information
US8335403B2 (en) * 2006-11-27 2012-12-18 Nec Laboratories America, Inc. Soft edge smoothness prior and application on alpha channel super resolution

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03245675A (ja) 1990-02-23 1991-11-01 Matsushita Electric Ind Co Ltd 画像処理装置
JPH09121366A (ja) * 1995-08-29 1997-05-06 Samsung Electron Co Ltd 色信号に含まれた輪郭を補正する方法及びこれをカラービデオ機器で具現するための回路
JP2008078830A (ja) * 2006-09-19 2008-04-03 Ricoh Co Ltd 画像処理装置及び画像処理方法
JP2008113337A (ja) * 2006-10-31 2008-05-15 Konica Minolta Holdings Inc 撮像装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2315431A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013161194A (ja) * 2012-02-02 2013-08-19 Canon Inc 画像処理装置及び画像処理方法
CN106297725A (zh) * 2016-08-26 2017-01-04 南京巨鲨显示科技有限公司 具有一键图像锐化及平滑功能的灰阶显示器及其调节方法

Also Published As

Publication number Publication date
US8351734B2 (en) 2013-01-08
JP5279830B2 (ja) 2013-09-04
EP2315431A4 (en) 2012-06-27
CN102100060A (zh) 2011-06-15
EP2315431A1 (en) 2011-04-27
JPWO2010007933A1 (ja) 2012-01-05
US20110115982A1 (en) 2011-05-19

Similar Documents

Publication Publication Date Title
JP4894595B2 (ja) 画像処理装置および方法、並びに、プログラム
JP5094219B2 (ja) 画像処理装置、画像処理方法、プログラム、記録媒体および集積回路
US7903898B2 (en) Visual processing apparatus, visual processing method, program, recording medium, display device, and integrated circuit
JP2008159071A (ja) 視覚処理装置、視覚処理方法、プログラム、表示装置および集積回路
JPWO2007043460A1 (ja) 視覚処理装置、表示装置、視覚処理方法、プログラムおよび集積回路
EP3731221B1 (en) Image brightness adjustment method, device and system, and computer-readable storage medium
JP5279830B2 (ja) 映像信号処理装置及び映像表示装置
JP2008125112A (ja) 視覚処理装置、表示装置、視覚処理方法、プログラムおよび集積回路
CN101188671A (zh) 视频图像的锐化方法
JP2007249436A (ja) 画像信号処理装置及び画像信号処理方法
US8265419B2 (en) Image processing apparatus and image processing method
WO2013151163A1 (ja) 画像処理装置、画像表示装置、画像処理方法、コンピュータプログラム及び記録媒体
JP5295854B2 (ja) 画像処理装置及び画像処理プログラム
US7949199B2 (en) Image processing method and related apparatus for an image processing system
JP5950652B2 (ja) 画像処理回路、半導体装置、画像処理装置
JP4305917B2 (ja) 映像信号処理装置及びテレビジョン装置
KR101634652B1 (ko) 영상의 대비 강화 방법 및 장치
JP5349204B2 (ja) 画像処理装置及び方法、並びに画像表示装置及び方法
JP4632100B2 (ja) 画像処理装置、画像処理方法、記録媒体、およびプログラム
JP4292113B2 (ja) 画像処理装置及び画像処理方法
KR20050071727A (ko) 영상 처리 장치 및 그 방법
JP2012134576A (ja) 画像処理装置、画像処理方法
KR20090091569A (ko) 선택적 영역의 독립적 화질 개선 방법
JP4483407B2 (ja) 映像信号処理装置
JP2015108960A (ja) 画像処理装置、その制御方法及びプログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200980127444.9

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09797858

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2010520841

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13054003

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 924/CHENP/2011

Country of ref document: IN

WWE Wipo information: entry into national phase

Ref document number: 2009797858

Country of ref document: EP