WO2016075744A1 - プロジェクタ及び映像表示方法 - Google Patents

プロジェクタ及び映像表示方法 Download PDF

Info

Publication number
WO2016075744A1
WO2016075744A1 PCT/JP2014/079758 JP2014079758W WO2016075744A1 WO 2016075744 A1 WO2016075744 A1 WO 2016075744A1 JP 2014079758 W JP2014079758 W JP 2014079758W WO 2016075744 A1 WO2016075744 A1 WO 2016075744A1
Authority
WO
WIPO (PCT)
Prior art keywords
video
image
luminance level
unit
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2014/079758
Other languages
English (en)
French (fr)
Inventor
伸宏 福田
中嶋　満雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Hitachi Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Maxell Ltd filed Critical Hitachi Maxell Ltd
Priority to PCT/JP2014/079758 priority Critical patent/WO2016075744A1/ja
Priority to US15/522,619 priority patent/US9955131B2/en
Priority to JP2016558463A priority patent/JP6469130B2/ja
Priority to CN201480083268.4A priority patent/CN107079127B/zh
Publication of WO2016075744A1 publication Critical patent/WO2016075744A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials

Definitions

  • the present invention relates to a projector for projecting and displaying an image on a projection surface and an image display method, and more particularly to a technique for suitably reducing the blur of the projected image.
  • a projector is installed on a horizontal surface such as a desk or a ceiling, and projects an image on a screen attached to a vertical surface such as a wall.
  • the attitude of the projector is adjusted so that a clear image can be projected on the screen.
  • not all projectors can be installed so that the installation surface and the screen surface are in a vertical relationship.
  • the projector installed on the ceiling is projected onto the screen in front of the auditorium so that the image is distorted in a trapezoidal shape.
  • portable projectors used in meeting rooms and the like often project from a desk, but they are not necessarily projected onto a vertical wall surface and are often displayed in a distorted manner as well.
  • a technique for adjusting this so as to eliminate the distortion and form a rectangle is keystone correction (keystone correction).
  • keystone correction keystone correction
  • a trapezoidal image is converted into a rectangular shape by performing a geometric conversion operation such as reduction or enlargement on the projected video signal.
  • Patent Document 1 discloses a technique for reducing the geometric blur of enlargement / reduction operation at the time of keystone correction by sharpness processing. Specifically, it is described that the screen is divided into a plurality of areas, and an adjustment value for sharpness adjustment is set for each divided area, and the sharpness adjustment of each area is performed based on the adjustment value.
  • the projector lens is designed so that it is uniformly focused on the screen if the distance to the screen and the angle of projection are appropriate (hereinafter referred to as a reference setting).
  • a reference setting the image of the portion exceeding the depth of field of the lens among the images in the rectangle is blurred due to the focus shift. That is, the range in which a suitable image can be obtained even when keystone correction is performed is extremely limited.
  • the reference setting is used, if the lens design or accuracy is not appropriate, there is a problem that blur occurs at the edge of the screen due to a difference in projection distance from the center of the screen and aberration.
  • the blur due to the difference in the projection distance when performing the keystone correction is particularly remarkable in the ultra-short projection projector and the wide-angle short projection projector in which the projection angle is steep at the screen edge of the projected image.
  • projection mapping is often performed in the projection onto a three-dimensional object.
  • a difference in focal length due to depth occurs, and thus there is a problem that blurring due to focus shift occurs when there is a distance difference greater than the depth of field.
  • the present invention is to provide a projector and a video display method that suitably reduce video blur caused by the resolution of a projection optical system such as a focus shift of a lens.
  • a video processing unit that performs video processing on the input video signal, and a video signal that has been video processed by the video processing unit are input to generate an optical image.
  • the video correction unit changes the black luminance level of the video signal.
  • an image display method for projecting and displaying an image on a projection surface, an image processing step for performing image processing on an input image signal, and an optical image by an image display element by inputting the image processing image signal.
  • An optical image generation step for generating the image, and a projection step for projecting the generated optical image onto the projection surface by the projection optical system.
  • the image processing step in order to reduce blur of the image projected by the projection optical system, It has a video correction function for changing the black luminance level of the video signal.
  • the present invention it is possible to suitably reduce image blur caused by the resolution of the projection optical system such as a lens focus shift.
  • FIG. 3 is a diagram illustrating a configuration of a projector according to the first embodiment.
  • amendment part in FIG. The figure explaining the relationship between the focus by a convex lens, and a real image.
  • FIG. 3 is a diagram for explaining a video signal correction method according to the first embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to the second embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to the third embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to a fourth embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to a fifth embodiment. The figure which shows the PSF data in a lens shift.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to the second embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to the third embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to a fourth embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to a fifth embodiment.
  • FIG. 10 is a diagram illustrating a configuration of a video correction unit according to a sixth embodiment.
  • Embodiment 1 describes a projector that performs resolution restoration processing by despreading process calculation.
  • FIG. 1 is a diagram illustrating a configuration of a projector according to the first embodiment.
  • the projector 1 receives a video input signal 100 output from a broadcast wave or a PC, inputs a display control signal 103 to a video processing unit 10 that processes the video signal, and a liquid crystal panel that is a video display element. It is comprised with the optical unit 20 which produces
  • the video processing unit 10 receives the video input signal 100 and converts the internal video signal 101 into an internal video signal 101 by converting the internal video signal 101 by, for example, a decoder of compressed video signal, IP conversion, scaler, keystone correction, and the like.
  • a video correction unit 12 that inputs and performs resolution restoration processing by a despreading process calculation described later and converts it into a corrected video signal 102, and the corrected video signal 102 are input.
  • the timing control unit 13 for generating 103 is configured.
  • the optical unit 20 receives the light source (lamp) 21 that generates the illumination light 201 and the display control signal 103 output from the video processing unit 10, adjusts the gradation of the illumination light 201 for each pixel, and the optical image 202.
  • the projector 1 has a function of displaying a menu screen for a user to operate adjustment of brightness (brightness), contrast, hue, keystone, etc. of an image to be projected, input signal switching, and the like. Based on the above, the function of each unit is controlled by a control unit (not shown).
  • FIG. 2 is a diagram showing the configuration of the video correction unit 12 in FIG.
  • An image correction unit 30 (corresponding to reference numeral 12 in FIG. 1) includes a position acquisition unit 31 that acquires a pixel position 301 that matches the input signal in the projection optical system from the optical unit 20 to the screen 2, and each image signal in the image signal.
  • a position acquisition unit 31 that acquires a pixel position 301 that matches the input signal in the projection optical system from the optical unit 20 to the screen 2, and each image signal in the image signal.
  • a geometric calculation unit 32 that calculates a position 302 where the image light rays intersect on the lens
  • a blur amount calculation unit 33 that calculates a blur amount 303 from the position 302 on the lens.
  • a resolution restoration unit 34 that performs a despreading operation based on the internal video signal 101 and the blur amount 303.
  • the geometric calculation unit 32 calculates the position 302 where the light rays intersect on the lens according to the Gaussian imaging formula from the pixel position 301 on the LCD 22 and the optical axis distance assumed from the set focus and zoom.
  • the Gaussian imaging formula is expressed by Equation 1 where a is the distance from the object to the lens, b is the distance from the lens to the real image, and f is the focal point.
  • FIG. 3 is a diagram for explaining the relationship between the focal point by the convex lens and the real image.
  • the distance b to the real image 42 is determined by Equation 1.
  • the object 41 is an image on the LCD 22, and the real image 42 is an image projected on the screen 2.
  • FIG. 4A is a diagram showing the principle of the projected image in the projector.
  • the image of the projector 1 is imaged by the illumination light generated from the lamp 21 through the LCD 22. This image is formed in accordance with the size and position of the screen 2 using the focus and zoom functions of the lens 23.
  • the LCD image 51 in the figure is assumed to display a point P1 at the center of the screen.
  • the point P1 is imaged on the screen 2 as a point P2 like the screen image 52. At that time, when the screen 2 is within the range of the depth of field D, the image blur is not felt.
  • FIG. 4B is a diagram illustrating the generation of a blurred image by the projector.
  • the point P1 of the LCD image 51 is imaged as a point P2 'spread on the screen 2 like the screen image 52'. This causes image blur.
  • the imaging blur in the camera will be described.
  • a focus shift occurs with a digital camera.
  • the light passes through the lens of the digital camera, is diffused by defocusing, and becomes a blurred image when it reaches a CCD (Charge-Coupled Device) image sensor.
  • CCD Charge-Coupled Device
  • Equation 2 the blur generation process expressed by Equation 2 is called a diffusion process.
  • the photographed blurred image I (x, y) is restored to the actual image (original image) by following the diffusion process of Equation 2 in reverse. This relationship is expressed by Equation 3, and the process of reversing the diffusion process is called a despreading process.
  • Equation 4 a function of a distribution that spreads like a point P ⁇ b> 2 ′ in FIG. 4B is called a point spread function (PSF).
  • PSF point spread function
  • Equation 5 the convolution product of the function f (x, y) and the function g (x, y) is generally expressed as Equation 5.
  • Equation 6 Focusing on the fact that the convolution product is represented by multiplication when Fourier transformed, and when both sides of Equation 4 are Fourier transformed, Equation 6 is obtained.
  • Equation 6 The upper line in the equation indicates the Fourier transform. After dividing Equation 6 by P (x, y) (with an overline), the original actual video I 0 (x, y) is obtained by performing inverse Fourier transform.
  • FIG. 5 is a diagram showing a Gaussian distribution, and a general irradiance distribution of light such as a pinhole shows characteristics of the Gaussian distribution with respect to the optical axis. If the diffusion process K t of Equation 2 follows a Gaussian distribution G t (x, y), Equation 2 becomes Equation 7.
  • FIG. 6 is a diagram showing the LoG distribution.
  • the method for restoring the blurred image expressed by the convolution product is called deconvolution, and is effective for restoring the imaging blur in the camera.
  • the restoration of the blurred image in the projector 1 will be described.
  • the video signal to be photographed includes a diffusion process due to the defocus of the lens.
  • the video signal is converted into an optical system, and then the diffusion process is performed by the lens.
  • the corrected image by the image correcting unit 30 is set as I C, and as a result of the lens diffusion calculation K t in the optical system, an ideal image I 0 without blur is projected onto the screen. That is, these relationships are expressed as Equation 12.
  • the resolution restoration unit 34 of the video correction unit 30 can reduce the blur due to the defocusing of the projected video 203 by performing the inverse diffusion process calculation K- t in advance on the original video I 0 (x, y). it can.
  • the despreading process calculation K- t for an ideal image without blur is overcorrected, and thus a negative value is generated in the signal level. In order to deal with this negative value, correction by a gain ⁇ and an offset ⁇ is introduced as will be described later.
  • FIG. 7A is a diagram illustrating a video signal correction method according to the first embodiment.
  • the brightness level is displayed.
  • the graph of the corrected video I C represents the luminance level calculated using Equation 13, and the graph of the projected video I S is the luminance level obtained by superimposing a Gaussian distribution (that is, PSF) assuming the blur ratio on the corrected video I C. Represents.
  • PSF Gaussian distribution
  • FIG. 7B is a diagram illustrating a state where blur occurs without correction for comparison.
  • the graph of (a) shows the luminance distribution (luminance level) of the video 51 input to the LCD 22 in FIG. 4B. Since this image is not made correction in the image correction unit 30, equal to the input image I 0.
  • the graph of (b) shows the luminance distribution (luminance value) of the blurred image 52 ′ displayed on the screen 2 in FIG. 4B.
  • the luminance value on the screen 2 is measured by a surface luminance meter or the like.
  • the input image 51 on the LCD 22 spreads in a Gaussian distribution in the projected image 52 ′ on the screen 2, and blur occurs.
  • the correction image I C which is calculated using Equation 13 includes a negative value in the luminance level as shown in Figure 7A.
  • the negative value of the video signal cannot be expressed by the light intensity. Therefore, the high dynamic range and the minus correction are expressed by introducing the correction of the gain ⁇ and the offset ⁇ as shown in Equation 14.
  • the luminance level distribution on the vertical axis is moved to the positive side by the offset ⁇ so that the luminance level takes only a positive value.
  • the gain is adjusted by ⁇ so as to match the original luminance level.
  • FIG. 7C is a diagram illustrating the effect of offset and gain adjustment in correction.
  • Graph (a) the video 51 is input to the LCD 22 ', that is, the luminance level of the corrected video I C.
  • the black luminance level for expressing a negative value is raised by an offset ⁇ , and the white luminance level is adjusted by adjusting the gain ⁇ .
  • the graph of (b) shows the luminance distribution (luminance value) of the video 52 (projected video I S ) projected on the screen 2. Blur on the screen is reduced by correction including despreading calculation. At this time, the introduction of offset and gain adjustment has the effect of increasing the black luminance value and obtaining an image with a high dynamic range.
  • the blur amount calculation unit 33 obtains the blur amount as a standard deviation when the diffusion process follows a Gaussian distribution.
  • the standard deviation is obtained by measuring the PSF on the optical axis with a surface luminance meter or the optical characteristics of the lens at the position where the focus shift occurs as shown in FIG. 4B, and performing linear interpolation according to the projection distance of each screen. You may approximate.
  • the above is the method for reducing the image blur in the projector.
  • the blur reduction function of this embodiment is added to the menu function of the projector.
  • the menu function of the projector for example, adjustment of screen brightness, contrast, hue, keystone, input switching, and the like are provided for the user to select and set.
  • FIG. 8A is a diagram showing an example of a blur reduction menu display.
  • the name of this function is “blurring removal” 61 and several options are provided.
  • the ideal value of gain ⁇ in equation 14 is a and the ideal value of offset ⁇ is b
  • the option is “strong”
  • the blur reduction function is activated (on), and the offset ⁇ at that time is set to the ideal value b.
  • the gain ⁇ is 1 / (a + b).
  • the blur reduction function is not operated (OFF).
  • the user can execute the blur reduction function at a desired level according to the type of video and the projection environment.
  • FIG. Brightness is a function for adjusting the brightness of the screen image, and the adjustment can be “brighter” or “darker”.
  • this adjustment there are a method of adjusting (dimming) the luminance value of the light source and a method of adjusting the luminance level by video signal processing without changing the luminance of the light source.
  • a method for adjusting the luminance level in the latter video signal processing will be described.
  • FIG. 8B is a diagram showing an example of menu display for brightness adjustment.
  • the name of this function is “Brightness” 62
  • the brightness adjustment level is normally positive and negative, and can be adjusted stepwise from +30 to ⁇ 30 as an example.
  • the luminance level of the video signal is changed.
  • ⁇ ′ represents the brightness adjustment level, which is set at the adjustment level in FIG. 8B.
  • (A) is a case where the brightness is adjusted in the positive direction, that is, a direction in which the image is brightened
  • (b) is a case where the brightness is adjusted in the negative direction, that is, a direction in which the image is darkened.
  • (A) is a case where the brightness adjustment ⁇ ′ in the positive direction is interlocked, but the brightness adjustment and the blur reduction function are the same processing, so that ⁇ ′ and ⁇ are not applied twice. Use the larger value. That is, ⁇ is adopted when the offset value ⁇ is larger than the brightness adjustment level ⁇ ′, and ⁇ ′ is adopted when ⁇ ′ is larger than ⁇ .
  • (B) is a case where it is linked with the brightness adjustment ⁇ ′ in the negative direction, but in order to execute the blur reduction function, the offset value ⁇ is preferentially adopted. In both cases (a) and (b), the offset value ⁇ is the lower limit of brightness adjustment.
  • the brightness adjustment function and the brightness adjustment function linked with the blur reduction function described above are executed by the control unit of the projector by switching appropriately according to the user setting state for the menu function.
  • the brightness adjustment has been described above as an example, but the same applies to, for example, image contrast adjustment, that is, input / output line inclination adjustment. That is, ⁇ ′ is adopted if the contrast adjustment level ⁇ ′ is greater than the gain value ⁇ of the present embodiment, and ⁇ is employed if the gain value ⁇ of the present embodiment is greater than the contrast adjustment level ⁇ ′. That is, the gain value ⁇ in this embodiment is the lower limit value of the contrast adjustment level.
  • the configuration of the first embodiment it is possible to provide a projector that suitably reduces image blur due to lens focus shift.
  • the configuration of a projector provided with resolution restoration processing by despreading calculation has been described.
  • a configuration for improving the accuracy of the despreading calculation by matching the luminance level correction of the video signal by the despreading process calculation with the luminance value after applying the projection optical system, that is, the irradiation luminance value will be described.
  • FIG. 10 is a diagram illustrating a configuration of the image correcting unit 30 (12) of the projector in the second embodiment.
  • the brightness conversion unit 35 is added to FIG. 2 of the first embodiment.
  • the video correction unit 30 adds a luminance conversion unit 35 that converts the luminance level from the internal video signal 101 to the effective luminance signal 305. Yes.
  • the resolution restoration unit 34 performs a despreading operation based on the blur amount 303 and the effective luminance signal 305.
  • the luminance conversion unit 35 uses a conversion table in order to convert the luminance level from the internal video signal 101 to the effective luminance signal 305.
  • This conversion table is created by, for example, the optical characteristics (for example, gamma characteristics) of the lamp 21 and the LCD panel 22, or is created by measuring all the R, G, and B gradations with a luminance radiation spectroluminometer or the like. .
  • the conversion calculation from the internal video signal 101 to the irradiation luminance value is L.
  • the resolution restoration unit 34 performs L inverse transformation on the internal video signal 101 in order to calculate the inverse diffusion calculation and the diffusion effect by the lens with the same characteristics. This is the above conversion table.
  • an arithmetic expression obtained by adding an inverse transformation L ⁇ 1 of L to Expression 14 is Expression 15.
  • the configuration of the second embodiment in a projector having a large difference between the internal video signal and the irradiation luminance due to the gamma characteristic or the like, it is possible to improve the accuracy of reducing the image blur due to the defocus of the lens.
  • FIG. 11 is a diagram illustrating a configuration of the image correcting unit 30 (12) of the projector in the third embodiment.
  • a kernel calculation unit 36 and a PSF map 37 are added instead of the blur amount calculation unit 33.
  • the video correction unit 30 interpolates a PSF map 37 prepared in advance according to optical characteristics from the lens position and a convolution kernel 307 calculated from the PSF map 37. And a kernel calculation unit 36 that outputs the amount of blur 303.
  • the resolution restoration unit 34 performs a despreading operation based on the internal video signal 101 and the blur amount 303.
  • Example 1 a convex lens is taken as an example, and it is assumed that light parallel to the optical axis passes through the lens after passing through the lens. Therefore, blurring of the image is caused by a focus shift.
  • an actual lens has an aberration, light does not collect at the focal point.
  • the light may spread in a circular shape.
  • Aberrations include Seidel's five aberrations and chromatic aberration, and tailing and color shift occur at positions away from the optical axis.
  • the blur information that is, the spot diagram can be calculated or observed in advance from the lens design data. Therefore, the PSF at each lens position is mapped to the data table (PSF map 37).
  • coefficients that can be converted into functions are mapped to data tables, and those with complex characteristics are mapped as convolution kernels.
  • this information is held at pixel positions on all the lenses, the amount of data increases. For example, if there is symmetry, the symmetrical portion is deleted. Further, as shown in FIG. 12, data may be thinned out by linear interpolation from the intersections of the center and vertex and the horizontal axis, and the vertical axis and each side of the rectangle. If the chromatic aberration is large, PSF calculated for each wavelength of R, G, and B may be used.
  • the PSF map 37 of FIG. 11 holds a data table to which PSF is mapped, and interpolates the thinned data by the kernel calculation unit 36. Further, the calculation of PSF in the resolution restoration unit 34 may use Formula 4, that is, Formula 6 on the premise of Fourier transform.
  • the configuration of the third embodiment it is possible to improve the accuracy of reducing the image blur caused by the aberration of the lens.
  • Embodiment 4 In Embodiment 4, the case where iris adjustment and lamp brightness adjustment are added to the configuration of each embodiment, and the case where dynamic control using a video histogram is performed will be described.
  • FIG. 13 is a diagram illustrating a configuration of the image correcting unit 30 (12) of the projector in the fourth embodiment.
  • a histogram acquisition unit 38 is further provided, and an iris adjustment and lamp brightness adjustment value 310 is input.
  • the video correction unit 30 includes a position acquisition unit 31, a geometric calculation unit 32, a kernel calculation unit 36 that outputs a blur amount 303 using the PSF map 37, and luminance conversion that converts the internal video signal 101 into the effective luminance signal 305.
  • a histogram acquisition unit 38 that acquires a histogram of the internal video signal 101 and outputs histogram information (frequency information) 308 is provided, and an iris adjustment value and a lamp luminance adjustment value 310 are input.
  • the resolution restoration unit 34 receives the histogram information 308 of the video signal, the iris adjustment value, and the lamp luminance adjustment value 310, and performs a despreading operation.
  • the resolution restoration unit 34 lowers the ⁇ value and the ⁇ value in Expression 15 because the irradiated image becomes dark when the F value is increased by iris adjustment or the light amount is decreased by lamp brightness adjustment. Accordingly, priority is given to widening the dynamic range so as not to cause blurring due to weakening of the contrast of the image. Conversely, when the F value is decreased by iris adjustment or the light amount is increased by luminance adjustment, the ⁇ value and ⁇ value in Expression 15 are increased, and the blur reduction function by despreading calculation is prioritized.
  • the video is often a presentation video composed of characters and figures. Increase the value.
  • the input video is uniformly distributed in the halftone, it is often a picture such as a photograph. Therefore, the overall contrast is prioritized by lowering the ⁇ and ⁇ values.
  • the configuration of the fourth embodiment it is possible to effectively reduce image blur by dynamically setting parameters for despreading calculation using iris and lamp luminance adjustment and image histogram information.
  • Example 5 describes a case where dynamic control by lens shift adjustment is performed in the configuration of each example.
  • FIG. 14 is a diagram illustrating a configuration of the image correcting unit 30 (12) of the projector according to the fifth embodiment.
  • the video display position information 311 by lens shift is further input.
  • the video correction unit 30 is connected to the position acquisition unit 31, the geometric calculation unit 32, the PSF map 37, the kernel calculation unit 36 that inputs video display position information 311 by lens shift, and the effective luminance signal 305 from the internal video signal 101.
  • the resolution restoration unit 34 receives the blur amount 303 and the effective luminance signal 305 and performs a despreading operation.
  • Example 3 the blur information, that is, the spot diagram, is calculated or observed in advance based on the lens design data, and the PSF at each lens position is stored in the PSF map 37.
  • a PSF map 37 including a lens shift range is prepared, and from the PSF at the intersection of the center and the vertex and the horizontal axis, and the vertical axis and the side, Linear interpolation is limited to the video display range.
  • FIG. 16 is a diagram illustrating a configuration of the image correcting unit 30 (12) of the projector in the sixth embodiment.
  • a configuration in which a set value 312 for trapezoidal correction is input is input.
  • the video correction unit 30 includes a position acquisition unit 31, a geometric calculation unit 32 that inputs a trapezoidal correction setting value 312, a kernel calculation unit 36 that outputs a blur amount 303 using the PSF map 37, and an internal video signal 101.
  • the geometric calculation unit 32 calculates the distance ratio between the distance to the screen and the optical axis according to the trapezoidal correction setting value 312 together with the position where the image light beams intersect on the lens (reference numeral 302).
  • the resolution restoration unit 34 receives the blur amount 303 and the effective luminance signal 305 and performs a despreading operation.
  • FIG. 17A shows a case where keystone correction is not performed in the example of the internal video 71 of the projector 1.
  • the same rectangular image as the input video signal 100 is displayed on the liquid crystal panel 22.
  • FIG. 17B shows an image 72 obtained by projecting the internal image 71 of FIG. 17A onto the screen 2 by adding an elevation angle to the optical axis of the projector 1.
  • the image 72 on the screen 2 has a shape in which the upper part spreads in a trapezoidal shape and extends upward, and so-called trapezoidal distortion occurs.
  • the input signal processing unit 11 reduces the vertical direction of the input video signal 100 and geometrically converts it into a trapezoidal image opposite to the screen image.
  • This correction is called keystone correction or keystone correction.
  • the amount of keystone correction is set according to the magnitude of the keystone distortion.
  • FIG. 18A shows a case where keystone correction is performed in the example of the internal image 73 of the projector 1.
  • the trapezoidal region 73a is the original image
  • the hatched region 73b at the end is no signal (black).
  • 18B shows an image 74 obtained by projecting the image 73 of FIG. 18A onto the screen 2 by adding an elevation angle to the optical axis of the projector 1.
  • the projected image 74 has a trapezoidal shape
  • the hatched area 74b at the end is not visually recognized because there is no signal. Therefore, the original image is displayed on the rectangular area 74a on the screen 2.
  • FIG. 19A is a ray diagram when the light is projected from the projector 1 onto the projection surface 2 perpendicular to the optical axis. When projected onto the vertical projection surface 2, it is assumed that light rays are suitably projected and no trapezoidal distortion occurs.
  • FIG. 19B is a ray diagram when the projector 1 projects the optical axis with an elevation angle ⁇ . It can be seen that on the projection surface 2 ′ to which the elevation angle ⁇ is added, the distance between the light rays increases and the projection distance becomes longer toward the upper side.
  • the geometric calculation unit 32 receives the trapezoidal correction set value 312 and calculates the distance to the screen 2 and the distance ratio between the optical axis, and using this, the pixels in the video signal pass through the lens 23 to the screen 2. When projected, the position 302 where the light rays intersect on the lens is calculated.
  • the blur information that is, the spot diagram is calculated or observed in advance based on the lens design data, and the PSF at each lens position is stored in the PSF map 37.
  • the kernel calculation unit 36 superimposes a PSF calculation of a focus shift due to a difference in distance to the screen 2 on the PSF, and performs linear interpolation, for example. According to the configuration of the sixth embodiment, it is possible to improve the accuracy of reducing the image blur that occurs due to the keystone correction.
  • the video correction unit 12 ′ is configured by an external video device 3 such as a PC. It can also be connected.
  • the projector has been described as an example.
  • the present invention is also effective in projection optical system equipment such as a head-mounted display and a head-up display having the same components in principle.
  • 1 projector
  • 2 Screen (projection surface)
  • 3 External video device
  • 10 Video processing unit
  • 11 input signal processing unit
  • 12 image correction unit
  • 13 Timing control unit
  • 20 Optical unit
  • 21 Light source (lamp)
  • 22 Liquid crystal panel (LCD)
  • 23 Lens
  • 31 Position acquisition unit
  • 32 Geometric operation unit
  • 33 blur amount calculation unit
  • 34 Resolution restoration unit
  • 35 luminance conversion unit
  • 36 Kernel calculation unit
  • 37 PSF map
  • 38 Histogram acquisition unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Projection Apparatus (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

　プロジェクタ１は、入力された映像信号に映像処理を行う映像処理部１０と、映像処理部で映像処理した映像信号を入力して光学像を生成する映像表示素子２２と、映像表示素子で生成した光学像を投射面に投射する投射光学系２３と、を備える。映像処理部１０は、投射光学系２３により投射される映像のボヤケを低減するための映像補正部１２を有し、映像補正部１２では映像信号の黒輝度レベルを変更する。

Description

プロジェクタ及び映像表示方法
　本発明は、映像を投射面に投射して表示するプロジェクタ及び映像表示方法に係り、特に投射する映像のボヤケを好適に低減する技術に関する。
　一般的にプロジェクタは、例えば机や天井などの水平面に設置し、壁などの垂直な面に取り付けられたスクリーンへ映像を投射する。この場合、スクリーン上で鮮明な映像が投射できるようにプロジェクタの姿勢等が調整されている。
　ただし、全てのプロジェクタが、設置面とスクリーン面が垂直な関係となるよう設置できる訳ではない。例えば、階段状の広い講堂に設置する場合、天井に設置されたプロジェクタは、見下ろすように講堂正面のスクリーンへ投射される為、映像は台形状に歪む。また、ミーティングルーム等で使用する携帯型プロジェクタは、机上より投射することが多いが、必ずしも垂直な壁面へ投射できる訳ではなく、同様に歪んで表示されることが多い。この歪みなくし矩形状となるよう調整する手法が台形補正(キーストーン補正)である。台形補正においては、投射する映像信号に対し縮小または拡大などの幾何変換操作を行うことで、台形状の映像を矩形状へと変換するものである。
　前記台形補正の際、特に縮小変換では部分的に解像度が低下するため、幾何ボヤケが生じる。この幾何ボヤケを改善する手法としてシャープネス処理が挙げられる。これに関連し特許文献１には、台形補正の際の拡大・縮小操作の幾何的ボヤケをシャープネス処理にて低減する技術が開示される。具体的には、画面を複数の領域に分割し、分割領域ごとにシャープネス調整の調整値を設定し、この調整値に基づいて各領域のシャープネス調整を行うことが述べられている。
特開２０１１－７７９７１号公報
　プロジェクタのレンズは、スクリーンまでの距離と投射する角度が適切であれば（以降、基準設定と呼ぶ）、スクリーン上で一様に焦点が合うように設計されている。しかし、プロジェクタとスクリーンを基準設定から外れて設置して台形補正を行なった場合、矩形内の映像のうち、レンズの被写界深度を超えた部分の映像は、焦点ズレによるボヤケが生じる。すなわち、台形補正を行っても好適な映像が得られる範囲は著しく限定される。また、基準設定であってもレンズの設計または精度が適切でないと、画面端部では画面中央部との投射距離差や収差を要因としてボヤケが生じるといった課題がある。
　台形補正を行う際の投射距離差によるボヤケについては、投射した映像の画面端部で投射角度が急峻となる超短投射プロジェクタや広角の短投射プロジェクタでは特に顕著である。また、最近ではスクリーンや壁といった平面への投射だけでなく、プロジェクションマッピングと呼ばれる建造物等の曲面を含む立体物への投射が行われることも多い。立体物への投射では、奥行きによる焦点距離の差が生じるため、被写界深度以上の距離差が有ると、焦点ズレによるボヤケが生じるといった課題がある。
　このような被写界深度を超えた焦点ズレにより生じるボヤケは、特許文献１が採用するシャープネス補正によっては根本的に解決することができない。なぜなら、シャープネス補正では、映像信号の空間的な解像度を改善させることはできるが、プロジェクタの投射光学系のもつ焦点ズレといった光学的な解像度を改善させることはできないからである。
　本発明は、上記課題に鑑み、レンズの焦点ズレといった投射光学系の解像度が要因となる映像ボヤケを好適に低減するプロジェクタ及び映像表示方法を提供することである。
　本発明は、映像を投射面に投射して表示するプロジェクタにおいて、入力された映像信号に映像処理を行う映像処理部と、映像処理部で映像処理した映像信号を入力して光学像を生成する映像表示素子と、映像表示素子で生成した光学像を投射面に投射する投射光学系と、を備え、映像処理部は、投射光学系により投射される映像のボヤケを低減するための映像補正部を有し、映像補正部では映像信号の黒輝度レベルを変更することを特徴とする。
　また本発明は、映像を投射面に投射して表示する映像表示方法において、入力された映像信号に映像処理を行う映像処理ステップと、映像処理した映像信号を入力し映像表示素子にて光学像を生成する光学像生成ステップと、生成した光学像を投射光学系により投射面に投射する投射ステップと、を備え、映像処理ステップでは、投射光学系により投射される映像のボヤケを低減するため、映像信号の黒輝度レベルを変更する映像補正機能を有することを特徴とする。
　本発明によれば、レンズの焦点ズレといった投射光学系の解像度が要因となる映像ボヤケを好適に低減することができる。
実施例１におけるプロジェクタの構成を示す図。 図１における映像補正部の構成を示す図。 凸レンズによる焦点と実像の関係を説明する図。 プロジェクタにおける投射映像の原理を示す図。 プロジェクタによるボヤケ映像の発生を示す図。 ガウス分布を示す図。 ＬｏＧ分布（ガウス分布の２次微分）を示す図。 実施例１における映像信号の補正方法を説明する図。 補正なしでボヤケが発生する状態を示す図。 オフセットとゲイン調整の効果を示す図。 ボヤケ低減のメニュー表示の例を示す図。 ブライトネス調整のメニュー表示の例を示す図。 ブライトネス調整単独による入出力特性例を説明する図。 ボヤケ低減機能と連動させたブライトネス調整の入出力特性例を説明する図。 実施例２における映像補正部の構成を示す図。 実施例３における映像補正部の構成を示す図。 各レンズ位置におけるＰＳＦデータを示す図。 実施例４における映像補正部の構成を示す図。 実施例５における映像補正部の構成を示す図。 レンズシフトにおけるＰＳＦデータを示す図。 実施例６における映像補正部の構成を示す図。 プロジェクタの内部映像の例を示す図（台形補正なし）。 図１７Ａの映像をプロジェクタ光軸に仰角を加えて投射した映像を示す図。 プロジェクタの内部映像の例を示す図（台形補正あり）。 図１７Ａの映像をプロジェクタ光軸に仰角を加えて投射した映像を示す図。 プロジェクタから光軸に垂直な投射面へ投射した際の光線図。 プロジェクタから光軸に仰角θを加えて投射した際の光線図。 映像補正部を外部映像装置で構成した場合を示す図。
　以下、本発明の実施の形態について図面に基づいて説明するが、本発明は必ずしもこれらの実施形態に限定されるものではない。なお、実施形態を説明する各図面において、同一の部材には同一の符号を付し、その繰り返しの説明は省略する。
　実施例１では、逆拡散過程演算による解像度復元処理を行うプロジェクタについて説明する。
　図１は、実施例１におけるプロジェクタの構成を示す図である。プロジェクタ１は、放送波やＰＣから出力される映像入力信号１００を入力とし、映像信号の処理を行う映像処理部１０と、映像表示素子である液晶パネルに表示制御信号１０３を入力し、投射映像２０３を生成して投射面であるスクリーン２に投射表示する光学ユニット２０で構成される。
　映像処理部１０は、映像入力信号１００を入力し、例えば圧縮映像信号のデコーダ、ＩＰ変換、スケーラ、キーストーン補正等により内部映像信号１０１に変換する入力信号処理部１１と、内部映像信号１０１を入力し、後述する逆拡散過程演算による解像度復元処理を行い補正映像信号１０２に変換する映像補正部１２と、補正映像信号１０２を入力し、表示画面の水平・垂直同期信号に基づいて表示制御信号１０３を生成するタイミング制御部１３で構成される。
　光学ユニット２０は、照明光２０１を発生する光源（ランプ）２１と、映像処理部１０より出力される表示制御信号１０３を入力し、照明光２０１の階調を画素毎に調整して光学像２０２を生成する映像表示素子としての液晶パネル（ＬＣＤ）２２と、液晶パネル２２で生成された光学像２０２の焦点を調整して投射映像２０３をスクリーン２へ投射する投射光学系としてのレンズ２３で構成される。
　さらにプロジェクタ１には、投射する映像の明るさ（ブライトネス）、コントラスト、色合い、キーストーン等の調整、入力信号切替などをユーザが操作するためのメニュー画面を表示する機能を有し、ユーザの操作に基づいて、図示しない制御部により各部の機能を制御する構成としている。
　図２は、図１における映像補正部１２の構成を示す図である。映像補正部３０（図１の符号１２に対応）は、光学ユニット２０からスクリーン２に至る投射光学系において、入力信号と一致する画素位置３０１を取得する位置取得部３１と、映像信号中の各画素がレンズ２３を通しスクリーン２へ投射される際に、映像光線がレンズ上で交わる位置３０２を算出する幾何演算部３２と、レンズ上の位置３０２よりボヤケ量３０３を算出するボヤケ量算出部３３と、内部映像信号１０１とボヤケ量３０３により逆拡散演算を行う解像度復元部３４で構成される。
　幾何演算部３２は、ＬＣＤ２２上の画素位置３０１と設定されたフォーカス及びズームより想定される光軸の距離から、ガウスの結像公式により光線がレンズ上で交わる位置３０２を算出する。ガウスの結像公式は、物体からレンズまでの距離をａとし、レンズから実像までの距離をｂとし、焦点をｆとすると数式１で表される。
Figure JPOXMLDOC01-appb-M000001
　図３は、凸レンズによる焦点と実像の関係を説明する図である。図のように、レンズ４０の焦点ｆと物体４１の位置ａが与えられると、実像４２までの距離ｂは数式１で決定される。プロジェクタの場合、物体４１はＬＣＤ２２上の映像、実像４２はスクリーン２に投射される映像である。
　図４Ａは、プロジェクタにおける投射映像の原理を示す図である。プロジェクタ１の映像は、ランプ２１より生じる照明光が、ＬＣＤ２２を通して映像となる。この映像は、レンズ２３のフォーカスやズーム機能を用いて、スクリーン２の大きさと位置に合わせ結像される。図中のＬＣＤ映像５１は、画面中央に点Ｐ１を表示したものとする。この点Ｐ１はスクリーン２上では、スクリーン映像５２のように点Ｐ２として結像される。そのとき、スクリーン２が被写界深度Ｄの範囲内にある場合は、映像ボヤケを感じることはない。
　図４Ｂは、プロジェクタによるボヤケ映像の発生を示す図である。スクリーン２が被写界深度Ｄの範囲外にある場合、ＬＣＤ映像５１の点Ｐ１は、スクリーン２上ではスクリーン映像５２’のように広がった点Ｐ２’として結像される。これが映像ボヤケの原因となる。
　ここで、カメラにおける撮像ボヤケについて説明する。例えば、デジタルカメラで焦点ズレを起こした映像を想定する。光はデジタルカメラのレンズを通し、焦点がずれることで拡散され、ＣＣＤ（Charge Coupled Device）撮像素子へ到達した際、ボヤケの生じた映像となる。
　このようにしてボヤケが発生した映像の復元方法について説明する。入力する実際の映像（原映像）をＩｏ（ｘ，ｙ）、撮影されたボヤケ映像をＩ（ｘ，ｙ）、ボヤケの過程をＫｔとすると、これらの関係は数式２で表される。ここで、数式２で示されるボヤケ発生の過程を拡散過程と呼ぶ。
Figure JPOXMLDOC01-appb-M000002
　撮影されたボヤケ映像Ｉ（ｘ，ｙ）は、数式２の拡散過程を逆に辿ることで実際の映像（原映像）へと復元される。この関係は数式３で表され、拡散過程を逆に辿る過程を逆拡散過程と呼ぶ。
Figure JPOXMLDOC01-appb-M000003
　逆拡散過程を解く手法はいくつかある。例えば、図４Ｂの点Ｐ２’のように広がってしまう分布を関数化したものは点拡散関数（ＰＳＦ：Point Spread Function）と呼ばれる。該ＰＳＦをＰ（ｘ，ｙ）とすると、拡散過程は数式４となる。
Figure JPOXMLDOC01-appb-M000004
　ここで、ＰＳＦと映像信号の演算をコンボリューション積と呼び、一般に関数ｆ（ｘ，ｙ）と関数ｇ（ｘ，ｙ）のコンボリューション積は数式５のように表される。
Figure JPOXMLDOC01-appb-M000005
　コンボリューション積をフーリエ変換すると乗算で表されることに着目し、数式４の両辺をフーリエ変換すると数式６となる。
Figure JPOXMLDOC01-appb-M000006
　式中の上線はフーリエ変換を示す。数式６をＰ（ｘ，ｙ）（上線付）で除算後、逆フーリエ変換を施すことにより、元の実際の映像Ｉ０（ｘ，ｙ）が得られる。
　他の手法として、ガウス分布を用いる方法がある。図５は、ガウス分布を示す図であり、一般的なピンホール等の光の放射照度分布は、光軸に対しガウス分布の特性を示す。数式２の拡散過程Ｋｔがガウス分布Ｇｔ（ｘ，ｙ）に従うとすると、数式２は数式７となる。
Figure JPOXMLDOC01-appb-M000007
　ここで、Q.Li、Y.Yoshida等が考案したMulitiscale Decomposition処理（Q.Li, Y.Yoshida, N.Nakamori, “A Multiscale Antidiffusion and Restoration Approach for Gaussian Blurred Images”, Proc. IEICE Trans. Fundamentals, 1998）を行うと、実際の映像Ｉ０（ｘ，ｙ）は数式８のように分解される。
Figure JPOXMLDOC01-appb-M000008
　式中の、ガウス分布の２次微分をＬｏＧ（Laplacian of Gaussian）と呼び、数式９のように表される。また図６は、ＬｏＧ分布を示す図である。
Figure JPOXMLDOC01-appb-M000009
　さらに、ガウス分布におけるスケールすなわち標準偏差σは、数式１０に従うとして数式８へ代入すると、逆拡散過程が数式１１のようになり、実際の映像Ｉ０（ｘ，ｙ）が得られる。
Figure JPOXMLDOC01-appb-M000010
Figure JPOXMLDOC01-appb-M000011
　以上のように、コンボリューション積で表現されたボヤケ映像を復元する手法をデコンボリューションと呼び、カメラにおける撮像ボヤケの復元に有効となる。
　続いて、プロジェクタ１におけるボヤケ映像の復元について説明する。カメラの場合は、撮影する映像信号中にレンズの焦点ズレによる拡散過程が含まれているが、プロジェクタの場合は、映像信号を光学系へと変換した後にレンズで拡散過程が行われる。
　そこで、映像補正部３０による補正映像をＩＣとし、光学系におけるレンズの拡散演算Ｋｔが成された結果、ボヤケのない理想映像Ｉ０がスクリーンへ投射されるようにする。すなわちこれらの関係は、数式１２のように表される。
Figure JPOXMLDOC01-appb-M000012
　ここで、プロジェクタへ入力される映像はＩ０であることから、ＩＣは数式１３を満たさなければならない。
Figure JPOXMLDOC01-appb-M000013
　これは、数式３において、Ｉ（ｘ，ｙ）をＩ０（ｘ，ｙ）とした場合の演算に等しい。すなわち、映像補正部３０の解像度復元部３４では、原映像Ｉ０（ｘ，ｙ）に対し予め逆拡散過程演算Ｋ－ｔを行うことで、投射映像２０３の焦点ズレによるボヤケを低減することができる。ただし、ボヤケのない理想映像に対する逆拡散過程演算Ｋ－ｔは過補正となるため、信号レベルに負値が生じる。この負値対応として、後述するようにゲインαとオフセットβによる補正を導入する。
　図７Ａ、図７Ｂ、図７Ｃを用いて映像補正部３０の補正方法を説明する。
  図７Ａは、実施例１における映像信号の補正方法を説明する図である。この図では、映像補正部３０への入力映像Ｉ０、映像補正部３００からの補正映像ＩＣ、スクリーン２における投射映像ＩＳについて、入力映像Ｉ０を点映像とした場合の水平位置での輝度レベルを表示している。
　補正映像ＩＣのグラフは数式１３を用いて算出した輝度レベルを表し、投射映像ＩＳのグラフは補正映像ＩＣに対し、ボヤケの割合を想定したガウス分布（すなわちＰＳＦ）を重畳した輝度レベルを表す。このように算出した補正映像ＩＣが実現可能であれば、入力映像Ｉ０の輝度分布に近い投射映像ＩＳを得ることができる。
　図７Ｂは、比較のために補正なしでボヤケが発生する状態を示す図である。（ａ）のグラフは、図４ＢにおけるＬＣＤ２２に入力される映像５１の輝度分布（輝度レベル）を示している。この映像は映像補正部３０での補正がなされないから、入力映像Ｉ０に等しい。（ｂ）のグラフは、図４Ｂにおけるスクリーン２に映し出されたボヤケ映像５２’の輝度分布（輝度値）を示している。スクリーン２上での輝度値は、面輝度計等により計測されるものである。このように、ＬＣＤ２２での入力映像５１はスクリーン２上の投射映像５２’ではガウス分布状に広がり、ボヤケが生じる。
　ところで、数式１３を用いて算出される補正映像ＩＣは、図７Ａに示すように輝度レベルに負値を含んでいる。しかし、映像信号を光学系へと変換する際に、映像信号の負値を光の強度では表現できない。そこで、数式１４のようにゲインαとオフセットβの補正を導入することで、高ダイナミックレンジとマイナス補正を表現するようにした。これを図７Ａで示すと、縦軸の輝度レベル分布をオフセットβだけ正側に移動させて、輝度レベルが正値のみを取るようにした。また、ゲインをαだけ調整して、元の輝度レベルに合わせるようにした。
Figure JPOXMLDOC01-appb-M000014
　図７Ｃは、補正におけるオフセットとゲイン調整の効果を示す図である。（ａ）のグラフは、ＬＣＤ２２に入力される映像５１’、すなわち補正映像ＩＣの輝度レベルを示している。入力する補正映像信号ＩＣは、負値を表現するための黒輝度レベルはオフセットβ分だけ持ち上げ、またゲインαを調整して白輝度レベルを合わせている。
　（ｂ）のグラフは、スクリーン２に映し出された映像５２（投射映像ＩＳ）の輝度分布（輝度値）を示している。逆拡散演算を含む補正によりスクリーン上のボヤケを低減している。その際、オフセットとゲイン調整を導入したことで、黒輝度値が持ち上がるとともにダイナミックレンジの高い映像が得られる効果がある。
　図２の解像度復元部３４は、数式１４に基づく逆拡散演算を行う。また、ボヤケ量算出部３３は、拡散過程がガウス分布に従う場合は、ボヤケ量を標準偏差として求める。標準偏差は、図４Ｂのように焦点ズレが起こった位置で、光軸上のＰＳＦを面輝度計にて測定もしくはレンズの光学特性より求め、各画面の投射距離に応じて線形補間することで近似してもよい。以上がプロジェクタにおける映像ボヤケの低減方法である。
　次に、本実施例のボヤケ低減機能をプロジェクタのメニュー機能に追加した例について説明する。プロジェクタのメニュー機能としては、例えば画面の明るさ、コントラスト、色合い、キーストーンの調整や、入力切替等をユーザが選択設定するために設けている。
　図８Ａは、ボヤケ低減のメニュー表示の例を示す図である。例えば本機能の名称を「ぼやけ除去」６１とし、いくつかの選択肢を設ける。数式１４におけるゲインαの理想値をａ、オフセットβの理想値をｂとするとき、選択肢が「強」の場合はボヤケ低減機能を動作させ（オン）、そのときのオフセットβを理想値のｂ、ゲインαを１／（ａ＋ｂ）とする。また、「中」の場合は、β＝０．５ｂ、α＝１／（ａ＋ｂ＋０．５ｂ）とし、「弱」の場合は、β＝０．２５ｂ、α＝１／（ａ＋ｂ＋０．７５ｂ）とする。「切」の場合は、ボヤケ低減機能を動作させない（オフ）。これによりユーザは、映像の種類や投射環境に応じて、所望レベルでボヤケ低減機能を実行させることができる。
　続いて、ボヤケ低減機能を他の映像処理機能と連動させることも可能で、ブライトネス調整と連動させた例を図８Ｂ、図９Ａ，Ｂで説明する。ブライトネスは画面映像の輝度を調整する機能であり、調整は「明るく」もしくは「暗く」することができる。この調整では、光源の輝度値を調整する（調光する）方式と、光源の輝度は変えずに映像信号処理で輝度レベルを調整する方式がある。ここでは、後者の映像信号処理で輝度レベルを調整する方式について説明する。
　図８Ｂは、ブライトネス調整のメニュー表示の例を示す図である。例えば本機能の名称を「ブライトネス」６２とし、ブライトネスの調整レベルは通常正負があり、例として＋３０から－３０まで段階的に調整できるものとする。ブライトネスの調整においても、映像信号の輝度レベルの変更を行う。
　図９Ａは、ブライトネス調整単独による映像信号の入出力特性例を説明する図である。すなわち、図８Ａのボヤケ低減機能を動作させない場合（ボヤケ除去＝「切」を選択）である。図中のβ’はブライトネス調整レベルを表し、図８Ｂの調整レベルにて設定する。（ａ）はブライトネスを正方向すなわち映像を明るくする方向へ調整する場合、（ｂ）は負方向すなわち暗くする方向へ調整する場合である。これらの調整は、ブライトネス調整レベルβ’に対し、出力輝度レベル＝入力輝度レベル＋β’の関係が成り立っている。
　図９Ｂは、ボヤケ低減機能と連動させたブライトネス調整の入出力特性例を説明する図である。すなわち、図８Ａのボヤケ低減機能を動作させた場合（ボヤケ除去＝「強」「中」「弱」を選択）である。この場合、図９Ａにおけるブライトネス調整レベルβ’に、図７Ａでの映像信号補正に用いたオフセット値βを連動させて、出力輝度レベルを決定する。
　（ａ）は正方向のブライトネス調整β’と連動させた場合であるが、ブライトネス調整とボヤケ低減機能は同様の処理となるため、二重に適用することのないようにβ’とβとの大きい方の値を採用する。すなわち、オフセット値βがブライトネス調整レベルβ’より大きい場合はβを採用し、逆に、β’がβより大きい場合はβ’を採用する。（ｂ）は負方向のブライトネス調整β’と連動させた場合であるが、ボヤケ低減機能を実行するため、オフセット値βを優先して採用する。（ａ）と（ｂ）いずれの場合でも、オフセット値βがブライトネス調整の下限値となる。
　上記したブライトネス調整、及びボヤケ低減機能と連動させたブライトネス調整の各機能は、プロジェクタの制御部が、前記メニュー機能に対するユーザ設定状態に応じて適宜切り替えて実行させる。
　以上、ブライトネス調整を例にして説明したが、例えば映像のコントラスト調整すなわち入出力直線の傾き調整に関しても同様である。すなわち、コントラストの調整レベルα’が本実施例のゲイン値αより大きければα’を、本実施例のゲイン値αがコントラストの調整レベルα’より大きければαを採用する。すなわち本実施例のゲイン値αがコントラストの調整レベルの下限値となる。
　実施例１の構成によれば、レンズの焦点ズレによる映像ボヤケを好適に低減するプロジェクタを提供することができる。
　実施例１では、逆拡散演算による解像度復元処理を備えるプロジェクタの構成について説明した。実施例２では、さらに、逆拡散過程演算による映像信号の輝度レベル補正と、投射光学系適用後の輝度値すなわち照射輝度値とをマッチングすることで、逆拡散演算精度を向上する構成について説明する。
　図１０は、実施例２におけるプロジェクタの映像補正部３０（１２）の構成を示す図である。実施例１の図２に対し、輝度変換部３５を追加した構成としている。
　映像補正部３０は、位置取得部３１と、幾何演算部３２と、ボヤケ量算出部３３の他に、内部映像信号１０１から実効輝度信号３０５へ輝度レベルを変換する輝度変換部３５を追加している。解像度復元部３４は、ボヤケ量３０３と実効輝度信号３０５とにより逆拡散演算を行う。
　輝度変換部３５では内部映像信号１０１から実効輝度信号３０５へ輝度レベルを変換するため、変換テーブルを用いる。この変換テーブルは、例えばランプ２１とＬＣＤパネル２２の光学特性（例えばガンマ特性）により作成する、あるいは、輝度放射分光輝度計等にてＲ，Ｇ，Ｂすべての階調を測定することで作成する。
　ここで、内部映像信号１０１から照射輝度値への変換演算をＬとする。解像度復元部３４では、逆拡散演算とレンズによる拡散効果を同じ特性にて演算するため、内部映像信号１０１に対しＬの逆変換を施す。これが上記の変換テーブルとなる。その結果、数式１４に対しＬの逆変換Ｌ－１を追加した演算式は数式１５となる。
Figure JPOXMLDOC01-appb-M000015
　実施例２の構成によれば、ガンマ特性等により内部映像信号と照射輝度の差が大きいプロジェクタにおいて、レンズの焦点ズレによる映像ボヤケの低減の精度を向上させることができる。
　実施例３では、実施例１の構成において、レンズのボヤケ量をデータテーブル化することで逆拡散演算の精度を向上する構成について説明する。
　図１１は、実施例３におけるプロジェクタの映像補正部３０（１２）の構成を示す図である。実施例１の図２において、ボヤケ量算出部３３に代えて、カーネル算出部３６とＰＳＦマップ３７を追加した構成としている。
　映像補正部３０は、位置取得部３１と、幾何演算部３２の他に、レンズ位置より予め光学特性に応じて用意されたＰＳＦマップ３７と、ＰＳＦマップ３７より算出されるコンボリューションカーネル３０７を補間し、ボヤケ量３０３として出力するカーネル算出部３６を備える。解像度復元部３４は、内部映像信号１０１とボヤケ量３０３により逆拡散演算を行う。
　実施例１では凸レンズを例に挙げて、光軸に平行な光がレンズを通過した後に焦点で交わることを前提としたため、映像のボヤケは焦点ズレに起因した。ところが、実際のレンズには収差があるため、光が焦点には集まらず、例えば球面収差の場合は円形に広がることがある。収差にはザイデルの５収差や色収差があり、光軸から離れた位置では尾引きや色ずれが起こる。
　ここで、ボヤケの情報すなわちスポットダイヤグラムは、レンズの設計データにより予め算出、もしくは観測できる。そこで、各レンズ位置におけるＰＳＦをデータテーブル（ＰＳＦマップ３７）へマップしておく。
　この内、関数化できるものは係数をデータテーブルへマップし、複雑な特性のものはコンボリューションカーネルのままマップする。ただし、すべてのレンズ上の画素位置でこの情報を保持すると、データ量が増大するため、例えば対称性があれば対称の部分を削除する。また、図１２に示すように、中心と頂点及び水平軸、垂直軸と矩形の各辺との交点より線形補間することで、データを間引いてもよい。また、色収差が大きい場合には、Ｒ，Ｇ，Ｂの各波長に対し算出したＰＳＦを使用してもよい。
　上記のように線形補間することでデータを間引く場合、図１１のＰＳＦマップ３７はＰＳＦがマップされたデータテーブルを保持し、カーネル算出部３６にて間引かれたデータを補間する。また、解像度復元部３４におけるＰＳＦの演算には、数式４、すなわちフーリエ変換を前提とした数式６を用いてもよい。
　実施例３の構成によれば、レンズの収差により発生する映像ボヤケの低減の精度を向上することができる。
　実施例４では、前記各実施例の構成において、アイリス調整やランプ輝度の調整を追加した場合、また映像ヒストグラムによる動的制御を行う場合について説明する。
　図１３は、実施例４におけるプロジェクタの映像補正部３０（１２）の構成を示す図である。ここでは実施例２（図１０）と実施例３（図１１）の構成に対し、さらにヒストグラム取得部３８を設け、またアイリス調整やランプ輝度の調整値３１０を入力する構成とした。
　映像補正部３０は、位置取得部３１と、幾何演算部３２と、ＰＳＦマップ３７を用いてボヤケ量３０３を出力するカーネル算出部３６と、内部映像信号１０１から実効輝度信号３０５へ変換する輝度変換部３５の他に、内部映像信号１０１のヒストグラムを取得しヒストグラム情報（頻度情報）３０８を出力するヒストグラム取得部３８を備え、さらに、アイリス調整とランプ輝度の調整値３１０を入力する。解像度復元部３４は、ボヤケ量３０３と実効輝度信号３０５の他に、映像信号のヒストグラム情報３０８とアイリス調整値やランプ輝度調整値３１０を入力し、逆拡散演算を行う。
　具体的には、解像度復元部３４は、アイリス調整によりＦ値を上げる、もしくはランプ輝度調整により光量を下げる場合には、照射映像が暗くなるため、数式１５におけるα値及びβ値を下げる。これにより、映像のコントラストが弱まることによるボヤケが生じないようにダイナミックレンジを広げることを優先させる。逆に、アイリス調整によりＦ値を下げる、もしくは輝度調整により光量を上げる場合には、数式１５におけるα値及びβ値を上げ、逆拡散演算によるボヤケの低減機能を優先させる。
　また、映像のヒストグラム情報に関しては、白黒２色や高コントラストの２色の頻度が高い場合は、文字や図で構成されるプレゼンテーション用の映像である場合が多いため、数式１５におけるα値及びβ値を上げる。逆に、入力映像が中間調に万遍なく分布している場合は写真等の映像であることが多いので、α値及びβ値を下げることで全体のコントラストを優先させる。
　実施例４の構成によれば、アイリスやランプ輝度の調整と、映像のヒストグラム情報を用いて、動的に逆拡散演算のパラメータを設定することで映像ボヤケを効果的に低減することができる。
　実施例５では、前記各実施例の構成において、レンズシフト調整による動的制御を行う場合について説明する。
　図１４は、実施例５におけるプロジェクタの映像補正部３０（１２）の構成を示す図である。ここでは実施例２（図１０）と実施例３（図１１）の構成に対し、さらにレンズシフトによる映像表示位置情報３１１を入力する構成とした。
　映像補正部３０は、位置取得部３１と、幾何演算部３２と、ＰＳＦマップ３７と接続しレンズシフトによる映像表示位置情報３１１を入力するカーネル算出部３６と、内部映像信号１０１から実効輝度信号３０５へ変換する輝度変換部３５を有する。ここにカーネル算出部３６は、ＰＳＦマップ３７とともにレンズシフトによる映像表示位置情報３１１を用いて算出されるコンボリューションカーネル３０７を補間し、ボヤケ量３０３として出力する。解像度復元部３４は、ボヤケ量３０３と実効輝度信号３０５を入力し、逆拡散演算を行う。
　前記実施例３（図１１、図１２）では、ボヤケの情報すなわちスポットダイヤグラムは、レンズの設計データにより予め算出もしくは観測して、各レンズ位置におけるＰＳＦをＰＳＦマップ３７へ保存している。本実施例でレンズシフト調整を行う場合は、例えば図１５のように、レンズシフト範囲を包含するＰＳＦマップ３７を用意し、中心と頂点及び水平軸、垂直軸と辺との交点のＰＳＦより、映像表示範囲に限定して線形補間する。
　実施例５の構成によれば、レンズシフトに伴う映像ボヤケの低減の精度を向上することができる。
　実施例６では、前記各実施例の構成において、台形補正（キーストーン補正）を行う場合について説明する。
　図１６は、実施例６におけるプロジェクタの映像補正部３０（１２）の構成を示す図である。ここでは実施例２（図１０）と実施例３（図１１）の構成に対し、さらに、台形補正の設定値３１２を入力する構成とした。
　映像補正部３０は、位置取得部３１と、台形補正の設定値３１２を入力する幾何演算部３２と、ＰＳＦマップ３７を用いてボヤケ量３０３を出力するカーネル算出部３６と、内部映像信号１０１から実効輝度信号３０５へ変換する輝度変換部３５とを有する。ここに幾何演算部３２は、映像光線がレンズ上で交わる位置とともに、台形補正の設定値３１２によるスクリーンまでの距離と光軸との距離比とを算出する（符号３０２）。解像度復元部３４は、ボヤケ量３０３と実効輝度信号３０５を入力し、逆拡散演算を行う。
　初めに、投射映像における台形歪の補正について図１７と図１８を用いて説明する。
  図１７Ａは、プロジェクタ１の内部映像７１の例で台形補正を施さない場合を示す。後述する台形補正を施さない場合、液晶パネル２２上においては入力映像信号１００と同じ矩形状の映像となる。図１７Ｂは、図１７Ａの内部映像７１をプロジェクタ１の光軸に仰角を加えてスクリーン２へ投射した映像７２を示す。この場合、スクリーン２上での映像７２は、上部が台形状に広がり、また上方へと伸びた形状となり、いわゆる台形歪が発生している。
　そこで、入力信号処理部１１では、台形歪の発生を抑えるため、入力映像信号１００に対し、映像縦方向を縮小し、かつスクリーン映像と逆の台形映像へと幾何変換する。この補正を台形補正またはキーストーン補正と呼ぶ。台形補正の補正量は、台形歪の大きさに応じて設定する。
　図１８Ａは、プロジェクタ１の内部映像７３の例で台形補正を施した場合を示す。矩形状の映像７３のうち台形状の領域７３ａが元の映像で、端部の斜線領域７３ｂは無信号（黒色）である。図１８Ｂは、図１８Ａの映像７３を、プロジェクタ１の光軸に仰角を加えてスクリーン２へ投射した映像７４を示す。ここで、投射映像７４は台形状であるが、端部の斜線領域７４ｂは無信号であるため視認されない。故に、スクリーン２上では元の映像が矩形領域７４ａに表示される。
　図１９Ａは、プロジェクタ１からその光軸に垂直な投射面２へ投射した際の光線図である。垂直な投射面２へ投射した場合は、光線が好適に投射され台形歪が発生しないものとする。図１９Ｂは、プロジェクタ１からその光軸に仰角θを加えて投射した際の光線図である。仰角θを加えた投射面２’では、上方に行くほど光線の間隔は広がり、投射距離が長くなることが分かる。
　以上の関係から、台形補正の設定により投射面（スクリーン）２がどれだけ傾いているかを推測できる。幾何演算部３２は、台形補正の設定値３１２を入力し、スクリーン２への距離と光軸との距離比とを算出し、これを用いて映像信号中の画素がレンズ２３を通しスクリーン２へ投射される際に、光線がレンズ上で交わる位置３０２を算出する。
　前記実施例３（図１１、図１２）では、ボヤケの情報すなわちスポットダイヤグラムは、レンズの設計データにより予め算出もしくは観測して、各レンズ位置におけるＰＳＦをＰＳＦマップ３７へ保存している。本実施例では、カーネル算出部３６おいて、このＰＳＦに対し、スクリーン２への距離差による焦点ズレのＰＳＦ演算を重畳し、例えば線形補間を行う。
  実施例６の構成によれば、台形補正に伴って発生する映像ボヤケの低減の精度を向上することができる。
　上記各実施例によれば、レンズの焦点ズレといった投射光学系の解像度が要因となる映像ボヤケを好適に低減することができる。これにより、台形補正やプロジェクションマッピング等を行う際の映像ボヤケを好適に低減し、被写界深度以上の距離差がある投射映像でも鮮明に表示できる効果がある。
　また各実施例においては、図１のようなプロジェクタの構成に基づき説明したが、図２０に示すように、映像補正部１２’をＰＣのような外部映像装置３で構成し、プロジェクタ１’に接続することもできる。
　上記した各実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることや、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
　また、以上の実施例ではプロジェクタを例に説明したが、本発明は原理的に同様の構成要素を持つヘッドマウントディスプレイやヘッドアップディスプレイ等の投射光学系機器においても有効である。
　１：プロジェクタ、
　２：スクリーン（投射面）、
　３：外部映像装置、
　１０：映像処理部、
　１１：入力信号処理部、
　１２，３０：映像補正部、
　１３：タイミング制御部、
　２０：光学ユニット、
　２１：光源（ランプ）、
　２２：液晶パネル（ＬＣＤ）、
　２３：レンズ、
　３１：位置取得部、
　３２：幾何演算部、
　３３：ボヤケ量算出部、
　３４：解像度復元部、
　３５：輝度変換部、
　３６：カーネル算出部、
　３７：ＰＳＦマップ、
　３８：ヒストグラム取得部。

Claims (14)

  1. 　映像を投射面に投射して表示するプロジェクタにおいて、
    　入力された映像信号に映像処理を行う映像処理部と、
    　前記映像処理部で映像処理した映像信号を入力して光学像を生成する映像表示素子と、
    　該映像表示素子で生成した光学像を前記投射面に投射する投射光学系と、を備え、
    　前記映像処理部は、前記投射光学系により投射される映像のボヤケを低減するための映像補正部を有し、該映像補正部では映像信号の黒輝度レベルを変更することを特徴とするプロジェクタ。
  2. 　請求項１に記載のプロジェクタにおいて、
    　前記映像処理部には、さらに、映像のブライトネスを調整するために映像信号の黒輝度レベルを変更する機能を有し、
    　前記投射面に表示する映像の状態をユーザが設定するためのメニュー画面を表示し、ユーザ操作に基づいて前記映像処理部を制御する制御部を備え、
    　前記メニュー画面には、前記映像ボヤケを低減するために前記映像補正部の動作のオン・オフを設定する第１の設定項目と、前記ブライトネスを調整するために映像信号の黒輝度レベルを設定する第２の設定項目とが含まれており、
    　前記制御部は、前記第１の設定項目と前記第２の設定項目のユーザ設定状態に応じて、
    　前記第１の設定項目がオフの状態には、前記映像補正部の動作に伴う黒輝度レベルの変更は行わず、前記第２の設定項目に基づいて黒輝度レベルの変更する第１の状態と、
    　前記第１の設定項目がオンの状態には、前記映像補正部の動作に伴う黒輝度レベルの変更と前記第２の設定項目に基づく黒輝度レベルの変更とを連動させて映像信号の黒輝度レベルを変更する第２の状態と、
    　を切替えることを特徴とするプロジェクタ。
  3. 　請求項１または２に記載のプロジェクタにおいて、
    　前記映像補正部は、
    　映像信号中の各画素が前記投射光学系により前記投射面へ投射される際に、前記投射面上に生じる映像のボヤケ量を算出するボヤケ量算出部と、
    　前記入力映像信号に対し、逆拡散過程演算を行うことで映像ボヤケを低減し解像度を復元する解像度復元部と、を備えることを特徴とするプロジェクタ。
  4. 　請求項３に記載のプロジェクタにおいて、
    　前記解像度復元部は前記逆拡散過程演算を行う際、映像信号の負値を表現するため輝度レベルの０値すなわち黒輝度レベルに対しオフセットを加算するとともに、元の白輝度レベルに合わせるため輝度レベルのゲインを調整することを特徴とするプロジェクタ。
  5. 　請求項３に記載のプロジェクタにおいて、
    　前記映像補正部は、前記映像表示素子及びこれに照明光を供給する光源の光学特性に基づき、入力する映像信号から実効輝度信号に輝度レベルを変換する輝度変換部を備え、
    　前記解像度復元部は、前記輝度変換部にて変換した実効輝度信号に対し、前記逆拡散過程演算を行うことを特徴とするプロジェクタ。
  6. 　請求項３に記載のプロジェクタにおいて、
    　前記ボヤケ量算出部は、前記投射光学系を構成するレンズの収差により発生するボヤケ量をデータテーブルとして保持し、該データテーブルを用いてデータ補間することで各画素位置でのボヤケ量を算出することを特徴とするプロジェクタ。
  7. 　請求項４に記載のプロジェクタにおいて、
    　前記解像度復元部は、前記投射光学系を構成するレンズのアイリス調整値や光源の輝度調整値を入力し、照射される光量が低下する場合には、前記映像信号の黒輝度レベルに対し加算するオフセットを減らすことを特徴とするプロジェクタ。
  8. 　請求項４に記載のプロジェクタにおいて、
    　前記映像補正部は、入力する映像信号のヒストグラムを取得するヒストグラム取得部を備え、
    　前記解像度復元部は、前記ヒストグラム取得部からのヒストグラム情報に応じて、白黒の頻度もしくは高コントラストの２値の頻度が高い場合は、前記映像信号の黒輝度レベルに対し加算するオフセットを増やすことを特徴とするプロジェクタ。
  9. 　請求項６に記載のプロジェクタにおいて、
    　前記ボヤケ量算出部は、前記レンズのレンズシフト調整による映像表示位置情報を入力し、前記データテーブルには、前記レンズシフト調整によりシフトする映像表示範囲を包含するように前記ボヤケ量のデータを保持することを特徴とするプロジェクタ。
  10. 　請求項３に記載のプロジェクタにおいて、
    　前記映像補正部は、前記投射面へ投射される映像の台形歪を補正するための台形補正設定値を入力し、前記投射光学系において映像光線がレンズ上で交わる位置とともに前記台形補正設定値により前記投射面までの距離と光軸との距離比とを算出する幾何演算部を備え、
    　前記ボヤケ量算出部は、前記幾何演算部の算出結果に基づき前記ボヤケ量を算出することを特徴とするプロジェクタ。
  11. 　映像を投射面に投射して表示する映像表示方法において、
    　入力された映像信号に映像処理を行う映像処理ステップと、
    　前記映像処理した映像信号を入力し映像表示素子にて光学像を生成する光学像生成ステップと、
    　前記生成した光学像を投射光学系により前記投射面に投射する投射ステップと、を備え、
    　前記映像処理ステップでは、前記投射光学系により投射される映像のボヤケを低減するため、映像信号の黒輝度レベルを変更する映像補正機能を有することを特徴とする映像表示方法。
  12. 　請求項１１に記載の映像表示方法において、
    　前記映像処理ステップでは、さらに、映像のブライトネスを調整するために映像信号の黒輝度レベルを変更する機能を有し、
    　前記投射面に表示する映像の状態をユーザが設定するためのメニュー画面を表示し、ユーザ操作に基づいて前記映像処理ステップを制御する制御ステップを備え、
    　前記メニュー画面には、前記映像ボヤケを低減するために前記映像補正機能の動作のオン・オフを設定する第１の設定項目と、前記ブライトネスを調整するために映像信号の黒輝度レベルを設定する第２の設定項目とが含まれており、
    　前記第１の設定項目と前記第２の設定項目のユーザ設定状態に応じて、
    　前記第１の設定項目がオフの状態には、前記映像補正機能の動作に伴う黒輝度レベルの変更は行わず、前記第２の設定項目に基づいて黒輝度レベルの変更する第１の状態と、
    　前記第１の設定項目がオンの状態には、前記映像補正機能の動作に伴う黒輝度レベルの変更と前記第２の設定項目に基づく黒輝度レベルの変更とを連動させて映像信号の黒輝度レベルを変更する第２の状態と、
    　を切替えることを特徴とする映像表示方法。
  13. 　請求項１１または１２に記載の映像表示方法において、
    　前記映像補正機能では、
    　映像信号中の各画素が前記投射光学系により前記投射面へ投射される際に、前記投射面上に生じる映像のボヤケ量を算出するボヤケ量算出ステップと、
    　前記入力映像信号に対し、逆拡散過程演算を行うことで映像ボヤケを低減し解像度を復元する解像度復元ステップと、を備えることを特徴とする映像表示方法。
  14. 　請求項１３に記載の映像表示方法において、
    　前記解像度復元ステップでは前記逆拡散過程演算を行う際、映像信号の負値を表現するため輝度レベルの０値すなわち黒輝度レベルに対しオフセットを加算するとともに、元の白輝度レベルに合わせるため輝度レベルのゲインを調整することを特徴とする映像表示方法。
PCT/JP2014/079758 2014-11-10 2014-11-10 プロジェクタ及び映像表示方法 Ceased WO2016075744A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
PCT/JP2014/079758 WO2016075744A1 (ja) 2014-11-10 2014-11-10 プロジェクタ及び映像表示方法
US15/522,619 US9955131B2 (en) 2014-11-10 2014-11-10 Projector and image display method
JP2016558463A JP6469130B2 (ja) 2014-11-10 2014-11-10 プロジェクタ及び映像表示方法
CN201480083268.4A CN107079127B (zh) 2014-11-10 2014-11-10 投影仪以及影像显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/079758 WO2016075744A1 (ja) 2014-11-10 2014-11-10 プロジェクタ及び映像表示方法

Publications (1)

Publication Number Publication Date
WO2016075744A1 true WO2016075744A1 (ja) 2016-05-19

Family

ID=55953857

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/079758 Ceased WO2016075744A1 (ja) 2014-11-10 2014-11-10 プロジェクタ及び映像表示方法

Country Status (4)

Country Link
US (1) US9955131B2 (ja)
JP (1) JP6469130B2 (ja)
CN (1) CN107079127B (ja)
WO (1) WO2016075744A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016197145A (ja) * 2015-04-02 2016-11-24 株式会社東芝 画像処理装置および画像表示装置
CN109901355A (zh) * 2019-04-19 2019-06-18 深圳市当智科技有限公司 基于对比度加直方图的多元化投影仪自动对焦方法
WO2019187511A1 (ja) * 2018-03-29 2019-10-03 ソニー株式会社 信号処理装置、情報処理方法、プログラム
JP2023151368A (ja) * 2022-03-31 2023-10-16 セイコーエプソン株式会社 頭部装着型表示装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5924020B2 (ja) * 2012-02-16 2016-05-25 セイコーエプソン株式会社 プロジェクター、及び、プロジェクターの制御方法
WO2016157671A1 (ja) * 2015-03-27 2016-10-06 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び画像表示装置
JP6702600B2 (ja) * 2016-02-03 2020-06-03 Ｎｅｃディスプレイソリューションズ株式会社 プロジェクター及びフォーカス調整方法
WO2019172100A1 (ja) * 2018-03-08 2019-09-12 キヤノン株式会社 映像表示装置
WO2019230108A1 (ja) * 2018-05-28 2019-12-05 ソニー株式会社 画像処理装置、画像処理方法
US11394941B2 (en) * 2018-05-28 2022-07-19 Sony Corporation Image processing device and image processing method
CN110996082B (zh) * 2019-12-17 2021-11-09 成都极米科技股份有限公司 投影调节方法、装置、投影仪及可读存储介质
JP7559803B2 (ja) * 2022-06-09 2024-10-02 セイコーエプソン株式会社 画像処理方法、プログラム、およびプロジェクター
CN115002434B (zh) * 2022-08-02 2022-11-01 深圳市大屏影音技术有限公司 一种基于视觉分析的影音设备监管系统及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002366121A (ja) * 2001-06-12 2002-12-20 Matsushita Electric Ind Co Ltd 映像表示装置および映像表示方法
JP2005277969A (ja) * 2004-03-25 2005-10-06 Seiko Epson Corp 画像処理装置、画像投射装置、方法、プログラムおよび記録媒体
JP2009042838A (ja) * 2007-08-06 2009-02-26 Ricoh Co Ltd 画像投影方法および画像投影装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3690402B2 (ja) * 2003-03-28 2005-08-31 セイコーエプソン株式会社 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP5223452B2 (ja) * 2008-05-20 2013-06-26 株式会社リコー プロジェクタ及び投影画像形成方法及び車両用ヘッドアップディスプレイ装置
JP5271631B2 (ja) * 2008-08-07 2013-08-21 Ｈｏｙａ株式会社 画像処理ユニット、撮像装置、合成画像作成プログラム
KR20100099008A (ko) * 2009-03-02 2010-09-10 삼성전자주식회사 오토 포커싱 제어 방법 및 장치, 이를 이용한 디지털 촬영 장치
JP5504806B2 (ja) 2009-10-01 2014-05-28 セイコーエプソン株式会社 画像処理装置、プロジェクター、画像処理方法およびプログラム
CN102129154A (zh) * 2010-01-15 2011-07-20 上海三鑫科技发展有限公司 微型投影机及其调整方法
CN101866096B (zh) * 2010-05-04 2012-01-11 北京航空航天大学 一种基于模糊控制的多投影仪图像拼接自动边缘融合方法
JP2012151670A (ja) * 2011-01-19 2012-08-09 Renesas Electronics Corp 画像投影システム及び半導体集積回路
CN102625043B (zh) * 2011-01-25 2014-12-10 佳能株式会社 图像处理设备、成像设备和图像处理方法
US8983221B2 (en) * 2011-08-29 2015-03-17 Panasonic Intellectual Property Management Co., Ltd. Image processing apparatus, imaging apparatus, and image processing method
CN103974011B (zh) * 2013-10-21 2017-07-11 浙江大学 一种投影图像模糊消除方法
JP6327922B2 (ja) * 2014-04-25 2018-05-23 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
JP6525718B2 (ja) * 2015-05-11 2019-06-05 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002366121A (ja) * 2001-06-12 2002-12-20 Matsushita Electric Ind Co Ltd 映像表示装置および映像表示方法
JP2005277969A (ja) * 2004-03-25 2005-10-06 Seiko Epson Corp 画像処理装置、画像投射装置、方法、プログラムおよび記録媒体
JP2009042838A (ja) * 2007-08-06 2009-02-26 Ricoh Co Ltd 画像投影方法および画像投影装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016197145A (ja) * 2015-04-02 2016-11-24 株式会社東芝 画像処理装置および画像表示装置
WO2019187511A1 (ja) * 2018-03-29 2019-10-03 ソニー株式会社 信号処理装置、情報処理方法、プログラム
JPWO2019187511A1 (ja) * 2018-03-29 2021-04-15 ソニー株式会社 信号処理装置、情報処理方法、プログラム
CN109901355A (zh) * 2019-04-19 2019-06-18 深圳市当智科技有限公司 基于对比度加直方图的多元化投影仪自动对焦方法
JP2023151368A (ja) * 2022-03-31 2023-10-16 セイコーエプソン株式会社 頭部装着型表示装置

Also Published As

Publication number Publication date
CN107079127A (zh) 2017-08-18
JPWO2016075744A1 (ja) 2017-09-28
US20170318270A1 (en) 2017-11-02
JP6469130B2 (ja) 2019-02-13
US9955131B2 (en) 2018-04-24
CN107079127B (zh) 2019-11-29

Similar Documents

Publication Publication Date Title
JP6469130B2 (ja) プロジェクタ及び映像表示方法
JP3735158B2 (ja) 画像投影システム、画像処理装置
US7529424B2 (en) Correction of optical distortion by image processing
CN103283214B (zh) 摄像机、畸变校正装置以及畸变校正方法
RU2707066C1 (ru) Устройство обработки изображения, устройство создания изображения, их способы управления и программа
JP3908255B2 (ja) 画像投影システム
CN103200409B (zh) 多投影仪显示系统的颜色校正方法
JP2012151670A (ja) 画像投影システム及び半導体集積回路
WO2005002240A1 (ja) 表示特性補正データの算出方法、表示特性補正データの算出プログラム、表示特性補正データの算出装置
JP2015097350A (ja) 画像処理装置およびマルチプロジェクションシステム
CN107197134B (zh) 一种用于多个鱼眼镜头的图像的曝光调整方法和装置
JP6371092B2 (ja) 映像処理装置及びそれを用いたプロジェクタ装置
JP2003032580A (ja) プロジェクタによって投写される画像の画像処理
WO2018159162A1 (ja) 画像処理装置およびその制御方法及びプログラム
CN104956661A (zh) 图像拾取装置、图像处理装置、图像处理方法和非暂时性计算机可读存储介质
US20050162620A1 (en) Image processing apparatus
JP2017156581A (ja) 投影装置及びその制御方法
TWI703868B (zh) 投影亮度和對比的自動調整系統及方法
JP6794983B2 (ja) 情報処理装置、情報処理方法、プログラム、及び画像表示装置
JP2020191034A (ja) 画像処理装置、撮像装置、レンズ装置、画像処理システム、画像処理方法、および、プログラム
US10868953B2 (en) Image processing device capable of notifying an effect of emphasizing a subject before performing imaging, control method thereof, and medium
JP2005354680A (ja) 画像投影システム
US20170339381A1 (en) Image processing apparatus and image processing method
JP2004032665A (ja) 画像投影システム
US8545025B2 (en) Image processing apparatus, projector, image processing method, and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14905939

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016558463

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15522619

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14905939

Country of ref document: EP

Kind code of ref document: A1