JP2013025076A - Image processor, image display device and image processing method - Google Patents

Image processor, image display device and image processing method Download PDF

Info

Publication number
JP2013025076A
JP2013025076A JP2011159627A JP2011159627A JP2013025076A JP 2013025076 A JP2013025076 A JP 2013025076A JP 2011159627 A JP2011159627 A JP 2011159627A JP 2011159627 A JP2011159627 A JP 2011159627A JP 2013025076 A JP2013025076 A JP 2013025076A
Authority
JP
Japan
Prior art keywords
image
unevenness
unevenness correction
projection image
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011159627A
Other languages
Japanese (ja)
Other versions
JP5866842B2 (en
Inventor
Kenji Mizushiro
賢次 水城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2011159627A priority Critical patent/JP5866842B2/en
Publication of JP2013025076A publication Critical patent/JP2013025076A/en
Application granted granted Critical
Publication of JP5866842B2 publication Critical patent/JP5866842B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Liquid Crystal Display Device Control (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image processor capable of enhancing image quality of an image displayed by tiling display, and further to provide an image processing method or the like.SOLUTION: An image processing section 100 for performing unevenness correction of a tiling image in which a first projection image IMG1 and a second projection image IMG2 provided with a superimposed region are disposed includes: a first unevenness correction LUT storage section 160 that stores a correction value for correcting unevenness of the first projection image IMG1; a first unevenness correction processing section 162 for correcting the unevenness of the first projection image IMG1 by using the correction value. Luminance of a boundary position B1 in a boundary portion between a non-superimposed region and a superimposed region of the first projection image IMG1 is lower than luminance of a boundary position B2 in a boundary portion between a non-superimposed region and a superimposed region of the second projection image IMG2. In the non-superimposed region and the superimposed region of the first projection image IMG1, the first unevenness correction processing section 162 corrects the unevenness thereof on the basis of the luminance of the boundary position B2.

Description

本発明は、画像処理装置、画像表示装置及び画像処理方法等に関する。   The present invention relates to an image processing device, an image display device, an image processing method, and the like.

複数台のプロジェクター(画像表示装置)を用いて、各プロジェクターにより投射される投射画像の一部分を重ね合わせて表示することにより、大画面化と解像度向上を図るタイリング(マルチプロジェクション)技術が知られている。このタイリング技術においては、同一機種(同一種別、同一型番)のプロジェクターの組み合わせに限らず、異なる機種のプロジェクターを組み合わせることも考えられる。   A tiling (multi-projection) technology is known that uses a plurality of projectors (image display devices) to superimpose and display a portion of the projected image projected by each projector, thereby improving the resolution and resolution. ing. In this tiling technique, it is conceivable to combine projectors of different models as well as combinations of projectors of the same model (same type, same model number).

一方、プロジェクターには、輝度むらや色むら(広義には、むら)が高画質化への障壁となり、プロジェクター毎にその表示特性に応じた輝度むら補正や色むら補正が行われている。このようなプロジェクターを用いてタイリング表示を行う場合、1台のプロジェクターのみによる表示を考慮して輝度むら補正や色むら補正を行い、輝度は画面の中央部から周辺部に向かってなだらかに低下し、色は画面内で均一になるようにするのが望ましい。   On the other hand, brightness unevenness and color unevenness (unevenness in a broad sense) are a barrier to high image quality in projectors, and brightness unevenness correction and color unevenness correction corresponding to the display characteristics are performed for each projector. When tiling display is performed using such a projector, brightness unevenness correction and color unevenness correction are performed in consideration of display by only one projector, and the brightness gradually decreases from the center of the screen toward the periphery. However, it is desirable that the color be uniform within the screen.

ところで、タイリング表示を行う場合、各プロジェクターの投射画像の上下方向(垂直方向)又は左右方向(水平方向)の一部を隣接する投射画像と重ね合わせ、その重畳領域は輝度や色の変化がなだらかになるようなブレンド処理を行うことが多い。あるいは、遮光板によるハードウェア的な光量調節に加えると共に、ソフトウェアによるブレンド処理を行うこともある。   By the way, when performing tiling display, a part of the projection image of each projector in the vertical direction (vertical direction) or the horizontal direction (horizontal direction) is overlapped with the adjacent projection image, and the superimposition region has a change in luminance or color. In many cases, a gentle blend process is performed. Alternatively, in addition to hardware light amount adjustment by the light shielding plate, blending processing by software may be performed.

図21(A)に、タイリング表示の説明図を示す。図21(B)に、図21(A)のようにタイリング表示された画像に対して行うブレンド処理の説明図を示す。図21(A)及び図21(B)は、2台のプロジェクターを用いてタイリング表示された画像における水平方向の輝度の変化の一例を表したものである。図21(B)では、ブレンド処理後の各投射画像の水平方向の輝度の変化を波線で表し、タイリング表示された画像の水平方向の輝度の変化を実線で表している。   FIG. 21A shows an explanatory diagram of tiling display. FIG. 21B is an explanatory diagram of a blend process performed on an image displayed as tiled as shown in FIG. FIG. 21A and FIG. 21B illustrate an example of a change in luminance in the horizontal direction in an image displayed by tiling using two projectors. In FIG. 21B, a change in luminance in the horizontal direction of each projection image after blend processing is represented by a wavy line, and a change in luminance in the horizontal direction of a tiling-displayed image is represented by a solid line.

タイリング表示を行うとき、投射面において重畳領域を設けて、第1のプロジェクターによる投射画像IMG1を第2のプロジェクターによる投射画像IMG2に重ね合わせる。このとき、各プロジェクター固有の輝度むら補正や色むら補正が行われ、投射画像IMG1,IMG2は、図21(A)に示すように、それぞれ輝度が中央部から周辺部に向かってなだらかに低下し、色は画面内で均一化される。その結果、図21(B)に示すように、ブレンド処理によって、投射画像IMG1,IMG2の重畳領域の輝度や色の変化がなだらかになるように補正され、タイリング表示された画像の画質の向上を図ることができる。   When performing tiling display, an overlapping region is provided on the projection surface, and the projection image IMG1 from the first projector is superimposed on the projection image IMG2 from the second projector. At this time, luminance unevenness correction and color unevenness correction unique to each projector are performed, and the projected images IMG1 and IMG2 gradually decrease in luminance from the center to the periphery as shown in FIG. , The color is made uniform in the screen. As a result, as shown in FIG. 21B, the blending process corrects the luminance and color changes of the superimposed regions of the projection images IMG1 and IMG2 to be gentle, and improves the image quality of the tiled display image. Can be achieved.

このようなタイリング表示された画像の画質の向上を図る技術については、種々提案されている。例えば特許文献1には、タイリング表示された画像を撮影し、表示領域全体で均一又は連続した明るさとなるように補正することで、重畳領域の境界を目立たなくする技術が開示されている。   Various techniques for improving the image quality of such tiling-displayed images have been proposed. For example, Patent Literature 1 discloses a technique for making an image of a tiled display inconspicuous by capturing a tiling-displayed image and correcting the image so as to obtain uniform or continuous brightness over the entire display area.

特開2002−116500号公報JP 2002-116500 A

しかしながら、各プロジェクターは、輝度や色度の差異、固有の周辺減光特性を有する。そのため、特許文献1に開示された技術では、図21(B)に示すようにブレンド処理を行っても、プロジェクター単体で画面全体をなだらかに変化させることは難しい。従って、タイリング表示された画像では、重畳領域において輝度や色の変化が波打って、画像を観察する人間の眼には、むらとして認識されてしまうという問題が残る。   However, each projector has a difference in luminance and chromaticity, and unique peripheral dimming characteristics. For this reason, with the technique disclosed in Patent Document 1, it is difficult to gently change the entire screen with a single projector even if blend processing is performed as shown in FIG. Therefore, in the tiling-displayed image, there remains a problem that changes in luminance and color are undulated in the superimposition region and are recognized as unevenness by the human eye observing the image.

特に、各プロジェクターにおいては、白の色をsRGB(standard RGB)等の規格値に合わせるのではなく、プロジェクターの素の白色(デバイス白色)をそのまま用いたり、デバイス白色とsRGBの間の色にしたりすることで明るさを確保することが多い。従って、プロジェクターの個体差が大きいほど重畳領域での変化も激しくなる。また、タイリング表示のために各プロジェクターにおいて白を規格値に完全に合わせたり、輝度が画面内で均一になるようなむら補正を行ったりすると、輝度損失が大きくなり望ましくない。   In particular, in each projector, the white color is not adjusted to a standard value such as sRGB (standard RGB), but the original white color (device white) of the projector is used as it is, or a color between device white and sRGB is used. Doing so often ensures brightness. Therefore, the greater the individual difference between projectors, the more severe the change in the overlapping area. In addition, if white is completely adjusted to the standard value in each projector for tiling display, or if unevenness correction is performed so that the luminance is uniform in the screen, luminance loss increases, which is not desirable.

本発明は、以上のような技術的課題に鑑みてなされたものである。本発明の幾つかの態様によれば、各画像表示装置の表示特性に応じて重畳領域での変化が小さくなるような補正を行うことで、タイリング表示された画像の画質を向上させることができる画像処理装置、画像表示装置及び画像処理方法等を提供することができる。   The present invention has been made in view of the above technical problems. According to some aspects of the present invention, it is possible to improve the image quality of a tiling-displayed image by performing correction so as to reduce the change in the overlapping region according to the display characteristics of each image display device. An image processing apparatus, an image display apparatus, an image processing method, and the like that can be provided can be provided.

(1)本発明の第1の態様は、第1の投射画像及び第2の投射画像が重畳領域を設けて配置されるタイリング画像のむら補正を行う画像処理装置が、前記第1の投射画像のむらを補正するための補正値を記憶する第1のむら補正値記憶部と、前記第1のむら補正記憶部に記憶された補正値を用いて前記第1の投射画像のむらを補正する第1のむら補正処理部とを含み、前記第1の投射画像の非重畳領域と前記重畳領域との境界部における第1の画素位置の輝度は、前記第2の投射画像の非重畳領域と前記重畳領域との境界部における第2の画素位置の輝度より低く、前記第1のむら補正処理部は、前記第1の投射画像の非重畳領域及び前記重畳領域において、前記第2の画素位置の輝度に基づいてむらを補正する。   (1) In the first aspect of the present invention, an image processing apparatus that performs uneven correction of a tiling image in which a first projection image and a second projection image are arranged with an overlapping region is provided. A first unevenness correction value storage unit that stores a correction value for correcting unevenness of the image, and a first unevenness correction that corrects unevenness of the first projection image using the correction value stored in the first unevenness correction storage unit. A luminance of a first pixel position at a boundary portion between the non-overlapping area of the first projection image and the superimposing area, and a luminance between the non-overlapping area of the second projection image and the overlapping area. The first unevenness correction processing unit is lower than the luminance of the second pixel position in the boundary portion, and the first unevenness correction processing unit performs unevenness based on the luminance of the second pixel position in the non-overlapping region and the overlapping region of the first projection image. Correct.

本態様においては、第1の投射画像及び第2の投射画像によりタイリング画像を表示する。このとき、第1の投射画像の非重畳領域と重畳領域との境界部における第1の画素位置が、第2の投射画像の非重畳領域と重畳領域との境界部における第2の画素位置の輝度より低い。そこで、第1のむら補正処理部が、第1の画素位置における輝度が低い第1の投射画像の非重畳領域及び重畳領域において、第2の画素位置の輝度に基づいてむら補正処理を行う。これにより、第1の投射画像及び第2の投射画像の各々を表示する画像表示装置の表示特性に応じて重畳領域での変化が小さくなるように補正することができ、タイリング表示された画像の画質を向上させることができるようになる。   In this aspect, a tiling image is displayed by the first projection image and the second projection image. At this time, the first pixel position at the boundary between the non-overlapping area and the overlapping area of the first projection image is the second pixel position at the boundary between the non-overlapping area and the overlapping area of the second projection image. Lower than brightness. Therefore, the first unevenness correction processing unit performs unevenness correction processing based on the luminance at the second pixel position in the non-overlapping area and the overlapping area of the first projection image with low luminance at the first pixel position. Thereby, it can correct | amend so that the change in a superimposition area | region may become small according to the display characteristic of the image display apparatus which displays each of a 1st projection image and a 2nd projection image, and the image displayed by tiling Image quality can be improved.

(2)本発明の第2の態様に係る画像処理装置では、第1の態様において、前記第1のむら補正処理部は、前記第1の投射画像において前記第2の画素位置の輝度に対応する輝度を有する前記第1の投射画像内の非重畳領域内の第3の画素位置から前記重畳領域内の前記第1の投射画像端にかけて、むらを補正する。
本態様においては、第1の投射画像において第2の画素位置の輝度に対応する輝度を有する第1の投射画像内の非重畳領域内の第3の画素位置から重畳領域にかけてむらを補正するようにしたので、重畳領域における明るさの谷間等のむらを軽減することができる。
(2) In the image processing apparatus according to the second aspect of the present invention, in the first aspect, the first unevenness correction processing unit corresponds to the luminance of the second pixel position in the first projection image. The unevenness is corrected from the third pixel position in the non-superimposed region in the first projection image having luminance to the first projected image end in the superimposed region.
In this aspect, in the first projection image, the unevenness is corrected from the third pixel position in the non-overlapping area in the first projection image having the luminance corresponding to the luminance of the second pixel position to the overlapping area. Therefore, unevenness such as a valley of brightness in the overlapping region can be reduced.

(3)本発明の第3の態様に係る画像処理装置では、第2の態様において、前記第1のむら補正処理部は、前記第3の画素位置を基準とした色差が最小となるように、むらを補正する。
本態様によれば、第3の画素位置を基準とした色差が最小となるように、むらを補正するようにしたので、むらが補正される領域における色の変化を小さくし、タイリング表示された画像の画質を向上させることができるようになる。
(3) In the image processing apparatus according to the third aspect of the present invention, in the second aspect, the first unevenness correction processing unit is configured so that the color difference with reference to the third pixel position is minimized. Correct unevenness.
According to this aspect, since the unevenness is corrected so that the color difference based on the third pixel position is minimized, the color change in the region where the unevenness is corrected is reduced, and the tiling display is performed. It is possible to improve the quality of the image.

(4)本発明の第4の態様に係る画像処理装置では、第1の態様乃至第3の態様のいずれかにおいて、前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、前記第2のむら補正処理部は、前記第1のむら補正処理部による補正後の前記第1の画素位置と前記第2の投射画像内の輝度のピーク位置との色差が最小となるように、むらを補正する。
本態様においては、第1のむら補正処理部による補正後の第1の画素位置と第2の投射画像内の輝度のピーク位置との色差に着目して、第1の投射画像及び第2の投射画像の各々についてむらを補正する。こうすることで、タイリング上で表示される両投射画像の重畳領域における輝度変化や色変化をより滑らかにし、タイリング表示された画像の画質を向上させることができる。
(4) In the image processing device according to the fourth aspect of the present invention, in any one of the first aspect to the third aspect, a second value that stores a correction value for correcting the unevenness of the second projected image is stored. A non-uniformity correction value storage unit, and a second non-uniformity correction processing unit that corrects non-uniformity of the second projected image using the correction value stored in the second non-uniformity correction storage unit. Corrects unevenness so that the color difference between the first pixel position corrected by the first unevenness correction processing unit and the luminance peak position in the second projected image is minimized.
In this aspect, paying attention to the color difference between the first pixel position corrected by the first unevenness correction processing unit and the luminance peak position in the second projection image, the first projection image and the second projection Unevenness is corrected for each of the images. By doing so, it is possible to smoothen the luminance change and the color change in the overlapping region of both projection images displayed on the tiling, and to improve the image quality of the image displayed on the tiling.

(5)本発明の第5の態様に係る画像処理装置では、第1の態様又は第2の態様において、前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、前記第1のむら補正処理部及び前記第2のむら補正処理部は、前記第1の投射画像内の輝度のピーク位置と前記第1のむら補正処理部による補正後の前記第1の画素位置との第1の色差と、前記第1のむら補正処理部による補正後の前記第1の画素位置と前記第2の投射画像内の輝度のピーク位置との第2の色差との和が最小となるように、むらを補正する。
本態様においては、第1の投射画像内の輝度のピーク位置と第1のむら補正処理部による補正後の第1の画素位置との第1の色差と、第1のむら補正処理部による補正後の第1の画素位置と第2の投射画像内の輝度のピーク位置との第2の色差との和に着目して、第1の投射画像及び第2の投射画像の各々についてむらを補正する。こうすることで、タイリング上で表示される両投射画像の重畳領域における輝度変化や色変化をより滑らかにし、タイリング表示された画像の画質を向上させることができる。
(5) In the image processing apparatus according to the fifth aspect of the present invention, in the first aspect or the second aspect, a second unevenness correction value that stores a correction value for correcting the unevenness of the second projection image. A storage unit, and a second unevenness correction processing unit that corrects the unevenness of the second projected image using the correction value stored in the second unevenness correction storage unit, the first unevenness correction processing unit and the first unevenness correction processing unit The second unevenness correction processing unit includes a first color difference between a luminance peak position in the first projection image and the first pixel position corrected by the first unevenness correction processing unit, and the first unevenness correction. The unevenness is corrected so that the sum of the first color position after the correction by the processing unit and the second color difference between the luminance peak positions in the second projection image is minimized.
In this aspect, the first color difference between the luminance peak position in the first projection image and the first pixel position after correction by the first unevenness correction processing unit, and after correction by the first unevenness correction processing unit Focusing on the sum of the first pixel position and the second color difference between the luminance peak positions in the second projection image, the unevenness of each of the first projection image and the second projection image is corrected. By doing so, it is possible to smoothen the luminance change and the color change in the overlapping region of both projection images displayed on the tiling, and to improve the image quality of the image displayed on the tiling.

(6)本発明の第6の態様に係る画像処理装置では、第1の態様又は第2の態様において、前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、前記第1のむら補正処理部及び前記第2のむら補正処理部は、前記第1の投射画像内の輝度のピーク位置と前記第2の投射画像内の輝度のピーク位置との間で明度の変化が単調変化となるように、むらを補正する。
本態様においては、第1の投射画像内の輝度のピーク位置と第2の投射画像内の輝度のピーク位置との間で明度の変化が単調変化となるように、第1の投射画像及び第2の投射画像の各々についてむらを補正する。こうすることで、タイリング上で表示される両投射画像の重畳領域における輝度変化や色変化をより滑らかにし、タイリング表示された画像の画質を向上させることができる。
(6) In the image processing apparatus according to the sixth aspect of the present invention, in the first aspect or the second aspect, a second unevenness correction value that stores a correction value for correcting the unevenness of the second projection image. A storage unit, and a second unevenness correction processing unit that corrects the unevenness of the second projected image using the correction value stored in the second unevenness correction storage unit, the first unevenness correction processing unit and the first unevenness correction processing unit The non-uniformity correction processing unit 2 corrects the non-uniformity so that the change in brightness is monotonous between the luminance peak position in the first projection image and the luminance peak position in the second projection image. To do.
In this aspect, the first projection image and the first projection image are changed so that the change in brightness is monotonous between the luminance peak position in the first projection image and the luminance peak position in the second projection image. The unevenness is corrected for each of the two projected images. By doing so, it is possible to smoothen the luminance change and the color change in the overlapping region of both projection images displayed on the tiling, and to improve the image quality of the image displayed on the tiling.

(7)本発明の第7の態様は、画像表示装置が、第1の態様乃至第6の態様のいずれかに記載の画像処理装置を含む。   (7) In a seventh aspect of the present invention, the image display device includes the image processing device according to any one of the first to sixth aspects.

本態様によれば、表示特性に応じて重畳領域での変化が小さくなるような補正を行うことで、タイリング表示された画像の画質を向上させる画像表示装置を提供することができるようになる。   According to this aspect, it is possible to provide an image display device that improves the image quality of a tiling-displayed image by performing correction so as to reduce the change in the superimposed region according to the display characteristics. .

(8)本発明の第8の態様は、第1の投射画像及び第2の投射画像が重畳領域を設けて配置されるタイリング画像のむら補正を行う画像処理方法が、前記第1の投射画像内の非重畳領域と前記重畳領域との境界部における第1の画素位置の輝度は、前記第2の投射画像内の非重畳領域と前記重畳領域との境界部における第2の画素位置の輝度より低く、前記第2の画素位置の輝度に基づいて、前記第1の投射画像の非重畳領域及び前記重畳領域において、むらを補正する。   (8) According to an eighth aspect of the present invention, there is provided an image processing method for correcting unevenness of a tiling image in which a first projection image and a second projection image are arranged with a superimposed region, the first projection image The luminance of the first pixel position at the boundary between the non-overlapping area and the overlapping area is the luminance of the second pixel position at the boundary between the non-superimposing area and the overlapping area in the second projection image. The unevenness is corrected in the non-overlapping area and the overlapping area of the first projection image based on the lower brightness of the second pixel position.

本態様においては、第1の投射画像及び第2の投射画像によりタイリング画像を表示するとき、第1の投射画像の非重畳領域と重畳領域との境界部における第1の画素位置が、第2の投射画像の非重畳領域と重畳領域との境界部における第2の画素位置の輝度より低い。このとき、第1の画素位置における輝度が低い第1の投射画像の非重畳領域及び重畳領域において、第2の画素位置の輝度に基づいてむら補正処理を行うようにしたので、第1の投射画像及び第2の投射画像の各々を表示する画像表示装置の表示特性に応じて重畳領域での変化が小さくなるように補正することができる。従って、タイリング表示された画像の画質を向上させる画像処理方法を提供することができるようになる。   In this aspect, when the tiling image is displayed by the first projection image and the second projection image, the first pixel position at the boundary between the non-overlapping area and the overlapping area of the first projection image is It is lower than the brightness of the second pixel position at the boundary between the non-overlapping area and the overlapping area of the two projection images. At this time, since the unevenness correction processing is performed based on the luminance at the second pixel position in the non-superimposed region and the superimposed region of the first projection image with low luminance at the first pixel position, the first projection It can correct | amend so that the change in a superimposition area | region may become small according to the display characteristic of the image display apparatus which displays each of an image and a 2nd projection image. Therefore, it is possible to provide an image processing method that improves the image quality of the tiling-displayed image.

第1の実施形態におけるマルチプロジェクションシステムの構成例のブロック図。1 is a block diagram of a configuration example of a multi-projection system according to a first embodiment. 図1の画像処理部の構成例のブロック図。The block diagram of the structural example of the image process part of FIG. 図2の画像処理部の処理例のフロー図。FIG. 3 is a flowchart of a processing example of an image processing unit in FIG. 2. むら補正LUTの準備処理の一例のフロー図。The flowchart of an example of the preparation process of nonuniformity correction LUT. むら補正LUT作成処理の一例のフロー図。The flowchart of an example of a nonuniformity correction LUT creation process. むら特性測定処理の一例のフロー図。The flowchart of an example of a nonuniformity characteristic measurement process. むら補正LUT生成処理の一例のフロー図。The flowchart of an example of a nonuniformity correction | amendment LUT production | generation process. 図5のステップS42におけるむら補正目標値演算処理の一例のフロー図。FIG. 6 is a flowchart of an example of unevenness correction target value calculation processing in step S42 of FIG. 第1の実施形態におけるタイリング表示される第1の投射画像及び第2の投射画像の説明図。Explanatory drawing of the 1st projection image and 2nd projection image which are tiling-displayed in 1st Embodiment. 図9に示す第1のプロジェクター及び第2のプロジェクターの色域の一例を示す図。FIG. 10 is a diagram illustrating an example of a color gamut of the first projector and the second projector illustrated in FIG. 9. 第1の実施形態におけるむら補正処理に関する第1の説明図。FIG. 5 is a first explanatory diagram regarding unevenness correction processing in the first embodiment. 第1の実施形態におけるむら補正処理に関する第2の説明図。FIG. 6 is a second explanatory diagram relating to unevenness correction processing in the first embodiment. 第1の実施形態における重畳領域の境界位置の説明図。Explanatory drawing of the boundary position of the superimposition area | region in 1st Embodiment. 第1の実施形態におけるむら補正処理に関する第3の説明図。FIG. 6 is a third explanatory diagram regarding unevenness correction processing in the first embodiment. 第2の実施形態におけるマルチプロジェクションシステムの構成例のブロック図。The block diagram of the structural example of the multi-projection system in 2nd Embodiment. 図15の画像処理装置の構成例のブロック図。FIG. 16 is a block diagram of a configuration example of the image processing apparatus in FIG. 15. 第2の実施形態におけるむら補正処理に関する第1の説明図。The 1st explanatory view about the unevenness correction processing in a 2nd embodiment. 第2の実施形態におけるむら補正処理に関する第2の説明図。FIG. 10 is a second explanatory diagram relating to unevenness correction processing in the second embodiment. 第2の実施形態の第1の変形例におけるむら補正処理に関する説明図。Explanatory drawing regarding the nonuniformity correction process in the 1st modification of 2nd Embodiment. 第2の実施形態の第2の変形例におけるむら補正処理に関する説明図。Explanatory drawing regarding the nonuniformity correction process in the 2nd modification of 2nd Embodiment. 図21(A)は、タイリング表示の説明図。図21(B)は、図21(A)のようにタイリング表示された画像に対して行うブレンド処理の説明図。FIG. 21A is an explanatory diagram of tiling display. FIG. 21B is an explanatory diagram of a blend process performed on an image displayed as tiled as shown in FIG.

以下、本発明の実施の形態について図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また以下で説明される構成のすべてが本発明の課題を解決するために必須の構成要件であるとは限らない。
なお、以下の実施形態では、2台のプロジェクターを用いてタイリング表示を行う例について説明するが、3台以上のプロジェクターを用いてタイリング表示を行う場合にも本発明を適用することができる。また、以下では、2台のプロジェクターを用いて水平方向に並べてタイリング表示を行う例について説明するが、垂直方向に並べてタイリング表示を行う場合にも本発明を同様に適用することができる。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The embodiments described below do not unduly limit the contents of the present invention described in the claims. In addition, all of the configurations described below are not necessarily indispensable configuration requirements for solving the problems of the present invention.
In the following embodiment, an example in which tiling display is performed using two projectors will be described. However, the present invention can also be applied to a case where tiling display is performed using three or more projectors. . In the following, an example in which tiling display is arranged in the horizontal direction using two projectors will be described. However, the present invention can be similarly applied to the case where tiling display is arranged in the vertical direction.

〔第1の実施形態〕
図1に、本発明の第1の実施形態におけるマルチプロジェクションシステムの構成例のブロック図を示す。図1では、マルチプロジェクションシステムを構成する第1のプロジェクター(第1の画像表示装置)が第1の実施形態における画像処理装置としての画像処理部を備えている。そして、第1のプロジェクターがマスターとなり、第1のプロジェクターには第2のプロジェクター(第2の画像表示装置)がスレーブとして接続される。
[First Embodiment]
FIG. 1 is a block diagram showing a configuration example of a multi-projection system according to the first embodiment of the present invention. In FIG. 1, the first projector (first image display device) constituting the multi-projection system includes an image processing unit as the image processing device in the first embodiment. The first projector becomes the master, and the second projector (second image display device) is connected to the first projector as a slave.

マルチプロジェクションシステム(広義には、表示システム)10は、第1のプロジェクターPJ1と、第2のプロジェクターPJ2と、画像信号供給装置20と、むら測定装置30とを備えている。第1のプロジェクターPJ1は、画像処理部100と、画像形成部200と、操作部300とを備えている。第2のプロジェクターPJ2もまた、第1のプロジェクターPJ1の画像形成部200と同様の画像形成部(図示せず)を備えている。   The multi-projection system (display system in a broad sense) 10 includes a first projector PJ1, a second projector PJ2, an image signal supply device 20, and an unevenness measuring device 30. The first projector PJ1 includes an image processing unit 100, an image forming unit 200, and an operation unit 300. The second projector PJ2 also includes an image forming unit (not shown) similar to the image forming unit 200 of the first projector PJ1.

第1のプロジェクターPJ1及び第2のプロジェクターPJ2の各々は、画像信号供給装置20からの画像信号に基づいて、投射画像を、重畳領域を設けてスクリーンSCR上に表示することで、タイリング画像を表示する。このとき、第1のプロジェクターPJ1は、むら測定装置30により測定されたスクリーンSCR上の投射画像のむら測定結果に基づいてむら補正処理を行い、むら補正処理後の画像信号に基づいて第1の投射画像IMG1をスクリーンSCRに投射する。第1の投射画像IMG1と第2の投射画像IMG2とでタイリング表示を行うことで、重畳領域の輝度変化や色変化が小さく、画質を向上させたタイリング画像を表示する。   Each of the first projector PJ1 and the second projector PJ2 displays a projected image on the screen SCR by providing a superimposed region based on the image signal from the image signal supply device 20, thereby displaying a tiling image. indicate. At this time, the first projector PJ1 performs the unevenness correction process based on the unevenness measurement result of the projection image on the screen SCR measured by the unevenness measuring device 30, and the first projection based on the image signal after the unevenness correction process. The image IMG1 is projected on the screen SCR. By performing tiling display with the first projection image IMG1 and the second projection image IMG2, a tiling image in which the luminance change and color change in the superimposed region are small and the image quality is improved is displayed.

画像信号供給装置20は、タイリング表示を行う画像に対応した画像信号を生成し、該画像信号を第1のプロジェクターPJ1に供給する。第2のプロジェクターPJ2には、マスターとして設けられた第1のプロジェクターPJ1から画像信号が供給される。また、画像信号供給装置20は、輝度むら補正及び色むら補正等のむら補正処理を行うためのむら測定パターンに対応した画像信号を、第1のプロジェクターPJ1に対して供給する。このような画像信号供給装置20の機能は、DVD(Digital Versatile Disc)装置やパーソナルコンピューター(Personal Computer:PC)等により実現される。なお、画像信号供給装置20の機能の一部又は全部を、画像処理部100が有していてもよい。   The image signal supply device 20 generates an image signal corresponding to an image to be tiled and supplies the image signal to the first projector PJ1. An image signal is supplied to the second projector PJ2 from the first projector PJ1 provided as a master. Further, the image signal supply device 20 supplies an image signal corresponding to an unevenness measurement pattern for performing unevenness correction processing such as uneven brightness correction and uneven color correction to the first projector PJ1. Such a function of the image signal supply device 20 is realized by a DVD (Digital Versatile Disc) device, a personal computer (PC), or the like. Note that the image processing unit 100 may have some or all of the functions of the image signal supply device 20.

むら測定装置30は、CCD(Charge Coupled Device)センサー等の2次元イメージセンサーであり、スクリーンSCRに投射された画像を測定(撮影)できるように設置されている。むら測定装置30は、画像信号供給装置20からの各むら測定パターンの画像信号に基づいて表示されたべた画像を撮影し、面内におけるXYZ三刺激値の2次元分布情報を取得する。むら測定パターンは、グレイ画像及びRGBの各色成分の階調を0パーセントから100パーセントまで変化させた中間調を含むべた画像(全画素が同一画素値の画像)とすることができる。このようなむら測定装置30として、例えばxyz等色関数で近似された分光感度を有するフィルターを用いて撮影し、マトリクス補正演算によりXYZ三刺激値を得るもの(Radiant Imaging社のProMetric等)がある。むら測定装置30により撮影されたデータはむら測定値として、画像処理部100に送られる。画像処理部100は、むら測定装置30によるむら測定処理を制御するための制御部を内蔵していてもよい。   The unevenness measuring device 30 is a two-dimensional image sensor such as a CCD (Charge Coupled Device) sensor and is installed so that an image projected on the screen SCR can be measured (captured). The unevenness measuring device 30 captures a solid image displayed based on the image signal of each unevenness measurement pattern from the image signal supply device 20, and acquires two-dimensional distribution information of XYZ tristimulus values in the plane. The unevenness measurement pattern can be a gray image and a solid image (an image having all the same pixel values) including a halftone in which the gradation of each color component of RGB is changed from 0 percent to 100 percent. As such an unevenness measuring device 30, for example, there is an apparatus (for example, ProMetric of Radiant Imaging) that takes an image using a filter having a spectral sensitivity approximated by an xyz color matching function and obtains XYZ tristimulus values by matrix correction calculation. . Data captured by the unevenness measuring device 30 is sent to the image processing unit 100 as an unevenness measurement value. The image processing unit 100 may incorporate a control unit for controlling the unevenness measurement process performed by the unevenness measuring device 30.

画像処理部100は、単体表示用又はタイリング表示用の画像の解像度の種別や各プロジェクターの色特性(表示特性)に応じて、画像信号供給装置20からの画像信号に対してむら補正処理等の画像補正処理を行い、画像補正処理後の画像信号を各画像形成部に供給する。このような画像処理部100の機能は、中央演算処理装置(Central Processing Unit:CPU)及びメモリーを有する構成により実現されるソフトウェア処理や、ASIC(Application Specific Integrated Circuit)等のロジック回路により実現される。   The image processing unit 100 performs unevenness correction processing on the image signal from the image signal supply device 20 according to the resolution type of the image for single display or tiling display and the color characteristic (display characteristic) of each projector. The image correction process is performed, and the image signal after the image correction process is supplied to each image forming unit. Such a function of the image processing unit 100 is realized by a software process realized by a configuration having a central processing unit (CPU) and a memory, and a logic circuit such as an ASIC (Application Specific Integrated Circuit). .

画像形成部200は、光源、光源からの光をライトバルブ(光変調部)に送る光学系(照明光学系)、ダイクロイックミラー、液晶ライトバルブ、色合成プリズム(クロスダイクロイックプリズム)、投射光学系、駆動回路等を含む。画像形成部200は、画像処理部100からの画像信号に基づいて、光源からの光を変調して画像を形成し、スクリーンSCRに投射する。   The image forming unit 200 includes a light source, an optical system (illumination optical system) that sends light from the light source to a light valve (light modulation unit), a dichroic mirror, a liquid crystal light valve, a color synthesis prism (cross dichroic prism), a projection optical system, Including a drive circuit and the like. The image forming unit 200 modulates the light from the light source based on the image signal from the image processing unit 100 to form an image, and projects the image on the screen SCR.

操作部300には、単体表示やタイリング表示等の表示モードの設定や、タイリング表示の際の各プロジェクターの配置位置、重畳領域の大きさや位置をユーザーにより設定するための操作情報が入力される。また、画像処理部100は、複数のむら補正処理モードを備え、操作部300には、むら補正処理において用いるむら補正ルックアップテーブル(Look-Up Table:以下、LUT)を選択するための操作情報が入力される。これらの操作情報は、画像処理部100に送られる。   The operation unit 300 is input with operation information for setting the display mode such as single display and tiling display, setting the position of each projector at the time of tiling display, and the size and position of the overlapping area by the user. The The image processing unit 100 includes a plurality of unevenness correction processing modes, and the operation unit 300 has operation information for selecting an unevenness correction lookup table (LUT) used in the unevenness correction processing. Entered. These pieces of operation information are sent to the image processing unit 100.

図2に、図1の画像処理部100の構成例のブロック図を示す。図2では、説明の便宜上、図1の画像信号供給装置20、むら測定装置30、画像形成部200、操作部300、及び第2のプロジェクターPJ2も合わせて図示している。   FIG. 2 is a block diagram showing a configuration example of the image processing unit 100 shown in FIG. 2, the image signal supply device 20, the unevenness measurement device 30, the image forming unit 200, the operation unit 300, and the second projector PJ2 of FIG. 1 are also illustrated for convenience of explanation.

画像処理部100は、画像分割処理部110と、むら補正LUT選択部120と、むら補正目標値演算部130と、むら補正LUT生成部140と、通知処理部150とを備えている。また、画像処理部100は、第1のプロジェクターPJ1の画像形成部200に対応して、第1のむら補正LUT記憶部(第1のむら補正値記憶部)160と、第1のむら補正処理部162とを備えている。   The image processing unit 100 includes an image division processing unit 110, an unevenness correction LUT selection unit 120, an unevenness correction target value calculation unit 130, an unevenness correction LUT generation unit 140, and a notification processing unit 150. Further, the image processing unit 100 corresponds to the image forming unit 200 of the first projector PJ1, and includes a first unevenness correction LUT storage unit (first unevenness correction value storage unit) 160, a first unevenness correction processing unit 162, and the like. It has.

画像分割処理部110は、操作部300により設定された重畳領域の設定内容に従って、画像信号供給装置20からの画像信号に対して画像の分割処理を行う。分割処理後の画像信号は、第1のむら補正処理部162と、第2のプロジェクターPJ2に対して出力される。
むら補正LUT選択部120は、第1のむら補正LUT記憶部160に記憶される複数のむら補正LUTの1つを選択する。むら補正LUT選択部120は、画像信号供給装置20からの画像信号の種別(単体表示又はタイリング表示)やプロジェクターの配置に応じてむら補正LUTを選択したり、操作部300からの操作情報に基づいてむら補正LUTを選択したりする。また、むら補正LUT選択部120は、画像信号供給装置20からの画像信号自体に含まれる情報や、入力画像の解析結果に基づいて、むら補正LUTを選択するようにしてもよい。
The image division processing unit 110 performs image division processing on the image signal from the image signal supply device 20 in accordance with the setting content of the overlapping area set by the operation unit 300. The image signal after the division process is output to the first unevenness correction processing unit 162 and the second projector PJ2.
The unevenness correction LUT selection unit 120 selects one of a plurality of unevenness correction LUTs stored in the first unevenness correction LUT storage unit 160. The unevenness correction LUT selection unit 120 selects an unevenness correction LUT according to the type (single display or tiling display) of the image signal from the image signal supply device 20 and the arrangement of the projector, or the operation information from the operation unit 300. Based on this, the unevenness correction LUT is selected. In addition, the unevenness correction LUT selection unit 120 may select the unevenness correction LUT based on information included in the image signal itself from the image signal supply device 20 or an analysis result of the input image.

むら補正目標値演算部130は、むら測定装置30により測定された各プロジェクターの投射画像のむら測定値に基づいて、画像信号のむら補正処理の目標値を演算する。このとき、むら補正目標値演算部130は、操作部300により設定された重畳領域の設定内容に従って、重畳領域と第1の投射画像IMG1の非重畳領域の少なくとも一部におけるむら補正目標値を演算する。
むら補正LUT生成部140は、むら補正目標値演算部130により演算されたむら補正目標値に基づいて、第1のプロジェクターPJ1においてむら補正処理を行うためのむら補正値をテーブル化したむら補正LUTを生成する。
第1のむら補正LUT記憶部160は、むら補正LUT生成部140によって生成されたむら補正LUTを記憶する。このような第1のむら補正LUT記憶部160は、SRAM(Static Random Access Memory)等のメモリーと、該メモリーに対する書き込み制御及び読み出し制御を行う制御部とにより構成される。
The unevenness correction target value calculation unit 130 calculates the target value of the unevenness correction processing of the image signal based on the unevenness measurement value of the projection image of each projector measured by the unevenness measurement device 30. At this time, the nonuniformity correction target value calculation unit 130 calculates the nonuniformity correction target value in at least a part of the superimposition region and the non-superimposition region of the first projection image IMG1 according to the setting content of the superposition region set by the operation unit 300. To do.
The unevenness correction LUT generation unit 140 generates an unevenness correction LUT in which unevenness correction values for performing unevenness correction processing in the first projector PJ1 are tabulated based on the unevenness correction target value calculated by the unevenness correction target value calculation unit 130. .
The first unevenness correction LUT storage unit 160 stores the unevenness correction LUT generated by the unevenness correction LUT generation unit 140. Such a first unevenness correction LUT storage unit 160 includes a memory such as an SRAM (Static Random Access Memory) and a control unit that performs write control and read control on the memory.

通知処理部150は、むら補正目標値演算部130における演算結果に基づき、所与の通知処理を行う。例えば、むら補正目標値演算部130における演算処理において第1のむら補正処理を行ってもタイリング画像の画質を向上できないと判断されるとき、通知処理部150は、タイリング画像の表示条件の変更を促す画面を表示する処理を行う。具体的には、通知処理部150は、重畳領域の再設定を促す画面をスクリーンSCRに表示する処理を行う。例えば第1のむら補正処理後の輝度又は色差の変化が所与の閾値以上であるとき、通知処理部150は、タイリング画像の画質を向上できないと判断することができる。   The notification processing unit 150 performs a given notification process based on the calculation result in the unevenness correction target value calculation unit 130. For example, when it is determined that the image quality of the tiling image cannot be improved even if the first unevenness correction process is performed in the calculation process in the unevenness correction target value calculation unit 130, the notification processing unit 150 changes the display condition of the tiling image. A process for displaying a screen prompting the user is performed. Specifically, the notification processing unit 150 performs processing for displaying on the screen SCR a screen that prompts resetting of the overlapping area. For example, when the change in luminance or color difference after the first unevenness correction processing is equal to or greater than a given threshold, the notification processing unit 150 can determine that the image quality of the tiling image cannot be improved.

第1のむら補正処理部162は、第1のむら補正LUT記憶部160に記憶されたむら補正LUTを用いてむら補正処理を行う。第1のむら補正LUT記憶部160には、記憶容量を削減するため、画面の縦方向×画面の横方向×階調方向の3軸における所与の数の格子点において、対応するむら補正値がLUTとして記憶される。そのため、第1のむら補正処理部162は、格子点におけるむら補正値から線形補間や曲線補間等の公知の補間演算により格子点間のむら補正値を求め、該むら補正値を用いてむら補正処理後の画像信号を得る。   The first unevenness correction processing unit 162 performs unevenness correction processing using the unevenness correction LUT stored in the first unevenness correction LUT storage unit 160. In order to reduce the storage capacity, the first unevenness correction LUT storage unit 160 has corresponding unevenness correction values at a given number of lattice points in the three axes of the vertical direction of the screen × the horizontal direction of the screen × the gradation direction. Stored as LUT. Therefore, the first unevenness correction processing unit 162 obtains the unevenness correction value between the lattice points from the unevenness correction value at the lattice point by a known interpolation operation such as linear interpolation or curve interpolation, and uses the unevenness correction value to perform the unevenness correction processing. The image signal is obtained.

〔むら補正処理〕
次に、図2の画像処理部100によるむら補正処理について、詳細に説明する。
図3に、図2の画像処理部100の処理例のフロー図を示す。
まず、画像処理部100は、第1のむら補正LUT記憶部160に記憶される複数のむら補正LUTの中から、むら補正LUT選択部120により1つのむら補正LUTを選択する(ステップS10)。このとき、むら補正LUT選択部120は、画像信号供給装置20からの画像信号又は操作部300からの操作情報に基づいて、むら補正LUTを選択する。第1のむら補正LUT記憶部160には、単体表示やタイリング表示、プロジェクターの配置に応じた複数のむら補正LUTが記憶されている。
[Unevenness correction processing]
Next, the unevenness correction processing by the image processing unit 100 in FIG. 2 will be described in detail.
FIG. 3 shows a flowchart of a processing example of the image processing unit 100 in FIG.
First, the image processing unit 100 selects one unevenness correction LUT by the unevenness correction LUT selection unit 120 from among the plurality of unevenness correction LUTs stored in the first unevenness correction LUT storage unit 160 (step S10). At this time, the unevenness correction LUT selection unit 120 selects the unevenness correction LUT based on the image signal from the image signal supply device 20 or the operation information from the operation unit 300. The first unevenness correction LUT storage unit 160 stores a single display, tiling display, and a plurality of unevenness correction LUTs according to the arrangement of the projectors.

画像処理部100は、画像分割処理部110において画像信号供給装置20からの画像信号の入力を監視しており(ステップS12:N)、画像信号が入力されたとき(ステップS12:Y)、画像の分割処理を行う。画像分割処理部110は、操作部300により設定された重畳領域の設定内容に従って画像の分割処理を行う。分割処理後の画像のうち第1のプロジェクターPJ1より投射される画像の画像信号は、第1のむら補正処理部162に出力され、第2のプロジェクターPJ2により投射される画像の画像信号は、第2のプロジェクターPJ2に出力される。   The image processing unit 100 monitors the input of the image signal from the image signal supply device 20 in the image division processing unit 110 (step S12: N), and when the image signal is input (step S12: Y), the image processing unit 100 monitors the image. The division process is performed. The image division processing unit 110 performs image division processing according to the setting content of the overlapping area set by the operation unit 300. The image signal of the image projected from the first projector PJ1 among the images after the division processing is output to the first unevenness correction processing unit 162, and the image signal of the image projected by the second projector PJ2 is the second image signal. Is output to the projector PJ2.

次に、画像処理部100は、第1のむら補正処理部162において、第1のむら補正LUT記憶部160からむら補正値を読み出す(ステップS14)。そして、画像分割処理部110からの画像信号に対して、第1のむら補正処理部162は、むら補正LUTに記憶される格子点におけるむら補正値から、線形補間や曲線補間等の公知の補間演算により格子点間のむら補正値を演算する(ステップS16)。その後、第1のむら補正処理部162は、むら補正LUTに記憶される格子点におけるむら補正値、又はステップS16で求めた格子点間のむら補正値を用いて、画像信号に対してむら補正処理を行う(ステップS18)。
画像信号の入力が終了したとき(ステップS20:Y)、画像処理部100は、一連の処理を終了し(エンド)、画像信号の入力が終了しないとき(ステップS20:N)、画像処理部100は、ステップS12に戻る。
Next, in the first unevenness correction processing unit 162, the image processing unit 100 reads the unevenness correction value from the first unevenness correction LUT storage unit 160 (step S14). Then, for the image signal from the image division processing unit 110, the first unevenness correction processing unit 162 calculates a known interpolation operation such as linear interpolation or curve interpolation from the unevenness correction value at the lattice point stored in the unevenness correction LUT. Thus, the unevenness correction value between the lattice points is calculated (step S16). Thereafter, the first unevenness correction processing unit 162 performs unevenness correction processing on the image signal using the unevenness correction value at the lattice points stored in the unevenness correction LUT or the unevenness correction value between the lattice points obtained in step S16. This is performed (step S18).
When the input of the image signal is finished (step S20: Y), the image processing unit 100 finishes a series of processing (end), and when the input of the image signal is not finished (step S20: N), the image processing unit 100. Returns to step S12.

上記のむら補正処理に用いられる補正LUTは、次のような手順で生成され、第1のむら補正LUT記憶部160に保存される。
図4に、むら補正LUTの準備処理の一例のフロー図を示す。図4に示すむら補正LUTの準備処理は、第1のむら補正処理部162によるむら補正処理に先立って行われる。
まず、画像処理部100は、ユーザーに対して、操作部300を介した重畳領域の指定を促す処理(例えば画面表示)を行う。ユーザーが操作部300を操作して各投射画像における重畳領域の範囲(例えば、各投射画像の25%)を指定すると、画像処理部100は、指定された重畳領域に対応する操作情報を受け付ける(ステップS30)。その後、画像処理部100は、指定された重畳領域に基づいて、該重畳領域をガイドとしてスクリーンSCR上に表示する処理を行って、ユーザーが、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の設置位置を調整できるようにすることが望ましい。このとき、画像処理部100は、指定された重畳領域に応じて、スクリーンSCR上に重畳領域の色を変えて表示したり、境界を線で表示したりしてもよい。
The correction LUT used for the unevenness correction process is generated by the following procedure and stored in the first unevenness correction LUT storage unit 160.
FIG. 4 shows a flowchart of an example of the unevenness correction LUT preparation process. The unevenness correction LUT preparation process shown in FIG. 4 is performed prior to the unevenness correction processing by the first unevenness correction processing unit 162.
First, the image processing unit 100 performs processing (for example, screen display) that prompts the user to specify a superimposition region via the operation unit 300. When the user operates the operation unit 300 to specify a range of a superimposition region (for example, 25% of each projection image) in each projection image, the image processing unit 100 receives operation information corresponding to the designated superimposition region ( Step S30). Thereafter, the image processing unit 100 performs a process of displaying the superimposed area on the screen SCR as a guide based on the designated superimposed area, and the user installs the first projector PJ1 and the second projector PJ2. It is desirable to be able to adjust the position. At this time, the image processing unit 100 may change the color of the superimposed area on the screen SCR according to the designated superimposed area, or may display the boundary with a line.

次に、画像処理部100は、第1のむら補正処理部162によるむら補正処理をオフに設定する(ステップS32)。これにより、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の各々が有する色特性を測定することができる。
その後、画像処理部100は、むら補正LUT生成部140等においてむら補正LUT作成処理を行う(ステップS34)。ステップS34では、むら測定装置30により測定した第1のプロジェクターPJ1及び第2のプロジェクターPJ2のむら測定値に基づいてむら補正目標値を演算し、該むら補正目標値に基づいてむら補正LUTが生成される。そして、このむら補正LUTが、第1のむら補正LUT記憶部160に保存される。
Next, the image processing unit 100 sets the unevenness correction processing by the first unevenness correction processing unit 162 to OFF (step S32). Thereby, the color characteristics of each of the first projector PJ1 and the second projector PJ2 can be measured.
Thereafter, the image processing unit 100 performs unevenness correction LUT creation processing in the unevenness correction LUT generation unit 140 and the like (step S34). In step S34, the unevenness correction target value is calculated based on the unevenness measurement values of the first projector PJ1 and the second projector PJ2 measured by the unevenness measurement device 30, and the unevenness correction LUT is generated based on the unevenness correction target value. The Then, the unevenness correction LUT is stored in the first unevenness correction LUT storage unit 160.

最後に、画像処理部100は、第1のむら補正処理部162によるむら補正処理をオンに設定し(ステップS36)、一連の処理を終了する(エンド)。これ以降、画像処理部100は、ステップS34において第1のむら補正LUT記憶部160に記憶されたむら補正LUTを用いてむら補正処理を開始することができる。   Finally, the image processing unit 100 turns on the unevenness correction processing by the first unevenness correction processing unit 162 (step S36), and ends the series of processing (end). Thereafter, the image processing unit 100 can start the unevenness correction process using the unevenness correction LUT stored in the first unevenness correction LUT storage unit 160 in step S34.

図5に、むら補正LUT作成処理の一例のフロー図を示す。図5に示すむら補正LUT作成処理は、図4のステップS34において行われる。
図6に、むら特性測定処理の一例のフロー図を示す。図6に示すむら特性測定処理は、図5のステップS40において行われる。
図7に、むら補正LUT生成処理の一例のフロー図を示す。図7に示すむら補正LUT生成処理は、図5のステップS44において行われる。
FIG. 5 shows a flowchart of an example of the unevenness correction LUT creation process. The unevenness correction LUT creation process shown in FIG. 5 is performed in step S34 of FIG.
FIG. 6 shows a flowchart of an example of the unevenness characteristic measurement process. The unevenness characteristic measurement process shown in FIG. 6 is performed in step S40 of FIG.
FIG. 7 shows a flowchart of an example of the unevenness correction LUT generation process. The unevenness correction LUT generation process shown in FIG. 7 is performed in step S44 of FIG.

図5に示すむら補正LUT作成処理において、画像処理部100は、むら測定装置30を制御し、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の各々のRGBの各階調の色特性値(XYZ値)をむら測定値として取得する(ステップS40)。   In the unevenness correction LUT creation process illustrated in FIG. 5, the image processing unit 100 controls the unevenness measuring device 30 to determine the color characteristic values (XYZ values) of the respective RGB gradations of the first projector PJ1 and the second projector PJ2. ) Is obtained as an uneven measurement value (step S40).

ステップS40では、図6に示すように、画像処理部100が、画像形成部200によりむら補正処理用の測定パターンを表示する。この測定パターンは、WRGB(グレイ赤緑青)の全画面均一のべた画像を用いる。画像処理部100は、べた画像の測定パターンの表示を順次切り替える(ステップS50)。グレイのべた画像としては、例えばW255(白、数値は階調値),W224,W192,W160,W128,W96,W64,W32,W0(黒)を用いる。各階調のべた画像としては、例えばR255(赤),R224,…,R64,R32,G255(緑),G224,…,G64,G32,B255(青),B224,…,B64,B32を用いる。   In step S40, as shown in FIG. 6, the image processing unit 100 causes the image forming unit 200 to display a measurement pattern for unevenness correction processing. This measurement pattern uses a solid image of WRGB (gray, red, green, and blue) that is uniform over the entire screen. The image processing unit 100 sequentially switches the display of the measurement pattern of the solid image (step S50). For example, W255 (white, numerical values are gradation values), W224, W192, W160, W128, W96, W64, W32, and W0 (black) are used as the gray solid image. For example, R255 (red), R224,..., R64, R32, G255 (green), G224,..., G64, G32, B255 (blue), B224,.

次に、画像処理部100は、むら測定装置30を制御して、スクリーンSCRに表示された測定パターンの測定(撮影)を行う(ステップS52)。むら測定装置30は、各プロジェクターの投射画像がすべて撮影画面内に入るように設置し、露出やピントは階調つぶれがなく、むらの状態を正しく認識できるようになっていればよい。このとき、測定パターンの撮影データにずれが生じないように、むら測定装置30は、三脚に設置されることが望ましい。画像処理部100は、1つの測定パターン(階調)につき1回の撮影を行い、その撮影データをむら測定装置として取得する。
全測定が終了したとき(ステップS54:Y)、画像処理部100は、一連のむら特性測定処理を終了し(エンド)、全測定が終了しないとき(ステップS54:N)、ステップS50に戻る。
Next, the image processing unit 100 controls the unevenness measuring device 30 to measure (capture) the measurement pattern displayed on the screen SCR (step S52). The unevenness measuring device 30 may be installed so that all the projected images of the respective projectors are within the shooting screen, and the exposure and focus are not crushed and the unevenness state can be recognized correctly. At this time, it is desirable that the unevenness measuring device 30 is installed on a tripod so that the photographing data of the measurement pattern does not shift. The image processing unit 100 performs one imaging for one measurement pattern (gradation), and acquires the imaging data as an unevenness measuring device.
When all measurements are finished (step S54: Y), the image processing unit 100 finishes a series of uneven characteristic measurement processes (end), and when all measurements are not finished (step S54: N), the process returns to step S50.

図5のステップS40においてむら測定が行われると、画像処理部100は、むら補正目標値演算部130においてむら補正目標値を演算する(ステップS42、むら補正目標値演算ステップ)。むら補正目標値演算部130は、sRGB等の目標色空間の色度を考慮した上で、プロジェクター毎の各階調のむら測定値から、タイリング状態で用いる各プロジェクターの白色やグレイ軸(白〜黒)の目標XYZ値を定める。ステップS42の詳細については、後述する。   When the unevenness measurement is performed in step S40 of FIG. 5, the image processing unit 100 calculates the unevenness correction target value in the unevenness correction target value calculation unit 130 (step S42, unevenness correction target value calculation step). The unevenness correction target value calculation unit 130 considers the chromaticity of the target color space such as sRGB, and determines the whiteness or gray axis (white to black) of each projector used in the tiling state from the unevenness measurement value of each gradation for each projector. ) Is determined. Details of step S42 will be described later.

続いて、画像処理部100は、むら補正LUT生成部140において、むら補正LUTを生成する(ステップS44、むら補正LUT生成ステップ)。むら補正LUT生成部140は、プロジェクター毎のむら測定値を用いて、目標XYZ値を出力するための入力RGB値を算出することで、LUTを生成する。   Subsequently, in the unevenness correction LUT generation unit 140, the image processing unit 100 generates an unevenness correction LUT (step S44, unevenness correction LUT generation step). The unevenness correction LUT generation unit 140 generates an LUT by calculating an input RGB value for outputting a target XYZ value using the unevenness measurement value for each projector.

ステップS44では、図7に示すように、むら補正LUT生成部140は、むら補正LUTの各格子点入力値に対応する色目標値を演算する(ステップS60)。次に、むら補正LUT生成部140は、演算された色目標値を出力可能な入力値を、測定されたプロジェクターの色特性値から探索する(ステップS62)。むら補正LUT生成部140は、ステップS62において探索された結果をLUT値として保存する(ステップS64)。その後、むら補正LUTの全格子点についてLUT値の探索が終了したとき(ステップS66:Y)、むら補正LUT生成部140は、一連のむら補正LUT生成処理を終了し(エンド)、探索が終了していないとき(ステップS66:N)、ステップS60に戻る。   In step S44, as shown in FIG. 7, the unevenness correction LUT generation unit 140 calculates a color target value corresponding to each grid point input value of the unevenness correction LUT (step S60). Next, the unevenness correction LUT generation unit 140 searches for an input value that can output the calculated color target value from the measured color characteristic values of the projector (step S62). The unevenness correction LUT generation unit 140 stores the result searched in step S62 as an LUT value (step S64). Thereafter, when the search for LUT values for all grid points of the unevenness correction LUT is completed (step S66: Y), the unevenness correction LUT generation unit 140 ends a series of unevenness correction LUT generation processing (end), and the search ends. If not (Step S66: N), the process returns to Step S60.

図5のステップS44においてむら補正LUTが生成されると、画像処理部100は、生成されたむら補正LUTを第1のむら補正LUT記憶部160に保存し(ステップS46)、一連のむら補正LUT作成処理を終了する(エンド)。   When the unevenness correction LUT is generated in step S44 of FIG. 5, the image processing unit 100 stores the generated unevenness correction LUT in the first unevenness correction LUT storage unit 160 (step S46), and performs a series of unevenness correction LUT creation processing. End (end).

次に、図5のステップS42において行われるむら補正目標値演算処理について詳細に説明する。
図8に、図5のステップS42におけるむら補正目標値演算処理の一例のフロー図を示す。
まず、むら補正目標値演算部130は、目標色空間及び各プロジェクターの色特性値を取得する(ステップS70)。そして、むら補正目標値演算部130は、各プロジェクター(各プロジェクターの投射画像)の色特性値に基づいて、目標色空間における各プロジェクターの白色目標値を演算する(ステップS72)。その後、むら補正目標値演算部130は、ステップS72で演算した各プロジェクターの白色目標値を用いて、各プロジェクターの中間調目標値を演算し(ステップS74)、一連の処理を終了する(エンド)。
Next, the unevenness correction target value calculation process performed in step S42 of FIG. 5 will be described in detail.
FIG. 8 shows a flowchart of an example of the unevenness correction target value calculation process in step S42 of FIG.
First, the unevenness correction target value calculation unit 130 acquires the target color space and the color characteristic value of each projector (step S70). Then, the unevenness correction target value calculation unit 130 calculates the white target value of each projector in the target color space based on the color characteristic value of each projector (projected image of each projector) (step S72). Thereafter, the unevenness correction target value calculation unit 130 calculates the halftone target value of each projector using the white target value of each projector calculated in step S72 (step S74), and ends a series of processing (end). .

以下、図8のむら補正目標値演算処理について具体的に説明する。
図9に、第1の実施形態におけるタイリング表示される第1の投射画像IMG1及び第2の投射画像IMG2の説明図を示す。図9は、タイリング表示された白色べた画像における水平方向の輝度の変化の一例を表したものである。
図9では、第1のプロジェクターPJ1による第1の投射画像IMG1と第2のプロジェクターPJ2による第2の投射画像IMG2とが、重畳領域を設けて隣接して水平方向に配置される。このとき、第1の投射画像IMG1の輝度のピーク位置をC1、第2の投射画像IMG2の輝度のピーク位置をC2、重畳領域の境界位置をB1,B2とする。また、ピーク位置C1における輝度をYc1、ピーク位置C2における輝度をYc2、境界位置B1における輝度をYb1、境界位置B2における輝度をYb2とする。ここで、ピーク位置C1,C2、境界位置B1,B2について、Yc1>Yb1<Yb2<Yc2とする。
Hereinafter, the unevenness correction target value calculation process of FIG. 8 will be described in detail.
FIG. 9 is an explanatory diagram of the first projection image IMG1 and the second projection image IMG2 that are tiling-displayed in the first embodiment. FIG. 9 shows an example of a change in luminance in the horizontal direction in a white solid image displayed in tiling.
In FIG. 9, the first projection image IMG1 from the first projector PJ1 and the second projection image IMG2 from the second projector PJ2 are arranged in the horizontal direction adjacent to each other with an overlapping region. At this time, the luminance peak position of the first projection image IMG1 is C1, the luminance peak position of the second projection image IMG2 is C2, and the boundary positions of the overlapping regions are B1 and B2. Further, the luminance at the peak position C1 is Yc1, the luminance at the peak position C2 is Yc2, the luminance at the boundary position B1 is Yb1, and the luminance at the boundary position B2 is Yb2. Here, Yc1> Yb1 <Yb2 <Yc2 is set for the peak positions C1, C2 and the boundary positions B1, B2.

図10に、図9に示す第1のプロジェクターPJ1及び第2のプロジェクターPJ2の色域の一例を示す。図10は、均等色空間(具体的には、L)において、第2のプロジェクターPJ2による白色の輝度を基準白色輝度とし、第1のプロジェクターPJ1の色域も同じ基準白色輝度を基準としている。
図10では、第1のプロジェクターPJ1について、ピーク位置C1におけるピーク色域CP1及び重畳領域の境界位置(境界位置B1を含む)における境界色域CB1を表している。また、図10では、第2のプロジェクターPJ2について、ピーク位置C2におけるピーク色域CP2及び重畳領域の境界位置(境界位置B2を含む)における境界色域CB2を表している。図10において、ピーク位置C1における明度をLc1、ピーク位置C2における明度をLc2、境界位置B1における明度をLb1、境界位置B2における明度をLb2とする。
FIG. 10 shows an example of the color gamuts of the first projector PJ1 and the second projector PJ2 shown in FIG. FIG. 10 shows the white brightness by the second projector PJ2 as the reference white brightness in the uniform color space (specifically, L * u * v * ), and the color gamut of the first projector PJ1 is also the same reference white brightness. Is based on.
In FIG. 10, for the first projector PJ1, the peak color gamut CP1 at the peak position C1 and the boundary color gamut CB1 at the boundary position (including the boundary position B1) of the overlapping region are shown. In FIG. 10, for the second projector PJ2, the peak color gamut CP2 at the peak position C2 and the boundary color gamut CB2 at the boundary position (including the boundary position B2) of the overlapping region are shown. In FIG. 10, the lightness at the peak position C1 is L * c1, the lightness at the peak position C2 is L * c2, the lightness at the boundary position B1 is L * b1, and the lightness at the boundary position B2 is L * b2.

ここで、ピーク位置C1,C2、境界位置B1,B2についてYc1>Yb1<Yb2<Yc2とすると、従来のエッジブレンド処理を行った後でもこの大小関係が維持される。そのため、図9の境界位置B1,B2の間に明るさの谷が認識されてしまい、従来の色むら補正を行っても、基本的に画面内の輝度分布を継承したまま色むらを補正することになり、色むらは除去されても輝度むらが残ることになる。このような、明るさの谷間は、却って視覚的なむら感が酷くなることがある。   Here, assuming that Yc1> Yb1 <Yb2 <Yc2 with respect to the peak positions C1, C2 and the boundary positions B1, B2, this magnitude relationship is maintained even after performing the conventional edge blending process. Therefore, a valley of brightness is recognized between the boundary positions B1 and B2 in FIG. 9, and even when the conventional color unevenness correction is performed, the color unevenness is basically corrected while inheriting the luminance distribution in the screen. In other words, even if the color unevenness is removed, the brightness unevenness remains. In such a valley of brightness, the visual unevenness may be severe.

そこで、第1の実施形態では、次のようにむら補正目標値を求めることで、むら補正処理後のタイリング画像の明るさや色の差の違和感が少なく、画質を向上させる。   Therefore, in the first embodiment, by obtaining the unevenness correction target value as follows, there is little discomfort in the brightness and color difference of the tiling image after unevenness correction processing, and the image quality is improved.

図11に、第1の実施形態におけるむら補正処理に関する第1の説明図を示す。図11は、タイリング表示された第1の投射画像IMG1及び第2の投射画像IMG2における水平方向の輝度の変化の一例を表したものである。図11において、図9と同様の部分には同一符号を付し、適宜説明を省略する。なお、図11において、境界位置B1におけるむら補正処理後の輝度をYb1´として表している。
第1に、第1の実施形態におけるむら補正処理では、境界位置B1(第1の画素位置)における輝度Yb1及び境界位置B2(第2の画素位置)における輝度Yb2のうち、低い方の輝度に対応するプロジェクターをむら補正処理対象とする。図11に示す場合、Yb1<Yb2であるため、第1の実施形態では、輝度Yb1に対応する第1のプロジェクターPJ1を、むら補正処理対象とする。これにより、第1のプロジェクターPJ1の境界位置B1における輝度を上げることで、境界位置B1,B2における明るさの谷を目立たなくすることができる。
FIG. 11 shows a first explanatory diagram related to the unevenness correction processing in the first embodiment. FIG. 11 illustrates an example of a change in luminance in the horizontal direction in the first projection image IMG1 and the second projection image IMG2 that are tiling-displayed. In FIG. 11, the same parts as those in FIG. In FIG. 11, the luminance after the unevenness correction processing at the boundary position B1 is represented as Yb1 ′.
First, in the unevenness correction processing according to the first embodiment, the luminance Yb1 at the boundary position B1 (first pixel position) and the luminance Yb2 at the boundary position B2 (second pixel position) are reduced to the lower luminance. The corresponding projector is the target of unevenness correction processing. In the case illustrated in FIG. 11, since Yb1 <Yb2, in the first embodiment, the first projector PJ1 corresponding to the luminance Yb1 is the target of unevenness correction processing. Thus, by increasing the luminance at the boundary position B1 of the first projector PJ1, it is possible to make the valley of brightness at the boundary positions B1 and B2 inconspicuous.

第2に、第1の実施形態におけるむら補正処理では、修正対象のプロジェクターによる投射画像において、非修正対象のプロジェクターによる投射画像の境界位置における輝度と等しい画素位置を検出する。図11に示す場合、第1のプロジェクターPJ1による第1の投射画像IMG1において、境界位置B2における輝度Yb2と等しい輝度を有する画素位置A1(第3の画素位置)を検出する。その後、第1の投射画像IMG1において、画素位置A1から境界端(第1の投射画像端)にかけてむら補正処理を行う。即ち、第1の実施形態では、第1の投射画像IMG1の非重畳領域及び重畳領域において、境界位置B2における輝度Yb2に基づいてむら補正処理が行われる。このとき、画素位置A1から境界端にかけてむら補正目標値をグレイ軸上に限定せず、明るさの変化が小さくなるようなむら目標値を算出する。   Second, in the unevenness correction processing in the first embodiment, a pixel position equal to the luminance at the boundary position of the projection image by the non-correction target projector is detected in the projection image by the correction target projector. In the case shown in FIG. 11, in the first projection image IMG1 by the first projector PJ1, a pixel position A1 (third pixel position) having a luminance equal to the luminance Yb2 at the boundary position B2 is detected. Thereafter, in the first projection image IMG1, unevenness correction processing is performed from the pixel position A1 to the boundary end (first projection image end). That is, in the first embodiment, unevenness correction processing is performed based on the luminance Yb2 at the boundary position B2 in the non-overlapping area and the overlapping area of the first projection image IMG1. At this time, the unevenness correction target value is not limited to the gray axis from the pixel position A1 to the boundary edge, and the unevenness target value is calculated so that the change in brightness becomes small.

第3に、第1の実施形態におけるむら補正処理では、画素位置A1との色差ΔEが最小となるように、画素位置A1から境界端にかけてむら補正処理を行う。
図12に、第1の実施形態におけるむら補正処理に関する第2の説明図を示す。図12は、図10におけるグレイ軸付近の拡大図を表す。図12において、画素位置A1における明度をLa1、境界位置B1におけるむら補正処理後の明度をLb1´と表している。
Third, in the unevenness correction process in the first embodiment, the unevenness correction process is performed from the pixel position A1 to the boundary edge so that the color difference ΔE from the pixel position A1 is minimized.
FIG. 12 shows a second explanatory diagram relating to the unevenness correction processing in the first embodiment. FIG. 12 shows an enlarged view around the gray axis in FIG. In FIG. 12, the lightness at the pixel position A1 is represented as L * a1, and the lightness after the unevenness correction processing at the boundary position B1 is represented as L * b1 ′.

即ち、第1の実施形態におけるむら補正処理では、グレイ軸上における画素位置A1の明度と第1のプロジェクターPJ1の境界色域CB1との距離が最小となるように、境界位置B1における明度Lb1´を定める。従来の方法では画素位置A1の輝度Ya1(=Yb2)からYb1まで輝度が低下し、色差でみるとΔE=ΔLの変化が生じている。目標グレイ軸が色域外郭の角度が急峻なところと合致すると、色差変化がより大きくなる。第1の実施形態では、そのような場合には多少色度が変化しても色差がより小さい方向(Yb1´,Lb1´)にグレイ軸を変化させることで、明るさ低下と色の変化のバランスを取って、人間の視覚的に好ましい変化となるようにする。ΔEが最小という条件でなくても、明度を除いた色差成分であるΔEuに制限を設けて、その制限内でΔEができるだけ小さくなるようにしてもよい。 That is, in the unevenness correction processing in the first embodiment, the lightness L * at the boundary position B1 so that the distance between the lightness at the pixel position A1 on the gray axis and the boundary color gamut CB1 of the first projector PJ1 is minimized . b1 'is determined. In the conventional method, the luminance decreases from the luminance Ya1 (= Yb2) to Yb1 at the pixel position A1, and a change of ΔE = ΔL * occurs in terms of the color difference. When the target gray axis matches the point where the angle of the color gamut outline is steep, the color difference change becomes larger. In the first embodiment, in such a case, the gray axis is changed in a direction (Yb1 ′, L * b1 ′) in which the color difference is smaller even if the chromaticity changes to some extent, thereby reducing brightness and color. Balance changes so that human visual changes are favorable. Even if ΔE is not a minimum condition, a limit may be provided for ΔEu * v * , which is a color difference component excluding lightness, and ΔE may be as small as possible within the limit.

第4に、第1の実施形態におけるむら補正処理では、上記のように定められた非重畳領域のむら補正目標値に従って、重畳領域も滑らかにブレンドされるように、他方の境界にかけて値が0に収束するようなむら補正目標値を求める(図11を参照)。   Fourth, in the unevenness correction processing in the first embodiment, the value is set to 0 over the other boundary so that the overlapped region is smoothly blended according to the unevenness correction target value of the non-overlapped region determined as described above. An uneven correction target value that converges is obtained (see FIG. 11).

即ち、第1の投射画像IMG1の非重畳領域と重畳領域との境界部に位置する重畳領域の境界位置B1の輝度が、第2の投射画像IMG2の非重畳領域と重畳領域との境界部に位置する重畳領域の境界位置B2の輝度より低いものとする。このとき、第1の実施形態では、第1のむら補正処理部162は、第1の投射画像IMG1の非重畳領域及び重畳領域において、境界位置B2の輝度Yb2に基づいてむらを補正する。
具体的には、第1のむら補正処理部162は、第1の投射画像IMG1において境界位置B2の輝度に対応する輝度を有する画素位置A1(第1の投射画像IMG1内の非重畳領域内の第3の画素位置)から重畳領域内の第1の投射画像端にかけて、むらを補正する。第1のむら補正処理部162は、画素位置A1を基準とした色差が最小となるように、むらを補正することが望ましい。
That is, the luminance at the boundary position B1 of the overlapping region located at the boundary between the non-overlapping region and the overlapping region of the first projection image IMG1 is at the boundary between the non-overlapping region and the overlapping region of the second projection image IMG2. It is assumed that the luminance is lower than the luminance at the boundary position B2 of the superimposed region. At this time, in the first embodiment, the first unevenness correction processing unit 162 corrects unevenness based on the luminance Yb2 of the boundary position B2 in the non-overlapping region and the overlapping region of the first projection image IMG1.
Specifically, the first unevenness correction processing unit 162 has a pixel position A1 having a luminance corresponding to the luminance of the boundary position B2 in the first projection image IMG1 (the first in the non-overlapping region in the first projection image IMG1). 3) to the edge of the first projection image in the overlap region, the unevenness is corrected. It is desirable that the first unevenness correction processing unit 162 corrects unevenness so that the color difference with the pixel position A1 as a reference is minimized.

なお、上記では、境界位置B1,B2が、重畳領域の境界位置であるものとして説明したが、第1の実施形態では、境界位置B1,B2が重畳領域の境界位置に限定されるものではない。
図13に、第1の実施形態における重畳領域の境界位置の説明図を示す。図13は、第1の投射画像IMG1及び第2の投射画像IMG2を、重畳領域を設けてスクリーンSCRに並べて配置した様子を模式的に表す。
上述の境界位置B1は、第1の投射画像IMG1の非重畳領域と重畳領域との境界部AR1における画素位置であればよい。境界部AR1は、第1の投射画像IMG1の非重畳領域と重畳領域との境界とその近傍領域を含む領域である。
同様に、上述の境界位置B2は、第2の投射画像IMG2の非重畳領域と重畳領域との境界部AR2における画素位置であればよい。境界部AR2は、第2の投射画像IMG2の非重畳領域と重畳領域との境界とその近傍領域を含む領域である。
In the above description, the boundary positions B1 and B2 are assumed to be the boundary positions of the overlapping area. However, in the first embodiment, the boundary positions B1 and B2 are not limited to the boundary positions of the overlapping area. .
FIG. 13 is an explanatory diagram of the boundary position of the overlapping region in the first embodiment. FIG. 13 schematically shows a state in which the first projection image IMG1 and the second projection image IMG2 are arranged side by side on the screen SCR with a superimposed region.
The boundary position B1 described above may be a pixel position in the boundary portion AR1 between the non-overlapping area and the overlapping area of the first projection image IMG1. The boundary part AR1 is a region including the boundary between the non-overlapping region and the overlapping region of the first projection image IMG1 and the vicinity region thereof.
Similarly, the above-described boundary position B2 may be a pixel position in the boundary portion AR2 between the non-overlapping area and the overlapping area of the second projection image IMG2. The boundary part AR2 is a region including the boundary between the non-overlapping region and the overlapping region of the second projection image IMG2 and the vicinity thereof.

以上のように白色目標値が求められると、むら補正目標値演算部130は、白色以外の色域の違いについて考慮し、目標グレイ軸を定める。白色点から黒に向かうにつれ、グレイ軸設定の自由度が高くなるため、上述のΔEが徐々に小さくなるようにし、重畳領域の色差が目立たないようにする。   When the white target value is obtained as described above, the unevenness correction target value calculation unit 130 determines the target gray axis in consideration of the difference in the color gamut other than white. As the white point moves toward black, the degree of freedom in setting the gray axis increases, so that the above-described ΔE is gradually decreased so that the color difference in the superimposed region is not noticeable.

図14に、第1の実施形態におけるむら補正処理に関する第3の説明図を示す。図14は、図10におけるグレイ軸付近の拡大図を表す。図14において、図12と同様の部分には同一符号を付し、適宜説明を省略する。なお、図14では、ピーク位置C1、境界位置B1、及び画素位置A1における中間調グレイを、それぞれC1g,B2g,A1gと表している。
むら補正目標値演算部130は、例えば境界位置B1におけるむら補正処理後の白色の明度Lb1´と、境界位置B1における元の黒色の明度Lbbとを、直線若しくは曲線で結び、この2点間を例えば均等に分割して、中間調目標値を定める。
FIG. 14 shows a third explanatory diagram relating to the unevenness correction processing in the first embodiment. FIG. 14 shows an enlarged view around the gray axis in FIG. In FIG. 14, the same parts as those in FIG. In FIG. 14, halftone grays at the peak position C1, the boundary position B1, and the pixel position A1 are represented as C1g, B2g, and A1g, respectively.
The unevenness correction target value calculation unit 130 connects, for example, the white lightness L * b1 ′ after unevenness correction processing at the boundary position B1 and the original black lightness L * bb at the boundary position B1 with a straight line or a curve. For example, the halftone target value is determined by equally dividing the two points.

以上のようにして、第1のプロジェクターPJ1のむら補正目標値を定めると、公知の方法でむら補正LUTを生成することができる。なお、むら補正目標値演算部130において、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の明るさの差が大きいと判断される場合、通知処理部150は、タイリング画像の表示条件の変更を促す画面を表示する処理を行う。例えば、むら補正目標値演算部130は、ΔEを所定の閾値より小さくできないとき、両プロジェクターの明るさの差が大きいと判断することができる。このとき、むら補正目標値演算部130は、例えばむら補正処理後の境界位置B1における輝度Yb1´とピーク位置C1における輝度Yc1とを比較することで、両プロジェクターの明るさの差の大小を判断する。こうすることで、両プロジェクターの明るさの差を大きい状態でむら補正処理を行っても十分な効果が得られない場合、重畳領域の大きさを大きくすることで、むら補正処理の効果を十分得られるようになる。   When the unevenness correction target value of the first projector PJ1 is determined as described above, the unevenness correction LUT can be generated by a known method. When the unevenness correction target value calculation unit 130 determines that the difference in brightness between the first projector PJ1 and the second projector PJ2 is large, the notification processing unit 150 changes the display condition of the tiling image. Performs processing to display a prompt screen. For example, the unevenness correction target value calculation unit 130 can determine that the difference in brightness between the two projectors is large when ΔE cannot be made smaller than a predetermined threshold. At this time, the unevenness correction target value calculation unit 130 compares the brightness Yb1 ′ at the boundary position B1 after unevenness correction processing with the brightness Yc1 at the peak position C1, for example, to determine the magnitude of the brightness difference between the two projectors. To do. By doing this, if the effect of unevenness correction cannot be obtained even when the brightness difference between the two projectors is large, the effect of unevenness correction can be sufficiently increased by increasing the size of the overlapping area. It will be obtained.

以上説明したように、第1の実施形態においては、第1の投射画像IMG1及び第2の投射画像IMG2によりタイリング画像を表示する。このとき、境界位置B1における輝度が低い第1の投射画像IMG1の非重畳領域及び重畳領域において、境界位置B2における輝度Yb2に基づいてむら補正処理を行う。こうすることで、各プロジェクターの表示特性に応じて重畳領域での変化が小さくなるような補正を行い、タイリング表示された画像の画質を向上させることができるようになる。   As described above, in the first embodiment, the tiling image is displayed by the first projection image IMG1 and the second projection image IMG2. At this time, unevenness correction processing is performed based on the luminance Yb2 at the boundary position B2 in the non-overlapping area and the overlapping area of the first projection image IMG1 having low luminance at the boundary position B1. By doing so, it is possible to perform correction so as to reduce the change in the superimposition region in accordance with the display characteristics of each projector, and to improve the image quality of the tiling displayed image.

〔第2の実施形態〕
第1の実施形態では、第1の投射画像IMG1及び第2の投射画像IMG2によりタイリング画像を表示する場合に、第1の投射画像IMG1を投射する第1のプロジェクターPJ1がむら補正処理を行うものとして説明した。しかしながら、本発明に係る実施形態は、これに限定されるものではない。本発明に係る第2の実施形態では、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の両方がむら補正処理を行う。
[Second Embodiment]
In the first embodiment, when the tiling image is displayed by the first projection image IMG1 and the second projection image IMG2, the first projector PJ1 that projects the first projection image IMG1 performs unevenness correction processing. Explained as a thing. However, the embodiment according to the present invention is not limited to this. In the second embodiment according to the present invention, both the first projector PJ1 and the second projector PJ2 perform unevenness correction processing.

図15に、本発明の第2の実施形態におけるマルチプロジェクションシステムの構成例のブロック図を示す。図15では、画像処理装置が、第1のプロジェクター及び第2のプロジェクターに接続されている。図15において、図1と同様の部分には同一符号を付し、適宜説明を省略する。
マルチプロジェクションシステム10aは、第1のプロジェクターPJ1aと、第2のプロジェクターPJ2と、画像信号供給装置20と、むら測定装置30と、画像処理装置100aと、操作部300aとを備えている。第1のプロジェクターPJ1aは、図1の画像形成部200を備えている。画像処理装置100aは、図1の画像処理部100と同様の機能を有する。操作部300aは、図1の操作部300と同様の機能を有する。第2の実施形態では、第1のプロジェクターPJ1aによる第1の投射画像IMG1と第2のプロジェクターPJ2による第2の投射画像IMG2とをスクリーンSCRにおいて重畳領域を設けて並べて表示する。
FIG. 15 is a block diagram showing a configuration example of a multi-projection system according to the second embodiment of the present invention. In FIG. 15, the image processing apparatus is connected to the first projector and the second projector. In FIG. 15, the same parts as those in FIG.
The multi-projection system 10a includes a first projector PJ1a, a second projector PJ2, an image signal supply device 20, an unevenness measuring device 30, an image processing device 100a, and an operation unit 300a. The first projector PJ1a includes the image forming unit 200 shown in FIG. The image processing apparatus 100a has the same function as the image processing unit 100 in FIG. The operation unit 300a has the same function as the operation unit 300 in FIG. In the second embodiment, the first projection image IMG1 from the first projector PJ1a and the second projection image IMG2 from the second projector PJ2 are displayed side by side on the screen SCR with an overlapping region.

図16に、図15の画像処理装置100aの構成例のブロック図を示す。図16では、説明の便宜上、図15の画像信号供給装置20、むら測定装置30、操作部300a、第1のプロジェクターPJ1a及び第2のプロジェクターPJ2も合わせて図示している。図16において、図2と同様の部分には同一符号を付し、適宜説明を省略する。   FIG. 16 is a block diagram showing a configuration example of the image processing apparatus 100a shown in FIG. In FIG. 16, for convenience of explanation, the image signal supply device 20, the unevenness measurement device 30, the operation unit 300a, the first projector PJ1a, and the second projector PJ2 of FIG. 15 are also illustrated. In FIG. 16, the same parts as those in FIG. 2 are denoted by the same reference numerals, and description thereof will be omitted as appropriate.

画像処理装置100aは、画像分割処理部110と、むら補正LUT選択部120aと、むら補正目標値演算部130aと、むら補正LUT生成部140aと、通知処理部150とを備えている。また、画像処理装置100aは、第1のプロジェクターPJ1aに対応して、第1のむら補正LUT記憶部160と、第1のむら補正処理部162とを備えている。更に、画像処理装置100aは、第2のプロジェクターPJ2に対応して、第2のむら補正LUT記憶部(第2のむら補正値記憶部)170と、第2のむら補正処理部172とを備えている。   The image processing apparatus 100a includes an image division processing unit 110, an unevenness correction LUT selection unit 120a, an unevenness correction target value calculation unit 130a, an unevenness correction LUT generation unit 140a, and a notification processing unit 150. The image processing apparatus 100a includes a first unevenness correction LUT storage unit 160 and a first unevenness correction processing unit 162 corresponding to the first projector PJ1a. Furthermore, the image processing apparatus 100a includes a second unevenness correction LUT storage unit (second unevenness correction value storage unit) 170 and a second unevenness correction processing unit 172 corresponding to the second projector PJ2.

画像分割処理部110によって分割された画像に対応した画像信号は、第1のプロジェクターPJ1aと第2のプロジェクターPJ2に対して出力される。
むら補正LUT選択部120aは、画像信号供給装置20からの画像信号の種別やプロジェクターの配置に応じて、第1のむら補正LUT記憶部160に記憶されるむら補正LUTの1つを選択する。また、むら補正LUT選択部120aは、画像信号供給装置20からの画像信号の種別やプロジェクターの配置に応じて、第2のむら補正LUT記憶部170に記憶されるむら補正LUTの1つを選択する。
Image signals corresponding to the images divided by the image division processing unit 110 are output to the first projector PJ1a and the second projector PJ2.
The unevenness correction LUT selection unit 120a selects one of the unevenness correction LUTs stored in the first unevenness correction LUT storage unit 160 according to the type of the image signal from the image signal supply device 20 and the arrangement of the projector. Further, the unevenness correction LUT selection unit 120a selects one of the unevenness correction LUTs stored in the second unevenness correction LUT storage unit 170 in accordance with the type of the image signal from the image signal supply device 20 and the arrangement of the projector. .

むら補正目標値演算部130aは、むら測定装置30により測定された各プロジェクターの投射画像のむら測定値に基づいて、プロジェクター毎に画像信号のむら補正の目標値を演算する。このとき、むら補正目標値演算部130aは、重畳領域の設定内容に従って、重畳領域と第1の投射画像IMG1の非重畳領域の少なくとも一部におけるむら補正目標値を演算する。また、むら補正目標値演算部130aは、重畳領域の設定内容に従って、重畳領域と第2の投射画像IMG2の非重畳領域の少なくとも一部におけるむら補正目標値を演算する。   The unevenness correction target value calculation unit 130 a calculates a target value for unevenness correction of the image signal for each projector based on the unevenness measurement value of the projection image of each projector measured by the unevenness measuring device 30. At this time, the unevenness correction target value calculation unit 130a calculates the unevenness correction target value in at least a part of the overlapping region and the non-overlapping region of the first projection image IMG1 according to the setting content of the overlapping region. Further, the nonuniformity correction target value calculation unit 130a calculates the nonuniformity correction target value in at least a part of the superimposition area and the non-superimposition area of the second projection image IMG2 according to the setting content of the superposition area.

むら補正LUT生成部140aは、むら補正目標値演算部130aにより演算されたむら補正目標値に基づいて、第1のプロジェクターPJ1aにおいてむら補正処理を行うためのむら補正値をテーブル化したむら補正LUTを生成する。また、むら補正LUT生成部140aは、むら補正目標値演算部130aにより演算されたむら補正目標値に基づいて、第2のプロジェクターPJ2においてむら補正処理を行うためのむら補正値をテーブル化したむら補正LUTを生成する。
第2のむら補正LUT記憶部170は、むら補正LUT生成部140aによって生成されたむら補正LUTを記憶する。このような第2のむら補正LUT記憶部170は、第1のむら補正LUT記憶部160と同様に、SRAM等のメモリーと、該メモリーに対する書き込み制御及び読み出し制御を行う制御部とにより構成される。
The unevenness correction LUT generation unit 140a generates an unevenness correction LUT in which unevenness correction values for performing unevenness correction processing in the first projector PJ1a are tabulated based on the unevenness correction target value calculated by the unevenness correction target value calculation unit 130a. . Further, the unevenness correction LUT generation unit 140a generates an unevenness correction LUT in which unevenness correction values for performing unevenness correction processing in the second projector PJ2 are tabulated based on the unevenness correction target value calculated by the unevenness correction target value calculation unit 130a. Generate.
The second unevenness correction LUT storage unit 170 stores the unevenness correction LUT generated by the unevenness correction LUT generation unit 140a. Similar to the first unevenness correction LUT storage unit 160, the second unevenness correction LUT storage unit 170 includes a memory such as an SRAM and a control unit that performs write control and read control on the memory.

第2のむら補正処理部172は、第2のむら補正LUT記憶部170に記憶されたむら補正LUTを用いてむら補正処理を行う。第2のむら補正LUT記憶部170には、記憶容量を削減するため、画面の縦方向×画面の横方向×階調方向の3軸における所与の数の格子点において、対応するむら補正値がLUTとして記憶される。そのため、第2のむら補正処理部172は、格子点におけるむら補正値から線形補間や曲線補間等の公知の補間演算により格子点間のむら補正値を求め、該むら補正値を用いてむら補正処理後の画像信号を得る。   The second unevenness correction processing unit 172 performs unevenness correction processing using the unevenness correction LUT stored in the second unevenness correction LUT storage unit 170. In order to reduce the storage capacity, the second unevenness correction LUT storage unit 170 has corresponding unevenness correction values at a given number of lattice points in the three axes of the vertical direction of the screen × the horizontal direction of the screen × the gradation direction. Stored as LUT. For this reason, the second unevenness correction processing unit 172 obtains an unevenness correction value between lattice points from the unevenness correction value at the lattice point by a known interpolation operation such as linear interpolation or curve interpolation, and uses the unevenness correction value to perform unevenness correction processing. The image signal is obtained.

以上のような画像処理装置100aによるむら補正処理は、各プロジェクターに対する画像信号について第1の実施形態における画像処理部100によるむら補正処理と同様の処理を行う。そのため、第2の実施形態における画像処理装置100aの処理内容については、図示及び説明を省略する。   In the unevenness correction processing by the image processing apparatus 100a as described above, the same processing as the unevenness correction processing by the image processing unit 100 in the first embodiment is performed on the image signal for each projector. Therefore, illustration and description of the processing contents of the image processing apparatus 100a in the second embodiment are omitted.

ここで、周辺減光が大きいプロジェクターの場合、第1の実施形態では、輝度むらが気になる場合がある。この場合、第2の実施形態によれば、プロジェクターのピークが顕著でなくなるように、両方のプロジェクターの境界の目標値を変化させ、タイリング状態での輝度変化がより滑らかになるようにすることができる。   Here, in the case of a projector having a large peripheral light reduction, in the first embodiment, there may be a case where brightness unevenness is a concern. In this case, according to the second embodiment, the target value of the boundary between both projectors is changed so that the projector peak is not noticeable, so that the luminance change in the tiling state becomes smoother. Can do.

図17に、第2の実施形態におけるむら補正処理に関する第1の説明図を示す。図17は、タイリング表示された第1の投射画像IMG1及び第2の投射画像IMG2における水平方向の輝度の変化の一例を表したものである。図17において、図11と同様の部分には同一符号を付し、適宜説明を省略する。
第2の実施形態におけるむら補正処理では、ピーク位置C1,C2からの色差であるΔEができるだけ小さくなるように、重畳領域の境界位置B1,B2における輝度を上げる。その結果、図17では、境界位置B1における輝度がYb1´´、境界位置B2における輝度がYb2´になる。このように、第1の投射画像IMG1及び第2の投射画像IMG2の非重畳領域の少なくとも一部についてもむら補正処理を行うことで、より一層、重畳領域における輝度変化を滑らかにすることができるようになる。
FIG. 17 shows a first explanatory diagram related to the unevenness correction processing in the second embodiment. FIG. 17 shows an example of a change in luminance in the horizontal direction in the first projection image IMG1 and the second projection image IMG2 displayed in tiling. In FIG. 17, the same parts as those in FIG.
In the unevenness correction processing according to the second embodiment, the luminance at the boundary positions B1 and B2 of the overlapping region is increased so that ΔE that is the color difference from the peak positions C1 and C2 is as small as possible. As a result, in FIG. 17, the luminance at the boundary position B1 is Yb1 ″ and the luminance at the boundary position B2 is Yb2 ′. In this way, by performing the unevenness correction process also on at least a part of the non-overlapping area of the first projection image IMG1 and the second projection image IMG2, it is possible to further smooth the luminance change in the overlapping area. It becomes like this.

図18に、第2の実施形態におけるむら補正処理に関する第2の説明図を示す。図18は、図10におけるグレイ軸付近の拡大図を表す。図18において、図12と同様の部分には同一符号を付し、適宜説明を省略する。
第2の実施形態におけるむら補正処理では、ピーク位置C1から境界位置B1までの色差が最小となるように、境界位置B1における明度Lb1´´を定める。そして、ピーク位置C2から境界位置B1までの色差が最小となるように直線を結び、該直線が境界色域CB2と交差する位置を境界位置B2における明度Lb2´と定める。即ち、第2のむら補正処理部172は、第1のむら補正処理部162による補正後の境界位置B1と第2の投射画像IMG2内の輝度のピーク位置C2との色差が最小となるように、重畳領域と第2の投射画像IMG2の非重畳領域についてむらを補正する。
FIG. 18 shows a second explanatory diagram regarding the unevenness correction processing in the second embodiment. FIG. 18 shows an enlarged view around the gray axis in FIG. In FIG. 18, the same parts as those in FIG.
In the unevenness correction processing in the second embodiment, the lightness L * b1 ″ at the boundary position B1 is determined so that the color difference from the peak position C1 to the boundary position B1 is minimized. Then, a straight line is formed so that the color difference from the peak position C2 to the boundary position B1 is minimized, and the position where the straight line intersects the boundary color gamut CB2 is defined as the lightness L * b2 ′ at the boundary position B2. That is, the second unevenness correction processing unit 172 performs the superimposition so that the color difference between the boundary position B1 corrected by the first unevenness correction processing unit 162 and the luminance peak position C2 in the second projection image IMG2 is minimized. The unevenness is corrected for the non-overlapping region between the region and the second projection image IMG2.

第2の実施形態におけるむら補正処理においても、第1の実施形態と同様に、重畳領域も滑らかにブレンドされるようにむら補正目標値を求める。そして、むら補正目標値演算部130aは、第1の実施形態と同様に、中間調目標値を定める。
こうして、各プロジェクターについてむら補正目標値を定めると、むら補正LUT生成部140aは、公知の方法でむら補正LUTを生成する。なお、むら補正目標値演算部130aにおいて、第1のプロジェクターPJ1及び第2のプロジェクターPJ2の明るさの差が大きいと判断される場合、通知処理部150は、タイリング画像の表示条件の変更を促す画面を表示する処理を行ってもよい。
Also in the unevenness correction process in the second embodiment, the unevenness correction target value is obtained so that the overlapping region is smoothly blended as in the first embodiment. Then, the unevenness correction target value calculation unit 130a determines a halftone target value, as in the first embodiment.
Thus, when the unevenness correction target value is determined for each projector, the unevenness correction LUT generation unit 140a generates an unevenness correction LUT by a known method. When the unevenness correction target value calculation unit 130a determines that the brightness difference between the first projector PJ1 and the second projector PJ2 is large, the notification processing unit 150 changes the tiling image display condition. A process for displaying a prompting screen may be performed.

以上説明したように、第2の実施形態によれば、第1の投射画像IMG1及び第2の投射画像IMG2についてむら補正処理を行うようにしたので、第1の実施形態に比べて、より一層、重畳領域における輝度変化を滑らかにすることができるようになる。   As described above, according to the second embodiment, the unevenness correction process is performed on the first projection image IMG1 and the second projection image IMG2, so that it is much more than that of the first embodiment. Thus, the luminance change in the superposed region can be smoothed.

〔第2の実施形態の第1の変形例〕
第2の実施形態では、重畳領域における境界位置B1,B2における輝度を上げてむら補正処理を行っていたが、重畳領域において明るさの谷間が解消されない場合もある。そのため、第2の実施形態の第1の変形例では、重畳領域における明度の変化が単調変化(単調増加又は単調減少)となるように、重畳領域における境界位置B1,B2における輝度(明度)を定める。
[First Modification of Second Embodiment]
In the second embodiment, the unevenness correction process is performed by increasing the luminance at the boundary positions B1 and B2 in the overlapping region. However, the brightness valley may not be eliminated in the overlapping region. Therefore, in the first modification of the second embodiment, the luminance (brightness) at the boundary positions B1 and B2 in the overlapping region is set so that the change in lightness in the overlapping region becomes a monotone change (monotonically increasing or decreasing). Determine.

図19に、第2の実施形態の第1の変形例におけるむら補正処理に関する説明図を示す。図19は、図10におけるグレイ軸付近の拡大図を表す。図19において、図18と同様の部分には同一符号を付し、適宜説明を省略する。
第1の変形例では、ピーク位置C1と同一明度となるように境界位置B1における明度Lb1´´を定める。そして、ピーク位置C2から境界位置B1までの色差が最小となるように直線を結び、該直線が境界色域CB2と交差する位置を境界位置B2における明度Lb2´と定める。即ち、第1のむら補正処理部162及び第2のむら補正処理部172は、輝度のピーク位置C1と輝度のピーク位置C2との間で明度の変化が単調変化となるように、重畳領域及び各投射画像の非重畳領域についてむらを補正する。
FIG. 19 is an explanatory diagram related to unevenness correction processing in the first modification of the second embodiment. FIG. 19 shows an enlarged view around the gray axis in FIG. In FIG. 19, the same parts as those in FIG.
In the first modification, the lightness L * b1 ″ at the boundary position B1 is determined so as to have the same lightness as the peak position C1. Then, a straight line is formed so that the color difference from the peak position C2 to the boundary position B1 is minimized, and the position where the straight line intersects the boundary color gamut CB2 is defined as the lightness L * b2 ′ at the boundary position B2. That is, the first unevenness correction processing unit 162 and the second unevenness correction processing unit 172 are configured so that the change in brightness between the luminance peak position C1 and the luminance peak position C2 is monotonously changed. Unevenness is corrected for the non-superimposed region of the image.

第2の実施形態の第1の変形例においても、第2の実施形態と同様に、重畳領域も滑らかにブレンドされるようにむら補正目標値を求める。そして、むら補正目標値演算部130aは、第2の実施形態と同様に、中間調目標値を定める。こうして、各プロジェクターについてむら補正目標値を定めると、むら補正LUT生成部140aは、公知の方法でむら補正LUTを生成する。   Also in the first modification of the second embodiment, as in the second embodiment, the unevenness correction target value is obtained so that the overlapping region is blended smoothly. Then, the unevenness correction target value calculation unit 130a determines a halftone target value, as in the second embodiment. Thus, when the unevenness correction target value is determined for each projector, the unevenness correction LUT generation unit 140a generates an unevenness correction LUT by a known method.

〔第2の実施形態の第2の変形例〕
第2の実施形態の第1の変形例では、ピーク位置C1と同一明度となるように境界位置B1における明度を定めていたが、これに限定されるものではない。第2の変形例では、ピーク位置C1,C2からの色差の和が最小となるように境界位置B1における明度Lb1´´を定める。
[Second Modification of Second Embodiment]
In the first modification of the second embodiment, the lightness at the boundary position B1 is determined so as to have the same lightness as the peak position C1, but the present invention is not limited to this. In the second modification, the lightness L * b1 ″ at the boundary position B1 is determined so that the sum of the color differences from the peak positions C1 and C2 is minimized.

図20に、第2の実施形態の第2の変形例におけるむら補正処理に関する説明図を示す。図20は、図10におけるグレイ軸付近の拡大図を表す。図20において、図18と同様の部分には同一符号を付し、適宜説明を省略する。
第2の変形例では、ピーク位置C1,C2からの色差が最小となるように境界位置B1における明度Lb1´´を定める。即ち、ピーク位置C1と境界位置B1との色差と、ピーク位置C2から境界位置B1との色差との和が最小となるように、境界位置B1における明度Lb1´´を定める。そして、ピーク位置C2から境界位置B1までの色差が最小となるように直線を結び、該直線が境界色域CB2と交差する位置を境界位置B2における明度Lb2´と定める。即ち、第1のむら補正処理部162及び第2のむら補正処理部172は、輝度のピーク位置C1と第1のむら補正処理部162による補正後の境界位置B1との第1の色差と、第1のむら補正処理部162による補正後の境界位置B1とピーク位置C2との第2の色差との和が最小となるように、重畳領域及び各投射画像の非重畳領域についてむらを補正する。
FIG. 20 is an explanatory diagram related to unevenness correction processing in the second modification of the second embodiment. FIG. 20 shows an enlarged view around the gray axis in FIG. 20, parts that are the same as those in FIG. 18 are given the same reference numerals, and descriptions thereof will be omitted as appropriate.
In the second modification, the lightness L * b1 ″ at the boundary position B1 is determined so that the color difference from the peak positions C1 and C2 is minimized. That is, the lightness L * b1 ″ at the boundary position B1 is determined so that the sum of the color difference between the peak position C1 and the boundary position B1 and the color difference between the peak position C2 and the boundary position B1 is minimized. Then, a straight line is formed so that the color difference from the peak position C2 to the boundary position B1 is minimized, and the position where the straight line intersects the boundary color gamut CB2 is defined as the lightness L * b2 ′ at the boundary position B2. That is, the first unevenness correction processing unit 162 and the second unevenness correction processing unit 172 include the first color difference between the luminance peak position C1 and the boundary position B1 corrected by the first unevenness correction processing unit 162, and the first unevenness. Unevenness is corrected for the superimposition region and the non-superimposition region of each projection image so that the sum of the second color difference between the boundary position B1 and the peak position C2 after correction by the correction processing unit 162 is minimized.

第2の実施形態の第2の変形例においても、第2の実施形態と同様に、重畳領域も滑らかにブレンドされるようにむら補正目標値を求める。そして、むら補正目標値演算部130aは、第2の実施形態と同様に、中間調目標値を定める。こうして、各プロジェクターについてむら補正目標値を定めると、むら補正LUT生成部140aは、公知の方法でむら補正LUTを生成する。   Also in the second modification of the second embodiment, as in the second embodiment, the unevenness correction target value is obtained so that the overlapping region is blended smoothly. Then, the unevenness correction target value calculation unit 130a determines a halftone target value, as in the second embodiment. Thus, when the unevenness correction target value is determined for each projector, the unevenness correction LUT generation unit 140a generates an unevenness correction LUT by a known method.

以上のように、第2の実施形態では、むら補正目標値の設定自由度が高まるので、上記のような色々なパターンが考えられる。また、重畳領域の処理をできるだけユーザーに意識させないためには、境界位置B1と境界位置B2の色差ができるだけ小さくなるようにしてもよい。また、上記のむら補正処理の中から、ユーザーが選択部を解して選択できるようにしてもよい。   As described above, in the second embodiment, since the degree of freedom in setting the unevenness correction target value is increased, various patterns as described above are conceivable. Further, in order to make the process of the overlapping area as conscious as possible by the user, the color difference between the boundary position B1 and the boundary position B2 may be made as small as possible. Further, the user may be able to select the unevenness correction process by selecting the selection unit.

以上、本発明に係る画像処理装置、画像表示装置及び画像処理方法等を上記のいずれかの実施形態又はその変形例に基づいて説明したが、本発明は上記のいずれかの実施形態又はその変形例に限定されるものではない。その要旨を逸脱しない範囲において種々の態様において実施することが可能であり、例えば次のような変形も可能である。   As described above, the image processing apparatus, the image display apparatus, the image processing method, and the like according to the present invention have been described based on any one of the above-described embodiments or modifications thereof, but the present invention is any of the above-described embodiments or modifications thereof. It is not limited to examples. The present invention can be implemented in various modes without departing from the gist thereof, and for example, the following modifications are possible.

(1)上記の実施形態又はその変形例では、2つの画像形成部により形成される画像をタイリングする例について説明したが、3以上の画像形成部により形成される画像を耐リンスする場合も同様である。   (1) In the above-described embodiment or its modification, an example in which an image formed by two image forming units is tiled has been described. However, an image formed by three or more image forming units may be resistant to rinsing. It is the same.

(2)上記の実施形態又はその変形例では、本発明に係る画像形成部が、いわゆる3板式の透過型の液晶パネルを用いたライトバルブにより構成される例を説明したが、単板式の液晶パネルや2板又は4板式以上の透過型の液晶パネルを用いたライトバルブを採用することができる。また、光変調素子として透過型の液晶パネルを用いたライトバルブを用いるものとして説明したが、本発明はこれに限定されるものではない。光変調素子として、例えばDLP(Digital Light Processing)(登録商標)、LCOS(Liquid
Crystal On Silicon)等を採用したり、これらが混在した構成を採用したりしてもよい。
(2) In the above embodiment or its modification, the example in which the image forming unit according to the present invention is configured by a light valve using a so-called three-plate transmission type liquid crystal panel has been described. A light valve using a panel or a transmissive liquid crystal panel of 2 plates or 4 plates or more can be employed. In addition, although it has been described that a light valve using a transmissive liquid crystal panel is used as the light modulation element, the present invention is not limited to this. As a light modulation element, for example, DLP (Digital Light Processing) (registered trademark), LCOS (Liquid
Crystal On Silicon) may be employed, or a configuration in which these are mixed may be employed.

(3)上記の実施形態又はその変形例では、本発明に係る画像表示装置がプロジェクターである例を説明したが、本発明はこれに限定されるものではない。   (3) In the above-described embodiment or its modification, the example in which the image display apparatus according to the present invention is a projector has been described, but the present invention is not limited to this.

(4)上記の実施形態又はその変形例では、均等色空間としてL空間を例に説明したが、本発明はこれに限定されるものではない。例えば、均等色空間としてL空間であってもよい。 (4) In the above embodiment or its modification, the L * u * v * space has been described as an example of the uniform color space, but the present invention is not limited to this. For example, the L * a * b * space may be used as the uniform color space.

(5)上記の実施形態又はその変形例において、本発明を、画像処理装置、画像表示装置及び画像処理方法等として説明したが、本発明はこれに限定されるものではない。例えば、本発明に係る画像処理方法やむら補正値生成方法の処理手順が記述されたプログラム、本発明を実現するための画像表示装置の処理方法(画像表示方法)の処理手順が記述されたプログラム、これらのいずれかのプログラムが記録された記録媒体であってもよい。   (5) Although the present invention has been described as an image processing apparatus, an image display apparatus, an image processing method, and the like in the above-described embodiment or its modification, the present invention is not limited to this. For example, a program that describes the processing procedure of the image processing method and the unevenness correction value generation method according to the present invention, and a program that describes the processing procedure of the processing method (image display method) of the image display device for realizing the present invention A recording medium on which any one of these programs is recorded may be used.

10,10a…マルチプロジェクションシステム(表示システム)、
20…画像信号供給装置、 30…むら測定装置、
100…画像処理部(画像処理装置)、 100a…画像処理装置、
110…画像分割処理部、 120,120a…むら補正LUT選択部、
130,130a…むら補正目標値演算部、140,140a…むら補正LUT生成部、
150…通知処理部、
160…第1のむら補正LUT記憶部(第1のむら補正値記憶部)、
162…第1のむら補正処理部、
170…第2のむら補正LUT記憶部(第2のむら補正値記憶部)、
172…第2のむら補正処理部、 200…画像形成部、 300,300a…操作部、
A1…画素位置(第3の画素位置)、 AR1,AR2…境界部、
B1…境界位置(第1の画素位置)、 B2…境界位置(第2の画素位置)、
C1,C2…ピーク位置、 CB1…第1のプロジェクターの境界色域、
CB2…第2のプロジェクターの境界色域、
CP1…第1のプロジェクターのピーク色域、
CP2…第2のプロジェクターのピーク色域、 IMG1…第1の投射画像、
IMG2…第2の投射画像、
a1,Lb1,Lb1´Lb1´´,Lb2,Lc1,Lc2…明度、
PJ1,PJ1a…第1のプロジェクター(第1の画像表示装置)、
PJ2…第2のプロジェクター(第2の画像表示装置) SCR…スクリーン、
Yb1,Yb1´,Yb1´´,Yb2,Yb2´,Yc1,Yc2…輝度
10, 10a ... multi-projection system (display system),
20 ... Image signal supply device, 30 ... Unevenness measurement device,
100: Image processing unit (image processing apparatus), 100a: Image processing apparatus,
110: Image division processing unit, 120, 120a: Unevenness correction LUT selection unit,
130, 130a ... unevenness correction target value calculation unit, 140, 140a ... unevenness correction LUT generation unit,
150 ... notification processing unit,
160... First unevenness correction LUT storage unit (first unevenness correction value storage unit),
162: First unevenness correction processing unit,
170 ... second unevenness correction LUT storage unit (second unevenness correction value storage unit),
172: Second unevenness correction processing unit 200: Image forming unit 300, 300a: Operation unit,
A1 ... Pixel position (third pixel position), AR1, AR2 ... Boundary part,
B1 ... boundary position (first pixel position), B2 ... boundary position (second pixel position),
C1, C2 ... peak position, CB1 ... boundary color gamut of the first projector,
CB2: boundary color gamut of the second projector,
CP1: Peak color gamut of the first projector,
CP2 ... peak color gamut of the second projector, IMG1 ... first projection image,
IMG2 ... second projection image,
L * a1, L * b1, L * b1′L * b1 ″, L * b2, L * c1, L * c2… lightness,
PJ1, PJ1a ... first projector (first image display device),
PJ2 ... second projector (second image display device) SCR ... screen,
Yb1, Yb1 ′, Yb1 ″, Yb2, Yb2 ′, Yc1, Yc2... Luminance

Claims (8)

第1の投射画像及び第2の投射画像が重畳領域を設けて配置されるタイリング画像のむら補正を行う画像処理装置であって、
前記第1の投射画像のむらを補正するための補正値を記憶する第1のむら補正値記憶部と、
前記第1のむら補正記憶部に記憶された補正値を用いて前記第1の投射画像のむらを補正する第1のむら補正処理部とを含み、
前記第1の投射画像の非重畳領域と前記重畳領域との境界部における第1の画素位置の輝度は、前記第2の投射画像の非重畳領域と前記重畳領域との境界部における第2の画素位置の輝度より低く、
前記第1のむら補正処理部は、前記第1の投射画像の非重畳領域及び前記重畳領域において、前記第2の画素位置の輝度に基づいてむらを補正することを特徴とする画像処理装置。
An image processing apparatus that corrects unevenness of a tiling image in which a first projection image and a second projection image are arranged with an overlapping region,
A first unevenness correction value storage unit that stores a correction value for correcting unevenness of the first projection image;
A first unevenness correction processing unit that corrects unevenness of the first projected image using a correction value stored in the first unevenness correction storage unit,
The luminance of the first pixel position at the boundary between the non-overlapping area of the first projection image and the overlapping area is the second luminance at the boundary between the non-overlapping area of the second projection image and the overlapping area. Lower than the brightness of the pixel position,
The first unevenness correction processing unit corrects unevenness based on the luminance of the second pixel position in a non-overlapping area and the overlapping area of the first projection image.
請求項1において、
前記第1のむら補正処理部は、
前記第1の投射画像において前記第2の画素位置の輝度に対応する輝度を有する前記第1の投射画像内の非重畳領域内の第3の画素位置から前記重畳領域内の前記第1の投射画像端にかけて、むらを補正することを特徴とする画像処理装置。
In claim 1,
The first unevenness correction processing unit includes:
In the first projection image, the first projection in the superimposition region from the third pixel position in the non-superimposition region in the first projection image having a luminance corresponding to the luminance of the second pixel position. An image processing apparatus that corrects unevenness over an image edge.
請求項2において、
前記第1のむら補正処理部は、
前記第3の画素位置を基準とした色差が最小となるように、むらを補正することを特徴とする画像処理装置。
In claim 2,
The first unevenness correction processing unit includes:
An image processing apparatus that corrects unevenness so that a color difference based on the third pixel position is minimized.
請求項1乃至3のいずれかにおいて、
前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、
前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、
前記第2のむら補正処理部は、
前記第1のむら補正処理部による補正後の前記第1の画素位置と前記第2の投射画像内の輝度のピーク位置との色差が最小となるように、むらを補正することを特徴とする画像処理装置。
In any one of Claims 1 thru | or 3,
A second unevenness correction value storage unit for storing a correction value for correcting unevenness of the second projection image;
A second unevenness correction processing unit that corrects unevenness of the second projected image using the correction value stored in the second unevenness correction storage unit,
The second unevenness correction processing unit includes:
An image in which unevenness is corrected so that a color difference between the first pixel position corrected by the first unevenness correction processing unit and a luminance peak position in the second projection image is minimized. Processing equipment.
請求項1又は2において、
前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、
前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、
前記第1のむら補正処理部及び前記第2のむら補正処理部は、
前記第1の投射画像内の輝度のピーク位置と前記第1のむら補正処理部による補正後の前記第1の画素位置との第1の色差と、前記第1のむら補正処理部による補正後の前記第1の画素位置と前記第2の投射画像内の輝度のピーク位置との第2の色差との和が最小となるように、むらを補正することを特徴とする画像処理装置。
In claim 1 or 2,
A second unevenness correction value storage unit for storing a correction value for correcting unevenness of the second projection image;
A second unevenness correction processing unit that corrects unevenness of the second projected image using the correction value stored in the second unevenness correction storage unit,
The first unevenness correction processing unit and the second unevenness correction processing unit are:
The first color difference between the luminance peak position in the first projection image and the first pixel position after the correction by the first unevenness correction processing unit, and the correction after the correction by the first unevenness correction processing unit An unevenness is corrected so that the sum of the 1st pixel position and the 2nd color difference of the peak position of the brightness in the 2nd projection picture may become the minimum.
請求項1又は2において、
前記第2の投射画像のむらを補正するための補正値を記憶する第2のむら補正値記憶部と、
前記第2のむら補正記憶部に記憶された補正値を用いて前記第2の投射画像のむらを補正する第2のむら補正処理部とを含み、
前記第1のむら補正処理部及び前記第2のむら補正処理部は、
前記第1の投射画像内の輝度のピーク位置と前記第2の投射画像内の輝度のピーク位置との間で明度の変化が単調変化となるように、むらを補正することを特徴とする画像処理装置。
In claim 1 or 2,
A second unevenness correction value storage unit for storing a correction value for correcting unevenness of the second projection image;
A second unevenness correction processing unit that corrects unevenness of the second projected image using the correction value stored in the second unevenness correction storage unit,
The first unevenness correction processing unit and the second unevenness correction processing unit are:
An image in which unevenness is corrected so that a change in brightness becomes a monotonous change between a luminance peak position in the first projection image and a luminance peak position in the second projection image. Processing equipment.
請求項1乃至6のいずれか一項に記載の画像処理装置を含むことを特徴とする画像表示装置。   An image display apparatus comprising the image processing apparatus according to claim 1. 第1の投射画像及び第2の投射画像が重畳領域を設けて配置されるタイリング画像のむら補正を行う画像処理方法であって、
前記第1の投射画像内の非重畳領域と前記重畳領域との境界部における第1の画素位置の輝度は、前記第2の投射画像内の非重畳領域と前記重畳領域との境界部における第2の画素位置の輝度より低く、
前記第2の画素位置の輝度に基づいて、前記第1の投射画像の非重畳領域及び前記重畳領域において、むらを補正することを特徴とする画像処理方法。
An image processing method for correcting unevenness of a tiling image in which a first projection image and a second projection image are arranged with a superimposed region,
The luminance of the first pixel position at the boundary between the non-overlapping area and the overlapping area in the first projection image is the luminance at the boundary between the non-overlapping area and the overlapping area in the second projection image. Lower than the brightness of the pixel position of 2,
An image processing method, comprising: correcting unevenness in a non-overlapping area and the overlapping area of the first projection image based on a luminance of the second pixel position.
JP2011159627A 2011-07-21 2011-07-21 Image processing apparatus, image display apparatus, and image processing method Active JP5866842B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011159627A JP5866842B2 (en) 2011-07-21 2011-07-21 Image processing apparatus, image display apparatus, and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011159627A JP5866842B2 (en) 2011-07-21 2011-07-21 Image processing apparatus, image display apparatus, and image processing method

Publications (2)

Publication Number Publication Date
JP2013025076A true JP2013025076A (en) 2013-02-04
JP5866842B2 JP5866842B2 (en) 2016-02-24

Family

ID=47783489

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011159627A Active JP5866842B2 (en) 2011-07-21 2011-07-21 Image processing apparatus, image display apparatus, and image processing method

Country Status (1)

Country Link
JP (1) JP5866842B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016063342A (en) * 2014-09-17 2016-04-25 株式会社リコー Output controller, output control system, and output control program
JP2017106951A (en) * 2015-12-07 2017-06-15 セイコーエプソン株式会社 Image processor, display device, and control method for image processor
JP2018005018A (en) * 2016-07-05 2018-01-11 セイコーエプソン株式会社 Projection system and method for adjusting projection system
CN113852798A (en) * 2020-06-23 2021-12-28 精工爱普生株式会社 Image projection system, method for determining necessity of adjustment thereof, and image projection control device
US11640774B2 (en) 2021-08-03 2023-05-02 Seiko Epson Corporation Display method for display system, display method for display apparatus, and display system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002072359A (en) * 2000-08-29 2002-03-12 Olympus Optical Co Ltd Image projection display device
JP2002116500A (en) * 2000-10-05 2002-04-19 Olympus Optical Co Ltd Image projection/display device
JP2009159371A (en) * 2007-12-27 2009-07-16 Seiko Epson Corp Device and method for adjusting image, and image display system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002072359A (en) * 2000-08-29 2002-03-12 Olympus Optical Co Ltd Image projection display device
JP2002116500A (en) * 2000-10-05 2002-04-19 Olympus Optical Co Ltd Image projection/display device
JP2009159371A (en) * 2007-12-27 2009-07-16 Seiko Epson Corp Device and method for adjusting image, and image display system

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016063342A (en) * 2014-09-17 2016-04-25 株式会社リコー Output controller, output control system, and output control program
JP2017106951A (en) * 2015-12-07 2017-06-15 セイコーエプソン株式会社 Image processor, display device, and control method for image processor
JP2018005018A (en) * 2016-07-05 2018-01-11 セイコーエプソン株式会社 Projection system and method for adjusting projection system
US10397533B2 (en) 2016-07-05 2019-08-27 Seiko Epson Corporation Projection system and method for adjusting projection system
CN113852798A (en) * 2020-06-23 2021-12-28 精工爱普生株式会社 Image projection system, method for determining necessity of adjustment thereof, and image projection control device
CN113852798B (en) * 2020-06-23 2023-06-13 精工爱普生株式会社 Image projection system, adjustment necessity determining method thereof, and image projection control device
US11640774B2 (en) 2021-08-03 2023-05-02 Seiko Epson Corporation Display method for display system, display method for display apparatus, and display system

Also Published As

Publication number Publication date
JP5866842B2 (en) 2016-02-24

Similar Documents

Publication Publication Date Title
JP6798163B2 (en) Projection system and how to adjust the projection system
EP1391870B1 (en) Image display system, projector, information storage medium and image processing method
JP6701669B2 (en) Image projection system, projector, and control method of image projection system
EP1205902B1 (en) Image display system, image processing method, and information storage medium
JP6331340B2 (en) Display device and control method of display device
JP7338404B2 (en) Display system control method and control device
JP2004228948A (en) Image processing system, projector, program, information storage medium and image processing method
US20170244941A1 (en) Projector and control method thereof
JP5866842B2 (en) Image processing apparatus, image display apparatus, and image processing method
JP2009092984A (en) Image correction apparatus, image display system and image correction method
US20180003949A1 (en) Projector and projection system that correct optical characteristics, image processing apparatus, and storage medium
JP6657987B2 (en) Projector and projector control method
JP6707871B2 (en) Image quality correction method and image projection system
JP5119607B2 (en) projector
WO2019230108A1 (en) Image processing device and image processing method
JP6031327B2 (en) Projection system, projector and control method
JP2004080161A (en) Multi-projection system and method of acquiring correction data in multi-projection system
JP6659116B2 (en) Projection apparatus and projection method
JP2011150111A (en) Image processor, image display system, and image processing method
JP4591618B2 (en) Gamma curve adjustment device and minimum increase / decrease setting method
JP7309352B2 (en) Electronic equipment and its control method
JP2014142466A (en) Projection device and control method of the same, program, and storage medium
JP6866915B2 (en) Image projection system and control method of image projection system
JP3716839B2 (en) Image adjusting device for projector and image adjusting method for image display device
JP2023102634A (en) Control device, image projection system, control method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140416

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20150107

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150310

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150507

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150707

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150902

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151221

R150 Certificate of patent or registration of utility model

Ref document number: 5866842

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350