WO2013046302A1 - プロジェクター補正システムと方法、プロジェクター - Google Patents

プロジェクター補正システムと方法、プロジェクター Download PDF

Info

Publication number
WO2013046302A1
WO2013046302A1 PCT/JP2011/071897 JP2011071897W WO2013046302A1 WO 2013046302 A1 WO2013046302 A1 WO 2013046302A1 JP 2011071897 W JP2011071897 W JP 2011071897W WO 2013046302 A1 WO2013046302 A1 WO 2013046302A1
Authority
WO
WIPO (PCT)
Prior art keywords
correction
data
projector
blending
projectors
Prior art date
Application number
PCT/JP2011/071897
Other languages
English (en)
French (fr)
Inventor
道夫 富澤
孝一 荒
充彦 齋藤
Original Assignee
Necディスプレイソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Necディスプレイソリューションズ株式会社 filed Critical Necディスプレイソリューションズ株式会社
Priority to US14/347,211 priority Critical patent/US20140232738A1/en
Priority to PCT/JP2011/071897 priority patent/WO2013046302A1/ja
Publication of WO2013046302A1 publication Critical patent/WO2013046302A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G06T5/80
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3182Colour adjustment, e.g. white balance, shading or gamut
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0233Improving the luminance or brightness uniformity across the screen

Definitions

  • the present invention relates to a projector correction system and method for correcting the brightness and distortion of a projected image of each projector when projection is performed by a plurality of projectors, and a projector.
  • FIG. 1 is a diagram showing a schematic configuration of a system for projecting a large image by horizontally connecting projection images of two projectors.
  • the projected image 11 projected by the projector 1 indicated by the thick line and the projected image 12 projected by the projector 2 indicated by the solid line are overlapped, and the image region 13 where the image is actually displayed straddling each projected image region. Is indicated by a broken line.
  • the projected image 11 by the projector 1 positioned on the left side with respect to the video area 13 and inclined to the right side is enlarged toward the right side, and on the right side with respect to the video area 13.
  • the projected image 12 by the projector 2 positioned and tilted to the left is enlarged toward the left. For this reason, the brightness of the projected images 11 and 12 when a uniform image is projected is accompanied by uneven brightness depending on the position in the horizontal direction of the drawing.
  • the video area 13 includes an area where the projectors 1 and 2 project simultaneously, and this area has a much higher luminance than an area where only the projector performs projection.
  • the distortion and luminance unevenness generated in the projected images 11 and 12 as described above will not occur when the projectors 1 and 2 are directly opposed to the projection plane, but the situation is such that a large-screen video wall system is adopted.
  • the projector and the projection plane are often arranged close to each other so that no persons or objects that hinder the projection are interposed between the projector and the projection plane.
  • the projected images of the projectors constituting the video wall system are accompanied by the above distortion and uneven brightness. ing.
  • FIG. 3 is a diagram showing a projected image by a video signal supplied to the projector 1.
  • the projected images from the projectors 1 and 2 are based on video signals supplied from a video device such as a computer or a (DVD player: Digital Versatile Disc Player).
  • a video device such as a computer or a (DVD player: Digital Versatile Disc Player).
  • the video images indicate that the projector is facing the projection surface.
  • FIG. 3 shows a rectangle as shown in FIG.
  • the projection image from each projector is accompanied by distortion and luminance unevenness as shown in FIG. 1 and FIG.
  • a video signal for realizing the video shown in FIG. 3 is supplied.
  • the area where the image is actually displayed is composed of the projected image area 21 and the overlapping area 23, and no image display is required in the other areas 31 to 34, so geometric correction is performed on the computer. Further, luminance correction is also performed on the overlapping area 23 that overlaps the projected image of the projector 2.
  • the luminance correction data is generally created as two-dimensional data.
  • the level of video is lowered and when two-dimensional correction is applied, it is common to use a memory for alpha blending, and the amount of data is 8 bits for alpha data.
  • Japanese Patent Application Laid-Open No. 2007-58425 describes a technique for adjusting the luminance level of a projected video signal.
  • Patent Document 1 aims to provide a technique that enables simple and low-cost display of a single screen using a plurality of projectors.
  • the blending area and blending amount corresponding to the overlapping area are set as follows.
  • a projector having a capture unit that receives and captures a video signal from a personal computer as a mask image and a video adjustment unit that reflects a gain obtained from the mask image in a video projected using an alpha blending function is disclosed.
  • the specific video adjustment described in Patent Document 1 is as follows. 1. The images from the first and second projectors are projected and distortion correction is performed. 2. Each image is calibrated by the first and second projectors. 3. The adjustment image is projected from the first and second projectors. 4). While confirming the adjustment image using a personal computer, first, the shape of the mask image corresponding to the first projector adjustment image is specified and the gradient is applied to the shape of the mask image, which is the area to be gradientized. Similarly, the user specifies the shape of the mask image corresponding to the second projector adjustment image, and performs the gradient. 5. The gradient of each mask image of the first and second projector adjustment images is adjusted so that the luminance is constant over the entire projected screen. 6). The capture unit of each projector captures the adjusted mask image. 7). The capture unit of each projector converts the luminance data of the captured mask image into a gain adjustment map.
  • the luminance unevenness is corrected only for the mask image area (the overlapping area 23 in FIGS. 2 and 3 of the present application). As described above, the luminance unevenness when distortion correction occurs is different depending on the position in the left-right direction of the drawing in FIG. .
  • the present invention performs distortion correction and luminance unevenness correction more easily and reliably.
  • the projector correction system of the present invention is a projector correction system that performs distortion correction and brightness correction of each projector when performing projection by a plurality of projectors, A camera that captures images projected by the plurality of projectors; The display contents of the plurality of projectors are set to perform shooting by the camera, and geometric correction data for correcting distortion of each of the plurality of projectors and blending data for performing luminance correction are obtained from the shooting result.
  • Each of the plurality of projectors is Blending data memory, A memory for geometric correction data;
  • the blending data and the geometric correction data are created and stored in the blending data memory and the geometric correction data memory, respectively.
  • a CPU that refers to the stored contents of the blending data memory and the geometric correction data memory, and causes the image correction unit to perform distortion correction and luminance unevenness correction according to the stored contents. To do.
  • the projector correction method according to the present invention is performed by a projector correction system including a camera that shoots projected images of the plurality of projectors, which performs distortion correction and luminance correction of each projector when projection is performed by a plurality of projectors.
  • a projector correction method A computer sets display contents of the plurality of projectors to perform shooting by the camera, and performs geometric correction data and luminance correction for correcting distortion of each of the plurality of projectors from the shooting result.
  • the projector of the present invention Blending data memory, A memory for geometric correction data; An image correction unit; When geometric correction data for performing distortion correction and two-dimensional correction data indicating the content of blending data for performing luminance correction are input, the blending data and the geometric correction are based on the two-dimensional correction data. Create data, store the data in the blending data memory and the geometric correction data memory, and refer to the stored contents of the blending data memory and the geometric correction data memory for the input video signal. And a CPU that causes the image correction unit to perform distortion correction and luminance unevenness correction according to each stored content.
  • FIG. 1 is the same as the projected image area and the image shown in FIG. 1, but of the image area 13, the projected image area 21 by the projector 1 alone, the projected image area 22 by the projector 2 alone, and the projected image by the projector 1 and the projector 2.
  • An overlapping area 23 where the areas overlap is shown.
  • FIG. 3 is a diagram illustrating a projected image by a video signal supplied to the projector 1. It is a block diagram which shows the structure of one Embodiment of the projector correction system by this invention.
  • FIG. 2 is a block diagram showing a main configuration of projectors 100 1 to 100 n . It is a flowchart which shows the operation
  • FIG. 4 is a block diagram showing the configuration of an embodiment of the projector correction system according to the present invention.
  • a plurality of projectors 100 1 , 100 2 ,... 100 n constituting the video wall system, each projector 100 1 to 100 n , and a camera 200 are connected to the personal computer for controlling these operations.
  • the computer 300 is configured.
  • the personal computer 300 detects the relative positions of the projectors 100 1 to 100 n with respect to the projection planes based on the contents captured by the camera 200, and calculates geometric data and blending areas according to the detection results. As shown in FIG. 3, two-dimensional correction data indicating an image to be projected by each projector is created and distributed to each projector. As the format of the two-dimensional correction data, it is convenient to use an image format such as BMP (Bit MaP).
  • BMP Bit MaP
  • Each projector adjusts and projects the projected image based on the two-dimensional correction data distributed from the personal computer 300.
  • FIG. 5 is a block diagram showing a main configuration of the projectors 100 1 to 100 n .
  • the projector 100 connected to the personal computer 300 is the projector 100, and only one unit is connected.
  • the projector 100 is actually provided with a projection optical system
  • FIG. 5 shows only a video signal processing system related to the present invention.
  • the projector 100 includes an input unit 110, a communication unit 120, an output unit 130, and a scaling unit 140.
  • the scaling unit 140 includes an OSD (On-Screen Display) display unit 141, a blending data memory 142, a CPU (Central Processing Unit) 143, an image correction unit 144, and a geometric correction data memory 145.
  • OSD On-Screen Display
  • CPU Central Processing Unit
  • the CPU 143 creates geometric correction data for performing distortion correction based on the two-dimensional correction data sent from the personal computer 300 via the communication unit 120, and stores it in the geometric correction data memory 145. Further, the CPU 143 creates blending data for correcting luminance unevenness based on the two-dimensional correction data sent from the personal computer 300 via the communication unit 120 and stores the blending data in the blending data memory 142.
  • the geometric correction data indicates the areas 31 to 34 where the image display is unnecessary in the area shown in FIG.
  • the blending data indicates correction values for the projected image area 21 and the overlapping area 23 that need to be corrected for luminance unevenness.
  • the CPU 143 causes the OSD display unit 110 to perform OSD display on the video signal sent from the personal computer 300 via the input unit 110. Further, the stored contents of the blending data memory 142 and the geometric correction data memory 145 are referred to, and the image correction unit 144 performs distortion correction and luminance unevenness correction according to the stored contents.
  • the video signal subjected to these processes is sent to the output unit 130, supplied to a display unit (not shown) that constitutes the projection optical system, and an image subjected to distortion correction and luminance unevenness correction is projected.
  • FIG. 6 is a flowchart showing operations related to distortion correction and luminance unevenness correction according to this embodiment.
  • the personal computer 300 causes the projectors 100 1 to 100 n to display an all black test pattern, and causes the camera 200 to take an image (step S601).
  • step S602 the personal computer 300, only the projector 100 1, all to display the test pattern white, all the rest of the projector to display black test pattern is captured in the camera 200. This is sequentially performed for all projectors (step S602). By comparing with the photographing content in step S601, it is possible to grasp the brightness unevenness state of each projector.
  • the personal computer 300 causes the camera 200 to display a 5-dot test pattern only on the projector 100 1 , and then causes the camera 200 to display the entire-surface dot test pattern. This is sequentially performed for all projectors (step S603).
  • the 5-dot test pattern is a test pattern in which predetermined dots are displayed at the center and four corners of the projected image
  • the full-surface dot test pattern is a test pattern in which dots are uniformly displayed on the entire projected image. It is. By photographing these, the outline and shape of the projected image of each projector can be understood, and the state of distortion can be grasped.
  • the personal computer 300 detects the relative position of each projector with respect to the synthesized video area from the respective photographing results in steps S601 to S603, obtains geometric correction data and blending data, and obtains these contents.
  • two-dimensional data indicating an image to be projected by each projector is created and distributed to each projector (step S604).
  • Each projector adjusts and projects the projected image based on the two-dimensional correction data distributed from the personal computer 300 (step S605).
  • the distortion correction and uneven brightness correction performed in this embodiment are performed once for one video wall system. After the two-dimensional correction data is distributed to each projector, the distortion correction and the luminance unevenness correction based on the two-dimensional correction data are performed for each projector, so that a personal computer and a camera for correcting the distortion and the luminance unevenness are unnecessary. Become.
  • the video signal is supplied to the projector from a computer or video equipment.
  • the video equipment can only correct the video output from the computer.
  • distortion correction and luminance correction could not be performed.
  • distortion correction and luminance correction based on two-dimensional correction data are performed on the projector side, so that distortion correction and luminance correction are surely performed regardless of the video signal supply source. Can do.
  • the format of the two-dimensional correction data is BMP, but it may be a JPEG (Joint Photographic Experts Group) format.
  • JPEG Joint Photographic Experts Group
  • the JPEG format is lossy compressed data, the limitation of lossy can be avoided by incorporating necessary 8-bit alpha data into the same 8-bit Y (luminance) component.
  • the speed is also increased by reducing the resolution of the alpha data to be created by taking into account that the location where computation is required is determined by the installation status of the projector. It becomes possible.
  • the first projector When configuring a video wall system using two projectors, for example, the first projector performs blending correction from the relative position of the first projector and the second projector in the right half of the projection screen. I understand. Therefore, by setting the resolution of the alpha data to be created to 512x768 instead of 1024x768, the data can be halved. By reducing the amount of data, it is possible to speed up the conventional blending correction process.
  • the distortion correction data and blending data are obtained based on the two-dimensional correction data distributed from the personal computer, the distortion-corrected image area and the blending-corrected image area always match.
  • the areas do not always match.
  • the quality of the projected image after correction may be deteriorated, whereas in the present embodiment, the image area subjected to distortion correction and the image area subjected to blending correction always coincide with each other. The quality of the projected image does not deteriorate.
  • the projected image has a luminance gradient in the distortion spreading direction (the luminance in the upper right direction becomes darker in FIG. 2 of Cited Document 1).
  • the entire projected image is captured by the camera and distortion correction and blending adjustment are performed, it is possible to simultaneously correct the luminance gradient due to oblique projection.
  • the corrected image may be output as a video signal, and the image may be captured by a projector and captured as two-dimensional correction data.
  • the distortion correction and blending correction can be performed by capturing the image being displayed by the projector when the distortion correction and blending correction by the personal computer is completed, and the adjustment process can be visually observed. .

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)

Abstract

 本発明は、歪み補正および輝度むら補正を、より容易かつ確実に行うことを実現するもので、幾何学補正データ用メモリと、画像補正部と、歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータの内容を示す2次元補正データが入力されると、前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリのそれぞれへ格納し、入力された映像信号について、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリの格納内容を参照し、各格納内容に応じた歪み補正および輝度むら補正を前記画像補正部に行わせるCPUとを有する。

Description

プロジェクター補正システムと方法、プロジェクター
 本発明は、複数台のプロジェクターにより投写を行う際の、各プロジェクターの投写映像の輝度および歪みを補正するプロジェクター補正システムと方法、プロジェクターに関する。
 複数のプロジェクターの投写映像により一つの映像を投写するビデオウォールシステムがある。このビデオウォールシステムにおいて、各プロジェクターの投写映像に対して行われる輝度補正および歪み補正について以下に説明する。
 図1は、2台のプロジェクターの投写映像を横に繋げて、大きな映像を投写するシステムの概略構成を示す図である。
 太線で示されるプロジェクター1が投写する投写映像11と、実線で示されるプロジェクター2が投写する投写映像12を重ね合わせて、それらの各投写映像領域に跨る、実際に映像が表示される映像領域13が破線で示されている。
 図1に示すように、映像領域13に対して左側に位置し、右側に傾けられて配置されたプロジェクター1による投写映像11は右側に向けて拡大するものとなり、映像領域13に対して右側に位置し、左側に傾けられて配置されたプロジェクター2による投写映像12は左側に向けて拡大するものとなる。このため、均一な映像を投写させたときの投写映像11、12の輝度は、図面左右方向の位置に応じて異なる輝度むらを伴うものとなる。
 また、映像領域13には、プロジェクター1,2が同時に投写を行う領域が含まれており、この領域は、各プロジェクターのみによって投写が行われる領域よりも格段に輝度が高いものとなっている。
 上記のような投写映像11,12に発生する歪みおよび輝度むらは、プロジェクター1,2を投写面に正対させることにより発生することはなくなるが、大画面のビデオウォールシステムを採用するような状況の場合、プロジェクターと投写面の間に、投写の妨げとなる人や物が介在しないように、プロジェクターと投写面の間を近づけて配置されることが多い。また、たとえ、プロジェクターを投写面に正対させようとしても、厳密に実行することは困難であり、ビデオウォールシステムを構成する各プロジェクターの投写映像は、上記の歪みおよび輝度むらを伴うものとなっている。
 図2は、図1に示した投写映像領域および映像と同じであるが、映像領域13のうちの、プロジェクター1のみによる投写映像領域21、プロジェクター2のみによる投写映像領域22と、プロジェクター1とプロジェクター2による投写映像領域が重なる重複領域23を示している。
 図3はプロジェクター1に供給される映像信号による投写映像を示す図である。
 プロジェクター1、2による投写映像は、コンピュータや(DVDプレイヤー:Digital Versatile Disc Player)などの映像機器から供給される映像信号によるものであるが、映像信号が示す映像は、プロジェクターが投写面に正対しているときの図3に示すような矩形を示すものである。上述したように、複数のプロジェクターを用いるビデオウォールシステムでは、各プロジェクターからの投写映像は図1および図2に示したような歪みおよび輝度むらを伴うものであるため、歪みおよび輝度むらを相殺する図3に示す映像を実現する映像信号が供給される。
 図3において、実際に映像を表示する領域は、投写映像領域21と重複領域23から成り、その他の領域31~34には映像表示が不要となるため、コンピュータ上で幾何学補正を行う。さらにプロジェクター2の投写映像と重複する重複領域23に対しては輝度補正も行う。
 領域23の形状は設置状態によって変化することから、輝度補正データは2次元データとして作成されることが一般的である。
 データ量は、例えば、映像のレベルを下げる場合で、かつ、2次元の補正をかける場合は、アルファブレンディング用のメモリを用いるのが一般的であり、そのデータ量はアルファデータが、8ビットで、解像度が水平1024ドット、垂直768ラインの場合、1024x768x8=6291456ビット=786432バイトのデータとなる。
 上記の輝度むらを軽減するための技術として、特許文献1(特開2007-58425号公報)には、投写している映像信号の輝度レベルを調整する技術が記載されている。
 特許文献1には、複数のプロジェクターを用いて一つの画面を表示することを、簡易的かつ低コストで可能とする技術を提供することを目的とし、重複領域に相当するブレンディングエリアとブレンディング量をマスク画像としてパーソナルコンピュータから映像信号で受け取ってキャプチャするキャプチャ部と、マスク画像から得られたゲインをアルファブレンディング機能を用いて投影する映像に反映させる映像調整部とを有するプロジェクターが開示されている。
 特許文献1に記載されている具体的な映像調整は以下の通りである。
1.第1、第2のプロジェクターによる画像を投影させ、歪み補正を行う。
2.第1、第2のプロジェクターによるそれぞれの画像のキャリブレーションを行う。
3.第1、第2のプロジェクターから調整用画像を投影する。
4.パーソナルコンピュータを用いて調整用画像を確認しながら、グラディエーションを施す領域であるマスク画像の形状について、まず第1のプロジェクター調整用画像に対応するマスク画像の形状を特定し、グラディエーションを施す。つづいて同様に、ユーザは、第2のプロジェクター調整用画像に対応するマスク画像の形状を特定し、グラディエーションを施す。
5.投影されている全画面において輝度が一定になるように、第1、第2のプロジェクター調整用画像の各マスク画像のグラディエーションを調整する。
6.各プロジェクターのキャプチャ部は、調整されたマスク画像を取り込む。
7.各プロジェクターのキャプチャ部は、取り込んだマスク画像の輝度データをゲイン調整マップに変換する。
特開2007-58425号公報
 特許文献1に記載の発明では、歪み補正を行ってから調整用画像を投影し、これに基づいた補正が行われる。このように、歪み補正と輝度むら補正が別々に行われるため、調整に時間がかかるものとなる。
 輝度むらの補正は、マスク画像の領域(本願の、図2、3中の重複領域23)についてのみ行われる。上述したように、歪み補正が発生した場合の輝度むらは、本願の図2でいうと、図面左右方向の位置に応じて異なるものであるため、重複領域のみの輝度むら補正では不完全となる。
 本発明は、歪み補正および輝度むら補正を、より容易かつ確実に行うものである。
 本発明のプロジェクター補正システムは、複数台のプロジェクターにより投写を行う際に、各プロジェクターの歪み補正および輝度補正を行うプロジェクター補正システムであって、
 前記複数台のプロジェクターの投写映像を撮影するカメラと、
 前記複数台のプロジェクターの表示内容を設定して前記カメラによる撮影を行わせ、撮影結果から前記複数台のプロジェクターそれぞれの歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータを得、これらの内容を示す2次元補正データを作成して前記複数台のプロジェクターのそれぞれに送付するコンピュータと、
 前記複数台のプロジェクターのそれぞれは、
 ブレンディングデータ用メモリと、
 幾何学補正データ用メモリと、
 画像補正部と、
 前記コンピュータからの前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリのそれぞれへ格納し、入力された映像信号について、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリの格納内容を参照し、各格納内容に応じた歪み補正および輝度むら補正を前記画像補正部に行わせるCPUとを有することを特徴とする。
 本発明のプロジェクター補正方法は、複数台のプロジェクターにより投写を行う際に、各プロジェクターの歪み補正および輝度補正を行う、前記複数台のプロジェクターの投写映像を撮影するカメラを備えたプロジェクター補正システムで行われるプロジェクター補正方法であって、
 コンピュータが、前記複数台のプロジェクターの表示内容を設定して前記カメラによる撮影を行わせ、撮影結果から前記複数台のプロジェクターそれぞれの歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータを得、これらの内容を示す2次元補正データを作成して前記複数台のプロジェクターのそれぞれに送付し、
 前記複数台のプロジェクターのそれぞれが、前記コンピュータからの前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、入力された映像信号について、前記ブレンディングデータおよび前記幾何学補正データに応じた歪み補正および輝度むら補正を行うことを特徴とする。
 本発明のプロジェクターは、
 ブレンディングデータ用メモリと、
 幾何学補正データ用メモリと、
 画像補正部と、
 歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータの内容を示す2次元補正データが入力されると、前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリのそれぞれへ格納し、入力された映像信号について、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリの格納内容を参照し、各格納内容に応じた歪み補正および輝度むら補正を前記画像補正部に行わせるCPUとを有することを特徴とする。
 上記の構成による本発明では、歪み補正および輝度むら補正が、より容易かつ確実に行われる。
2台のプロジェクターの投写映像を横に繋げて、大きな映像を投写するシステムの概略構成を示す図である。 図1に示した投写映像領域および映像と同じであるが、映像領域13のうちの、プロジェクター1のみによる投写映像領域21、プロジェクター2のみによる投写映像領域22と、プロジェクター1とプロジェクター2による投写映像領域が重なる重複領域23を示している。 プロジェクター1に供給される映像信号による投写映像を示す図である。 本発明によるプロジェクター補正システムの一実施形態の構成を示すブロック図である。 プロジェクター1001~100nの要部構成を示すブロック図である。 本発明の実施形態の歪み補正および輝度むら補正に関する動作を示すフローチャートである。
 次に、本発明の実施形態について図面を参照して説明する。
 図4は、本発明によるプロジェクター補正システムの一実施形態の構成を示すブロック図である。本実施形態は、ビデオウォールシステムを構成する複数のプロジェクター1001,1002,・・・100nと、各プロジェクター1001~100n、およびカメラ200に接続されて、これらの動作を制御するパーソナルコンピュータ300から構成されている。
 パーソナルコンピュータ300は、カメラ200の撮影内容から各プロジェクター1001~100nそれぞれの投写面に対する相対位置の検出を行い、検出結果に応じて、幾何学データおよびブレンディング領域の算出を行うことにより、図3に示したような、各プロジェクターが投写すべき映像を示す2次元補正データを作成して各プロジェクターに配信する。2次元補正データの形式はBMP(Bit MaP)などの画像フォーマットを使用するのが便宜である。
 各プロジェクターでは、パーソナルコンピュータ300から配信された2次元補正データに基づいて投写映像を調整して投写する。
 図5は、プロジェクター1001~100nの要部構成を示すブロック図である。図5では、パーソナルコンピュータ300に接続されるプロジェクターをプロジェクター100とし、1台のみが接続された状態が示されている。また、プロジェクター100には、実際には投写光学系が設けられているが、図5には本発明に関する映像信号の処理系のみを示している。
 プロジェクター100は、入力部110、通信部120、出力部130、およびスケーリング部140から構成されている。スケーリング部140は、OSD(On-Screen Display)表示部141、ブレンディングデータ用メモリ142、CPU(Central Processing Unit)143、画像補正部144、幾何学補正用データ用メモリ145から構成されている。
 CPU143は、通信部120を介してパーソナルコンピュータ300より送られてきた2次元補正データに基づいて、歪み補正を行うための幾何学補正データを作成し、幾何学補正データ用メモリ145へ格納する。また、CPU143は、通信部120を介してパーソナルコンピュータ300より送られてきた2次元補正データに基づいて、輝度むら補正を行うためのブレンディングデータを作成し、ブレンディングデータ用メモリ142へ格納する。
 幾何学補正データは、図3に示した領域でいうと、映像表示が不要となる領域31~34を示すものである。また、ブレンディングデータは、輝度むら補正が必要となる投写映像領域21と重複領域23に対する補正値を示すものである。
 CPU143は、入力部110を介してパーソナルコンピュータ300から送られてきた映像信号に対し、OSD表示部110を用いてOSD表示を行わせる。また、ブレンディングデータ用メモリ142および幾何学補正データ用メモリ145の格納内容を参照し、これらの格納内容に応じた歪み補正および輝度むら補正を画像補正部144に行わせる。これらの処理が施された映像信号は、出力部130へ送られ、投写光学系を構成する表示部(不図示)へ供給されて歪み補正および輝度むら補正が施された映像が投写される。
 図6は、本実施形態の歪み補正および輝度むら補正に関する動作を示すフローチャートである。
 動作が開始されると、パーソナルコンピュータ300は、プロジェクター1001~100nにすべてが黒のテストパターンを表示させ、カメラ200に撮影させる(ステップS601)。
 次に、パーソナルコンピュータ300は、プロジェクター1001にのみ、すべて白のテストパターンを表示させ、残りのプロジェクターにはすべて黒のテストパターンを表示させてカメラ200に撮影させる。このことをすべてのプロジェクターについて順に行う(ステップS602)。ステップS601における撮影内容と比較することにより、各プロジェクターの輝度むらの状態を把握することができる。
 次に、パーソナルコンピュータ300は、プロジェクター1001にのみ、5ドットのテストパターンを表示させてカメラ200に撮影させ、この後、全面ドットのテストパターンを表示させてカメラ200に撮影する。このことをすべてのプロジェクターについて順に行う(ステップS603)。ここで、5ドットのテストパターンとは投写映像の中央および4隅に所定のドットを表示させたテストパターンであり、全面ドットのテストパターンは、投写映像全体にむらなくドットを表示させたテストパターンである。これらを撮影することにより各プロジェクターの投写映像の輪郭、形状が分かり、歪みの状態を把握することができる。
 次に、パーソナルコンピュータ300は、ステップS601~S603における各撮影結果から、各プロジェクターの、合成された映像領域に対する相対位置を検出し、幾何学補正データとブレンディングデータとを得て、これらの内容を示す、図3に示したような、各プロジェクターが投写すべき映像を示す2次元データを作成して各プロジェクターに配信する(ステップS604)。
 各プロジェクターでは、パーソナルコンピュータ300から配信された2次元補正データに基づいて投写映像を調整して投写する(ステップS605)。
 本実施形態で行われる歪み補正および輝度むら補正は、1つのビデオウォールシステムに対して一度行われる。2次元補正データが各プロジェクターに配信された後は、2次元補正データによる歪み補正および輝度むら補正は各プロジェクターごとに行われるため、歪み補正および輝度むら補正のためのパーソナルコンピュータやカメラは不要となる。
 プロジェクターへの映像信号の供給は、コンピュータや映像機器から行われるが、補正をコンピュータ内部で行う構成の場合には、コンピュータの出力映像にしか補正を行うことができず、映像機器が映像信号を供給する場合には歪み補正および輝度補正を行うことができなかった。上記のように構成される本実施形態においては、2次元補正データによる歪み補正および輝度補正がプロジェクター側で行われるので、映像信号の供給源に関わらず、確実に歪み補正および輝度補正を行うことができる。
 なお、上述した実施形態では、2次元補正データの形式をBMPとしたが、JPEG(Joint Photographic Experts Group)形式としてもよい。JPEG形式とすることで、データ量を削減することができ、2次元補正データの転送時間を短縮し、高速化を図ることができる。ここで、JPEGフォーマットは非可逆圧縮データであるが、必要な8ビットのアルファデータを同じ8ビットのY(輝度)成分に組み込むことにより、非可逆という制限を回避することができる。
 また、データ量の圧縮という観点において、連長圧縮(ランレングス圧縮、RLE:Run Length Encoding)を採用することでも同様の結果が期待できる。ほぼ同じパターンが連続する映像の場合には、連長圧縮の効果が大きなものとなる。
 上述したJPEG形式とする場合、もしくは、連長圧縮を採用する場合、演算が必要な箇所はプロジェクターの設置状態によって決定されることを踏まえ、作成するアルファデータの解像度を半減させることでも高速化が可能になる。
 2つのプロジェクターを用いたビデオウォールシステムを構成する場合、例えば、第1のプロジェクターと第2のプロジェクターの相対位置から、第1のプロジェクターにてブレンディング補正を行うのは投写画面内右半分になることがわかる。そこで作成するアルファデータの解像度を1024x768ではなく、512x768とすることで、データが半減できる。これらのデータ量軽減を行うことで、従来からのブレンディング補正処理の高速化が可能になる。
 本実施形態では、パーソナルコンピュータから配信された2次元補正データに基づいて歪補正データとブレンディングデータを得ているため、歪補正された画像領域とブレンディング補正された画像領域が必ず一致する。歪補正とブレンディングを個別に行う引用文献1に記載の発明などでは、必ずしも両者の領域が一致するとは限らない。その結果、補正後の投写画像の品質が低下するおそれがあるのに対し、本実施形態では歪補正された画像領域とブレンディング補正された画像領域が必ず一致するので、これに起因する補正後の投写画像の品質の低下は生じないものとなっている。
 また、補正用画像をファイルとして通信部を介して転送することにより、すでに補正を行った設置条件毎にファイルを用意しておけば、設置条件が異なるときにも、すぐに歪補正およびブレンディング補正を行うことができる。
 なお、一般に斜め投写を行うと、投写画像は歪の広がり方向に輝度傾斜が生ずる(引用文献1の図2でいえば右上方向の輝度が暗くなる)。本実施形態では、カメラで投写画像全体を撮像して歪補正およびブレンディングの調整を行うので、斜め投写に起因する輝度傾斜分も同時に補正することが可能となっている。
 他の実施形態として、パーソナルコンピュータから2次元補正データを配信する替わりに、補正後の画像を映像信号として出力し、プロジェクタでその画像をキャプチャして2次元補正データとして取り込んでもよい。この場合、パーソナルコンピュータによる歪の補正とブレンディング補正が終了した時点でプロジェクタが表示中の画像をキャプチャすることにより、歪補正とブレンディング補正を行うことが可能となり、調整の過程を目視することができる。
 100  プロジェクター
 110  入力部
 120  通信部
 130  出力部
 140  スケーリング部
 141  OSD表示部
 142  ブレンディングデータ用メモリ
 143  CPU
 144  画像補正部
 145  幾何学補正データ用メモリ
 200  カメラ
 300  パーソナルコンピュータ

Claims (3)

  1. 複数台のプロジェクターにより投写を行う際に、各プロジェクターの歪み補正および輝度補正を行うプロジェクター補正システムであって、
     前記複数台のプロジェクターの投写映像を撮影するカメラと、
     前記複数台のプロジェクターの表示内容を設定して前記カメラによる撮影を行わせ、撮影結果から前記複数台のプロジェクターそれぞれの歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータを得、これらの内容を示す2次元補正データを作成して前記複数台のプロジェクターのそれぞれに送付するコンピュータと、
     前記複数台のプロジェクターのそれぞれは、
     ブレンディングデータ用メモリと、
     幾何学補正データ用メモリと、
     画像補正部と、
     前記コンピュータからの前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリのそれぞれへ格納し、入力された映像信号について、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリの格納内容を参照し、各格納内容に応じた歪み補正および輝度むら補正を前記画像補正部に行わせるCPUとを有することを特徴とするプロジェクター補正システム。
  2. 複数台のプロジェクターにより投写を行う際に、各プロジェクターの歪み補正および輝度補正を行う、前記複数台のプロジェクターの投写映像を撮影するカメラを備えたプロジェクター補正システムで行われるプロジェクター補正方法であって、
     コンピュータが、前記複数台のプロジェクターの表示内容を設定して前記カメラによる撮影を行わせ、撮影結果から前記複数台のプロジェクターそれぞれの歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータを得、これらの内容を示す2次元補正データを作成して前記複数台のプロジェクターのそれぞれに送付し、
     前記複数台のプロジェクターのそれぞれが、前記コンピュータからの前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、入力された映像信号について、前記ブレンディングデータおよび前記幾何学補正データに応じた歪み補正および輝度むら補正を行うことを特徴とするプロジェクター補正方法。
  3. ブレンディングデータ用メモリと、
     幾何学補正データ用メモリと、
     画像補正部と、
     歪み補正を行うための幾何学補正データと輝度補正を行うためのブレンディングデータの内容を示す2次元補正データが入力されると、前記2次元補正データに基づいて、前記ブレンディングデータおよび前記幾何学補正データを作成し、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリのそれぞれへ格納し、入力された映像信号について、前記ブレンディングデータ用メモリおよび前記幾何学補正データ用メモリの格納内容を参照し、各格納内容に応じた歪み補正および輝度むら補正を前記画像補正部に行わせるCPUとを有することを特徴とするプロジェクター。
PCT/JP2011/071897 2011-09-26 2011-09-26 プロジェクター補正システムと方法、プロジェクター WO2013046302A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US14/347,211 US20140232738A1 (en) 2011-09-26 2011-09-26 Projection correcting system and method, and projector
PCT/JP2011/071897 WO2013046302A1 (ja) 2011-09-26 2011-09-26 プロジェクター補正システムと方法、プロジェクター

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/071897 WO2013046302A1 (ja) 2011-09-26 2011-09-26 プロジェクター補正システムと方法、プロジェクター

Publications (1)

Publication Number Publication Date
WO2013046302A1 true WO2013046302A1 (ja) 2013-04-04

Family

ID=47994420

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/071897 WO2013046302A1 (ja) 2011-09-26 2011-09-26 プロジェクター補正システムと方法、プロジェクター

Country Status (2)

Country Link
US (1) US20140232738A1 (ja)
WO (1) WO2013046302A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6658520B2 (ja) * 2014-07-01 2020-03-04 ソニー株式会社 画像処理装置および方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004336225A (ja) * 2003-05-02 2004-11-25 Seiko Epson Corp 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP2008061063A (ja) * 2006-09-01 2008-03-13 Seiko Epson Corp 情報処理装置、情報処理プログラム、及びその記録媒体
JP2011188404A (ja) * 2010-03-11 2011-09-22 Seiko Epson Corp マルチプロジェクションシステムにおける画像処理装置、マルチプロジェクションシステムにおける画像処理方法及びマルチプロジェクションシステム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6733138B2 (en) * 2001-08-15 2004-05-11 Mitsubishi Electric Research Laboratories, Inc. Multi-projector mosaic with automatic registration
JP4861967B2 (ja) * 2007-11-30 2012-01-25 株式会社リコー 画像処理装置、画像処理方法、画像処理プログラム、画像形成装置、記憶媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004336225A (ja) * 2003-05-02 2004-11-25 Seiko Epson Corp 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
JP2008061063A (ja) * 2006-09-01 2008-03-13 Seiko Epson Corp 情報処理装置、情報処理プログラム、及びその記録媒体
JP2011188404A (ja) * 2010-03-11 2011-09-22 Seiko Epson Corp マルチプロジェクションシステムにおける画像処理装置、マルチプロジェクションシステムにおける画像処理方法及びマルチプロジェクションシステム

Also Published As

Publication number Publication date
US20140232738A1 (en) 2014-08-21

Similar Documents

Publication Publication Date Title
JP5603014B2 (ja) 超解像表示の補正
JP3620537B2 (ja) 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法
US9438872B2 (en) Projection display system and method for correcting projection region
WO2019167455A1 (ja) 情報処理装置、情報処理装置の演算方法、プログラム
JP6181931B2 (ja) 投影装置、制御方法、プログラム、及び投影システム
US20190281266A1 (en) Control apparatus, readable medium, and control method
JP2017050616A (ja) 表示装置及び制御方法
JP2011040873A (ja) プロジェクター、プログラム、情報記憶媒体および露出調整方法
JP2016014713A (ja) 画像投影装置、画像投影方法および画像投影装置の制御プログラム
JP2008187362A (ja) プロジェクタおよび投写画像調整方法
JP2011188404A (ja) マルチプロジェクションシステムにおける画像処理装置、マルチプロジェクションシステムにおける画像処理方法及びマルチプロジェクションシステム
US20180278905A1 (en) Projection apparatus that reduces misalignment between printed image and projected image projected on the printed image, control method therefor, and storage medium
JP4583863B2 (ja) 画像表示システム
GB2526618A (en) Method for generating a screenshot of an image to be displayed by a multi-display system
WO2013046302A1 (ja) プロジェクター補正システムと方法、プロジェクター
JP6700942B2 (ja) 投影型表示装置及びその制御方法
JP2015165622A (ja) 画像投影装置及び画像投影方法
JP2007049496A (ja) 画像処理方法および装置
WO2020162051A1 (ja) 投射型映像表示システム
JP6439254B2 (ja) 画像投影装置、画像投影装置の制御方法、および画像投影装置の制御プログラム
KR20110095556A (ko) 영상투사장치 및 그 영상보정방법
JP2011259107A (ja) 投影装置及びその制御方法
KR20160145615A (ko) 화상 출력 장치, 화상 출력 방법 및 기록 매체
US9615070B2 (en) Video signal processing device and projection-type display device
JP6700955B2 (ja) 投影装置及び投影方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11873348

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14347211

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11873348

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP