JP5814381B2 - Image display method and image display system - Google Patents

Image display method and image display system Download PDF

Info

Publication number
JP5814381B2
JP5814381B2 JP2013534485A JP2013534485A JP5814381B2 JP 5814381 B2 JP5814381 B2 JP 5814381B2 JP 2013534485 A JP2013534485 A JP 2013534485A JP 2013534485 A JP2013534485 A JP 2013534485A JP 5814381 B2 JP5814381 B2 JP 5814381B2
Authority
JP
Japan
Prior art keywords
image
projector
screen
projection
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013534485A
Other languages
Japanese (ja)
Other versions
JPWO2013042199A1 (en
Inventor
一暁 坂元
一暁 坂元
佑輔 荻原
佑輔 荻原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp NEC Display Solutions Ltd
Original Assignee
NEC Display Solutions Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Display Solutions Ltd filed Critical NEC Display Solutions Ltd
Publication of JPWO2013042199A1 publication Critical patent/JPWO2013042199A1/en
Application granted granted Critical
Publication of JP5814381B2 publication Critical patent/JP5814381B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)

Description

本発明は、画像表示方法および画像表示システムに関する。  The present invention relates to an image display method and an image display system.

複数のプロジェクタを備えた画像表示システムにおいて、それぞれのプロジェクタからの投写画像をスクリーン上で重ね合わせるスタッキング投写方法が知られている。この方法によれば、安価なプロジェクタを用いて高輝度な映像表示を得ることが可能となる。  In an image display system including a plurality of projectors, a stacking projection method is known in which projected images from the projectors are superimposed on a screen. According to this method, it is possible to obtain a high-luminance video display using an inexpensive projector.

一方、スタッキング投写方法では、高画質の映像表示を実現するために、複数のプロジェクタからの投写画像をスクリーン上で正確に重ね合わせることが課題となる。このような課題に対して、例えば特許文献１では、２台のプロジェクタと、演算処理用のＰＣと、画像撮影用のカメラとを備えた映像投影装置において、プロジェクタから投写される投写画像の歪みを補正する方法が提案されている。  On the other hand, in the stacking projection method, in order to realize high-quality video display, it is a problem to accurately superimpose projected images from a plurality of projectors on a screen. For example, in Japanese Patent Application Laid-Open No. H10-260260, distortion of a projected image projected from a projector in a video projection apparatus including two projectors, a PC for arithmetic processing, and a camera for taking an image is disclosed. A method for correcting the above has been proposed.

特開２００１−０８３９４９号公報JP 2001-083949 A

上述の映像投影装置では、２台のプロジェクタからの投写画像がカメラで撮影され、その撮影画像がＰＣで画像処理され、投写画像の歪みを補正する補正量が計算されている。この補正量に基づいて算出された補正画像をプロジェクタから投写することで、２台のプロジェクタからの投写画像をスクリーン上に正確に重ね合わせることが可能となる。しかしながら、上述の映像投影装置では、２台のプロジェクタと、演算処理用のＰＣと、画像撮影用のカメラとを接続しなければならず、その接続は煩雑になる。また、補正画像の算出には、複雑なテストパターンを複数表示して撮影し、それに基づいて補正量を計算する必要があるため、処理が非常に複雑になる。  In the video projection apparatus described above, the projection images from the two projectors are captured by the camera, the captured images are subjected to image processing by the PC, and the correction amount for correcting the distortion of the projection image is calculated. By projecting the corrected image calculated based on the correction amount from the projector, it is possible to accurately superimpose the projected images from the two projectors on the screen. However, in the above-described video projection apparatus, it is necessary to connect two projectors, an arithmetic processing PC, and an image capturing camera, and the connection becomes complicated. In addition, the calculation of the corrected image requires a complicated test pattern to be displayed and photographed, and the correction amount needs to be calculated based on the display, so the processing becomes very complicated.

そこで本発明は、比較的簡単かつ容易な方法で、プロジェクタからの投写画像をスクリーン上で重ね合わせることができる、画像表示方法および画像表示システムを提供することを目的とする。  Accordingly, an object of the present invention is to provide an image display method and an image display system that can superimpose projected images from a projector on a screen by a relatively simple and easy method.

上述した目的を達成するために、本発明の画像表示方法は、画像を投写する投写部と、画像信号に基づいて画像を生成する画像生成部と、投写部および画像生成部の制御を行う制御部と、光軸が投写部の投写光軸と平行であって、投射部の近傍に設置された画像撮影手段とをそれぞれ有する第１および第２のプロジェクタで行われる画像表示方法であって、投写部による画像が投写されるスクリーンを、投写面が水平面に垂直となるように配置し、第１および第２のプロジェクタを、投写部による投写光軸が水平面に平行となり、かつ、スクリーン上で交差するように、スクリーンの法線に対して対称に配置するステップと、第１のプロジェクタの投写部が、所定の投写画像をスクリーンに投写するステップと、第２のプロジェクタの画像撮影手段が、スクリーン上の所定の投写画像を撮影するステップと、第２のプロジェクタの制御部が、画像撮影手段で撮影した観測画像を、投写光軸がスクリーンと交差する点を通り水平面に垂直な垂線に対して左右対称に反転させた反転画像を算出するステップと、第２のプロジェクタの制御部が、第２のプロジェクタの投写光軸とスクリーンの法線とのなす角度をパラメータとした角度評価用補正画像であって、第２のプロジェクタから投写される所定の投写画像と同じ投写画像の、スクリーンの法線方向から見た観測画像と等価である角度評価用補正画像を算出し、角度評価用補正画像が反転画像に一致するときの角度を求めるステップと、第２のプロジェクタの制御部が、求めた角度から、各プロジェクタの投写光軸の、スクリーンの法線に対する傾斜角をそれぞれ計算するステップと、各プロジェクタの画像生成部が、プロジェクタがスクリーンの法線に対して傾斜角とは正負が異なる傾斜角で傾斜した位置にあると仮定したときにプロジェクタから投写される投写画像の、スクリーンの法線方向から見た観測画像を、補正画像として生成するステップと、各プロジェクタの投写部が、各補正画像をスクリーンに投写するステップと、を含むことを特徴とする。 In order to achieve the above-described object, an image display method of the present invention includes a projection unit that projects an image, an image generation unit that generates an image based on an image signal, and a control that controls the projection unit and the image generation unit. An image display method performed by a first projector and a second projector each having a scanning unit and an image photographing unit installed in the vicinity of the projection unit, the optical axis of which is parallel to the projection optical axis of the projection unit, The screen on which the image by the projection unit is projected is arranged so that the projection plane is perpendicular to the horizontal plane, and the first and second projectors are arranged so that the projection optical axis by the projection unit is parallel to the horizontal plane and on the screen. A symmetrical arrangement with respect to the normal line of the screen so as to intersect, a step in which the projection unit of the first projector projects a predetermined projection image on the screen, and an image capture of the second projector. Means, the steps of taking a predetermined projected image on the screen, the control unit of the second projector, the observation image photographed by the image photographing means, the projection optical axis is perpendicular to the street horizontal plane that intersects the screen calculating a reverse image which is inverted symmetrically with respect to the perpendicular, the control unit of the second projector, the angular degree of the angle between the second projection optical axis and the screen of the normal of the projector as a parameter An angle evaluation correction image that is an evaluation correction image and is equivalent to an observation image viewed from the normal direction of the screen of the same projected image as the predetermined projection image projected from the second projector , and determining the angle at which the evaluation corrected image matches the inverted image, the control unit of the second projector, obtained from the angle, the projection optical axis of each projector, screen Calculating a tilt angle with respect to the line, respectively, the image generating unit of the projector, the projector when the projector is assumed the inclination angle with respect to the normal to the screen in a position inclined at an inclination angle of the positive and negative different of projected are projected image, the observed image as viewed from the normal direction of the screen, and generating a corrected image, the projection portion of the projector includes the steps of projecting a respective corrected image on a screen, the including that the Features.

また、本発明の画像表示システムは、画像を投写する投写部と、画像信号に基づいて画像を生成する画像生成部と、投写部および画像生成部の制御を行う制御部と、光軸が投写部の投写光軸と平行であって、投射部の近傍に設置された画像撮影手段とをそれぞれ有する第１および第２のプロジェクタからなる画像表示システムであって、第１のプロジェクタの投写部は、所定の投写画像をスクリーンに投写し、第２のプロジェクタの画像撮影手段は、スクリーン上の所定の投写画像を撮影し、第２のプロジェクタの制御部は、画像撮影手段で撮影した観測画像を、投写光軸がスクリーンと交差する点を通り水平面に垂直な垂線に対して左右対称に反転させた反転画像を算出した後、第２のプロジェクタの投写光軸とスクリーンの法線とのなす角度をパラメータとした角度評価用補正画像であって、第２のプロジェクタから投写される所定の投写画像と同じ投写画像の、スクリーンの法線方向から見た観測画像と等価である角度評価用補正画像を算出し、角度評価用補正画像が反転画像に一致するときの角度を求め、求めた角度から、各プロジェクタの投写光軸の、スクリーンの法線に対する傾斜角をそれぞれ計算し、各プロジェクタの画像生成部は、プロジェクタがスクリーンの法線に対して傾斜角とは正負が異なる傾斜角で傾斜した位置にあると仮定したときにプロジェクタから投写される投写画像の、スクリーンの法線方向から見た観測画像を、補正画像として生成し、各プロジェクタの投写部は、各補正画像をスクリーンに投写する、ことを特徴とする。 The image display system of the present invention includes a projection unit that projects an image, an image generation unit that generates an image based on an image signal, a control unit that controls the projection unit and the image generation unit, and an optical axis that projects. An image display system composed of first and second projectors each having image photographing means installed in the vicinity of the projection unit and parallel to the projection optical axis of the projection unit, wherein the projection unit of the first projector is The predetermined projection image is projected onto the screen, the image photographing unit of the second projector photographs the predetermined projection image on the screen, and the control unit of the second projector captures the observation image photographed by the image photographing unit. after the projection optical axis is calculated reverse image obtained by inverting symmetrically with respect to the line perpendicular to the street horizontal plane that intersects the screen, formed by the projection optical axis and the screen of the normal line of the second projector Degrees to a parameter and the angles evaluating corrective image, with the same projected image with a predetermined projection image projected from the second projector, the angle evaluation is equivalent to the observed image viewed from the normal direction of the screen calculating a corrected image, determine the angle at which the angular evaluating corrective image matches the inverted image, from the angle obtained by calculating the projection optical axes of the projectors, the inclination angle relative to the normal of the screen, respectively, each The image generation unit of the projector assumes the normal direction of the screen of the projected image projected from the projector when it is assumed that the projector is inclined at an inclination angle different from the inclination angle with respect to the normal line of the screen. the observation image viewed from to generate a corrected image, the projection portion of the projectors projects the respective corrected image on a screen, characterized in that.

以上、本発明によれば、比較的簡単かつ容易な方法で、プロジェクタからの投写画像をスクリーン上で重ね合わせることができる、画像表示方法および画像表示システムを提供することができる。  As described above, according to the present invention, it is possible to provide an image display method and an image display system that can superimpose projected images from a projector on a screen in a relatively simple and easy manner.

本発明の画像表示システムの一実施形態を示すブロック図である。It is a block diagram which shows one Embodiment of the image display system of this invention. 本実施形態の画像表示システムの第１のプロジェクタから投写される投写画像とその観測画像を示す図である。It is a figure which shows the projection image projected from the 1st projector of the image display system of this embodiment, and its observation image. 本実施形態の画像表示システムの第１のプロジェクタから投写される投写画像とその観測画像を示す図である。It is a figure which shows the projection image projected from the 1st projector of the image display system of this embodiment, and its observation image. 本実施形態の画像表示システムの第２のプロジェクタから投写される投写画像とその観測画像を示す図である。It is a figure which shows the projection image projected from the 2nd projector of the image display system of this embodiment, and its observation image. 本実施形態の画像表示システムの第２のプロジェクタから投写される投写画像とその観測画像を示す図である。It is a figure which shows the projection image projected from the 2nd projector of the image display system of this embodiment, and its observation image. 本実施形態の画像表示システムの第１のプロジェクタから投写される補正画像を示す図である。It is a figure which shows the correction | amendment image projected from the 1st projector of the image display system of this embodiment. 本実施形態の画像表示システムの第２のプロジェクタから投写される補正画像を示す図である。It is a figure which shows the correction | amendment image projected from the 2nd projector of the image display system of this embodiment. 本実施形態の画像表示システムの第１のプロジェクタから投写される補正画像とその観測画像を示す図である。It is a figure which shows the correction | amendment image projected from the 1st projector of the image display system of this embodiment, and its observation image. 本発明の画像表示方法の一実施形態を示すフローチャートである。It is a flowchart which shows one Embodiment of the image display method of this invention.

以下、図面を参照して、本発明の実施の形態について説明する。  Embodiments of the present invention will be described below with reference to the drawings.

図１は、本発明の画像表示システムの一実施形態を示す概略平面図であり、鉛直方向から見た図である。  FIG. 1 is a schematic plan view showing an embodiment of the image display system of the present invention, as seen from the vertical direction.

画像表示システム１は、２台のプロジェクタ１０，２０から構成されている。２台のプロジェクタ１０，２０は、投写面が水平面と垂直となるように配置されたスクリーン２に対して、それぞれの光軸Ａ，Ｂが水平面に平行となり、かつ、スクリーン２上で交差するように、スクリーン２の法線Ｘに対して対称に設置されている。すなわち、第１のプロジェクタ１０の光軸Ａがスクリーン２の法線Ｘに対してφだけ傾いており、第２のプロジェクタ２０の光軸Ｂがスクリーン２の法線Ｘに対して−φだけ傾いている。また、スクリーン２からの距離が、第１のプロジェクタ１０と第２のプロジェクタ２０とで同一である。  The image display system 1 includes two projectors 10 and 20. The two projectors 10 and 20 are arranged so that the optical axes A and B are parallel to the horizontal plane and intersect on the screen 2 with respect to the screen 2 arranged so that the projection plane is perpendicular to the horizontal plane. Are arranged symmetrically with respect to the normal X of the screen 2. That is, the optical axis A of the first projector 10 is inclined by φ with respect to the normal line X of the screen 2, and the optical axis B of the second projector 20 is inclined by −φ with respect to the normal line X of the screen 2. ing. Further, the distance from the screen 2 is the same between the first projector 10 and the second projector 20.

各プロジェクタ１０，２０は、画像を投写する投写部１１，２１と、画像信号に基づいて画像を生成する画像生成部１２，２２と、投写部１１，２１および画像生成部１２，２２の制御を行う制御部１３，２３と、を有している。また、各プロジェクタ１０，２０は、スクリーンに投写された画像を撮影する内蔵カメラ（画像撮影手段）と、を備えている。内蔵カメラ１４，２４は、その光軸がプロジェクタ１０，２０の投写部１１，２１の光軸Ａ，Ｂとそれぞれ平行であって、それぞれ投写部１１，２１の近傍な位置に内蔵されている。各プロジェクタ１０，２０の制御部１３，２３同士は、通信手段３により通信可能に接続され、相互に信号などの授受が可能である。なお、図示した実施形態では、有線の通信手段３が用いられているが、無線の通信可能を用いることもできる。  The projectors 10 and 20 control the projection units 11 and 21 that project images, the image generation units 12 and 22 that generate images based on image signals, and the projection units 11 and 21 and the image generation units 12 and 22. And control units 13 and 23 to perform. Each projector 10, 20 includes a built-in camera (image capturing unit) that captures an image projected on the screen. The built-in cameras 14 and 24 have their optical axes parallel to the optical axes A and B of the projection units 11 and 21 of the projectors 10 and 20, respectively, and are built in positions near the projection units 11 and 21, respectively. The control units 13 and 23 of the projectors 10 and 20 are communicably connected by the communication means 3 and can exchange signals and the like with each other. In the illustrated embodiment, the wired communication means 3 is used, but wireless communication is also possible.

なお、ハーフミラーやプリズム等を使用して、投写部の光軸と内蔵カメラの光軸を完全に一致させるように構成することもできる。  Note that a half mirror, a prism, or the like can be used so that the optical axis of the projection unit and the optical axis of the built-in camera are completely matched.

図２Ａから図５には、図１に示す各プロジェクタから投写される投写画像と、その観測画像が示されている。各図に示す破線は、プロジェクタの光軸方向から見たときの、プロジェクタの投写画像を表しており、言い換えれば、プロジェクタの光軸に垂直な仮想的なスクリーンに投写される画像を表している。また、各図に示す実線は、スクリーンに対して傾斜した位置にあるプロジェクタからスクリーンに投写された投写画像を、所定の位置から観測した観測画像を表している。  2A to 5 show a projected image projected from each projector shown in FIG. 1 and an observed image thereof. The broken line shown in each figure represents the projected image of the projector when viewed from the optical axis direction of the projector, in other words, the image projected on a virtual screen perpendicular to the optical axis of the projector. . Moreover, the solid line shown in each figure represents an observation image obtained by observing a projection image projected on a screen from a projector at a position inclined with respect to the screen from a predetermined position.

実際には、投写部の光軸と内蔵カメラの光軸とは厳密には一致していないが、投写距離に対して投写部と内蔵カメラの距離が充分小さければ、両者の光軸は一致しているものとして扱っても画像補正には支障はない。  Actually, the optical axis of the projection unit and the optical axis of the built-in camera are not exactly the same, but if the distance between the projection unit and the built-in camera is sufficiently small relative to the projection distance, the optical axes of the two will match. The image correction is not a problem even if it is treated as being.

また、投写部と内蔵カメラ間の距離は既知であり、必要であれば予め補正用のデータを用意しておくことも可能である。Further, the distance between the projection unit and the built-in camera is known, and if necessary, correction data can be prepared in advance.

図２Ａは、第１のプロジェクタ１０からスクリーン２に対して投写された、画像補正しない全白画面の投写画像１０ａを、スクリーン２の正面方向（法線方向）から見た観測画像１０ｂを示している。すなわち、この観測画像１０ｂは、投写画像１０ａを、スクリーン２の正面方向を基準にした第１のプロジェクタ１０の回転角φだけ回転させて得られた画像であるといえる。  FIG. 2A shows an observed image 10b of the projected image 10a of the all-white screen that is projected from the first projector 10 onto the screen 2 and is not image-corrected, as viewed from the front direction (normal direction) of the screen 2. Yes. That is, the observed image 10b can be said to be an image obtained by rotating the projection image 10a by the rotation angle φ of the first projector 10 with respect to the front direction of the screen 2.

また、図２Ｂは、第１のプロジェクタ１０からスクリーン２に対して投写された、画像補正しない全白画面の投写画像１０ａを、第２のプロジェクタ２０の内蔵カメラ２４で撮影した観測画像１０ｃを示している。すなわち、この観測画像１０ｃは、投写画像１０ａを、第２のプロジェクタ２０の光軸方向を基準にした第１のプロジェクタ１０の回転角２φだけ回転させて得られた画像であるといえる。  FIG. 2B shows an observation image 10c obtained by projecting the projected image 10a of the all-white screen projected from the first projector 10 onto the screen 2 with the built-in camera 24 of the second projector 20. ing. That is, the observed image 10c can be said to be an image obtained by rotating the projection image 10a by the rotation angle 2φ of the first projector 10 with respect to the optical axis direction of the second projector 20.

図３Ａは、第２のプロジェクタ２０からスクリーン２に対して投写された、画像補正しない全白画面の投写画像２０ａを、スクリーン２の正面方向から見た観測画像２０ｂを示している。すなわち、この観測画像２０ｂは、投写画像２０ａを、スクリーン２の正面方向を基準にした第２のプロジェクタ２０の回転角−φだけ回転させて得られた画像であるといえる。  FIG. 3A shows an observation image 20 b that is projected from the second projector 20 onto the screen 2 and that is a projection image 20 a of an all-white screen that is not image-corrected, as viewed from the front of the screen 2. That is, the observed image 20b can be said to be an image obtained by rotating the projection image 20a by the rotation angle −φ of the second projector 20 with respect to the front direction of the screen 2.

また、図３Ｂは、第２のプロジェクタ２０からスクリーン２に対して投写された、画像補正しない全白画面の投写画像２０ａを、第１のプロジェクタ１０の内蔵カメラ１４で撮影した観測画像２０ｃを示している。すなわち、この観測画像２０ｃは、投写画像２０ａを、第１のプロジェクタ１０の光軸方向を基準にした第２のプロジェクタ２０の回転角−２φだけ回転させて得られた画像であるといえる。  FIG. 3B shows an observed image 20c obtained by projecting the projected image 20a of the whole white screen projected from the second projector 20 onto the screen 2 with the built-in camera 14 of the first projector 10 without image correction. ing. That is, the observed image 20c can be said to be an image obtained by rotating the projection image 20a by the rotation angle −2φ of the second projector 20 with respect to the optical axis direction of the first projector 10.

以上のことから、第１のプロジェクタ１０では、図２Ａに示す投写画像１０ａを観測画像１０ｂとは逆回転、つまり−φだけ回転させるように補正した補正画像をスクリーン２に投写することで、スクリーン２の正面方向から見て投写画像１０ａのように見えることがわかる。このときの補正画像を図４Ａに示している。補正画像１０ｄは、図３Ａに示す観測画像２０ｂと等価であり、したがって、第１のプロジェクタがスクリーンの法線に対して−φだけ傾斜した位置にあるとしたときに第１のプロジェクタからスクリーンに投写された、画像補正しない全白画面の、スクリーンの法線方向から見た観測画像と等価である。  From the above, the first projector 10 projects the corrected image corrected so as to rotate the projected image 10a shown in FIG. 2A in the reverse rotation to the observed image 10b, that is, by −φ, on the screen 2. As can be seen from the front direction of FIG. The corrected image at this time is shown in FIG. 4A. The corrected image 10d is equivalent to the observed image 20b shown in FIG. 3A. Therefore, when the first projector is at a position inclined by −φ with respect to the normal line of the screen, the first projector moves from the screen to the screen. This is equivalent to the observed image of the projected white screen without image correction, viewed from the normal direction of the screen.

同様に、第２のプロジェクタ２０では、図３Ａに示す投写画像２０ａを観測画像２０ｂとは逆回転、つまりφだけ回転させるように補正した補正画像をスクリーン２に対して投写することで、スクリーン２の正面方向から見て投写画像２０ａのように見ることができる。このときの補正画像２０ｄを図４Ｂに示している。補正画像２０ｄは、図２Ａに示す観測画像１０ｂと等価であり、したがって、第２のプロジェクタがスクリーンの法線に対してφだけ傾斜した位置にあるとしたときに第２のプロジェクタからスクリーンに投写された、画像補正しない全白画面の、スクリーンの法線方向から見た観測画像と等価である。  Similarly, the second projector 20 projects the corrected image corrected so that the projected image 20a shown in FIG. The projected image 20a can be seen from the front direction. The corrected image 20d at this time is shown in FIG. 4B. The corrected image 20d is equivalent to the observed image 10b shown in FIG. 2A. Therefore, when the second projector is at a position inclined by φ with respect to the normal line of the screen, the second image is projected onto the screen. This is equivalent to an observed image of an all-white screen that is not image corrected, viewed from the normal direction of the screen.

したがって、スクリーン２の正面方向を基準とした各プロジェクタ１０，２０の回転角（傾斜角）φ，−φを求めることができれば、スクリーン２の正面から見たときに正しく観測するための補正画像１０ｄ，２０ｄを得ることができる。  Therefore, if the rotation angles (tilt angles) φ and −φ of the projectors 10 and 20 with respect to the front direction of the screen 2 can be obtained, the corrected image 10d for correctly observing when viewed from the front of the screen 2 is obtained. , 20d can be obtained.

ここで、図２Ｂおよび図６を参照して、各プロジェクタの傾斜角を算出して、図４Ａおよび図４Ｂに示す補正画像を生成し、スクリーンに投写するまでの本実施形態の画像表示方法について説明する。図６は、本実施形態の画像表示方法のフローチャートである。  Here, referring to FIG. 2B and FIG. 6, the image display method of the present embodiment from the calculation of the tilt angle of each projector to the generation of the corrected images shown in FIG. 4A and FIG. 4B and projection onto the screen. explain. FIG. 6 is a flowchart of the image display method of the present embodiment.

第２のプロジェクタ２０の内蔵カメラ２４で撮影した画像が正しい観測画像１０ｅ（図５参照）となるように、第１のプロジェクタ１０の投写画像を補正すると、図５の破線で示す補正画像１０ｆとなる。この補正画像１０ｆは、図２Ｂに示す観測画像１０ｃの、垂線に対する左右対称な画像である。上述したように、この観測画像１０ｃは、第１のプロジェクタ１０の投写画像１０ａを、第２のプロジェクタ２０の光軸方向を基準とした第１のプロジェクタ１０の回転角２φだけ回転させて得られた画像であるといえる。したがって、以下のような手順で、プロジェクタ１０，２０の傾斜角φを求めることができる。  When the projection image of the first projector 10 is corrected so that the image captured by the built-in camera 24 of the second projector 20 becomes a correct observation image 10e (see FIG. 5), a corrected image 10f indicated by a broken line in FIG. Become. This corrected image 10f is a left-right symmetric image of the observed image 10c shown in FIG. As described above, the observation image 10c is obtained by rotating the projection image 10a of the first projector 10 by the rotation angle 2φ of the first projector 10 with the optical axis direction of the second projector 20 as a reference. It can be said that it is an image. Therefore, the inclination angle φ of the projectors 10 and 20 can be obtained by the following procedure.

まず、スクリーン２と、第１および第２のプロジェクタ１０，２０とを、図１に示す位置になるように配置する（ステップＳ１）。そして、第１のプロジェクタ１０の投写部１１が、画像補正しない全白画面をスクリーン２に投写し（ステップＳ２）、スクリーン２上のその投写画像を第２のプロジェクタ２０の内蔵カメラ２４が撮影する（ステップＳ３）。次に、第２のプロジェクタ２０の制御部２３が、撮影した観測画像を垂線に対して反転させた反転画像を算出し（ステップＳ４）、その後、上述したような角度をパラメータとした画像補正により角度算出用補正画像を算出する。そして、この角度算出用補正画像が上述の反転画像と一致するときの角度を求める（ステップＳ５）と、このときの角度が２φとなる。こうして、各プロジェクタ１０，２０の傾斜角（スクリーン２の法線Ｘに対する各光軸１０ａ，１０ｂの傾斜角）φが、第２のプロジェクタ２０の制御部２３で計算される（ステップＳ６）。求めた傾斜角φの情報は、それぞれの画像信号と共に各プロジェクタ１０，２０の画像生成部１２，２２に送られ、それらに基づいて、画像生成部１２，２２が、図４Ａおよび図４Ｂに示すような補正画像を生成する（ステップＳ７）。その補正画像を各プロジェクタ１０，２０の投写部１１，２１がスクリーン２に投写する（ステップＳ８）。  First, the screen 2 and the first and second projectors 10 and 20 are arranged so as to be in the positions shown in FIG. 1 (step S1). Then, the projection unit 11 of the first projector 10 projects an all-white screen without image correction on the screen 2 (step S2), and the built-in camera 24 of the second projector 20 captures the projected image on the screen 2. (Step S3). Next, the control unit 23 of the second projector 20 calculates an inverted image obtained by inverting the captured observation image with respect to the perpendicular (step S4), and then performs image correction using the angle as a parameter as described above. An angle calculation corrected image is calculated. Then, when the angle at which the angle calculation correction image matches the above-described inverted image is obtained (step S5), the angle at this time becomes 2φ. In this way, the inclination angle (inclination angle of each optical axis 10a, 10b with respect to the normal X of the screen 2) φ is calculated by the control unit 23 of the second projector 20 (step S6). The information of the obtained inclination angle φ is sent to the image generation units 12 and 22 of the projectors 10 and 20 together with the respective image signals. Based on the information, the image generation units 12 and 22 are shown in FIGS. 4A and 4B. Such a corrected image is generated (step S7). The corrected images are projected on the screen 2 by the projection units 11 and 21 of the projectors 10 and 20 (step S8).

このようにして、各プロジェクタ１０，２０からの投写画像（補正画像）をスクリーン２上で重ね合わせることができる。  In this way, the projected images (corrected images) from the projectors 10 and 20 can be superimposed on the screen 2.

１ 画像表示システム
２ スクリーン
３ 通信手段
１０ 第１のプロジェクタ
２０ 第２のプロジェクタ
Ａ，Ｂ 光軸
１１、２１ 投写部
１２，２２ 画像生成部
１３，２３ 制御部
１４，２４ 内蔵カメラ
１０ａ，２０ａ 投写画像
１０ｂ，１０ｃ，２０ｂ，２０ｃ，１０ｅ 観測画像
１０ｄ，１０ｆ，２０ｄ 補正画像DESCRIPTION OF SYMBOLS 1 Image display system 2 Screen 3 Communication means 10 1st projector 20 2nd projector A, B Optical axis 11, 21 Projection part 12, 22 Image generation part 13, 23 Control part 14, 24 Built-in camera 10a, 20a Projection image 10b, 10c, 20b, 20c, 10e Observation image 10d, 10f, 20d Correction image

Claims (4)

画像を投写する投写部と、画像信号に基づいて画像を生成する画像生成部と、前記投写部および画像生成部の制御を行う制御部と、光軸が前記投写部の投写光軸と平行であって、前記投写部の近傍に配置された画像撮影手段とをそれぞれ有する第１および第２のプロジェクタで行われる画像表示方法であって、
前記投写部による画像が投写されるスクリーンを、投写面が水平面に垂直となるように配置し、前記第１および第２のプロジェクタを、前記投写部による前記投写光軸が前記水平面に平行となり、かつ、前記スクリーン上で交差するように、前記スクリーンの法線に対して対称に配置するステップと、
前記第１のプロジェクタの前記投写部が、所定の投写画像を前記スクリーンに投写するステップと、
前記第２のプロジェクタの前記画像撮影手段が、前記スクリーン上の前記所定の投写画像を撮影するステップと、
前記第２のプロジェクタの前記制御部が、前記画像撮影手段で撮影した観測画像を、前記投写光軸が前記スクリーンと交差する点を通り前記水平面に垂直な垂線に対して左右対称に反転させた反転画像を算出するステップと、
前記第２のプロジェクタの前記制御部が、前記第２のプロジェクタの前記投写光軸と前記スクリーンの前記法線とのなす角度をパラメータとした角度評価用補正画像であって、前記第２のプロジェクタから投写される前記所定の投写画像と同じ投写画像の、前記スクリーンの法線方向から見た観測画像と等価である角度評価用補正画像を算出し、該角度評価用補正画像が前記反転画像に一致するときの前記角度を求めるステップと、
前記第２のプロジェクタの前記制御部が、前記求めた角度から、前記各プロジェクタの前記投写光軸の、前記スクリーンの前記法線に対する傾斜角をそれぞれ計算するステップと、
前記各プロジェクタの前記画像生成部が、該プロジェクタが前記スクリーンの前記法線に対して前記傾斜角とは正負が異なる傾斜角で傾斜した位置にあると仮定したときに前記プロジェクタから投写される投写画像の、前記スクリーンの法線方向から見た観測画像を、補正画像として生成するステップと、
前記各プロジェクタの前記投写部が、前記各補正画像を前記スクリーンに投写するステップと、を含むことを特徴とする、画像表示方法。 A projection unit that projects an image, an image generation unit that generates an image based on an image signal, a control unit that controls the projection unit and the image generation unit, and an optical axis that is parallel to a projection optical axis of the projection unit An image display method performed by the first and second projectors each having an image photographing unit disposed in the vicinity of the projection unit,
A screen on which an image by the projection unit is projected is arranged so that a projection plane is perpendicular to a horizontal plane, and the first and second projectors are arranged such that the projection optical axis by the projection unit is parallel to the horizontal plane, And arranging symmetrically with respect to the normal of the screen so as to intersect on the screen;
The projection unit of the first projector projecting a predetermined projection image on the screen;
The image photographing means of the second projector photographing the predetermined projected image on the screen;
The control unit of the second projector inverts the observation image captured by the image capturing unit symmetrically with respect to a perpendicular line passing through a point where the projection optical axis intersects the screen and perpendicular to the horizontal plane . Calculating a reverse image;
The control unit of the second projector, the said angle between the projection optical axis and the normal line of the screen of the second projector a parameter and the angles evaluation corrected image, the second An angle evaluation correction image equivalent to an observation image viewed from the normal direction of the screen of the same projection image as the predetermined projection image projected from the projector is calculated, and the angle evaluation correction image is the inverted image. Obtaining the angle when matching
The control unit of the second projector calculates an inclination angle of the projection optical axis of each projector with respect to the normal line of the screen from the obtained angle,
Projection projected from the projector when the image generation unit of each projector assumes that the projector is in a position inclined at an inclination angle different from the inclination angle with respect to the normal line of the screen. image, the observed image as viewed from the normal direction of the screen and generating a corrected image,
Wherein the projection portion of the projector, and wherein each of said corrected image comprising the steps of: projecting said screen, including that the image display method. 前記傾斜角は、前記算出角度の１／２である、請求項１に記載の画像表示方法。  The image display method according to claim 1, wherein the tilt angle is ½ of the calculated angle. 前記所定の投写画像は、画像補正しない全白画面である、請求項１または２に記載の画像表示方法。  The image display method according to claim 1, wherein the predetermined projection image is an all-white screen without image correction. 画像を投写する投写部と、画像信号に基づいて画像を生成する画像生成部と、前記投写部および画像生成部の制御を行う制御部と、光軸が前記投写部の投写光軸と平行であって、前記投写部の近傍に配置された画像撮影手段とをそれぞれ有する第１および第２のプロジェクタからなる画像表示システムであって、
前記第１のプロジェクタの前記投写部は、所定の投写画像をスクリーンに投写し、
前記第２のプロジェクタの前記画像撮影手段は、前記スクリーン上の前記所定の投写画像を撮影し、
前記第２のプロジェクタの前記制御部は、前記画像撮影手段で撮影した観測画像を、前記投写光軸が前記スクリーンと交差する点を通り前記水平面に垂直な垂線に対して左右対称に反転させた反転画像を算出した後、前記第２のプロジェクタの前記投写光軸と前記スクリーンの前記法線とのなす角度をパラメータとした角度評価用補正画像であって、前記第２のプロジェクタから投写される前記所定の投写画像と同じ投写画像の、前記スクリーンの法線方向から見た観測画像と等価である角度評価用補正画像を算出し、該角度評価用補正画像が前記反転画像に一致するときの前記角度を求め、該求めた角度から、前記各プロジェクタの前記投写光軸の、前記スクリーンの前記法線に対する傾斜角をそれぞれ計算し、
前記各プロジェクタの前記画像生成部は、該プロジェクタが前記スクリーンの前記法線に対して前記傾斜角とは正負が異なる傾斜角で傾斜した位置にあると仮定したときに前記プロジェクタから投写される投写画像の、前記スクリーンの法線方向から見た観測画像を、補正画像として生成し、
前記各プロジェクタの前記投写部は、前記各補正画像を前記スクリーンに投写する、
ことを特徴とする、画像表示システム。 A projection unit that projects an image, an image generation unit that generates an image based on an image signal, a control unit that controls the projection unit and the image generation unit, and an optical axis that is parallel to a projection optical axis of the projection unit An image display system comprising first and second projectors each having image photographing means arranged in the vicinity of the projection unit,
The projection unit of the first projector projects a predetermined projection image on a screen,
The image photographing means of the second projector photographs the predetermined projection image on the screen;
The control unit of the second projector inverts the observation image photographed by the image photographing means symmetrically with respect to a perpendicular line passing through a point where the projection optical axis intersects the screen and perpendicular to the horizontal plane . after calculating the reverse image, a second of said projection optical axis aNGLE evaluating corrective image an angle as a parameter and the normal line of the screen of the projector, is projected from the second projector that the same projected image and the predetermined projection image, to calculate the observed image and the angle evaluation corrected image is equivalent when viewed from the normal direction of the screen, when the angle evaluation correction image matches the reverse image And calculating an inclination angle of the projection optical axis of each projector with respect to the normal line of the screen from the obtained angle,
The image generation unit of each projector projects projection from the projector when it is assumed that the projector is inclined at an inclination angle different from the inclination angle with respect to the normal line of the screen. An observed image viewed from the normal direction of the screen of the image is generated as a corrected image,
The projection unit of each projector projects each corrected image on the screen .
An image display system characterized by that.
JP2013534485A 2011-09-20 2011-09-20 Image display method and image display system Expired - Fee Related JP5814381B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/071373 WO2013042199A1 (en) 2011-09-20 2011-09-20 Image display method and image display system

Publications (2)

Publication Number Publication Date
JPWO2013042199A1 JPWO2013042199A1 (en) 2015-03-26
JP5814381B2 true JP5814381B2 (en) 2015-11-17

Family

ID=47914012

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013534485A Expired - Fee Related JP5814381B2 (en) 2011-09-20 2011-09-20 Image display method and image display system

Country Status (2)

Country Link
JP (1) JP5814381B2 (en)
WO (1) WO2013042199A1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3620537B2 (en) * 2003-05-02 2005-02-16 セイコーエプソン株式会社 Image processing system, projector, program, information storage medium, and image processing method
JP2005229282A (en) * 2004-02-12 2005-08-25 Seiko Epson Corp Projector and multi-projection display
JP4258540B2 (en) * 2006-09-01 2009-04-30 セイコーエプソン株式会社 Information processing apparatus, information processing program, and recording medium thereof

Also Published As

Publication number Publication date
WO2013042199A1 (en) 2013-03-28
JPWO2013042199A1 (en) 2015-03-26

Similar Documents

Publication Publication Date Title
JP6721065B2 (en) Imaging device, image processing device and method
JP5401940B2 (en) Projection optical system zoom ratio measurement method, projection image correction method using the zoom ratio measurement method, and projector for executing the correction method
WO2012063467A1 (en) Image processing device, image processing method, program, and imaging device
JP6135848B2 (en) Imaging apparatus, image processing apparatus, and image processing method
CN102404537B (en) Projector and method of controlling projector
JP2005347790A (en) Projector provided with trapezoidal distortion correction apparatus
KR20150120066A (en) System for distortion correction and calibration using pattern projection, and method using the same
JP2013066121A (en) Imaging apparatus, monitoring camera and method for masking camera screen
JP6128458B2 (en) Imaging apparatus and image processing method
JP2011247976A5 (en)
JP2004228824A (en) Stack projection device and its adjusting method
JP2010130628A (en) Imaging apparatus, image compositing device and image compositing method
CN108260360B (en) Scene depth calculation method and device and terminal
TWI615808B (en) Image processing method for immediately producing panoramic images
JP7271215B2 (en) SYNCHRONIZATION CONTROL DEVICE, SYNCHRONIZATION CONTROL METHOD, AND PROGRAM
US10140687B1 (en) Real time wide angle video camera system with distortion correction
JP5814381B2 (en) Image display method and image display system
US20150281674A1 (en) Stereo adapter and stereo imaging apparatus
JP2015095670A (en) Imaging apparatus, control method thereof and control program
JP4168024B2 (en) Stack projection apparatus and adjustment method thereof
JP6172771B2 (en) Image display device, image display system, and image control method
JP2008067081A (en) Portable imaging display device
JP2005024618A (en) Projector having tilt angle measuring instrument
JP2006287274A (en) Imaging device and stereoscopic image generating system employing the same
JP7515265B2 (en) Image capture device, image processing device control method, and image capture system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150825

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150917

R150 Certificate of patent or registration of utility model

Ref document number: 5814381

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees