WO2019188046A1 - 投影システム、投影制御装置、投影制御方法、投影制御プログラム - Google Patents

投影システム、投影制御装置、投影制御方法、投影制御プログラム Download PDF

Info

Publication number
WO2019188046A1
WO2019188046A1 PCT/JP2019/008654 JP2019008654W WO2019188046A1 WO 2019188046 A1 WO2019188046 A1 WO 2019188046A1 JP 2019008654 W JP2019008654 W JP 2019008654W WO 2019188046 A1 WO2019188046 A1 WO 2019188046A1
Authority
WO
WIPO (PCT)
Prior art keywords
projection
image
region
control
shielding
Prior art date
Application number
PCT/JP2019/008654
Other languages
English (en)
French (fr)
Inventor
永原　暁子
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2020509767A priority Critical patent/JP6872076B2/ja
Publication of WO2019188046A1 publication Critical patent/WO2019188046A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor

Definitions

  • the present invention relates to a projection system, a projection control apparatus, a projection control method, and a projection control program.
  • Patent Document 1 describes a system that projects a display image onto a screen from a rear projection device disposed on the back side of the screen.
  • the screen is photographed by a photographing device arranged on the front side of the screen, and the photographed image obtained by this photographing is compared with the display image projected from the rear projection device, and projected onto the screen.
  • the occlusion area obstructed by the object in the displayed image is detected.
  • the image of a shielding area is complemented by projecting an image from this front projection apparatus arrange
  • Patent Document 1 As described in Patent Document 1, various effects are possible by detecting a shielding area formed on a screen and projecting some image onto the shielding area. However, in Patent Document 1, it is only assumed that the shielding area is complemented, and sufficient rendering cannot be performed.
  • the present invention has been made in view of the above circumstances, and a projection system, a projection control apparatus, a projection control method, and a projection that enable various effects by controlling a projection image according to a shielding area in a display image.
  • An object is to provide a control program.
  • the projection system of the present invention includes a first projection device that projects a first image on a first surface side of a projection target that can transmit a part of light, and the projection target that is provided to the first projection device.
  • An imaging apparatus disposed on the opposite side of the first projection apparatus, a second projection apparatus disposed on the opposite side of the first projection apparatus with the projection object interposed therebetween, and the projection object captured by the imaging apparatus. Shielding between the first projection device and the projection object in the first image projected on the projection object based on the captured image of the second surface opposite to the first surface
  • the shape of the shielding area detected by the shielding area detection unit that detects the shielding area caused by an object matches the specific shape stored in advance, corresponding to the specific shape
  • the first projection device displays a predetermined image.
  • a projection control unit having a control unit of projecting from one or both of the fine the second projection device in which comprises a.
  • the projection control device of the present invention is the projection control device used in the projection system.
  • the projection control method of the present invention with respect to the first projection device that projects the first image on the first surface side of the projection object that can transmit a part of the light, The first image projected on the projection object based on the photographed image of the second surface opposite to the first surface of the projection object photographed by the arranged photographing device.
  • a shielding region detecting step for detecting a shielding region caused by a shielding object between the first projection device and the projection object, and a specification in which the shape of the shielding region detected by the shielding region detecting step is stored in advance.
  • the projection control program of the present invention is arranged on the opposite side of the projection object with respect to the first projection apparatus that projects the first image on the first surface side of the projection object that can transmit a part of light.
  • the first image projected on the projection object based on the photographed image of the second surface opposite to the first surface of the projection object photographed by the arranged photographing device.
  • a shielding region detecting step for detecting a shielding region caused by a shielding object between the first projection device and the projection object, and a specification in which the shape of the shielding region detected by the shielding region detecting step is stored in advance.
  • a second image arranged on the opposite side of the first projection device and the first projection device with the projection object sandwiched between them when the shape matches the shape.
  • a control step of projecting Luo the projection target is for causing a computer to execute the.
  • a projection system a projection control apparatus, a projection control method, and a projection control program that enable various effects by controlling a projection image in accordance with a shielding area in a display image.
  • FIG. 2 is a block diagram showing an internal configuration of a control device 50.
  • FIG. It is a functional block diagram of the control part 50A of the control apparatus 50 shown in FIG.
  • It is a flowchart which shows the flow of a series of processes of 50 A of control parts at the time of image projection.
  • It is a flowchart which shows the content of step S5 of FIG.
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on the image information D1 and the image information D2 read out in step S5b of FIG.
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on image information D1 read out in step S5c of FIG. (A) shows a state where a display image is projected, (b) shows a state where a shielding area is generated, and (c) shows a state where an effect process has been performed.
  • FIG. 6 is a schematic diagram for explaining an example of effects based on image information D1 and image information D3 read out in step S5b of FIG.
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on image information D1 read out in step S5c of FIG. (A) shows a state where a display image is projected, (b) shows a state where a shielding area is generated, and (c) shows a state where an effect process has been performed.
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on image information D1 read out in step S5c of FIG.
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on the image information D1 and the image information D3 read out in step S5b of FIG. 5, where (a) shows a state in which a display image is projected, and (b) The state which the shielding area
  • FIG. 6 is a schematic diagram for explaining an example of an effect based on the image information D1 and the image information D3 read out in step S5b of FIG. 5, and (a) and (b) show a state where the effect process has been performed.
  • FIG. 1 is a diagram showing a configuration of a projection system according to the first embodiment of the present invention.
  • a projection system 1 shown in FIG. 1 is preferably used in a presentation or presentation on a stage, and displays an image by projection onto a screen 40.
  • the projection system 1 includes a first projection device 10, a second projection device 20, a photographing device 30, a screen 40 as a projection target, and a control device 50.
  • the screen 40 is a transmissive screen that can transmit part of light.
  • the screen 40 is a planar member, and has an observation surface 40a directed to the observer and a back surface 40b opposite to the observation surface 40a.
  • the screen 40 only needs to have a property capable of diffusing the projected light to each of the observation surface 40a and the back surface 40b.
  • a screen made of vinyl, acrylic, glass, or the like is used. It is done.
  • the screen 40 is made of an opaque material so that the photographing apparatus 30 does not capture an image other than the image projected on the screen 40.
  • the observation surface 40a constitutes a first surface
  • the back surface 40b constitutes a second surface.
  • the first projection device 10 and the second projection device 20 each project and display an image.
  • a device equipped with a light valve such as a liquid crystal display element or DMD (Digital Micromirror Device: registered trademark). Etc. are used.
  • the imaging device 30 shoots a subject with an imaging element such as a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor, and processes and processes the photographic image signal output from the imaging element. Generate an image.
  • an imaging element such as a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor, and processes and processes the photographic image signal output from the imaging element. Generate an image.
  • the photographed image generated by the photographing device 30 is transmitted to the control device 50.
  • the imaging device 30 converts visible light from a subject into a captured image.
  • the first projection device 10 is disposed on the observation surface 40 a side of the screen 40.
  • the second projection device 20 and the imaging device 30 are disposed on the opposite side of the first projection device 10 with the screen 40 interposed therebetween.
  • a shielding object A that is located between the first projection device 10 and the observation surface 40a of the screen 40 and blocks light projected from the first projection device 10 onto the screen 40.
  • the first projection device 10 projects the display image G (first image) including the effect image Qb on the observation surface 40a of the screen 40, and projects the effect image Qa on the shield A.
  • the second projection device 20 projects the effect image Q on the back surface 40 b of the screen 40.
  • the photographing device 30 photographs the back surface 40 b of the screen 40.
  • the control device 50 is communicably connected to the first projection device 10, the second projection device 20, and the imaging device 30 by wired communication or wireless communication, and the first projection device 10, the second projection device 20, and the imaging device. The operation of the device 30 is controlled.
  • the control device 50 includes a shielding area detection unit 51 and an effect control unit 52, which will be described later.
  • an electronic device such as a notebook personal computer or a smartphone is used.
  • the control device 50 performs on / off of image projection by the first projection device 10, on / off of image projection by the second projection device 20, and control of images projected from the first projection device 10 and the second projection device 20. .
  • the control device 50 outputs projection image data including image information to be projected onto the screen 40 or the like to the first projection device 10 and the second projection device 20.
  • the first projection device 10 and the second projection device 20 project an image based on the projection image data.
  • a range on the back surface 40 b in which an image can be projected by the second projection device 20 (referred to as a second projectable range), and an observation surface 40 a in which an image can be projected by the first projection device 10.
  • An upper image (referred to as a first projectable range) coincides, and an image obtained by projecting an arbitrary image from the first projection device 10 onto the observation surface 40a and reversing the arbitrary image from the front and back is a second projection device.
  • the image projected on the observation surface 40a and the image projected on the back surface 40b are used in a state adjusted so as to match when viewed from the observation surface 40a side. Further, the projection system 1 is used in a state where the imaging range of the imaging device 30 is adjusted to include the second projectable range.
  • the coordinates of each pixel of the image projected from the first projection device 10 onto the entire first projectable range of the observation surface 40a and the entire second projectable range from the second projection device 20 to the back surface 40b are managed in association with each other.
  • FIG. 2 is a block diagram showing an internal configuration of the control device 50 of the projection system 1 shown in FIG.
  • the control device 50 includes a control unit 50A, a RAM (Random Access Memory) 50B, and a ROM (Read only memory) 50C that stores programs executed by the control unit 50A, image information D1, D2, D3, and the like.
  • the control unit 50A has various hardware structures.
  • programmable logic which is a processor whose circuit configuration can be changed after manufacturing, such as a CPU (Central Processing Unit) and an FPGA (Field Programmable Gate Array), which are general-purpose processors that execute programs and perform various processes Examples include a dedicated electrical circuit that is a processor having a circuit configuration that is specifically designed to execute a specific process such as a device (Programmable Logic Device: PLD) or an ASIC (Application Specific Integrated Circuit).
  • PLD Programmable Logic Device
  • ASIC Application Specific Integrated Circuit
  • the structures of these various processors are electric circuits in which circuit elements such as semiconductor elements are combined.
  • the control unit 50A may be configured by one of various processors, or may be configured by a combination of two or more processors of the same type or different types (for example, a combination of a plurality of FPGAs or a combination of a CPU and an FPGA). May be.
  • FIG. 3 is a functional block diagram of the control unit 50A of the control device 50 shown in FIG.
  • the control unit 50A of the control device 50 functions as a projection control device including the shielding area detection unit 51 and the effect control unit 52 by executing an application program including the projection control program stored in the ROM 50C.
  • the effect control unit 52 constitutes a control unit.
  • the shielding area detection unit 51 acquires a captured image S (see FIG. 1) of the second projectable range on the back surface 40b of the screen 40 captured by the imaging device 30, and observes the screen 40 based on the captured image S.
  • the shielding area R generated by the shielding object A in the display image G projected on the surface 40a is detected.
  • the effect control unit 52 selects a predetermined image corresponding to the specific shape when the shape of the shielding area matches the specific shape stored in advance. Projection is performed on the screen 40 from one or both of the one projection device 10 and the second projection device 20.
  • the effect control unit 52 is different from the shielded image (second image) to be projected on the shielding region R in the display image G (first image) as an image corresponding to the specific shape, and Then, a control is performed to project an effect image Q (third image) that is previously associated with the shape of the shielding region R from the second projection device 20 onto the back surface 40b of the screen 40.
  • the effect control unit 52 also performs control for projecting the effect image Qa from the first projection device 10 onto the shielding object A that causes the shielding area R. Do. By changing the shielded image in the display image G to the effect image Qa, the effect image Qa that matches the shape of the shield A is projected onto the shield A in front of the screen 40. be able to.
  • the display image G after the change is an image determined in advance corresponding to the shape of the shielding region R.
  • the effect control unit 52 when the shielding area R is detected, the effect control unit 52 produces an effect image for an adjacent area adjacent to the shielding area R in the display image G projected on the observation surface 40a of the screen 40. Control is also performed to project the image with Qb added from the first projection device 10.
  • a plurality of image information D (D1, D2, D3,%) For production is stored in advance in the ROM 50C shown in FIG.
  • image information D for effects in addition to the image information D1 (D1a, D1b,...) Of a plurality of types of effect images Q associated in advance with various shapes of the shielding area R, various shapes of the shielding area R are included.
  • control device 50 will be described with reference to a flowchart.
  • FIG. 4 is a flowchart showing a flow of a series of processes of the control unit 50A at the time of image projection.
  • FIG. 5 is a flowchart showing the contents of step S5 of FIG.
  • the control unit 50A starts photographing by the photographing device 30 at the same time as the projection of the display image G on the screen 40 from the first projecting device 10 (step S1). Then, the shielding region detection unit 51 of the control unit 50A detects the shielding region R in the display image G projected on the screen 40 based on the photographed image S obtained by photographing with the photographing device 30 (step S2). .
  • step S ⁇ b> 2 the shielding area detection unit 51 of the control unit 50 ⁇ / b> A compares, for example, the display image G projected from the first projection device 10 and the image obtained by inverting the captured image S on a pixel-by-pixel basis. A region including a pixel whose value difference is equal to or greater than a threshold value is detected as a shielding region R.
  • the first projection device 10 changes the screen 40 to the screen 40 based on the captured image S of the screen 40 captured by the imaging device 30 disposed on the opposite side of the screen 40 with respect to the first projection device 10.
  • the shielding area R in the projected display image G is detected. For this reason, even when the shielding object A such as a person exists between the first projection device 10 and the screen 40, the shielding region R can be accurately detected.
  • step S3 the effect control unit 52 of the control unit 50A determines whether or not the shielding region R has been detected. If the shielding area R is not detected (step S3: NO), the process returns to step S1.
  • step S3 when the shielding area R is detected (step S3: YES), the effect control unit 52 determines whether or not the shape of the shielding area R detected in step S2 is a specific shape registered in advance. Is determined (step S4). If it is determined that the shape of the shielding region R is not a specific shape, the process returns to step S1.
  • control unit 50A should project the first projection device 10 onto the shielding region R onto the portion overlapping the shielding region R on the back surface 40b of the screen 40 from the second projection device 20. You may perform the process which complements this shielding area
  • the shape of the shielding area R is identified by, for example, performing a pattern matching process between the shape (shadow shape) of the shielding area R detected in step S2 and the shape pattern stored in advance in the ROM 50C.
  • the determination in step S4 is YES.
  • the case where the shape of the shielding region R and all of the shape patterns match also includes the case where the shape of the shielding region R matches the similarity of the shape pattern or the shape pattern rotated.
  • step S4 If the determination in step S4 is YES, the effect control unit 52 of the control unit 50A executes an effect control step (control step) in step S5.
  • the production control unit 52 of the control unit 50A first determines whether or not an instruction to output the production image Qa or the production image Qb has been issued (step S5a). This output instruction is given by a user input operation.
  • the effect control unit 52 of the control unit 50A responds to the shape of the shielding region R detected in step S2 when an instruction to output the effect image Qa or the effect image Qb is given (step S5a: YES).
  • step S5a YES
  • the image information D1 of the effect image Q the image information D2 or the image information D3 of the effect image Qa or the effect image Qb corresponding to the shape of the shielding region R is read from the ROM 50C (step S5b).
  • step S5a NO
  • the effect control unit 52 of the control unit 50A displays the effect image Q corresponding to the shape of the shielding region R. Only the image information D1 is read from the ROM 50C (step S5c).
  • step S5b or step S5c the effect control unit 52 of the control unit 50A starts from the first projection device 10 based on the image information D read from the ROM 50C and the position of the shielding area R detected in step S2. At least one of front projection image data for projecting the effect image Q and rear projection image data for projecting the effect image Qa or the effect image Qb from the second projection device 20 is generated (step). S5d).
  • the effect control unit 52 outputs the generated front projection image data to the first projection device 10 to project an image based on the front projection image data, and the generated rear projection image data is output to the second projection image data.
  • the image is output to the projection device 20 and projected based on the rear projection image data (step S5e).
  • FIGS. 6 to 11 are examples, and are not limited to these.
  • FIG. 6 is a schematic diagram for explaining an example of effects based on the image information D1 and the image information D2 read out in step S5b of FIG.
  • a display image G representing a background such as a blue sky is projected on the screen 40 from the first projection device 10 (FIG. 6A).
  • an airplane-shaped shielding object A (white pattern or the like) is brought between the first projection device 10 and the screen 40, the shielding region R of the display image G on the observation surface 40a of the screen 40.
  • the shielding region R appears as a shadow K1 of the shielding object A (FIG. 6B).
  • information for displaying an image of a blue sky is stored in the ROM 50C as image information D1 corresponding to the shape of the airplane, which is a specific shape, and information for displaying an image of the airplane as image information D2. Is stored.
  • the shielding area R is detected in step S2 in FIG. 4, and in step S4 in FIG. 4, it is determined that the shape of the shielding area R is the shape of an airplane, and production control is started. Is done.
  • step S5b of FIG. 5 image information for displaying a blue sky image as image information D1 corresponding to the shape of the airplane is read from the ROM 50C, and the image of the airplane is used as image information D2 corresponding to the shape of the airplane.
  • Image information to be added to the display image G is read from the ROM 50C.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, a blue sky image based on the image information D1 is projected onto an area overlapping the shielding area R on the back surface 40b. Rear projection image data is generated, and this rear projection image data is output to the second projection device 20.
  • step S5d in FIG. 5 based on the read image information D2 and the position of the shielding area R, an image to be projected on the shielding area R in the display image G is displayed on the airplane based on the image information D2. Front projection image data for changing to an image is generated, and this front projection image data is output to the first projection device 10.
  • the effect image Q blue sky image having the same luminance and saturation as the display image G and the same shape as the shielding region R is projected in the second direction. Projected from device 20.
  • the shadow K1 of the shielding object A is filled with the same blue sky image as the display image G (FIG. 6C).
  • the image Qa image of an airplane
  • the effect image Q constitutes a third image.
  • the effect image Qa constitutes a second image.
  • the shadow K1 of the shielding object A should be generated on the area on the screen 40.
  • a mysterious impression that the shadow K1 is not generated can be given to the observer, and an interesting production can be performed.
  • the effect image Qa is projected from the first projection device 10 onto the shielding object A. For this reason, an image of an airplane is projected on a pattern that floats in front of the observation surface 40a of the screen 40. In this way, since a stereoscopic image can be provided to the observer, it is possible to provide an interesting production.
  • image information D2 corresponding to the shape of the airplane which is a specific shape
  • information for displaying not only an airplane but also a cloud image may be stored.
  • a cloud image may be additionally projected from the first projection device 10 onto a portion of the display image G that is different from the shielding region R.
  • FIG. 7 is a schematic diagram for explaining an example of an effect based on the image information D1 read out in step S5c of FIG.
  • a display image G representing the background of a building wall or the like is projected from the first projection device 10 onto the screen 40 (FIG. 7A).
  • a shielding area R of the display image G is generated on the observation surface 40a of the screen 40, and the shielding area R is the human being. It appears as a shadow K2 (FIG. 7B).
  • step S2 of FIG. 4 When the state shown in FIG. 7B is reached, the shielding area R is detected in step S2 of FIG. 4, and in step S4 of FIG. 4, it is determined that the shape of the shielding area R is a human shape, and the production control is started. Is done.
  • step S5c of FIG. 5 image information for displaying a shadow image as image information D1 corresponding to the shape of the person is read from the ROM 50C.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, a shadow image based on the image information D1 is projected inside the area overlapping the shielding area R on the back surface 40b.
  • image data for rear projection for projecting the same image (background image) as the image to be projected from the first projection device 10 to the shielding region R between the edge of the region and the image of the shadow.
  • the rear projection image data is generated and output to the second projection device 20.
  • the image QX having the same shape as the shielding area R is projected from the second projection device 20 onto the area of the back surface 40b of the screen 40 that overlaps the shielding area R.
  • the shadow K2 of the shielding object A is filled with the image QX (FIG. 7C).
  • the image QX includes an effect image Q that is a shadow image of a person shape smaller than the shielding area R, and a background image Q2 that fills an area between the effect image Q and the outline of the shielding area R. ing.
  • the effect image Q constitutes a third image.
  • the projection of the background image Q2 is not essential. Further, the effect image Q may not have a human shadow shape, and may be, for example, an animal shadow shape. By doing in this way, a more interesting production becomes possible.
  • FIG. 8 is a schematic diagram for explaining an example of effects based on the image information D1 and the image information D3 read out in step S5b of FIG.
  • a display image G representing the background of a building wall or the like is projected on the screen 40 from the first projection device 10 (FIG. 8A).
  • a shielding area R of the display image G is generated on the observation surface 40a of the screen 40, and the shielding area R is the human being. It appears as a shadow K2 (FIG. 8B).
  • information for displaying a shadow image is stored in the ROM 50C as image information D1 corresponding to a human shape that is a specific shape, and image information D1 is stored as image information D3 corresponding to the human shape. It is assumed that information for displaying an image that can constitute one content by being combined with a shadow image based on is stored.
  • the shielding area R is detected in step S2 in FIG. 4, and in step S4 in FIG. 4, it is determined that the shape of the shielding area R is a human shape, and the production control is started. Is done.
  • step S5b of FIG. 5 image information for displaying a human shadow image as image information D1 corresponding to the human shape is read from the ROM 50C, and animal information is displayed as image information D3 corresponding to the human shape.
  • Image information for displaying an image of the shadow of the ear is read from the ROM 50C.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, a shadow image based on the image information D1 is projected onto an area overlapping the shielding area R on the back surface 40b. Rear projection image data is generated, and this rear projection image data is output to the second projection device 20.
  • step S5d of FIG. 5 based on the read image information D3 and the position of the shielding region R, the ear of the animal based on the image information D3 is displayed in a region adjacent to the shielding region R in the display image G. Front projection image data for adding a shadow image is generated, and this front projection image data is output to the first projection device 10.
  • the effect image Q composed of a shadow image having the same shape as the shielding region R is projected from the second projection device 20 onto the region of the back surface 40b of the screen 40 overlapping the shielding region R.
  • the shadow K2 of the shield A is filled with the effect image Q (FIG. 8C).
  • the effect image Q constitutes a third image.
  • an effect image Qb composed of an image showing the shadow of the ear of an animal such as a cat is displayed from the first projection device 10 in the adjacent region R1 adjacent to the upper side of the shielding region R.
  • the display image G is projected and changed (FIG. 8C).
  • the effect image Qb and the effect image Q are combined to form a shadow K3 of an animal (one content) such as a cat.
  • the effect image Q different from the shielded portion of the display image G is projected onto the region overlapping the shielding region R of the back surface 40b, and the adjacent region R1 adjacent to the shielding region R in the display image G is used.
  • the effect image Qb having the same luminance and saturation as the effect image Q is projected to generate a shadow K3 different from the shadow K2 of the person who is the shielding object A.
  • FIG. 9 is a schematic diagram for explaining an example of an effect based on the image information D1 read out in step S5c of FIG.
  • a display image G representing the background of a building wall or the like is projected from the first projection device 10 onto the screen 40 (FIG. 9A).
  • a shielding area R of the display image G is generated on the observation surface 40a of the screen 40, and the shielding area R is the human being. It appears as a shadow K2 (FIG. 9B).
  • step S4 in FIG. 4 it is determined that the shape of the shielding area R is a human shape, and production control is started. Is done.
  • step S5c in FIG. 5 image information for displaying an image including characters is read from the ROM 50C as the image information D1 corresponding to the shape of the person.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, an image including characters based on the image information D1 is projected inside the area overlapping the shielding area R on the back surface 40b.
  • image data for rear projection for projecting the same image as the image projected from the first projection device 10 onto the shielding region R is generated between the edge of the region and the image including the character.
  • the rear projection image data is output to the second projection device 20.
  • the effect image Q including characters (ABCDE characters are illustrated in the example of FIG. 9) is projected from the second projection device 20 onto the region of the back surface 40b of the screen 40 that overlaps the shielding region R.
  • a background image Q5 that fills a region between the effect image Q and the outline of the shielding region R is projected from the second projection device 20.
  • the shadow K2 of the shielding object A is in a state of being filled with the image QX composed of the effect image Q and the background image Q5 (FIG. 9C).
  • the effect image Q constitutes a third image.
  • the character Q included in the effect image Q is projected by projecting the effect image Q including the character onto the area overlapping the shielding region R.
  • the information that becomes the shield A can be used by the person.
  • the person who becomes the shielding object A is a lecturer
  • the effect image Q including the characters constituting the manuscript text of the lecture onto the area overlapping the shielding area R
  • the speaker can You can give a lecture while referring to the letters included in Q.
  • the production image Q is projected on the shadow area of the lecturer, it is possible to make it difficult for the audience to notice that the presentation person is viewing the production image Q.
  • the background image Q5 that fills the region between the effect image Q and the outline of the shielding area R is projected onto the shielding area R, it is more noticeable that the effect image Q is projected. It can be made difficult. Note that the projection of the background image Q5 is not essential.
  • FIG. 10 is a schematic diagram for explaining an example of an effect based on the image information D1 read out in step S5c of FIG.
  • a display image G representing a background such as a building wall is projected on the screen 40 from the first projection device 10 (FIG. 10A).
  • a shielding area R of the display image G is generated on the observation surface 40a of the screen 40, and the shielding area R is the human being. It appears as a shadow K2 (FIG. 10B).
  • information for displaying an image including a character and information for designating a pixel from which light is not projected are stored in the ROM 50C as the image information D1 corresponding to the shape of a person having a specific shape. , Is stored.
  • the shielding area R is detected in step S2 in FIG. 4, and in step S4 in FIG. 4, it is determined that the shape of the shielding area R is a human shape, and the production control is started. Is done.
  • step S5c of FIG. 5 as the image information D1 corresponding to the shape of the person, image information for displaying an image including a character and image information for designating a pixel from which light is not projected are ROM 50C. Read from.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, an image including characters based on the image information D1 and a non-projection area where light is not projected are displayed on the back surface 40b.
  • the first projection device 10 projects the image to the shielding area R between the edge of the area and the image and the non-projection area inside the area.
  • Rear projection image data for forming the same image as the image is generated, and the rear projection image data is output to the second projection device 20.
  • the non-projection region Q3 formed in this way is formed, and further, the effect image Q1 and the background image Q5 filling the region between the non-projection region Q3 and the outline of the shielding region R are formed.
  • the shadow K2 of the shielding object A is filled with the image QX composed of the effect image Q1 and the background image Q5 except for the non-projection region Q3 (FIG. 10C).
  • a portion obtained by combining the image QX and the non-projection area Q3 forms a third image.
  • a speaker who generates the shielding region R irradiates the non-projection region Q3 with a laser beam using a laser pointer, or
  • a specific instruction can be given to the control unit 50A by performing an operation of moving the irradiation point in a predetermined pattern while irradiating the laser beam from the laser pointer.
  • the effect control unit 52 of the control unit 50A acquires the captured image S obtained by capturing the back surface 40b by the imaging device 30 after the non-projection region Q3 is formed by the second projection device 20. The portion of the non-projection area Q3 in the captured image S is monitored.
  • the projection light that is different from the light projected from the first projection device 10 and the second projection device 20 is included, and if this projection light matches a predetermined pattern, the control is performed.
  • the effect control unit 52 of the unit 50A changes the character included in the effect image Q1 to another character or changes the display image G projected from the first projection device 10 to another image. Control associated with ambient light in advance is executed.
  • the pattern of non-projection light is, for example, the shape of non-projection light, the shape of a trajectory moved by the projection light, or the blinking pattern of the projection light.
  • the production control unit 52 of the control unit 50A determines that the projection image S includes extra-projection light when the captured image S includes a predetermined color and brightness area.
  • the same effect as the example of FIG. 9 can be obtained, and the characters or the display image G included in the effect image Q1 can be changed by a simple operation. Therefore, while standing in front of the screen 40, the presentation image Q1 or the display image G or the like can be changed according to the speaker's intention, and the presentation can be advanced efficiently.
  • the projection of the effect image Q1 may be omitted. Even in such a case, the display image G and the like can be changed according to the speaker's intention, and the presentation can be efficiently advanced.
  • the specific shape is a human shape, but is not limited thereto.
  • the specific shape may be a shape of a costume that a person can enter.
  • the light source used for the operation for changing the character included in the effect image Q1 to another character is not limited to the laser pointer.
  • This light source should be a highly directional light source, but it is also possible to use a general flashlight if the light source with imaging properties at a specific distance or the performer is very close to the screen. It is.
  • the non-projection area Q3 shown in FIG. 10C may be an area where light is projected (area where light is projected) as long as the detection accuracy of light outside the projection can be ensured.
  • an image having a brightness lower than a predetermined value may be projected from the second projection device 20 to the position of the non-projection region Q3 to such an extent that the above-described projection light can be detected.
  • the effect control unit 52 displays the display image G projected from the first projection device 10 as the original display image G. A part of the portion other than the shielding region R in FIG. In this case, the image projection by the second projection device 20 may not be performed.
  • the effect control unit 52 may set a range in which the non-projection area is formed in a portion other than the shielding area R in the captured image S as a detection target of the extra-projection light. Further, instead of forming a non-projection area on a part of the display image G, an image having a luminance lower than a predetermined value may be projected to a position where the non-projection area is to be formed.
  • 11 and 12 are schematic diagrams for explaining an example of effects based on the image information D1 and the image information D3 read out in step S5b of FIG.
  • a display image G representing a background such as the night sky is projected from the first projection device 10 onto the screen 40 (FIG. 11A).
  • a pentagonal shield (white paper pattern or the like) A enters between the first projection device 10 and the screen 40, a shielding region R of the display image G is generated on the observation surface 40a of the screen 40.
  • the shielding region R appears as a shadow K4 (FIG. 11B).
  • information for displaying a decoration image is stored in the ROM 50C as image information D1 corresponding to a pentagonal shape which is a specific shape, and non-image information D3 corresponding to the pentagonal shape is stored as non-image information D3. It is assumed that information for forming a projection area is stored.
  • step S2 in FIG. 4 the shielding area R is detected in step S2 in FIG. 4, and in step S4 in FIG. 4, it is determined that the shape of the shielding area R is a pentagon, and the effect control is started.
  • step S5b of FIG. 5 image information for displaying a decoration image is read from the ROM 50C as image information D1 corresponding to the pentagon, and a non-projection region is formed as image information D3 corresponding to the pentagon. Are read from the ROM 50C.
  • step S5d in FIG. 5 based on the read image information D3 and the position of the shielding area R, the non-projection area based on the image information D3 is an area adjacent to the shielding area R in the display image G.
  • Front projection image data to be added to the first projection image data is generated, and this front projection image data is output to the first projection device 10.
  • the first projection device 10 performs control not to project light onto a region adjacent to the shielding region R on the observation surface 40a.
  • step S5d of FIG. 5 based on the read image information D1 and the position of the shielding area R, the decoration image based on the image information D1 is unprojected formed on the observation surface 40a of the back surface 40b. Rear projection image data to be projected onto a part or all of the region overlapping the region is generated, and this rear projection image data is output to the second projection device 20.
  • the non-projection region Q3b composed of five triangles with each side of the pentagonal shadow K4 as one side is added around the shielding region R in the display image G, that is, around the pentagonal shadow K4. (Fig. 12 (a)).
  • decoration is made by projecting the decoration image Q7 from the second projection device 20 at a position overlapping the non-projection area Q3b in the display image G (FIG. 12B).
  • the decoration image Q7 constitutes a third image.
  • the non-projection region Q3b is formed adjacent to the shielding region R.
  • the non-projection region Q3b and the shielding region R may be formed at positions separated from each other.
  • the decoration image Q7 is projected only on a part of the area overlapping the non-projection area Q3b, but the decoration image Q7 is projected on the whole area overlapping the non-projection area Q3b. Also good.
  • the second projection device 20 may not project an image.
  • the second projection device 20 may not project an image.
  • a pentagonal shield A between the first projection device 10 and the screen 40 it is possible to produce an effect that a star-shaped shadow is formed on the screen 40.
  • the production control is started at the timing when the determination in step S ⁇ b> 4 becomes YES, but the present invention is not limited to this.
  • the effect control unit 52 determines whether or not the photographed image S includes the non-projection light pattern described in the effect example of FIG. 10, and detects this pattern. In such a case, the process may proceed to step S5.
  • the detection target range of the non-projection light may be the entire captured image S or only the shielding region R.
  • control unit 50 ⁇ / b> A, the RAM 50 ⁇ / b> B, and the ROM 50 ⁇ / b> C of the control device 50 may be built in, for example, the first projection device 10 or may be built in the second projection device 20. Further, the second projection device 20 and the photographing device 30 may be integrated instead of being separated.
  • a first projection device for projecting a first image on a first surface side of a projection object capable of transmitting a part of light; An imaging device disposed on the opposite side of the projection object with respect to the first projection device; A second projection device disposed on the opposite side of the projection object with respect to the first projection device; The first projection in the first image projected on the projection object based on a photographed image of the second surface opposite to the first surface of the projection object photographed by the photographing device.
  • a shielding area detection unit that detects a shielding area generated by a shielding object between the apparatus and the projection object, and a specific shape in which the shape of the shielding area detected by the shielding area detection unit is stored in advance.
  • a projection control device having a control unit that projects a predetermined image corresponding to the specific shape from one or both of the first projection device and the second projection device when they match. .
  • the projection control apparatus is a projection control apparatus which projects the said image corresponding to the said specific shape on said 2nd surface of the said projection target object from said 2nd projection apparatus.
  • the projection control apparatus is a projection control apparatus which projects the said image corresponding to the said specific shape on the area
  • the projection control apparatus is a projection control apparatus which projects the image which contains a character as said image corresponding to the said specific shape on the area
  • the projection control device according to (5) or (6), The control unit, as the image corresponding to the specific shape, the first region formed by light projection and the second region formed by non-projection of light or the brightness than a predetermined value
  • a projection control device that projects an image including a low third region from the second projection device onto a region of the second surface that overlaps the shielding region.
  • the projection control apparatus according to (2) is a projection control apparatus which projects the said image corresponding to the said specific shape from each of said 1st projection apparatus and said 2nd projection apparatus.
  • the projection control apparatus includes the shielding region and the shielding region in an adjacent region adjacent to the shielding region in the first image projected on the first surface as the image obtained by changing the first image.
  • a projection control device that projects an image, in which an image constituting one content is added by being combined with the third image projected onto an overlapping region, from the first projection device.
  • the projection control apparatus adds a non-projection region to a region different from the shielding region in the first image projected on the first surface as the image obtained by changing the first image. Projecting the image by the first projection device, and further projecting the third image from the second projection device onto a part or all of the region overlapping the non-projection region of the second surface Control device.
  • the projection control device according to any one of (2) to (11),
  • the control unit includes the first projecting device and the second projecting device from a photographed image obtained by photographing the second surface with the photographing device, wherein the shape of the shielding area matches the specific shape.
  • a projection control device that starts projection of the image corresponding to the specific shape when a predetermined pattern of non-projection light other than the light projected from is detected.
  • the projection control apparatus (3)
  • the control unit as the image corresponding to the specific shape, the first region formed by light projection and the second region formed by non-projection of light or the brightness than a predetermined value And projecting an image including a low third region from the second projection device onto a region of the second surface overlapping the shielding region, Outside projection light other than light projected from the first projection device and the second projection device from the second region or the third region in the photographed image obtained by photographing the second surface by the photographing device.
  • a projection control apparatus that performs control associated with the pattern in advance when a predetermined pattern is detected.
  • the projection control apparatus forms the image corresponding to the specific shape in a non-projected manner on a portion other than the shielding region in the first image projected on the first surface. Projecting the second region or an image in which a third region having a luminance lower than a predetermined value is added to the first surface from the first projection device, Outside projection light other than light projected from the first projection device and the second projection device from the second region or the third region in the photographed image obtained by photographing the second surface by the photographing device.
  • a projection control apparatus that performs control associated with the pattern in advance when a predetermined pattern is detected.
  • a shielding area detection step for detecting a shielding area caused by a shielding object between the objects;
  • the shape of the shielding area detected by the shielding area detection step matches a specific shape stored in advance, an image predetermined corresponding to the specific shape is displayed as the first projection device and the first A projection control program for causing a computer to execute a control step of projecting the projection object from one or both of the second projection apparatuses arranged on the opposite side of the projection object with respect to one projection apparatus.
  • a projection system a projection control apparatus, a projection control method, and a projection control program that enable various effects by controlling a projection image in accordance with a shielding area in a display image.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

表示画像における遮蔽領域に応じて投影像を制御することで様々な演出を可能とする投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供する。制御装置（５０）は、スクリーン（４０）の観察面（４０ａ）に青空の表示画像Ｇを投影している状態にて、飛行機の形状の遮蔽領域Ｒを検出すると、遮蔽領域Ｒを形成している遮蔽物Ａに対しては、第一投影装置（１０）から演出用画像Ｑａ（飛行機の画像）を投影させ、スクリーン（４０）の背面（４０ｂ）における遮蔽領域Ｒと重なる領域に対しては、第二投影装置（２０）から演出用画像Ｑａと異なる演出用画像Ｑ（青空の画像）を投影させる。

Description

投影システム、投影制御装置、投影制御方法、投影制御プログラム
　本発明は、投影システム、投影制御装置、投影制御方法、投影制御プログラムに関する。
　特許文献１には、スクリーンの背面側に配置されたリア投影装置からスクリーンに対して表示画像を投影するシステムが記載されている。このシステムでは、スクリーンの正面側に配置された撮影装置によってスクリーンを撮影し、この撮影により得られた撮影画像と、リア投影装置から投影している表示画像とを比較して、スクリーンに投影された表示画像における物体により遮られている遮蔽領域を検出する。そして、この遮蔽領域に対し、スクリーンの正面側に配置されたフロント投影装置から画像を投影することで、遮蔽領域の画像を補完している。
日本国特開２００８－０２６４２４号公報
　特許文献１に記載されているように、スクリーン上に形成された遮蔽領域を検出して、その遮蔽領域に対して何らかの画像を投影する処理を行うことで、様々な演出が可能になる。しかし、特許文献１では、遮蔽領域を補完することしか想定されておらず、十分な演出を行うことはできない。
　本発明は、上記事情に鑑みてなされたものであり、表示画像における遮蔽領域に応じて投影像を制御することで様々な演出を可能とする投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することを目的とする。
　本発明の投影システムは、光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された撮影装置と、上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置と、上記撮影装置によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、及び、上記遮蔽領域検出部によって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を上記第一投影装置及び上記第二投影装置の一方又は両方から投影させる制御部を有する投影制御装置と、を備えるものである。
　本発明の投影制御装置は、上記投影システムに使用される上記投影制御装置である。
　本発明の投影制御方法は、光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、上記遮蔽領域検出ステップによって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を、上記第一投影装置及び上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から投影させる制御ステップと、を備えるものである。
　本発明の投影制御プログラムは、光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、上記遮蔽領域検出ステップによって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を、上記第一投影装置及び上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から上記投影対象物に投影させる制御ステップと、をコンピュータに実行させるためのものである。
　本発明によれば、表示画像における遮蔽領域に応じて投影像を制御することで様々な演出を可能とする投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することができる。
本発明の第一実施形態の投影システムの構成を示す図である。 制御装置５０の内部構成を示すブロック図である。 図２に示す制御装置５０の制御部５０Ａの機能ブロック図である。 画像投影時における制御部５０Ａの一連の処理の流れを示すフロー図である。 図４のステップＳ５の内容を示すフロー図である。 図５のステップＳ５ｂによって読み出された画像情報Ｄ１と画像情報Ｄ２に基づく演出の例を説明するための模式図であり、（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示し、（ｃ）は演出処理がなされた状態を示す。 図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示し、（ｃ）は演出処理がなされた状態を示す。 図５のステップＳ５ｂによって読み出された画像情報Ｄ１及び画像情報Ｄ３に基づく演出の例を説明するための模式図である。（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示し、（ｃ）は演出処理がなされた状態を示す。 図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示し、（ｃ）は演出処理がなされた状態を示す。 図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示し、（ｃ）は演出処理がなされた状態を示す。 図５のステップＳ５ｂによって読み出された画像情報Ｄ１及び画像情報Ｄ３に基づく演出の例を説明するための模式図であり、（ａ）は表示画像が投影された状態を示し、（ｂ）は遮蔽領域が生じた状態を示す。 図５のステップＳ５ｂによって読み出された画像情報Ｄ１及び画像情報Ｄ３に基づく演出の例を説明するための模式図であり、（ａ）と（ｂ）は演出処理がなされた状態を示す。
　以下、本発明の実施の形態の投影システムについて、図面を用いて説明する。
［第一実施形態］
　図１は、本発明の第一実施形態の投影システムの構成を示す図である。図１に示す投影システム１は、ステージ上にけるプレゼンテーション又は演出等において好適に利用され、スクリーン４０への投影により画像を表示するものである。
　投影システム１は、第一投影装置１０と、第二投影装置２０と、撮影装置３０と、投影対象物としてのスクリーン４０と、制御装置５０と、を備える。
　スクリーン４０は、光の一部を透過することのできる透過型スクリーンである。スクリーン４０は、平面状の部材であり、観察者に向けられる観察面４０ａと、観察面４０ａと反対側の背面４０ｂと、を有する。
　スクリーン４０は、投影された光を観察面４０ａと背面４０ｂの各々に拡散することができる性質を持っているものであればよく、例えば、ビニール、アクリル、又はガラス等で構成されたものが用いられる。
　さらに、撮影装置３０がスクリーン４０に投影された画像以外を取り込まないように、スクリーン４０は不透明な材質であることが望ましい。観察面４０ａは第一の面を構成し、背面４０ｂは第二の面を構成する。
　第一投影装置１０と第二投影装置２０は、それぞれ、画像を投影して表示を行うものであり、例えば、液晶表示素子又はＤＭＤ（Ｄｉｇｉｔａｌ　Ｍｉｃｒｏｍｉｒｒｏｒ　Ｄｅｖｉｃｅ：登録商標）等のライトバルブを搭載した装置等が用いられる。
　撮影装置３０は、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサ又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等の撮像素子によって被写体を撮影し、この撮影により撮像素子から出力される撮影画像信号を処理して撮影画像を生成する。
　撮影装置３０により生成された撮影画像は制御装置５０に送信される。撮影装置３０は、被写体からの可視光を撮像画像に変換するものである。
　第一投影装置１０は、スクリーン４０の観察面４０ａ側に配置されている。第二投影装置２０及び撮影装置３０は、スクリーン４０を挟んで第一投影装置１０とは反対側に配置されている。
　図中には、第一投影装置１０とスクリーン４０の観察面４０ａの間に位置し、第一投影装置１０からスクリーン４０に投影される光を遮る遮蔽物Ａが示されている。
　第一投影装置１０は、スクリーン４０の観察面４０ａに演出用画像Ｑｂを含む表示画像Ｇ（第一の画像）を投影し、遮蔽物Ａに対して演出用画像Ｑａを投影する。第二投影装置２０は、スクリーン４０の背面４０ｂに演出用画像Ｑを投影する。撮影装置３０は、スクリーン４０の背面４０ｂを撮影する。
　制御装置５０は、第一投影装置１０、第二投影装置２０、及び撮影装置３０と有線通信又は無線通信によって通信可能に接続されており、第一投影装置１０、第二投影装置２０、及び撮影装置３０の動作を制御する。
　制御装置５０は、後述する遮蔽領域検出部５１及び演出制御部５２を備えるものであり、例えば、ノート型のパーソナルコンピュータ又はスマートフォン等の電子機器が使用される。
　制御装置５０は、第一投影装置１０による画像の投影のオンオフ、第二投影装置２０による画像の投影のオンオフ、及び第一投影装置１０と第二投影装置２０から投影させる画像の制御等を行う。
　制御装置５０は、スクリーン４０等に投影すべき画像情報を含む投影用画像データを第一投影装置１０及び第二投影装置２０へ出力する。第一投影装置１０及び第二投影装置２０は、制御装置５０から投影用画像データを受信すると、この投影用画像データに基づく画像を投影する。
　この投影システム１は、第二投影装置２０によって画像を投影することのできる背面４０ｂ上の範囲（第二投影可能範囲という）と、第一投影装置１０によって画像を投影することのできる観察面４０ａ上の範囲（第一投影可能範囲という）とが一致し、且つ、第一投影装置１０から任意の画像を観察面４０ａに投影し、この任意の画像を表裏反転させた画像を第二投影装置２０から背面４０ｂに投影した状態にて、観察面４０ａに投影された画像と背面４０ｂに投影された画像とが観察面４０ａ側から見て一致するように調整された状態にて使用される。また、投影システム１は、撮影装置３０の撮影範囲が第二投影可能範囲を含むよう調整された状態にて使用される。
　このような調整作業により、第一投影装置１０から観察面４０ａの第一投影可能範囲全体に投影される画像の各画素の座標と、第二投影装置２０から背面４０ｂの第二投影可能範囲全体に投影される画像の各画素の座標と、撮影装置３０によって撮影して得られる背面４０ｂの第二投影可能範囲の画像の各画素の座標とが関連付けて管理される。
　図２は、図１に示す投影システム１の制御装置５０の内部構成を示すブロック図である。
　制御装置５０は、制御部５０Ａと、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｓｅｓｓ　Ｍｅｍｏｒｙ）５０Ｂと、制御部５０Ａの実行するプログラムと画像情報Ｄ１，Ｄ２，Ｄ３等を記憶するＲＯＭ（Ｒｅａｄ　ｏｎｌｙ　ｍｅｍｏｒｙ）５０Ｃと、を備える。
　制御部５０Ａは、ハードウェア的な構造は、各種のプロセッサである。各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｓｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ　Ｌｏｇｉｃ　Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
　これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
　制御部５０Ａは、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
　図３は、図２に示す制御装置５０の制御部５０Ａの機能ブロック図である。制御装置５０の制御部５０Ａは、ＲＯＭ５０Ｃに記憶された投影制御プログラムを含むアプリケーションプログラムを実行することにより、遮蔽領域検出部５１及び演出制御部５２を備える投影制御装置として機能する。演出制御部５２は制御部を構成する。
　遮蔽領域検出部５１は、撮影装置３０によって撮影されたスクリーン４０の背面４０ｂの第二投影可能範囲の撮影画像Ｓ（図１参照）を取得し、この撮影画像Ｓに基づいて、スクリーン４０の観察面４０ａに投影された表示画像Ｇにおける遮蔽物Ａによって生じた遮蔽領域Ｒを検出する。
　演出制御部５２は、遮蔽領域Ｒが検出された場合には、その遮蔽領域の形状が予め記憶された特定形状と一致する場合に、その特定形状に対応して予め決められている画像を第一投影装置１０及び第二投影装置２０の一方又は両方からスクリーン４０に投影させる。
　一例として、演出制御部５２は、特定形状に対応する画像として、表示画像Ｇ（第一の画像）のうちの遮蔽領域Ｒに投影すべき被遮蔽画像（第二の画像）とは異なり、且つ、遮蔽領域Ｒの形状に予め対応づけられている演出用画像Ｑ（第三の画像）を、第二投影装置２０からスクリーン４０の背面４０ｂに投影させる制御を行う。
　また、演出制御部５２は、遮蔽領域Ｒが検出された場合には、遮蔽領域Ｒを生じさせている遮蔽物Ａに対して、演出用画像Ｑａを、第一投影装置１０から投影させる制御も行う。表示画像Ｇのうちの被遮蔽画像を演出用画像Ｑａに変更することで、スクリーン４０よりも手前にある遮蔽物Ａに対して、その遮蔽物Ａの形状に一致した演出用画像Ｑａを投影することができる。この変更後の表示画像Ｇは、遮蔽領域Ｒの形状に対応して予め決められている画像となる。
　また、演出制御部５２は、遮蔽領域Ｒが検出された場合には、スクリーン４０の観察面４０ａに投影されている表示画像Ｇのうちの遮蔽領域Ｒに隣接する隣接領域に対して演出用画像Ｑｂを追加した画像を、第一投影装置１０から投影させる制御も行う。
　図２に示すＲＯＭ５０Ｃには、演出用の複数の画像情報Ｄ（Ｄ１，Ｄ２，Ｄ３，・・・）が予め記憶されている。演出用の画像情報Ｄには、遮蔽領域Ｒの各種形状に予め対応づけられた複数種類の演出用画像Ｑの画像情報Ｄ１（Ｄ１ａ、Ｄ１ｂ，・・・）の他、遮蔽領域Ｒの各種形状に予め対応づけられた複数種類の演出用画像Ｑａの画像情報Ｄ２（Ｄ２ａ、Ｄ２ｂ，・・・）、遮蔽領域Ｒの各種形状に予め対応づけられた複数種類の演出用画像Ｑｂの画像情報Ｄ３（Ｄ３ａ、Ｄ３ｂ，・・・）、等が含まれる。
　以下、制御装置５０の動作について、フロー図を参照しつつ説明する。
　図４は、画像投影時における制御部５０Ａの一連の処理の流れを示すフロー図である。図５は、図４のステップＳ５の内容を示すフロー図である。
　制御部５０Ａは、第一投影装置１０からスクリーン４０への表示画像Ｇの投影を開始させるのと同時に撮影装置３０による撮影を開始させる（ステップＳ１）。そして、制御部５０Ａの遮蔽領域検出部５１は、撮影装置３０によって撮影して得られた撮影画像Ｓに基づいて、スクリーン４０に投影された表示画像Ｇにおける遮蔽領域Ｒを検出する（ステップＳ２）。
　ステップＳ２において、制御部５０Ａの遮蔽領域検出部５１は、例えば、第一投影装置１０から投影させている表示画像Ｇと、撮影画像Ｓを表裏反転させた画像とを画素毎に比較し、画素値の差が閾値以上となる画素を含む領域を遮蔽領域Ｒとして検出する。
　投影システム１では、第一投影装置１０に対してスクリーン４０を挟んで反対側に配置された撮影装置３０によって撮影されたスクリーン４０の撮影画像Ｓに基づいて、第一投影装置１０からスクリーン４０に投影された表示画像Ｇにおける遮蔽領域Ｒを検出する。このため、第一投影装置１０とスクリーン４０との間に、人等の遮蔽物Ａが存在する場合でも、遮蔽領域Ｒを正確に検出することができる。
　次に、制御部５０Ａの演出制御部５２は、遮蔽領域Ｒが検出されたか否か判断する（ステップＳ３）。遮蔽領域Ｒが検出されなければ（ステップＳ３：ＮＯ）、ステップＳ１に処理が戻る。
　一方、遮蔽領域Ｒが検出された場合には（ステップＳ３：ＹＥＳ）、演出制御部５２は、ステップＳ２にて検出された遮蔽領域Ｒの形状が予め登録されている特定形状であるか否かを判定する（ステップＳ４）。遮蔽領域Ｒの形状が特定形状ではないと判定された場合には、ステップＳ１に処理が戻る。
　なお、ステップＳ４の判定がＮＯの場合に、制御部５０Ａは、第二投影装置２０からスクリーン４０の背面４０ｂの遮蔽領域Ｒと重なる部分に、第一投影装置１０から遮蔽領域Ｒに投影すべき画像と同じ画像を反転させたものを投影させることで、この遮蔽領域Ｒを補完する処理を行ってもよい。
　遮蔽領域Ｒの形状の識別は、例えば、ステップＳ２により検出された遮蔽領域Ｒの形状（陰の形）とＲＯＭ５０Ｃに予め記憶される形状パターンとのパターンマッチング処理を実施すること等によりなされる。
　遮蔽領域Ｒの形状と、形状パターンの一部又は全部が一致する場合に、ステップＳ４の判定がＹＥＳとなる。遮蔽領域Ｒの形状と形状パターンの全部が一致する場合とは、遮蔽領域Ｒの形状と、形状パターンの相似形又は形状パターンを回転させたものとが一致する場合も含む。
　ステップＳ４の判定がＹＥＳになると、制御部５０Ａの演出制御部５２は、ステップＳ５において、演出制御ステップ（制御ステップ）を実行する。
　制御部５０Ａの演出制御部５２は、まず、演出用画像Ｑａ又は演出用画像Ｑｂの出力指示がなされているか否か判断する（ステップＳ５ａ）。この出力指示は、ユーザの入力操作によりなされたものである。
　制御部５０Ａの演出制御部５２は、演出用画像Ｑａ又は演出用画像Ｑｂの出力指示がなされている場合（ステップＳ５ａ：ＹＥＳ）には、ステップＳ２にて検出された遮蔽領域Ｒの形状に対応した演出用画像Ｑの画像情報Ｄ１とともに、遮蔽領域Ｒの形状に対応した演出用画像Ｑａ又は演出用画像Ｑｂの画像情報Ｄ２又は画像情報Ｄ３をＲＯＭ５０Ｃから読み出す（ステップＳ５ｂ）。
　一方、演出用画像Ｑａ又は演出用画像Ｑｂの出力指示がなされていない場合（ステップＳ５ａ：ＮＯ）には、制御部５０Ａの演出制御部５２は、遮蔽領域Ｒの形状に対応した演出用画像Ｑの画像情報Ｄ１のみをＲＯＭ５０Ｃから読み出す（ステップＳ５ｃ）。
　ステップＳ５ｂ又はステップＳ５ｃの後、制御部５０Ａの演出制御部５２は、ＲＯＭ５０Ｃから読み出した画像情報Ｄと、ステップＳ２にて検出された遮蔽領域Ｒの位置とに基づいて、第一投影装置１０から演出用画像Ｑを投影させるための正面投影用画像データと、第二投影装置２０から演出用画像Ｑａ又は演出用画像Ｑｂを投影させるための背面投影用画像データとの少なくとも一方を生成する（ステップＳ５ｄ）。
　そして、演出制御部５２は、生成した正面投影用画像データを第一投影装置１０に出力してこの正面投影用画像データに基づく画像の投影を行わせ、生成した背面投影用画像データを第二投影装置２０に出力してこの背面投影用画像データに基づく画像の投影を行わせる（ステップＳ５ｅ）。
　以下、図４及び図５に示した動作によって行われる各種演出の例について、図６から図１１を参照しつつ説明する。図６から図１１の演出は一例であり、これらに限定されるものではない。
　図６は、図５のステップＳ５ｂによって読み出された画像情報Ｄ１と画像情報Ｄ２に基づく演出の例を説明するための模式図である。
　図６に示す例では、第一投影装置１０から青空等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図６（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に飛行機の形状の遮蔽物Ａ（白色の型紙など）が持ち込まれると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが遮蔽物Ａの影Ｋ１となって現れる（図６（ｂ））。
　図６の例では、ＲＯＭ５０Ｃに、特定形状である飛行機の形状に対応する画像情報Ｄ１として、青空の画像を表示するための情報が記憶され、画像情報Ｄ２として飛行機の画像を表示するための情報が記憶されているものとする。
　図６（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が飛行機の形状であると判別されて演出制御が開始される。
　そして、図５のステップＳ５ｂにおいて、飛行機の形状に対応する画像情報Ｄ１として青空の画像を表示するための画像情報がＲＯＭ５０Ｃから読み出され、飛行機の形状に対応する画像情報Ｄ２として飛行機の画像を表示画像Ｇに追加するための画像情報がＲＯＭ５０Ｃから読み出される。
　その後、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、この画像情報Ｄ１に基づく青空の画像を、背面４０ｂにおける遮蔽領域Ｒと重なる領域に投影させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　また、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ２と遮蔽領域Ｒの位置とに基づき、表示画像Ｇのうちの遮蔽領域Ｒに投影させるべき画像を、この画像情報Ｄ２に基づく飛行機の画像に変更するための正面投影用画像データが生成され、この正面投影用画像データが第一投影装置１０に出力される。
　以上の動作により、遮蔽領域Ｒと重なるスクリーン４０の背面４０ｂの領域には、輝度及び彩度が表示画像Ｇと等しく且つ遮蔽領域Ｒの形状と同じ演出用画像Ｑ（青空画像）が第二投影装置２０から投影される。
　これにより、遮蔽物Ａの影Ｋ１が表示画像Ｇと同じ青空画像によって埋められた状態となる（図６（ｃ））。また、図示は省略されているが、遮蔽物Ａには、その遮蔽物Ａの形状と同じ演出用画像Ｑａ（飛行機の画像）が投影される。演出用画像Ｑは第三の画像を構成する。演出用画像Ｑａは第二の画像を構成する。
　このように、スクリーン４０の背面４０ｂにおける遮蔽領域Ｒと重なる領域に、第二投影装置２０から演出用画像Ｑを投影することで、遮蔽物Ａの影Ｋ１が生じるはずのスクリーン４０上の領域に影Ｋ１が生じていないという不思議な印象を観察者に与え得て、興趣のある演出を行うことができる。
　さらに、演出用画像Ｑａが第一投影装置１０から遮蔽物Ａに投影される。このため、スクリーン４０の観察面４０ａ前方に浮かぶ型紙に飛行機の画像が投影されることになる。このように、立体的な映像を観察者に提供することができるため、興趣に富む演出を行うことができる。
　なお、特定形状である飛行機の形状に対応する画像情報Ｄ２として、飛行機だけでなく、例えば雲の画像を表示するための情報が記憶されているものとしてもよい。この場合には、図６（ｃ）において、表示画像Ｇのうちの遮蔽領域Ｒとは異なる部分に、第一投影装置１０から雲の画像が追加投影されるようにすればよい。
　図７は、図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。
　図７に示す例では、第一投影装置１０からビルの壁等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図７（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に遮蔽物Ａとして人が入ると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが人の影Ｋ２となって現れる（図７（ｂ））。
　図７の例では、ＲＯＭ５０Ｃに、特定形状である人の形状に対応する画像情報Ｄ１として、影の画像を表示するための情報が記憶されているものとする。
　図７（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が人の形状であると判別されて演出制御が開始される。そして、図５のステップＳ５ｃにおいて、人の形状に対応する画像情報Ｄ１として影の画像を表示するための画像情報がＲＯＭ５０Ｃから読み出される。
　その後、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、この画像情報Ｄ１に基づく影の画像を、背面４０ｂにおける遮蔽領域Ｒと重なる領域の内側に投影させ、且つ、この領域の縁とこの影の画像との間に、第一投影装置１０から遮蔽領域Ｒに投影すべき画像と同じ画像（背景画像）を投影させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　以上の動作により、遮蔽領域Ｒと重なるスクリーン４０の背面４０ｂの領域には、遮蔽領域Ｒと同じ形状の画像ＱＸが第二投影装置２０から投影される。これにより、遮蔽物Ａの影Ｋ２が画像ＱＸによって埋められた状態となる（図７（ｃ））。
　画像ＱＸは、遮蔽領域Ｒよりも小さい人の形状の影の画像である演出用画像Ｑと、演出用画像Ｑと遮蔽領域Ｒの輪郭との間の領域を埋める背景画像Ｑ２と、で構成されている。演出用画像Ｑは第三の画像を構成する。
　このように、実際の人の影よりも小さい影を表す演出用画像Ｑを、第二投影装置２０から遮蔽領域Ｒの内側に投影することで、実際の人の影Ｋ２よりも小さい人の影がスクリーン４０に映っているという不思議な印象を観察者に与え得て興趣のある演出を行うことができる。
　また、図７の例では、演出用画像Ｑと共に、演出用画像Ｑと遮蔽領域Ｒの輪郭との間の領域を埋める背景画像Ｑ２を、第二投影装置２０から遮蔽領域Ｒに投影している。このため、実際の人の影Ｋ２よりも小さい人の影に、より現実味を持たせた演出を行うことができる。
　なお、背景画像Ｑ２の投影は必須ではない。また、演出用画像Ｑは、人の影の形をしていなくてもよく、例えば動物の影の形等としてもよい。このようにすることで、より面白みのある演出が可能となる。
　図８は、図５のステップＳ５ｂによって読み出された画像情報Ｄ１及び画像情報Ｄ３に基づく演出の例を説明するための模式図である。
　図８に示す例では、第一投影装置１０からビルの壁等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図８（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に遮蔽物Ａとして人が入ると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが人の影Ｋ２となって現れる（図８（ｂ））。
　図８の例では、ＲＯＭ５０Ｃに、特定形状である人の形状に対応する画像情報Ｄ１として影の画像を表示するための情報が記憶され、人の形状に対応する画像情報Ｄ３として、画像情報Ｄ１に基づく影の画像と組み合わせることで１つのコンテンツを構成することのできる画像を表示するための情報が記憶されているものとする。
　図８（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が人の形状であると判別されて演出制御が開始される。
　そして、図５のステップＳ５ｂにおいて、人の形状に対応する画像情報Ｄ１として人の影の画像を表示するための画像情報がＲＯＭ５０Ｃから読み出され、人の形状に対応する画像情報Ｄ３として、動物の耳の影の画像を表示するための画像情報がＲＯＭ５０Ｃから読み出される。
　その後、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、この画像情報Ｄ１に基づく影の画像を、背面４０ｂにおける遮蔽領域Ｒと重なる領域に投影させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　また、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ３と遮蔽領域Ｒの位置とに基づき、表示画像Ｇのうちの遮蔽領域Ｒに隣接する領域に、この画像情報Ｄ３に基づく動物の耳の影の画像を追加するための正面投影用画像データが生成され、この正面投影用画像データが第一投影装置１０に出力される。
　以上の動作により、遮蔽領域Ｒと重なるスクリーン４０の背面４０ｂの領域には、遮蔽領域Ｒと同じ形状の影の画像で構成される演出用画像Ｑが第二投影装置２０から投影される。これにより、遮蔽物Ａの影Ｋ２が演出用画像Ｑによって埋められた状態となる（図８（ｃ））。演出用画像Ｑは第三の画像を構成する。
　更に、スクリーン４０の観察面４０ａにおいては、遮蔽領域Ｒの上側に隣接する隣接領域Ｒ１に、猫などの動物の耳の影を示す画像で構成される演出用画像Ｑｂが第一投影装置１０から投影されて表示画像Ｇが変更された状態となる（図８（ｃ））。演出用画像Ｑｂと演出用画像Ｑとが合わさることで、猫など動物（１つのコンテンツ）の影Ｋ３が構成される。
　このように、表示画像Ｇの遮蔽されている部分とは異なる演出用画像Ｑを背面４０ｂの遮蔽領域Ｒと重なる領域に投影するとともに、表示画像Ｇのうちの遮蔽領域Ｒに隣接する隣接領域Ｒ１に、演出用画像Ｑと同じ輝度及び彩度の演出用画像Ｑｂを投影して、遮蔽物Ａである人の影Ｋ２とは異なる影Ｋ３を生成する。これにより、スクリーン４０の観察面４０ａの前に立つ人の影が動物の影に変化するといった演出を行うことができる。
　図９は、図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。
　図９に示す例では、第一投影装置１０からビルの壁等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図９（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に遮蔽物Ａとして人が入ると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが人の影Ｋ２となって現れる（図９（ｂ））。
　図９の例では、ＲＯＭ５０Ｃに、特定形状である人の形状に対応する画像情報Ｄ１として、文字を含む画像を表示するための情報が記憶されているものとする。
　図９（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が人の形状であると判別されて演出制御が開始される。そして、図５のステップＳ５ｃにおいて、人の形状に対応する画像情報Ｄ１として、文字を含む画像を表示するための画像情報がＲＯＭ５０Ｃから読み出される。
　その後、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、画像情報Ｄ１に基づく文字を含む画像を、背面４０ｂにおける遮蔽領域Ｒと重なる領域の内側に投影させ、且つ、この領域の縁とこの文字を含む画像との間に、第一投影装置１０から遮蔽領域Ｒに投影している画像と同じ画像を投影させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　以上の動作により、遮蔽領域Ｒと重なるスクリーン４０の背面４０ｂの領域には、文字（図９の例ではＡＢＣＤＥの文字を例示している）を含む演出用画像Ｑが第二投影装置２０から投影されるとともに、演出用画像Ｑと遮蔽領域Ｒの輪郭との間の領域を埋める背景画像Ｑ５が第二投影装置２０から投影される。
　これにより、遮蔽物Ａの影Ｋ２が、演出用画像Ｑと背景画像Ｑ５によって構成される画像ＱＸによって埋められた状態となる（図９（ｃ））。演出用画像Ｑは第三の画像を構成する。
　このように、遮蔽領域Ｒの形状が人の形状であると判定された場合に、文字を含む演出用画像Ｑを遮蔽領域Ｒと重なる領域に投影することにより、演出用画像Ｑに含まれる文字による情報を、遮蔽物Ａとなった人が利用可能となる。
　例えば、遮蔽物Ａとなった人が講演者である場合、講演の原稿文を構成する文字を含む演出用画像Ｑを遮蔽領域Ｒと重なる領域に投影することにより、講演者は、演出用画像Ｑに含まれる文字を参照しつつ講演を行うことができる。
　その際、講演者の影となる領域に演出用画像Ｑが投影されるので、講演者が演出用画像Ｑを見ていることを観客に気付かれ難くすることができる。図９の例では、演出用画像Ｑと遮蔽領域Ｒの輪郭との間の領域を埋める背景画像Ｑ５が遮蔽領域Ｒに投影されるので、演出用画像Ｑが投影されていることを、より気付かれ難くすることができる。なお、背景画像Ｑ５の投影は必須ではない。
　図１０は、図５のステップＳ５ｃによって読み出された画像情報Ｄ１に基づく演出の例を説明するための模式図である。
　図１０に示す例では、第一投影装置１０からビルの壁等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図１０（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に遮蔽物Ａとして人が入ると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが人の影Ｋ２となって現れる（図１０（ｂ））。
　図１０の例では、ＲＯＭ５０Ｃに、特定形状である人の形状に対応する画像情報Ｄ１として、文字を含む画像を表示するための情報と、光を非投影とする画素を指定するための情報と、が記憶されているものとする。
　図１０（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が人の形状であると判別されて演出制御が開始される。
　そして、図５のステップＳ５ｃにおいて、人の形状に対応する画像情報Ｄ１として、文字を含む画像を表示するための画像情報と、光を非投影とする画素を指定するための画像情報とがＲＯＭ５０Ｃから読み出される。
　その後、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、画像情報Ｄ１に基づく文字を含む画像と、光が非投影となる非投影領域を、背面４０ｂにおける遮蔽領域Ｒと重なる領域の内側に形成させ、且つ、この領域の縁と、この領域の内側の画像及び非投影領域との間に、第一投影装置１０から遮蔽領域Ｒに投影している画像と同じ画像を形成させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　以上の動作により、遮蔽領域Ｒと重なるスクリーン４０の背面４０ｂの領域には、文字（図１０の例ではＡＢＣＤＥの文字を例示している）を含む演出用画像Ｑ１と、光が非投影となって形成された非投影領域Ｑ３とが形成され、更に、演出用画像Ｑ１及び非投影領域Ｑ３と遮蔽領域Ｒの輪郭との間の領域を埋める背景画像Ｑ５が形成される。
　これにより、遮蔽物Ａの影Ｋ２が、非投影領域Ｑ３の部分を除いて、演出用画像Ｑ１と背景画像Ｑ５によって構成される画像ＱＸによって埋められた状態となる（図１０（ｃ））。画像ＱＸ及び非投影領域Ｑ３を合わせた部分は第三の画像を構成する。
　図１０の例では、図１０（ｃ）の状態において、例えば、遮蔽領域Ｒを生じさせている講演者が、非投影領域Ｑ３に対し、レーザポインタを使ってレーザ光を照射する操作、或いは、レーザポインタからレーザ光を照射しつつ、その照射ポイントを所定のパターンで移動させる操作等を行うことで、制御部５０Ａに対して特定の指示を行うことができるようになっている。
　具体的には、制御部５０Ａの演出制御部５２は、非投影領域Ｑ３を第二投影装置２０によって形成させた後、撮影装置３０によって背面４０ｂを撮影して得られた撮影画像Ｓを取得し、この撮影画像Ｓにおける非投影領域Ｑ３の部分を監視する。
　そして、この部分に、第一投影装置１０及び第二投影装置２０から投影される光とは異なる投影外光が含まれ、この投影外光が予め決められたパターンと一致する場合には、制御部５０Ａの演出制御部５２は、演出用画像Ｑ１に含まれる文字を別の文字に変更させたり、第一投影装置１０から投影させている表示画像Ｇを別の画像に変更させたりといった、投影外光に予め対応付けられた制御を実行する。
　投影外光のパターンとは、例えば、投影外光の形状、投影外光の動いた軌跡の形状、又は投影外光の点滅パターン等である。
　制御部５０Ａの演出制御部５２は、撮影画像Ｓの中に、予め決められた色及び明るさの領域が含まれる場合に、撮影画像Ｓに投影外光が含まれると判定する。
　図１０の例によれば、図９の例と同様の効果を得られると共に、簡単な操作によって、演出用画像Ｑ１に含まれる文字又は表示画像Ｇ等を変更することができる。したがって、スクリーン４０の前に立ちながらも、講演者の意思によって演出用画像Ｑ１又は表示画像Ｇ等を変更することができ、プレゼンテーションを効率的に進めることが可能となる。
　なお、図１０において、演出用画像Ｑ１の投影は省略してもよい。このような場合でも、講演者の意思によって表示画像Ｇ等を変更することができ、プレゼンテーションを効率的に進めることが可能となる。
　図７から図１０では、特定形状を人の形状としているが、これに限らない。例えば、特定形状は、人が中に入ることのできる着ぐるみの形状等であってもよい。
　また、図１０の例において、演出用画像Ｑ１に含まれる文字を別の文字に変更するための操作に用いる光源はレーザポインタに限るものではない。この光源は、指向性の高い光源を利用することが望ましいが、特定の距離で結像性のある光源又は演者がスクリーンに非常に近接するなどしていれば一般的な懐中電灯の利用も可能である。
　また、図１０（ｃ）に示す非投影領域Ｑ３は、投影外光の検出精度を確保できるのであれば、光が投影された領域（光が投影された領域）としてもよい。例えば、上述した投影外光が検出できる程度に、予め決められた値よりも低い輝度の画像を、非投影領域Ｑ３の位置に第二投影装置２０から投影させてもよい。
　また、図１０の例において、遮蔽領域Ｒが人の形状に一致したと判定されると、演出制御部５２が、第一投影装置１０から投影させている表示画像Ｇを、元の表示画像Ｇにおける遮蔽領域Ｒ以外の部分の一部を非投影領域に変更した画像に変更してもよい。この場合、第二投影装置２０による画像の投影は行わなくてもよい。
　この場合には、演出制御部５２が、撮影画像Ｓのうちの遮蔽領域Ｒ以外の部分にて非投影領域が形成されている範囲を、投影外光の検出対象とすればよい。また、表示画像Ｇの一部に非投影領域を形成する代わりに、予め決められた値よりも低い輝度の画像を、この非投影領域を形成すべき位置に投影させてもよい。
　図１１及び図１２は、図５のステップＳ５ｂによって読み出された画像情報Ｄ１及び画像情報Ｄ３に基づく演出の例を説明するための模式図である。
　図１１及び図１２に示す例では、第一投影装置１０から夜空等の背景を表現する表示画像Ｇがスクリーン４０に投影されている（図１１（ａ））。この状態にて、第一投影装置１０とスクリーン４０との間に、五角形の遮蔽物（白色の型紙など）Ａが入ると、スクリーン４０の観察面４０ａ上に表示画像Ｇの遮蔽領域Ｒが生じ、遮蔽領域Ｒが影Ｋ４となって現れる（図１１（ｂ））。
　図１１及び図１２の例では、ＲＯＭ５０Ｃに、特定形状である五角形の形状に対応する画像情報Ｄ１として装飾画像を表示するための情報が記憶され、五角形の形状に対応する画像情報Ｄ３として、非投影領域を形成するための情報が記憶されているものとする。
　図１１（ｂ）の状態になると、図４のステップＳ２において遮蔽領域Ｒが検出され、図４のステップＳ４において、この遮蔽領域Ｒの形状が五角形であると判別されて演出制御が開始される。そして、図５のステップＳ５ｂにおいて、五角形に対応する画像情報Ｄ１として、装飾画像を表示するための画像情報がＲＯＭ５０Ｃから読み出され、五角形に対応する画像情報Ｄ３として、非投影領域を形成するための画像情報がＲＯＭ５０Ｃから読み出される。
　そして、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ３と遮蔽領域Ｒの位置とに基づき、この画像情報Ｄ３に基づく非投影領域を、表示画像Ｇのうちの遮蔽領域Ｒに隣接する領域に追加させるための正面投影用画像データが生成され、この正面投影用画像データが第一投影装置１０に出力される。この正面投影用画像データが第一投影装置１０に出力されると、第一投影装置１０が、観察面４０ａにおける遮蔽領域Ｒに隣接する領域に光を投影しない制御を行う。
　また、図５のステップＳ５ｄにおいて、読み出された画像情報Ｄ１と遮蔽領域Ｒの位置とに基づき、この画像情報Ｄ１に基づく装飾画像を、背面４０ｂのうちの観察面４０ａに形成される非投影領域と重なる領域の一部または全部に投影させるための背面投影用画像データが生成され、この背面投影用画像データが第二投影装置２０に出力される。
　以上の動作により、表示画像Ｇのうちの遮蔽領域Ｒの周囲、すなわち、五角形の影Ｋ４の周囲には、五角形の影Ｋ４の各辺を一辺とする五つの三角形からなる非投影領域Ｑ３ｂが付加された状態となる（図１２（ａ））。
　更に、表示画像Ｇにおける非投影領域Ｑ３ｂと重なる位置には、第二投影装置２０から装飾画像Ｑ７が投影されることにより装飾がなされる（図１２（ｂ））。装飾画像Ｑ７は第三の画像を構成する。
　このように、遮蔽物Ａの五角形の影Ｋ４の周囲に、五角形の影Ｋ４の各辺を一辺とする５つの三角形からなる透明な非投影領域Ｑ３ｂを付加することにより、全体として星形の影Ｋ５を表現し、その星形の核の部分（五角形の影の部分）の外側を装飾画像Ｑ７で縁取った投影画像による演出がなされる（図１２（ｂ））。
　この演出によれば、遮蔽物Ａが五角形であるにもかかわらず、星形の影Ｋ５がスクリーン４０に映っているという不思議な印象を観察者に与えることができる。更に、星形の影Ｋ５の中に装飾画像Ｑ７による装飾がなされることにより、影Ｋ５に華やかさを持たせることができる。
　なお、図１２では、非投影領域Ｑ３ｂが遮蔽領域Ｒに隣接して形成されているが、非投影領域Ｑ３ｂと遮蔽領域Ｒとが離れた位置に形成されてもよい。また、図１２（ｂ）の例では、非投影領域Ｑ３ｂと重なる領域の一部にのみ装飾画像Ｑ７が投影されているが、非投影領域Ｑ３ｂと重なる領域の全部に装飾画像Ｑ７が投影されてもよい。
　また、図１２の演出例において、第二投影装置２０による画像の投影を行わないものとしてもよい。この場合には、第一投影装置１０とスクリーン４０との間に、五角形の遮蔽物Ａを掲げることで、星形の影がスクリーン４０上に形成されるといった演出が可能となる。
　なお、図４のフローチャートでは、ステップＳ４の判定がＹＥＳとなったタイミングにて演出制御が開始されるものとしているが、これに限らない。例えば、演出制御部５２は、ステップＳ４の判定がＹＥＳとなった後に、図１０の演出例において説明した投影外光のパターンが撮影画像Ｓに含まれるか否かを判定し、このパターンを検出した場合に、ステップＳ５の処理に移行するようにしてもよい。
　このようにすることで、演出開始のタイミングや演出開始するかどうかの判断を任意に決めることができ、状況に応じた対応が可能になる。この場合の投影外光の検出対象範囲は、撮影画像Ｓの全体としてもよいし、遮蔽領域Ｒのみとしてもよい。
　投影システム１において、制御装置５０の制御部５０Ａ、ＲＡＭ５０Ｂ、及びＲＯＭ５０Ｃは、例えば第一投影装置１０に内蔵されていてもよいし、第二投影装置２０に内蔵されていてもよい。また、第二投影装置２０と撮影装置３０は別体ではなく一体化されていてもよい。
　以上説明したように、本明細書には以下の事項が開示されている。
（１）
　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、
　上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された撮影装置と、
　上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置と、
　上記撮影装置によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、及び、上記遮蔽領域検出部によって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を上記第一投影装置及び上記第二投影装置の一方又は両方から投影させる制御部を有する投影制御装置と、を備える投影システム。
（２）
　（１）記載の投影システムに使用される上記投影制御装置。
（３）
　（２）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像を、上記第二投影装置から上記投影対象物の上記第二の面に投影させる投影制御装置。
（４）
　（３）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として、上記第一の画像のうちの上記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、上記投影対象物の上記第二の面に投影させる投影制御装置。
（５）
　（４）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像を、上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御装置。
（６）
　（５）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として文字を含む画像を、上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御装置。
（７）
　（５）又は（６）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御装置。
（８）
　（２）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像を、上記第一投影装置と上記第二投影装置の各々から投影させる投影制御装置。
（９）
　（８）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として、上記第一の画像のうちの上記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、上記投影対象物の上記第二の面に投影させ、更に、上記特定形状に対応する上記画像として、上記第一の画像に変更を加えた画像を上記第一投影装置から投影させる投影制御装置。
（１０）
　（９）記載の投影制御装置であって、
　上記制御部は、上記第一の画像に変更を加えた上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域に隣接する隣接領域に、上記遮蔽領域と重なる領域に投影される上記第三の画像と合わせることで１つのコンテンツを構成する画像を追加した画像を、上記第一投影装置から投影させる投影制御装置。
（１１）
　（９）記載の投影制御装置であって、
　上記制御部は、上記第一の画像に変更を加えた上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域とは異なる領域に非投影領域を追加した画像を上記第一投影装置により投影させ、更に、上記第二の面のうちの上記非投影領域と重なる領域の一部又は全部に、上記第二投影装置から上記第三の画像を投影させる投影制御装置。
（１２）
　（２）から（１１）のいずれか１つに記載の投影制御装置であって、
　上記制御部は、上記遮蔽領域の形状が上記特定形状と一致し、且つ、上記撮影装置により上記第二の面を撮影して得られる撮影画像から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記特定形状に対応する上記画像の投影を開始させる投影制御装置。
（１３）
　（２）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させ、
　上記撮影装置により上記第二の面を撮影して得られる撮影画像における上記第二領域又は上記第三領域から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記パターンに予め対応付けられた制御を行う投影制御装置。
（１４）
　（２）記載の投影制御装置であって、
　上記制御部は、上記特定形状に対応する上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域以外の部分に、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域を追加した画像を上記第一投影装置から上記第一の面に投影させ、
　上記撮影装置により上記第二の面を撮影して得られる撮影画像における上記第二領域又は上記第三領域から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記パターンに予め対応付けられた制御を行う投影制御装置。
（１５）
　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
　上記遮蔽領域検出ステップによって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を、上記第一投影装置及び上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から投影させる制御ステップと、を備える投影制御方法。
（１６）
　（１５）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像を、上記第二投影装置から上記投影対象物の上記第二の面に投影させる投影制御方法。
（１７）
　（１６）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として、上記第一の画像のうちの上記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、上記投影対象物の上記第二の面に投影させる投影制御方法。
（１８）
　（１７）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像を、上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御方法。
（１９）
　（１８）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として文字を含む画像を、上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御方法。
（２０）
　（１８）又は（１９）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させる投影制御方法。
（２１）
　（１５）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像を、上記第一投影装置と上記第二投影装置の各々から投影させる投影制御方法。
（２２）
　（２１）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として、上記第一の画像のうちの上記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、上記投影対象物の上記第二の面に投影させ、更に、上記特定形状に対応する上記画像として、上記第一の画像に変更を加えた画像を上記第一投影装置から投影させる投影制御方法。
（２３）
　（２２）記載の投影制御方法であって、
　上記制御ステップでは、上記第一の画像に変更を加えた上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域に隣接する隣接領域に、上記遮蔽領域と重なる領域に投影される上記第三の画像と合わせることで１つのコンテンツを構成する画像を追加した画像を、上記第一投影装置から投影させる投影制御方法。
（２４）
　（２２）記載の投影制御方法であって、
　上記制御ステップでは、上記第一の画像に変更を加えた上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域とは異なる領域に非投影領域を追加した画像を上記第一投影装置により投影させ、更に、上記第二の面のうちの上記非投影領域と重なる領域の一部又は全部に、上記第二投影装置から上記第三の画像を投影させる投影制御方法。
（２５）
　（１５）から（２４）のいずれか１つに記載の投影制御方法であって、
　上記制御ステップでは、上記遮蔽領域の形状が上記特定形状と一致し、且つ、上記撮影装置により上記第二の面を撮影して得られる撮影画像から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記特定形状に対応する上記画像の投影を開始させる投影制御方法。
（２６）
　（１５）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を上記第二投影装置から上記第二の面のうちの上記遮蔽領域と重なる領域に投影させ、
　上記撮影装置により上記第二の面を撮影して得られる撮影画像における上記第二領域又は上記第三領域から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記パターンに予め対応付けられた制御を行う投影制御方法。
（２７）
　（１５）記載の投影制御方法であって、
　上記制御ステップでは、上記特定形状に対応する上記画像として、上記第一の面に投影された上記第一の画像のうちの上記遮蔽領域以外の部分に、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域を追加した画像を上記第一投影装置から上記第一の面に投影させ、
　上記撮影装置により上記第二の面を撮影して得られる撮影画像における上記第二領域又は上記第三領域から、上記第一投影装置及び上記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、上記パターンに予め対応付けられた制御を行う投影制御方法。
（２８）
　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、上記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された上記投影対象物の上記第一の面と反対側の第二の面の撮影画像に基づいて、上記投影対象物に投影された上記第一の画像における上記第一投影装置と上記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
　上記遮蔽領域検出ステップによって検出された上記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、上記特定形状に対応して予め決められている画像を、上記第一投影装置及び上記第一投影装置に対し上記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から上記投影対象物に投影させる制御ステップと、をコンピュータに実行させるための投影制御プログラム。
　以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
　なお、本出願は、２０１８年３月２６日出願の日本特許出願（特願２０１８－０５８５２３）に基づくものであり、その内容は本出願の中に参照として援用される。
　本発明によれば、表示画像における遮蔽領域に応じて投影像を制御することで様々な演出を可能とする投影システム、投影制御装置、投影制御方法、及び投影制御プログラムを提供することができる。
１　投影システム
１０　第一投影装置
２０　第二投影装置
３０　撮影装置
４０　スクリーン
４０ａ　観察面
４０ｂ　背面
５０　制御装置
５０Ａ　制御部
５０Ｂ　ＲＡＭ
５０Ｃ　ＲＯＭ
５１　遮蔽領域検出部
５２　演出制御部
Ｇ　表示画像
Ｑ、Ｑ１、Ｑａ、Ｑｂ　演出用画像
Ｑ３、Ｑ３ｂ　非投影領域
Ｋ１～Ｋ５　影
Ｑ２、Ｑ５　背景画像
Ｑ７　装飾画像
ＱＸ　画像
Ｒ　遮蔽領域
Ｒ１　隣接領域
Ｓ　撮影画像
Ａ　遮蔽物

Claims (28)

  1. 　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置と、
    　前記第一投影装置に対し前記投影対象物を挟んで反対側に配置された撮影装置と、
    　前記第一投影装置に対し前記投影対象物を挟んで反対側に配置された第二投影装置と、
    　前記撮影装置によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出部、及び、前記遮蔽領域検出部によって検出された前記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、前記特定形状に対応して予め決められている画像を前記第一投影装置及び前記第二投影装置の一方又は両方から投影させる制御部を有する投影制御装置と、を備える投影システム。
  2. 　請求項１記載の投影システムに使用される前記投影制御装置。
  3. 　請求項２記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像を、前記第二投影装置から前記投影対象物の前記第二の面に投影させる投影制御装置。
  4. 　請求項３記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として、前記第一の画像のうちの前記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、前記投影対象物の前記第二の面に投影させる投影制御装置。
  5. 　請求項４記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像を、前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御装置。
  6. 　請求項５記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として文字を含む画像を、前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御装置。
  7. 　請求項５又は６記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御装置。
  8. 　請求項２記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像を、前記第一投影装置と前記第二投影装置の各々から投影させる投影制御装置。
  9. 　請求項８記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として、前記第一の画像のうちの前記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、前記投影対象物の前記第二の面に投影させ、更に、前記特定形状に対応する前記画像として、前記第一の画像に変更を加えた画像を前記第一投影装置から投影させる投影制御装置。
  10. 　請求項９記載の投影制御装置であって、
    　前記制御部は、前記第一の画像に変更を加えた前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域に隣接する隣接領域に、前記遮蔽領域と重なる領域に投影される前記第三の画像と合わせることで１つのコンテンツを構成する画像を追加した画像を、前記第一投影装置から投影させる投影制御装置。
  11. 　請求項９記載の投影制御装置であって、
    　前記制御部は、前記第一の画像に変更を加えた前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域とは異なる領域に非投影領域を追加した画像を前記第一投影装置により投影させ、更に、前記第二の面のうちの前記非投影領域と重なる領域の一部又は全部に、前記第二投影装置から前記第三の画像を投影させる投影制御装置。
  12. 　請求項２から１１のいずれか１項記載の投影制御装置であって、
    　前記制御部は、前記遮蔽領域の形状が前記特定形状と一致し、且つ、前記撮影装置により前記第二の面を撮影して得られる撮影画像から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記特定形状に対応する前記画像の投影を開始させる投影制御装置。
  13. 　請求項２記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させ、
    　前記撮影装置により前記第二の面を撮影して得られる撮影画像における前記第二領域又は前記第三領域から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記パターンに予め対応付けられた制御を行う投影制御装置。
  14. 　請求項２記載の投影制御装置であって、
    　前記制御部は、前記特定形状に対応する前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域以外の部分に、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域を追加した画像を前記第一投影装置から前記第一の面に投影させ、
    　前記撮影装置により前記第二の面を撮影して得られる撮影画像における前記第二領域又は前記第三領域から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記パターンに予め対応付けられた制御を行う投影制御装置。
  15. 　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、前記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
    　前記遮蔽領域検出ステップによって検出された前記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、前記特定形状に対応して予め決められている画像を、前記第一投影装置及び前記第一投影装置に対し前記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から投影させる制御ステップと、を備える投影制御方法。
  16. 　請求項１５記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像を、前記第二投影装置から前記投影対象物の前記第二の面に投影させる投影制御方法。
  17. 　請求項１６記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として、前記第一の画像のうちの前記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、前記投影対象物の前記第二の面に投影させる投影制御方法。
  18. 　請求項１７記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像を、前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御方法。
  19. 　請求項１８記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として文字を含む画像を、前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御方法。
  20. 　請求項１８又は１９記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させる投影制御方法。
  21. 　請求項１５記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像を、前記第一投影装置と前記第二投影装置の各々から投影させる投影制御方法。
  22. 　請求項２１記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として、前記第一の画像のうちの前記遮蔽領域に投影されるべき第二の画像とは異なる第三の画像を、前記投影対象物の前記第二の面に投影させ、更に、前記特定形状に対応する前記画像として、前記第一の画像に変更を加えた画像を前記第一投影装置から投影させる投影制御方法。
  23. 　請求項２２記載の投影制御方法であって、
    　前記制御ステップでは、前記第一の画像に変更を加えた前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域に隣接する隣接領域に、前記遮蔽領域と重なる領域に投影される前記第三の画像と合わせることで１つのコンテンツを構成する画像を追加した画像を、前記第一投影装置から投影させる投影制御方法。
  24. 　請求項２２記載の投影制御方法であって、
    　前記制御ステップでは、前記第一の画像に変更を加えた前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域とは異なる領域に非投影領域を追加した画像を前記第一投影装置により投影させ、更に、前記第二の面のうちの前記非投影領域と重なる領域の一部又は全部に、前記第二投影装置から前記第三の画像を投影させる投影制御方法。
  25. 　請求項１５から２４のいずれか１項記載の投影制御方法であって、
    　前記制御ステップでは、前記遮蔽領域の形状が前記特定形状と一致し、且つ、前記撮影装置により前記第二の面を撮影して得られる撮影画像から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記特定形状に対応する前記画像の投影を開始させる投影制御方法。
  26. 　請求項１５記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として、光の投影により形成される第一領域と、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域と、を含む画像を前記第二投影装置から前記第二の面のうちの前記遮蔽領域と重なる領域に投影させ、
    　前記撮影装置により前記第二の面を撮影して得られる撮影画像における前記第二領域又は前記第三領域から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記パターンに予め対応付けられた制御を行う投影制御方法。
  27. 　請求項１５記載の投影制御方法であって、
    　前記制御ステップでは、前記特定形状に対応する前記画像として、前記第一の面に投影された前記第一の画像のうちの前記遮蔽領域以外の部分に、光が非投影となって形成される第二領域又は輝度が予め決められた値よりも低い第三領域を追加した画像を前記第一投影装置から前記第一の面に投影させ、
    　前記撮影装置により前記第二の面を撮影して得られる撮影画像における前記第二領域又は前記第三領域から、前記第一投影装置及び前記第二投影装置から投影される光以外の投影外光の予め決められたパターンを検出した場合に、前記パターンに予め対応付けられた制御を行う投影制御方法。
  28. 　光の一部を透過可能な投影対象物の第一の面側に第一の画像を投影する第一投影装置に対し、前記投影対象物を挟んで反対側に配置された撮影装置、によって撮影された前記投影対象物の前記第一の面と反対側の第二の面の撮影画像に基づいて、前記投影対象物に投影された前記第一の画像における前記第一投影装置と前記投影対象物との間にある遮蔽物によって生じた遮蔽領域を検出する遮蔽領域検出ステップと、
    　前記遮蔽領域検出ステップによって検出された前記遮蔽領域の形状が予め記憶された特定形状と一致する場合に、前記特定形状に対応して予め決められている画像を、前記第一投影装置及び前記第一投影装置に対し前記投影対象物を挟んで反対側に配置された第二投影装置、の一方又は両方から前記投影対象物に投影させる制御ステップと、をコンピュータに実行させるための投影制御プログラム。
PCT/JP2019/008654 2018-03-26 2019-03-05 投影システム、投影制御装置、投影制御方法、投影制御プログラム WO2019188046A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020509767A JP6872076B2 (ja) 2018-03-26 2019-03-05 投影制御装置、投影制御方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018058523 2018-03-26
JP2018-058523 2018-03-26

Publications (1)

Publication Number Publication Date
WO2019188046A1 true WO2019188046A1 (ja) 2019-10-03

Family

ID=68061415

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/008654 WO2019188046A1 (ja) 2018-03-26 2019-03-05 投影システム、投影制御装置、投影制御方法、投影制御プログラム

Country Status (2)

Country Link
JP (1) JP6872076B2 (ja)
WO (1) WO2019188046A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110955105A (zh) * 2019-12-20 2020-04-03 青岛海信激光显示股份有限公司 激光投影设备
WO2021193171A1 (ja) * 2020-03-25 2021-09-30 株式会社Ｊｖｃケンウッド 画像投影装置及び画像補正方法
WO2022070462A1 (ja) * 2020-09-29 2022-04-07 富士フイルム株式会社 制御装置、制御方法、制御プログラム、及び投影システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1124839A (ja) * 1997-07-07 1999-01-29 Sony Corp 情報入力装置
JP2002213947A (ja) * 2001-01-17 2002-07-31 Fuji Xerox Co Ltd ターゲット位置を測定するシステム及びその方法
WO2007004502A1 (ja) * 2005-06-30 2007-01-11 Ricoh Company, Ltd. 投影画像表示装置
JP2008026424A (ja) * 2006-07-18 2008-02-07 Fuji Xerox Co Ltd 画像表示装置及び画像表示方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284874A (ja) * 2004-03-30 2005-10-13 Seiko Epson Corp プロジェクタおよびコマンド抽出方法
US11029766B2 (en) * 2013-06-26 2021-06-08 Sony Corporation Information processing apparatus, control method, and storage medium

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1124839A (ja) * 1997-07-07 1999-01-29 Sony Corp 情報入力装置
JP2002213947A (ja) * 2001-01-17 2002-07-31 Fuji Xerox Co Ltd ターゲット位置を測定するシステム及びその方法
WO2007004502A1 (ja) * 2005-06-30 2007-01-11 Ricoh Company, Ltd. 投影画像表示装置
JP2008026424A (ja) * 2006-07-18 2008-02-07 Fuji Xerox Co Ltd 画像表示装置及び画像表示方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110955105A (zh) * 2019-12-20 2020-04-03 青岛海信激光显示股份有限公司 激光投影设备
WO2021193171A1 (ja) * 2020-03-25 2021-09-30 株式会社Ｊｖｃケンウッド 画像投影装置及び画像補正方法
WO2022070462A1 (ja) * 2020-09-29 2022-04-07 富士フイルム株式会社 制御装置、制御方法、制御プログラム、及び投影システム

Also Published As

Publication number Publication date
JPWO2019188046A1 (ja) 2021-02-12
JP6872076B2 (ja) 2021-05-19

Similar Documents

Publication Publication Date Title
WO2019188046A1 (ja) 投影システム、投影制御装置、投影制御方法、投影制御プログラム
US10068369B2 (en) Method and apparatus for selectively integrating sensory content
CN110476148B (zh) 用于提供多视图内容的显示系统和方法
US20200027201A1 (en) Augmented reality system and color compensation method thereof
CN106062862A (zh) 用于沉浸式和交互式多媒体生成的系统和方法
TWI390326B (zh) Lighting device
ES2743491T3 (es) Superposición digital de una imagen con otra imagen
WO2018100000A3 (en) Multi-depth display system
US10321107B2 (en) Methods, systems, and computer readable media for improved illumination of spatial augmented reality objects
JP5319999B2 (ja) 照明装置
JP2012129590A (ja) 情報出力装置、プログラム及び情報出力システム
CN113870213A (zh) 图像显示方法、装置、存储介质以及电子设备
JP2015079201A (ja) 映像表示システム、映像表示方法、及び投射型映像表示装置
JP2010026015A (ja) 裸眼立体映像表示装置
JP2020523957A (ja) マルチ・ビュー・コンテンツを観察するユーザに情報を提示する方法及び機器
US11936840B1 (en) Perspective based green screening
US20180213196A1 (en) Method of projection mapping
JP2010026014A (ja) 裸眼立体映像表示装置
CN108351576A (zh) 用于借助移动设备拍摄图像的方法
JP7347205B2 (ja) 投写システムの制御方法、投写システム及び制御プログラム
JP2021105639A5 (ja)
JP4627590B2 (ja) 曲面スクリーン
US20230237944A1 (en) Display apparatus and display method
US12008934B2 (en) Display apparatus and display method
WO2024038733A1 (ja) 画像処理装置、画像処理方法及び画像処理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19774740

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
ENP Entry into the national phase

Ref document number: 2020509767

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19774740

Country of ref document: EP

Kind code of ref document: A1