WO2017033384A1 - 照明システム及びプログラム - Google Patents

照明システム及びプログラム Download PDF

Info

Publication number
WO2017033384A1
WO2017033384A1 PCT/JP2016/003198 JP2016003198W WO2017033384A1 WO 2017033384 A1 WO2017033384 A1 WO 2017033384A1 JP 2016003198 W JP2016003198 W JP 2016003198W WO 2017033384 A1 WO2017033384 A1 WO 2017033384A1
Authority
WO
WIPO (PCT)
Prior art keywords
unit
image
video
projection
projected
Prior art date
Application number
PCT/JP2016/003198
Other languages
English (en)
French (fr)
Inventor
伸裕 見市
Original Assignee
パナソニックＩｐマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックＩｐマネジメント株式会社 filed Critical パナソニックＩｐマネジメント株式会社
Priority to EP16838736.3A priority Critical patent/EP3344015A1/en
Priority to US15/747,962 priority patent/US20180220112A1/en
Priority to JP2017536190A priority patent/JPWO2017033384A1/ja
Publication of WO2017033384A1 publication Critical patent/WO2017033384A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G03B21/20—Lamp housings
    • G03B21/2006—Lamp housings characterised by the light source
    • G03B21/2013—Plural light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
    • H05B45/20—Controlling the colour of the light
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/105—Controlling the light source in response to determined parameters
    • H05B47/11—Controlling the light source in response to determined parameters by determining the brightness or colour temperature of ambient light
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection

Definitions

  • the present invention relates to an illumination system and a program used for the illumination system.
  • LEDs Light Emitting Diode
  • LD Laser Diode
  • Patent Literature 1 discloses an illumination device having an illumination function and a video projection function.
  • the image is projected on a projection surface such as a screen in a state where a lighting device installed on the ceiling or the like is turned off in order to make the projected image easy to see. That is, the image is projected in an environment where the room is darkened.
  • a projector when a projector is used in a store or a house, unlike in the case of using a projector in a conventional conference room or the like, it is considered that an image is projected in a bright environment. For example, it is considered that an image is projected on a projection surface in a situation where an illumination device such as a ceiling is turned on or in a situation illuminated by natural light such as sunlight.
  • the present invention has been made to solve such a problem, and an object thereof is to provide an illumination system and a program capable of projecting a natural image that is easy to see even in a bright environment.
  • an aspect of an illumination system includes a video projection unit that projects an image on a projection plane, an imaging unit that captures an area including the projection plane as an imaging region, and the imaging unit.
  • a color correction unit that performs color correction of a video projected by the video projection unit using statistics regarding RGB of at least a part of the target region of the imaging region based on the captured image captured in step (b). is there.
  • the present invention can also be realized as a program for causing a computer to function as the lighting system, or as a computer-readable recording medium storing the program.
  • FIG. 1 is a diagram schematically illustrating a specific application example of the illumination system according to Embodiment 1.
  • FIG. FIG. 2 is a diagram illustrating an example of a schematic configuration of the illumination system according to Embodiment 1 and an image captured by the illumination system.
  • FIG. 3 is a block diagram illustrating a configuration of the illumination system according to Embodiment 1.
  • FIG. 4 is a diagram illustrating an example of an image captured by the illumination system according to the first modification of the first embodiment.
  • FIG. 5 is a diagram illustrating an example of an image captured by the illumination system according to the second modification of the first embodiment.
  • FIG. 6 is a diagram illustrating an example of an image captured by the illumination system according to Modification 3 of Embodiment 1.
  • FIG. 7 is a diagram illustrating an example of an image captured by the illumination system according to the fourth modification of the first embodiment.
  • FIG. 8 is a diagram illustrating an example of a captured image by the illumination system according to the fifth modification of the first embodiment.
  • FIG. 9 is a diagram schematically illustrating a specific application example of the illumination system according to Embodiment 2.
  • FIG. 10 is a diagram illustrating a schematic configuration of the illumination system according to Embodiment 2 and an example of an image captured by the illumination system.
  • FIG. 11 is a block diagram illustrating a configuration of the illumination system according to Embodiment 2.
  • FIG. 1 is a diagram schematically illustrating a specific application example of the illumination system 1 according to the first embodiment.
  • FIG. 2 is a diagram illustrating an example of a schematic configuration of the illumination system 1 and an image captured by the illumination system 1.
  • FIG. 3 is a block diagram showing a configuration of the illumination system 1.
  • the illumination system 1 includes a video projection unit 10, an imaging unit 20, and a processing unit 30.
  • the video projection unit 10 and the imaging unit 20 are installed in a room, for example.
  • the video projection unit 10 and the imaging unit 20 are installed on the ceiling of a room, for example.
  • the installation location of the video projection unit 10 and the imaging unit 20 is not limited to this.
  • the viewpoint of the video projection unit 10 and the viewpoint of the imaging unit 20 are different, but the video projection unit 10 and the imaging unit 20 are the same. It may be installed at a position. In this case, the video projection unit 10 and the imaging unit 20 may be configured by a single device and have the same viewpoint.
  • the video projection unit 10 is a video projection device that projects an image on the projection surface 2.
  • the video projection unit 10 is a situation in which a lighting device (not shown) installed on the ceiling or the like is lit or a natural light such as sunlight is inserted into the room from a window or the like and the room is illuminated with natural light. Project images in a bright environment such as That is, the video from the video projection unit 10 is projected onto the projection plane 2 in a bright environment.
  • the projection plane 2 onto which an image from the image projection unit 10 is projected may be either a plane or a three-dimensional plane, and includes any structure or animal or plant. As shown in FIGS. 1 and 2, the projection plane 2 in the present embodiment is a desk surface of a desk installed in a room. For example, an image of the honeycomb pattern (illumination pattern) is projected onto the projection surface 2 by the image projection unit 10.
  • the projection surface 2 is not limited to a desk surface, and may be a wall surface, a floor surface, a screen, or the like.
  • the video projection unit 10 includes a light source such as a semiconductor laser and a lamp, an optical system such as a lens and a mirror, a display element such as a liquid crystal panel, and a projection lens.
  • a light source such as a semiconductor laser and a lamp
  • an optical system such as a lens and a mirror
  • a display element such as a liquid crystal panel
  • a projection lens For example, when an image to be projected onto the projection surface 2 is input from the processing unit 30 to the image projection unit 10, the image is projected from the projection lens of the image projection unit 10 toward the projection surface 2.
  • the video (image) may be either a still image or a moving image.
  • the video projection unit 10 not only has a function of projecting a video, but also has a function of irradiating the projection surface 2 with illumination light. That is, the video projection unit 10 can project a video (illumination pattern) as illumination light.
  • the image projection unit 10 is an optical projection device that projects both image light (image) and illumination light.
  • the video projection unit 10 can perform not only a video effect but also an illumination effect.
  • the image light and the illumination light may be projected so as to overlap in time and space, or may be projected while being switched at different timings.
  • the video projection unit 10 projects a video in which video light and illumination light are superimposed.
  • the illumination light source and the video light source may be the same or different.
  • the video projection unit 10 may have a light control function and a color control function so that the brightness or color component of the illumination light to be projected can be changed.
  • the imaging unit 20 is an imaging device such as a camera, for example, and images an area including the projection plane 2 as an imaging area. That is, the image (captured image) captured by the imaging unit 20 includes the projection plane 2.
  • the imaging unit 20 may image an area including the projection plane 2 as an imaging area before projecting an image by the image projection unit 10, or may image an area including an image projected by the image projection unit 10 as an imaging area. May be.
  • the imaging unit 20 includes, for example, an imaging element such as a CCD image sensor or a CMOS image sensor, and an optical system.
  • the captured image (image data) captured by the imaging unit 20 is transmitted to the processing unit 30.
  • the processing unit 30 is a processing device having a function of performing various arithmetic processes.
  • the processing unit 30 includes a color correction unit 31, a projection video output unit 32, a distortion correction unit 33, and a luminance correction unit 34.
  • the processing unit 30 also has a function of transmitting and receiving signals to and from the video projection unit 10 and the imaging unit 20. That is, the processing unit 30 includes a communication unit such as an interface. Transmission and reception of signals between the processing unit 30 and the video projection unit 10 or the imaging unit 20 may be performed by either wired or wireless. As shown in FIG. 2, for example, a personal computer (PC) can be used as the processing unit 30. In this case, the processing unit 30 and the video projection unit 10 can be connected by, for example, an HDMI (registered trademark) cable, and the processing unit 30 and the imaging unit 20 can be connected by, for example, a USB cable.
  • HDMI registered trademark
  • the color correcting unit 31 corrects the color of the video (projected video) projected by the video projecting unit 10 using the statistics regarding RGB of at least a part of the target region of the imaging region based on the captured image captured by the imaging unit 20. I do.
  • the color correction unit 31 acquires a captured image captured by the imaging unit 20, analyzes the acquired captured image, and calculates a statistic regarding RGB of the captured image. Further, the color correction unit 31 obtains a correction coefficient for the video projected by the video projection unit 10 using the statistics regarding RGB, and performs color correction of the video projected by the video projection unit 10 according to the obtained correction coefficient. As an example, the color correction unit 31 corrects the color so that the color of the video projected on the projection plane 2 by the video projection unit 10 approaches the input video (original video).
  • the color correction unit 31 calculates the RGB average (RGB average value) of the entire captured image from the RGB components (RGB signals) of each pixel of the captured image captured by the image capturing unit 20 as a statistic regarding RGB.
  • the hue can be obtained by converting the RGB average to HSV (or HSB), and the white balance of the projected image can be adjusted so as to match the hue, thereby obtaining the correction coefficient. Specifically, the gain (saturation) of the color-acquisition component of the calculated hue is increased.
  • the statistics regarding RGB are not limited to the RGB average, but may be the median value or the mode value of RGB.
  • the color correction unit 31 may calculate a statistic regarding RGB based on a captured image captured in advance by the imaging unit 20 before projecting a video by the video projection unit 10. May be calculated based on a captured image (that is, an image including a projected video) captured by the imaging unit 20 in a state where the image is projected.
  • RGB means three primary colors of light, red (R: Red), green (G: Green), and blue (B: Blue), and HSV (or HSB) is a three-color element. They are hue (H: Hue), saturation (S: Saturation), and lightness (V: Value, B: Brightness).
  • the projection video output unit 32 outputs a video to be projected on the video projection unit 10 to the video projection unit 10.
  • the projected video output unit 32 can output a video that has been color-corrected by the color correction unit 31 or a video that has not been color-corrected by the color correction unit 31.
  • the processing unit 30 may have a function of playing back and stopping the video output to the video projecting unit 10.
  • the distortion correction unit 33 corrects distortion of the projected image.
  • the distortion correction unit 33 corrects, for example, geometric distortion (trapezoid distortion) of an image projected from the image projection unit 10.
  • the brightness correction unit 34 corrects the brightness of the projected image.
  • the luminance correction unit 34 corrects the luminance of the whole or a part of the video projected from the video projection unit 10.
  • the processing unit 30 may include a storage unit (memory).
  • the storage unit stores data processed or calculated by the processing unit 30 or stores video (video content) output from the projection video output unit 32 to the video projection unit 10.
  • the storage unit is also used when performing control processing by the processing unit 30, and for example, stores data as needed as a work area when the color correction unit 31 and the like perform various data processing and calculations.
  • the storage unit may store an application program for controlling the video projecting unit 10 and the imaging unit 20.
  • the processing unit 30 may include a video acquisition unit (video input unit) that acquires a video to be projected on the video projection unit 10.
  • the video acquisition unit acquires a video to be projected on the video projection unit 10 as an input video.
  • the input video may be acquired from a recording medium such as an SD card that is detachably attached to the processing unit 30, or from an external device via a communication line such as an HDMI (registered trademark) cable connected to the processing unit 30. It may be acquired, or may be acquired from an external device using wireless communication such as Wi-Fi.
  • the imaging unit 20 captures an area including the projection plane 2 as an imaging area and the color correction unit 31 captures the imaging area based on the captured image captured by the imaging unit 20.
  • the image projection unit 10 corrects the color of the image projected by using the statistics regarding RGB of at least a part of the target region in FIG. That is, in the illumination system 1, the vicinity of the projection plane 2 is imaged in advance by the imaging unit 20, the correction coefficient of the projected image is calculated based on the surrounding color and brightness, and the image corrected according to the obtained correction coefficient is projected. Yes.
  • the projected image is corrected based on the color and brightness of the walls, floors, and doors around the projection surface 2.
  • the illumination system 1 projects an image corrected so that it looks more natural in consideration of the color and brightness of the space in which the image is projected.
  • the illumination system 1 it is possible to emphasize a portion that needs to be emphasized, or to control the color and brightness of the ambient light within a range that does not lose the original purpose of the ambient light such as a lighting device. Therefore, it is possible to project a natural image that is easy to see even in a bright environment.
  • the color correction unit 31 calculates a statistic regarding RGB with an area excluding the projection plane 2 on which an image is projected out of the imaging area captured by the imaging unit 20 as a target area. May be used to correct the color of the image projected by the image projection unit 10.
  • the projection surface 2 is masked to calculate the statistic about RGB of the captured image, and the video projection unit 10 A correction coefficient for the projected image is obtained, and color correction of the projected image is performed according to the obtained correction coefficient. That is, the statistic about RGB is calculated by analyzing the captured image excluding the projection plane 2.
  • a region indicated by cross line hatching is a region subjected to mask processing.
  • the area of the projection plane 2 in the captured image may be specified by the user based on the captured image, or may be specified by calculating by a three-dimensional measurement or the like from the captured image obtained by turning on / off the video projection unit 10 Also good.
  • the color correction unit 31 calculates a statistic regarding RGB using only a specified range (specified range) of the imaging region captured by the imaging unit 20 as a target region, and this statistic is calculated.
  • the color of the video projected by the video projection unit 10 may be used.
  • the processing unit 30 analyzes a captured image captured by the imaging unit 20 with a rectangular region indicated by hatching as a specified range, statistics regarding RGB are only obtained for the region in the range specified by the user in the captured image. The amount is calculated, a correction coefficient for the image projected by the image projection unit 10 is obtained, and color correction of the projected image is performed according to the obtained correction coefficient.
  • the designated range is a part of the door, but the designated range is not limited to this and may be a floor or a wall.
  • the designated range is not limited to being designated by the user, but may be automatically selected by a computer or may be a predetermined area set in advance.
  • the color correction unit 31 includes a statistic related to RGB in the projection plane 2 in the imaging region captured by the imaging unit 20 and a statistic related to RGB in a region other than the projection plane 2 in the imaging region. And color correction of an image projected by the image projection unit 10 may be performed.
  • the first RGB-related region in the region of the projection plane 2 (the region indicated by the hatching of the right-down diagonal line) in the captured image.
  • Statistic and second statistic related to RGB in a region other than the projection plane 2 in the captured image are calculated, and the calculated first statistic and the second statistic are compared.
  • a correction coefficient for the image projected by the image projection unit 10 is obtained, and color correction of the projected image is performed according to the obtained correction coefficient.
  • RGB averages are obtained for each of the region of the projection surface 2 and the region other than the projection surface 2 in the captured image as the statistics regarding RGB.
  • the R component is multiplied by (R 20 / R 10 ) as a correction coefficient
  • the B component is multiplied by (B 20 / B 10 ) as a correction coefficient to project a corrected image.
  • the color correction unit 31 may divide the imaging region captured by the imaging unit 20 into a plurality of small regions, and obtain a correction coefficient for the projected video based on the analysis of the plurality of small regions. .
  • the color correction unit 31 calculates a statistic regarding RGB of the target area by giving weights in order from a small area close to the projection plane 2 to a small area far from the projection plane 2, and video projection is performed using this statistic.
  • the color of the image projected by the unit 10 can be corrected.
  • the captured image is divided into a plurality of blocks (small regions) in a matrix and an area including the projection plane 2 ( The block in the hatched area) is weighted to calculate the average of RGB (statistics related to RGB) for all the blocks, and the correction coefficient for the image projected by the image projection unit 10 is obtained. To correct the color of the projected image.
  • RGB statistics related to RGB
  • weighting may be performed separately for bright blocks and dark blocks, instead of weighting according to the distance from the projection plane 2.
  • the color correction unit 31 may divide the imaging region imaged by the imaging unit 20 into a plurality of small regions, and obtain the correction coefficient of the projected video based on the analysis of each small region.
  • the color correction unit 31 can perform color correction of the image projected by the image projection unit 10 using the maximum cluster obtained by cluster analysis based on the statistics regarding RGB in each of the plurality of small regions.
  • the captured image captured by the imaging unit 20 is analyzed by the processing unit 30, the captured image is divided into a plurality of blocks (small areas) in a matrix and an RGB average ( (Statistics for RGB) are calculated, and similar blocks are collected by cluster analysis to obtain the maximum cluster. Then, a correction coefficient for the image projected by the image projection unit 10 is obtained with the maximum cluster as a reference, and color correction of the projected image is performed according to the obtained correction coefficient.
  • an RGB average (Statistics for RGB)
  • a distortion correction unit 33 that corrects distortion of the projected image and a luminance correction unit 34 that corrects the luminance of the projected image are provided.
  • the shape of the small area (block) obtained by dividing the captured image captured by the imaging unit 20 into a plurality of squares is a square, but is not limited thereto.
  • FIG. 9 is a diagram schematically illustrating a specific application example of the illumination system 1A according to the second embodiment.
  • FIG. 10 is a diagram illustrating an example of a schematic configuration of the illumination system 1A and an image captured by the illumination system 1A.
  • FIG. 11 is a block diagram showing a configuration of the illumination system 1A.
  • the illumination system 1A includes a video projection unit 10, an imaging unit 20, a processing unit 30A, and an illumination unit 40.
  • the illumination system 1A in the present embodiment is configured to further include an illumination control unit 35 and an illumination unit 40 with respect to the illumination system 1 in the first embodiment.
  • the illumination control unit 35 is included in the processing unit 30A, for example.
  • the processing unit 30A has a configuration including an illumination control unit 35 with respect to the processing unit 30 in the first embodiment.
  • the illumination control unit 35 controls the illumination unit 40.
  • the illumination control unit 35 controls the illumination unit 40 so that the illumination unit 40 emits illumination light with a complementary color of the hue calculated by the color correction unit 31.
  • the illumination control unit 35 transmits a control signal for controlling the illumination unit 40 to the illumination unit 40.
  • the illumination unit 40 is an illumination device that emits illumination light, and is, for example, an illumination device such as a ceiling or a downlight installed on the ceiling of a room.
  • the illumination unit 40 may be a spotlight installed on the wall surface of the room. Illumination light emitted from the illumination unit 40 is applied to the projection plane 2.
  • the illumination unit 40 has a light source such as an LED or a lamp.
  • the illumination unit 40 has a light source different from the light source of the video projection unit 10. That is, the illumination unit 40 emits illumination light from a light source different from the light source of the video projection unit 10.
  • the illumination light of the illumination unit 40 is, for example, white light, but is not limited to white light.
  • the illumination unit 40 includes a red light source, a green light source, and a blue light source, and is capable of RGB control. That is, the red light source, the green light source, and the blue light source can be controlled independently.
  • the red light source, the green light source, and the blue light source may be LED light sources or existing lamp light sources.
  • the illumination unit 40 has a light control function and a color control function, and is configured to control at least one of the brightness and color components of the illumination light.
  • the illumination unit 40 can increase or decrease the light output of the illumination light based on the control signal from the illumination control unit 35 of the processing unit 30.
  • the illumination unit 40 can selectively strengthen or weaken at least one of the red component, the green component, and the blue component of the illumination light based on the control signal from the illumination control unit 35.
  • the illumination unit 40 configured in this way is controlled based on a control signal transmitted from the illumination control unit 35.
  • the illumination unit 40 emits illumination light that is a complementary color of the hue converted from the RGB statistics used for color correction by the color correction unit 31.
  • the color correction unit 31 calculates the RGB average of the entire captured image from the RGB components of each pixel of the captured image captured by the image capturing unit 20 as a statistic regarding RGB, as in the first embodiment.
  • the hue is obtained by HSV conversion of the RGB average.
  • the illumination control unit 35 transmits a control signal to the illumination unit 40 so that the illumination unit 40 irradiates with the complementary color of the obtained hue.
  • the illumination unit 40 emits illumination light of a complementary color with the hue obtained by the color correction unit 31.
  • the illumination system 1A further irradiates the first embodiment with illumination light that is a complementary color of the hue converted from the RGB statistics used for color correction by the color correction unit 31.
  • the illumination part 40 to be provided is provided.
  • the distortion correction unit 33 and the luminance correction unit 34 are provided in the processing unit 30, but the present invention is not limited to this.
  • the distortion correction unit 33 and the luminance correction unit 34 may be provided in the video projection unit 10.
  • the video acquisition unit is provided in the processing unit 30, but the present invention is not limited to this.
  • the video acquisition unit may be directly provided in the video projection unit 10, and an input video may be directly input to the video projection unit 10.
  • the illumination system in the first and second embodiments may be used outdoors.
  • the lighting system in the first and second embodiments may be used in a dark environment.
  • each component in the processing unit 30 may be a circuit. These circuits may constitute one circuit as a whole, or may be separate circuits. Each of these circuits may be a general-purpose circuit or a dedicated circuit.
  • each process described as the operation of each component used in the lighting system such as the processing unit 30 can be executed by a computer.
  • a computer executes each of the above processes by executing a program using hardware resources such as a processor (CPU), a memory, and an input / output circuit.
  • each process is executed by the processor obtaining data to be processed from a memory or an input / output circuit or the like and calculating the data, or outputting the calculation result to the memory or the input / output circuit or the like.
  • the processing unit 30 is a notebook PC.
  • the lighting system may be realized as a lighting control method.
  • the steps in the lighting control method can be executed by a computer.
  • the program for executing each of the above processes or steps may be recorded on a non-transitory recording medium such as a computer-readable CD-ROM.
  • the computer reads the program from the non-temporary recording medium and executes the program to execute each process.
  • the method in the lighting system can be realized as a program that causes a computer to execute the method, or can be realized as a computer-readable recording medium that records such a program.

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Projection Apparatus (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)

Abstract

照明システム（１）は、投影面（２）に映像を投影する映像投影部（１０）と、投影面（２）を含む領域を撮像領域として撮像する撮像部（２０）と、撮像部（２０）で撮像した撮像画像をもとに撮像領域の少なくとも一部の対象領域のＲＧＢに関する統計量を用いて映像投影部（１０）で投影する映像の色補正を行う色補正部（３１）とを備える。

Description

照明システム及びプログラム
　本発明は、照明システム及びこの照明システムに用いられるプログラムに関する。
　ＬＥＤ（ＬＥＤ：Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）及びレーザ（ＬＤ：Ｌａｓｅｒ　Ｄｉｏｄｅ）等の半導体発光素子は、長寿命及び省電力であることから様々な製品の光源として期待されている。
　近年、プロジェクタの光源がランプから半導体発光素子に置き換わりつつあり、プロジェクタの光源が長寿命化及び省電力化している。これに伴って、プロジェクタを映像投影用に用いるだけではなく照明用に利用することも検討されている。
　一方、照明装置についてもＬＥＤ等の半導体発光素子が光源として用いられており、照明装置を照明用に用いるだけではなく映像投影用に用いることが検討されている。例えば、特許文献１には、照明機能と映像投影機能とを有する照明装置が開示されている。
　このようなことから、今後、店舗又は住宅等の照明業界にプロジェクタ等による映像投影技術の利用が拡大すると考えられる。
特開２００６－１２７８４５号公報
　一般的に、プロジェクタを会議室等の部屋で使用する場合、投影映像を見やすくするために、天井等に設置された照明装置を消灯させた状況にしてスクリーン等の投影面に映像を投影する。つまり、部屋を暗くした環境下で映像が投影される。
　一方、店舗又は住宅においてプロジェクタを使用する場合、これまでの会議室等でプロジェクタを使用する場合とは異なり、明るい環境下で映像が投影されると考えられる。例えば、天井等の照明装置が点灯した状況又は太陽光等の自然光で照らされた状況で投影面に映像が投影されると考えられる。
　しかしながら、明るい環境下で映像が投影されると、投影された映像が見にくいという課題がある。
　本発明は、このような課題を解決するためになされたものであり、明るい環境下であっても見やすく自然な映像を投影することができる照明システム及びプログラムを提供することを目的とする。
　上記目的を達成するために、本発明に係る照明システムの一態様は、投影面に映像を投影する映像投影部と、前記投影面を含む領域を撮像領域として撮像する撮像部と、前記撮像部で撮像した撮像画像をもとに前記撮像領域の少なくとも一部の対象領域のＲＧＢに関する統計量を用いて前記映像投影部で投影する映像の色補正を行う色補正部とを備える、照明システムである。
　なお、本発明は、コンピュータを上記照明システムとして機能させるためのプログラムとして実現したり、そのプログラムを格納したコンピュータ読み取り可能な記録媒体として実現したりすることもできる。
　明るい環境下であっても、見やすく自然な映像を投影することができる。
図１は、実施の形態１に係る照明システムの具体的な適用例を模式的に示す図である。 図２は、実施の形態１に係る照明システムの概略構成と同照明システムによる撮像画像の一例を示す図である。 図３は、実施の形態１に係る照明システムの構成を示すブロック図である。 図４は、実施の形態１の変形例１に係る照明システムによる撮像画像の一例を示す図である。 図５は、実施の形態１の変形例２に係る照明システムによる撮像画像の一例を示す図である。 図６は、実施の形態１の変形例３に係る照明システムによる撮像画像の一例を示す図である。 図７は、実施の形態１の変形例４に係る照明システムによる撮像画像の一例を示す図である。 図８は、実施の形態１の変形例５に係る照明システムによる撮像画像の一例を示す図である。 図９は、実施の形態２に係る照明システムの具体的な適用例を模式的に示す図である。 図１０は、実施の形態２に係る照明システムの概略構成と同照明システムによる撮像画像の一例を示す図である。 図１１は、実施の形態２に係る照明システムの構成を示すブロック図である。
　以下、本発明の実施の形態について説明する。なお、以下に説明する実施の形態は、いずれも本発明の好ましい一具体例を示すものである。したがって、以下の実施の形態で示される、数値、構成要素、構成要素の配置位置及び接続形態、並びに、ステップ及びステップの順序等は、一例であって本発明を限定する主旨ではない。よって、以下の実施の形態における構成要素のうち、本発明の最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
　また、各図は、模式図であり、必ずしも厳密に図示されたものではない。なお、各図において、実質的に同一の構成に対しては同一の符号を付しており、重複する説明は省略又は簡略化する。
　（実施の形態１）
　実施の形態１に係る照明システム１について、図１～図３を用いて説明する。図１は、実施の形態１に係る照明システム１の具体的な適用例を模式的に示す図である。図２は、同照明システム１の概略構成と同照明システム１による撮像画像の一例を示す図である。図３は、同照明システム１の構成を示すブロック図である。
　図１～図３に示すように、照明システム１は、映像投影部１０と、撮像部２０と、処理部３０とを備える。
　本実施の形態では、照明システム１を店舗又は住宅等の屋内で利用する場合について説明する。図１に示すように、映像投影部１０及び撮像部２０は、例えば、部屋の中に設置される。具体的には、映像投影部１０及び撮像部２０は、例えば部屋の天井に設置される。ただし、映像投影部１０及び撮像部２０の設置箇所は、これに限るものではない。
　なお、映像投影部１０と撮像部２０とは異なる位置に設置されているので映像投影部１０の視点と撮像部２０の視点とは異なっているが、映像投影部１０と撮像部２０とは同じ位置に設置されていてもよい。この場合、映像投影部１０と撮像部２０とが１つの装置で構成されて同一視点になっていてもよい。
　映像投影部１０は、投影面２に映像を投影する映像投影装置である。本実施の形態において、映像投影部１０は、天井等に設置された照明装置（不図示）が点灯した状況又は窓等から室内に太陽光等の自然光が差し込んで室内が自然光で照らされた状況等の明るい環境下において映像を投影する。つまり、映像投影部１０からの映像は、明るい環境下で投影面２に投影される。
　映像投影部１０からの映像が投影される投影面２は、平面及び立体面のいずれであってもよく、あらゆる構造物又は動植物を含む。図１及び図２に示すように、本実施の形態における投影面２は、部屋に設置された机の机面である。投影面２には、例えば、映像投影部１０によってハニカムパターンの映像（照明パターン）が投影されている。なお、投影面２は、机面に限るものではなく、壁面、床面又はスクリーン等であってもよい。
　映像投影部１０は、半導体レーザやランプ等の光源、レンズやミラー等の光学系、液晶パネル等の表示素子、及び、投射レンズ等を有する。例えば、投影面２に投影するための映像が処理部３０から映像投影部１０に入力されると、映像投影部１０の投射レンズから投影面２に向かって映像が投射される。なお、本明細書において、映像（画像）とは、静止画像及び動画像のいずれであってもよい。
　本実施の形態において、映像投影部１０は、映像を投影する機能を有するだけではなく、投影面２に照明光を照射する機能も有する。つまり、映像投影部１０は、照明光として映像（照明パターン）を投影することができる。
　このように、映像投影部１０は、映像光（映像）及び照明光の両方の光を投射する光投射装置である。これにより、映像投影部１０は、映像演出を行うだけではなく、照明演出も行うこともできる。この場合、映像光と照明光とは、時間的にも空間的にも重なるように投射されていてもよいし、異なるタイミングで切り替えて投射されていてもよい。前者の場合、例えば、映像投影部１０からは映像光と照明光とが重畳された映像が投射される。なお、映像投影部１０において、照明光用の光源と映像光用の光源とは同じであってもよいし異なっていてもよい。また、映像投影部１０は、投射する照明光の明るさ又は色成分を変更できるように調光機能及び調色機能を有していてもよい。
　撮像部２０は、例えばカメラ等の撮像装置であり、投影面２を含む領域を撮像領域として撮像する。つまり、撮像部２０で撮像された画像（撮像画像）には、投影面２が含まれる。撮像部２０は、映像投影部１０で映像を投影する前に投影面２を含む領域を撮像領域として撮像してもよいし、映像投影部１０で投影された映像を含む領域を撮像領域として撮像してもよい。
　撮像部２０は、例えば、ＣＣＤイメージセンサ又はＣＭＯＳイメージセンサ等の撮像素子と、光学系等とを有する。撮像部２０で撮像された撮像画像（画像データ）は処理部３０に送信される。
　処理部３０は、各種演算処理を行う機能を有する処理装置である。処理部３０は、色補正部３１と、投影映像出力部３２と、歪補正部３３と、輝度補正部３４とを有する。
　また、処理部３０は、映像投影部１０及び撮像部２０に対して信号の送受信を行う機能も有する。つまり、処理部３０は、インターフェース等の通信部を有する。処理部３０と映像投影部１０又は撮像部２０との信号の送受信は、有線及び無線のいずれで行ってもよい。図２に示すように、処理部３０としては、例えばパーソナルコンピュータ（ＰＣ）を用いることができる。この場合、処理部３０と映像投影部１０とを例えばＨＤＭＩ（登録商標）ケーブルで接続し、処理部３０と撮像部２０とを例えばＵＳＢケーブルで接続することができる。
　色補正部３１は、撮像部２０で撮像した撮像画像をもとに撮像領域の少なくとも一部の対象領域のＲＧＢに関する統計量を用いて映像投影部１０で投影する映像（投影映像）の色補正を行う。
　具体的には、色補正部３１は、撮像部２０で撮像した撮像画像を取得し、取得した撮像画像を分析して撮像画像のＲＧＢに関する統計量を算出する。さらに、色補正部３１は、このＲＧＢに関する統計量を用いて映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って映像投影部１０で投影する映像の色補正を行う。一例として、色補正部３１は、映像投影部１０によって投影面２に投影される映像の色が入力映像（本来の映像）に近づくように色補正する。
　例えば、色補正部３１は、ＲＧＢに関する統計量として、撮像部２０で撮像した撮像画像の各画素のＲＧＢ成分（ＲＧＢ信号）から撮像画像全体のＲＧＢ平均（ＲＧＢの平均値）を算出し、このＲＧＢ平均をＨＳＶ（又はＨＳＢ）変換することで色相を求め、この色相に合うように投影映像のホワイトバランスを調整して補正係数を求めることができる。具体的には、算出した色相の捕色成分のゲイン（彩度）を上げる。なお、ＲＧＢに関する統計量は、ＲＧＢ平均に限るものではなく、ＲＧＢの中央値又は最頻値等であってもよい。
　また、色補正部３１は、映像投影部１０で映像を投影する前に予め撮像部２０で撮像した撮像画像をもとにＲＧＢに関する統計量を算出してもよいし、映像投影部１０で映像を投影した状態で撮像部２０で撮像した撮像画像（つまり投影映像を含む画像）をもとにＲＧＢに関する統計量を算出してもよい。
　なお、ＲＧＢとは、光の三原色である、赤（Ｒ：Ｒｅｄ）、緑（Ｇ：Ｇｒｅｅｎ）、青（Ｂ：Ｂｌｕｅ）のことであり、ＨＳＶ（又はＨＳＢ）とは、色の三要素である、色相（Ｈ：Ｈｕｅ）、彩度（Ｓ：Ｓａｔｕｒａｔｉｏｎ）、明度（Ｖ：Ｖａｌｕｅ、Ｂ：Ｂｒｉｇｔｎｅｓｓ）のことである。
　投影映像出力部３２は、映像投影部１０に投影させるための映像を映像投影部１０に出力する。投影映像出力部３２は、色補正部３１で色補正された映像又は色補正部３１で色補正されていない映像を出力することができる。なお、処理部３０は、映像投影部１０に出力した映像を再生及び停止する機能を有していてもよい。
　歪補正部３３は、投影する映像の歪を補正する。歪補正部３３は、例えば、映像投影部１０から投影する映像の幾何学的な歪（台形歪）を補正する。
　輝度補正部３４は、投影する映像の輝度を補正する。輝度補正部３４は、例えば、映像投影部１０から投影する映像の全体又は一部の輝度を補正する。
　なお、処理部３０は、記憶部（メモリ）を有していてもよい。記憶部は、処理部３０で処理又は算出したデータを記憶したり、投影映像出力部３２から映像投影部１０に出力する映像（映像コンテンツ）を記憶したりする。また、記憶部は、処理部３０による制御処理を行う際にも用いられ、例えば、色補正部３１等が各種データ処理や演算を行う際の作業領域として随時データを記憶する。また、記憶部には、映像投影部１０及び撮像部２０を制御するためのアプリケーションプログラム等が記憶されていてもよい。
　また、処理部３０は、映像投影部１０に投影させるための映像を取得する映像取得部（映像入力部）を有していてもよい。映像取得部は、映像投影部１０に投影させるための映像を入力映像として取得する。入力映像は、処理部３０に着脱可能に取り付けられるＳＤカード等の記録媒体から取得してもよいし、処理部３０に接続されたＨＤＭＩ（登録商標）ケーブル等の通信線を介して外部機器から取得してもよいし、Ｗｉ－Ｆｉ等の無線通信を利用して外部機器から取得してもよい。
　以上、本実施の形態に係る照明システム１では、投影面２を含む領域を撮像領域として撮像部２０によって撮像し、色補正部３１によって、撮像部２０で撮像した撮像画像をもとに撮像領域における少なくとも一部の対象領域のＲＧＢに関する統計量を用いて映像投影部１０で投影する映像の色補正を行っている。つまり、照明システム１では、投影面２付近を予め撮像部２０で撮像し、周囲の色及び明るさに基づいて投影映像の補正係数を算出し、求めた補正係数に従って補正した映像を投影している。例えば、本実施の形態では、投影面２の周囲の壁や床、扉についての色及び明るさに基づいて、投影する映像を補正している。
　このように、本実施の形態における照明システム１では、映像を投影する空間の色及び明るさを考慮して、より自然に見えるように補正した映像を投影している。これにより、例えば、強調する必要がある部分を強調したり、照明装置等の環境光の本来の目的を失わない範囲で環境光の色及び明るさを制御したりすることができる。したがって、明るい環境下であっても、見やすく自然な映像を投影することができる。
　また、本実施の形態において、色補正部３１は、撮像部２０で撮像する撮像領域のうち映像を投影する投影面２を除外した領域を対象領域としてＲＧＢに関する統計量を算出し、この統計量を用いて映像投影部１０で投影する映像の色補正を行ってもよい。
　例えば、図４に示すように、撮像部２０で撮像した撮像画像を処理部３０で分析する際、投影面２をマスク処理して撮像画像のＲＧＢに関する統計量を算出して映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って投影映像の色補正を行う。つまり、投影面２を除いた撮像画像を分析してＲＧＢに関する統計量を算出する。なお、図４に示す撮像画像では、クロス線のハッチングで示す領域がマスク処理をした領域である。
　このように投影面２を除外して撮像画像のＲＧＢに関する統計量を算出することによって、投影面２の影響を受けることなく投影する映像の色補正を行うことができる。これにより、より見やすい映像を投影することができる。なお、撮像画像における投影面２の領域は、撮像画像をもとにユーザが指定してもよいし、映像投影部１０のＯＮ／ＯＦＦによる撮像画像から三次元計測等で算出して特定してもよい。
　また、本実施の形態において、色補正部３１は、撮像部２０で撮像する撮像領域のうち指定した範囲（指定範囲）の領域だけを対象領域としてＲＧＢに関する統計量を算出し、この統計量を用いて映像投影部１０で投影する映像の色補正を行ってもよい。
　例えば、図５において、斜線のハッチングで示す矩形領域を指定範囲として撮像部２０で撮像した撮像画像を処理部３０で分析する際、撮像画像のうちユーザが指定した範囲の領域のみについてＲＧＢに関する統計量を算出して映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って投影映像の色補正を行う。
　これにより、指定した範囲を基準とした見やすい映像を投影することができる。なお、図５では、指定範囲を扉の一部としているが、指定範囲は、これに限るものではなく、床又は壁等であってもよい。また、指定範囲は、ユーザが指定する場合に限らず、コンピュータにより自動で選択されてもよいし、予め設定された所定の領域であってもよい。
　また、本実施の形態において、色補正部３１は、撮像部２０で撮像する撮像領域のうち投影面２におけるＲＧＢに関する統計量と、この撮像領域のうち投影面２以外の領域におけるＲＧＢに関する統計量とを比較して、映像投影部１０で投影する映像の色補正を行ってもよい。
　例えば、図６に示すように、撮像部２０で撮像した撮像画像を処理部３０で分析する際、撮像画像のうち投影面２の領域（右下がり斜線のハッチングで示す領域）におけるＲＧＢに関する第１統計量と、撮像画像のうち投影面２以外の領域（右上がり斜線のハッチングで示す領域）におけるＲＧＢに関する第２統計量とを算出し、算出した第１統計量と第２統計量とを比較して映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って投影映像の色補正を行う。
　一例として、ＲＧＢに関する統計量として、撮像画像における投影面２の領域と投影面２以外の領域とのそれぞれについてＲＧＢ平均を求める場合について説明する。この場合、算出した投影面２に対応する領域のＲＧＢ平均（Ｒ１，Ｇ１，Ｂ１）をＧ１＝１となるように正規化して（Ｒ１０、１、Ｂ１０）にする。同様に、投影面２以外に対応する領域についても、ＲＧＢ平均（Ｒ２，Ｇ２、Ｂ２）をＧ２＝１となるように正規化して（Ｒ２０，１、Ｂ２０）にする。そして、Ｒ成分に（Ｒ２０／Ｒ１０）を補正係数として乗算し、Ｂ成分に（Ｂ２０／Ｂ１０）を補正係数として乗算して、補正した映像を投影する。
　これにより、投影面２の領域と投影面２以外の領域との色の違いの影響を受けずに、見やすい映像を投影することができる。例えば、投影面２の周囲が投影面２よりも黄色い場合に、黄色く補正した映像を投影することでより自然な投影映像を得ることができる。
　また、本実施の形態において、色補正部３１は、撮像部２０で撮像する撮像領域を複数の小領域に分割し、複数の小領域の分析に基づいて投影映像の補正係数を求めてもよい。この場合、色補正部３１は、投影面２に近い小領域から投影面２に遠い小領域の順に重みを持たせて対象領域のＲＧＢに関する統計量を算出し、この統計量を用いて映像投影部１０で投影する映像の色補正を行うことができる。
　例えば、図７に示すように、撮像部２０で撮像した撮像画像を処理部３０で分析する際、撮像画像をマトリクス状に複数のブロック（小領域）に分割し、投影面２を含む領域（斜線のハッチングで示す領域）のブロックには重み付けを大きくして全ブロックについてＲＧＢ平均（ＲＧＢに関する統計量）を算出して映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って投影映像の色補正を行う。
　これにより、より周囲の色と合った、見やすい映像を投影することができる。なお、投影面２からの距離に応じて重み付けを持たせるのではなく、明るいブロックと暗いブロックとに分けて重み付けを持たせてもよい。
　また、本実施の形態において、色補正部３１は、撮像部２０で撮像する撮像領域を複数の小領域に分割し、各小領域の分析に基づいて投影映像の補正係数を求めてもよい。この場合、色補正部３１は、複数の小領域の各々におけるＲＧＢに関する統計量によるクラスタ分析によって得られた最大のクラスタを用いて映像投影部１０で投影する映像の色補正を行うことができる。
　例えば、図８に示すように、撮像部２０で撮像した撮像画像を処理部３０で分析する際、撮像画像をマトリクス状に複数のブロック（小領域）に分割して各ブロックごとにＲＧＢ平均（ＲＧＢに関する統計量）を算出し、クラスタ分析によって似たブロックを集めて最大のクラスタを求める。そして、この最大クラスタを基準にして映像投影部１０で投影する映像に対する補正係数を求めて、求めた補正係数に従って投影映像の色補正を行う。
　これにより、撮像画像に壁や床等が含まれていることが分からなくても、各ブロックが緑色に近い又は黄色に近い等は分かるので、より周囲の色と合った、見やすい映像を投影することができる。
　また、本実施の形態では、投影する映像の歪を補正する歪補正部３３と、投影する映像の輝度を補正する輝度補正部３４とを備えている。
　これにより、映像投影部１０で投影する映像に対して歪の補正及び輝度の補正を行うことができるので、一層見やすい映像を投影することができる。
　なお、本実施の形態において、撮像部２０で撮像した撮像画像を複数に分割した小領域（ブロック）の形状は、正方形としたが、これに限るものではない。
　（実施の形態２）
　次に、実施の形態２に係る照明システム１Ａについて、図９～図１１を用いて説明する。図９は、実施の形態２に係る照明システム１Ａの具体的な適用例を模式的に示す図である。図１０は、同照明システム１Ａの概略構成と同照明システム１Ａによる撮像画像の一例を示す図である。図１１は、同照明システム１Ａの構成を示すブロック図である。
　図９～図１１に示すように、照明システム１Ａは、映像投影部１０と、撮像部２０と、処理部３０Ａと、照明部４０とを備える。
　本実施の形態における照明システム１Ａは、上記実施の形態１における照明システム１に対して、さらに、照明制御部３５及び照明部４０を備える構成となっている。照明制御部３５は、例えば処理部３０Ａが有する。処理部３０Ａは、上記実施の形態１における処理部３０に対して、照明制御部３５を有する構成となっている。
　照明制御部３５は、照明部４０を制御する。本実施の形態において、照明制御部３５は、色補正部３１で算出された色相の補色で照明部４０が照明光を出射するように照明部４０を制御する。照明制御部３５は、照明部４０を制御するための制御信号を照明部４０に送信する。
　照明部４０は、照明光を照射する照明装置であり、例えば、部屋の天井に設置されたシーリング又はダウンライト等の照明器具である。なお、照明部４０は、部屋の壁面に設置されたスポットライトであってもよい。照明部４０から照射される照明光は、投影面２に照射される。
　照明部４０は、ＬＥＤやランプ等の光源を有する。照明部４０は、映像投影部１０の光源とは異なる光源を有する。つまり、照明部４０は、映像投影部１０の光源とは異なる光源によって照明光を照射する。照明部４０の照明光は、例えば白色光であるが、白色光に限るものではない。
　本実施の形態において、照明部４０は、赤色光源、緑色光源及び青色光源を有しており、ＲＧＢ制御可能である。つまり、赤色光源、緑色光源及び青色光源は、独立して制御することができる。赤色光源、緑色光源及び青色光源は、ＬＥＤ光源であってもよいし、既存のランプ光源であってもよい。
　また、照明部４０は、調光機能及び調色機能を有し、照明光の明るさ及び色成分の少なくも何れか一方を制御することができるように構成されている。例えば、照明部４０は、処理部３０の照明制御部３５からの制御信号に基づいて、照明光の光出力を大きくしたり小さくしたりすることができる。また、照明部４０は、照明制御部３５からの制御信号に基づいて、照明光の赤色成分、緑色成分及び青色成分の少なくとも一つを選択的に強くしたり弱くしたりできる。
　このように構成される照明部４０は、照明制御部３５から送信される制御信号をもとに制御される。本実施の形態において、照明部４０は、色補正部３１による色補正に用いるＲＧＢの統計量から変換された色相の補色となる照明光を照射する。
　照明システム１Ａでは、例えば、色補正部３１は、実施の形態１と同様に、ＲＧＢに関する統計量として、撮像部２０で撮像した撮像画像の各画素のＲＧＢ成分から撮像画像全体のＲＧＢ平均を算出し、このＲＧＢ平均をＨＳＶ変換することで色相を求める。照明制御部３５は、求めた色相の補色で照明部４０が照射するように照明部４０に制御信号を送信する。これにより、照明部４０は、色補正部３１で求めた色相の補色の照明光を照射する。
　以上、本実施の形態に係る照明システム１Ａは、上記実施の形態１に対して、さらに、色補正部３１による色補正に用いるＲＧＢの統計量から変換された色相の補色となる照明光を照射する照明部４０を備える。
　これにより、周囲の色を打ち消すことができるので、実施の形態１よりもさらに、より見やすく自然な映像を投影することができる。
　（変形例）
　以上、本発明に係る照明システムについて、実施の形態に基づいて説明したが、本発明は、上記の実施の形態に限定されるものではない。
　例えば、上記実施の形態１、２において、歪補正部３３及び輝度補正部３４は、処理部３０に設けられていたが、これに限るものではない。歪補正部３３及び輝度補正部３４は、映像投影部１０に設けられていてもよい。
　また、上記実施の形態１、２において、映像取得部は、処理部３０に設けられていたが、これに限るものではない。映像取得部は、映像投影部１０に直接設けられていて、映像投影部１０に入力映像が直接入力されてもよい。
　また、上記実施の形態１、２では、照明システムを部屋等の屋内で利用する場合について説明したが、これに限るものではない。例えば、上記実施の形態１、２における照明システムを、屋外で利用してもよい。
　また、上記実施の形態１、２では、照明システムを明るい環境下で利用する場合について説明したが、上記実施の形態１、２における照明システムは、暗い環境下で利用してもよい。
　その他、上記の実施の形態に対して当業者が思いつく各種変形を施して得られる形態、又は、本発明の趣旨を逸脱しない範囲で上記の実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本発明に含まれる。
　また、上記の説明において、処理部３０における各構成は、回路であってもよい。これらの回路は、全体として１つの回路を構成してもよいし、それぞれ別々の回路でもよい。また、これらの回路は、それぞれ、汎用的な回路でもよいし、専用の回路でもよい。
　また、コンピュータを上記照明システムとして機能させてもよい。この場合、上記処理部３０等、照明システムで用いられる各構成要素の動作として説明した各処理は、コンピュータによって実行することができる。例えば、コンピュータが、プロセッサ（ＣＰＵ）、メモリ及び入出力回路等のハードウェア資源を用いてプログラムを実行することによって、上記の各処理を実行する。具体的には、プロセッサが処理対象のデータをメモリ又は入出力回路等から取得してデータを演算したり、演算結果をメモリ又は入出力回路等に出力したりすることによって、各処理を実行する。一例として、処理部３０はノートＰＣである。
　また、上記照明システムは、照明制御方法として実現してもよい。この場合、照明制御方法におけるステップは、コンピュータによって実行することができる。
　また、上記の各処理又はステップを実行するためのプログラムは、コンピュータ読み取り可能なＣＤ－ＲＯＭ等の非一時的な記録媒体に記録されてもよい。この場合、コンピュータが、非一時的な記録媒体からプログラムを読み出して、プログラムを実行することにより、各処理を実行する。例えば、上記照明システムにおける方法をコンピュータに実行させるプログラムとして実現したり、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体として実現したりすることもできる。
　１、１Ａ　照明システム
　２　投影面
　１０　映像投影部
　２０　撮像部
　３１　色補正部
　３３　歪補正部
　３４　輝度補正部
　４０　照明部

Claims (9)

  1. 　投影面に映像を投影する映像投影部と、
    　前記投影面を含む領域を撮像領域として撮像する撮像部と、
    　前記撮像部で撮像した撮像画像をもとに前記撮像領域の少なくとも一部の対象領域のＲＧＢに関する統計量を用いて前記映像投影部で投影する映像の色補正を行う色補正部とを備える、
    　照明システム。
  2. 　前記色補正部は、前記撮像領域のうち前記映像を投影する投影面を除外した領域を前記対象領域として前記映像投影部で投影する映像の色補正を行う、
    　請求項１記載の照明システム。
  3. 　前記色補正部は、前記撮像領域のうち指定した範囲の領域だけを前記対象領域として前記映像投影部で投影する映像の色補正を行う、
    　請求項１記載の照明システム。
  4. 　前記色補正部は、前記撮像領域のうち前記投影面におけるＲＧＢに関する統計量と、前記撮像領域のうち前記投影面以外の領域におけるＲＧＢに関する統計量とを比較して、前記映像投影部で投影する映像の色補正を行う、
    　請求項１記載の照明システム。
  5. 　前記色補正部は、前記撮像領域を複数の小領域に分割し、前記投影面に近い前記小領域から前記投影面に遠い前記小領域の順に重みを持たせて前記対象領域のＲＧＢに関する統計量を算出し、当該統計量を用いて前記映像投影部で投影する映像の色補正を行う、
    　請求項１記載の照明システム。
  6. 　前記色補正部は、前記撮像領域を複数の小領域に分割し、前記複数の小領域の各々における前記ＲＧＢに関する統計量によるクラスタ分析によって得られた最大のクラスタを用いて前記映像投影部で投影する映像の色補正を行う、
    　請求項１記載の照明システム。
  7. 　前記映像投影部の光源とは異なる光源によって照明光を照射する照明部を備え、
    　前記照明部は、前記色補正に用いる前記ＲＧＢに関する統計量から変換された色相の補色となる照明光を照射する、
    　請求項１乃至６の何れか１項に記載の照明システム。
  8. 　投影する映像の歪を補正する歪補正部と、
    　投影する映像の輝度を補正する輝度補正部とを備える、
    　請求項１乃至７の何れか１項に記載の照明システム。
  9. 　コンピュータを、請求項１乃至８の何れか１項に記載の照明システムとして機能させるためのプログラム。
PCT/JP2016/003198 2015-08-26 2016-07-05 照明システム及びプログラム WO2017033384A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP16838736.3A EP3344015A1 (en) 2015-08-26 2016-07-05 Illumination system and program
US15/747,962 US20180220112A1 (en) 2015-08-26 2016-07-05 Lighting system and program
JP2017536190A JPWO2017033384A1 (ja) 2015-08-26 2016-07-05 照明システム及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-167255 2015-08-26
JP2015167255 2015-08-26

Publications (1)

Publication Number Publication Date
WO2017033384A1 true WO2017033384A1 (ja) 2017-03-02

Family

ID=58099819

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/003198 WO2017033384A1 (ja) 2015-08-26 2016-07-05 照明システム及びプログラム

Country Status (4)

Country Link
US (1) US20180220112A1 (ja)
EP (1) EP3344015A1 (ja)
JP (1) JPWO2017033384A1 (ja)
WO (1) WO2017033384A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019159880A1 (ja) * 2018-02-16 2019-08-22 Ｎｅｃプラットフォームズ株式会社 映像プロジェクタおよび映像表示方法
JP2020166657A (ja) * 2019-03-29 2020-10-08 ブラザー工業株式会社 印刷画像システム、プログラム、非一時的なコンピュータ可読媒体、及び印刷画像システムの制御方法
US11354075B2 (en) 2019-03-29 2022-06-07 Brother Kogyo Kabushiki Kaisha Non-transitory computer-readable medium storing computer-readable instructions that cause processor of print image control device to set print position, print image control device that sets print position, and control method of print image control device that sets print position

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019058521A1 (ja) * 2017-09-22 2019-03-28 ｐｏｐＩｎ株式会社 プロジェクタおよびプロジェクタシステム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000173783A (ja) * 1998-04-13 2000-06-23 Matsushita Electric Ind Co Ltd 照明制御方法及び照明装置
JP2004289503A (ja) * 2003-03-24 2004-10-14 Sharp Corp 液晶プロジェクタ装置
JP2008277092A (ja) * 2007-04-27 2008-11-13 Toshiba Lighting & Technology Corp 照明装置
JP2012068364A (ja) * 2010-09-22 2012-04-05 Konica Minolta Opto Inc 投影装置
JP2014032750A (ja) * 2012-08-01 2014-02-20 Seiko Epson Corp 照明システム、照明方法および照明プログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010206584A (ja) * 2009-03-04 2010-09-16 Seiko Epson Corp プロジェクターの調整方法、プロジェクター、プロジェクター調整システム及びプロジェクター調整プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000173783A (ja) * 1998-04-13 2000-06-23 Matsushita Electric Ind Co Ltd 照明制御方法及び照明装置
JP2004289503A (ja) * 2003-03-24 2004-10-14 Sharp Corp 液晶プロジェクタ装置
JP2008277092A (ja) * 2007-04-27 2008-11-13 Toshiba Lighting & Technology Corp 照明装置
JP2012068364A (ja) * 2010-09-22 2012-04-05 Konica Minolta Opto Inc 投影装置
JP2014032750A (ja) * 2012-08-01 2014-02-20 Seiko Epson Corp 照明システム、照明方法および照明プログラム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019159880A1 (ja) * 2018-02-16 2019-08-22 Ｎｅｃプラットフォームズ株式会社 映像プロジェクタおよび映像表示方法
JP2019145908A (ja) * 2018-02-16 2019-08-29 Ｎｅｃプラットフォームズ株式会社 映像プロジェクタおよび映像表示方法
JP7156803B2 (ja) 2018-02-16 2022-10-19 Ｎｅｃプラットフォームズ株式会社 映像プロジェクタ、映像表示方法及び映像表示プログラム
US11509874B2 (en) 2018-02-16 2022-11-22 Nec Platforms, Ltd. Video projector and video display method
JP2020166657A (ja) * 2019-03-29 2020-10-08 ブラザー工業株式会社 印刷画像システム、プログラム、非一時的なコンピュータ可読媒体、及び印刷画像システムの制御方法
US11354075B2 (en) 2019-03-29 2022-06-07 Brother Kogyo Kabushiki Kaisha Non-transitory computer-readable medium storing computer-readable instructions that cause processor of print image control device to set print position, print image control device that sets print position, and control method of print image control device that sets print position
JP7183918B2 (ja) 2019-03-29 2022-12-06 ブラザー工業株式会社 印刷画像システム、プログラム、非一時的なコンピュータ可読媒体、及び印刷画像システムの制御方法

Also Published As

Publication number Publication date
EP3344015A1 (en) 2018-07-04
US20180220112A1 (en) 2018-08-02
JPWO2017033384A1 (ja) 2018-06-07

Similar Documents

Publication Publication Date Title
US20190124246A1 (en) Illumination Systems and Methods for Computer Imagers
WO2017033384A1 (ja) 照明システム及びプログラム
WO2017033385A1 (ja) 照明システム及びプログラム
US9245332B2 (en) Method and apparatus for image production
JP5834690B2 (ja) 投影装置、投影制御方法及びプログラム
US9813634B2 (en) Image processing apparatus and method
JP2012029269A (ja) 撮像装置および投写型映像表示装置
JP2016133799A (ja) 照明システム
US20140285093A1 (en) Lighting Control System and Lighting Control Method
JP2008187362A (ja) プロジェクタおよび投写画像調整方法
JP5644618B2 (ja) プロジェクター
JP2021101204A (ja) 制御装置の動作方法、プロジェクターの制御方法およびプロジェクター
WO2017033386A1 (ja) 照明システム及びプログラム
US20230239559A1 (en) Activating light sources for output image
US20200029016A1 (en) Moving object monitoring device and moving object monitoring system
JP6459620B2 (ja) 受光ユニット、発光制御方法及びプログラム
CN108886608B (zh) 白平衡调整装置、其工作方法和计算机可读取介质
CN109076199B (zh) 白平衡调整装置及其工作方法和非临时性的计算机可读介质
US10154201B2 (en) Method for adjusting photographic images to higher resolution
JP6523908B2 (ja) コード読取装置、コード読取方法、およびプログラム
JP2016133798A (ja) 照明システム
JP2009222958A (ja) 色むら補正用データ生成装置、および色むら補正用データ生成方法
KR102556609B1 (ko) 조도변화와 빛의 반사에 따라 적응적으로 촬영영상을 보정하는 감시용 카메라의 촬영영상 보정장치 및 그 촬영영상 보정방법
US20210378076A1 (en) Creating a combined image by sequentially turning on light sources
JP2007236007A (ja) プロファイルを作成するプログラム、および、プロファイル作成システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16838736

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017536190

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15747962

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016838736

Country of ref document: EP