WO2016017296A1 - 投射型表示装置 - Google Patents

投射型表示装置 Download PDF

Info

Publication number
WO2016017296A1
WO2016017296A1 PCT/JP2015/066992 JP2015066992W WO2016017296A1 WO 2016017296 A1 WO2016017296 A1 WO 2016017296A1 JP 2015066992 W JP2015066992 W JP 2015066992W WO 2016017296 A1 WO2016017296 A1 WO 2016017296A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
projection
optical system
display device
polarization
Prior art date
Application number
PCT/JP2015/066992
Other languages
English (en)
French (fr)
Inventor
一賢 金田
間宮 敏夫
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to KR1020177001525A priority Critical patent/KR102380693B1/ko
Priority to JP2016538204A priority patent/JP6597615B2/ja
Priority to CN201580039638.9A priority patent/CN106537248B/zh
Priority to EP15826795.5A priority patent/EP3176636B1/en
Priority to US15/327,710 priority patent/US10244217B2/en
Priority to CN201811569650.2A priority patent/CN110058476B/zh
Publication of WO2016017296A1 publication Critical patent/WO2016017296A1/ja
Priority to US16/210,456 priority patent/US10602108B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/28Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising
    • G02B27/283Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising used for beam splitting or combining
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/48Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus
    • G03B17/54Details of cameras or camera bodies; Accessories therefor adapted for combination with other photographic or optical apparatus with projector
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/14Details
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/14Details
    • G03B21/20Lamp housings
    • G03B21/2073Polarisers in the lamp house
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/14Details
    • G03B21/20Lamp housings
    • G03B21/208Homogenising, shaping of the illumination light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/315Modulator illumination systems
    • H04N9/3164Modulator illumination systems using multiple light sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/315Modulator illumination systems
    • H04N9/3167Modulator illumination systems for polarizing the light beam
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/317Convergence or focusing systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3197Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] using light modulating optical valves
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Definitions

  • the present disclosure relates to a projection display device having a detection function.
  • image projection by the projection optical system and capture of detection light by the detection optical system are performed using a single projection lens, and a light valve that creates an image, an image sensor that receives the detection light, and Are arranged at optically conjugate positions.
  • Patent Document 1 there is room for improvement because a sufficient detection area (detectable area, detection range) cannot be secured on the projection plane. Realization of an apparatus capable of detecting an object in almost the entire projection area is desired.
  • a projection display device includes an illumination unit, a projection lens, and a light valve that modulates illumination light supplied from the illumination unit based on a video signal and emits the illumination light toward the projection lens.
  • a projection optical system a polarization separation element that is disposed between the light valve and the projection lens, separates incident light into first and second polarization components, and emits them in different directions, and a light valve;
  • the image pickup device is provided at an optically conjugate position.
  • light based on invisible light irradiated along a plane near the projection surface is incident on the imaging element through the projection lens and the polarization separation element, and satisfies the following conditional expression: It is configured.
  • d1 Diagonal size of the light valve
  • d2 Diagonal size of the image sensor
  • the “diagonal size” indicates the length of each diagonal line of the effective area (drawing area, effective display area) of the light valve or the effective area (effective imaging area) of the image sensor.
  • the imaging element is disposed at a position optically conjugate with the light valve, and the imaging element is irradiated with invisible light along a plane in the vicinity of the projection surface. (A part of invisible light reflected by the object) is incident through the projection lens and the polarization separation element.
  • an object can be detected by associating the position in the projection area with the position in the detection area without performing complicated signal processing such as calibration. Further, by being configured to satisfy the conditional expression (1), it is possible to detect an object in almost the entire projection area.
  • the imaging element is disposed at a position optically conjugate with the light valve, and the imaging element is irradiated along the plane in the vicinity of the projection plane. Since light based on visible light is incident through the projection lens and the polarization separation element, object detection can be performed without performing complicated signal processing. Further, by being configured to satisfy the conditional expression (1), it is possible to detect an object in almost the entire projection area. Therefore, object detection can be realized with a simple configuration, and an object can be detected in the entire projection area.
  • FIG. 1 It is a schematic diagram which shows the external appearance of the projection type display apparatus which concerns on one embodiment of this indication, and its use condition. It is a block diagram which shows the function structure of the projection type display apparatus shown in FIG. It is the schematic diagram which looked at the state of FIG. 1 from the side. It is a figure which shows the structural example of the near-infrared light source part shown in FIG. It is a perspective view which shows the 1st structural example of a cylinder array lens. It is a perspective view which shows the 2nd structural example of a cylinder array lens. It is a figure which shows the principal part structure of the projection type display apparatus shown in FIG. It is a schematic diagram which shows one structural example of the polarization splitting element with the states of incident light and outgoing light.
  • Embodiment an example of a projection display device in which the diagonal size of the image sensor is set to satisfy a predetermined conditional expression and the image circle diameter by the projection lens is optimized
  • Configuration an example of a projection display device in which the diagonal size of the image sensor is set to satisfy a predetermined conditional expression and the image circle diameter by the projection lens is optimized
  • FIG. 1 illustrates an appearance and a usage state of a projection display device (projection display device 1) according to an embodiment of the present disclosure.
  • FIG. 2 shows a functional configuration of the projection display device 1.
  • the projection display device 1 is a type (so-called ultra-short focus type) that projects an image in the vicinity of the device in a state where the projection display device 1 is placed on a flat surface such as a desktop (or is attached to a wall surface). It is a projector.
  • the projection display device 1 also has a function of actively performing object detection along with video display. Although details will be described later, as shown in FIG. 1, in the projection area (projection area S11) where the image is projected, by performing some operation such as touching the displayed image with a finger (indicator 71). A predetermined input operation can be performed.
  • the projection display device 1 includes an illumination unit 11, a light valve 12, an image sensor 13, a reduction optical system 14, a polarization separation element 15, a projection lens 16, and a signal processing unit. 17.
  • the projection optical system 10A is configured by the illumination unit 11, the light valve 12, and the projection lens 16, and for example, the detection optical system 10B is configured by the imaging element 13 and the reduction optical system 14.
  • the illumination unit 11, the light valve 12, the image sensor 13, and the signal processing unit 17 are driven and controlled at a predetermined timing by a system control unit (not shown).
  • a near-infrared light source unit 40 is provided in the outer casing of the projection display device 1.
  • the near-infrared light source unit 40 is a light source unit that emits near-infrared (NIR) light as invisible light for detection, and irradiates near-infrared light along a plane near the projection plane 110.
  • NIR near-infrared
  • the near-infrared light source unit 40 has a near-infrared light barrier film (detection light plane 110 ⁇ / b> A) extending in the vicinity of the projection surface 110 so as to cover the projection area S ⁇ b> 11.
  • 110 A of detection light planes are formed in the surface in the predetermined height h from the projection surface 110 different from the height of the optical axis which passes along the projection lens 16 (FIG. 3).
  • the detection light plane 110A covers the projection area S11 in the in-plane direction with a thickness (width in the height direction) of 2 to 3 mm, for example, at a position where the height h is about several mm to several tens of mm.
  • the detection light plane 110 ⁇ / b> A is not obstructed unless there is an obstruction or an indicator 71 such as a finger or an indicator. That is, nothing is captured on the image sensor 13 that monitors the projection surface 110. In this state, when the indicator 71 approaches the projection surface 110 or performs an operation such as touching the projection surface 110, the near-infrared light of the detection light plane 110A is blocked by the indicator 71.
  • the light reflected by the indicator 71 travels in all directions, but part of it is taken into the opening of the projection lens 16. Part of the reflected light reaches the image sensor 13 via the projection lens 16 and the polarization separation element 15. At this time, since the light valve 12 and the image sensor 13 that form an image are arranged at optically conjugate positions, the bright spot diffusion points generated in a dot shape on the projection surface 110 are imaged on the image sensor 13. Then, an image is formed at a position corresponding to the position in the projected image. Thereby, the position of the object can be detected. In addition, in the case of the ultra short focus type, the projection light passes near the projection surface 110, and part of the human body that operates the camera is less likely to block the projection light.
  • the near-infrared light source unit 40 is provided, for example, below the outer casing of the projection display device 1, but may or may not be adjacent to the projection display device 1. . As long as the detection light plane 110 ⁇ / b> A can be stretched so as to cover the projection area S ⁇ b> 11, it may be installed at a position away from the projection display device 1. Alternatively, the near-infrared light source unit 40 may be provided inside the outer casing (housing) of the projection display device 1. In the present embodiment, the near-infrared light source unit 40 can be provided at a relatively high height from the projection surface 110 by an optical design described later, and can be easily bundled with the projection display device 1. .
  • the near infrared light source unit 40 includes, for example, a near infrared laser 42, a collimator lens 43, and a cylinder array lens 44.
  • a detection light plane 110 ⁇ / b> A is formed by the near-infrared light 41 emitted from the cylinder array lens 44.
  • the cylinder array lens 44 is formed by arranging a plurality of convex cylinder lenses as shown in FIG. 5A.
  • the cylinder array lens 44 is arranged so that the generatrix 44A of the cylinder lens faces a plane perpendicular to the projection plane 110.
  • a cylinder array lens 45 in which a plurality of concave cylinder lenses are arranged as shown in FIG. 5B may be used.
  • the illumination unit 11 emits the illumination light L1 toward the light valve 12 via the polarization separation element 15.
  • the illumination unit 11 is not particularly limited as long as it emits visible light as the illumination light L1, and includes, for example, a blue laser, a green laser, and a red laser (all not shown). .
  • the light valve 12 is a reflective liquid crystal element such as LCOS (Liquid Crystal On Silicon).
  • the light valve 12 modulates, for example, a first polarization component (for example, an s-polarization component Ls1 described later) included in the illumination light L1 based on video data.
  • the light modulated by the light valve 12 rotates in the polarization state and becomes a second polarization component (for example, a p-polarization component Lp1 described later).
  • This modulated light is emitted toward the projection lens 16 via the polarization separation element 15.
  • the surface shape of the effective area of the light valve 12 is, for example, a rectangular shape.
  • the projection lens 16 projects the light (image light L2) incident from the light valve 12 via the polarization separation element 15 onto the projection surface 110.
  • the projection lens 16 is an ultra-short focus lens having a throw ratio of, for example, 0.38 or less.
  • the slow ratio is represented by L / H, where L is the distance from the projection lens 16 to the projection plane 110 and H is the width of the projection area S11.
  • the detection light near infrared light La1
  • the detection light is taken in via the projection lens 16 of the projection optical system 10A and guided to the detection optical system 10B.
  • the diameter of the image circle by the projection lens 16 is set based on the size of the image pickup element 13, not the light valve 12.
  • the polarization separation element 15 separates incident light into a first polarization component (for example, s-polarization component) and a second polarization component (for example, p-polarization component), and emits them in different directions.
  • the polarization separation element 15 is composed of, for example, a polarization beam splitter (PBS), and selectively reflects the first polarization component (reflects at the polarization separation surface 150) and selectively transmits the second polarization component. It is configured to pass through the polarization separation surface 150.
  • PBS polarization beam splitter
  • the polarization separation element 15 is not limited to this, and may be formed of a wire grid. In that case, the characteristics are different from those of the polarizing beam splitter, and the p-polarized component is selectively reflected as the first polarized component of the incident light, and the s-polarized component is selectively transmitted as the second polarized component. be able to.
  • the polarization separation element 15 has, for example, four optical surfaces (first surface 15A, second surface 15B, third surface 15C, and fourth surface 15D) and a polarization separation surface 150. is doing.
  • the first surface 15A and the third surface 15C are arranged to face each other in a uniaxial direction (left-right direction in the drawing), and the second surface 15B and the fourth surface 15D are arranged to face each other in a uniaxial direction (up-down direction in the drawing).
  • the illumination light L1 is configured to be incident on the first surface 15A
  • the light valve 12 is disposed so as to face the second surface 15B.
  • the detection optical system 10B is disposed facing the third surface 15C
  • the projection lens 16 is disposed facing the fourth surface 15D.
  • FIG. 7 shows a configuration example of the polarization separation element 15.
  • the polarization separation element 15 reflects the first polarization component (s-polarization component Ls1) of the illumination light L1 incident from the first surface 15A and emits it from the second surface 15B.
  • the second polarization component (p-polarization component Lp1) of the illumination light L1 is emitted from the third surface 15C.
  • the second polarization component (p-polarization component Lp2) of the light incident from the second surface 15B (modulated light by the light valve 12) is emitted from the fourth surface 15D.
  • video projection is performed by the projection optical system 10A.
  • the first polarized component (s-polarized component Ls3) of the light (near infrared light La1) incident from the fourth surface 15D is reflected and emitted from the third surface 15C.
  • Light based on the s-polarized component Ls3 is received by the image sensor 13. Thereby, the imaging signal D0 is obtained in the imaging element 13.
  • the image sensor 13 is disposed at a position optically conjugate with the light valve 12. More specifically, when the light valve 12 is a reflective liquid crystal element, the display surface (liquid crystal surface) for creating an image and the imaging surface of the imaging element 13 are arranged so as to have an optically conjugate relationship. Yes.
  • the imaging device 13 is configured by a solid-state imaging device such as a complementary metal-oxide semiconductor (CMOS) or a charge coupled device (CCD), for example, and the surface shape of the effective area is, for example, a rectangular shape.
  • CMOS complementary metal-oxide semiconductor
  • CCD charge coupled device
  • the detection optical system 10B including the image pickup device 13, as shown in FIG. (Relay lens group 14A, 14B), the polarizer 18, and the image pick-up element 13 are arrange
  • the visible light cut filter 17A reduces the visible light component of the incident light.
  • a polarization beam splitter is used as the polarization separation element 15
  • most of the illumination light L1 incident on the imaging element 13 is cut without turning off the light source of the illumination unit 11. be able to.
  • the S / N ratio can be increased to improve the detection accuracy.
  • one visible light cut filter 17A is disposed, the number of visible light cut filters is not limited to this, and may be two or more. Further, although it is arranged at a position between the conjugate surface 50 and the reduction optical system 14, it may be arranged at another position, for example, between the reduction optical system 14 and the image sensor 13.
  • the band pass filter 17B selectively transmits a specific wavelength (near infrared light) and reduces other wavelengths.
  • the polarizer 18 is an optical member that reduces the second polarization component contained in the illumination light L1.
  • the polarization separation element 15 as described above transmits the second polarization component (for example, the p polarization component) of the irradiation light L1
  • the p polarization component is incident on the detection optical system 10B, and imaging is performed. This may affect the S / N ratio of the imaging signal obtained by the element 13.
  • the second polarization component for example, p-polarization component included in the illumination light L1 is cut, and the S / N ratio can be increased.
  • the position of the polarizer 18 is not limited to the position between the reduction optical system 14 and the image pickup device 13 as shown in the figure, but other positions, for example, between the conjugate plane 50 and the reduction optical system 14. You may arrange in.
  • the reduction optical system 14 includes one or a plurality of relay lens groups (here, two relay lens groups 14A and 14B). Each of the relay lens groups 14A and 14B has a positive power and includes at least one lens.
  • the relay lens group 14B is disposed at a position away from the relay lens group 14B, and the image sensor 13 is disposed at a position separated from the relay lens group 14B by the focal length fi.
  • Such an arrangement of the relay lens groups 14A and 14B is equivalent to a case where the imaging element 13 is arranged on the conjugate plane 50 while realizing a reduction optical system. That is, it is possible to further reduce the size of the image sensor 13 while maintaining the conjugate positional relationship with the light valve 12.
  • the detection optical system 10B includes the reduction optical system 14 will be described as an example.
  • the reduction optical system 14 may not be provided. That is, the detection optical system 10B may have an enlargement optical system or a unity magnification optical system.
  • Such object detection using the reduction optical system 10B is advantageous for cost reduction.
  • the cost of the image sensor 13 is greatly affected by the size of the image sensor 13.
  • the light valve 12 and the image sensor 13 which are semiconductor parts have a large cost weight, and thus the cost merit by downsizing such parts is great.
  • the degree of freedom of arrangement is increased by extending the conjugate point by the relay optical system. For example, when the distance between components is born, a bending optical system can be realized with a reflection mirror or the like.
  • the detection optical system 10B as described above is configured such that the diagonal size of the image sensor 13 satisfies the following conditional expression (1).
  • d1 is the diagonal size of the light valve 12
  • d2 is the diagonal size of the image sensor 13
  • is a reduction magnification of the reduction optical system 14
  • the diagonal size d1 is the diagonal size of the effective area of the light valve 12
  • the diagonal size d2 is the diagonal size of the effective area of the image sensor 13. d1 ⁇ ⁇ d2 (1)
  • FIG. 8A when an indicator 71 such as a finger contacts or approaches the projection surface 110, near-infrared light La on the detection light plane 110 ⁇ / b> A stretched near the projection surface 110 is indicated.
  • the object 71 is diffusely reflected in all directions.
  • a part of the diffusely reflected light (scattered light) is collected by the projection lens 16 and then cut out by the exit pupil E1 in the detection optical system 10B.
  • the near-infrared light La1 taken into the detection optical system 10B via the projection lens 16 as described above will be described in detail.
  • the near-infrared light La1 capture angle near red incident on the exit pupil E1 of the detection optical system 10B
  • the angle ⁇ formed by the external light La1 and the projection surface 110 is different.
  • the positions are separated from the exit pupil E1 in the order of positions P2 and P3, and the capture angle ⁇ gradually decreases.
  • the capture angle ⁇ is also minimum.
  • Table 1 shows the projection conditions. However, the height of the exit pupil E1 is 100 mm from the projection plane 110 (screen, floor).
  • FIG. 8C shows the position coordinates (X, Y, Z) of the positions P1 to P4 in the projection area S11 formed under this projection condition.
  • Table 2 shows the distance to the exit pupil E1 along with the position coordinates (X, Y, Z) of the positions P1 to P4.
  • Table 3 shows the angle (capture angle ⁇ ) formed by the exit pupil E1 and the projection plane 110 at each of the positions P1 to P4.
  • the capture angles ⁇ were 17.6 ° and 12.2 °, respectively.
  • the distance to the exit pupil E1 or the capture angle ⁇ changes depending on the detection position.
  • the values of these parameters themselves differ depending on the size of the projection area S11 or the design of the ultra short focus lens, the relative magnitude relationship of the capture angle ⁇ due to the difference in the detection position described above changes. Therefore, the position of the indicator 71 can be specified using this relationship.
  • FIG. 9 schematically shows the state of reflection near the indicator 71.
  • the upper diagram shows the reflection at the position P1
  • the lower diagram shows the reflection at the position P4.
  • the near-infrared light La in the detection light plane 110 is reflected by the indicator 71.
  • the following phenomenon occurs.
  • the near-infrared light La1 viewed from the exit pupil E1 (projection lens 16) is not the reflection points (actual irradiation points) Pa1 and Pa2 actually hitting the indicator 71, but as if they are high.
  • FIG. 10 shows a configuration for explaining the relationship between the projection area S11 and the enlargement magnification ⁇ by the projection optical system 10A, and the light reception target area S12 and the reduction magnification ⁇ by the detection optical system 10B.
  • the projection area S11 on the projection surface 110 has a size ( ⁇ ⁇ d1) obtained by enlarging the diagonal size d1 of the light valve 12 by ⁇ times by the projection lens 16.
  • the size of the light receiving target area S12 is set to the size of the projection area ( ⁇ ⁇ d1) in consideration of the difference. Ideally, it should be set to be larger. That is, it is preferable to be configured to satisfy the conditional expression (1). Note that the enlargement magnification ⁇ is larger than 1 similarly to the reduction magnification ⁇ .
  • an “image circle” refers to a circular range in which light that has passed through a lens forms an image.
  • a projection system such as a projector is designed so that an effective area of the light valve is secured at a position where the light valve is disposed.
  • the projection lens is designed so as to ensure a passage area for light emitted from the effective area of the light valve.
  • the imaging lens is designed so as to ensure a passage region for light rays incident on the effective area of the imaging device.
  • image projection and capture of detection light are performed by one projection lens 16, so that the image circle (image circle C1) passes through the highest image height. It is desirable to set so that the light beam to be secured is secured.
  • FIG. 11 shows the relationship between the image circle C1, the surface shape corresponding to the effective area of the light valve 12 (rectangular shape A1), and the surface shape corresponding to the effective area of the image sensor 13 (rectangular shape A2).
  • FIG. 12 is an enlarged view of a part of FIG. Further, these rectangular shapes A1 and A2 correspond in detail to the surface shape at the position of the approximate focal length of the projection lens.
  • the image circle C1 has a passage region of a light beam whose image height is greatly shifted (offset) along one direction (here, the Y direction in FIG. 11). Designed to be secured.
  • the image circle (image circle C100) is designed to circumscribe a portion of the vertex of the rectangular shape A1 of the light valve 12. Specifically, the image circle C100 is designed to contact a pair of vertices A11 and A12 sharing one long side in the rectangular shape A1.
  • the reason for designing the image circle C100 so as to circumscribe the rectangular shape A1 is that the diameter of the image circle itself is very large and the size of the projection lens is huge. This is because the diameter should be minimized.
  • the projection lens 16 is shared by the projection optical system 10A and the detection optical system 10B as in the present embodiment, there is a difference (elongation) between the reflection point and the virtual light emission point.
  • the image circle C1 is preferably designed in consideration of the rectangular shape A2 of the image sensor 13.
  • the image circle C1 is designed so as to be non-contact with the rectangular shape A1 and include the rectangular shape A1. In other words, it is larger than the diameter of the circle (image circle C100) in contact with the vertices A11 and A12 of the rectangular shape A1, and the pair of vertices A21 and A22 sharing one long side of the rectangular shape in the rectangular shape A2 of the image sensor 13 It is designed to have a diameter that is less than or equal to the diameter of the circle in contact.
  • the rectangular shape A2 of the image sensor 13 is substantially the same as the rectangular shape A1 and is larger than the rectangular shape A1.
  • the rectangular shape A2 includes the rectangular shape A1 and a cover area A2a in consideration of the difference. More preferably, as shown in FIG.
  • the diameter of the image circle C1 is equal to the diameter of the circle in contact with the vertices A21 and A22 in the rectangular shape A2.
  • the diameter of the image circle C1 is not limited to the case where it completely coincides with the diameter of the circle in contact with the vertices A21 and A22. In other words, errors in the lens process, errors due to lens shift at the time of attachment, etc. are allowed. Further, the image circle C1 may be designed to be slightly larger in consideration of such an error in advance.
  • R0 is a radius of a circle (the radius of the image circle C100) that is in contact with the vertices A11 and A12 of the rectangular shape A1 of the light valve 12, and ⁇ is a projection magnification (projection image size and light valve size) as shown in FIG.
  • the ratio between the effective area size) and h is the height from the projection plane 110 of the detection light plane 110A.
  • ⁇ min is the minimum value of the angle (capture angle) ⁇ formed by the near-infrared light La1 incident on the detection optical system 10B and the projection plane 110.
  • the lens apparatus is further configured to satisfy the following conditional expression (3).
  • the image circle C1 includes an optical path necessary for the effective area of the light valve 12, and is necessary and sufficient for the image pickup device 13 arranged coaxially with the light valve 12. It can be designed to include a simple optical path. ⁇ ⁇ d2 ⁇ d1 + 2h / ⁇ ⁇ tan ⁇ min (3)
  • the signal processing unit 17 corresponds to the position of the feature point of the pointing object (object) 71 such as a human finger or a pointer, for example, based on the image pickup signal from the image pickup device 13, for example, the coordinates in the projection area S 11 on the projection plane 110. It is attached and detected.
  • feature points include the shape of the tip of a human finger, the center of gravity of the finger, the center of gravity of the hand, and the like.
  • the video information V1 formed on the light valve 12 is projected onto a projection surface 110 such as a table by the projection lens 16, and is enlarged and displayed as a projection image V2.
  • the projection display apparatus 1 captures the position of the object on the projection plane 110, for example, the position Pt1 of the feature point of the pointing object (object) 71 such as a human finger or pointer obtained from the image sensor 13. Detection is performed using the signal D0.
  • the projection lens 16 is shared by the projection optical system 10A and the detection optical system 10B, and the imaging element 13 is disposed at a position optically conjugate with the light valve 12. For this reason, it is possible to detect an object whose detection area (detectable area) is substantially the same as the projection area S11. Further, this optically conjugate positional relationship makes it possible to monitor the position Pt1 of the feature point of the pointing object 71 on the projection surface 110 by superimposing it on the projection image V2 via the projection lens 16. Further, for example, the signal processing unit 17 performs image processing on the shape of the indicator 71 and detects the coordinates of the position Pt1 of the feature point of the indicator 71, thereby enabling the pointing operation of the projection image V2.
  • the coordinate of the detection position Pt2 on the image sensor 13 side is the coordinate of the position Pt1 of the feature point of the indicator 71
  • an object can be detected by associating the position in the projection area S11 with the position in the detection area without performing complicated signal processing such as calibration.
  • the indicator 71 may be two or more. For example, it is possible to detect the coordinates of the tips of the fingers of both hands. By using the position of the feature point of the indicator 71 detected in this way, an intuitive operation as if a touch panel is incorporated in the projected image V2 of the projector is possible.
  • the influence of the difference between the reflection point and the virtual light emission point can be reduced when detecting near infrared light using the detection light plane 110A. It is possible to reduce and form a detection area that covers almost the entire projection area S11.
  • the image circle C1 is larger than the diameter of the circle designed based on the rectangular shape A1 of the light valve 12 (the diameter of the image circle C100) (without contact with the rectangular shape A1, And the rectangular shape A1) is desirable.
  • the image circle C1 more preferably includes the rectangular shape A2 of the image sensor 13.
  • the incident light beam to the rectangular shape A2 of the image sensor 13 as a light receiving target. Is partially covered (shaded portion 120 in the figure). That is, object detection may not be possible in a part of the projection area S11.
  • the design of the image circle C1 as in the present embodiment makes it possible to detect an object even in a local region such as a corner of the projection area S11.
  • the image sensor 13 is disposed at a position optically conjugate with the light valve 12, and the image sensor 13 is irradiated along a plane near the projection plane 110. Since light based on near-infrared light is incident through the projection lens 16 and the polarization separation element 15, it is possible to detect an object without performing complicated signal processing. Further, by being configured to satisfy the conditional expression (1), it is possible to detect an object in almost the entire projection area S11. Therefore, object detection can be realized with a simple configuration, and an object can be detected in the entire projection area.
  • the present disclosure is not limited to the description of the above embodiment, and various modifications can be made.
  • the light valve 12 and the image sensor 13 have been exemplified as having the same aspect ratio.
  • the light valve 12 and the image sensor 13 do not necessarily have the same aspect ratio. Also good. That is, it is only necessary that the diagonal sizes of the light valve 12 and the image sensor 13 satisfy the above-described predetermined conditional expression, and the effective area may have different surface shapes.
  • the reflective liquid crystal element is used as the light valve of the present disclosure.
  • the present invention is not limited to this, and other light valves may be used.
  • a digital mirror device may be used as the light valve.
  • the light valve is a mirror type that does not use the polarization characteristics of light, a polarization optical system is not normally used, but a polarization separation element such as a polarization beam splitter is arranged in the optical path as in the above embodiment. Even if it is arranged in an optical system, it is possible to realize video display using DMD.
  • a so-called ultra-short focus type is exemplified as an example of the projection display device of the present disclosure, but the present invention is not necessarily limited to this.
  • the projection optical system and the detection optical system may share the projection lens, and the imaging element may have a configuration in which the imaging element is disposed at a position optically conjugate with the light valve. If it has such a structure, in the reflected light on the object surface of detection light, since a difference arises between a reflective point and a virtual light emission point, the said optical design in consideration of this difference is effective. . However, this effect is particularly effective for the ultra-short focus type. In addition, the effect demonstrated in the said embodiment etc. is an example, The other effect may be sufficient and the other effect may be included.
  • this indication can take the following composition.
  • a projection optical system having an illumination unit, a projection lens, and a light valve that modulates illumination light supplied from the illumination unit based on a video signal and emits the modulated light toward the projection lens;
  • a polarization separation element that is disposed between the light valve and the projection lens and separates incident light into first and second polarization components and emits the light in different directions from each other;
  • a detection optical system having an image sensor disposed at a position optically conjugate with the light valve, Light that is based on non-visible light irradiated along a plane in the vicinity of the projection plane is incident on the imaging element through the projection lens and the polarization separation element, and satisfies the following conditional expression: Projection type display device.
  • d1 Diagonal size of the light valve
  • d2 Diagonal size of the image sensor
  • the surface shape corresponding to the effective area of the light valve is a first rectangular shape, The projection type display device according to (1), wherein an image circle of the projection lens is non-contact with the first rectangular shape and includes the first rectangular shape.
  • the surface shape corresponding to the effective area of the image sensor is a second rectangular shape having a center position substantially the same as the first rectangular shape and larger than the first rectangular shape,
  • the image sensor receives a part of light reflected by an object out of the invisible light,
  • R1 Radius of the image circle of the projection lens
  • R0 Radius of a circle in contact with a pair of vertices of the effective area of the light valve
  • h Height of the surface irradiated with invisible light from the projection plane
  • Projection magnification
  • ⁇ min Detection The minimum value of the angle between the projection surface and a part of the reflected light incident on the optical system.
  • the detection optical system has a reduction optical system between the polarization separation element and the imaging element,
  • the detection optical system includes a visible light cut filter that reduces a visible light component between the polarization separation element and the imaging element.
  • the detection optical system includes a polarizer that selectively removes one of the first and second polarization components between the polarization separation element and the imaging element.
  • the projection display device according to any one of (1) to (8), further including a signal processing unit that detects a position of an object on the projection surface based on an imaging signal obtained from the imaging element.
  • the projection display device according to any one of (1) to (9), wherein the projection lens is a short focus lens.
  • a light source unit that emits the invisible light is provided in an outer casing.
  • the invisible light is near infrared light.
  • the polarization separation element is a polarization beam splitter.
  • the polarization separation element has first to fourth surfaces, each of which serves as a light incident surface or a light output surface, and converts the first polarization component of light incident from the first surface to the second surface.
  • the second polarization component out of the light incident from the first surface and the second polarization component out of the light incident from the second surface is emitted from the third surface.
  • the polarization component is emitted from the fourth surface, and the first polarization component of the light incident from the fourth surface is emitted from the third surface.
  • Projection type display device Projection type display device.
  • the projection optical system is The illumination unit emits the illumination light toward the first surface of the polarization separation element;
  • the light valve modulates the first polarization component emitted from the second surface of the polarization separation element in the illumination light, and transmits the modulated light to the second surface of the polarization separation element.
  • the projection lens is configured to project, out of the modulated light, light emitted from the fourth surface of the polarization separation element toward the projection surface.
  • the detection optical system includes: Light for object detection is incident on the reduction optical system via the projection lens and the fourth surface and the third surface of the polarization separation element, The projection display device according to (16), wherein the light emitted from the reduction optical system is incident on the imaging element.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Liquid Crystal (AREA)

Abstract

 投射型表示装置は、照明部と、投射レンズと、照明部から供給された照明光を映像信号に基づいて変調して投射レンズへ向けて出射するライトバルブとを有する投影光学系と、ライトバルブと投射レンズとの間に配置され、入射光を第1および第2の偏光成分に分離すると共に、それぞれを互いに異なる方向に出射する偏光分離素子と、ライトバルブと光学的に共役な位置に配置された撮像素子を有する検出光学系とを備える。撮像素子には、投影面の近傍の面に沿って照射された非可視光に基づく光が、投射レンズと偏光分離素子とを介して入射され、かつ、以下の条件式を満たすように構成される。 d1<β×d2 ………(1)

Description

投射型表示装置
 本開示は、検出機能を有する投射型表示装置に関する。
 近年、スマートフォンやタブレット端末等では、タッチパネルを用いることにより、画面に表示される映像のページ送りや拡大縮小を、人の直感に応じたポインティング操作で可能にしている。一方で、映像をスクリーン上に投影することにより表示を行う表示装置として、プロジェクタ(投射型表示装置)が古くから知られている。このプロジェクタに、タッチパネルのような検出機能を付加する技術が提案されている(例えば、特許文献1,2)。
特開2007-52218号公報 特開2003-44839号公報
 特許文献1に記載のプロジェクタでは、投影光学系による映像投射と検出光学系による検出光の取り込みとが、1つの投射レンズを用いてなされ、映像を作り出すライトバルブと検出光を受光する撮像素子とが光学的に共役な位置に配置される。このような装置構成により、キャリブレーション等の煩雑な処理を行うことなく、物体の検出を精度良く行うことができる。シンプルな構成で、インタラクティブなデバイスを実現可能となる。
 しかしながら、上記特許文献1の構成では、投影面上において検出エリア(検出可能エリア,検出範囲)を十分に確保できず、改善の余地がある。投影エリアのほぼ全域において物体検出が可能な装置の実現が望まれている。
 したがって、簡易な構成で物体検出を実現すると共に、投影エリアの全域において物体を検出可能な投射型表示装置を提供することが望ましい。
 本開示の一実施の形態の投射型表示装置は、照明部と、投射レンズと、照明部から供給された照明光を映像信号に基づいて変調して投射レンズへ向けて出射するライトバルブとを有する投影光学系と、ライトバルブと投射レンズとの間に配置され、入射光を第1および第2の偏光成分に分離すると共に、それぞれを互いに異なる方向に出射する偏光分離素子と、ライトバルブと光学的に共役な位置に配置された撮像素子を備えたものである。また、撮像素子には、投影面の近傍の面に沿って照射された非可視光に基づく光が、投射レンズと偏光分離素子とを介して入射され、かつ、以下の条件式を満たすように構成されている。
 d1<β×d2   ………(1)
 但し、
 d1:ライトバルブの対角サイズ
 d2:撮像素子の対角サイズ
 β:検出光学系の光学倍率(縮小光学系の場合はβ>1、拡大光学系の場合はβ<1、等倍光学系の場合はβ=1)
 とする。
 なお、本明細書において「対角サイズ」は、ライトバルブの有効エリア(描画エリア,有効表示領域)あるいは撮像素子の有効エリア(有効撮像領域)のそれぞれの対角線の長さを示すものとする。
 本開示の一実施の形態の投射型表示装置では、撮像素子がライトバルブと光学的に共役な位置に配置され、この撮像素子に、投影面の近傍の面に沿って照射された非可視光に基づく光(物体によって反射された非可視光の一部)が、投射レンズと偏光分離素子とを介して入射される。これにより、キャリブレーション等の煩雑な信号処理を行うことなく、投影エリア内の位置と、検出エリア内の位置とを対応づけて物体を検出することができる。また、条件式(1)を満たすように構成されていることにより、投影エリアのほぼ全域において物体検出が可能となる。
 本開示の一実施の形態の投射型表示装置によれば、撮像素子がライトバルブと光学的に共役な位置に配置され、この撮像素子に、投影面の近傍の面に沿って照射された非可視光に基づく光が、投射レンズと偏光分離素子とを介して入射されることで、煩雑な信号処理を行うことなく、物体検出が可能となる。また、条件式(1)を満たすように構成されていることにより、投影エリアのほぼ全域において物体検出が可能となる。よって、簡易な構成で物体検出を実現すると共に、投影エリアの全域において物体を検出可能となる。
 なお、上記内容は本開示の一例である。本開示の効果は、上述したものに限らず、他の異なる効果であってもよいし、更に他の効果を含んでいてもよい。
本開示の一実施の形態に係る投射型表示装置の外観とその使用状態とを示す模式図である。 図1に示した投射型表示装置の機能構成を示すブロック図である。 図1の状態を側面からみた模式図である。 図1に示した近赤外光源部の構成例を示す図である。 シリンダアレイレンズの第1の構成例を示す斜視図である。 シリンダアレイレンズの第2の構成例を示す斜視図である。 図1に示した投射型表示装置の要部構成を示す図である。 偏光分離素子の一構成例を、入射光および出射光の状態と共に示す模式図である。 検出光取り込みのイメージを表す模式図である。 検出位置による取り込み角度の違いを説明するための模式図である。 検出位置座標の一例を示す模式図である。 検出光の反射点と仮想発光点との差分について説明するための模式図である。 撮像素子の対角サイズを説明するための図である。 投射レンズのイメージサークルを、ライトバルブサイズおよび撮像素子サイズと共に示した模式図である。 図11の一部の拡大図である。 イメージサークルの詳細条件について説明するための模式図である。 図1に示した投射型表示装置の映像表示および物体検出の概念を模式的に示した図である。 比較例に係る投射レンズのイメージサークルを示す模式図である。 比較例に係る投射レンズのイメージサークルを撮像素子サイズと共に示す模式図である。
 以下、本開示の実施の形態について図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
 実施の形態(撮像素子の対角サイズが所定の条件式を満たして設定され、投射レンズによるイメージサークル径が最適化された、投射型表示装置の例)
  1.構成
  2.作用,効果
<実施の形態>
[構成]
 図1は、本開示の一実施の形態に係る投射型表示装置(投射型表示装置1)の外観とその使用状態とを表したものである。図2は投射型表示装置1の機能構成を表したものである。投射型表示装置1は、例えば卓上などのフラットな面の上に置かれた状態(あるいは壁面などに取り付けられた状態)で、装置の近傍に映像を投影するタイプ(いわゆる超短焦点型)のプロジェクタである。この投射型表示装置1は、また、映像表示と共に、物体検出をアクティブに行う機能を有している。詳細は後述するが、図1に示したように、映像が投射される投影エリア(投影エリアS11)において、表示された映像を指(指示物71)でタッチする等、何らかの動作を行うことで、所定の入力操作を行うことができるようになっている。
 投射型表示装置1は、図2に示したように、照明部11と、ライトバルブ12と、撮像素子13と、縮小光学系14と、偏光分離素子15と、投射レンズ16と、信号処理部17とを備えている。これらのうち、例えば照明部11、ライトバルブ12および投射レンズ16により投影光学系10Aが構成され、例えば撮像素子13および縮小光学系14により検出光学系10Bが構成されている。なお、例えば照明部11、ライトバルブ12、撮像素子13および信号処理部17は、システム制御部(図示せず)により所定のタイミングで駆動制御される。
 この投射型表示装置1の外筐には、近赤外光源部40が設けられている。近赤外光源部40は、検出用の非可視光として近赤外光(NIR:Near infrared)を出射する光源部であり、投影面110の近傍の面に沿って近赤外光を照射するものである。換言すると、近赤外光源部40は、投影面110の近傍において、投影エリアS11を覆うように、近赤外光のバリア膜(検出用ライトプレーン110A)を張っている。検出用ライトプレーン110Aは、投射レンズ16を通る光軸の高さとは異なる、投影面110から所定の高さhにある面に形成されている(図3)。
 一例としては、検出用ライトプレーン110Aは、例えば高さhが数mm~数10mm程度の位置に、厚み(高さ方向における幅)が2~3mmで,かつ面内方向において投影エリアS11をカバーするように形成される。通常、投影面110は平坦であるため、遮蔽物、あるいは指や指示棒などの指示物71が無ければ、検出用ライトプレーン110Aは遮られることがない。つまり、投影面110をモニタしている撮像素子13には何も写らない。この状態で、指示物71が、投影面110に近接するか、または、投影面110をタッチするなどの動作をすると、検出用ライトプレーン110Aの近赤外光が指示物71によって遮られ、そのポイントで拡散反射する。指示物71にあたり反射した光は四方八方に向かうが、その一部が投射レンズ16の開口に取り込まれる。その反射光の一部は投射レンズ16と偏光分離素子15とを介して、撮像素子13上に到達する。この時、映像をつくるライトバルブ12と撮像素子13が光学的に共役の位置に配置されているため、投影面110上で点状に発生した輝点拡散ポイントは撮像素子13上で結像し、投影された映像における位置と対応する位置で結像する。これにより、物体の位置検出が可能となる。また超短焦点タイプの場合は投射光が投影面110の近傍を通り、操作する人の体の一部が投射光を遮りにくいため、操作する際に画面が見やすいというメリットがある。
 なお、近赤外光源部40は、図示したように、例えば投射型表示装置1の外筐の下方に設けられるが、投射型表示装置1に隣接していてもよいし、していなくともよい。投影エリアS11を覆うように検出用ライトプレーン110Aを張ることができれば、投射型表示装置1から離れた位置に設置されていてもよい。あるいは、近赤外光源部40は、投射型表示装置1の外筐(筐体)の内部に設けられていてもよい。本実施の形態では、近赤外光源部40は、後述する光学設計により、投影面110から比較的離れた高さに設けることが可能となり、投射型表示装置1と一体的にバンドルし易くなる。
 この検出用ライトプレーン110Aにより、物体(指示物71)が投影面110に接触あるいは近接すると、近赤外光が指示物71によって反射(拡散反射)され、この反射光の一部が投射型表示装置1に検出光として取り込まれる仕組みである。
 近赤外光源部40は、図4に示したように、例えば近赤外レーザ42と、コリメータレンズ43と、シリンダアレイレンズ44とを有している。シリンダアレイレンズ44を出射した近赤外光41により検出用ライトプレーン110Aが形成される。シリンダアレイレンズ44は、図5Aに示したように凸状のシリンダレンズが複数配列されたものである。シリンダアレイレンズ44は、投影面110に対して垂直な面にシリンダレンズの母線44Aを向けるように配置する。なお、凸状のシリンダアレイレンズ44に代えて、図5Bに示したように凹状のシリンダレンズが複数配列されたシリンダアレイレンズ45を用いてもよい。
 照明部11は、照明光L1を、偏光分離素子15を介してライトバルブ12に向けて出射するものである。この照明部11は、照明光L1として可視光を出射するものであれば特に限定されないが、例えば青色レーザと、緑色レーザと、赤色レーザ(いずれも図示せず)とを含んで構成されている。
 図2,図6~図13を参照して、投射型表示装置1の要部構成について説明する。
(投影光学系10A)
 ライトバルブ12は、例えばLCOS(Liquid Crystal On Silicon)等の反射型の液晶素子である。ライトバルブ12は、例えば照明光L1に含まれる第1の偏光成分(例えば、後述のs偏光成分Ls1)を映像データに基づいて変調するものである。ライトバルブ12によって変調された光は、偏光状態が回転し、第2の偏光成分(例えば、後述のp偏光成分Lp1)となる。この変調光が、偏光分離素子15を介して投射レンズ16に向けて出射されるようになっている。なお、ライトバルブ12では、入射光(s偏光成分Ls1)をそのままの偏光状態で偏光分離素子15に戻すことで黒表示を行うことが可能である。このライトバルブ12の有効エリアの面形状は、例えば矩形状である。
 投射レンズ16は、ライトバルブ12から偏光分離素子15を介して入射された光(映像光L2)を、投影面110上に投射するものである。投射レンズ16は、スローレシオ(Throw Ratio)が例えば0.38以下の超短焦点レンズである。ここで、スローレシオとは、投射レンズ16から投影面110までの距離をL、投影エリアS11の幅をHとすると、L/Hで表される。この投射レンズ16には、図2および図6に示したように、変調光の進行方向とは逆方向から検出光(近赤外光La1)が入射されるようになっている。このように、本実施の形態では、検出光が、投影光学系10Aの投射レンズ16を介して取り込まれ、検出光学系10Bへ導かれる。また、詳細は後述するが、この投射レンズ16によるイメージサークルの径は、ライトバルブ12ではなく、撮像素子13のサイズを基準に設定されている。
(偏光分離素子15)
 偏光分離素子15は、入射した光を第1の偏光成分(例えばs偏光成分)と第2の偏光成分(例えばp偏光成分)とに分離し、それぞれを互いに異なる方向に出射するものである。この偏光分離素子15は、例えば偏光ビームスプリッタ(PBS)からなり、第1の偏光成分を選択的に反射させる(偏光分離面150において反射させる)と共に、第2の偏光成分を選択的に透過させる(偏光分離面150を透過させる)ように構成されている。本実施の形態では、偏光分離素子15として偏光ビームスプリッタを用いる場合を例に挙げて説明するが、偏光分離素子15はこれに限らず、ワイヤーグリッドから構成されていてもよい。その場合には、偏光ビームスプリッタと特性が異なり、入射した光のうちの第1の偏光成分としてp偏光成分を選択的に反射し、第2の偏光成分としてs偏光成分を選択的に透過させることができる。
 この偏光分離素子15は、図6に示したように、例えば4つの光学面(第1面15A,第2面15B,第3面15C,第4面15D)と、偏光分離面150とを有している。第1面15Aと第3面15Cとが一軸方向(図の左右方向)において向かい合って配置され、第2面15Bと第4面15Dとが一軸方向(図の上下方向)において向かい合って配置されている。このような構成において、第1面15Aに照明光L1が入射されるように構成され、第2面15Bに対向して、ライトバルブ12が配置されている。第3面15Cに対向して、検出光学系10Bが配置され、第4面15Dに対向して、投射レンズ16が配置されている。
 図7に、偏光分離素子15の一構成例について示す。このように、偏光分離素子15は、第1面15Aから入射した照明光L1のうちの第1の偏光成分(s偏光成分Ls1)を反射して第2面15Bから出射する。一方、照明光L1のうちの第2の偏光成分(p偏光成分Lp1)を第3面15Cから出射する。また、第2面15Bから入射した光(ライトバルブ12による変調光)のうちの第2の偏光成分(p偏光成分Lp2)を第4面15Dから出射する。これにより、投影光学系10Aによる映像投射がなされるようになっている。この一方で、第4面15Dから入射した光(近赤外光La1)のうちの第1の偏光成分(s偏光成分Ls3)を反射して第3面15Cから出射する。このs偏光成分Ls3に基づく光が撮像素子13において受光される。これにより、撮像素子13において撮像信号D0が得られる。
(検出光学系10B)
 撮像素子13は、ライトバルブ12と光学的に共役な位置に配置されている。より具体的には、ライトバルブ12が反射型の液晶素子である場合、映像を創り出す表示面(液晶面)と撮像素子13の撮像面とが光学的に共役な関係となるように配置されている。撮像素子13は、例えばCMOS(Complementary Metal-Oxide Semiconductor)やCCD(Charge Coupled Device)などの固体撮像素子により構成され、有効エリアの面形状は、例えば矩形状である。本実施の形態では、詳細は後述するが、この撮像素子13の対角サイズが、所定の条件式を満たすように設計されている。
 この撮像素子13を含む検出光学系10Bの一例としては、図6に示したように、例えば、共役面50の側から順に、可視光カットフィルタ17Aと、バンドパスフィルタ17Bと、縮小光学系14(リレーレンズ群14A,14B)と、偏光子18と、撮像素子13とが配置されたものが挙げられる。
 可視光カットフィルタ17Aは、入射した光のうちの可視光成分を低減するものである。この可視光カットフィルタ17Aを備えることで、偏光分離素子15として偏光ビームスプリッタを用いたとしても、照明部11の光源をオフすることなく、撮像素子13に入射する照明光L1の多くをカットすることができる。これにより、ほぼ検出光のみを撮像素子13側に入射させることができ、S/N比を大きくして検出精度を上げることができる。なお、ここでは、1枚の可視光カットフィルタ17Aを配置したが、可視光カットフィルタの枚数はこれに限定されるものではなく、2枚以上であってもよい。また、共役面50と縮小光学系14との間の位置に配置したが、他の位置、例えば縮小光学系14と撮像素子13との間に配置してもよい。
 バンドパスフィルタ17Bは、特定の波長(近赤外光)を選択的に透過し、他の波長を低減するものである。
 偏光子18は、照明光L1に含まれる第2の偏光成分を低減させる光学部材である。ここで、上記のような偏光分離素子15では、照射光L1のうちの第2の偏光成分(例えばp偏光成分)を透過させることから、このp偏光成分が検出光学系10Bに入射し、撮像素子13で得られる撮像信号のS/N比に影響することがある。本実施の形態のように、偏光子18が配置されることにより、照明光L1に含まれる第2の偏光成分(例えばp偏光成分)がカットされ、S/N比を大きくすることができる。なお、偏光子18の位置は、図示したような縮小光学系14と撮像素子13との間の位置に限定されるものではなく、他の位置、例えば共役面50と縮小光学系14との間に配置してもよい。
 縮小光学系14は、1または複数のリレーレンズ群(ここでは2つのリレーレンズ群14A,14B)から構成されている。リレーレンズ群14A,14Bはそれぞれ、正のパワーを有し、少なくとも1枚のレンズを含んで構成されている。リレーレンズ群14Bの焦点距離fiは、リレーレンズ群14Aの焦点距離fbよりも小さくなるように設定されている。例えば、2fi=fbとなる条件とし、リレーレンズ群14Aが、ライトバルブ12の共役面50から焦点距離fbの分だけ離れた位置に配置され、このリレーレンズ群14Aの位置から(fb+fi)の分だけ離れた位置にリレーレンズ群14Bが配置され、かつリレーレンズ群14Bから焦点距離fiの分だけ離れた位置に、撮像素子13が配置される。このようなリレーレンズ群14A,14Bの配置により、縮小光学系を実現しつつ、撮像素子13を共役面50に配置した場合と等価となる。つまり、ライトバルブ12との共役の位置関係を保ちつつ、撮像素子13のサイズをより小さくすることが可能となる。なお、本実施の形態では、検出光学系10Bが縮小光学系14を有する場合を例に挙げて説明するが、この縮小光学系14は設けられていなくともよい。即ち、検出光学系10Bは、拡大光学系あるいは等倍光学系を有していてもよい。
 このような縮小光学系10Bを用いた物体検出は、低コスト化に有利である。撮像素子13のコストは撮像素子13のサイズに大きく影響を受ける。プロジェクタを構成する上で、半導体部品である、ライトバルブ12および撮像素子13はコストウエイトが大きいことから、そのような部品の小型化によるコストメリットは大きい。また、リレー光学系により共役点を延長することで配置の自由度が増す、というメリットもある。例えば、部品間距離が生まれることで、間に反射ミラー等で折り曲げ光学系を実現することが可能となる。
 本実施の形態では、上記のような検出光学系10Bにおいて、撮像素子13の対角サイズが以下の条件式(1)を満たすように構成されている。但し、d1をライトバルブ12の対角サイズ、d2を撮像素子13の対角サイズ、βを検出光学系の光学倍率(縮小光学系の場合はβ>1、拡大光学系の場合はβ<1、等倍光学系の場合はβ=1)とする。但し、本実施の形態では、検出光学系10Bが縮小光学系を有することから、このβは、縮小光学系14の縮小倍率であり、β>1とする。なお、対角サイズd1はライトバルブ12の有効エリアの対角サイズであり、対角サイズd2は、撮像素子13の有効エリアの対角サイズである。
 d1<β×d2   ………(1)
 以下に、上記条件式(1)の導出の根拠について、図8A~図11を用いて説明する。
 まず、検出光の取り込みの概要について説明する。図8Aに模式的に示したように、投影面110に指などの指示物71が接触あるいは近接すると、投影面110の近傍に張られた検出用ライトプレーン110Aにおける近赤外光Laが、指示物71にあたり、四方八方に拡散反射する。これらの拡散反射された光(散乱光)の一部(近赤外光La1)が、投射レンズ16により集光された後、検出光学系10Bにおける射出瞳E1によって切り出される。
 ここで、上記のように投射レンズ16を介して検出光学系10Bに取り込まれる近赤外光La1について、詳細に説明する。図8Bに示したように、投影面110上における物体の位置を検出する場合、その検出位置に応じて、近赤外光La1の取り込み角(検出光学系10Bの射出瞳E1へ入射する近赤外光La1と、投射面110とのなす角θ)が異なる。具体的には、最も射出瞳E1に近い位置P1では、射出瞳E1を下から見上げるようなかたちとなり、取り込み角θが最大となる。次いで、位置P2,P3とこの順に、射出瞳E1から離れ、取り込み角θが徐々に小さくなる。位置P4では射出瞳E1から最も遠くなり、取り込み角θも最小となる。
 図8Cおよび下記の表1~3に、一例を挙げる。表1に投影条件を示す。但し、射出瞳E1の高さは、投影面110(スクリーン,床)から100mmとする。この投影条件により形成された投影エリアS11における位置P1~P4の位置座標(X,Y,Z)を図8Cに示す。また、表2には、位置P1~P4の位置座標(X,Y,Z)と共に、射出瞳E1までの距離を示す。また、表3には、位置P1~P4のそれぞれにおける、射出瞳E1と投影面110とのなす角(取り込み角θ)について示す。このように、射出瞳E1からの距離に応じて取り込み角θが変化し、位置P1では、最も取り込み角θが大きく(θ=33.7°)、位置P4では、最も取り込み角θが小さい(θ=10.5°)ことがわかる。また、位置P2,P3では、それぞれ取り込み角θが17.6°,12.2°となった。
Figure JPOXMLDOC01-appb-T000001
Figure JPOXMLDOC01-appb-T000002
Figure JPOXMLDOC01-appb-T000003
 上記のように、検出位置の違いにより、射出瞳E1までの距離ないし取り込み角θが変化することがわかる。これらのパラメータの値自体は、投影エリアS11のサイズ、あるいは超短焦点型のレンズ設計等に応じて異なるものであるが、上述した検出位置の違いによる取り込み角θの相対的な大小関係は変わらないことから、この関係性を利用して、指示物71の位置を特定することが可能である。
 次に、射出瞳E1に入射する近赤外光La1について、より詳細に検討する。図9に、指示物71付近の反射の様子を模式的に示す。なお、上図は位置P1における反射を、下図は位置P4における反射をそれぞれ示している。図9に示したように、検出用ライトプレーン110における近赤外光Laは、指示物71にあたり反射されるが、この際、次のような現象が生じる。即ち、本実施の形態では、射出瞳E1(投射レンズ16)からみた近赤外光La1は、実際に指示物71にあたった反射点(実照射点)Pa1,Pa2ではなく、あたかも、高さhの斜め成分だけ遠くにある投影面110上の点(仮想発光点Pb1,Pb2)から発光したように見える。つまり、実際の指示物71の位置に対応する反射点Pa1と、仮想発光点Pb1との間には差分t1が生じる。同様に、反射点Pa2と仮想発光点Pb2との間には、差分t2が生じる。また、この差分(検出位置の伸び分)は、検出位置、即ち取り込み角θの影響を受け、取り込み角θが小さいほど、より顕著なものとなる。ここでは、位置P4の取り込み角θが最小であるから、位置P4における差分t2が最大値をとる。なお、位置P1の取り込み角θは最大であるから、位置P1における差分t1は最小値をとる。
 ここで、図10に、投影光学系10Aによる投影エリアS11および拡大倍率αと、検出光学系10Bによる受光対象エリアS12および縮小倍率βとの関係を説明するための構成を示す。このように、投影面110における投影エリアS11は、ライトバルブ12の対角サイズd1を投射レンズ16によりα倍拡大した(α×d1)の大きさとなる。
 一方で、撮像素子13による受光対象エリアS12は、上述した反射点(実照射点)と仮想発光点との差分の影響を受ける。このため、(α×d1)の大きさの投影エリアS11の全域において検出を可能にするためには、上記差分を考慮して、受光対象エリアS12のサイズを投影エリアのサイズ(α×d1)よりも大きくなるように設定することが理想的である。即ち、上記条件式(1)を満たすように構成されるのがよい。なお、拡大倍率αは縮小倍率βと同様、1よりも大きなものとする。
(イメージサークルの最適化)
 一般に、「イメージサークル」とは、レンズを通過した光が結像する円形の範囲のことを示す。プロジェクタなどの投影系においては、ライトバルブの配置された位置で、ライトバルブの有効エリアが確保されるように設計される。即ち、投射レンズにおいて、ライトバルブの有効エリアから出射された光線の通過領域が確保されるように、設計がなされる。一方、カメラ等の撮像系の場合は、撮像レンズにおいて、撮像素子の有効エリアに入射する光線の通過領域が確保されるように、設計がなされる。本実施の形態では、1つの投射レンズ16により、映像投射と、検出光(近赤外光)の取り込みとを行うことから、イメージサークル(イメージサークルC1)は、最も像高の高い部分を通過する光線が確保されるように設定されることが望ましい。
 図11に、イメージサークルC1と、ライトバルブ12の有効エリアに対応する面形状(矩形状A1)、および撮像素子13の有効エリアに対応する面形状(矩形状A2)との関係について示す。なお、図12は、図11の一部を拡大したものである。また、これらの矩形状A1,A2は、詳細には、投射レンズの略焦点距離の位置における面形状に対応する。本実施の形態のように、超短焦点型の場合、イメージサークルC1は、像高が一方向(ここでは、図11のY方向)に沿って大きくシフトした(オフセットした)光線の通過領域が確保されるように設計される。ここで、映像を投影するのみのプロジェクタの場合、ライトバルブ12の矩形状A1の一部の頂点に外接するようにイメージサークル(イメージサークルC100)が設計される。具体的には、イメージサークルC100は、矩形状A1において1つの長辺を共有する一対の頂点A11,A12に接するように設計される。矩形状A1に外接するようにイメージサークルC100を設計するのは、イメージサークルの径自体が非常に大きく、投射レンズのサイズが巨大なものであることから、特性維持の面においてもコストの面においても、径を最小限に抑えたいためである。
 ところが、本実施の形態のように、投影光学系10Aと検出光学系10Bとにおいて投射レンズ16を共有する場合、反射点と仮想発光点との間に差分(伸び分)があることから、これを考慮して、すなわち撮像素子13の矩形状A2を考慮してイメージサークルC1が設計されることが望ましい。
 具体的には、イメージサークルC1は、矩形状A1に非接触で、かつ矩形状A1を包含する、ように設計される。換言すると、矩形状A1の頂点A11,A12に接する円(イメージサークルC100)の径よりも大きく、撮像素子13の矩形状A2における矩形状の1つの長辺を共有する一対の頂点A21,A22に接する円の径以下の径を有するように設計されている。撮像素子13の矩形状A2は、矩形状A1と中心位置が略同一で、かつ矩形状A1よりも大きなものである。具体的には、矩形状A2は、矩形状A1と、上記差分を考慮したカバーエリアA2aを含む。また、より望ましくは、図11に示したように、イメージサークルC1の径が、矩形状A2における頂点A21,A22に接する円の径と同等となっている。但し、イメージサークルC1の径は、頂点A21,A22に接する円の径と完全一致する場合に限定されるものではない。即ち、レンズのプロセス上の誤差や、取り付け時等におけるレンズシフトによる誤差などは許容される。また、そのような誤差を予め見込んでイメージサークルC1を若干大きめに設計しても構わない。
 更に、イメージサークルC1の詳細条件について述べる。上記差分を考慮したカバーエリアA2aの幅tは、図13に示したように、検出用ライトプレーン110Aの高さhと取り込み角θとを用いて表すことができる(t=h/tanθ)。よって、矩形状A1(投影エリアS11)の端部位置に対応する反射点Pa(仮想発光点Pb)から取り込まれる近赤外光La1を、撮像素子13において受光させるためには、イメージサークルC1の半径R1が、以下の条件式(2)を満たすことが望ましい。但し、R0をライトバルブ12の矩形状A1の頂点A11,A12に接する円の半径(イメージサークルC100の半径)とし、図10に示したように、αを投影倍率(投影像サイズとライトバルブの有効エリアサイズとの比)、hを検出用ライトプレーン110Aの投影面110からの高さとする。また、θminを検出光学系10Bへ入射する近赤外光La1と投影面110とのなす角(取り込み角)θの最小値とする。
 R1≧R0+h/α×tanθmin  ………(2)
 また、望ましくは、更に以下の条件式(3)を満たすように構成されていることが望ましい。条件式(2),(3)の両方を満足することで、イメージサークルC1が、ライトバルブ12の有効エリアに必要な光路を含み、かつライトバルブ12と同軸配置された撮像素子13に必要十分な光路を含むように、設計することが可能である。
 β×d2≧d1+2h/α×tanθmin   ………(3)
 信号処理部17は、撮像素子13による撮像信号に基づいて、例えば人の指やポインタ等の指示物(物体)71の特徴点の位置を、例えば投影面110上の投影エリアS11における座標に対応付けて検出するものである。特徴点の例としては、人の指の先端の形状、指の重心、手の重心などを用いることができる。
[作用,効果]
 投射型表示装置1では、図14に示したように、ライトバルブ12に形成された映像情報V1を投射レンズ16によって、卓上などの投影面110上に投影し、投影画像V2として拡大表示する。この一方で、投射型表示装置1は、投影面110上における物体の位置、例えば人の指やポインタ等の指示物(物体)71の特徴点の位置Pt1を、撮像素子13から得られた撮像信号D0を用いて検出する。
 ここで、本実施の形態では、投射レンズ16が、投影光学系10Aと検出光学系10Bとにおいて共有され、撮像素子13がライトバルブ12と光学的に共役の位置に配置されている。このため、投影エリアS11とほぼ同じエリアを検出エリア(検出可能エリア)とする物体検出が可能となる。また、この光学的に共役な位置関係により、投影面110上における指示物71の特徴点の位置Pt1を投射レンズ16を介して投影画像V2に重ねてモニタすることが可能となる。また例えば、信号処理部17において、指示物71の形状を画像処理し、指示物71の特徴点の位置Pt1の座標を検出することで、投影画像V2のポインティング操作が可能となる。この際、投影エリアS11内の任意の座標位置が検出エリア内の座標位置に1対1で対応するので、撮像素子13側の検出位置Pt2の座標が指示物71の特徴点の位置Pt1の座標に対応する。即ち、キャリブレーション等の煩雑な信号処理を行うことなく、投影エリアS11内の位置と、検出エリア内の位置とを対応づけて物体を検出することができる。なお、指示物71は2以上であってもよく、例えば両手の指の先端の座標を検出することなども可能である。このようにして検出された指示物71の特徴点の位置を用いることで、プロジェクタの投影画像V2にあたかもタッチパネルが組み込まれているような直観的な操作が可能となる。
 また、上記の条件式(1)を満たすように構成されていることにより、検出用ライトプレーン110Aを用いた近赤外光の検出の際に、反射点と仮想発光点との差分の影響を軽減して、投影エリアS11のほぼ全域をカバーする検出エリアを形成することができる。
 更に、図11に示したように、イメージサークルC1が、ライトバルブ12の矩形状A1を基準に設計された円の径(イメージサークルC100の径)よりも大きい(矩形状A1に非接触で、かつ矩形状A1を包含する)ことが望ましい。また、イメージサークルC1は、撮像素子13の矩形状A2を包含することがより望ましい。仮に図15Aに示したように、ライトバルブ12の矩形状A1を基準に設計されたイメージサークルC100では、図15Bに示したように、受光対象となる撮像素子13の矩形状A2への入射光線を一部カバーできない領域(図中の斜線部分120)が生じる。即ち、投影エリアS11の一部において物体検出ができないことがある。これに対し、本実施の形態のようなイメージサークルC1の設計により、投影エリアS11の角部などの局所的な領域においても物体検出が可能となる。
 以上のように、本実施の形態によれば、撮像素子13がライトバルブ12と光学的に共役な位置に配置され、この撮像素子13に、投影面110の近傍の面に沿って照射された近赤外光に基づく光が、投射レンズ16と偏光分離素子15とを介して入射されることで、煩雑な信号処理を行うことなく、物体検出が可能となる。また、条件式(1)を満たすように構成されていることにより、投影エリアS11のほぼ全域において物体検出が可能となる。よって、簡易な構成で物体検出を実現すると共に、投影エリアの全域において物体を検出可能となる。
 本開示は、上記実施の形態の説明に限定されず種々の変形実施が可能である。例えば、上記実施の形態では、ライトバルブ12と撮像素子13として、略同じアスペクト比を有するものを例に挙げたが、これらのライトバルブ12と撮像素子13とは、必ずしもアスペクト比が同じでなくともよい。即ち、ライトバルブ12と撮像素子13との各対角サイズが、上述した所定の条件式を満たすように構成されていればよく、有効エリアの面形状が異なるものであっても構わない。
 また、上記実施の形態では、本開示のライトバルブとして、反射型液晶素子を用いたが、これに限らず、他のライトバルブが用いられて構わない。例えば、ライトバルブとして、デジタルミラーデバイス(DMD)が用いられてもよい。この場合、ライトバルブが光の偏光特性を利用しないミラータイプとなるため、通常は偏光光学系を用いないが、上記実施の形態のように光路中に偏光ビームスプリッタなどの偏光分離素子が配された光学系に配置しても差し支えなく、DMDを用いた映像表示を実現することが可能となる。
 更に、上記実施の形態では、本開示の投射型表示装置の一例として、いわゆる超短焦点型のものを例示したが、必ずしもこれに限定される訳ではない。投影光学系と検出光学系とが投射レンズを共有し、撮像素子がライトバルブと光学的に共役の位置に配置された構成を有するものであればよい。このような構成を有するものであれば、検出光の物体表面での反射光において、反射点と仮想発光点との間に差分が生じることから、この差分を考慮した上記光学設計は有効である。但し、この効果は、超短焦点型のものに対して特に効果的である。なお、上記実施の形態等において説明した効果は一例であり、他の効果であってもよいし、更に他の効果を含んでいてもよい。
 例えば、本開示は以下のような構成を取ることができる。
(1)
 照明部と、投射レンズと、前記照明部から供給された照明光を映像信号に基づいて変調して前記投射レンズへ向けて出射するライトバルブとを有する投影光学系と、
 前記ライトバルブと前記投射レンズとの間に配置され、入射光を第1および第2の偏光成分に分離すると共に、それぞれを互いに異なる方向に出射する偏光分離素子と、
 前記ライトバルブと光学的に共役な位置に配置された撮像素子を有する検出光学系と
 を備え、
 前記撮像素子には、前記投影面の近傍の面に沿って照射された非可視光に基づく光が、前記投射レンズと前記偏光分離素子とを介して入射され、かつ
 以下の条件式を満たすように構成されている
 投射型表示装置。
 d1<β×d2   ………(1)
 但し、
 d1:ライトバルブの対角サイズ
 d2:撮像素子の対角サイズ
 β:検出光学系の光学倍率(縮小光学系の場合はβ>1、拡大光学系の場合はβ<1、等倍光学系の場合はβ=1) とする。
(2)
 前記投射レンズの略焦点距離の位置において、
 前記ライトバルブの有効エリアに対応する面形状は、第1の矩形状であり、
 前記投射レンズのイメージサークルは、前記第1の矩形状に非接触で、かつ前記第1の矩形状を包含する
 上記(1)に記載の投射型表示装置。
(3)
 前記投射レンズの略焦点距離の位置またはこれと光学的に共役の関係となる位置において、
 前記撮像素子の有効エリアに対応する面形状は、前記第1の矩形状と中心位置が略同一で、かつ前記第1の矩形状よりも大きな第2の矩形状であり、
 前記投射レンズのイメージサークルは、前記第2の矩形状を包含する
 上記(2)に記載の投射型表示装置。
(4)
 前記撮像素子は、前記非可視光のうち物体によって反射された光の一部を受光し、
 前記イメージサークルの径が以下の条件式を満たすように構成されている
 上記(3)に記載の投射型表示装置。
 R1≧R0+h/α×tanθmin  ………(2)
 但し、
 R1:投射レンズのイメージサークルの半径
 R0:ライトバルブの有効エリアの一対の頂点に接する円の半径
 h:非可視光が照射される面の投影面からの高さ
 α:投影倍率
 θmin:検出光学系へ入射する反射光の一部と投影面とのなす角の最小値
 とする。
(5)
 更に以下の条件式を満たすように構成されている
 上記(4)に記載の投射型表示装置。
 β×d2≧d1+2h/α×tanθmin  ………(3)
(6)
 前記検出光学系は、前記偏光分離素子と前記撮像素子との間に縮小光学系を有し、
 前記縮小光学系は、1または2以上のリレーレンズ群を含む
 上記(1)~(5)のいずれかに記載の投射型表示装置。
(7)
 前記検出光学系は、前記偏光分離素子と前記撮像素子との間に、可視光成分を低減させる可視光カットフィルタを含む
 上記(1)~(6)のいずれかに記載の投射型表示装置。
(8)
 前記検出光学系は、前記偏光分離素子と前記撮像素子との間に、前記第1および第2の偏光成分のうちの一方を選択的に除去する偏光子を含む
 上記(1)~(7)のいずれかに記載の投射型表示装置。
(9)
 前記撮像素子から得られた撮像信号に基づいて、前記投影面上における物体の位置を検出する信号処理部を更に備えた
 上記(1)~(8)のいずれかに記載の投射型表示装置。
(10)
 前記投射レンズは短焦点レンズである
 上記(1)~(9)のいずれかに記載の投射型表示装置。
(11)
 前記非可視光を出射する光源部が外筐に設けられている
 上記(10)に記載の投射型表示装置。
(12)
 前記非可視光は、近赤外光である
 上記(1)~(11)のいずれかに記載の投射型表示装置。
(13)
 前記偏光分離素子は、偏光ビームスプリッタである
 上記(1)~(12)のいずれかに記載の投射型表示装置。
(14)
 前記ライトバルブは、反射型液晶表示素子である
 上記(13)に記載の投射型表示装置。
(15)
 前記偏光分離素子は、それぞれが光入射面または光出射面となる第1ないし第4の面を有すると共に、前記第1の面から入射した光のうちの前記第1の偏光成分を前記第2の面から出射し、前記第1の面から入射した光のうちの前記第2の偏光成分を前記第3の面から出射し、前記第2の面から入射した光のうちの前記第2の偏光成分を前記第4の面から出射し、かつ、前記第4の面から入射した光のうちの前記第1の偏光成分を前記第3の面から出射する、ように構成されている
 上記(14)に記載の投射型表示装置。
(16)
 前記投影光学系は、
 前記照明部が、前記照明光を前記偏光分離素子の前記第1の面に向けて出射し、
 前記ライトバルブが、前記照明光のうち、前記偏光分離素子の前記第2の面から出射した前記第1の偏光成分を変調し、その変調光を、前記偏光分離素子の前記第2の面に向けて出射し、
 前記投射レンズが、前記変調光のうち、前記偏光分離素子の前記第4の面から出射した光を、前記投影面に向けて投射する、ように構成されている
 上記(15)に記載の投射型表示装置。
(17)
 前記検出光学系は、
 前記縮小光学系に、前記投射レンズと前記偏光分離素子の前記第4の面および前記第3の面とを介して物体検出用の光が入射され、
 前記撮像素子に、前記縮小光学系から出射された光が入射する、ように構成されている
 上記(16)に記載の投射型表示装置。
 本出願は、日本国特許庁において2014年7月29日に出願された日本特許出願番号第2014-153659号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
 当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。

Claims (17)

  1.  照明部と、投射レンズと、前記照明部から供給された照明光を映像信号に基づいて変調して前記投射レンズへ向けて出射するライトバルブとを有する投影光学系と、
     前記ライトバルブと前記投射レンズとの間に配置され、入射光を第1および第2の偏光成分に分離すると共に、それぞれを互いに異なる方向に出射する偏光分離素子と、
     前記ライトバルブと光学的に共役な位置に配置された撮像素子を有する検出光学系と
     を備え、
     前記撮像素子には、前記投影面の近傍の面に沿って照射された非可視光に基づく光が、前記投射レンズと前記偏光分離素子とを介して入射され、かつ
     以下の条件式を満たすように構成されている
     投射型表示装置。
     d1<β×d2   ………(1)
     但し、
     d1:ライトバルブの対角サイズ
     d2:撮像素子の対角サイズ
     β:検出光学系の光学倍率(縮小光学系の場合はβ>1、拡大光学系の場合はβ<1、等倍光学系の場合はβ=1)
     とする。
  2.  前記投射レンズの略焦点距離の位置において、
     前記ライトバルブの有効エリアに対応する面形状は、第1の矩形状であり、
     前記投射レンズのイメージサークルは、前記第1の矩形状に非接触で、かつ前記第1の矩形状を包含する
     請求項1に記載の投射型表示装置。
  3.  前記投射レンズの略焦点距離の位置またはこれと光学的に共役の関係となる位置において、
     前記撮像素子の有効エリアに対応する面形状は、前記第1の矩形状と中心位置が略同一で、かつ前記第1の矩形状よりも大きな第2の矩形状であり、
     前記投射レンズのイメージサークルは、前記第2の矩形状を包含する
     請求項2に記載の投射型表示装置。
  4.  前記撮像素子は、前記非可視光のうち物体によって反射された光の一部を受光し、
     前記イメージサークルの径が以下の条件式を満たすように構成されている
     請求項3に記載の投射型表示装置。
     R1≧R0+h/α×tanθmin  ………(2)
     但し、
     R1:投射レンズのイメージサークルの半径
     R0:ライトバルブの有効エリアの一対の頂点に接する円の半径
     h:非可視光が照射される面の投影面からの高さ
     α:投影倍率
     θmin:検出光学系へ入射する反射光の一部と投影面とのなす角の最小値
     とする。
  5.  更に以下の条件式を満たすように構成されている
     請求項4に記載の投射型表示装置。
     β×d2≧d1+2h/α×tanθmin  ………(3)
  6.  前記検出光学系は、前記偏光分離素子と前記撮像素子との間に縮小光学系を有し、
     前記縮小光学系は、1または2以上のリレーレンズ群を含む
     請求項1に記載の投射型表示装置。
  7.  前記検出光学系は、前記偏光分離素子と前記撮像素子との間に、可視光成分を低減させる可視光カットフィルタを含む
     請求項1に記載の投射型表示装置。
  8.  前記検出光学系は、前記偏光分離素子と前記撮像素子との間に、前記第1および第2の偏光成分のうちの一方を選択的に除去する偏光子を含む
     請求項1に記載の投射型表示装置。
  9.  前記撮像素子から得られた撮像信号に基づいて、前記投影面上における物体の位置を検出する信号処理部を更に備えた
     請求項1に記載の投射型表示装置。
  10.  前記投射レンズは短焦点レンズである
     請求項1に記載の投射型表示装置。
  11.  前記非可視光を出射する光源部が外筐に設けられている
     請求項10に記載の投射型表示装置。
  12.  前記非可視光は、近赤外光である
     請求項1に記載の投射型表示装置。
  13.  前記偏光分離素子は、偏光ビームスプリッタである
     請求項1に記載の投射型表示装置。
  14.  前記ライトバルブは、反射型液晶表示素子である
     請求項13に記載の投射型表示装置。
  15.  前記偏光分離素子は、それぞれが光入射面または光出射面となる第1ないし第4の面を有すると共に、前記第1の面から入射した光のうちの前記第1の偏光成分を前記第2の面から出射し、前記第1の面から入射した光のうちの前記第2の偏光成分を前記第3の面から出射し、前記第2の面から入射した光のうちの前記第2の偏光成分を前記第4の面から出射し、かつ、前記第4の面から入射した光のうちの前記第1の偏光成分を前記第3の面から出射する、ように構成されている
     請求項14に記載の投射型表示装置。
  16.  前記投影光学系は、
     前記照明部が、前記照明光を前記偏光分離素子の前記第1の面に向けて出射し、
     前記ライトバルブが、前記照明光のうち、前記偏光分離素子の前記第2の面から出射した前記第1の偏光成分を変調し、その変調光を、前記偏光分離素子の前記第2の面に向けて出射し、
     前記投射レンズが、前記変調光のうち、前記偏光分離素子の前記第4の面から出射した光を、前記投影面に向けて投射する、ように構成されている
     請求項15に記載の投射型表示装置。
  17.  前記検出光学系は、
     前記縮小光学系に、前記投射レンズと前記偏光分離素子の前記第4の面および前記第3の面とを介して物体検出用の光が入射され、
     前記撮像素子に、前記縮小光学系から出射された光が入射する、ように構成されている
     請求項16に記載の投射型表示装置。
PCT/JP2015/066992 2014-07-29 2015-06-12 投射型表示装置 WO2016017296A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
KR1020177001525A KR102380693B1 (ko) 2014-07-29 2015-06-12 투사형 표시 장치
JP2016538204A JP6597615B2 (ja) 2014-07-29 2015-06-12 投射型表示装置
CN201580039638.9A CN106537248B (zh) 2014-07-29 2015-06-12 投影型显示装置
EP15826795.5A EP3176636B1 (en) 2014-07-29 2015-06-12 Projection-type display device
US15/327,710 US10244217B2 (en) 2014-07-29 2015-06-12 Projection display unit
CN201811569650.2A CN110058476B (zh) 2014-07-29 2015-06-12 投影型显示装置
US16/210,456 US10602108B2 (en) 2014-07-29 2018-12-05 Projection display unit

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-153659 2014-07-29
JP2014153659 2014-07-29

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/327,710 A-371-Of-International US10244217B2 (en) 2014-07-29 2015-06-12 Projection display unit
US16/210,456 Continuation US10602108B2 (en) 2014-07-29 2018-12-05 Projection display unit

Publications (1)

Publication Number Publication Date
WO2016017296A1 true WO2016017296A1 (ja) 2016-02-04

Family

ID=55217201

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/066992 WO2016017296A1 (ja) 2014-07-29 2015-06-12 投射型表示装置

Country Status (6)

Country Link
US (2) US10244217B2 (ja)
EP (1) EP3176636B1 (ja)
JP (1) JP6597615B2 (ja)
KR (1) KR102380693B1 (ja)
CN (2) CN110058476B (ja)
WO (1) WO2016017296A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10728508B2 (en) 2017-03-24 2020-07-28 Panasonic Intellectual Property Management Co., Ltd. Projection system and projection method
EP3208699B1 (en) * 2016-02-19 2020-09-23 Sony Corporation Control device, control method, and program
CN111971605A (zh) * 2018-04-09 2020-11-20 索尼公司 光学系统和投影仪

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016017296A1 (ja) * 2014-07-29 2016-02-04 ソニー株式会社 投射型表示装置
US10013116B2 (en) * 2014-08-27 2018-07-03 Sony Corporation Projection display unit
JP6372266B2 (ja) 2014-09-09 2018-08-15 ソニー株式会社 投射型表示装置および機能制御方法
WO2016042637A1 (ja) * 2014-09-18 2016-03-24 Necディスプレイソリューションズ株式会社 光源装置、電子黒板システムおよび光源装置の制御方法
US11336827B2 (en) * 2017-11-09 2022-05-17 Canon Kabushiki Kaisha Imaging apparatus and interchangeable lens apparatus that utilize image circle information of an imaging optical system in the interchangeable lens apparatus
JP7052359B2 (ja) * 2018-01-12 2022-04-12 セイコーエプソン株式会社 光射出装置及び画像表示システム
US10897602B2 (en) * 2018-07-27 2021-01-19 Fujifilm Corporation Projection display device for performing projection and imaging comprising optical image emitting light valve and imaging optical system
JP2020016857A (ja) * 2018-07-27 2020-01-30 富士フイルム株式会社 投写型表示装置
KR102693424B1 (ko) * 2018-08-07 2024-08-12 삼성전자주식회사 구조광 프로젝터 및 이를 포함하는 전자 장치
JP7062606B2 (ja) * 2019-03-08 2022-05-06 株式会社東芝 マルチビュー光学系、光学装置、撮像装置、及び、移動体

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003044839A (ja) * 2001-07-26 2003-02-14 Nitto Kogaku Kk 画像入出力装置
JP2007052218A (ja) * 2005-08-18 2007-03-01 Nikon Corp 撮像機能付きプロジェクタ
JP2008257125A (ja) * 2007-04-09 2008-10-23 Seiko Epson Corp プロジェクションシステム、形状測定装置、および光学特性評価装置
WO2014141718A1 (ja) * 2013-03-14 2014-09-18 日東光学株式会社 光学システムおよび光学システムを有する装置
JP2015064550A (ja) * 2013-08-26 2015-04-09 ソニー株式会社 投射型表示装置

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0918664A (ja) * 1995-06-30 1997-01-17 Canon Inc 画像入力装置
JP3278350B2 (ja) * 1996-05-15 2002-04-30 シャープ株式会社 投影表示装置
JP3832132B2 (ja) 1999-03-11 2006-10-11 セイコーエプソン株式会社 表示システム、及びプレゼンテーションシステム
CN1281209A (zh) * 1999-07-20 2001-01-24 浙江大学 基于大屏幕显示的“光电虚拟黑板”系统
US20030226968A1 (en) 2002-06-10 2003-12-11 Steve Montellese Apparatus and method for inputting data
JP4175070B2 (ja) 2002-10-03 2008-11-05 セイコーエプソン株式会社 画像入出力装置、マンマシンインターフェイスシステムおよびプログラム
US6840627B2 (en) 2003-01-21 2005-01-11 Hewlett-Packard Development Company, L.P. Interactive display device
JP2006065558A (ja) 2004-08-26 2006-03-09 Canon Inc 入力表示装置
CN2802536Y (zh) 2005-06-27 2006-08-02 广东威创日新电子有限公司 一种用于交互式投影显示的光学装置
TWI292052B (en) * 2006-05-09 2008-01-01 Young Optics Inc Optical projection and image detection apparatus
JP2008203604A (ja) * 2007-02-21 2008-09-04 Hitachi Ltd 投射型映像表示装置
JP2008251725A (ja) 2007-03-29 2008-10-16 Tdk Corp パターン形成方法、トレンチ型コンデンサの製造方法及び電子素子の製造方法
WO2009010977A1 (en) 2007-07-17 2009-01-22 Explay Ltd Optical projection method and system
JP2009047819A (ja) * 2007-08-17 2009-03-05 Sony Corp 偏光ビームスプリッタ、投写型光学装置、投写型表示装置
JP5277703B2 (ja) * 2008-04-21 2013-08-28 株式会社リコー 電子機器
US7738190B2 (en) * 2008-09-27 2010-06-15 Meistream International Optical Ltd. Optical engine and wide angle projection lens module thereof
JP5199016B2 (ja) 2008-10-10 2013-05-15 富士フイルム株式会社 単板投写型表示装置
US8144269B2 (en) 2009-01-08 2012-03-27 Micron Technology, Inc. Reflective LCOS displays utilizing novel polarizing beam splitters
CN101943843B (zh) * 2009-05-22 2012-03-07 上海丽恒光微电子科技有限公司 集成微型显示投影及成像系统
JP5428600B2 (ja) * 2009-07-09 2014-02-26 セイコーエプソン株式会社 プロジェクター、画像投写システムおよび画像投写方法
JP5471266B2 (ja) 2009-10-07 2014-04-16 セイコーエプソン株式会社 位置検出機能付き投射型表示装置
CN101776836B (zh) * 2009-12-28 2013-08-07 武汉全真光电科技有限公司 投影显示系统及桌面计算机
CN101762955A (zh) * 2009-12-28 2010-06-30 武汉全真光电科技有限公司 Lcos投影显示系统
US9110495B2 (en) 2010-02-03 2015-08-18 Microsoft Technology Licensing, Llc Combined surface user interface
KR101002072B1 (ko) * 2010-02-08 2010-12-17 전자부품연구원 펄스 구동 방식의 투영 영상 터치 장치
JP2011197503A (ja) * 2010-03-23 2011-10-06 Sanyo Electric Co Ltd 投写型映像表示装置
JP2011209531A (ja) 2010-03-30 2011-10-20 Seiko Epson Corp プロジェクター
KR20110121125A (ko) 2010-04-30 2011-11-07 삼성전자주식회사 인터랙티브 디스플레이 장치 및 이의 동작 방법
US8542218B2 (en) 2010-08-19 2013-09-24 Hyundai Motor Company Electronic switch apparatus for vehicle
CN102419659A (zh) * 2010-09-27 2012-04-18 南京芒冠光电科技股份有限公司 一种交互式投影机系统
JP5710929B2 (ja) * 2010-10-08 2015-04-30 船井電機株式会社 プロジェクタ
US20140218300A1 (en) 2011-03-04 2014-08-07 Nikon Corporation Projection device
CN102681312B (zh) * 2011-03-16 2015-06-24 宏瞻科技股份有限公司 激光投影系统的人眼安全保护系统
CN102156593B (zh) 2011-04-13 2013-01-16 中国科学院深圳先进技术研究院 光学触摸屏及光学触摸屏的触摸定位方法
JP2012256000A (ja) 2011-06-10 2012-12-27 Sanyo Electric Co Ltd 投写型映像表示装置
JP2013120586A (ja) * 2011-12-09 2013-06-17 Nikon Corp プロジェクタ
JP2013168922A (ja) 2012-01-18 2013-08-29 Sony Corp 投影型画像表示装置及び画像投影方法、並びにコンピューター・プログラム
US9105211B2 (en) * 2012-03-13 2015-08-11 Samsung Electronics Co., Ltd Portable projector and image projecting method thereof
JP2013228607A (ja) 2012-04-26 2013-11-07 Sony Corp 表示装置および照明装置
JP5895703B2 (ja) 2012-05-22 2016-03-30 ソニー株式会社 画像処理装置及び画像処理方法、並びにコンピューター・プログラム
JP2014081510A (ja) 2012-10-17 2014-05-08 Sony Corp 表示装置
JP2014092715A (ja) 2012-11-05 2014-05-19 Toshiba Corp 電子機器、情報処理方法及びプログラム
US10114512B2 (en) 2013-09-30 2018-10-30 Hewlett-Packard Development Company, L.P. Projection system manager
WO2016017296A1 (ja) * 2014-07-29 2016-02-04 ソニー株式会社 投射型表示装置
US10013116B2 (en) * 2014-08-27 2018-07-03 Sony Corporation Projection display unit
JP6372266B2 (ja) * 2014-09-09 2018-08-15 ソニー株式会社 投射型表示装置および機能制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003044839A (ja) * 2001-07-26 2003-02-14 Nitto Kogaku Kk 画像入出力装置
JP2007052218A (ja) * 2005-08-18 2007-03-01 Nikon Corp 撮像機能付きプロジェクタ
JP2008257125A (ja) * 2007-04-09 2008-10-23 Seiko Epson Corp プロジェクションシステム、形状測定装置、および光学特性評価装置
WO2014141718A1 (ja) * 2013-03-14 2014-09-18 日東光学株式会社 光学システムおよび光学システムを有する装置
JP2015064550A (ja) * 2013-08-26 2015-04-09 ソニー株式会社 投射型表示装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3176636A4 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3208699B1 (en) * 2016-02-19 2020-09-23 Sony Corporation Control device, control method, and program
US10955960B2 (en) 2016-02-19 2021-03-23 Sony Corporation Control device, control method, and program
US10728508B2 (en) 2017-03-24 2020-07-28 Panasonic Intellectual Property Management Co., Ltd. Projection system and projection method
CN111971605A (zh) * 2018-04-09 2020-11-20 索尼公司 光学系统和投影仪
CN111971605B (zh) * 2018-04-09 2023-09-12 索尼公司 光学系统和投影仪

Also Published As

Publication number Publication date
EP3176636A1 (en) 2017-06-07
US20190174105A1 (en) 2019-06-06
CN110058476B (zh) 2022-05-27
CN106537248B (zh) 2019-01-15
JP6597615B2 (ja) 2019-10-30
KR20170039130A (ko) 2017-04-10
EP3176636B1 (en) 2020-01-01
CN106537248A (zh) 2017-03-22
US10244217B2 (en) 2019-03-26
KR102380693B1 (ko) 2022-03-31
EP3176636A4 (en) 2018-01-03
CN110058476A (zh) 2019-07-26
US10602108B2 (en) 2020-03-24
JPWO2016017296A1 (ja) 2017-06-01
US20170208305A1 (en) 2017-07-20

Similar Documents

Publication Publication Date Title
JP6597615B2 (ja) 投射型表示装置
JP6372266B2 (ja) 投射型表示装置および機能制御方法
US9696854B2 (en) Projection display
JP2016057426A5 (ja)
JP6597625B2 (ja) 投射型表示装置
JP6696425B2 (ja) 投射型表示装置
JP6669068B2 (ja) 投射型表示装置
JP2008158182A (ja) 画像投影装置および画像投影システム
JP6690551B2 (ja) 投射型表示装置
TWI446088B (zh) 具有鏡頭轉換功能的裝置
JP6211261B2 (ja) 測距装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15826795

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016538204

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2015826795

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20177001525

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15327710

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE