WO2017122427A1 - 表示システムおよび電子機器 - Google Patents
表示システムおよび電子機器 Download PDFInfo
- Publication number
- WO2017122427A1 WO2017122427A1 PCT/JP2016/083912 JP2016083912W WO2017122427A1 WO 2017122427 A1 WO2017122427 A1 WO 2017122427A1 JP 2016083912 W JP2016083912 W JP 2016083912W WO 2017122427 A1 WO2017122427 A1 WO 2017122427A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- light
- image
- observer
- pupil
- microlens array
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/66—Transforming electric information into light information
Definitions
- the present disclosure relates to a display system and an electronic apparatus including the display system.
- the display system includes a display unit that emits image light from the light emission surface.
- the display unit emits a plurality of light beams having a diameter smaller than the pupil diameter as image light.
- the display unit is further configured such that when a microlens array is provided at a position facing the light emitting surface, a light beam formed by superimposing a plurality of light beams by the microlens array is incident on an observer's pupil. Is adjusted based on the displacement of the observer included in the input image.
- the incident position of the light beam formed by the microlens array on the observer's pupil is included in the input image. It is adjusted based on the displacement. Thereby, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the display unit may include the following components (A1) to (A4).
- Pinhole mask provided between the light exit surface and the microlens array (A3) The position of the image visually recognized by the observer
- a signal processing unit (A4) that performs correction that is adjusted on the video signal based on the displacement of the observer included in the input image has a light exit surface, and generates video light based on the corrected video signal.
- Display panel When the display unit has the components (A1) to (A4) and the microlens array and the pinhole mask are not displaced by the observer's displacement, the image light is transmitted through the pinhole mask.
- each ray generated by the method does not follow the observer's displacement and remains constant. Therefore, when the observer moves, the incident position on the observer's pupil of the light beam formed by superimposing the light beams can be displaced in the direction opposite to the observer's displacement direction.
- the display unit includes the components (A1) to (A4)
- the position of the image visually recognized by the observer is adjusted based on the displacement of the observer included in the input image. Correction is performed on the video signal. Thereby, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the display unit may include the following components (B1) and (B2).
- (B1) First correction is performed on the video signal to adjust the position of the image visually recognized by the observer based on the displacement of the position of the observer included in the input image, and the first correction is performed to superimpose the pinhole image.
- the signal processor (B2) has a light exit surface that performs the second correction on the video signal before or after the first correction, and the video light is based on the video signal after the first correction and the second correction.
- each generated ray remains constant without following the observer's displacement. Therefore, when the observer moves, the incident position on the observer's pupil of the light beam formed by superimposing the light beams can be displaced in the direction opposite to the observer's displacement direction.
- the display unit includes the components (B1) and (B2)
- the position of the image visually recognized by the observer is adjusted based on the displacement of the observer included in the input image. Correction is performed on the video signal. Thereby, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the display unit may include the following components (C1) to (C4).
- C1 A microlens array (C2) provided at a position facing the light emission surface and a pinhole mask (C3) light emission surface provided between the light emission surface and the microlens array, and a video signal A display panel (C4) that generates image light based on the driving unit that displaces the microlens array or the pinhole mask based on the displacement of the observer included in the input image.
- the display unit includes (C1) to (C4) In the case of having a component, the microlens array or the pinhole mask is displaced based on the displacement of the observer included in the image obtained by the imaging unit.
- the optical path of each light beam generated when the image light passes through the pinhole mask is displaced based on the displacement of the observer included in the input image. Therefore, when the observer moves, for example, the light beam formed by superimposing the light beams is displaced following the observer's displacement. As a result, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the display system may further include the following components (D1) to (D3).
- D1 A microlens array provided at a position facing the light emission surface
- D2 A light transmission type light modulation panel provided between the light emission surface and the microlens array and capable of generating an arbitrary light shielding region
- D3 A drive unit that causes the light modulation panel to generate a pinhole mask-shaped light-blocking region and to displace the position of each pinhole in the light-blocking region based on the displacement of the observer included in the input image.
- each pinhole in the pinhole mask-shaped light shielding region is displaced based on the displacement of the observer included in the input image.
- each light beam generated when the image light passes through each pinhole is displaced based on the displacement of the observer included in the image obtained by the imaging unit. Therefore, when the observer moves, for example, the light beam formed by superimposing the light beams is displaced following the observer's displacement. As a result, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the electronic apparatus includes a display system.
- the display system includes a display unit that emits video light from the light emission surface.
- the display unit emits a plurality of light beams having a diameter smaller than the pupil diameter as image light.
- the display unit is further configured such that when a microlens array is provided at a position facing the light emitting surface, a light beam formed by superimposing a plurality of light beams by the microlens array is incident on an observer's pupil. Is adjusted based on the displacement of the observer included in the input image.
- the incident position of the light beam formed by the microlens array on the observer's pupil is included in the input image. It is adjusted based on the displacement. Thereby, the position of the image recognized by the observer can be made less dependent on the incident position of the light beam formed by the microlens array on the observer's pupil.
- the incident position of the light beam formed by the microlens array on the observer's pupil is based on the displacement of the observer included in the input image.
- Image blurring can be reduced.
- the effect of this indication is not necessarily limited to the effect described here, Any effect described in this specification may be sufficient.
- FIG. 2A It is a figure showing the example of a perspective composition of the display system concerning a 1st embodiment of this indication. It is a figure showing the example of schematic structure of the terminal device of FIG. It is a figure showing the internal example of the memory
- FIG. 1 illustrates a perspective configuration example of the display system 1.
- the display system 1 includes a terminal device 10 and an optical module 20.
- the terminal device 10 has a light emission surface 10A that emits image light, and has one or a plurality of imaging elements 12A adjacent to the light emission surface 10A.
- FIG. 1 illustrates a state where two image pickup devices 12 ⁇ / b> A are provided in the terminal device 10.
- the optical module 20 includes a pinhole mask 21 and a microlens array 22. The pinhole mask 21 and the microlens array 22 are arranged to face each other.
- the microlens array 22 is provided at a position facing the light exit surface 10A.
- the microlens array 22 has a plurality of microlenses 22A arranged in a matrix.
- the pinhole mask 21 is provided between the light emitting surface 10 ⁇ / b> A and the microlens array 22.
- the pinhole mask 21 has a plurality of pinholes 21A arranged in a matrix.
- FIG. 2A shows a schematic configuration example of the terminal device 10.
- the terminal device 10 includes a display panel 11, an imaging unit 12, a signal processing unit 13, and a storage unit 14.
- the display panel 11 has a light exit surface 10A.
- the display panel 11 generates video light based on a predetermined video signal, and emits the generated video light from the light exit surface 10A.
- the display panel 11 has a touch function, and accepts desired data input by a touch operation on the light emitting surface by an observer.
- the touch function includes, for example, a touch panel such as a resistive film method, a capacitance method, an electromagnetic induction method, an ultrasonic surface acoustic wave method, an infrared scanning method, and a TFT liquid crystal cell built-in method.
- the display panel 11 generates video light based on a corrected video signal to be described later. Specifically, the display panel 11 generates video light based on the signal voltage corresponding to the corrected video signal generated by the signal processing unit 13.
- a plurality of display pixels 11A are arranged in a matrix at positions facing the light exit surface 10A.
- Each display pixel 11A includes a plurality of types of sub-pixels. For example, each display pixel 11A includes one type of sub-pixel for each of the three primary colors.
- the imaging unit 12 images an observation surface 200 (described later) that is a predetermined distance away from the light exit surface 10A.
- the imaging unit 12 has one or a plurality of imaging elements 12A.
- the one or more imaging elements 12A capture the observation plane 200 and output an image obtained by the imaging to the signal processing unit 13.
- the signal processing unit 13 adjusts the position of the image visually recognized by the observer based on the displacement of the observer (specifically, the observer's pupil 120 (described later)) included in the image obtained by the imaging unit 12. Correction is performed on the video signal.
- the signal processing unit 13 generates a signal voltage or the like corresponding to the video signal obtained by the correction and outputs it to the display panel 11.
- FIG. 2B shows an example of the internal configuration of the storage unit 14.
- an application program 14A for example, an application program 14A, a sample image 14B with a gauge function, and calibration data 14C are stored.
- the application program 14A causes the signal processing unit 13 to execute calibration and adjustment described later, and is downloaded via a communication network, for example.
- the sample image 14B is an image for performing position adjustment and focus adjustment using the touch function of the display panel 11.
- the sample image 14B includes, for example, a gauge image that is touched when adjusting the position where the observer can easily see, and an image (recognition image) recognized when adjusting the position where the observer can easily see.
- the calibration data 14 ⁇ / b> C is stored in the storage unit 14 when the calibration in the application program 14 ⁇ / b> A is executed by the signal processing unit 13.
- the storage unit 14 is configured by, for example, a non-volatile memory, and is configured by, for example, an EEPROM (Electrically Erasable Programmable Read-Only ⁇ Memory), a flash memory, a resistance change type memory, or the like.
- FIG. 3 shows a cross-sectional configuration of the optical module 20.
- the optical module 20 includes the pinhole mask 21 and the microlens array 22.
- the pinhole mask 21 and the microlens array 22 are arranged in the order of the pinhole mask 21 and the microlens array 22 from the bonding surface (specifically, the light emitting surface 10A) side. That is, the surface of the pinhole mask 21 is a light incident surface of the optical module 20, and the surface of the microlens array 22 is a light emitting surface of the optical module 20.
- the pinhole mask 21 and the microlens array 22 are integrally formed.
- the pinhole mask 21 is bonded directly or indirectly to the light emitting surface 10A.
- the plurality of microlenses 22 ⁇ / b> A are disposed on the light exit surface of the optical module 20.
- the microlens 22A collects the light that has passed through the pinhole 21A.
- the micro lens 22A has, for example, a convex shape that protrudes toward the light emitting side.
- the optical module 20 may further include a spacer between the pinhole mask 21 and the microlens array 22, for example.
- the spacer is for securing a gap between the pinhole mask 21 and the microlens array 22 and is composed of, for example, a light transmissive resin layer.
- the spacer may or may not have a function of actively scattering or diffusing light, such as a scattering plate or a diffusion plate.
- the spacer may be an air layer. When the spacer is an air layer, the optical module 20 may have a base material that supports the pinhole mask 21 or a base material that supports the microlens array 22.
- the optical module 20 may further include a resin layer in contact with the surface of the microlens array 22, for example.
- the resin layer is made of a resin material having a refractive index different from that of the microlens array 22.
- the light incident surface (the surface in contact with the microlens array 22) has a surface shape that follows the surface shape of the microlens array 22, for example.
- the light emission surface (surface opposite to the microlens array 22) is, for example, a flat surface.
- the resin layer may or may not have a function of actively scattering or diffusing light, such as a scattering plate or a diffusion plate.
- each micro lens 22 ⁇ / b> A may have, for example, a convex shape that protrudes toward the light incident side of the optical module 20.
- the spacer is made of, for example, a resin material having a refractive index different from the refractive index of the microlens 22A or air.
- the optical module 20 may include a base material that supports the pinhole mask 21 or a base material that supports the microlens array 22.
- the optical module 20 may have a charged layer in contact with the pinhole mask 21, for example. The charged layer is for attaching the optical module 20 to the light emitting surface 10A by the action of static electricity.
- the pinhole 21A is provided in a sheet-like member having light shielding properties. Accordingly, the pinhole mask 21 transmits the light emitted from the light emitting surface 10A through each pinhole 21A.
- the pinhole mask 21 is formed, for example, by applying a light shielding material containing black carbon or the like to the microlens array 22 or the light incident surface of the spacer, and then forming a plurality of openings in the applied light shielding material. .
- the pinhole mask 21 may be formed, for example, by forming a chromium thin film on the light incident surface of the microlens array 22 or the spacer and then forming an opening in the chromium thin film by etching. .
- FIG. 4A shows a planar configuration example of the pinhole mask 21.
- the pinhole mask 21 has a plurality of pinholes 21A arranged in a matrix.
- the plurality of pinholes 21A are arranged side by side in a direction parallel to the line segment La, and are arranged side by side in a direction parallel to the line segment Lb orthogonal to or substantially orthogonal to the line segment La.
- the plurality of pinholes 21A are arranged side by side at an arrangement pitch ⁇ La in a direction parallel to the line segment La.
- the plurality of pinholes 21A are arranged side by side at an arrangement pitch ⁇ Lb in a direction parallel to the line segment Lb.
- the arrangement pitch ⁇ La and the arrangement pitch ⁇ Lb are equal to each other. Note that the arrangement pitch ⁇ La and the arrangement pitch ⁇ Lb may be different from each other.
- FIG. 4B shows a planar configuration example of the microlens array 22.
- the microlens array 22 has a plurality of microlenses 22A arranged in a matrix.
- the microlens 22A collects the light that has passed through the pinhole 21A.
- the plurality of microlenses 22A are arranged side by side in a direction parallel to the line segment Lc, and are arranged side by side in a direction parallel to the line segment Ld that intersects (for example, is orthogonal to) the line segment Lc.
- the plurality of microlenses 22A are arranged side by side at an array pitch ⁇ Lc in a direction parallel to the line segment Lc.
- the plurality of microlenses 22A are arranged side by side at an array pitch ⁇ Ld in a direction parallel to the line segment Ld.
- the arrangement pitch ⁇ Lc and the arrangement pitch ⁇ Ld are equal to each other.
- the arrangement pitch ⁇ Lc and the arrangement pitch ⁇ Ld may be different from each other.
- FIG. 5 shows a planar configuration example when the pinhole mask 21 and the microlens array 22 are overlapped with each other.
- the plurality of pinholes 21A are allocated, for example, one for each microlens 22A.
- One pinhole 21A is provided corresponding to one microlens 22A, for example.
- the arrangement pitch ⁇ La is larger than the arrangement pitch ⁇ Lc so that the lights transmitted through the pinholes 21A overlap each other at the pupil position of the observer.
- the arrangement pitch ⁇ Lb is larger than the arrangement pitch ⁇ Ld so that the lights transmitted through the pinholes 21A overlap each other at the pupil position of the observer.
- the plurality of pinholes 21A are arranged side by side in a direction within a range of ⁇ 1.0 ° parallel to the line segment Lc, and in a direction within a range of ⁇ 1.0 ° parallel to the line segment Ld. They are arranged side by side.
- the direction parallel to the line segment La corresponds to the direction within the range of ⁇ 1.0 ° in the direction parallel to the line segment Lc.
- the direction parallel to the line segment Lb corresponds to a direction within the range of ⁇ 1.0 ° in the direction parallel to the line segment Ld.
- the pinhole mask 21 and the microlens array 22 superimpose the light transmitted through each pinhole 21A.
- the pinhole mask 21 and the microlens array 22 can transmit light transmitted through each pinhole 21A with a diameter ⁇ 1 at a predetermined position smaller than the diameter ⁇ 2 of the observer's pupil 120 (for example, 0.1 mm to 3 mm). It is configured to overlap each other so that The “predetermined position” is specifically the position of the pupil 120 of the observer.
- the position of the observer's pupil of the light beam that has passed through each pinhole 21A The diameter ⁇ 1 at 1 is 1 mm.
- FIG. 5 shows an example in which a location where the center of the pinhole 21 ⁇ / b> A and the center of the microlens 22 ⁇ / b> A overlap each other (hereinafter referred to as “point P”) is located at the center of the pinhole mask 21. It is shown. The point P may be located at a location different from the center of the pinhole mask 21.
- each pinhole 21A is a radial direction around the point P from the position facing the center of the microlens 22A facing each pinhole 21A. Further, the amount of shift increases as the distance from the point P increases.
- the arrangement pitches ⁇ Lc and ⁇ Ld are fixed values regardless of the location.
- FIG. 6 shows an example of the positions of the pinhole 21A and the microlens 22A.
- the distance between the center of the pinhole 21A and the center of the microlens 22A is preferably within ⁇ 10% of the focal length f of the microlens 22A.
- the device thickness Le is preferably in the range of 0.1 mm to 5 mm.
- the diameter Dh of the pinhole 21A is 1 ⁇ m or less, and it is not easy to create the pinhole 21A.
- the device thickness Le exceeds 5 mm, the designability when the optical module 20 is bonded to the light emitting surface 10A may be deteriorated.
- FIG. 7 shows an example of the diameter Dh of the pinhole 21A.
- the pinhole diameter Dh preferably satisfies the following formula (1).
- Le Device thickness (mm)
- n Average refractive index of the medium between the pinhole 21A and the microlens 22A
- Equation (2) shows a condition in which the light beam L1 is incident on a part of the pupil 120.
- Expression (2) shows the upper limit value of the diameter Dh of the pinhole 21A required for the light ray L1 to enter a part of the pupil 120.
- the lower limit value of the diameter Dh of the pinhole 21A is limited by the spread of the light beam diameter Dr due to the diffraction effect of the pinhole 21A, the ease of making the pinhole 21A, and the like, for example, about 1 ⁇ m.
- the reason why Lz 200 mm is that a smartphone, a notebook personal computer, or the like is assumed as a device to which the optical module 20 is bonded. In the optical module 20, Lz is not limited to 200 mm.
- the reason why ⁇ 1 2 mm is that the general minimum pupil diameter of an adult is about 2 mm.
- FIG. 8 shows an example of the diameter Dm of the microlens 22A.
- the diameter Dm of the microlens 22A is preferably 40 ⁇ m or more.
- the diameter Dm of the micro lens 22A is more preferably 70 ⁇ m or more.
- the center wavelength of the blue light is about 450 nm, and the longest wavelength ⁇ of the blue light is about 500 nm. Therefore, in this case, Dm> 50 ⁇ m.
- the center wavelength of the light incident on the microlens 22A is about 550 nm.
- the longest wavelength ⁇ of light incident on the microlens 22A is about 600 nm. Therefore, in this case, Dm> 60 ⁇ m.
- FIG. 9 shows an example of the positions of the pinhole 21A and the microlens 22A.
- the plurality of pinholes 21A and the plurality of microlenses 22A are incident on the specific pinhole that is one common pinhole 21A and are diffracted by the specific pinhole as a result of the specific pinhole being emitted from all types of subpixels.
- Each diffracted light emitted from the hole is arranged and sized to enter a specific microlens that is one microlens 22A.
- all types of sub-pixels indicate, for example, three types of sub-pixels corresponding to the three primary colors.
- each line segment L ⁇ b> 3 passes through a common point on the observation surface 200.
- a plurality of light beams L2 (bundles of light beams L1) formed by the light beams L1 emitted from the respective microlenses 22A pass through the observation surface 200 through a predetermined gap.
- two light beams L2 can enter the pupil 120. Therefore, as in the conventional case, it is possible for the observer to appear that the images formed by the light beams L2 incident on the pupil 120 are shifted from each other and overlapped.
- the display system 1 displays the position of the image visually recognized by the observer when the light beam L2 enters the observer's pupil 120 (specifically, the observer included in the input image (specifically, Adjustment is made based on the displacement of the pupil 120).
- the display system 1 displays the position of the image visually recognized by the observer when the light beam L2 enters the observer's pupil 120 (specifically, the observer included in the input image (specifically, Adjustment is made based on the displacement of the pupil 120).
- the display system 1 displays the position of the image visually recognized by the observer when the light beam L2 enters the observer's pupil 120 (specifically, the observer included in the input image (specifically, Adjustment is made based on the displacement of the pupil 120).
- FIG. 11 shows an example of a calibration procedure when the optical module 20 is bonded to the light emitting surface 10A.
- the observer attaches the optical module 20 to the light emitting surface 10A.
- the observer after downloading the application program 14A via, for example, a communication network, instructs the signal processing unit 13 to execute the application program 14A.
- the application program 14A is loaded into the signal processing unit 13
- the calibration procedure described in the application program 14A is executed by the signal processing unit 13.
- the signal processing unit 13 requests the imaging unit 12 to image the observation surface 200. Then, the imaging unit 12 images the observation surface 200 (step S101) and transmits an image obtained by the imaging to the signal processing unit 13. Next, the signal processing unit 13 detects the position of the observer (specifically, the size of the pupil 120) included in the image obtained by the imaging unit 12 (step S102). Next, the signal processing unit 13 outputs a signal voltage or the like corresponding to the sample image 14 ⁇ / b> B in the storage unit 14 to the display panel 11. Then, the display panel 11 displays the sample image 14B on the light emitting surface 10A by emitting video light corresponding to the sample image 14B from the light emitting surface 10A (step S103).
- the observer uses the gauge included in the sample image 14B to adjust the position (specifically, the in-plane position) of the recognition image included in the sample image 14B to a position where the observer can easily see (step S104).
- the signal processing unit 13 derives a correction value for the video signal based on the obtained size of the pupil 120 and the obtained gauge information (step S105).
- the signal processing unit 13 stores the derived correction value in the storage unit 14 as calibration data 14C. In this way, calibration is performed.
- FIG. 12A shows an example of the positional relationship between the pupil 120 and the light beam L2.
- FIG. 12B shows an example of a change in the display image.
- FIG. 12C shows an example of changes in the recognized image.
- the diagram in FIG. 12A shows an example in which the light beam L2 traveling from the back of the paper toward the front is incident on the pupil 120.
- FIG. The diagram on the left side of FIG. 12A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- FIG. The center diagram in FIG. 12A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- the right side of FIG. 12A shows an example in which the light beam L2 jumps to the right outer edge of the pupil 120 and another adjacent light beam L2 starts to enter the pupil 120.
- FIG. The arrows in the center diagram in FIG. 12A and the right diagram in FIG. 12A indicate the “movement direction of the light beam L2 in the pupil 120”.
- the arrow in the diagram on the right side of FIG. 12A does not indicate that one light beam L2 has actually moved from the right end to the left end of the pupil 120, but that one light beam L2 has moved within the pupil 120. It shows the direction to see.
- the figure on the left side of FIG. 12B is an image (display image) corresponding to the video signal after being corrected using the calibration data 14C.
- This display image includes an image Ia.
- the middle diagram of FIG. 12B corrects the video signal corresponding to the left diagram of FIG. 12B based on the displacement amount of the observer's position (specifically, the position of the pupil 120) and the calibration data 14C. It is an image (display image) corresponding to the video signal obtained by this.
- the image Ia is included at a position closer to the left than in the left side of FIG. 12B.
- the right diagram in FIG. 12B shows the video signal corresponding to the left diagram in FIG.
- the viewer's position (specifically, when the viewer is displaced beyond half the size of the pupil 120). It is an image (display image) corresponding to a video signal obtained by correcting based on the displacement amount of the position of the pupil 120) and the calibration data 14C.
- the image Ia is included at a position closer to the right than in the left side of FIG. 12B.
- the left diagram in FIG. 12C is an image (recognition image) recognized when the observer views the display image illustrated in the left diagram in FIG. 12B through the pinhole mask 21 and the microlens array 22. .
- An image Ia is illustrated on the left side of FIG. 12C.
- the center diagram in FIG. 12C is an image (recognition image) recognized when the observer views the display image described in the center diagram in FIG. 12B through the pinhole mask 21 and the microlens array 22. .
- the center diagram of FIG. 12C illustrates an image Ia arranged at almost the same position as the left diagram of FIG. 12C.
- the right side of FIG. 12C is an image (recognition image) recognized when the observer views the display image described in the right side of FIG. 12B through the pinhole mask 21 and the microlens array 22.
- the image on the right side of FIG. 12C illustrates an image Ia arranged at almost the same position as that on the left side of FIG. 12C.
- the signal processing unit 13 corrects the position of the image visually recognized by the observer based on the observer's displacement (displacement amount) included in the image obtained by the imaging unit 12 and the calibration data 14C. To the signal.
- the signal processing unit 13 performs correction on the video signal to adjust the position of the video viewed by the observer based on the calibration data 14C.
- the image Ia is visually recognized at a predetermined position (for example, the center position) in the recognition image.
- the observer (pupil 120) is displaced leftward (opposite to the displacement direction of the light beam L2) by about half the size of the pupil 120. Therefore, the signal processing unit 13 performs correction on the video signal to adjust the position of the image visually recognized by the observer based on the amount of displacement of the observer (pupil 120) in the left direction and the calibration data 14C. Do. As a result, the displacement of the image Ia in the recognition image is offset by the displacement of the observer (pupil 120) and the displacement of the image Ia in the display image, and the image Ia is almost the same position as the left diagram in FIG. 12C. Visible at.
- the signal processing unit 13 first subtracts half the size of the pupil 120 from the amount of displacement of the observer (pupil 120) in the left direction, thereby deriving a difference value. After that, the signal processing unit 13 sets the position of the image visually recognized by the observer to the displacement amount (the above difference value) in the right direction (the direction opposite to the displacement direction of the light beam L2 in the pupil 120) and the calibration. Correction is performed on the video signal based on the image data 14C. As a result, the image Ia is visually recognized at almost the same position as that on the left side of FIG. 12C.
- the signal processing unit 13 corrects the video signal so that the image Ia in the recognition image is visually recognized at the same position or substantially the same position regardless of the position of the light beam L2 in the pupil 120.
- the images Ia generated by the light beams L2 overlap each other.
- FIG. 13A shows an example of the positional relationship between the pupil 120 and the light beam L2 according to the comparative example.
- FIG. 13B illustrates an example of a change in the display image according to the comparative example.
- FIG. 13C illustrates an example of a change in the recognized image according to the comparative example.
- the diagram in FIG. 13A shows an example in which the light beam L2 traveling from the back to the front of the paper is incident on the pupil 120.
- the left diagram in FIG. 13A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- the center diagram in FIG. 13A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- the right side of FIG. 13A shows an example in which the light beam L2 jumps to the right outer edge of the pupil 120 and another adjacent light beam L2 starts to enter the pupil 120.
- FIG. 13A shows an example in which the light beam L2 traveling from the back to the front of the paper is incident on the pupil 120.
- the left diagram in FIG. 13A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- the center diagram in FIG. 13A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- FIG. 13B is an image (display image) corresponding to a video signal input from the outside, which is the same image.
- the left diagram in FIG. 13C is an image that is recognized when the display image shown in the left diagram in FIG. 13B is viewed through the pinhole mask 21 and the microlens array 22 when the observer is not moving. (Recognition image).
- the center diagram of FIG. 12C shows the display image shown in the center diagram of FIG. 12B viewed through the pinhole mask 21 and the microlens array 22 when the observer moves slightly to the right. It is an image to be recognized (recognized image).
- the center diagram in FIG. 12C shows an example in which the image Ia is slightly shifted to the right as compared to the left diagram in FIG.
- FIG. 12C shows the display image shown in the right side of FIG. 12B viewed through the pinhole mask 21 and the microlens array 22 when the observer moves greatly in the right direction. It is an image to be recognized (recognized image).
- the right side of FIG. 12C shows an example in which the image Ia is slightly shifted to the left as compared with the left side of FIG. 12C.
- the position of the image Ia in the recognition image changes according to the incident position of the light beam L2 to the pupil 120. Therefore, for example, as shown in FIG. 10, when a plurality of light beams L2 enter the pupil 120, the position of the image Ia in the recognition image differs for each light beam L2. Therefore, in this case, it looks to the observer that the images Ia formed by the light beams incident on the pupil 120 are shifted from each other and overlapped. That is, the image Ia appears blurred to the observer.
- the position where the light beam L2 formed by the microlens array 22 is incident on the pupil 120 of the observer is displaced by the observer (specifically, the pupil 120) included in the input image. Adjusted based on. Specifically, the position of the image visually recognized by the observer is based on the observer's displacement (specifically, the displacement amount of the pupil 120) included in the image obtained by the imaging unit 12, and the calibration data 14C. Correction to be adjusted is performed on the video signal. For example, the video signal is corrected so that the image Ia in the recognized image is visually recognized at the same position or substantially the same position regardless of the position of the light flux L2 in the pupil 120.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the microlens array 22 and the pinhole mask 21 are not displaced by the observer's displacement. Therefore, the position of each light beam L1 generated when the image light passes through the pinhole mask 21 does not follow the displacement of the observer and remains constant. Therefore, when the observer moves, the incident position of the light beam L2 formed by superimposing the light beams L1 on the pupil 120 of the observer is displaced in a direction opposite to the displacement direction of the observer. However, at this time, correction for adjusting the position of the image visually recognized by the observer based on the displacement of the observer included in the image obtained by the imaging unit 12 is performed on the video signal.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the optical module 20 is bonded directly or indirectly to the light emitting surface 10A with the pinhole mask 21 facing the light emitting surface 10A, and the above calibration is performed, so that precise positioning is unnecessary. Because it is. Thereby, the pinhole mask 21 and the microlens array 22 can be provided separately from the terminal device 10. As a result, it is possible to reduce image blurring without making the terminal device 10 complicated.
- the optical module 20 may further include a drive unit 23 that displaces the pinhole mask 21 in a direction perpendicular to the light emitting surface 10A, for example, as shown in FIG.
- the pinhole mask 21, the microlens array 22, and the drive unit 23 are integrally formed.
- the pinhole mask 21 is bonded directly or indirectly to the light emitting surface 10A.
- the observer can easily focus the image Ia by displacing the position of the pinhole mask 21 in the direction perpendicular to the light emitting surface 10A.
- the observer uses the gauge included in the sample image 14B to adjust the position (specifically, the in-plane position) of the recognition image included in the sample image 14B to a position that is easy for the observer to see.
- the focus of the recognized image is adjusted.
- FIG. 15 illustrates a perspective configuration example of the display system 2.
- the display system 2 includes a terminal device 10 and an optical module 20.
- the pinhole mask 21 is omitted.
- the signal processing unit 13 determines the position of the image visually recognized by the observer when the light beam L2 enters the observer's pupil 120 (specifically, the pupil included in the input image). 120), a first correction that is adjusted based on the position displacement is performed on the video signal, and a second correction that superimposes the pinhole mask video Ib is performed on the video signal before or after the first correction. .
- the video light generated based on the video signal after the second correction has a light beam profile equivalent to the video light after passing through the pinhole mask 21.
- the display panel 11 generates video light based on the video signal after the first correction and the second correction.
- FIG. 16A shows an example of the positional relationship between the pupil 120 and the light beam L2.
- FIG. 16B shows an example of a change in the display image.
- FIG. 16C shows an example of a change in the recognized image.
- FIG. 16A shows an example in which the light beam L2 traveling from the back of the paper toward the front is incident on the pupil 120.
- FIG. The diagram on the left side of FIG. 16A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- FIG. The center diagram in FIG. 16A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- the diagram on the right side of FIG. 16A shows an example in which the light beam L2 jumps out to the outer edge on the right side of the pupil 120, and another adjacent light beam L2 starts to enter the pupil 120.
- the arrows shown in the center diagram of FIG. 16A and the right diagram of FIG. 16A indicate “the moving direction of the light beam L2 in the pupil 120”. Accordingly, the arrow on the right side of FIG. 16A does not indicate that one light beam L2 actually moved from the right end to the left end of the pupil 120, but that one light beam L2 has moved within the pupil 120. It shows
- the figure on the left side of FIG. 16B is an image (display image) corresponding to the video signal after being corrected using the calibration data 14C.
- This display image includes an image Ia.
- the middle diagram of FIG. 16B corrects the video signal corresponding to the left diagram of FIG. 16B based on the displacement amount of the observer's position (specifically, the position of the pupil 120) and the calibration data 14C. It is an image (display image) corresponding to the video signal obtained by this.
- the image Ia is included at a position closer to the left than in the left side of FIG. 16B.
- the right side of FIG. 16B shows the video signal corresponding to the left side of FIG.
- the observer when the observer is displaced beyond half the size of the pupil 120 (specifically, the position of the observer (specifically, It is an image (display image) corresponding to a video signal obtained by correcting based on the displacement amount of the position of the pupil 120) and the calibration data 14C.
- the image Ia is included at a position closer to the right than in the left side of FIG. 16B.
- FIG. 16C is an image (pinhole mask image Ib) to be superimposed on the display image described in the left diagram of FIG. 16B.
- the center diagram in FIG. 16C is an image (pinhole mask image Ib) to be superimposed on the display image described in the center diagram in FIG. 16B.
- the diagram on the right side of FIG. 16C is an image (pinhole mask image Ib) superimposed on the display image described in the diagram on the right side of FIG. 16B.
- the pinhole mask image Ib has the same in-plane profile as the pinhole mask 21.
- the pinhole mask image Ib has a plurality of light transmission holes corresponding to the plurality of pinholes 21A.
- the portions corresponding to the respective light transmission holes are white luminance portions, and the portions other than the respective light transmission holes are all black luminance portions.
- the display panel 11 displays an image obtained by superimposing the pinhole mask image Ib illustrated in each drawing of FIG. 16C on the light emitting surface 10A on the display image illustrated in each drawing of FIG. 16B.
- the signal processing unit 13 corrects the position of the image visually recognized by the observer based on the observer's displacement (displacement amount) included in the image obtained by the imaging unit 12 and the calibration data 14C. To the signal.
- the signal processing unit 13 performs correction (first correction) on the video signal for adjusting the position of the video viewed by the observer based on the calibration data 14C. Further, the signal processing unit 13 performs correction (second correction) for superimposing the pinhole mask image Ib on the video signal before or after the first correction. As a result, the image Ia is visually recognized at a predetermined position (for example, the center position) in the recognition image.
- the signal processing unit 13 performs a correction (first correction) for adjusting the position of the image visually recognized by the observer based on the amount of leftward displacement of the observer (pupil 120) and the calibration data 14C. For video signals. Further, the signal processing unit 13 performs correction (second correction) for superimposing the pinhole mask image Ib on the video signal before or after the first correction.
- the displacement of the image Ia in the recognition image is offset by the displacement of the observer (pupil 120) and the displacement of the image Ia in the display image, and the image Ia is almost the same position as the left diagram in FIG. 18C. Visible at.
- the signal processing unit 13 first subtracts half the size of the pupil 120 from the amount of displacement of the observer (pupil 120) in the left direction, thereby deriving a difference value. After that, the signal processing unit 13 sets the position of the image visually recognized by the observer to the displacement amount (the above difference value) in the right direction (the direction opposite to the displacement direction of the light beam L2 in the pupil 120) and the calibration. Correction (first correction) adjusted based on the image data 14C is performed on the video signal.
- the signal processing unit 13 performs correction (second correction) for superimposing the pinhole mask image Ib on the video signal before or after the first correction.
- second correction for superimposing the pinhole mask image Ib on the video signal before or after the first correction.
- the signal processing unit 13 corrects the video signal so that the image Ia in the recognition image is visually recognized at the same position or substantially the same position regardless of the position of the light beam L2 in the pupil 120.
- the images Ia generated by the light beams L2 overlap each other.
- the incident position of the light beam L2 formed by the pinhole mask image Ib on the observer's pupil 120 is the displacement of the observer (specifically, the pupil 120) included in the input image. Adjusted based on. Specifically, the position of the image visually recognized by the observer is based on the observer's displacement (specifically, the displacement amount of the pupil 120) included in the image obtained by the imaging unit 12, and the calibration data 14C. Correction to be adjusted is performed on the video signal. For example, the video signal is corrected so that the image Ia in the recognized image is visually recognized at the same position or substantially the same position regardless of the position of the light flux L2 in the pupil 120.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the microlens array 22 and the pinhole mask 21 are not displaced by the observer's displacement. Therefore, the position of each light beam L1 generated when the image light passes through the pinhole mask 21 does not follow the displacement of the observer and remains constant. Therefore, when the observer moves, the incident position of the light beam L2 formed by superimposing the light beams L1 on the pupil 120 of the observer is displaced in a direction opposite to the displacement direction of the observer. However, at this time, correction for adjusting the position of the image visually recognized by the observer based on the displacement of the observer included in the image obtained by the imaging unit 12 is performed on the video signal.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the microlens array 22 it is not necessary to strictly position the microlens array 22 on the light emitting surface 10A. This is because the above-described calibration is performed after the microlens array 22 is bonded directly or indirectly to the light emitting surface 10A, thereby eliminating the need for precise positioning. Thereby, the microlens array 22 can be provided separately from the terminal device 10. As a result, it is possible to reduce image blurring without making the terminal device 10 complicated.
- FIG. 17 illustrates a perspective configuration example of the display system 3.
- the display system 3 includes a terminal device 10 and an optical module 20.
- the optical module 20 includes driving units 24 and 25 that displace the pinhole mask 21 based on the displacement of the observer included in the image obtained by the imaging unit 12.
- the pinhole mask 21, the microlens array 22, and the drive units 24 and 25 are integrally formed.
- the pinhole mask 21 is bonded directly or indirectly to the light emitting surface 10A.
- the driving unit 24 displaces the pinhole mask 21 in a first direction parallel to the light emitting surface 10A.
- the drive unit 25 displaces the pinhole mask 21 in a direction parallel to the light emitting surface 10A and perpendicular to the first direction.
- the signal processing unit 13 does not perform processing on the video signal according to the displacement of the position of the observer (specifically, the pupil 120) included in the input image.
- FIG. 18A shows an example of the positional relationship between the pupil 120 and the light beam L2.
- FIG. 18B shows an example of a change in the display image.
- FIG. 18C shows an example of a change in the recognized image.
- FIG. 18A shows an example in which the light beam L2 traveling from the back of the paper toward the front is incident on the pupil 120.
- FIG. The diagram on the left side of FIG. 18A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- FIG. The center diagram of FIG. 18A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- the diagram on the right side of FIG. 18A shows an example in which the light beam L2 jumps to the right outer edge of the pupil 120 and another adjacent light beam L2 starts to enter the pupil 120.
- the arrows shown in the center diagram of FIG. 18A and the diagram on the right side of FIG. 18A indicate “the moving direction of the light beam L2 within the pupil 120”. Therefore, the arrow on the right side of FIG. 18A does not indicate that one light beam L2 has actually moved from the right end to the left end of the pupil 120, but that one light beam L2 has moved within the pupil 120. It shows the direction
- FIG. 18B is an image (display image) corresponding to a video signal input from the outside, which is the same image as each other.
- the diagram on the left side of FIG. 18C shows the arrangement of the pinhole mask 21 when the observer is not moving.
- the center diagram in FIG. 18C shows the arrangement of the pinhole mask 21 when the observer moves slightly in the right direction.
- the center diagram in FIG. 18C shows an example in which the pinhole mask 21 is slightly shifted to the left as compared with the left diagram in FIG. 18C.
- the drawing on the right side of FIG. 18C shows the arrangement of the pinhole mask 21 when the observer has moved greatly in the right direction.
- the right side of FIG. 18C shows an example in which the pinhole mask 21 is slightly shifted to the right as compared with the left side of FIG. 18C.
- the drive units 24 and 25 perform correction for adjusting the position of the image visually recognized by the observer based on the displacement (displacement amount) of the observer included in the image obtained by the imaging unit 12 and the calibration data 14C. For video signals.
- the drive units 24 and 25 perform correction for adjusting the position of the image visually recognized by the observer based on the calibration data 14 ⁇ / b> C with respect to the signal (control signal) for controlling the pinhole mask 21.
- the image Ia is visually recognized at a predetermined position (for example, the center position) in the recognition image (see the left diagram in FIG. 12C).
- the observer (pupil 120) is displaced leftward (opposite to the displacement direction of the light beam L2) by about half the size of the pupil 120. Therefore, the drive units 24 and 25 perform correction for adjusting the position of the image visually recognized by the observer based on the amount of displacement of the observer (pupil 120) in the left direction and the calibration data 14C. This is performed on a signal (control signal) for controlling 21.
- the displacement of the image Ia in the recognition image is offset by the displacement of the observer (pupil 120) and the displacement of the image Ia in the display image, and the image Ia is almost the same position as the left diagram in FIG. 18C. Visible at.
- the observer (pupil 120) is displaced in the left direction (the direction opposite to the displacement direction of the light beam L2) exceeding half the size of the pupil 120. Therefore, the drive units 24 and 25 first subtract half the size of the pupil 120 from the amount of displacement of the observer (pupil 120) in the left direction, thereby deriving a difference value. Then, the drive units 24 and 25 move the position of the image visually recognized by the observer to the displacement amount (the difference value) in the right direction (the direction opposite to the displacement direction of the light beam L2 in the pupil 120), Correction that is adjusted based on the calibration data 14 ⁇ / b> C is performed on a signal (control signal) for controlling the pinhole mask 21. As a result, the image Ia is visually recognized at almost the same position as that on the left side of FIG. 18C.
- the drive units 24 and 25 control the pinhole mask 21 so that the image Ia in the recognition image is visually recognized at the same position or substantially the same position regardless of the position of the light beam L2 in the pupil 120.
- the signal (control signal) is corrected.
- the images Ia generated by the light beams L2 overlap each other.
- the incident position of the light beam L2 formed by the pinhole mask 21 on the observer's pupil 120 is based on the displacement of the observer (specifically, the pupil 120) included in the input image. Adjusted. Specifically, the position of the image visually recognized by the observer is based on the observer's displacement (specifically, the displacement amount of the pupil 120) included in the image obtained by the imaging unit 12, and the calibration data 14C. Correction to be adjusted is performed on a signal (control signal) for controlling the pinhole mask 21. For example, in response to a signal (control signal) for controlling the pinhole mask 21 so that the image Ia in the recognized image is visually recognized at the same position or substantially the same position regardless of the position of the light flux L2 in the pupil 120.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the pinhole mask 21 is displaced based on the displacement of the observer included in the image obtained by the imaging unit 12.
- the optical path of each light beam L ⁇ b> 1 generated when the image light passes through the pinhole mask 21 is displaced based on the displacement of the observer included in the image obtained by the imaging unit 12. Therefore, when the observer moves, for example, the light beam L2 formed by superimposing the light beams L1 is displaced following the observer's displacement.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the microlens array 22 it is not necessary to strictly position the microlens array 22 on the light emitting surface 10A. This is because the above-described calibration is performed after the microlens array 22 is bonded directly or indirectly to the light emitting surface 10A, thereby eliminating the need for precise positioning. Thereby, the microlens array 22, the pinhole mask 21, and the drive units 24 and 25 can be provided separately from the terminal device 10. As a result, it is possible to reduce image blurring without making the terminal device 10 complicated.
- the optical module 20 may further include a drive unit 23 that displaces the pinhole mask 21 in a direction perpendicular to the light emitting surface 10A, for example, as shown in FIG. Good.
- the pinhole mask 21, the microlens array 22, and the drive units 23, 24, and 25 are integrally formed.
- the pinhole mask 21 is bonded directly or indirectly to the light emitting surface 10A.
- the observer can easily focus the image Ia by displacing the position of the pinhole mask 21 in the direction perpendicular to the light emitting surface 10A.
- the observer uses the gauge included in the sample image 14B to adjust the position (specifically, the in-plane position) of the recognition image included in the sample image 14B to a position that is easy for the observer to see.
- the focus of the recognized image is adjusted.
- FIG. 20 illustrates a perspective configuration example of the display system 4.
- the display system 4 includes a terminal device 10 and an optical module 20.
- the optical module 20 has a light modulation panel 26 instead of the pinhole mask 21.
- the light modulation panel 26 is provided between the light emitting surface 10 ⁇ / b> A and the microlens array 22.
- the light modulation panel 26 has a light transmission type light modulation region 26A capable of generating an arbitrary light shielding region, and is constituted by, for example, a liquid crystal panel.
- the light modulation panel 26 is driven by the signal processing unit 13 via wired or wireless.
- the pinhole mask 21 and the light modulation panel 26 are integrally formed.
- the light modulation panel 26 is bonded directly or indirectly to the light emitting surface 10A.
- the signal processing unit 13 outputs a video signal for the light modulation panel 26 to the light modulation panel 26.
- the signal processing unit 13 generates a pinhole mask-shaped light shielding region in the light modulation region 26 ⁇ / b> A of the light modulation panel 26 and observes the position of each pinhole in the light shielding region in the image obtained by the imaging unit 12. It is displaced based on the displacement of the person.
- FIG. 21A shows an example of the positional relationship between the pupil 120 and the light beam L2.
- FIG. 21B shows an example of a change in the display image.
- FIG. 21C shows an example of changes in the recognized image.
- FIG. 21A shows an example in which the light beam L2 traveling from the back to the front of the paper is incident on the pupil 120.
- the diagram on the left side of FIG. 21A shows an example in which the light beam L2 is incident on the center of the pupil 120.
- FIG. The center diagram in FIG. 21A shows an example in which the light beam L2 moves from the center of the pupil 120 to the vicinity of the right outer edge.
- the right side of FIG. 21A shows an example in which the light beam L2 jumps to the outer edge on the right side of the pupil 120 and another adjacent light beam L2 starts to enter the pupil 120.
- the arrows shown in the center diagram of FIG. 21A and the right diagram of FIG. 21A indicate “the moving direction of the light beam L2 in the pupil 120”. Accordingly, the arrow on the right side of FIG. 21A does not indicate that one light beam L2 has actually moved from the right end to the left end of the pupil 120, but that one light beam L2 has moved within the pupil 120. It shows the direction to see.
- FIG. 21B is an image (display image) corresponding to a video signal input from the outside, which is the same image.
- the diagram on the left side of FIG. 21C is an image (pinhole mask image Ib) displayed on the light modulation panel 26 when the observer is not moving.
- the center diagram in FIG. 21C is an image (pinhole mask image Ib) displayed on the light modulation panel 26 when the observer moves slightly in the right direction.
- the center diagram of FIG. 21C shows an example in which the pinhole mask image Ib is slightly shifted to the left as compared to the left diagram of FIG. 21C.
- the diagram on the right side of FIG. 21C is an image (pinhole mask image Ib) displayed on the light modulation panel 26 when the observer has greatly moved in the right direction.
- the right side of FIG. 21C shows an example in which the pinhole mask image Ib is slightly shifted to the right as compared to the left side of FIG. 21C.
- the pinhole mask image Ib has the same in-plane profile as the pinhole mask 21.
- the pinhole mask image Ib has a plurality of light transmission holes corresponding to the plurality of pinholes 21A.
- the portions corresponding to the respective light transmission holes are white luminance portions, and the portions other than the respective light transmission holes are all black luminance portions.
- the light modulation panel 26 converts, for example, video light corresponding to the display image shown in each drawing of FIG. 21B into a plurality of light beams L1 by the pinhole mask video Ib shown in each drawing of FIG. 21C.
- the signal processing unit 13 performs correction for adjusting the position of the image visually recognized by the observer based on the displacement (displacement amount) of the observer included in the image obtained by the imaging unit 12 and the calibration data 14C. This is performed on the video signal for the light modulation panel 26.
- the signal processing unit 13 performs correction on the video signal for the light modulation panel 26 to adjust the position of the video viewed by the observer based on the calibration data 14C.
- the image Ia is visually recognized at a predetermined position (for example, the center position) in the recognition image (see the left diagram in FIG. 12C).
- the observer (pupil 120) is displaced leftward (opposite to the displacement direction of the light beam L2) by about half the size of the pupil 120. Therefore, the signal processing unit 13 performs correction for adjusting the position of the image visually recognized by the observer based on the leftward displacement amount of the observer (pupil 120) and the calibration data 14C. This is performed for video signals.
- the displacement of the image Ia in the recognition image is offset by the displacement of the observer (pupil 120) and the displacement of the image Ia in the display image, and the image Ia is almost the same position as the left diagram in FIG. 18C. Visible at.
- the signal processing unit 13 first subtracts half the size of the pupil 120 from the amount of displacement of the observer (pupil 120) in the left direction, thereby deriving a difference value. After that, the signal processing unit 13 sets the position of the image visually recognized by the observer to the displacement amount (the above difference value) in the right direction (the direction opposite to the displacement direction of the light beam L2 in the pupil 120) and the calibration. Correction performed based on the image data 14C is performed on the video signal for the light modulation panel 26. As a result, the image Ia is visually recognized at almost the same position as that on the left side of FIG. 18C.
- the drive units 24 and 25 allow the video signal for the light modulation panel 26 so that the image Ia in the recognition image is visually recognized at the same position or substantially the same position regardless of the position of the light beam L2 in the pupil 120. Is corrected. Thus, even when two or more light beams L2 are incident on the pupil 120, the images Ia generated by the light beams L2 overlap each other.
- the incident position of the light beam L2 formed by the pinhole mask image Ib on the observer's pupil 120 is the displacement of the observer (specifically, the pupil 120) included in the input image. Adjusted based on. Specifically, the position of the image visually recognized by the observer is based on the observer's displacement (specifically, the displacement amount of the pupil 120) included in the image obtained by the imaging unit 12, and the calibration data 14C.
- the correction to be adjusted is performed on the video signal for the light modulation panel 26.
- the video signal for the light modulation panel 26 is corrected so that the image Ia in the recognized image is visually recognized at the same position or substantially the same position regardless of the position of the light beam L2 in the pupil 120.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- each pinhole in the pinhole mask-shaped light shielding region is displaced based on the displacement of the observer included in the image obtained by the imaging unit 12.
- the optical path of each light beam L1 generated when the image light passes through each pinhole is displaced based on the displacement of the observer included in the image obtained by the imaging unit 12.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the pupil 120 of the observer.
- the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the microlens array 22 it is not necessary to strictly position the microlens array 22 on the light emitting surface 10A. This is because the above-described calibration is performed after the microlens array 22 is bonded directly or indirectly to the light emitting surface 10A, thereby eliminating the need for precise positioning. Thereby, the microlens array 22 and the light modulation panel 26 can be provided separately from the terminal device 10. As a result, it is possible to reduce image blurring without making the terminal device 10 complicated.
- the optical module 20 may further include a drive unit 23 that displaces the microlens array 22 in a direction perpendicular to the light exit surface 10A, for example, as shown in FIG. Good.
- the observer can easily focus the image Ia by displacing the position of the microlens array 22 in the direction perpendicular to the light emitting surface 10A.
- the observer uses the gauge included in the sample image 14B to adjust the position (specifically, the in-plane position) of the recognition image included in the sample image 14B to a position that is easy for the observer to see.
- the focus of the recognized image is adjusted.
- the microlens array 22 is based on the displacement of the observer included in the image obtained by the imaging unit 12.
- Drive units 24 and 25 for displacing the motor The drive unit 24 displaces the pinhole mask 21 in a first direction parallel to the light emitting surface 10A.
- the drive unit 25 displaces the pinhole mask 21 in a direction parallel to the light emitting surface 10A and perpendicular to the first direction.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the observer's pupil 120. Therefore, even when two or more light beams L2 are incident on the pupil 120, the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- FIG. 25 illustrates a perspective configuration example of the electronic apparatus 5 according to the present embodiment.
- the electronic device 5 is, for example, a notebook personal computer including a display surface 5A on the main surface of one of two foldable plate-shaped housings.
- the electronic device 5 includes, for example, the light emission surface 10A according to each of the above-described embodiments and modifications thereof at the position of the display surface 5A, and the optical module 20 bonded directly or indirectly to the display surface 5A. I have.
- Each component included in the terminal device 10 is built in a predetermined location in the electronic device 5.
- the imaging unit 12 may be provided separately from the main body of the electronic device 5. In this case, the imaging unit 12 can communicate with the main body of the electronic device 5 via a wired or wireless connection.
- the position of the image Ia recognized by the observer can be made less dependent on the incident position of the light beam L2 on the observer's pupil 120. Therefore, even when two or more light beams L2 are incident on the pupil 120, the images Ia generated by the light beams L2 overlap each other, so that image blurring can be reduced.
- the optical module 20 may include an antireflection layer for preventing reflection of external light.
- the antireflection layer is configured by, for example, a multilayer film in which a plurality of thin films having different refractive indexes are superimposed, or fine unevenness provided on the surface of the microlens array 22 or the like.
- the antireflection layer is provided in the optical module 20 at a position of an interface of different materials or a position of a surface in contact with the atmosphere in the optical module 20. When there are a plurality of interfaces of different materials in the optical module 20, the antireflection layer is provided at the position of at least one interface among the plurality of interfaces.
- this indication can take the following composition.
- (1) Provided with a display that emits image light from the light exit surface, The display unit emits a plurality of light beams having a diameter smaller than the pupil diameter as the image light, and a plurality of microlens arrays formed by the microlens array when the microlens array is provided at a position facing the light emitting surface.
- a display system that adjusts a position of an image visually recognized by the observer based on a displacement of an observer included in an input image when a light beam formed by superimposing the light beams enters the pupil of the observer.
- the display unit A microlens array provided at a position facing the light emitting surface; A pinhole mask provided between the light exit surface and the microlens array; A signal processing unit that performs correction on the video signal to adjust the position of the image visually recognized by the observer based on the displacement of the observer included in the image obtained by the imaging unit;
- the display system according to (1) further comprising: a display panel having the light exit surface and generating the video light based on the corrected video signal.
- the display unit further includes a drive unit that displaces the microlens array or the pinhole mask in a direction perpendicular to the light emitting surface.
- the microlens array and the pinhole mask are integrally formed, The display system according to (2) or (3), wherein the pinhole mask is bonded directly or indirectly to the light emitting surface.
- the display unit First correction is performed on the video signal to adjust the position of the image visually recognized by the observer based on the displacement of the position of the observer included in the image obtained by the imaging unit, and the pinhole image is superimposed.
- a signal processing unit that performs the second correction on the video signal before or after the first correction;
- the display system according to (1) further comprising: a display panel that includes the light exit surface and generates the video light based on the video signal after the first correction and the second correction.
- the display unit further includes a microlens array provided at a position facing the light emitting surface, The display system according to (5), wherein the microlens array is bonded directly or indirectly to the light emitting surface.
- the display unit A microlens array provided at a position facing the light emitting surface; A pinhole mask provided between the light exit surface and the microlens array; A display panel having the light exit surface and generating the video light based on a video signal;
- the display system according to (1) further comprising: a first driving unit that displaces the microlens array or the pinhole mask based on a displacement of an observer included in an image obtained by the imaging unit.
- the display unit further includes a second drive unit that displaces the microlens array or the pinhole mask in a direction perpendicular to the light emitting surface.
- the microlens array, the pinhole mask, and the driving unit are integrally formed, The display system according to (7) or (8), wherein the pinhole mask is directly or indirectly bonded to the light emitting surface.
- a microlens array provided at a position facing the light emitting surface;
- a light transmissive light modulation panel provided between the light emitting surface and the microlens array and capable of generating an arbitrary light shielding region;
- a drive unit that causes the light modulation panel to generate a pinhole mask-shaped light-blocking region and that displaces the position of each pinhole in the light-blocking region based on the displacement of the observer included in the image obtained by the imaging unit
- the display system according to (1) further comprising: (11) The microlens array and the light modulation panel are integrally formed, The display system according to (10), wherein the light modulation panel is directly or indirectly bonded to the light emitting surface.
- the display system according to any one of (1) to (11), further including an imaging unit that images an observation surface separated from the light exit surface by a predetermined distance.
- the display system includes a display unit that emits image light from a light emitting surface, The display unit emits a plurality of light beams having a diameter smaller than the pupil diameter as the image light, and a plurality of microlens arrays formed by the microlens array when the microlens array is provided at a position facing the light emitting surface.
- An electronic apparatus that adjusts a position of an image visually recognized by the observer based on a displacement of the observer included in an input image when a light beam formed by superimposing the light beams enters the pupil of the observer.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本開示の一実施の形態にかかる表示システムは、光出射面から映像光を出射する表示部を備えている。表示部は、映像光として、瞳孔径よりも狭い径の複数の光線を出射する。表示部は、さらに、光出射面と対向する位置にマイクロレンズアレイが設けられたときにマイクロレンズアレイによる複数の光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する。
Description
本開示は、表示システムおよびそれを備えた電子機器に関する。
近年、高齢化社会の進展に伴って、老眼の高齢者が増えてきている。そのため、老眼の高齢者にとって使いやすい、つまり、焦点を合わせやすい表示装置が望まれている。例えば、特許文献1に記載の発明では、各開口を透過した光線が、マイクロレンズによって、瞳の位置で瞳の径よりも小さくなるように投影されるとともに重ね合わされる。瞳の位置で重ね合わされることにより形成された各光束は、眼のレンズによって、眼の網膜で互いに重なり合わずに結像する。その結果、従来よりも、像のぼやけを低減することができる。
しかし、特許文献1に記載の発明では、多数の光束が瞳に入射するので、観察者には、瞳に入射した各光束によって形成される画像が、互いにずれて重なったように見える。そのため、像のぼやけが依然として生じているという問題があった。
したがって、像のぼやけを低減することの可能な表示システムおよび電子機器を提供することが望ましい。
本開示の一実施の形態の表示システムは、光出射面から映像光を出射する表示部を備えている。表示部は、映像光として、瞳孔径よりも狭い径の複数の光線を出射する。表示部は、さらに、光出射面と対向する位置にマイクロレンズアレイが設けられたときにマイクロレンズアレイによる複数の光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する。
本開示の一実施の形態の表示システムでは、観察者が動いた場合に、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置が、入力された画像に含まれる観察者の変位に基づいて調整される。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の表示システムにおいて、表示部は、以下の(A1)~(A4)の構成要素を有していてもよい。
(A1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(A2)光出射面とマイクロレンズアレイとの間に設けられたピンホールマスク
(A3)観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正を映像信号に対して行う信号処理部
(A4)光出射面を有し、補正後の映像信号に基づいて映像光を生成する表示パネル
表示部が(A1)~(A4)の構成要素を有している場合に、マイクロレンズアレイおよびピンホールマスクが観察者の変位によって変位しないときには、映像光がピンホールマスクを透過することにより生成される各光線の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線の重ね合わせによって形成される光束の、観察者の瞳への入射位置が、観察者の変位方向とは逆方向に変位し得る。しかし、このときに、表示部が(A1)~(A4)の構成要素を有する表示システムでは、観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
(A1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(A2)光出射面とマイクロレンズアレイとの間に設けられたピンホールマスク
(A3)観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正を映像信号に対して行う信号処理部
(A4)光出射面を有し、補正後の映像信号に基づいて映像光を生成する表示パネル
表示部が(A1)~(A4)の構成要素を有している場合に、マイクロレンズアレイおよびピンホールマスクが観察者の変位によって変位しないときには、映像光がピンホールマスクを透過することにより生成される各光線の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線の重ね合わせによって形成される光束の、観察者の瞳への入射位置が、観察者の変位方向とは逆方向に変位し得る。しかし、このときに、表示部が(A1)~(A4)の構成要素を有する表示システムでは、観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の表示システムにおいて、表示部は、以下の(B1)、(B2)の構成要素を有していてもよい。
(B1)観察者が視認する映像の位置を、入力された画像に含まれる観察者の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホール映像を重畳する第2補正を、第1補正の前もしくは後の映像信号に対して行う信号処理部
(B2)光出射面を有し、第1補正および第2補正のなされた後の映像信号に基づいて映像光を生成する表示パネル
表示部が(B1)、(B2)の構成要素を有している場合に、マイクロレンズアレイが観察者の変位によって変位しないときには、映像光がピンホールマスクを透過することにより生成される各光線の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線の重ね合わせによって形成される光束の、観察者の瞳への入射位置が、観察者の変位方向とは逆方向に変位し得る。しかし、このときに、表示部が(B1)、(B2)の構成要素を有する表示システムでは、観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
(B1)観察者が視認する映像の位置を、入力された画像に含まれる観察者の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホール映像を重畳する第2補正を、第1補正の前もしくは後の映像信号に対して行う信号処理部
(B2)光出射面を有し、第1補正および第2補正のなされた後の映像信号に基づいて映像光を生成する表示パネル
表示部が(B1)、(B2)の構成要素を有している場合に、マイクロレンズアレイが観察者の変位によって変位しないときには、映像光がピンホールマスクを透過することにより生成される各光線の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線の重ね合わせによって形成される光束の、観察者の瞳への入射位置が、観察者の変位方向とは逆方向に変位し得る。しかし、このときに、表示部が(B1)、(B2)の構成要素を有する表示システムでは、観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の表示システムにおいて、表示部は、以下の(C1)~(C4)の構成要素を有していてもよい。
(C1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(C2)光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスク
(C3)光出射面を有し、映像信号に基づいて映像光を生成する表示パネル
(C4)入力された画像に含まれる観察者の変位に基づいてマイクロレンズアレイまたはピンホールマスクを変位させる駆動部
表示部が(C1)~(C4)の構成要素を有している場合、マイクロレンズアレイまたはピンホールマスクが、撮像部で得られた画像に含まれる観察者の変位に基づいて変位する。これにより、映像光がピンホールマスクを透過することにより生成される各光線の光路が、入力された画像に含まれる観察者の変位に基づいて変位する。従って、観察者が動いた場合には、例えば、各光線の重ね合わせによって形成される光束が、観察者の変位に追随して変位する。その結果、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
(C1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(C2)光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスク
(C3)光出射面を有し、映像信号に基づいて映像光を生成する表示パネル
(C4)入力された画像に含まれる観察者の変位に基づいてマイクロレンズアレイまたはピンホールマスクを変位させる駆動部
表示部が(C1)~(C4)の構成要素を有している場合、マイクロレンズアレイまたはピンホールマスクが、撮像部で得られた画像に含まれる観察者の変位に基づいて変位する。これにより、映像光がピンホールマスクを透過することにより生成される各光線の光路が、入力された画像に含まれる観察者の変位に基づいて変位する。従って、観察者が動いた場合には、例えば、各光線の重ね合わせによって形成される光束が、観察者の変位に追随して変位する。その結果、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の表示システムが、以下の(D1)~(D3)の構成要素をさらに備えていてもよい。
(D1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(D2)光出射面とマイクロレンズアレイとの間に設けられた、任意の遮光領域を生成可能な光透過型の光変調パネル
(D3)ピンホールマスク状の遮光領域を光変調パネルに生成させるとともに、遮光領域における各ピンホールの位置を、入力された画像に含まれる観察者の変位に基づいて変位させる駆動部
本開示の表示システムが(D1)~(D3)の構成要素をさらに備えている場合、ピンホールマスク状の遮光領域における各ピンホールが、入力された画像に含まれる観察者の変位に基づいて変位する。これにより、映像光が各ピンホールを透過することにより生成される各光線の光路が、撮像部で得られた画像に含まれる観察者の変位に基づいて変位する。従って、観察者が動いた場合には、例えば、各光線の重ね合わせによって形成される光束が、観察者の変位に追随して変位する。その結果、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
(D1)光出射面と対向する位置に設けられたマイクロレンズアレイ
(D2)光出射面とマイクロレンズアレイとの間に設けられた、任意の遮光領域を生成可能な光透過型の光変調パネル
(D3)ピンホールマスク状の遮光領域を光変調パネルに生成させるとともに、遮光領域における各ピンホールの位置を、入力された画像に含まれる観察者の変位に基づいて変位させる駆動部
本開示の表示システムが(D1)~(D3)の構成要素をさらに備えている場合、ピンホールマスク状の遮光領域における各ピンホールが、入力された画像に含まれる観察者の変位に基づいて変位する。これにより、映像光が各ピンホールを透過することにより生成される各光線の光路が、撮像部で得られた画像に含まれる観察者の変位に基づいて変位する。従って、観察者が動いた場合には、例えば、各光線の重ね合わせによって形成される光束が、観察者の変位に追随して変位する。その結果、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の電子機器は、表示システムを備えている。本開示の電子機器において、表示システムは、光出射面から映像光を出射する表示部を有している。表示部は、映像光として、瞳孔径よりも狭い径の複数の光線を出射する。表示部は、さらに、光出射面と対向する位置にマイクロレンズアレイが設けられたときにマイクロレンズアレイによる複数の光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する。
本開示の一実施の形態の電子機器では、観察者が動いた場合に、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置が、入力された画像に含まれる観察者の変位に基づいて調整される。これにより、観察者が認識する映像の位置が、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置に依りにくくすることができる。
本開示の一実施の形態の表示システムおよび電子機器によれば、マイクロレンズアレイによって形成される光束の、観察者の瞳への入射位置を、入力された画像に含まれる観察者の変位に基づいて調整するようにしたので、像のぼやけを低減することができる。なお、本開示の効果は、ここに記載された効果に必ずしも限定されず、本明細書中に記載されたいずれの効果であってもよい。
以下、本開示を実施するための形態について、図面を参照して詳細に説明する。以下の説明は本開示の一具体例であって、本開示は以下の態様に限定されるものではない。また、本開示は、各図に示す各構成要素の配置や寸法、寸法比などについても、それらに限定されるものではない。なお、説明は、以下の順序で行う。
1.第1の実施の形態(表示システム)
2.第1の実施の形態の変形例(表示システム)
3.第2の実施の形態(表示システム)
4.第3の実施の形態(表示システム)
5.第3の実施の形態の変形例(表示システム)
6.第4の実施の形態(表示システム)
7.第1および第3の実施の形態の変形例(表示システム)
8.第5の実施の形態(電子機器)
1.第1の実施の形態(表示システム)
2.第1の実施の形態の変形例(表示システム)
3.第2の実施の形態(表示システム)
4.第3の実施の形態(表示システム)
5.第3の実施の形態の変形例(表示システム)
6.第4の実施の形態(表示システム)
7.第1および第3の実施の形態の変形例(表示システム)
8.第5の実施の形態(電子機器)
<1.第1の実施の形態>
[構成]
本開示の第1の実施の形態に係る表示システム1の構成について説明する。図1は、表示システム1の斜視構成例を表したものである。表示システム1は、端末装置10および光学モジュール20を備えている。端末装置10は、映像光を出射する光出射面10Aを有しており、光出射面10Aに隣接して1または複数の撮像素子12Aを有している。図1には、2つの撮像素子12Aが端末装置10に設けられている様子が例示されている。光学モジュール20は、ピンホールマスク21およびマイクロレンズアレイ22を有している。ピンホールマスク21およびマイクロレンズアレイ22は、互いに対向して配置されている。マイクロレンズアレイ22は、光出射面10Aと対向する位置に設けられている。マイクロレンズアレイ22は、行列状に配置された複数のマイクロレンズ22Aを有している。ピンホールマスク21は、光出射面10Aとマイクロレンズアレイ22との間に設けられている。ピンホールマスク21は、行列状に配置された複数のピンホール21Aを有している。
[構成]
本開示の第1の実施の形態に係る表示システム1の構成について説明する。図1は、表示システム1の斜視構成例を表したものである。表示システム1は、端末装置10および光学モジュール20を備えている。端末装置10は、映像光を出射する光出射面10Aを有しており、光出射面10Aに隣接して1または複数の撮像素子12Aを有している。図1には、2つの撮像素子12Aが端末装置10に設けられている様子が例示されている。光学モジュール20は、ピンホールマスク21およびマイクロレンズアレイ22を有している。ピンホールマスク21およびマイクロレンズアレイ22は、互いに対向して配置されている。マイクロレンズアレイ22は、光出射面10Aと対向する位置に設けられている。マイクロレンズアレイ22は、行列状に配置された複数のマイクロレンズ22Aを有している。ピンホールマスク21は、光出射面10Aとマイクロレンズアレイ22との間に設けられている。ピンホールマスク21は、行列状に配置された複数のピンホール21Aを有している。
図2Aは、端末装置10の概略構成例を表したものである。端末装置10は、表示パネル11、撮像部12、信号処理部13および記憶部14を有している。表示パネル11は、光出射面10Aを有している。表示パネル11は、所定の映像信号に基づいて映像光を生成し、生成した映像光を光出射面10Aから出射する。表示パネル11は、タッチ機能を有しており、観察者による光出射面へのタッチ動作により、所望のデータ入力を受け付ける。タッチ機能は、例えば、抵抗膜方式、静電容量方式、電磁誘導方式、超音波表面弾性波方式、赤外線走査方式、TFT液晶セル内蔵方式等のタッチパネルにより構成されている。
本実施の形態では、表示パネル11は、後述する補正後の映像信号に基づいて映像光を生成する。具体的には、表示パネル11は、信号処理部13で生成された、補正後の映像信号に対応する信号電圧に基づいて映像光を生成する。表示パネル11では、複数の表示画素11A(後述)が光出射面10Aと対向する位置に行列状に配置されている。各表示画素11Aは、複数種類のサブ画素を含んで構成されており、例えば、3原色の色ごとに1種類ずつサブ画素を含んで構成されている。
撮像部12は、光出射面10Aから所定の距離だけ離れた観察面200(後述)を撮像する。撮像部12は、1または複数の撮像素子12Aを有している。1または複数の撮像素子12Aは、観察面200を撮像し、撮像により得られた画像を信号処理部13に出力する。信号処理部13は、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者(具体的には観察者の瞳孔120(後述))の変位に基づいて調整する補正を映像信号に対して行う。信号処理部13は、補正により得られた映像信号に対応する信号電圧等を生成し、表示パネル11に出力する。
図2Bは、記憶部14の内部構成例を表したものである。記憶部14には、例えば、アプリケーション・プログラム14A、ゲージ機能付きのサンプル画像14Bおよびキャリブレーションデータ14Cが記憶されている。アプリケーション・プログラム14Aは、後述のキャリブレーションや後述の調整を信号処理部13に実行させるものであり、例えば、通信ネットワークを介してダウンロードされたものである。サンプル画像14Bは、表示パネル11のタッチ機能を利用した位置調整やピント調整を行うための画像である。サンプル画像14Bは、例えば、観察者が見やすい位置を調整する際にタッチするゲージ画像や、観察者が見やすい位置を調整する際に認識する画像(認識画像)を含んでいる。キャリブレーションデータ14Cは、アプリケーション・プログラム14Aにおけるキャリブレーションが信号処理部13で実行されたことにより記憶部14に格納されたものである。記憶部14は、例えば、不揮発性メモリによって構成されており、例えば、EEPROM(Electrically Erasable Programmable Read-Only Memory)、フラッシュメモリ、抵抗変化型メモリなどによって構成されている。
図3は、光学モジュール20の断面構成を表したものである。光学モジュール20は、上述したように、ピンホールマスク21およびマイクロレンズアレイ22を有している。ピンホールマスク21およびマイクロレンズアレイ22は、貼り合わせ面(具体的には、光出射面10A)側から、ピンホールマスク21、マイクロレンズアレイ22の順に配置されている。つまり、ピンホールマスク21の表面が光学モジュール20の光入射面となっており、マイクロレンズアレイ22の表面が光学モジュール20の光出射面となっている。ピンホールマスク21およびマイクロレンズアレイ22は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。マイクロレンズアレイ22において、複数のマイクロレンズ22Aは、光学モジュール20の光出射面に配置されている。マイクロレンズ22Aは、ピンホール21Aを通過した光を集光する。マイクロレンズ22Aは、例えば、光出射側に突出する凸形状を有している。
なお、光学モジュール20は、さらに、例えば、ピンホールマスク21とマイクロレンズアレイ22との間にスペーサを有していてもよい。スペーサは、ピンホールマスク21とマイクロレンズアレイ22との間隙を確保するためのものであり、例えば、光透過性の樹脂層で構成されている。スペーサは、散乱板や拡散板のような、積極的に光を散乱したり拡散したりする機能を有していてもよいし、有していなくてもよい。スペーサは、空気層であってもよい。なお、スペーサが空気層となっている場合には、光学モジュール20は、ピンホールマスク21を支持する基材や、マイクロレンズアレイ22を支持する基材を有していてもよい。
光学モジュール20は、さらに、例えば、マイクロレンズアレイ22の表面に接する樹脂層を有していてもよい。樹脂層は、マイクロレンズアレイ22の屈折率とは異なる屈折率の樹脂材料によって構成されている。樹脂層において、光入射面(マイクロレンズアレイ22に接する面)は、例えば、マイクロレンズアレイ22の表面形状に倣った表面形状となっている。樹脂層において、光出射面(マイクロレンズアレイ22とは反対側の面)は、例えば、平坦面となっている。樹脂層は、散乱板や拡散板のような、積極的に光を散乱したり拡散したりする機能を有していてもよいし、有していなくてもよい。
光学モジュール20において、各マイクロレンズ22Aが、例えば、光学モジュール20の光入射側に突出する凸形状を有していてもよい。この場合、スペーサは、例えば、マイクロレンズ22Aの屈折率とは異なる屈折率の樹脂材料、または空気によって構成されている。なお、スペーサが空気によって構成されている場合には、光学モジュール20は、ピンホールマスク21を支持する基材や、マイクロレンズアレイ22を支持する基材を備えていてもよい。光学モジュール20は、例えば、ピンホールマスク21に接する帯電層を有していてもよい。帯電層は、光学モジュール20を静電気の作用によって光出射面10Aに貼り付けるためのものである。
ピンホール21Aは、光遮光性を有するシート状の部材に設けられている。従って、ピンホールマスク21は、各ピンホール21Aを介して、光出射面10Aから発せられる光を透過する。ピンホールマスク21は、例えば、マイクロレンズアレイ22もしくはスペーサの光入射面に対して、ブラックカーボンなどを含む遮光材料を塗布したのち、塗布した遮光材料に複数の開口を形成することにより形成される。ピンホールマスク21は、例えば、マイクロレンズアレイ22もしくはスペーサの光入射面に対して、クロムの薄膜を形成したのち、クロムの薄膜に対して、エッチングで開口を形成することにより形成されてもよい。
図4Aは、ピンホールマスク21の平面構成例を表したものである。ピンホールマスク21は、行列状に配置された複数のピンホール21Aを有している。複数のピンホール21Aは、線分Laと平行な方向に並んで配置されるとともに、線分Laと直交または略直交する線分Lbと平行な方向に並んで配置されている。複数のピンホール21Aは、線分Laと平行な方向に、配列ピッチΔLaで並んで配置されている。複数のピンホール21Aは、線分Lbと平行な方向に、配列ピッチΔLbで並んで配置されている。配列ピッチΔLaと、配列ピッチΔLbとは、例えば、互いに等しくなっている。なお、配列ピッチΔLaと、配列ピッチΔLbとが、互いに異なっていてもよい。
図4Bは、マイクロレンズアレイ22の平面構成例を表したものである。マイクロレンズアレイ22は、行列状に配置された複数のマイクロレンズ22Aを有している。マイクロレンズ22Aは、ピンホール21Aを通過した光を集光する。複数のマイクロレンズ22Aは、線分Lcと平行な方向に並んで配置されるとともに、線分Lcと交差(例えば直交)する線分Ldと平行な方向に並んで配置されている。複数のマイクロレンズ22Aは、線分Lcと平行な方向に、配列ピッチΔLcで並んで配置されている。複数のマイクロレンズ22Aは、線分Ldと平行な方向に、配列ピッチΔLdで並んで配置されている。配列ピッチΔLcと、配列ピッチΔLdとは、例えば、互いに等しくなっている。なお、配列ピッチΔLcと、配列ピッチΔLdとが、互いに異なっていてもよい。
図5は、ピンホールマスク21およびマイクロレンズアレイ22を互いに重ね合わせたときの平面構成例を表したものである。複数のピンホール21Aは、例えば、マイクロレンズ22Aごとに1つずつ割り当てられている。1つのピンホール21Aが、例えば、1つのマイクロレンズ22Aに対応して設けられている。各ピンホール21Aを透過した光が観察者の瞳孔位置で互いに重なり合うように、配列ピッチΔLaは、配列ピッチΔLcよりも大きくなっている。各ピンホール21Aを透過した光が観察者の瞳孔位置で互いに重なり合うように、配列ピッチΔLbは、配列ピッチΔLdよりも大きくなっている。
複数のピンホール21Aは、線分Lcと平行な方向±1.0°の範囲内の方向に並んで配置されると共に、線分Ldと平行な方向±1.0°の範囲内の方向に並んで配置されている。ここで、線分Laと平行な方向は、線分Lcと平行な方向±1.0°の範囲内の方向に対応する。線分Lbと平行な方向は、線分Ldと平行な方向±1.0°の範囲内の方向に対応する。
ピンホールマスク21およびマイクロレンズアレイ22は、各ピンホール21Aを透過した光を互いに重ね合わせる。ピンホールマスク21およびマイクロレンズアレイ22は、例えば、各ピンホール21Aを透過した光を、所定の位置における直径φ1が観察者の瞳孔120の直径φ2よりも小さな直径(例えば、0.1mm以上3mm以下)となるように互いに重ね合わせるように構成されている。「所定の位置」は、具体的には、観察者の瞳孔120位置である。例えば、ピンホール21Aとマイクロレンズ22Aとの距離=1500μm、マイクロレンズ22Aと観察者の瞳孔120との距離=200mmとなっているとき、各ピンホール21Aを通過した光線の、観察者の瞳孔位置における直径φ1が1mmとなっている。
ピンホールマスク21およびマイクロレンズアレイ22を平面視した場合に、ある1つのピンホール21Aの中心が、ある1つのマイクロレンズ22Aの中心と重なり合っている。図5には、ピンホール21Aの中心と、マイクロレンズ22Aの中心とが互いに重なり合っている箇所(以下、「点P」と称する。)が、ピンホールマスク21の中央に位置している例が示されている。なお、点Pが、ピンホールマスク21の中央とは異なる箇所に位置していてもよい。ピンホールマスク21およびマイクロレンズアレイ22を平面視した場合に、各ピンホール21Aの中心は、各ピンホール21Aと対向するマイクロレンズ22Aの中心と対向する位置から、点Pを中心とした放射方向にシフトしており、さらに、そのシフト量は、点Pからの距離が大きくなるにつれて、大きくなっている。なお、配列ピッチΔLc,ΔLdは、場所に依らず固定値となっている。
図6は、ピンホール21Aおよびマイクロレンズ22Aの位置の一例を表したものである。ピンホール21Aの中心と、マイクロレンズ22Aの中心との距離(いわゆるデバイス厚さLe)は、マイクロレンズ22Aの焦点距離fの±10%以内となっていることが好ましい。これにより、ピンホール21Aを介してマイクロレンズ22Aに入射した光が観察位置で所望の範囲内に収束しやすくなる。ここで、デバイス厚さLeは、0.1mm以上、5mm以下の範囲内となっていることが好ましい。デバイス厚さLeが0.1mmよりも小さい場合には、ピンホール21Aの直径Dhが1μm以下となり、ピンホール21Aの作成が容易ではない。デバイス厚さLeが5mmを超える場合には、光学モジュール20を光出射面10Aに貼り合わせたときの意匠性が低下するおそれがある。
図7は、ピンホール21Aの直径Dhの一例を表したものである。ピンホールの直径Dhは、以下の式(1)を満たすことが好ましい。
Le:デバイス厚さ(mm)
n:ピンホール21Aとマイクロレンズ22Aとの間の媒質の平均屈折率
n:ピンホール21Aとマイクロレンズ22Aとの間の媒質の平均屈折率
上記の式(1)は、以下の式(2)、式(3)を用いて導出される。
Dr:ピンホール21Aを介してマイクロレンズ22Aに入射した光線L1が、マイクロレンズアレイ22から所定の距離(観察距離Lz)だけ離れた観察位置を通過したときの光線径
φ1:瞳孔120の位置における直径(瞳孔径)
φ1:瞳孔120の位置における直径(瞳孔径)
式(2)には、光線L1が瞳孔120の一部に入射する条件が示されている。式(2)では、光線L1が瞳孔120の一部に入射するために要求される、ピンホール21Aの直径Dhの上限値が示されている。なお、ピンホール21Aの直径Dhの下限値は、ピンホール21Aの回折効果による光線径Drの広がりや、ピンホール21Aの作り易さなどによって制約され、例えば、1μm程度となっている。
式(3)の一番右の項では、Lz=200mm、φ1=2mmとした。Lz=200mmとしたのは、光学モジュール20を貼り合わせるデバイスとして、スマートフォンやノート型のパーソナルコンピュータなどが想定されているからである。なお、光学モジュール20において、Lzは200mmに限定されない。φ1=2mmとしたのは、成人の一般的な最小瞳孔径が2mm程度であるからである。
図8は、マイクロレンズ22Aの直径Dmの一例を表したものである。マイクロレンズ22Aの直径Dmは、40μm以上となっていることが好ましい。
式(4)には、マイクロレンズ22A全体に光線L1が入射したときに、光線L1が瞳孔120の一部に入射する条件が示されている。つまり、ピンホールの直径Dhが式(1)を満たし、かつ、マイクロレンズ22Aの直径Dmが40μm以上となっていることにより、光線L1が瞳孔120の一部に入射する。式(4)の一番右の項では、λ=400nm、Lz=200mm、φ1=2mmとした。式(4)には、マイクロレンズ22Aの直径Dmの下限値が示されている。なお、マイクロレンズ22Aの直径DLの上限値は、要求される解像度の大きさによって異なり、例えば、文字認識に要求される解像度を得る観点からは、200μmなっている。
マイクロレンズ22Aの直径Dmは、70μm以上となっていることがより好ましい。
式(5)には、マイクロレンズ22A全体に光線L1が入射したときに、光線L1が瞳孔120の一部に入射する条件が示されている。つまり、ピンホールの直径Dhが式(1)を満たし、かつ、マイクロレンズ22Aの直径DLが70μm以上となっていることにより、光線L1の光線径が瞳孔120の直径よりも狭くなる。式(5)の一番右の項では、λ=700nm、Lz=200mm、φ1=2mmとした。式(5)には、マイクロレンズ22Aの直径Dmの下限値が示されている。なお、マイクロレンズ22Aの直径Dmの上限値は、要求される解像度の大きさによって異なり、例えば、文字認識に要求される解像度を得る観点からは、200μmなっている。
なお、マイクロレンズ22Aに入射させる光が青色光だけの場合には、青色光の中心波長が450nm程度となり、青色光の最長波長λが500nm程度となる。従って、この場合には、Dm>50μmとなる。また、マイクロレンズ22Aに入射させる光が緑色光だけ、または、緑色光および緑色光より波長の短い光からなる光だけの場合には、マイクロレンズ22Aに入射させる光の中心波長が550nm程度となり、マイクロレンズ22Aに入射させる光の最長波長λが600nm程度となる。従って、この場合には、Dm>60μmとなる。
図9は、ピンホール21Aおよびマイクロレンズ22Aの位置の一例を表したものである。複数のピンホール21Aおよび複数のマイクロレンズ22Aは、全種類のサブ画素から発せられた光が共通の1つのピンホール21Aである特定ピンホールに入射するとともに特定ピンホールで回折した結果、特定ピンホールから出射された各回折光が1つのマイクロレンズ22Aである特定マイクロレンズに入射する配置および大きさとなっている。なお、全種類のサブ画素とは、例えば、3原色の各色に対応する3種類のサブ画素を指している。
マイクロレンズ22Aの中心と、マイクロレンズ22Aに対応するピンホール21Aの中心とを通過する線分L3をマイクロレンズ22Aごとに1本ずつ設けたとする。このとき、各線分L3は、観察面200においておおむね共通の1点を通過する。さらに、例えば、図10に示したように、各マイクロレンズ22Aから出射された光線L1によって形成される複数の光束L2(光線L1の束)が、所定の間隙を介して観察面200を通過する。このとき、2つの光束L2が瞳孔120に入射し得る。そのため、従来と同様に、観察者には、瞳孔120に入射した各光束L2によって形成される画像が、互いにずれて重なったように見える可能性がある。
しかし、本実施の形態では、表示システム1は、光束L2が観察者の瞳孔120に入射することにより観察者が視認する映像の位置を、入力された画像に含まれる観察者(具体的には瞳孔120)の変位に基づいて調整する。これにより、最低2つの光束L2が瞳孔120に入射し得る構造となっている場合であっても、観察者には、瞳孔120に入射した各光束L2によって形成される画像が、互いにずれて重なったように見えにくい。以下に、まず、この調整を行うためのキャリブレーションについて説明し、その後、上記調整方法について説明する。
(キャリブレーション)
図11は、光学モジュール20を光出射面10Aに貼り合わせたときのキャリブレーション手順の一例を表したものである。まず、観察者は、光学モジュール20を光出射面10Aに貼り合わせる。次に、観察者は、アプリケーション・プログラム14Aを、例えば、通信ネットワークを介してダウンロードしたのち、アプリケーション・プログラム14Aの実行を信号処理部13に指示する。すると、アプリケーション・プログラム14Aが信号処理部13にロードされた後、アプリケーション・プログラム14Aに記載のキャリブレーション手順が信号処理部13によって実行される。
図11は、光学モジュール20を光出射面10Aに貼り合わせたときのキャリブレーション手順の一例を表したものである。まず、観察者は、光学モジュール20を光出射面10Aに貼り合わせる。次に、観察者は、アプリケーション・プログラム14Aを、例えば、通信ネットワークを介してダウンロードしたのち、アプリケーション・プログラム14Aの実行を信号処理部13に指示する。すると、アプリケーション・プログラム14Aが信号処理部13にロードされた後、アプリケーション・プログラム14Aに記載のキャリブレーション手順が信号処理部13によって実行される。
具体的には、まず、信号処理部13は、撮像部12に対して、観察面200の撮像を要求する。すると、撮像部12は、観察面200を撮像し(ステップS101)、撮像により得られた画像を信号処理部13に送信する。次に、信号処理部13は、撮像部12で得られた画像に含まれる観察者の位置(具体的には瞳孔120のサイズ)を検出する(ステップS102)。次に、信号処理部13は、記憶部14内のサンプル画像14Bに対応する信号電圧等を表示パネル11に出力する。すると、表示パネル11は、光出射面10Aから、サンプル画像14Bに対応する映像光を出射することにより、光出射面10Aに、サンプル画像14Bを表示する(ステップS103)。観察者は、サンプル画像14Bに含まれるゲージを用いて、観察者が見やすい位置に、サンプル画像14Bに含まれる認識画像の位置(具体的には面内位置)を調整する(ステップS104)。信号処理部13は、得られた瞳孔120のサイズと、得られたゲージ情報とに基づいて、映像信号に対する補正値を導出する(ステップS105)。信号処理部13は、導出した補正値をキャリブレーションデータ14Cとして記憶部14に格納する。このようにして、キャリブレーションが行われる。
(調整)
図12Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図12Bは、表示画像の変化の一例を表したものである。図12Cは、認識画像の変化の一例を表したものである。
図12Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図12Bは、表示画像の変化の一例を表したものである。図12Cは、認識画像の変化の一例を表したものである。
図12Aの図は、紙面の奥から手前に向かって進行してきた光束L2が瞳孔120に入射している例を示したものである。図12Aの左側の図は、光束L2が瞳孔120の中央に入射している例を示したものである。図12Aの中央の図は、光束L2が瞳孔120の中央から右側の外縁付近に移動した例を示したものである。図12Aの右側の図は、光束L2が瞳孔120の右側の外縁に飛び出すとともに、隣接する他の光束L2が瞳孔120に入射し始めた例を示したものである。図12Aの中央の図および図12Aの右側の図に記載の矢印は、『瞳孔120内での光束L2の移動方向』を示したものである。従って、図12Aの右側の図の矢印は、1つの光束L2が実際に瞳孔120の右端から左端に移動したことを示している訳ではなく、瞳孔120内で1つの光束L2が移動したように見える方向を示している。
図12Bの左側の図は、キャリブレーションデータ14Cを用いて補正された後の映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが含まれている。図12Bの中央の図は、図12Bの左側の図に対応する映像信号を、観察者の位置(具体的には瞳孔120の位置)の変位量と、キャリブレーションデータ14Cとに基づいて補正することにより得られた映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが図12Bの左側の図のときよりも左寄りの位置に含まれている。図12Bの右側の図は、観察者が瞳孔120のサイズの半分の大きさを超えて変位したときに、図12Bの左側の図に対応する映像信号を、観察者の位置(具体的には瞳孔120の位置)の変位量と、キャリブレーションデータ14Cとに基づいて補正することにより得られた映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが図12Bの左側の図のときよりも右寄りの位置に含まれている。
図12Cの左側の図は、観察者が、図12Bの左側の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの左側の図には、画像Iaが例示されている。図12Cの中央の図は、観察者が、図12Bの中央の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの中央の図には、図12Cの左側の図とほとんど同じ位置に配置された画像Iaが例示されている。図12Cの右側の図は、観察者が、図12Bの右側の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの右側の図には、図12Cの左側の図とほとんど同じ位置に配置された画像Iaが例示されている。
信号処理部13は、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正を映像信号に対して行う。
例えば、図12Aの左側の図では、観察者(瞳孔120)の変位量がほぼゼロとなっている。そこで、信号処理部13は、観察者が視認する映像の位置を、キャリブレーションデータ14Cに基づいて調整する補正を映像信号に対して行う。その結果、画像Iaは、認識画像における所定位置(例えば中央位置)で視認される。
例えば、図12Aの中央の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分程度の大きさだけ左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、観察者が視認する映像の位置を、観察者(瞳孔120)の左方向への変位量と、キャリブレーションデータ14Cとに基づいて調整する補正を映像信号に対して行う。その結果、認識画像中の画像Iaの変位が、観察者(瞳孔120)の変位と、表示画像中の画像Iaの変位とによって相殺され、画像Iaが、図12Cの左側の図とほとんど同じ位置で視認される。
例えば、図12Aの右側の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分の大きさを超えて左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、まず、観察者(瞳孔120)の左方向への変位量から、瞳孔120のサイズの半分の大きさを減算し、それにより差分値を導出する。その上で、信号処理部13は、観察者が視認する映像の位置を、右方向(瞳孔120内での光束L2の変位方向とは逆方向)への変位量(上記差分値)と、キャリブレーションデータ14Cとに基づいて調整する補正を映像信号に対して行う。その結果、画像Iaは、図12Cの左側の図とほとんど同じ位置で視認される。
このように、信号処理部13は、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、映像信号に対して補正を行う。これにより、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合う。
[効果]
次に、本実施の形態の表示システム1の効果について説明する。
次に、本実施の形態の表示システム1の効果について説明する。
図13Aは、比較例に係る瞳孔120と光束L2の位置関係の一例を表したものである。図13Bは、比較例に係る表示画像の変化の一例を表したものである。図13Cは、比較例に係る認識画像の変化の一例を表したものである。
図13Aの図は、紙面の奥から手前に向かって進行してきた光束L2が瞳孔120に入射している例を示したものである。図13Aの左側の図は、光束L2が瞳孔120の中央に入射している例を示したものである。図13Aの中央の図は、光束L2が瞳孔120の中央から右側の外縁付近に移動した例を示したものである。図13Aの右側の図は、光束L2が瞳孔120の右側の外縁に飛び出すとともに、隣接する他の光束L2が瞳孔120に入射し始めた例を示したものである。
図13Bにおける各図は、外部から入力された映像信号に対応する画像(表示画像)であり、互いに同じ画像である。図13Cの左側の図は、観察者が移動していないときに、図13Bの左側の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの中央の図は、観察者が、右方向に少し移動した場合に、図12Bの中央の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの中央の図には、図12Cの左側の図と比べて、画像Iaが少し右側にずれている例が示されている。図12Cの右側の図は、観察者が、右方向に大きく移動した場合に、図12Bの右側の図に記載の表示画像を、ピンホールマスク21およびマイクロレンズアレイ22を介して眺めたときに認識する画像(認識画像)である。図12Cの右側の図には、図12Cの左側の図と比べて、画像Iaが少し左側にずれている例が示されている。
一般には、図13A~図13Cに示したように、瞳孔120に光束L2が入射すると、認識画像における画像Iaの位置は、光束L2の瞳孔120への入射位置に応じて変化する。そのため、例えば、図10に示したように、複数の光束L2が瞳孔120に入射した場合には、認識画像における画像Iaの位置は、光束L2ごとに異なる。従って、この場合には、観察者には、瞳孔120に入射した各光束によって形成される画像Iaが、互いにずれて重なったように見える。つまり、観察者には、画像Iaがぼやけて見える。
しかし、本実施の形態では、マイクロレンズアレイ22によって形成される光束L2の、観察者の瞳孔120への入射位置が、入力された画像に含まれる観察者(具体的には瞳孔120)の変位に基づいて調整される。具体的には、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(具体的には瞳孔120の変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正が映像信号に対して行われる。例えば、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、映像信号に対して補正が行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、マイクロレンズアレイ22およびピンホールマスク21は観察者の変位によって変位しない。そのため、映像光がピンホールマスク21を透過することにより生成される各光線L1の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線L1の重ね合わせによって形成される光束L2の、観察者の瞳孔120への入射位置が、観察者の変位方向とは逆方向に変位する。しかし、このときに、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、ピンホールマスク21およびマイクロレンズアレイ22を、厳密に光出射面10Aに位置決めする必要がない。それは、光学モジュール20を、ピンホールマスク21を光出射面10Aに向けて、直接または間接的に光出射面10Aに貼り合わせた上で、上述のキャリブレーションを行うことで、厳密な位置決めを不要にしているからである。これにより、ピンホールマスク21およびマイクロレンズアレイ22を、端末装置10とは別体に設けることができる。その結果、端末装置10を複雑な構成にすることなく、像のぼやけを低減することができる。
<2.第1の実施の形態の変形例>
上記実施の形態において、光学モジュール20は、例えば、図14に示したように、ピンホールマスク21を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。本変形例では、ピンホールマスク21、マイクロレンズアレイ22および駆動部23は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
上記実施の形態において、光学モジュール20は、例えば、図14に示したように、ピンホールマスク21を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。本変形例では、ピンホールマスク21、マイクロレンズアレイ22および駆動部23は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
ピンホールマスク21が光出射面10Aと垂直な方向に変位すると、各光線L1の集光位置が変化する。従って、観察者は、ピンホールマスク21の、光出射面10Aと垂直な方向の位置を変位させることで、画像Iaのピントを容易に合わせることができる。観察者は、例えば、キャリブレーション時に、サンプル画像14Bに含まれるゲージを用いて、観察者が見やすい位置に、サンプル画像14Bに含まれる認識画像の位置(具体的には面内位置)を調整するとともに、認識画像のピントを調整する。
<3.第2の実施の形態>
[構成]
次に、本開示の第2の実施の形態に係る表示システム2について説明する。図15は、表示システム2の斜視構成例を表したものである。表示システム2は、端末装置10および光学モジュール20を備えている。表示システム2の光学モジュール20では、ピンホールマスク21が省略されている。
[構成]
次に、本開示の第2の実施の形態に係る表示システム2について説明する。図15は、表示システム2の斜視構成例を表したものである。表示システム2は、端末装置10および光学モジュール20を備えている。表示システム2の光学モジュール20では、ピンホールマスク21が省略されている。
本実施の形態では、信号処理部13は、光束L2が観察者の瞳孔120に入射することにより観察者が視認する映像の位置を、入力された画像に含まれる観察者(具体的には瞳孔120)の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホールマスク映像Ibを重畳する第2補正を、第1補正の前もしくは後の映像信号に対して行う。これにより、第2補正がなされた後の映像信号に基づいて生成された映像光は、ピンホールマスク21を透過した後の映像光と同等の光線プロファイルを有している。表示パネル11は、第1補正および第2補正のなされた後の映像信号に基づいて映像光を生成する。
(調整)
図16Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図16Bは、表示画像の変化の一例を表したものである。図16Cは、認識画像の変化の一例を表したものである。
図16Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図16Bは、表示画像の変化の一例を表したものである。図16Cは、認識画像の変化の一例を表したものである。
図16Aの図は、紙面の奥から手前に向かって進行してきた光束L2が瞳孔120に入射している例を示したものである。図16Aの左側の図は、光束L2が瞳孔120の中央に入射している例を示したものである。図16Aの中央の図は、光束L2が瞳孔120の中央から右側の外縁付近に移動した例を示したものである。図16Aの右側の図は、光束L2が瞳孔120の右側の外縁に飛び出すとともに、隣接する他の光束L2が瞳孔120に入射し始めた例を示したものである。図16Aの中央の図および図16Aの右側の図に記載の矢印は、『瞳孔120内での光束L2の移動方向』を示したものである。従って、図16Aの右側の図の矢印は、1つの光束L2が実際に瞳孔120の右端から左端に移動したことを示している訳ではなく、瞳孔120内で1つの光束L2が移動したように見える方向を示している。
図16Bの左側の図は、キャリブレーションデータ14Cを用いて補正された後の映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが含まれている。図16Bの中央の図は、図16Bの左側の図に対応する映像信号を、観察者の位置(具体的には瞳孔120の位置)の変位量と、キャリブレーションデータ14Cとに基づいて補正することにより得られた映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが図16Bの左側の図のときよりも左寄りの位置に含まれている。図16Bの右側の図は、観察者が瞳孔120のサイズの半分の大きさを超えて変位したときに、図16Bの左側の図に対応する映像信号を、観察者の位置(具体的には瞳孔120の位置)の変位量と、キャリブレーションデータ14Cとに基づいて補正することにより得られた映像信号に対応する画像(表示画像)である。この表示画像には、画像Iaが図16Bの左側の図のときよりも右寄りの位置に含まれている。
図16Cの左側の図は、図16Bの左側の図に記載の表示画像に重畳する画像(ピンホールマスク映像Ib)である。図16Cの中央の図は、図16Bの中央の図に記載の表示画像に重畳する画像(ピンホールマスク映像Ib)である。図16Cの右側の図は、図16Bの右側の図に記載の表示画像に重畳する画像(ピンホールマスク映像Ib)である。
ピンホールマスク映像Ibは、ピンホールマスク21と同様の面内プロファイルを有している。ピンホールマスク映像Ibは、複数のピンホール21Aに対応する複数の光透過ホールを有している。ピンホールマスク映像Ibにおいて、各光透過ホールに対応する箇所は白輝度の箇所であり、各光透過ホール以外の箇所は全て黒輝度の箇所である。表示パネル11は、例えば、図16Bの各図に記載の表示画像に、図16Cの各図に記載のピンホールマスク映像Ibを重畳することにより得られた画像を光出射面10Aに表示する。
信号処理部13は、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正を映像信号に対して行う。
例えば、図16Aの左側の図では、観察者(瞳孔120)の変位量がほぼゼロとなっている。そこで、信号処理部13は、観察者が視認する映像の位置を、キャリブレーションデータ14Cに基づいて調整する補正(第1補正)を映像信号に対して行う。さらに、信号処理部13は、ピンホールマスク映像Ibを重畳する補正(第2補正)を、第1補正の前もしくは後の映像信号に対して行う。その結果、画像Iaは、認識画像における所定位置(例えば中央位置)で視認される。
例えば、図16Aの中央の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分程度の大きさだけ左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、観察者が視認する映像の位置を、観察者(瞳孔120)の左方向への変位量と、キャリブレーションデータ14Cとに基づいて調整する補正(第1補正)を映像信号に対して行う。さらに、信号処理部13は、ピンホールマスク映像Ibを重畳する補正(第2補正)を、第1補正の前もしくは後の映像信号に対して行う。その結果、認識画像中の画像Iaの変位が、観察者(瞳孔120)の変位と、表示画像中の画像Iaの変位とによって相殺され、画像Iaが、図18Cの左側の図とほとんど同じ位置で視認される。
例えば、図18Aの右側の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分の大きさを超えて左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、まず、観察者(瞳孔120)の左方向への変位量から、瞳孔120のサイズの半分の大きさを減算し、それにより差分値を導出する。その上で、信号処理部13は、観察者が視認する映像の位置を、右方向(瞳孔120内での光束L2の変位方向とは逆方向)への変位量(上記差分値)と、キャリブレーションデータ14Cとに基づいて調整する補正(第1補正)を映像信号に対して行う。さらに、信号処理部13は、ピンホールマスク映像Ibを重畳する補正(第2補正)を、第1補正の前もしくは後の映像信号に対して行う。その結果、画像Iaは、図18Cの左側の図とほとんど同じ位置で視認される。
このように、信号処理部13は、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、映像信号に対して補正を行う。これにより、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合う。
[効果]
次に、本実施の形態の表示システム2の効果について説明する。
次に、本実施の形態の表示システム2の効果について説明する。
本実施の形態では、ピンホールマスク映像Ibによって形成される光束L2の、観察者の瞳孔120への入射位置が、入力された画像に含まれる観察者(具体的には瞳孔120)の変位に基づいて調整される。具体的には、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(具体的には瞳孔120の変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正が映像信号に対して行われる。例えば、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、映像信号に対して補正が行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、マイクロレンズアレイ22およびピンホールマスク21は観察者の変位によって変位しない。そのため、映像光がピンホールマスク21を透過することにより生成される各光線L1の位置は、観察者の変位に追随せず一定のままである。従って、観察者が動いた場合には、各光線L1の重ね合わせによって形成される光束L2の、観察者の瞳孔120への入射位置が、観察者の変位方向とは逆方向に変位する。しかし、このときに、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位に基づいて調整する補正が映像信号に対して行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、マイクロレンズアレイ22を、厳密に光出射面10Aに位置決めする必要がない。それは、マイクロレンズアレイ22を直接または間接的に光出射面10Aに貼り合わせた上で、上述のキャリブレーションを行うことで、厳密な位置決めを不要にしているからである。これにより、マイクロレンズアレイ22を、端末装置10とは別体に設けることができる。その結果、端末装置10を複雑な構成にすることなく、像のぼやけを低減することができる。
<4.第3の実施の形態>
[構成]
次に、本開示の第3の実施の形態に係る表示システム3について説明する。図17は、表示システム3の斜視構成例を表したものである。表示システム3は、端末装置10および光学モジュール20を備えている。表示システム3において、光学モジュール20は、撮像部12で得られた画像に含まれる観察者の変位に基づいてピンホールマスク21を変位させる駆動部24,25を有している。本実施の形態では、ピンホールマスク21、マイクロレンズアレイ22および駆動部24,25は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
[構成]
次に、本開示の第3の実施の形態に係る表示システム3について説明する。図17は、表示システム3の斜視構成例を表したものである。表示システム3は、端末装置10および光学モジュール20を備えている。表示システム3において、光学モジュール20は、撮像部12で得られた画像に含まれる観察者の変位に基づいてピンホールマスク21を変位させる駆動部24,25を有している。本実施の形態では、ピンホールマスク21、マイクロレンズアレイ22および駆動部24,25は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
駆動部24は、ピンホールマスク21を、光出射面10Aと平行な第1の方向に変位させる。駆動部25は、ピンホールマスク21を、光出射面10Aと平行な方向であって、かつ第1の方向と直交する方向に変位させる。また、表示システム3において、信号処理部13は、入力された画像に含まれる観察者(具体的には瞳孔120)の位置の変位に応じた処理を映像信号に対して行わない。
(調整)
図18Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図18Bは、表示画像の変化の一例を表したものである。図18Cは、認識画像の変化の一例を表したものである。
図18Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図18Bは、表示画像の変化の一例を表したものである。図18Cは、認識画像の変化の一例を表したものである。
図18Aの図は、紙面の奥から手前に向かって進行してきた光束L2が瞳孔120に入射している例を示したものである。図18Aの左側の図は、光束L2が瞳孔120の中央に入射している例を示したものである。図18Aの中央の図は、光束L2が瞳孔120の中央から右側の外縁付近に移動した例を示したものである。図18Aの右側の図は、光束L2が瞳孔120の右側の外縁に飛び出すとともに、隣接する他の光束L2が瞳孔120に入射し始めた例を示したものである。図18Aの中央の図および図18Aの右側の図に記載の矢印は、『瞳孔120内での光束L2の移動方向』を示したものである。従って、図18Aの右側の図の矢印は、1つの光束L2が実際に瞳孔120の右端から左端に移動したことを示している訳ではなく、瞳孔120内で1つの光束L2が移動したように見える方向を示している。
図18Bにおける各図は、外部から入力された映像信号に対応する画像(表示画像)であり、互いに同じ画像である。図18Cの左側の図は、観察者が移動していないときのピンホールマスク21の配置である。図18Cの中央の図は、観察者が右方向に少し移動したときのピンホールマスク21の配置である。図18Cの中央の図には、図18Cの左側の図と比べて、ピンホールマスク21が少し左側にずれている例が示されている。図18Cの右側の図は、観察者が右方向に大きく移動したときのピンホールマスク21の配置である。図18Cの右側の図には、図18Cの左側の図と比べて、ピンホールマスク21が少し右側にずれている例が示されている。
駆動部24,25は、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正を映像信号に対して行う。
例えば、図18Aの左側の図では、観察者(瞳孔120)の変位量がほぼゼロとなっている。そこで、駆動部24,25は、観察者が視認する映像の位置を、キャリブレーションデータ14Cに基づいて調整する補正を、ピンホールマスク21を制御するための信号(制御信号)に対して行う。その結果、画像Iaは、認識画像における所定位置(例えば中央位置)で視認される(図12Cの左側の図参照)。
例えば、図18Aの中央の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分程度の大きさだけ左方向(光束L2の変位方向とは逆方向)に変位している。そこで、駆動部24,25は、観察者が視認する映像の位置を、観察者(瞳孔120)の左方向への変位量と、キャリブレーションデータ14Cとに基づいて調整する補正を、ピンホールマスク21を制御するための信号(制御信号)に対して行う。その結果、認識画像中の画像Iaの変位が、観察者(瞳孔120)の変位と、表示画像中の画像Iaの変位とによって相殺され、画像Iaが、図18Cの左側の図とほとんど同じ位置で視認される。
例えば、図18Aの右側の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分の大きさを超えて左方向(光束L2の変位方向とは逆方向)に変位している。そこで、駆動部24,25は、まず、観察者(瞳孔120)の左方向への変位量から、瞳孔120のサイズの半分の大きさを減算し、それにより差分値を導出する。その上で、駆動部24,25は、観察者が視認する映像の位置を、右方向(瞳孔120内での光束L2の変位方向とは逆方向)への変位量(上記差分値)と、キャリブレーションデータ14Cとに基づいて調整する補正を、ピンホールマスク21を制御するための信号(制御信号)に対して行う。その結果、画像Iaは、図18Cの左側の図とほとんど同じ位置で視認される。
このように、駆動部24,25は、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、ピンホールマスク21を制御するための信号(制御信号)に対して補正を行う。これにより、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合う。
[効果]
次に、本実施の形態の表示システム2の効果について説明する。
次に、本実施の形態の表示システム2の効果について説明する。
本実施の形態では、ピンホールマスク21によって形成される光束L2の、観察者の瞳孔120への入射位置が、入力された画像に含まれる観察者(具体的には瞳孔120)の変位に基づいて調整される。具体的には、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(具体的には瞳孔120の変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正がピンホールマスク21を制御するための信号(制御信号)に対して行われる。例えば、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、ピンホールマスク21を制御するための信号(制御信号)に対して補正が行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、ピンホールマスク21が、撮像部12で得られた画像に含まれる観察者の変位に基づいて変位する。これにより、映像光がピンホールマスク21を透過することにより生成される各光線L1の光路が、撮像部12で得られた画像に含まれる観察者の変位に基づいて変位する。従って、観察者が動いた場合には、例えば、各光線L1の重ね合わせによって形成される光束L2が、観察者の変位に追随して変位する。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、マイクロレンズアレイ22を、厳密に光出射面10Aに位置決めする必要がない。それは、マイクロレンズアレイ22を直接または間接的に光出射面10Aに貼り合わせた上で、上述のキャリブレーションを行うことで、厳密な位置決めを不要にしているからである。これにより、マイクロレンズアレイ22、ピンホールマスク21および駆動部24,25を、端末装置10とは別体に設けることができる。その結果、端末装置10を複雑な構成にすることなく、像のぼやけを低減することができる。
<5.第3の実施の形態の変形例>
上記第3の実施の形態において、光学モジュール20は、例えば、図19に示したように、ピンホールマスク21を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。本実施の形態では、ピンホールマスク21、マイクロレンズアレイ22および駆動部23,24,25は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
上記第3の実施の形態において、光学モジュール20は、例えば、図19に示したように、ピンホールマスク21を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。本実施の形態では、ピンホールマスク21、マイクロレンズアレイ22および駆動部23,24,25は一体に形成されている。ピンホールマスク21は、直接または間接的に光出射面10Aに貼り合わされている。
ピンホールマスク21が光出射面10Aと垂直な方向に変位すると、各光線L1の集光位置が変化する。従って、観察者は、ピンホールマスク21の、光出射面10Aと垂直な方向の位置を変位させることで、画像Iaのピントを容易に合わせることができる。観察者は、例えば、キャリブレーション時に、サンプル画像14Bに含まれるゲージを用いて、観察者が見やすい位置に、サンプル画像14Bに含まれる認識画像の位置(具体的には面内位置)を調整するとともに、認識画像のピントを調整する。
<6.第4の実施の形態>
[構成]
次に、本開示の第4の実施の形態に係る表示システム4について説明する。図20は、表示システム4の斜視構成例を表したものである。表示システム4は、端末装置10および光学モジュール20を備えている。表示システム4において、光学モジュール20は、ピンホールマスク21の代わりに光変調パネル26を有している。光変調パネル26は、光出射面10Aとマイクロレンズアレイ22との間に設けられている。光変調パネル26は、任意の遮光領域を生成可能な光透過型の光変調領域26Aを有しており、例えば、液晶パネルによって構成されている。光変調パネル26は、有線または無線を介して、信号処理部13によって駆動される。本実施の形態では、ピンホールマスク21および光変調パネル26は一体に形成されている。光変調パネル26は、直接または間接的に光出射面10Aに貼り合わされている。
[構成]
次に、本開示の第4の実施の形態に係る表示システム4について説明する。図20は、表示システム4の斜視構成例を表したものである。表示システム4は、端末装置10および光学モジュール20を備えている。表示システム4において、光学モジュール20は、ピンホールマスク21の代わりに光変調パネル26を有している。光変調パネル26は、光出射面10Aとマイクロレンズアレイ22との間に設けられている。光変調パネル26は、任意の遮光領域を生成可能な光透過型の光変調領域26Aを有しており、例えば、液晶パネルによって構成されている。光変調パネル26は、有線または無線を介して、信号処理部13によって駆動される。本実施の形態では、ピンホールマスク21および光変調パネル26は一体に形成されている。光変調パネル26は、直接または間接的に光出射面10Aに貼り合わされている。
信号処理部13は、光変調パネル26用の映像信号を光変調パネル26に出力する。信号処理部13は、ピンホールマスク状の遮光領域を光変調パネル26の光変調領域26Aに生成させるとともに、遮光領域における各ピンホールの位置を、撮像部12で得られた画像に含まれる観察者の変位に基づいて変位させる。
(調整)
図21Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図21Bは、表示画像の変化の一例を表したものである。図21Cは、認識画像の変化の一例を表したものである。
図21Aは、瞳孔120と光束L2の位置関係の一例を表したものである。図21Bは、表示画像の変化の一例を表したものである。図21Cは、認識画像の変化の一例を表したものである。
図21Aの図は、紙面の奥から手前に向かって進行してきた光束L2が瞳孔120に入射している例を示したものである。図21Aの左側の図は、光束L2が瞳孔120の中央に入射している例を示したものである。図21Aの中央の図は、光束L2が瞳孔120の中央から右側の外縁付近に移動した例を示したものである。図21Aの右側の図は、光束L2が瞳孔120の右側の外縁に飛び出すとともに、隣接する他の光束L2が瞳孔120に入射し始めた例を示したものである。図21Aの中央の図および図21Aの右側の図に記載の矢印は、『瞳孔120内での光束L2の移動方向』を示したものである。従って、図21Aの右側の図の矢印は、1つの光束L2が実際に瞳孔120の右端から左端に移動したことを示している訳ではなく、瞳孔120内で1つの光束L2が移動したように見える方向を示している。
図21Bにおける各図は、外部から入力された映像信号に対応する画像(表示画像)であり、互いに同じ画像である。図21Cの左側の図は、観察者が移動していないときに光変調パネル26に表示された画像(ピンホールマスク映像Ib)である。図21Cの中央の図は、観察者が右方向に少し移動したときに光変調パネル26に表示された画像(ピンホールマスク映像Ib)である。図21Cの中央の図には、図21Cの左側の図と比べて、ピンホールマスク映像Ibが少し左側にずれている例が示されている。図21Cの右側の図は、観察者が右方向に大きく移動したときに光変調パネル26に表示された画像(ピンホールマスク映像Ib)である。図21Cの右側の図には、図21Cの左側の図と比べて、ピンホールマスク映像Ibが少し右側にずれている例が示されている。
ピンホールマスク映像Ibは、ピンホールマスク21と同様の面内プロファイルを有している。ピンホールマスク映像Ibは、複数のピンホール21Aに対応する複数の光透過ホールを有している。ピンホールマスク映像Ibにおいて、各光透過ホールに対応する箇所は白輝度の箇所であり、各光透過ホール以外の箇所は全て黒輝度の箇所である。光変調パネル26は、例えば、図21Bの各図に記載の表示画像に対応する映像光を、図21Cの各図に記載のピンホールマスク映像Ibによって複数の光線L1に変換する。
信号処理部13は、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正を、光変調パネル26用の映像信号に対して行う。
例えば、図21Aの左側の図では、観察者(瞳孔120)の変位量がほぼゼロとなっている。そこで、信号処理部13は、観察者が視認する映像の位置を、キャリブレーションデータ14Cに基づいて調整する補正を、光変調パネル26用の映像信号に対して行う。その結果、画像Iaは、認識画像における所定位置(例えば中央位置)で視認される(図12Cの左側の図参照)。
例えば、図21Aの中央の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分程度の大きさだけ左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、観察者が視認する映像の位置を、観察者(瞳孔120)の左方向への変位量と、キャリブレーションデータ14Cとに基づいて調整する補正を、光変調パネル26用の映像信号に対して行う。その結果、認識画像中の画像Iaの変位が、観察者(瞳孔120)の変位と、表示画像中の画像Iaの変位とによって相殺され、画像Iaが、図18Cの左側の図とほとんど同じ位置で視認される。
例えば、図21Aの右側の図では、観察者(瞳孔120)が、瞳孔120のサイズの半分の大きさを超えて左方向(光束L2の変位方向とは逆方向)に変位している。そこで、信号処理部13は、まず、観察者(瞳孔120)の左方向への変位量から、瞳孔120のサイズの半分の大きさを減算し、それにより差分値を導出する。その上で、信号処理部13は、観察者が視認する映像の位置を、右方向(瞳孔120内での光束L2の変位方向とは逆方向)への変位量(上記差分値)と、キャリブレーションデータ14Cとに基づいて調整する補正を、光変調パネル26用の映像信号に対して行う。その結果、画像Iaは、図18Cの左側の図とほとんど同じ位置で視認される。
このように、駆動部24,25は、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、光変調パネル26用の映像信号に対して補正を行う。これにより、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合う。
[効果]
次に、本実施の形態の表示システム4の効果について説明する。
次に、本実施の形態の表示システム4の効果について説明する。
本実施の形態では、ピンホールマスク映像Ibによって形成される光束L2の、観察者の瞳孔120への入射位置が、入力された画像に含まれる観察者(具体的には瞳孔120)の変位に基づいて調整される。具体的には、観察者が視認する映像の位置を、撮像部12で得られた画像に含まれる観察者の変位(具体的には瞳孔120の変位量)と、キャリブレーションデータ14Cとに基づいて調整する補正が、光変調パネル26用の映像信号に対して行われる。例えば、認識画像中の画像Iaが光束L2の瞳孔120内における位置に依らず、同じ位置もしくは略同じ位置で視認されるよう、光変調パネル26用の映像信号に対して補正が行われる。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、ピンホールマスク状の遮光領域における各ピンホールが、撮像部12で得られた画像に含まれる観察者の変位に基づいて変位する。これにより、映像光が各ピンホールを透過することにより生成される各光線L1の光路が、撮像部12で得られた画像に含まれる観察者の変位に基づいて変位する。これにより、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。その結果、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
また、本実施の形態では、マイクロレンズアレイ22を、厳密に光出射面10Aに位置決めする必要がない。それは、マイクロレンズアレイ22を直接または間接的に光出射面10Aに貼り合わせた上で、上述のキャリブレーションを行うことで、厳密な位置決めを不要にしているからである。これにより、マイクロレンズアレイ22および光変調パネル26を、端末装置10とは別体に設けることができる。その結果、端末装置10を複雑な構成にすることなく、像のぼやけを低減することができる。
<7.第1および第3の実施の形態の変形例>
上記第1の実施の形態において、光学モジュール20は、例えば、図22に示したように、マイクロレンズアレイ22を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。
上記第1の実施の形態において、光学モジュール20は、例えば、図22に示したように、マイクロレンズアレイ22を光出射面10Aと垂直な方向に変位させる駆動部23をさらに有していてもよい。
マイクロレンズアレイ22が光出射面10Aと垂直な方向に変位すると、各光線L1の集光位置が変化する。従って、観察者は、マイクロレンズアレイ22の、光出射面10Aと垂直な方向の位置を変位させることで、画像Iaのピントを容易に合わせることができる。観察者は、例えば、キャリブレーション時に、サンプル画像14Bに含まれるゲージを用いて、観察者が見やすい位置に、サンプル画像14Bに含まれる認識画像の位置(具体的には面内位置)を調整するとともに、認識画像のピントを調整する。
また、上記第3の実施の形態およびその変形例において、例えば、図23、図24に示したように、撮像部12で得られた画像に含まれる観察者の変位に基づいてマイクロレンズアレイ22を変位させる駆動部24,25を有している。駆動部24は、ピンホールマスク21を、光出射面10Aと平行な第1の方向に変位させる。駆動部25は、ピンホールマスク21を、光出射面10Aと平行な方向であって、かつ第1の方向と直交する方向に変位させる。
従って、本変形例においても、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。従って、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
<7.第5の実施の形態>
次に、本開示の第5の実施の形態に係る電子機器5について説明する。図25は、本実施の形態に係る電子機器5の斜視構成例を表したものである。電子機器5は、例えば、折りたたみ可能な2枚の板状の筐体のうちの一方の筐体の主面に表示面5Aを備えたノート型のパーソナルコンピュータである。電子機器5は、例えば、表示面5Aの位置に、上記各実施の形態およびその変形例に係る光出射面10Aを備えており、表示面5Aに直接または間接的に貼り合わされた光学モジュール20を備えている。端末装置10に含まれる各構成は、電子機器5内の所定の箇所に内蔵されている。なお、図26に示したように、撮像部12が電子機器5の本体とは別体で設けられていてもよい。この場合、撮像部12は、有線または無線を介して、電子機器5の本体と通信可能になっている。
次に、本開示の第5の実施の形態に係る電子機器5について説明する。図25は、本実施の形態に係る電子機器5の斜視構成例を表したものである。電子機器5は、例えば、折りたたみ可能な2枚の板状の筐体のうちの一方の筐体の主面に表示面5Aを備えたノート型のパーソナルコンピュータである。電子機器5は、例えば、表示面5Aの位置に、上記各実施の形態およびその変形例に係る光出射面10Aを備えており、表示面5Aに直接または間接的に貼り合わされた光学モジュール20を備えている。端末装置10に含まれる各構成は、電子機器5内の所定の箇所に内蔵されている。なお、図26に示したように、撮像部12が電子機器5の本体とは別体で設けられていてもよい。この場合、撮像部12は、有線または無線を介して、電子機器5の本体と通信可能になっている。
本実施の形態においても、観察者が認識する画像Iaの位置が光束L2の、観察者の瞳孔120への入射位置に依りにくくすることができる。従って、2つ以上の光束L2が瞳孔120に入射した場合であっても、各光束L2によって生成される画像Ia同士が互いに重なり合うので、像のぼやけを低減することができる。
以上、5つの実施の形態およびそれらの変形例を挙げて本開示を説明したが、本開示は上記実施の形態等に限定されるものではなく、種々変形が可能である。なお、本明細書中に記載された効果は、あくまで例示である。本開示の効果は、本明細書中に記載された効果に限定されるものではない。本開示が、本明細書中に記載された効果以外の効果を持っていてもよい。
例えば、上記各実施の形態において、光学モジュール20は、外光の反射を防止するための反射防止層を備えていてもよい。反射防止層は、例えば、屈折率の互いに異なる複数の薄膜が重ね合わされた多層膜、または、マイクロレンズアレイ22などの表面に設けられた微細な凹凸によって構成されている。反射防止層は、光学モジュール20内に存在する、材質の互いに異なる界面の位置、または、光学モジュール20において大気に接する表面の位置に設けられている。光学モジュール20内に、材質の互いに異なる複数の界面が存在する場合には、反射防止層は、複数の界面のうち、少なくとも1つの界面の位置に設けられている。
また、例えば、本開示は以下のような構成を取ることができる。
(1)
光出射面から映像光を出射する表示部を備え、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
表示システム。
(2)
前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて調整する補正を映像信号に対して行う信号処理部と、
前記光出射面を有し、補正後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
(1)に記載の表示システム。
(3)
前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる駆動部をさらに備えた
(2)に記載の表示システム。
(4)
前記マイクロレンズアレイおよび前記ピンホールマスクは一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
(2)または(3)に記載の表示システム。
(5)
前記表示部は、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホール映像を重畳する第2補正を、前記第1補正の前もしくは後の前記映像信号に対して行う信号処理部と、
前記光出射面を有し、前記第1補正および前記第2補正のなされた後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
(1)に記載の表示システム。
(6)
前記表示部は、前記光出射面と対向する位置に設けられたマイクロレンズアレイをさらに有し、
前記マイクロレンズアレイは、直接または間接的に前記光出射面に貼り合わされている
(5)に記載の表示システム。
(7)
前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記光出射面を有し、映像信号に基づいて前記映像光を生成する表示パネルと、
前記撮像部で得られた画像に含まれる観察者の変位に基づいて前記マイクロレンズアレイまたは前記ピンホールマスクを変位させる第1駆動部と
を有する
(1)に記載の表示システム。
(8)
前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる第2駆動部をさらに備えた
(7)に記載の表示システム。
(9)
前記マイクロレンズアレイ、前記ピンホールマスクおよび前記駆動部は一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
(7)または(8)に記載の表示システム。
(10)
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられた、任意の遮光領域を生成可能な光透過型の光変調パネルと、
ピンホールマスク状の遮光領域を前記光変調パネルに生成させるとともに、前記遮光領域における各ピンホールの位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて変位させる駆動部と
をさらに備えた
(1)に記載の表示システム。
(11)
前記マイクロレンズアレイおよび前記光変調パネルは一体に形成され、
前記光変調パネルは、直接または間接的に前記光出射面に貼り合わされている
(10)に記載の表示システム。
(12)
前記光出射面から所定の距離だけ離れた観察面を撮像する撮像部をさらに備えた
(1)ないし(11)のいずれか一項に記載の表示システム。
(13)
表示システムを備え、
前記表示システムは、光出射面から映像光を出射する表示部を有し、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
電子機器。
(1)
光出射面から映像光を出射する表示部を備え、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
表示システム。
(2)
前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて調整する補正を映像信号に対して行う信号処理部と、
前記光出射面を有し、補正後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
(1)に記載の表示システム。
(3)
前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる駆動部をさらに備えた
(2)に記載の表示システム。
(4)
前記マイクロレンズアレイおよび前記ピンホールマスクは一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
(2)または(3)に記載の表示システム。
(5)
前記表示部は、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホール映像を重畳する第2補正を、前記第1補正の前もしくは後の前記映像信号に対して行う信号処理部と、
前記光出射面を有し、前記第1補正および前記第2補正のなされた後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
(1)に記載の表示システム。
(6)
前記表示部は、前記光出射面と対向する位置に設けられたマイクロレンズアレイをさらに有し、
前記マイクロレンズアレイは、直接または間接的に前記光出射面に貼り合わされている
(5)に記載の表示システム。
(7)
前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記光出射面を有し、映像信号に基づいて前記映像光を生成する表示パネルと、
前記撮像部で得られた画像に含まれる観察者の変位に基づいて前記マイクロレンズアレイまたは前記ピンホールマスクを変位させる第1駆動部と
を有する
(1)に記載の表示システム。
(8)
前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる第2駆動部をさらに備えた
(7)に記載の表示システム。
(9)
前記マイクロレンズアレイ、前記ピンホールマスクおよび前記駆動部は一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
(7)または(8)に記載の表示システム。
(10)
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられた、任意の遮光領域を生成可能な光透過型の光変調パネルと、
ピンホールマスク状の遮光領域を前記光変調パネルに生成させるとともに、前記遮光領域における各ピンホールの位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて変位させる駆動部と
をさらに備えた
(1)に記載の表示システム。
(11)
前記マイクロレンズアレイおよび前記光変調パネルは一体に形成され、
前記光変調パネルは、直接または間接的に前記光出射面に貼り合わされている
(10)に記載の表示システム。
(12)
前記光出射面から所定の距離だけ離れた観察面を撮像する撮像部をさらに備えた
(1)ないし(11)のいずれか一項に記載の表示システム。
(13)
表示システムを備え、
前記表示システムは、光出射面から映像光を出射する表示部を有し、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
電子機器。
本出願は、日本国特許庁において2016年1月12日に出願された日本特許出願番号第2016-003711号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。
Claims (13)
- 光出射面から映像光を出射する表示部を備え、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
表示システム。 - 前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて調整する補正を映像信号に対して行う信号処理部と、
前記光出射面を有し、補正後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
請求項1に記載の表示システム。 - 前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる駆動部をさらに備えた
請求項2に記載の表示システム。 - 前記マイクロレンズアレイおよび前記ピンホールマスクは一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
請求項2に記載の表示システム。 - 前記表示部は、
前記観察者が視認する映像の位置を、前記撮像部で得られた画像に含まれる観察者の位置の変位に基づいて調整する第1補正を映像信号に対して行うとともに、ピンホール映像を重畳する第2補正を、前記第1補正の前もしくは後の前記映像信号に対して行う信号処理部と、
前記光出射面を有し、前記第1補正および前記第2補正のなされた後の前記映像信号に基づいて前記映像光を生成する表示パネルと
を有する
請求項1に記載の表示システム。 - 前記表示部は、前記光出射面と対向する位置に設けられたマイクロレンズアレイをさらに有し、
前記マイクロレンズアレイは、直接または間接的に前記光出射面に貼り合わされている
請求項5に記載の表示システム。 - 前記表示部は、
前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられたピンホールマスクと、
前記光出射面を有し、映像信号に基づいて前記映像光を生成する表示パネルと、
前記撮像部で得られた画像に含まれる観察者の変位に基づいて前記マイクロレンズアレイまたは前記ピンホールマスクを変位させる第1駆動部と
を有する
請求項1に記載の表示システム。 - 前記表示部は、前記マイクロレンズアレイまたは前記ピンホールマスクを前記光出射面と垂直な方向に変位させる第2駆動部をさらに備えた
請求項7に記載の表示システム。 - 前記マイクロレンズアレイ、前記ピンホールマスクおよび前記駆動部は一体に形成され、
前記ピンホールマスクは、直接または間接的に前記光出射面に貼り合わされている
請求項7に記載の表示システム。 - 前記光出射面と対向する位置に設けられたマイクロレンズアレイと、
前記光出射面と前記マイクロレンズアレイとの間に設けられた、任意の遮光領域を生成可能な光透過型の光変調パネルと、
ピンホールマスク状の遮光領域を前記光変調パネルに生成させるとともに、前記遮光領域における各ピンホールの位置を、前記撮像部で得られた画像に含まれる観察者の変位に基づいて変位させる駆動部と
をさらに備えた
請求項1に記載の表示システム。 - 前記マイクロレンズアレイおよび前記光変調パネルは一体に形成され、
前記光変調パネルは、直接または間接的に前記光出射面に貼り合わされている
請求項10に記載の表示システム。 - 前記光出射面から所定の距離だけ離れた観察面を撮像する撮像部をさらに備えた
請求項1に記載の表示システム。 - 表示システムを備え、
前記表示システムは、光出射面から映像光を出射する表示部を有し、
前記表示部は、前記映像光として、瞳孔径よりも狭い径の複数の光線を出射するとともに、前記光出射面と対向する位置にマイクロレンズアレイが設けられたときに前記マイクロレンズアレイによる複数の前記光線の重ね合わせにより形成される光束が観察者の瞳に入射することにより前記観察者が視認する映像の位置を、入力された画像に含まれる観察者の変位に基づいて調整する
電子機器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017561527A JP6787344B2 (ja) | 2016-01-12 | 2016-11-16 | 表示システムおよび電子機器 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-003711 | 2016-01-12 | ||
JP2016003711 | 2016-01-12 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017122427A1 true WO2017122427A1 (ja) | 2017-07-20 |
Family
ID=59311147
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2016/083912 WO2017122427A1 (ja) | 2016-01-12 | 2016-11-16 | 表示システムおよび電子機器 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6787344B2 (ja) |
WO (1) | WO2017122427A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011100090A (ja) * | 2009-10-07 | 2011-05-19 | Olympus Corp | 表示方法、表示装置、光学ユニット、表示装置の製造方法、及び電子機器 |
WO2012137532A1 (ja) * | 2011-04-04 | 2012-10-11 | オリンパス株式会社 | 表示装置、その表示装置を備えた電子機器、及び投影ユニット |
WO2013118328A1 (ja) * | 2012-02-07 | 2013-08-15 | オリンパス株式会社 | 表示装置、電子機器及び表示装置用プログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20200092424A (ko) * | 2014-03-03 | 2020-08-03 | 아이웨이 비전 엘티디. | 눈 투영 시스템 |
-
2016
- 2016-11-16 WO PCT/JP2016/083912 patent/WO2017122427A1/ja active Application Filing
- 2016-11-16 JP JP2017561527A patent/JP6787344B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011100090A (ja) * | 2009-10-07 | 2011-05-19 | Olympus Corp | 表示方法、表示装置、光学ユニット、表示装置の製造方法、及び電子機器 |
WO2012137532A1 (ja) * | 2011-04-04 | 2012-10-11 | オリンパス株式会社 | 表示装置、その表示装置を備えた電子機器、及び投影ユニット |
WO2013118328A1 (ja) * | 2012-02-07 | 2013-08-15 | オリンパス株式会社 | 表示装置、電子機器及び表示装置用プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6787344B2 (ja) | 2020-11-18 |
JPWO2017122427A1 (ja) | 2018-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2583465B1 (en) | Projection display and method of displaying an overall picture | |
JP6171425B2 (ja) | 虚像表示装置 | |
US8777424B2 (en) | Projection display having kohler illumination of projection lenses | |
JP5732808B2 (ja) | 虚像表示装置 | |
JP7202777B2 (ja) | 接眼ディスプレイ | |
JP6699650B2 (ja) | 光学シート、表示装置および電子機器 | |
TWI300493B (ja) | ||
EP3009882A2 (en) | Electro optic disply device | |
JP2015518575A (ja) | 投写ディスプレイおよび全体画像を投写する方法 | |
JP7191670B2 (ja) | 電子機器 | |
WO2018045832A1 (zh) | 虚拟曲面显示面板、显示装置及显示方法 | |
US20210191128A1 (en) | Light field near eye display device | |
US20150362637A1 (en) | Electro-optical device and electronic apparatus | |
US8525957B2 (en) | Display apparatus, electronic equipment, mobile electronic equipment, mobile telephone, and image pickup apparatus | |
JP2013037260A (ja) | 虚像表示装置 | |
JP2016145956A (ja) | 光学装置並びにそれを備えた頭部装着型画像表示装置及び撮像装置 | |
EP3441804B1 (en) | Optical low-pass filter and imaging apparatus | |
US20170099483A1 (en) | Method and system using refractive beam mapper to reduce moire interference in a display system including multiple displays | |
JP6369530B2 (ja) | 虚像表示装置 | |
WO2017122427A1 (ja) | 表示システムおよび電子機器 | |
WO2016194437A1 (ja) | 光学シート、表示装置および電子機器 | |
JP2016177128A (ja) | プロジェクター |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16885030 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2017561527 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 16885030 Country of ref document: EP Kind code of ref document: A1 |