WO2016139976A1 - 情報処理装置、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理方法およびプログラム Download PDF

Info

Publication number
WO2016139976A1
WO2016139976A1 PCT/JP2016/051225 JP2016051225W WO2016139976A1 WO 2016139976 A1 WO2016139976 A1 WO 2016139976A1 JP 2016051225 W JP2016051225 W JP 2016051225W WO 2016139976 A1 WO2016139976 A1 WO 2016139976A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
image
processing apparatus
information processing
user
Prior art date
Application number
PCT/JP2016/051225
Other languages
English (en)
French (fr)
Inventor
翼 塚原
ヨナ チョ
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Publication of WO2016139976A1 publication Critical patent/WO2016139976A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02Viewing or reading apparatus
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/64Constructional details of receivers, e.g. cabinets or dust covers

Definitions

  • This disclosure relates to an information processing apparatus, an information processing method, and a program.
  • Such an information processing apparatus is called, for example, an HMD (Head Mount Display), and has a function of displaying an image to a user wearing the HMD.
  • HMD Head Mount Display
  • Various optical systems are used to realize the display function of the HMD.
  • Patent Document 1 includes an eyepiece optical system including an eyepiece window through which image light is emitted toward the user's eyes and a holding member that holds the eyepiece window in front of the user's eyes, and includes a projection cross section of the holding member.
  • An invention relating to an eyeglass-type image display device having a width smaller than an average pupil diameter of a human being is disclosed.
  • light is emitted toward the user's pupil based on the information acquisition unit that acquires exercise state information indicating the user's exercise state and the exercise state information acquired by the information acquisition unit.
  • a display control unit that performs display control of an image displayed by an eyepiece optical system whose length in a direction shorter than the other direction of the region is equal to or shorter than the upper limit of variation of the pupil diameter.
  • a processing device is provided.
  • it is longer than the other directions in which the light is emitted toward the pupil of the user based on the movement state information indicating the user's movement state and the movement state information. And performing display control of an image displayed by an eyepiece optical system whose length in the short direction is not more than the upper limit of variation of the pupil diameter.
  • light is emitted toward the user's pupil based on the information acquisition function for acquiring exercise state information indicating the user's exercise state and the exercise state information acquired by the information acquisition function.
  • a display control function for performing display control of an image displayed by an eyepiece optical system in which the length in a direction shorter than the other direction of the region to be displayed is a length equal to or less than the upper limit of variation in the diameter of the pupil.
  • a program for causing a computer to be realized is provided.
  • the length of the direction in which the light is emitted toward the user's pupil is shorter than the other direction of the region, and the length is not more than the upper limit of the pupil diameter variation.
  • An information processing apparatus, information processing method, and program capable of maintaining the visibility of an image displayed by a certain eyepiece optical system are provided. Note that the above effects are not necessarily limited, and any of the effects shown in the present specification, or other effects that can be grasped from the present specification, together with or in place of the above effects. May be played.
  • FIG. 2 is a perspective view illustrating a schematic physical configuration example of an information processing apparatus according to a first embodiment of the present disclosure.
  • FIG. It is sectional drawing which shows the schematic physical structural example of the information processing apparatus which concerns on this embodiment. It is a figure which shows the example of the state with which the information processing apparatus which concerns on this embodiment was mounted
  • FIG. 1 is a diagram for describing an overview of an information processing apparatus according to an embodiment of the present disclosure.
  • the information processing apparatus 100 has an image display function and is worn on the head of a human body. Specifically, the information processing apparatus 100 emits image light directly through the lens toward the user's eyes as an image display function, and the virtual image formed is recognized by the user as an image. Furthermore, when the information processing apparatus 100 is worn by the user, an eyepiece optical system that emits image light positioned in front of the user's eyes is smaller than the average pupil diameter of humans. For this reason, not only image light but also external light is incident on the pupil of the user wearing the information processing apparatus 100, so that both the image and the external world enter the user's visual field.
  • the information processing apparatus 100 includes a main body 102, an arm 104, and a lens barrel 106 having an eyepiece window for emitting image light.
  • the lens barrel 106 serves as an eyepiece optical system.
  • the length of the lens barrel 106 is shorter than the other direction of the region in which light is emitted toward the user's pupil (hereinafter referred to as the short direction). (Also referred to as the length of the width) is smaller than the pupil diameter.
  • the information processing apparatus 100 can be attached to the glasses 200 or the like.
  • the pupil diameter varies depending on various factors. For example, the pupil diameter changes according to the illuminance around the person. The higher the illuminance, that is, the brighter the pupil diameter, the smaller the pupil diameter, and the lower the illuminance, that is, the darker the pupil diameter.
  • the pupil diameter becomes smaller than the size of the eyepiece optical system depending on the ambient illuminance of the human, and the image light emitted from the eyepiece optical system There is a possibility that the visibility of the image according to the above will decrease.
  • the projection range of the image light may be out of the pupil.
  • the position of the pupil moves as the human gaze changes due to the movement, so that the projection range of the image light can deviate from the pupil.
  • the mounting position of the information processing apparatus 100 may change due to vibration generated by movement, which may cause the image light projection range to deviate from the pupil. For this reason, a part or all of image light is no longer irradiated to the pupil by the user's movement, so that the visibility of the image related to the image light may be lowered.
  • display is performed by an eyepiece optical system in which the length in a direction shorter than the other direction of the region in which light is emitted toward the user's pupil is equal to or shorter than the upper limit of pupil diameter variation.
  • An information processing apparatus 100 that can maintain the visibility of an image to be displayed is proposed.
  • the information processing apparatus 100 will be described in detail.
  • each of the information processing apparatuses 100 according to the first and second embodiments is denoted by a number corresponding to the embodiment at the end like the information processing apparatuses 100-1 and 100-2. It distinguishes by attaching.
  • First Embodiment (Example of Display Control According to Pupil Diameter)> The overview of the information processing apparatus 100 according to an embodiment of the present disclosure has been described above. Subsequently, the information processing apparatus 100-1 according to the first embodiment of the present disclosure will be described.
  • the information processing apparatus 100-1 uses a direction whose length is shorter than the other direction of the region where the light is emitted toward the user's pupil based on information on the pupil diameter (hereinafter also referred to as pupil information). Display control of an image displayed by an eyepiece optical system whose length is equal to or shorter than the upper limit of variation of the pupil diameter is performed.
  • the information processing apparatus 100-1 includes a main body 102, an arm 104, and a lens barrel 106.
  • the main body 102 is connected to the arm 104 and the glasses 200. Specifically, the end of the main body 102 in the long side direction is coupled to the arm 104, and one side surface of the main body 102 is coupled to the glasses 200 via a connecting member.
  • the main body 102 may be directly attached to the head of a human body.
  • the main body 102 incorporates a control board for controlling the operation of the information processing apparatus 100-1.
  • the main body 102 has a control board having a CPU (Central Processing Unit) or a RAM (Random Access Memory) and is connected to the lens barrel 106 via the arm 104 using a signal line or the like. .
  • a CPU Central Processing Unit
  • RAM Random Access Memory
  • the arm 104 connects the main body 102 and the lens barrel 106 to support the lens barrel 106. Specifically, the arm 104 is coupled to the end of the main body 102 and the end of the lens barrel 106 to fix the lens barrel 106.
  • the arm 104 includes a signal line for communicating data related to an image provided from the main body 102 to the lens barrel 106.
  • the lens barrel 106 projects image light to the outside of the information processing apparatus 100-1. Specifically, the lens barrel 106 transmits image light provided from the main body 102 via the arm 104 to the outside of the information processing apparatus 100-1, that is, a user who wears the information processing apparatus 100-1 through an eyepiece. Project towards the eyes. Further, the physical configuration of the lens barrel 106 will be described in detail with reference to FIGS.
  • FIG. 2 is a perspective view showing an example of a schematic physical configuration of the information processing apparatus 100-1 according to the present embodiment.
  • FIG. 3 is a schematic physical diagram of the information processing apparatus 100-1 according to the present embodiment. It is sectional drawing which shows the example of a structure.
  • FIG. 4 is a diagram illustrating an example of a state in which the information processing apparatus 100-1 according to the present embodiment is attached to the user.
  • the lens barrel 106 includes a projection unit 108, a light guide unit 110, a reflection unit 112, and an eyepiece lens 114 as an eyepiece optical system.
  • the projection unit 108 emits image light toward the light guide unit 110.
  • the projection unit 108 is a display panel that displays an image provided from the main body unit 102 as illustrated in FIG. 3, and emits image light toward the light guide unit 110 by displaying the image.
  • the light guide unit 110 guides the incident image light to the reflection unit 112.
  • the light guide unit 110 is a columnar member as shown in FIG. 2, and the image light projected from the projection unit 108 leaks outside the information processing apparatus 100-1 as shown in FIG. The image light is guided so as to reach the reflecting portion 112 without.
  • the light guide unit 110 may be a cylindrical member that is hollow inside, or may be a transparent member that transmits image light.
  • the reflection unit 112 reflects the reaching image light toward the eyepiece lens 114.
  • the reflection unit 112 reflects the image light guided by the light guide unit 110 toward the position of the eyepiece lens 114.
  • the eyepiece 114 enlarges the image. Specifically, the eyepiece refracts the image light reflected by the reflecting unit 112 and enlarges the image related to the image light.
  • the lens barrel 106 is formed such that the length in a direction shorter than the other direction of the region where the light is emitted toward the user's pupil is equal to or shorter than the upper limit of the pupil diameter variation.
  • the lens barrel 106 is formed such that the width of the lens barrel 106 in the short direction is equal to or less than the average pupil diameter.
  • the lens barrel 106 is formed such that the length L2 of the width in the short direction of the lens barrel 106 is equal to or less than the average pupil diameter L1. Since the human pupil diameter L1 generally varies in the range of about 2 mm to 8 mm, L2 can be 8 mm or less, for example, 4 mm.
  • the shape of the lens barrel 106 that is, the region from which light is emitted, may be a circle, an ellipse, or another polygon in addition to a rectangle.
  • FIG. 5 is a block diagram illustrating an example of a schematic functional configuration of the information processing apparatus 100-1 according to the present embodiment.
  • the information processing apparatus 100-1 includes a pupil information acquisition unit 120, a display control unit 122, a storage unit 124, and a display unit 126, as shown in FIG.
  • the pupil information acquisition unit 120 acquires pupil information, that is, information related to an element that changes the pupil diameter (hereinafter also referred to as element information) as an information acquisition unit. Specifically, the pupil information acquisition unit 120 acquires information related to brightness around the information processing apparatus 100-1 as element information.
  • the pupil information acquisition unit 120 may be an illuminance sensor (illuminance meter) that acquires information indicating brightness around the information processing apparatus 100-1, that is, illuminance (hereinafter also referred to as illuminance information).
  • the pupil information acquisition unit 120 acquires illuminance information indicating the illuminance in the line of sight of the user wearing the information processing apparatus 100-1.
  • an illuminance sensor is provided so as to acquire illuminance information indicating the illuminance in the direction opposite to the projection direction of the optical system of the information processing apparatus 100-1.
  • the sensing direction of the illuminance sensor may be changed in accordance with the change in the projection direction of the image light.
  • the illuminance sensor can be attached to the lens barrel 106 such that the direction opposite to the projection direction of the image light from the eyepiece optical system, that is, the lens barrel 106 is the sensing direction.
  • the display control unit 122 performs display control of an image related to the projected image light. Specifically, the display control unit 122 controls the display mode of the image based on the pupil information. For example, the display control unit 122 controls the display position of the image on the display screen based on the pupil information. Further, the image display control process will be described in detail with reference to FIGS. 6 and 7.
  • FIG. 6 is a graph showing the relationship between pupil diameter and luminance
  • FIG. 7 is a diagram showing an example of each region on the display screen of the information processing apparatus 100-1 according to the present embodiment.
  • the pupil diameter changes according to the brightness of the light source, that is, the luminance.
  • the luminance For example, as shown in FIG. 6, the pupil diameter increases when the luminance is low and decreases when the luminance is high. Therefore, when the optical system is formed in accordance with the average pupil diameter, the pupil diameter is reduced in the short direction of the lens barrel 106 in a place where a light source having a brightness higher than the average pupil diameter is present. It becomes smaller than the length of the width, and the image light emitted from the optical system may be difficult to be incident on the pupil. As a result, the visibility of the image located at the edge of the display screen may be reduced.
  • the relationship between the pupil diameter and the luminance has been described. However, it is considered that the same tendency exists even when illuminance is used instead of luminance.
  • the display control unit 122 determines a displayable area on the display screen based on the pupil information. Specifically, the display screen of the image is divided into a safety area and a visibility reduction area, and the display control unit 122 determines the safety area based on the illuminance information acquired by the pupil information acquisition unit 120. Then, the display control unit 122 displays an image in the safety area.
  • the display control unit 122 determines a safe area having a size corresponding to the illuminance indicated by the illuminance information provided from the pupil information acquisition unit 120. For example, safe area information that can specify the size and position of the safe area corresponding to the illuminance information is stored in the storage unit 124. And the display control part 122 acquires the safe area
  • the safety area information corresponding to the illuminance information is set based on, for example, the pupil diameter at the illuminance indicated by the illuminance information and the width of the eyepiece optical system, that is, the width of the lens barrel 106 in the short direction.
  • the safety area information is such that b / a of the display screen is the safety area. Can be set.
  • the safety area is provided at the center of the display screen.
  • each area is divided with the horizontal direction of the display screen as the boundary line
  • the safety area is the area A2 located in the center of the display screen as shown in FIG. 7, and the area A1 other than the area A2 is the visibility reduction area. It becomes.
  • each region has the horizontal direction of the display screen as the boundary line.
  • each region may be divided using the vertical direction of the display screen as the boundary line.
  • the safety area may be arranged at a position other than the center of the display screen, for example, on the top, bottom, left, or right of the display screen.
  • the arrangement of the safety area may be dynamically changed based on the pupil information.
  • the display control unit 122 causes the display unit 126 to display an image such as an application activation icon as illustrated in FIG. Then, the display control unit 122 scrolls the activation icon in the horizontal direction in response to a user scroll instruction operation on an operation unit provided separately in the information processing apparatus 100-1.
  • the main body 102 provided with the operation unit is located in the user's temporal region, by scrolling in the horizontal direction, it is difficult for the user to feel uncomfortable with the display control performed in response to the operation. Is possible.
  • the frequently occurring movement is a vertical movement
  • scrolling in a horizontal direction different from the direction of the movement causes a sense of incongruity due to scrolling in the direction opposite to the user's own movement direction. It is also suppressed.
  • the display control unit 122 may move the activation icon in the depth direction and the front direction instead of scrolling or in combination with scrolling.
  • FIG. 8 is a diagram illustrating an example of a change in the safety area on the display screen of the information processing apparatus 100-1 according to the present embodiment.
  • the display control unit 122 determines the region A2 as shown in the left diagram of FIG. 8 as a safety region based on the illuminance indicated by the illuminance information acquired by the pupil information acquisition unit 120. Then, the display control unit 122 positions the image 10 with the characters “STANDBY” added to the end of the safety area A2.
  • the display control unit 122 is shown in the right diagram of FIG. 8, which is a region narrower than the safety region A2 at night based on the illuminance indicated by the illuminance information newly acquired by the pupil information acquisition unit 120.
  • the safety area is changed to the area A2 as shown.
  • the display control unit 122 changes the display position of the image 10 in accordance with the change of the safety area A2.
  • the display position of the image 10 positioned at the end of the safety area also changes according to the ambient illuminance.
  • the display control unit 122 may display only a specific image in the safe area. For example, as illustrated in FIG. 8, the display control unit 122 positions an image such as the image 10 having a higher display priority than the other images in the safe area, and the display priority is lower than the other images. An image such as the image 20 is displayed regardless of the safety area. In this case, it is possible to reduce the degree of uncomfortable feeling given to the user by changing the display mode of the image on the display screen.
  • the storage unit 124 stores information related to the display control process. Specifically, the storage unit 124 stores safety area information corresponding to the illuminance indicated by the illuminance information and a display image. Note that the display image may be acquired through communication.
  • the display unit 126 displays an image based on an instruction from the display control unit 122. Specifically, the display unit 126 projects, as the projection unit 108, image light related to an image instructed to be displayed by the display control unit 122, and forms an image on the retina of the user.
  • FIG. 9 is a flowchart conceptually showing processing of the information processing apparatus 100-1 according to the present embodiment.
  • the information processing apparatus 100-1 acquires illuminance (step S302). Specifically, the pupil information acquisition unit 120 periodically acquires illuminance information indicating the illuminance around the information processing apparatus 100-1.
  • the information processing apparatus 100-1 determines a safe area according to the acquired illuminance (step S304). Specifically, the display control unit 122 acquires safety region information corresponding to the illuminance of the illuminance information acquired by the pupil information acquisition unit 120 from the storage unit 124, and selects a safety region based on the acquired safety region information. decide.
  • the information processing apparatus 100-1 displays an image in the determined safe area (step S306).
  • the display control unit 122 arranges an image in the determined safety area and causes the display unit 126 to project image light related to the image.
  • the information processing apparatus 100-1 acquires the pupil information related to the pupil diameter, and the light is directed toward the user's pupil based on the acquired pupil information.
  • the display control of the image displayed by the eyepiece optical system in which the length in the direction shorter than the other direction of the emitted region is equal to or shorter than the upper limit of the pupil diameter variation is performed. For this reason, it is possible to maintain the visibility of the image regardless of the change in the pupil diameter by performing display control of the image related to the image light projected toward the pupil in response to the change in the pupil diameter. It becomes.
  • the above eyepiece optical system is provided in a mounting device mounted on the user's head. For this reason, the user can wear the eyepiece optical system by mounting the mounting apparatus on the head, and can easily attach the eyepiece optical system to the user.
  • the above pupil information includes element information related to an element that changes the pupil diameter. For this reason, the display control is performed based on an element that can estimate the change in the pupil diameter, so that it is not necessary to have a configuration for directly grasping the pupil diameter, and the configuration of the information processing apparatus 100-1 can be simplified. Cost reduction is possible.
  • the above element information includes information related to the brightness around the information processing apparatus 100-1. For this reason, it is possible to enhance the effect of suppressing the reduction in visibility by performing image display control based on information related to brightness that has a greater effect on changes in pupil diameter than other elements.
  • the information related to the brightness includes illuminance information indicating the brightness
  • the information processing apparatus 100-1 includes an illuminance sensor that acquires the illuminance information. For this reason, it is possible to improve the accuracy of the display control process by directly grasping the brightness.
  • the information processing apparatus 100-1 controls the display mode of the image based on the pupil information. For this reason, it becomes possible to suppress that the visibility of an image falls by the change of a pupil diameter by displaying an image in the aspect according to the pupil diameter.
  • the information processing apparatus 100-1 controls the display position of the image on the display screen based on the pupil information. For this reason, an image is displayed at a position corresponding to the pupil diameter, so that even when the pupil diameter changes, the image is displayed at a position that is easy for the user to see, and the visibility of the image can be maintained. Become.
  • the information processing apparatus 100-1 determines an area where an image can be displayed on the display screen based on the pupil information. For this reason, when a plurality of images are displayed on the display screen, it is not necessary to determine whether each image is in a displayable position, and the image display control process can be made more efficient.
  • the light guide unit 110 may have a lens instead of the eyepiece 114 provided in the lens barrel 106.
  • the lens barrel 106 according to this modification will be described in detail.
  • FIG. 10 is a cross-sectional view illustrating a configuration example of the lens barrel 106 of the information processing apparatus 100-1 according to the first modification of the present embodiment.
  • the light guide unit 110 incorporates a lens having a refraction action similar to that of the eyepiece lens 114.
  • the light guide unit 110 guides the image light to the reflection unit 112 while refracting the image light projected from the projection unit 108.
  • the lens built in the light guide unit 110 may be a gradient index lens having a positive refractive power equivalent to the eyepiece lens 114.
  • the light guide unit 110 includes a lens. For this reason, since the eyepiece 114 is not provided in the lens barrel 106, the manufacturing process of the lens barrel 106 can be simplified.
  • the light guide unit 110 includes a lens instead of the eyepiece lens 114 .
  • the light guide unit 110 may include a lens while the eyepiece lens 114 is provided in the lens barrel 106.
  • the information processing apparatus 100-1 may acquire information whose brightness can be estimated as information related to the brightness around the information processing apparatus 100-1.
  • the pupil information acquisition unit 120 acquires information indicating time, the position of the information processing apparatus 100-1 or the user's posture.
  • the pupil information acquisition unit 120 acquires time information indicating time or elapsed time from a predetermined time, and the display control unit 122 is based on the time information acquired by the pupil information acquisition unit 120. Determine the safety area. For example, when the time indicated by the time information acquired by the pupil information acquisition unit 120 is a night time, the display control unit 122 determines a larger safety region than when the time indicated by the time information is a daytime time. To do.
  • the pupil information acquisition unit 120 acquires positional information indicating the geographical position of the information processing apparatus 100-1 or the building where the information processing apparatus 100-1 is placed, and the display control unit 122 acquires the pupil information acquisition unit 120.
  • the safety area is determined based on the position information acquired by the above. For example, when the position information acquired by the pupil information acquisition unit 120 indicates that it is a movie theater, the display control unit 122 determines a larger safety region than when the position information indicates another building.
  • the pupil information acquisition unit 120 may be a communication unit that receives information that can identify the building where the information processing apparatus 100-1 is located via communication from a GPS (Global Positioning System) receiver or an external device.
  • GPS Global Positioning System
  • the pupil information acquisition unit 120 acquires posture information indicating the posture of the user wearing the information processing apparatus 100-1, and the display control unit 122 performs safety based on the posture information acquired by the pupil information acquisition unit 120. Determine the area. For example, when the posture information acquired by the pupil information acquisition unit 120 indicates that the user is facing down, the display control unit 122 indicates that the posture information indicates that the user is facing up or in front. Determine a larger safety area than
  • the pupil information acquisition unit 120 may be an acceleration sensor, an angular velocity sensor, or the like, or may be a communication unit that receives user posture information from an external device.
  • the information related to the brightness around the information processing apparatus 100-1 includes information capable of estimating the brightness. For this reason, the display control of the image according to the brightness is performed without having the configuration for directly grasping the brightness around the information processing device 100-1, so that the configuration of the information processing device 100-1 is performed. Simplification and cost reduction.
  • the information that can estimate the brightness includes information indicating time, the position of the information processing apparatus 100-1 or the user's posture. For this reason, the display control of the image corresponding to the change of the pupil diameter according to the brightness is performed based on the existing information of the information processing apparatus 100-1, so that the increase in cost can be further suppressed. .
  • the information processing apparatus 100-1 may perform image display control based on the pupil diameter itself.
  • the information processing device 100-1 includes a pupil diameter acquisition unit as an information acquisition unit, and the pupil diameter acquisition unit is information indicating the pupil diameter of the user wearing the information processing device 100-1 (
  • the display control unit 122 performs display control of the image based on the pupil diameter information acquired by the pupil diameter acquisition unit.
  • the pupil diameter acquisition unit captures the user's pupil, identifies the pupil diameter by analyzing the image obtained by the imaging, and generates pupil diameter information indicating the identified pupil diameter.
  • the pupil diameter acquisition unit may acquire an image related to the user's pupil from an external imaging device via communication.
  • the pupil diameter information may be a pupil radius, a pupil area, or the like in addition to the pupil diameter.
  • the pupil diameter may be specified based on the electrooculogram.
  • the information processing apparatus 100-1 includes an electrooculogram sensor that can separately measure an electrooculogram, and specifies the pupil diameter based on a potential difference acquired by the electrooculogram sensor. In this case, the size of the information processing apparatus 100-1 can be suppressed by reducing the size of equipment compared to the case where the imaging apparatus is provided.
  • the pupil information includes the pupil diameter information indicating the pupil diameter, and the information processing apparatus 100-1 acquires the pupil diameter information. For this reason, by performing display control of an image based on the pupil diameter, it is possible to accurately follow the user's viewing state, and it is possible to more reliably suppress a decrease in the visibility of the image.
  • image display control may be performed based on user settings. Specifically, the pupil information is determined based on user settings, and the display control unit 122 performs image display control based on the pupil information.
  • the pupil information is set in advance by the user's operation for each application with image display, and the set pupil information is stored in the storage unit 124. Then, the display control unit 122 acquires pupil information corresponding to the activated application from the storage unit 124, and performs image display control based on the pupil information. Note that the setting of pupil information may be changed during application activation by a user operation.
  • pupil information is determined based on user settings. For this reason, it is possible to improve user convenience by performing display control of an image in accordance with the user's intention.
  • the information processing apparatus 100-1 according to the first embodiment of the present disclosure has been described above. Subsequently, the information processing apparatus 100-2 according to the second embodiment of the present disclosure will be described.
  • the information processing apparatus 100-2 performs image display control based on information indicating the user's exercise state (hereinafter also referred to as exercise state information).
  • FIG. 11 is a block diagram illustrating an example of a schematic functional configuration of the information processing apparatus 100-2 according to the present embodiment. Note that descriptions of functions that are substantially the same as the functions of the information processing apparatus 100-1 are omitted.
  • the information processing apparatus 100-2 includes an exercise state information acquisition unit 130 instead of the pupil information acquisition unit 120, as shown in FIG.
  • the exercise state information acquisition unit 130 acquires exercise state information indicating the user's exercise state as an information acquisition unit.
  • the exercise state information includes information indicating an exercise state that changes the user's line of sight. More specifically, the exercise state information includes information indicating the exercise state in the vertical direction of the user's body. For example, during the exercise of walking or running, the position of the human head changes, so that the line of sight of the object can change even when the moving human is looking at the same object. Therefore, the exercise state information acquisition unit 130 acquires information indicating the state of exercise accompanying movement as exercise state information.
  • the exercise state information includes information indicating the amount of exercise related to the user's exercise state (hereinafter also referred to as exercise amount information).
  • the exercise state information acquisition unit 130 may be an acceleration sensor that acquires information indicating the acceleration of the information processing apparatus 100-2 (hereinafter also referred to as acceleration information) as exercise amount information.
  • the display control unit 122 performs image display control based on the exercise state information acquired by the exercise state information acquisition unit 130. Specifically, the display control unit 122 controls the display mode of the image based on the exercise state information. For example, the display control unit 122 controls the amount of information displayed as an image based on the exercise state information. Further, the image display control process will be described in detail with reference to FIGS. 12A and 12B and FIGS. 13A to 13C. 12A and 12B are graphs showing the relationship between the recognition rate of the display image and the exercise state, respectively. FIGS. 13A to 13C are image display control processes in the information processing apparatus 100-2 according to the present embodiment, respectively. It is a figure which shows the example of.
  • the recognition rate of a display image as an index indicating visibility tends to vary depending on the exercise state. As shown in FIG. 12A, the recognition rate is high when in a walking state, and the recognition rate is low when in a running state.
  • the exercise state is the same and the amount of information displayed is reduced, the visibility tends to be improved.
  • the exercise state is the same as the exercise state in FIG. 12A, and when the number of displayed images is smaller than in FIG. Better than.
  • the display control unit 122 controls the amount of information displayed as an image on the display screen based on the exercise state information. Specifically, the display control unit 122 displays an image corresponding to the amount of information corresponding to the exercise state indicated by the exercise state information on the display screen.
  • the display control unit 122 causes the display screen to display an image corresponding to the amount of information corresponding to the value indicated by the acceleration information included in the exercise state information. For example, when the acceleration indicated by the acceleration information corresponds to a fast running state, for example, acceleration in running, the display control unit 122 displays only one image indicating the time on the display screen as illustrated in FIG. 13A.
  • the display control unit 122 displays an image indicating the distance in addition to the image indicating the time as shown in FIG. 13B. Display on the display screen.
  • acceleration indicated by the acceleration information corresponds to an exercise state slower than jogging, for example, acceleration in walking
  • acceleration in walking in addition to the image indicating the time and the image indicating the distance, as shown in FIG. 13C.
  • An image showing the lap time is displayed on the display screen.
  • the display control unit 122 may display images in other layouts.
  • the display control unit 122 may display the images side by side in the horizontal direction of the display screen, or may display the images so as to be arranged in a zigzag manner in the vertical direction.
  • the display control unit 122 can shorten the vertical width of each image as compared with the case where the images are arranged in a straight line, and can arrange the images closer to the center of the display screen.
  • human movement often includes vertical movement rather than horizontal movement of the display screen, and thus the visibility of the upper and lower ends of the display screen often decreases.
  • this configuration since the image is arranged closer to the center of the display screen, it is possible to suppress a decrease in the visibility of the image.
  • the display control unit 122 performs the display while maintaining the number of images to be displayed.
  • the image to be displayed may be switched to another image.
  • the display control unit 122 displays an image indicating a time as shown in FIG. 13A, and then displays an image or lap time indicating a distance as shown in FIG. Switch to the image shown.
  • the display control unit 122 may switch these three types of images in order every predetermined time. In this case, even when the number of displayed images is reduced, the amount of information that can be grasped by the user can be maintained, and the convenience of the user can be maintained.
  • FIG. 14 is a flowchart conceptually showing processing of the information processing apparatus 100-2 according to the present embodiment.
  • the information processing apparatus 100-2 acquires acceleration (step S402). Specifically, the exercise state information acquisition unit 130 periodically acquires acceleration information indicating the acceleration of the information processing apparatus 100-2.
  • the information processing apparatus 100-2 determines the amount of display information according to the acquired acceleration (step S404). Specifically, the display control unit 122 determines the number of display images corresponding to the acceleration indicated by the acceleration information acquired by the exercise state information acquisition unit 130. For example, information indicating a correspondence relationship between acceleration and the number of display images is stored in the storage unit 124, and the display control unit 122 determines the number of display images based on the acceleration information and the correspondence relationship.
  • the information processing apparatus 100-2 displays an image specified based on the determined display information amount (step S406).
  • the display control unit 122 specifies an image to be displayed based on the determined number of display images, and causes the display unit 126 to display the specified image.
  • the information processing apparatus 100-2 acquires exercise state information indicating the user's exercise state, and light is transmitted to the user based on the acquired exercise state information.
  • Display control of an image displayed by the eyepiece optical system in which the length in the direction shorter than the other direction of the region emitted toward the pupil is equal to or shorter than the upper limit of the pupil diameter variation is performed. For this reason, even if the projection range of the image light deviates from the pupil due to the user's motion, the image visibility can be maintained by performing display control of the image according to the motion.
  • the above motion state includes a motion state that changes the user's line of sight. For this reason, the display position of the image related to the image light projected toward the pupil is controlled while the motion accompanied by the user's gaze change is performed, so that the position of the pupil is caused by the gaze change caused by the motion. Even if this changes, it is possible to suppress a reduction in image visibility.
  • the motion state described above may be a motion state that imparts vibration to the information processing apparatus 100-2.
  • the above-described movement for changing the user's line of sight includes movement in the vertical direction of the user's body.
  • the direction of human movement often includes the vertical direction rather than the horizontal direction. Therefore, according to this configuration, it is possible to reduce the frequency of visibility degradation felt by the user by performing image display control corresponding to movement in the vertical direction, which is higher in frequency than in the horizontal direction.
  • the movement for changing the user's line of sight may be movement in the horizontal direction of the user's body, or movement of a specific part, for example, rotation of the head.
  • the vertical movement of the body includes movement accompanied by movement.
  • image display control is performed during movement, so that the frequency of visibility reduction felt by the user can be further reduced.
  • the exercise state information includes exercise amount information indicating the amount of exercise related to the exercise state. For this reason, by controlling the display of the image according to the amount of exercise, even if the degree of visibility varies depending on the amount of exercise even in the same exercise state, it is possible to appropriately suppress the decrease in visibility. It becomes possible.
  • the exercise state information may be information indicating the presence or absence of an exercise state.
  • the exercise state information can be information indicating whether or not the vehicle is in a running state.
  • the exercise amount information includes acceleration information indicating the acceleration of the user's movement
  • the exercise state information acquisition unit 130 includes an acceleration sensor that acquires acceleration information. For this reason, display control of an image is performed based on information that can be acquired relatively easily, thereby suppressing the complexity of the information processing apparatus 100-2 and the increase in manufacturing cost due to the addition of the display control. It becomes.
  • the information processing apparatus 100-2 controls the amount of information displayed as an image on the display screen based on the exercise state information. For this reason, it becomes possible to suppress that the visibility of an image falls during exercise
  • the information processing apparatus 100-2 may switch whether to display a specific image based on the exercise state information. Specifically, the display control unit 122 switches whether to display a specific image according to the exercise state indicated by the exercise state information. Furthermore, with reference to FIG. 15, the process of this modification is demonstrated in detail.
  • FIG. 15 is a diagram illustrating an example of image display control in the information processing apparatus 100-2 according to the first modification of the present embodiment.
  • the display control unit 122 determines whether or not to display a specific image according to the value indicated by the acceleration information included in the exercise state information, and performs display control of the image according to the display presence or absence. For example, when the acceleration indicated by the acceleration information corresponds to the acceleration in the human running state, the display control unit 122 determines whether to hide the image indicating the state of the information processing apparatus 100-2, for example, the icon 30 indicating the communication state. . And the display control part 122 does not display the said icon 30 on a display screen, as shown in the left figure of FIG.
  • the display control unit 122 displays the icon 30 indicating the communication state of the information processing apparatus 100-2 as shown in the right diagram of FIG. Determine the display. And the display control part 122 displays the said icon 30 on a display screen, as shown to the right figure of FIG. Note that the specific image may be an image displayed at the end of the display screen.
  • the information processing apparatus 100-2 switches display / non-display of a specific image based on the exercise state information. For this reason, it is possible to prevent the user who browses the image from being confused by the display control of the image according to the exercise state by changing only the presence or absence of the specific image while maintaining the layout of the display screen. It becomes possible.
  • the information processing apparatus 100-2 may control the size of the image based on the exercise state information. Specifically, the display control unit 122 controls the size of the image according to the acceleration indicated by the acceleration information included in the exercise state information.
  • the display control unit 122 reduces the size of the image to be displayed as the acceleration indicated by the acceleration information acquired by the exercise state information acquisition unit 130 increases, and the size of the image to be displayed as the acceleration decreases. Increase the size. Only the character size in the character image may be changed.
  • the display control unit 122 controls the image size based on the acceleration information, that is, the amount of exercise information. However, the display control unit 122 displays the image according to the exercise state indicated by the exercise state information. The size may be controlled. For example, when the exercise state information indicates the running state, the display control unit 122 makes the size of the image smaller than when the exercise state information indicates the walking state.
  • the information processing apparatus 100-2 controls the size of the image based on the exercise state information. For this reason, by controlling the display mode of the image while maintaining the amount of information to be displayed, it is possible to suppress a decrease in the visibility of the image while maintaining user convenience.
  • the information processing apparatus 100-2 may adjust the content of image display control in accordance with individual users. Specifically, the display control unit 122 adjusts the control content of the image display mode according to the user attribute.
  • the information processing apparatus 100-2 includes a user information acquisition unit that separately acquires attribute information of a user who wears the information processing apparatus 100-2.
  • the display control unit 122 is controlled by the user information acquisition unit. Based on the acquired attribute information of the user, display control of an image suitable for the user is performed.
  • the user's attribute information is the user's age, age range, race, or the like, and the display control unit 122 displays the image so that the image layout or size corresponds to the age indicated by the user's attribute information. Make adjustments.
  • the information processing apparatus 100-2 adjusts the control content of the image display mode in accordance with the user attribute. For this reason, by adjusting the display of the image so as to be adapted to each user, it is possible to meet detailed user needs and improve the satisfaction of the user.
  • the information processing apparatus 100-2 may perform processing for notifying the user of a decrease in image visibility.
  • the display control unit 122 controls an output for causing the user to recognize that the visibility of the image is reduced as an output control unit.
  • the display control unit 122 causes the display unit 126 to display an image for allowing the user to recognize that the visibility of the image has deteriorated.
  • the display control unit 122 displays a scale or a specific object at a fixed position on the display screen. In this case, when a phenomenon such as a decrease in visibility and a part of the display screen not being displayed occurs, the image such as a scale on the display screen is displayed as missing. You can recognize that.
  • the display control unit 122 displays an object or the like indicating that the visibility of the image is reduced only in the case of executing control of the image display mode based on the exercise state information, for example, in the first embodiment. It may be displayed in the safety area.
  • the displayed object may be a numerical value or the like indicating the proportion of the safety area in the display screen.
  • the display control unit 122 may display an object indicating that the display mode is being controlled. In this case, the user can grasp the reason why the display mode of the image is changed, and the user can be prevented from being confused by the display control of the image.
  • the display control unit 122 may display a predetermined image when the ratio of the safe area on the display screen is lower than the threshold value. For example, the display control unit 122 can display a message notifying that the entire display screen is not visible in the safety area of the display screen.
  • the threshold value related to the ratio may be set according to the application accompanying the image display or the content of the display image. For example, a threshold value is set for each content such as an application or an image by a user operation, and the set threshold value can be stored in the storage unit 124.
  • the output for notifying the user is an image display, but the output for notifying the user may be another output.
  • the output can be an audio output or a vibration output.
  • the information processing apparatus 100-2 includes the output control unit that controls the output for causing the user to recognize that the visibility of the image is reduced. Prepare. For this reason, the user who has recognized the decrease in visibility can consider the possibility that the image is not correctly displayed, and the user can be prevented from recognizing incorrect information.
  • the display control unit 122 displays an image for notifying the user that the visibility of the image is lowered as the output control unit on the display screen. For this reason, it is possible to make it easier for the user to notice the display state of the image by being notified visually.
  • FIG. 16 is an explanatory diagram illustrating a hardware configuration of the information processing apparatus 100 according to the present disclosure.
  • the information processing apparatus 100 includes a CPU (Central Processing Unit) 132, a ROM (Read Only Memory) 134, a RAM (Random Access Memory) 136, a bridge 138, a bus 140, and an interface. 142, an input device 144, an output device 146, a storage device 148, a connection port 150, and a communication device 152.
  • a CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the CPU 132 functions as an arithmetic processing unit and a control unit, and realizes the operation of the display control unit 122 in the information processing apparatus 100 in cooperation with various programs.
  • the CPU 132 may be a microprocessor.
  • the ROM 134 stores programs or calculation parameters used by the CPU 132.
  • the RAM 136 temporarily stores programs used in the execution of the CPU 132 or parameters that change as appropriate during the execution.
  • a part of the storage unit 124 in the information processing apparatus 100 is realized by the ROM 134 and the RAM 136.
  • the CPU 132, the ROM 134, and the RAM 136 are connected to each other by an internal bus including a CPU bus.
  • the input device 144 is an input means for the user to input information, such as a mouse, keyboard, touch panel, button, microphone, switch, and lever, and an input control circuit that generates an input signal based on the input by the user and outputs the input signal to the CPU 132. Etc. A user of the information processing apparatus 100 can input various data to the information processing apparatus 100 and instruct a processing operation by operating the input device 144.
  • the output device 146 performs output to a device such as a liquid crystal display (LCD) device, an OLED (Organic Light Emitting Diode) device, or a lamp. Further, the output device 146 may output sound such as a speaker and headphones.
  • a device such as a liquid crystal display (LCD) device, an OLED (Organic Light Emitting Diode) device, or a lamp. Further, the output device 146 may output sound such as a speaker and headphones.
  • LCD liquid crystal display
  • OLED Organic Light Emitting Diode
  • the storage device 148 is a device for storing data.
  • the storage device 148 may include a storage medium, a recording device that records data on the storage medium, a reading device that reads data from the storage medium, a deletion device that deletes data recorded on the storage medium, and the like.
  • the storage device 148 stores programs executed by the CPU 132 and various data.
  • connection port 150 is, for example, a bus for connecting to an external device or peripheral device of the information processing apparatus 100.
  • the connection port 150 may be a USB (Universal Serial Bus).
  • the communication device 152 is a communication interface composed of a communication device for connecting to a network, for example.
  • the communication device 152 may be a wireless LAN (Local Area Network) compatible communication device using WiFi (registered trademark), Bluetooth (registered trademark), or the like, and may be 3G (3rd Generation) or LTE (Long Term Evolution). A corresponding communication device may be used.
  • the display control of the image related to the image light projected toward the pupil is performed in response to the change in the pupil diameter, regardless of the change in the pupil diameter. The visibility of the image can be maintained.
  • the display control of the image according to the motion is performed, thereby Visibility can be maintained.
  • the display control unit 122 determines the safety region based on the correspondence between the pupil information and the safety region, but the present technology is not limited to such an example.
  • the display control unit 122 may estimate the pupil diameter from the pupil information, and determine the safe area based on the estimated pupil diameter and the width of the lens barrel 106 in the short direction.
  • the display control unit 122 identifies the pupil diameter based on the acquired illuminance information and the relationship between the illuminance (luminance) and the pupil diameter as illustrated in FIG. 6, and determines the pupil diameter and the lens barrel 106.
  • the size or the like of the safety area can be determined based on the width in the short direction.
  • the display control part 122 may perform the said display control based on biometric information.
  • the biological information is biological information that changes when the pupil diameter changes, and may be information related to pulse, respiration, body temperature, sweating, or brain waves, for example.
  • the display control unit 122 performs image display control so as to correspond to the change in the pupil diameter.
  • the biological information can be acquired by a biological sensor provided separately in the information processing apparatus 100-2.
  • the display control unit 122 determines the display luminance of the image based on the pupil information or the motion state information, and causes the display unit 126 to display the image having the determined luminance. For example, when the illuminance indicated by the illuminance information is higher than the threshold value, the display control unit 122 determines the display luminance of the image higher than when the illuminance is equal to or lower than the threshold value. Note that when the illuminance is lower than the threshold value, the display luminance need not be changed.
  • the information processing apparatus 100 has been described with an example including a sensor such as an illuminance sensor or an acceleration sensor or a processing module such as a communication unit.
  • the hardware configuration of the sensor and the processing module is another apparatus. It may be mounted on. And the information processing apparatus 100 may acquire the information which concerns on the said hardware structure from the said other apparatus (for example, portable communication terminals, such as a smart phone), and may perform operation
  • the display method is such that the length in the direction shorter than the other direction of the region where the light is emitted toward the user's pupil is equal to or shorter than the upper limit of the pupil diameter variation.
  • a method using an eyepiece optical system that is, a user's pupil is divided into a portion where light related to an external image is incident and a portion where light related to an electronically generated image is incident, and the generated image is generated in the external image.
  • the example which is a method of optically superimposing (pupil division method) has been described.
  • the display method may be a prism method, a hologram method, or other so-called see-through type or see-around type display method.
  • the image display control processes according to the first and second embodiments and the modifications described above may be recombined or combined.
  • the display control unit 122 can control the amount of information displayed as an image on the display screen based on the pupil information.
  • An information acquisition unit that acquires pupil information related to the pupil diameter, and based on the pupil information acquired by the information acquisition unit, than in other directions in which light is emitted toward the user's pupil
  • An information processing apparatus comprising: a display control unit that performs display control of an image displayed by an eyepiece optical system whose length in a short direction is equal to or shorter than a variation upper limit of the pupil diameter.
  • the element information includes information related to brightness around the information processing apparatus.
  • the information related to the brightness includes illuminance information indicating brightness
  • the information acquisition unit includes an illuminance sensor that acquires the illuminance information.
  • the information related to the brightness includes information capable of estimating the brightness.
  • the information capable of estimating the brightness includes information indicating time, a position of the information processing apparatus, or a user posture.
  • the pupil information includes pupil diameter information indicating a pupil diameter
  • the information acquisition unit acquires pupil diameter information. .
  • the information processing apparatus according to any one of (2) to (8), wherein the pupil information is determined based on a user setting.
  • the display control unit controls a display position of the image on a display screen based on the pupil information.
  • the display control unit determines a displayable area of the image on the display screen based on the pupil information.
  • the information processing apparatus controls an amount of information displayed as the image on a display screen based on the pupil information. .
  • the information processing apparatus controls a size of the image based on the pupil information.
  • the display control unit adjusts the control content of the display mode according to a user attribute.
  • the display control unit causes the display screen to display an image for notifying a user that the visibility of the image is reduced as the output control unit. apparatus.
  • the information acquisition unit acquires the pupil information related to the pupil diameter, and based on the acquired pupil information, the length is longer than other directions in the region where the light is emitted toward the user's pupil.
  • An information processing method comprising: performing display control of an image displayed by an eyepiece optical system in which a length in a short direction is equal to or shorter than a variation upper limit of the pupil diameter. (19) Based on the information acquisition function for acquiring pupil information related to the pupil diameter and the pupil information acquired by the information acquisition function, the length is longer than other directions in the region where light is emitted toward the user's pupil.
  • An information processing apparatus comprising: a display control unit that performs display control of an image displayed by an eyepiece optical system in which a length in a direction shorter than the first direction is equal to or shorter than a variation upper limit of the pupil diameter.
  • a display control unit that performs display control of an image displayed by an eyepiece optical system in which a length in a direction shorter than the first direction is equal to or shorter than a variation upper limit of the pupil diameter.
  • the information processing apparatus includes movement in a vertical direction of the body of the user.
  • the information processing apparatus includes movement accompanied by movement.
  • the exercise state information includes exercise amount information indicating an amount of exercise related to the exercise state.
  • the exercise amount information includes acceleration information indicating an acceleration of movement of the user, and the information acquisition unit includes an acceleration sensor that acquires the acceleration information.
  • the display control unit controls a display mode of the image based on the exercise state information.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の視認性を維持することが可能な情報処理装置、情報処理方法およびプログラムを提供する。ユーザの運動状態を示す運動状態情報を取得する情報取得部と、前記情報取得部によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御部と、を備える情報処理装置。

Description

情報処理装置、情報処理方法およびプログラム
 本開示は、情報処理装置、情報処理方法およびプログラムに関する。
 近年、頭部に装着される情報処理装置に関する技術開発が行われている。このような情報処理装置は、例えばHMD(Head Mount Display)と呼ばれ、HMDを装着するユーザに画像を表示する機能を有する。当該HMDの表示機能の実現には様々な光学系が用いられる。
 例えば、特許文献1では、画像光がユーザの目に向かって射出される接眼窓と当該接眼窓をユーザの眼前に保持する保持部材とからなる接眼光学系を備え、当該保持部材の投影断面の幅が人間の平均的な瞳孔径よりも小さい眼鏡型の画像表示装置に係る発明が開示されている。
特開2009-075195号公報
 しかし、特許文献1で開示される発明では、接眼窓からの画像光の投射範囲がユーザの瞳孔内に収まらない場合、投射される画像光に係る画像の視認性が低下する可能性がある。そこで、本開示では、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の視認性を維持することが可能な、新規かつ改良された情報処理装置、情報処理方法およびプログラムを提案する。
 本開示によれば、ユーザの運動状態を示す運動状態情報を取得する情報取得部と、前記情報取得部によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御部と、を備える情報処理装置が提供される。
 また、本開示によれば、ユーザの運動状態を示す運動状態情報を取得することと、前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行うことと、を含む情報処理方法が提供される。
 また、本開示によれば、ユーザの運動状態を示す運動状態情報を取得する情報取得機能と、前記情報取得機能によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御機能と、をコンピュータに実現させるためのプログラムが提供される。
 以上説明したように本開示によれば、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の視認性を維持することが可能な情報処理装置、情報処理方法およびプログラムが提供される。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態に係る情報処理装置の概要を説明するための図である。 本開示の第1の実施形態に係る情報処理装置の概略的な物理構成例を示す斜視図である。 本実施形態に係る情報処理装置の概略的な物理構成例を示す断面図である。 本実施形態に係る情報処理装置がユーザに装着された状態の例を示す図である。 本実施形態に係る情報処理装置の概略的な機能構成の例を示すブロック図である。 瞳孔径と輝度との関係を示すグラフである。 本実施形態に係る情報処理装置の表示画面における各領域の例を示す図である。 本実施形態に係る情報処理装置の表示画面における安全領域の変化の例を示す図である。 本実施形態に係る情報処理装置の処理を概念的に示すフローチャートである。 本実施形態の第1の変形例に係る情報処理装置の鏡筒の構成例を示す断面図である。 本開示の第2の実施形態に係る情報処理装置の概略的な機能構成の例を示すブロック図である。 表示画像の認識率と運動状態との関係の例を示すグラフである。 表示画像の認識率と運動状態との関係の他の例を示すグラフである。 本実施形態に係る情報処理装置における画像の表示制御処理の例を示す図である。 本実施形態に係る情報処理装置における画像の表示制御処理の例を示す図である。 本実施形態に係る情報処理装置における画像の表示制御処理の例を示す図である。 本実施形態に係る情報処理装置の処理を概念的に示すフローチャートである。 本実施形態の第1の変形例に係る情報処理装置における画像の表示制御の例を示す図である。 本開示に係る情報処理装置のハードウェア構成を示した説明図である。
 以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 なお、説明は以下の順序で行うものとする。
 1.本開示の一実施形態に係る情報処理装置の概要
 2.第1の実施形態(瞳孔径に応じた表示制御の例)
 3.第2の実施形態(ユーザの運動状態に基づいた表示制御の例)
 4.本開示の一実施形態に係る情報処理装置のハードウェア構成
 5.むすび
 <1.本開示の一実施形態に係る情報処理装置の概要>
 まず、図1を参照して、本開示の一実施形態に係る情報処理装置の概要について説明する。図1は、本開示の一実施形態に係る情報処理装置の概要を説明するための図である。
 情報処理装置100は、画像表示機能を備え、人体の頭部に装着される。具体的には、情報処理装置100は、画像表示機能として、レンズを通して直接的に画像光をユーザの目に向かって射出し、結像される虚像が画像としてユーザに認識される。さらに、情報処理装置100がユーザに装着される場合にユーザの眼前に位置する画像光を射出する接眼光学系は、人間の平均的な瞳孔径よりも小さい。このため、情報処理装置100を装着するユーザの瞳孔には、画像光のみならず外光も入射されることにより、画像および外界の両方がユーザの視界に入ることになる。
 例えば、図1に示したように、情報処理装置100は、本体部102、アーム104、および画像光を射出する接眼窓を有する鏡筒106で構成される。そして、鏡筒106は、接眼光学系として、鏡筒106における、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さ(以下、短手方向の幅の長さとも称する。)が瞳孔径よりも細くなるように設けられる。なお、情報処理装置100は、眼鏡200等に取り付けられ得る。
 ここで、瞳孔径は様々な要因によって変化することが知られている。例えば、瞳孔径は人間の周辺の照度に応じて変化し、照度が高い程すなわち明るい程、瞳孔径は小さくなり、照度が低い程すなわち暗い程、瞳孔径は大きくなる。これに対し、画像光を射出する接眼光学系の大きさは固定であるため、人間の周辺照度によっては瞳孔径が接眼光学系の大きさよりも小さくなり、当該接眼光学系から射出される画像光に係る画像の視認性が低下する可能性がある。
 また、瞳孔径が変化しない場合であっても、画像光の投射範囲が瞳孔から外れることがある。例えば、人間が運動している状況においては、運動による人間の視線の変化に伴い、瞳孔の位置が移動するため、画像光の投射範囲が瞳孔から外れ得る。また、運動によって発生する振動により情報処理装置100の装着位置が変化し、それにより画像光の投射範囲が瞳孔から外れる場合もある。このため、ユーザの運動によって画像光の一部または全部が瞳孔に照射されなくなることにより、画像光に係る画像の視認性が低下する可能性がある。
 そこで、本開示では、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の視認性を維持することが可能な情報処理装置100を提案する。以下、情報処理装置100について詳細に説明する。なお、説明の便宜上、第1および第2の実施形態による情報処理装置100の各々を、情報処理装置100-1、および情報処理装置100-2のように、末尾に実施形態に対応する番号を付することにより区別する。
 <2.第1の実施形態(瞳孔径に応じた表示制御の例)>
 以上、本開示の一実施形態に係る情報処理装置100の概要について説明した。続いて、本開示の第1の実施形態に係る情報処理装置100-1について説明する。情報処理装置100-1は、瞳孔径に係る情報(以下、瞳孔情報とも称する。)に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う。
  <2-1.装置の構成>
   (物理構成)
 まず、図1を参照して、本開示の第1の実施形態に係る情報処理装置100-1の物理構成について説明する。情報処理装置100-1は、図1に示したように、本体部102、アーム104および鏡筒106で構成される。
 本体部102は、アーム104および眼鏡200と接続される。具体的には、本体部102の長辺方向の端部はアーム104と結合され、本体部102の側面の一側は接続部材を介して眼鏡200と連結される。なお、本体部102は、直接的に人体の頭部に装着されてもよい。
 また、本体部102は、情報処理装置100-1の動作を制御するための制御基板を内蔵する。具体的には、本体部102は、CPU(Central Processing Unit)またはRAM(Random Access Memory)等を有する制御基板を有し、信号線等を用いてアーム104を介して鏡筒106と接続される。
 アーム104は、本体部102と鏡筒106とを接続させ、鏡筒106を支える。具体的には、アーム104は、本体部102の端部および鏡筒106の端部とそれぞれ結合され、鏡筒106を固定する。また、アーム104は、本体部102から鏡筒106に提供される画像に係るデータを通信するための信号線を内蔵する。
 鏡筒106は、画像光を情報処理装置100-1の外部に投射する。具体的には、鏡筒106は、本体部102からアーム104を経由して提供される画像光を、接眼レンズを通じて情報処理装置100-1の外部、すなわち情報処理装置100-1を装着するユーザの目に向かって投射する。さらに、図2~図4を参照して、鏡筒106の物理構成について詳細に説明する。図2は、本実施形態に係る情報処理装置100-1の概略的な物理構成の例を示す斜視図であり、図3は、本実施形態に係る情報処理装置100-1の概略的な物理構成の例を示す断面図である。また、図4は、本実施形態に係る情報処理装置100-1がユーザに装着された状態の例を示す図である。
 鏡筒106は、接眼光学系として、図2および図3に示したように、投射部108、導光部110、反射部112および接眼レンズ114で構成される。
 投射部108は、画像光を導光部110に向かって射出する。例えば、投射部108は、図3に示したような本体部102から提供される画像を表示する表示パネルであり、画像の表示によって画像光を導光部110に向けて射出する。
 導光部110は、入射される画像光を反射部112に誘導する。例えば、導光部110は、図2に示したような柱状の部材であり、図3に示したように、投射部108から投射される画像光が情報処理装置100-1の外部に漏れることなく反射部112に到達するように画像光を誘導する。なお、導光部110は、内部が中空である筒状の部材であってもよく、画像光を透過させる透明な部材であってもよい。
 反射部112は、到達する画像光を接眼レンズ114に向けて反射させる。例えば、反射部112は、図3に示したように、導光部110によって誘導された画像光を接眼レンズ114の位置に向かうように反射させる。
 接眼レンズ114は、画像を拡大させる。具体的には、接眼レンズは、反射部112によって反射された画像光を屈折させ、画像光に係る画像を拡大する。
 また、鏡筒106は、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さであるように形成される。具体的には、鏡筒106は、鏡筒106の短手方向の幅の長さが平均的な瞳孔径以下になるように形成される。例えば、鏡筒106は、図4に示したように、鏡筒106の短手方向の幅の長さL2が平均的な瞳孔径L1以下になるように形成される。なお、ヒトの瞳孔径L1は概して2mm~8mm程度の範囲で変動するため、L2は8mm以下、例えば4mmであり得る。また、鏡筒106すなわち光が射出される領域の形状は、矩形のほか、円形、楕円形または他の多角形であり得る。
   (機能構成)
 次に、図5を参照して、本実施形態に係る情報処理装置100-1の機能構成について説明する。図5は、本実施形態に係る情報処理装置100-1の概略的な機能構成の例を示すブロック図である。
 情報処理装置100-1は、図5に示したように、瞳孔情報取得部120、表示制御部122、記憶部124および表示部126を備える。
 瞳孔情報取得部120は、情報取得部として、瞳孔情報すなわち瞳孔径を変化させる要素に係る情報(以下、要素情報とも称する。)を取得する。具体的には、瞳孔情報取得部120は、要素情報として、情報処理装置100-1の周辺の明るさに係る情報を取得する。例えば、瞳孔情報取得部120は、情報処理装置100-1の周辺の明るさ、すなわち照度を示す情報(以下、照度情報とも称する。)を取得する照度センサ(照度計)であり得る。
 また、瞳孔情報取得部120は、情報処理装置100-1を装着するユーザの視線方向の照度を示す照度情報を取得する。具体的には、情報処理装置100-1の光学系の投影方向と反対方向における照度を示す照度情報を取得するように照度センサが設けられる。この場合、瞳孔に入射される光の強さがより正確に把握されることにより、ユーザの感覚に合わせた表示制御を行うことが可能となる。なお、画像光の投射方向の変化に合わせて照度センサのセンシング方向が変化されてもよい。例えば、照度センサは接眼光学系すなわち鏡筒106からの画像光の投射方向と反対方向がセンシング方向となるように鏡筒106に取り付けられ得る。
 表示制御部122は、投射される画像光に係る画像の表示制御を行う。具体的には、表示制御部122は、瞳孔情報に基づいて画像の表示態様を制御する。例えば、表示制御部122は、瞳孔情報に基づいて表示画面における画像の表示位置を制御する。さらに、図6および図7を参照して、画像の表示制御処理について詳細に説明する。図6は、瞳孔径と輝度との関係を示すグラフであり、図7は、本実施形態に係る情報処理装置100-1の表示画面における各領域の例を示す図である。
 一般に、瞳孔径は光源の明るさ、すなわち輝度に応じて変化することが知られている。例えば、瞳孔径は、図6に示したように、輝度が低い場合には大きくなり、輝度が高い場合には小さくなる。そのため、平均的な瞳孔径に合わせて光学系が形成される場合、平均的な瞳孔径となる輝度よりも高い輝度を有する光源が存在する場所では、瞳孔径が鏡筒106の短手方向の幅の長さよりも小さくなり、光学系から照射される画像光が瞳孔に入射されにくくなり得る。その結果、ユーザは表示画面の端に位置する画像の視認性が低下する可能性がある。なお、上記では、瞳孔径と輝度との関係を説明したが、輝度の代わりに照度が用いられても同様の傾向があると考えられる。
 そこで、表示制御部122は、瞳孔情報に基づいて表示画面における画像の表示可能な領域を決定する。具体的には、画像の表示画面は安全領域と視認性低下領域とに分けられ、表示制御部122は、瞳孔情報取得部120によって取得される照度情報に基づいて安全領域を決定する。そして、表示制御部122は当該安全領域に画像を表示させる。
 より具体的には、表示制御部122は、瞳孔情報取得部120から提供される照度情報が示す照度に対応する大きさの安全領域を決定する。例えば、照度情報に対応する、安全領域の広さおよび位置を特定可能な安全領域情報が記憶部124に記憶される。そして、表示制御部122は、提供される照度情報に対応する安全領域情報を記憶部124から取得し、取得される安全領域情報を用いて安全領域を決定する。なお、照度情報に対応する安全領域情報は、例えば照度情報の示す照度における瞳孔径と接眼光学系すなわち鏡筒106の短手方向の幅の長さとに基づいて設定される。例えば、照度情報が示す照度における瞳孔径がbであり、かつ接眼光学系の短手方向の幅の長さがaである場合、表示画面のb/aが安全領域となるような安全領域情報が設定され得る。
 また、安全領域は表示画面の中央に設けられる。例えば、各領域は表示画面の水平方向を境界線として分割され、安全領域は図7に示したような表示画面の中央に位置する領域A2であり、領域A2以外の領域A1が視認性低下領域となる。なお、上記では、各領域は表示画面の水平方向を境界線とする例を説明したが、各領域は表示画面の垂直方向を境界線として分割されてもよい。また、安全領域は、表示画面の中央以外、例えば表示画面の上下左右のいずれかに偏って配置されてもよい。さらに、安全領域の配置は、瞳孔情報に基づいて動的に変更されてもよい。
 なお、表示される画像はスクロール操作によって変更される。例えば、表示制御部122は、図7に示したようなアプリケーションの起動アイコンのような画像を表示部126に表示させる。そして、表示制御部122は、情報処理装置100-1が別途に備える操作部に対するユーザのスクロール指示操作に応じて、当該起動アイコンを水平方向にスクロールさせる。ここで、操作部が設けられる本体部102はユーザの側頭部に位置するため、水平方向にスクロールさせることにより、操作に対応して行われる表示制御に対してユーザの違和感が生じにくくすることが可能となる。また、発生頻度の高い運動は垂直方向の運動であるため、当該運動の方向と異なる水平方向にスクロールが行われることにより、ユーザ自身の運動方向と反対方向にスクロールが行われることによる違和感が発生することも抑制される。なお、表示制御部122は、スクロールの代わりに、またはスクロールと合わせて、奥行および手前方向に起動アイコンを移動させてもよい。
 さらに、図8を参照して、安全領域の変化によって画像の表示位置が変化される例を説明する。図8は、本実施形態に係る情報処理装置100-1の表示画面における安全領域の変化の例を示す図である。
 まず、相対的に暗い場所に情報処理装置100-1が位置する場合について説明する。例えば、夜間において、表示制御部122は、瞳孔情報取得部120によって取得される照度情報の示す照度に基づいて、図8の左図に示したような領域A2を安全領域として決定する。そして、表示制御部122は、当該安全領域A2の端に「STANDBY」という文字が付加された画像10を位置させる。
 次に、相対的に明るい場所に情報処理装置100-1が位置する場合について説明する。例えば、昼間の晴天下において、表示制御部122は、瞳孔情報取得部120によって改めて取得される照度情報の示す照度に基づいて、夜間における安全領域A2よりも狭い領域である図8の右図に示したような領域A2に安全領域を変更する。そして、表示制御部122は、安全領域A2の変更に合わせて画像10の表示位置を変更する。
 このように、周辺照度に応じて安全領域A2の大きさが変化されることにより、安全領域の端に位置される画像10の表示位置も周辺照度に応じて変化することになる。
 なお、表示制御部122は、特定の画像のみ安全領域に表示させるようにしてもよい。例えば、表示制御部122は、図8に示したように、画像10のような表示優先度が他の画像よりも高い画像を安全領域内に位置させ、表示優先度が他の画像よりも低い画像20のような画像は安全領域にかかわらず表示させる。この場合、表示画面における画像の表示態様の変更によってユーザに与えられる違和感の程度を低下させることが可能となる。
 図5を参照して情報処理装置100-1の機能構成の説明に戻ると、記憶部124は、表示制御処理に係る情報を記憶する。具体的には、記憶部124は、照度情報の示す照度に対応する安全領域情報および表示用の画像を記憶する。なお、表示用の画像は、通信を介して取得されてもよい。
 表示部126は、表示制御部122の指示に基づいて画像を表示する。具体的には、表示部126は、投射部108として、表示制御部122によって表示するように指示された画像に係る画像光を投射し、ユーザの網膜上に画像を結像させる。
  <2-2.装置の処理>
 次に、図9を参照して、本実施形態に係る情報処理装置100-1の処理について説明する。図9は、本実施形態に係る情報処理装置100-1の処理を概念的に示すフローチャートである。
 まず、情報処理装置100-1は、照度を取得する(ステップS302)。具体的には、瞳孔情報取得部120は、定期的に情報処理装置100-1の周辺の照度を示す照度情報を取得する。
 次に、情報処理装置100-1は、取得される照度に応じて安全領域を決定する(ステップS304)。具体的には、表示制御部122は、瞳孔情報取得部120によって取得される照度情報の照度に対応する安全領域情報を記憶部124から取得し、取得される安全領域情報に基づいて安全領域を決定する。
 次に、情報処理装置100-1は、決定される安全領域に画像を表示する(ステップS306)。具体的には、表示制御部122は、決定される安全領域内に画像を配置し、当該画像に係る画像光を表示部126に投射させる。
 このように、本開示の第1の実施形態によれば、情報処理装置100-1は、瞳孔径に係る瞳孔情報を取得し、取得される瞳孔情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う。このため、瞳孔径の変化に対応して瞳孔に向けて投射される画像光に係る画像の表示制御が行われることにより、瞳孔径の変化に関わらず当該画像の視認性を維持することが可能となる。
 また、上記の接眼光学系は、ユーザの頭部に装着される装着装置に設けられる。このため、ユーザは装着装置を頭部に装着することによって接眼光学系を身に着けることができ、当該接眼光学系のユーザへの取付けを容易にすることが可能となる。
 また、上記の瞳孔情報は、瞳孔径を変化させる要素に係る要素情報を含む。このため、瞳孔径の変化を推定可能な要素に基づいて表示制御が行われることにより、直接的に瞳孔径を把握する構成を備えずに済み、情報処理装置100-1の構成の簡素化およびコスト低減が可能となる。
 また、上記の要素情報は、情報処理装置100-1の周辺の明るさに係る情報を含む。このため、瞳孔径の変化に与える影響が他の要素よりも大きい明るさに係る情報に基づいて画像の表示制御が行われることにより、視認性の低下の抑制効果を高めることが可能となる。
 また、上記の明るさに係る情報は、明るさを示す照度情報を含み、情報処理装置100-1は、照度情報を取得する照度センサを備える。このため、直接的に明るさが把握されることにより、表示制御処理の正確性を向上させることが可能となる。
 また、情報処理装置100-1は、上記の瞳孔情報に基づいて画像の表示態様を制御する。このため、瞳孔径に応じた態様で画像が表示されることにより、瞳孔径の変化によって画像の視認性が低下することを抑制することが可能となる。
 また、情報処理装置100-1は、上記の瞳孔情報に基づいて表示画面における画像の表示位置を制御する。このため、瞳孔径に応じた位置に画像が表示されることにより、瞳孔径が変化した場合であってもユーザにとって見え易い位置に画像が表示され、画像の視認性を維持することが可能となる。
 また、情報処理装置100-1は、上記の瞳孔情報に基づいて表示画面における画像の表示可能な領域を決定する。このため、複数の画像が表示画面に表示される場合に、各画像について表示可能な位置にあるかを判定せずに済み、画像の表示制御処理を効率化することが可能となる。
  <2-3.変形例>
 以上、本開示の第1の実施形態について説明した。なお、本実施形態は、上述の例に限定されない。以下に、本実施形態の第1~第4の変形例について説明する。
   (第1の変形例)
 本実施形態の第1の変形例として、鏡筒106に接眼レンズ114が備えられる代わりに、導光部110がレンズを有していてもよい。図10を参照して、本変形例に係る鏡筒106について詳細に説明する。図10は、本実施形態の第1の変形例に係る情報処理装置100-1の鏡筒106の構成例を示す断面図である。
 導光部110は、接眼レンズ114と同様の屈折作用を有するレンズを内蔵する。例えば、導光部110は、図10に示したように、投射部108から投射される画像光を屈折させながら、当該画像光を反射部112に誘導する。なお、導光部110に内蔵されるレンズは、接眼レンズ114相当の正屈折力を有する屈折率分布型レンズであり得る。
 このように、本実施形態の第1の変形例によれば、導光部110はレンズを有する。このため、接眼レンズ114が鏡筒106に備えられないことにより、鏡筒106の製造工程を簡素化することが可能となる。
 なお、上記では、接眼レンズ114の代わりに導光部110がレンズを有する例を説明したが、接眼レンズ114が鏡筒106に備えられながら導光部110がレンズを有していてもよい。
   (第2の変形例)
 本実施形態の第2の変形例として、情報処理装置100-1は、情報処理装置100-1の周辺の明るさに係る情報として、明るさを推定可能な情報を取得してもよい。具体的には、瞳孔情報取得部120は、時間、情報処理装置100-1の位置またはユーザの姿勢を示す情報を取得する。
 より具体的には、瞳孔情報取得部120は、時刻または所定の時刻からの経過時間を示す時間情報を取得し、表示制御部122は、瞳孔情報取得部120によって取得された時間情報に基づいて安全領域を決定する。例えば、瞳孔情報取得部120によって取得された時間情報の示す時刻が夜間の時刻である場合、表示制御部122は、時間情報の示す時刻が昼間の時刻である場合と比べて大きい安全領域を決定する。
 また、瞳孔情報取得部120は、情報処理装置100-1の地理的位置または情報処理装置100-1の置かれる建物等を示す位置情報を取得し、表示制御部122は、瞳孔情報取得部120によって取得された位置情報に基づいて安全領域を決定する。例えば、瞳孔情報取得部120によって取得された位置情報が映画館である旨を示す場合、表示制御部122は、位置情報が他の建物を示す場合と比べて大きい安全領域を決定する。なお、瞳孔情報取得部120は、GPS(Global Positioning System)受信機または外部装置から通信を介して情報処理装置100-1の位置する建物を特定可能な情報を受信する通信部であり得る。
 また、瞳孔情報取得部120は、情報処理装置100-1を装着するユーザの姿勢を示す姿勢情報を取得し、表示制御部122は、瞳孔情報取得部120によって取得された姿勢情報に基づいて安全領域を決定する。例えば、瞳孔情報取得部120によって取得された姿勢情報が、ユーザが下を向いていることを示す場合、表示制御部122は、姿勢情報が、ユーザが上または正面を向いていることを示す場合等に比べて大きい安全領域を決定する。なお、瞳孔情報取得部120は、加速度センサまたは角速度センサ等であってもよく、外部装置からユーザの姿勢情報を受信する通信部であってもよい。
 このように、本実施形態の第2の変形例によれば、上述の情報処理装置100-1の周辺の明るさに係る情報は、明るさを推定可能な情報を含む。このため、情報処理装置100-1の周辺の明るさを直接的に把握するための構成を有することなく明るさに応じた画像の表示制御が行われることにより、情報処理装置100-1の構成の簡素化およびコスト低減が可能となる。
 また、上記の明るさを推定可能な情報は、時間、情報処理装置100-1の位置またはユーザの姿勢を示す情報を含む。このため、情報処理装置100-1の既存の情報に基づいて、明るさに応じた瞳孔径の変化に対応する画像の表示制御が行われることにより、コスト増加をさらに抑制することが可能となる。
   (第3の変形例)
 本実施形態の第3の変形例として、情報処理装置100-1は、瞳孔径そのものに基づいて画像の表示制御を行ってもよい。具体的には、情報処理装置100-1は、情報取得部として、別途に瞳孔径取得部を備え、当該瞳孔径取得部は情報処理装置100-1を装着するユーザの瞳孔径を示す情報(以下、瞳孔径情報とも称する。)を取得し、表示制御部122は、瞳孔径取得部によって取得される瞳孔径情報に基づいて画像の表示制御を行う。
 例えば、瞳孔径取得部は、ユーザの瞳孔を撮像し、撮像により得られる画像を解析することによって瞳孔径を特定し、特定される瞳孔径を示す瞳孔径情報を生成する。なお、瞳孔径取得部は、外部の撮像装置からユーザの瞳孔に係る画像を、通信を介して取得してもよい。また、瞳孔径情報は、瞳孔の直径のほか、瞳孔の半径または瞳孔の面積等であってもよい。
 なお、上記では、瞳孔が写された画像の解析によって瞳孔径が特定される例を説明したが、瞳孔径は眼電位に基づいて特定されてもよい。例えば、情報処理装置100-1は別途に眼電位を測定可能な眼電位センサを備え、眼電位センサが取得する電位差に基づいて瞳孔径を特定する。この場合、撮像装置が備えられる場合と比べて設備が小さく済むことにより、情報処理装置100-1の大型化を抑制することが可能となる。
 このように、本実施形態の第3の変形例によれば、瞳孔情報は、瞳孔径を示す瞳孔径情報を含み、情報処理装置100-1は、瞳孔径情報を取得する。このため、瞳孔径に基づいて画像の表示制御が行われることにより、ユーザの視認状態により正確に追従することができ、画像の視認性の低下をより確実に抑制することが可能となる。
   (第4の変形例)
 本実施形態の第4の変形例として、画像の表示制御は、ユーザの設定に基づいて行われてもよい。具体的には、瞳孔情報はユーザの設定に基づいて決定され、表示制御部122は、当該瞳孔情報に基づいて画像の表示制御を行う。
 例えば、瞳孔情報は、画像表示を伴うアプリケーション毎に予めユーザの操作によって設定され、設定される瞳孔情報が記憶部124に記憶される。そして、表示制御部122は、起動されるアプリケーションに対応する瞳孔情報を記憶部124から取得し、当該瞳孔情報に基づいて画像の表示制御を行う。なお、瞳孔情報の設定は、ユーザ操作によってアプリケーション起動中に変更されてもよい。
 このように、本実施形態の第4の変形例によれば、瞳孔情報は、ユーザの設定に基づいて決定される。このため、ユーザの意図に即した画像の表示制御が行われることにより、ユーザの利便性を向上させることが可能となる。
 <3.第2の実施形態(ユーザの運動状態に基づいた表示制御の例)>
 以上、本開示の第1の実施形態に係る情報処理装置100-1について説明した。続いて、本開示の第2の実施形態に係る情報処理装置100-2について説明する。情報処理装置100-2は、ユーザの運動状態を示す情報(以下、運動状態情報とも称する。)に基づいて画像の表示制御を行う。
  <3-1.装置の構成>
   (機能構成)
 まず、図11を参照して、本実施形態に係る情報処理装置100-2の機能構成について説明する。図11は、本実施形態に係る情報処理装置100-2の概略的な機能構成の例を示すブロック図である。なお、情報処理装置100-1における機能と実質的に同一である機能については説明を省略する。
 情報処理装置100-2は、図11に示したように、瞳孔情報取得部120の代わりに、運動状態情報取得部130を備える。
 運動状態情報取得部130は、情報取得部として、ユーザの運動状態を示す運動状態情報を取得する。具体的には、運動状態情報は、ユーザの視線を変化させる運動の状態を示す情報を含む。より具体的には、運動状態情報は、ユーザの身体の垂直方向における運動の状態を示す情報を含む。例えば、歩くまたは走るといった運動中においては、人間の頭部の位置が変化するため、当該運動中の人間が同じ物体を見ているときであっても、物体に対する視線が変化し得る。そこで、運動状態情報取得部130は、運動状態情報として、移動の伴う運動の状態を示す情報を取得する。
 さらに、運動状態情報は、ユーザの運動状態に係る運動量を示す情報(以下、運動量情報とも称する。)を含む。例えば、運動状態情報取得部130は、運動量情報として情報処理装置100-2の加速度を示す情報(以下、加速度情報とも称する。)を取得する加速度センサ等であり得る。
 表示制御部122は、運動状態情報取得部130によって取得される運動状態情報に基づいて画像の表示制御を行う。具体的には、表示制御部122は、運動状態情報に基づいて画像の表示態様を制御する。例えば、表示制御部122は、運動状態情報に基づいて画像として表示される情報の量を制御する。さらに、図12Aおよび図12Bならびに図13A~図13Cを参照して画像の表示制御処理について詳細に説明する。図12Aおよび図12Bは、それぞれ表示画像の認識率と運動状態との関係を示すグラフであり、図13A~図13Cは、それぞれ本実施形態に係る情報処理装置100-2における画像の表示制御処理の例を示す図である。
 概して、視認性は人間の運動状態に応じて変化する傾向にあると考えられている。例えば、視認性を示す指標としての表示画像の認識率(表示される画像の内容を正しく認識することができた人の割合)は、運動状態に応じて異なる傾向にある。図12Aに示したように、歩行状態である場合には認識率が高く、走行状態である場合には認識率が低い。
 これに対し、運動状態が同じで、かつ表示される情報量が減少した場合、視認性が向上する傾向にある。例えば、図12Bに示したように、運動状態は図12Aにおける運動状態と同じで、かつ表示される画像の数が図12Aの場合よりも減少した場合、走行状態における認識率が図12Aの場合よりも向上している。
 そこで、表示制御部122は、運動状態情報に基づいて表示画面において画像として表示される情報の量を制御する。具体的には、表示制御部122は、運動状態情報の示す運動状態に応じた情報量に相当する画像を表示画面に表示させる。
 より具体的には、表示制御部122は、運動状態情報に含まれる加速度情報の示す値に応じた情報量に相当する画像を表示画面に表示させる。例えば、加速度情報の示す加速度が速めの走行状態、例えばランニングにおける加速度に相当する場合、表示制御部122は、図13Aに示したように、時刻を示す1つの画像のみを表示画面に表示させる。
 また、表示制御部122は、加速度情報の示す加速度がランニングよりも遅い走行状態、例えばジョギングにおける加速度に相当する場合、図13Bに示したように、時刻を示す画像に加えて距離を示す画像を表示画面に表示させる。
 さらに、表示制御部122は、加速度情報の示す加速度がジョギングよりも遅い運動状態、例えばウォーキングにおける加速度に相当する場合、図13Cに示したように、時刻を示す画像および距離を示す画像に加えてラップタイムを示す画像を表示画面に表示させる。
 なお、図13Bおよび図13Cでは、表示制御部122は、画像を表示画面の垂直方向に並べて表示させる例を説明したが、表示制御部122は、他のレイアウトで画像を表示させてもよい。例えば、表示制御部122は、表示画面の水平方向に並べて画像を表示させてもよく、各画像を垂直方向にジグザグに並ぶように表示させてもよい。画像をジグザグに配置する場合、表示制御部122は、各画像の垂直方向の幅を、画像を一直線に配置する場合に比べて短縮し、表示画面の中央寄りに画像を配置させ得る。概して、人間の運動は、表示画面の水平方向の運動よりも垂直方向の運動を含むことが多いため、表示画面の上下端の視認性が低下することが多くなる。しかし、本構成によれば、画像が表示画面の中央寄りに配置されるため、画像の視認性の低下を抑制することが可能となる。
 また、図13Aおよび図13Bでは、表示制御部122は、1つまたは2つの画像のみを表示させる例を説明したが、表示制御部122は、表示される画像の数を保ったまま、当該表示される画像を他の画像に切り替えてもよい。例えば、表示制御部122は、図13Aに示したように時刻を示す画像を表示した後、所定の時間経過毎に、表示される画像を図13Cに示したような距離を示す画像もしくはラップタイムを示す画像と切り替える。また、表示制御部122は、これら3種類の画像を所定の時間経過毎に順番に切り替えてもよい。この場合、表示される画像の数が減少される場合であっても、ユーザが把握可能な情報の量を維持することができ、ユーザの利便性を維持することが可能となる。
  <3-2.装置の処理>
 次に、図14を参照して、本実施形態に係る情報処理装置100-2の処理について説明する。図14は、本実施形態に係る情報処理装置100-2の処理を概念的に示すフローチャートである。
 まず、情報処理装置100-2は、加速度を取得する(ステップS402)。具体的には、運動状態情報取得部130は、定期的に情報処理装置100-2の加速度を示す加速度情報を取得する。
 次に、情報処理装置100-2は、取得される加速度に応じて表示情報量を決定する(ステップS404)。具体的には、表示制御部122は、運動状態情報取得部130によって取得される加速度情報が示す加速度に対応する表示画像数を決定する。例えば、加速度と表示画像数との対応関係を示す情報は記憶部124に記憶され、表示制御部122は、加速度情報と当該対応関係とに基づいて表示画像数を決定する。
 次に、情報処理装置100-2は、決定される表示情報量に基づいて特定される画像を表示する(ステップS406)。具体的には、表示制御部122は、決定される表示画像数に基づいて表示させる画像を特定し、特定される画像を表示部126に表示させる。
 このように、本開示の第2の実施形態によれば、情報処理装置100-2は、ユーザの運動状態を示す運動状態情報を取得し、取得される運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う。このため、ユーザの運動によって画像光の投射範囲が瞳孔から外れる場合であっても、当該運動に応じた画像の表示制御が行われることにより、画像の視認性を維持することが可能となる。
 また、上記の運動状態は、ユーザの視線を変化させる運動の状態を含む。このため、ユーザの視線変化を伴う運動が行われている間、瞳孔に向けて投射される画像光に係る画像の表示制御が行われることにより、当該運動を原因とする視線変化によって瞳孔の位置が変化する場合であっても、画像の視認性の低下を抑制することが可能となる。なお、上記の運動状態は、情報処理装置100-2に振動を与える運動の状態であってもよい。
 また、上記のユーザの視線を変化させる運動は、ユーザの身体の垂直方向における運動を含む。概して、人間の運動方向は水平方向よりも垂直方向を含むことが多い。そのため、本構成によれば、発生頻度が水平方向に比べて高い垂直方向の運動に対応して画像の表示制御が行われることにより、ユーザの感じる視認性低下の頻度を低減することが可能となる。なお、ユーザの視線を変化させる運動は、ユーザの身体の水平方向における運動であってもよく、特定の部位の運動、例えば頭部の回転運動等であってもよい。
 また、上記の身体の垂直方向における運動は、移動を伴う運動を含む。概して、人間の運動は移動を伴うことが多いため、移動中において画像の表示制御が行われることにより、ユーザの感じる視認性低下の頻度をさらに低減することが可能となる。
 また、上記の運動状態情報は、運動状態に係る運動量を示す運動量情報を含む。このため、運動量に応じた画像の表示制御が行われることにより、同じ運動状態であっても運動量に応じて視認性の低下の程度が異なる場合に、視認性の低下を適切に抑制することが可能となる。なお、運動状態情報は、運動状態の有無を示す情報であってもよい。例えば、運動状態情報は、走行状態であるか否かのいずれかを示す情報であり得る。
 また、上記の運動量情報は、ユーザの移動の加速度を示す加速度情報を含み、運動状態情報取得部130は、加速度情報を取得する加速度センサを含む。このため、比較的容易に取得可能な情報に基づいて画像の表示制御が行われることにより、当該表示制御の追加による情報処理装置100-2の複雑化および製造コストの増加を抑制することが可能となる。
 また、情報処理装置100-2は、運動状態情報に基づいて表示画面において画像として表示される情報の量を制御する。このため、運動状態に応じて、表示される情報量すなわち画像数が調整されることにより、運動中に画像の視認性が低下することを抑制することが可能となる。
  <3-3.変形例>
 以上、本開示の第2の実施形態について説明した。なお、本実施形態は、上述の例に限定されない。以下に、本実施形態の第1~第5の変形例について説明する。
   (第1の変形例)
 本実施形態の第1の変形例として、情報処理装置100-2は、運動状態情報に基づいて特定の画像の表示有無を切り替えてもよい。具体的には、表示制御部122は、運動状態情報の示す運動状態に応じて特定の画像の表示有無を切り替える。さらに、図15を参照して、本変形例の処理について詳細に説明する。図15は、本実施形態の第1の変形例に係る情報処理装置100-2における画像の表示制御の例を示す図である。
 まず、表示制御部122は、運動状態情報に含まれる加速度情報の示す値に応じて特定の画像の表示有無を決定し、当該表示有無に従って画像の表示制御を行う。例えば、加速度情報の示す加速度が人間の走行状態における加速度に相当する場合、表示制御部122は、情報処理装置100-2の状態を示す画像、例えば通信状態を示すアイコン30の非表示を決定する。そして、表示制御部122は、図15の左図に示したように、当該アイコン30を表示画面に表示させない。
 他方で、加速度情報の示す加速度が人間の歩行状態における加速度以下である場合、表示制御部122は、図15の右図に示したように、情報処理装置100-2の通信状態を示すアイコン30の表示を決定する。そして、表示制御部122は、図15の右図に示したように、当該アイコン30を表示画面に表示させる。なお、当該特定の画像は表示画面の端に表示される画像であり得る。
 このように、本実施形態の第1の変形例によれば、情報処理装置100-2は、運動状態情報に基づいて特定の画像の表示有無を切り替える。このため、表示画面のレイアウトは維持されたまま特定の画像の表示有無のみが変更されることにより、運動状態に応じた画像の表示制御によって画像を閲覧するユーザが混乱することを抑制することが可能となる。
   (第2の変形例)
 本実施形態の第2の変形例として、情報処理装置100-2は、運動状態情報に基づいて画像の大きさを制御してもよい。具体的には、表示制御部122は、運動状態情報に含まれる加速度情報の示す加速度に応じて画像の大きさを制御する。
 例えば、表示制御部122は、運動状態情報取得部130によって取得される加速度情報の示す加速度が大きくなる程、表示させる画像の大きさを小さくし、当該加速度が小さくなる程、表示させる画像の大きさを大きくする。なお、文字画像における文字サイズのみを変更してもよい。
 なお、上記では、表示制御部122は、加速度情報すなわち運動量情報に基づいて画像の大きさを制御する例を説明したが、表示制御部122は、運動状態情報の示す運動状態に応じて画像の大きさを制御してもよい。例えば、表示制御部122は、運動状態情報が走行状態を示す場合、画像の大きさを、運動状態情報が歩行状態を示す場合よりも小さくする。
 このように、本実施形態の第2の変形例によれば、情報処理装置100-2は、運動状態情報に基づいて画像の大きさを制御する。このため、表示される情報量を維持しながら画像の表示態様が制御されることにより、ユーザの利便性を維持しながら画像の視認性の低下を抑制することが可能となる。
   (第3の変形例)
 本実施形態の第3の変形例として、情報処理装置100-2は、画像の表示制御の内容を個々のユーザに合わせて調整してもよい。具体的には、表示制御部122は、ユーザの属性に応じて画像の表示態様の制御内容について調整を行う。
 より具体的には、情報処理装置100-2は、別途に情報処理装置100-2を装着するユーザの属性情報を取得するユーザ情報取得部を備え、表示制御部122は、ユーザ情報取得部によって取得されるユーザの属性情報に基づいて、当該ユーザに適合する画像の表示制御を行う。例えば、ユーザの属性情報はユーザの年齢もしくは年齢帯または人種等であり、表示制御部122は、ユーザの属性情報の示す年齢等に対応する、画像の配置または大きさとなるように画像の表示調整を行う。
 このように、本実施形態の第3の変形例によれば、情報処理装置100-2は、ユーザの属性に応じて画像の表示態様の制御内容の調整を行う。このため、個々のユーザに適合するように画像の表示調整が行われることにより、細かなユーザニーズに応えることができ、ユーザの満足度を向上させることが可能となる。
   (第4の変形例)
 本実施形態の第4の変形例として、情報処理装置100-2は、画像の視認性の低下をユーザに気付かせるための処理を行ってもよい。具体的には、表示制御部122は、出力制御部として、画像の視認性が低下している旨をユーザに認識させるための出力を制御する。
 より具体的には、表示制御部122は、画像の視認性が低下している旨をユーザに認識させるための画像を表示部126に表示させる。例えば、表示制御部122は、表示画面の固定位置に目盛または特定のオブジェクトを表示させる。この場合、視認性が低下し、表示画面の一部が表示されなくなる等の現象が発生すると、表示画面上の目盛等の画像が欠けたように表示されるため、ユーザは視認性が低下していることを認識し得る。
 また、表示制御部122は、運動状態情報に基づいて画像の表示態様の制御を実行する場合にのみ、画像の視認性が低下している旨を示すオブジェクト等を、例えば第1の実施形態における安全領域内に表示させてもよい。また、表示されるオブジェクトは、表示画面における安全領域の占める割合を示す数値等であってもよい。
 なお、表示制御部122は、当該表示態様の制御中である旨を示すオブジェクトを表示させてもよい。この場合、画像の表示態様が変化した理由をユーザは把握することができ、画像の表示制御によるユーザの混乱を防止することが可能となる。
 さらに、表示制御部122は、表示画面における安全領域の割合が閾値を下回る場合に、所定の画像を表示させてもよい。例えば、表示制御部122は、表示画面の全体が視認されない状態である旨を通知するメッセージを表示画面の安全領域内に表示させ得る。なお、当該割合に係る閾値は、画像表示を伴うアプリケーションまたは表示画像の内容に応じて設定されてもよい。例えば、ユーザ操作によってアプリケーションまたは画像等のコンテンツの各々について閾値が設定され、当該設定される閾値は記憶部124に記憶され得る。
 なお、上記では、ユーザに通知するための出力が画像表示である例を説明したが、ユーザに通知するための出力は他の出力であってもよい。例えば、当該出力は、音声出力または振動出力であり得る。
 このように、本実施形態の第4の変形例によれば、情報処理装置100-2は、画像の視認性が低下している旨をユーザに認識させるための出力を制御する出力制御部を備える。このため、視認性の低下を認識したユーザは画像が正しく表示されていない可能性を考慮することができ、ユーザが誤った情報を認識することを抑制することが可能となる。
 また、表示制御部122は、上記の出力制御部として、画像の視認性が低下している旨をユーザに通知するための画像を表示画面に表示させる。このため、視覚的に通知されることにより、ユーザが画像の表示状態に気付きやすくすることが可能となる。
 <4.本開示の一実施形態に係る情報処理装置のハードウェア構成>
 以上、本開示の各実施形態に係る情報処理装置100について説明した。上述した情報処理装置100の処理は、ソフトウェアと、以下に説明する情報処理装置100のハードウェアとの協働により実現される。
 図16は、本開示に係る情報処理装置100のハードウェア構成を示した説明図である。図16に示したように、情報処理装置100は、CPU(Central Processing Unit)132と、ROM(Read Only Memory)134と、RAM(Random Access Memory)136と、ブリッジ138と、バス140と、インターフェース142と、入力装置144と、出力装置146と、ストレージ装置148と、接続ポート150と、通信装置152とを備える。
 CPU132は、演算処理装置および制御装置として機能し、各種プログラムと協働して情報処理装置100内の表示制御部122の動作を実現する。また、CPU132は、マイクロプロセッサであってもよい。ROM134は、CPU132が使用するプログラムまたは演算パラメータ等を記憶する。RAM136は、CPU132の実行にいて使用するプログラムまたは実行において適宜変化するパラメータ等を一時記憶する。ROM134およびRAM136により、情報処理装置100内の記憶部124の一部を実現する。CPU132、ROM134およびRAM136は、CPUバスなどから構成される内部バスにより相互に接続されている。
 入力装置144は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなどユーザが情報を入力するための入力手段、およびユーザによる入力に基づいて入力信号を生成し、CPU132に出力する入力制御回路などから構成されている。情報処理装置100のユーザは、入力装置144を操作することにより、情報処理装置100に対して各種のデータを入力したり処理動作を指示したりすることができる。
 出力装置146は、例えば、液晶ディスプレイ(LCD)装置、OLED(Organic Light Emitting Diode)装置、ランプなどの装置への出力を行う。さらに、出力装置146は、スピーカおよびヘッドフォンなどの音声出力を行ってもよい。
 ストレージ装置148は、データ格納用の装置である。ストレージ装置148は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されるデータを削除する削除装置等を含んでもよい。ストレージ装置148は、CPU132が実行するプログラムや各種データを格納する。
 接続ポート150は、例えば、情報処理装置100の外部の装置または周辺機器と接続するためのバスである。また、接続ポート150は、USB(Universal Serial Bus)であってもよい。
 通信装置152は、例えば、ネットワークに接続するための通信デバイスで構成される通信インターフェースである。また、通信装置152は、WiFi(登録商標)、Bluetooth(登録商標)等を用いた無線LAN(Local Area Network)対応通信装置であってもよく、3G(3rd Generation)またはLTE(Long Term Evolution)対応通信装置であってもよい。
 <5.むすび>
 以上、本開示の第1の実施形態によれば、瞳孔径の変化に対応して瞳孔に向けて投射される画像光に係る画像の表示制御が行われることにより、瞳孔径の変化に関わらず当該画像の視認性を維持することが可能となる。
 また、本開示の第2の実施形態によれば、ユーザの運動によって画像光の投射範囲が瞳孔から外れる場合であっても、当該運動に応じた画像の表示制御が行われることにより、画像の視認性を維持することが可能となる。
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 例えば、上記第1の実施形態では、表示制御部122は、瞳孔情報と安全領域との対応関係に基づいて安全領域を決定するとしたが、本技術はかかる例に限定されない。具体的には、表示制御部122は、瞳孔情報から瞳孔径を推定し、推定される瞳孔径と鏡筒106の短手方向の幅の長さとに基づいて安全領域を決定してもよい。例えば、表示制御部122は、取得される照度情報と、図6に示したような照度(輝度)と瞳孔径との関係とに基づいて、瞳孔径を特定し、当該瞳孔径と鏡筒106の短手方向の幅の長さとに基づいて安全領域の大きさ等を決定し得る。
 また、上記第1の実施形態では、表示制御部122は照度情報に基づいて画像の表示制御を行う例を説明したが、表示制御部122は生体情報に基づいて当該表示制御を行ってもよい。例えば、生体情報は、瞳孔径が変化する際に変化する生体情報であり、例えば脈拍、呼吸、体温、発汗または脳波に係る情報であり得る。そして、表示制御部122は、当該生体情報の示す値が瞳孔径の変化を示す値である場合、当該瞳孔径の変化に対応するように画像の表示制御を行う。なお、当該生体情報は、情報処理装置100-2に別途備えられる生体センサによって取得され得る。
 また、上記実施形態では、瞳孔情報または運動状態情報に基づいて画像の表示態様が制御される例を説明したが、さらに上記の情報に基づいて画像の表示輝度が制御されてもよい。具体的には、表示制御部122は、瞳孔情報または運動状態情報に基づいて画像の表示輝度を決定し、決定される輝度の画像を表示部126に表示させる。例えば、表示制御部122は、照度情報が示す照度が閾値よりも高い場合、画像の表示輝度を、照度が閾値以下である場合よりも高く決定する。なお、照度が閾値よりも低い場合は、表示輝度を変更しなくてもよい。
 また、上記実施形態では、情報処理装置100は、照度センサもしくは加速度センサ等のセンサまたは通信部等の処理モジュールを備える例を説明したが、当該センサおよび処理モジュール等のハードウェア構成は他の装置に搭載されてもよい。そして、情報処理装置100は、当該他の装置(例えば、スマートフォン等の携帯通信端末)から当該ハードウェア構成に係る情報を取得し、上述したような動作を行ってもよい。
 また、上記実施形態では、表示方式が、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが瞳孔の径の変動上限以下の長さである接眼光学系を用いた方式、すなわちユーザの瞳孔を外界像に係る光が入射される部分と電子的に生成された画像に係る光が入射される部分とに分割し、当該外界像に生成画像を光学的に重畳する方式(瞳分割方式)である例を説明した。しかし、表示方式は、プリズム方式、ホログラム方式またはその他のいわゆるシースルー型もしくはシーアラウンド型の表示方式であってもよい。
 また、上記の第1および第2の実施形態ならびに各変形例に係る画像の表示制御処理は、それぞれ組み換えられてもよく、組合せられてもよい。例えば、表示制御部122は、瞳孔情報に基づいて、表示画面において画像として表示される情報の量を制御し得る。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 なお、以下のような構成も本開示の技術的範囲に属する。
(1)瞳孔径に係る瞳孔情報を取得する情報取得部と、前記情報取得部によって取得される前記瞳孔情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御部と、を備える情報処理装置。
(2)前記接眼光学系は、前記ユーザの頭部に装着される装着装置に設けられる、前記(1)に記載の情報処理装置。
(3)前記瞳孔情報は、瞳孔径を変化させる要素に係る要素情報を含む、前記(2)に記載の情報処理装置。
(4)前記要素情報は、前記情報処理装置の周辺の明るさに係る情報を含む、前記(3)に記載の情報処理装置。
(5)前記明るさに係る情報は、明るさを示す照度情報を含み、前記情報取得部は、前記照度情報を取得する照度センサを含む、前記(4)に記載の情報処理装置。
(6)前記明るさに係る情報は、明るさを推定可能な情報を含む、前記(4)に記載の情報処理装置。
(7)前記明るさを推定可能な情報は、時間、前記情報処理装置の位置またはユーザの姿勢を示す情報を含む、前記(6)に記載の情報処理装置。
(8)前記瞳孔情報は、瞳孔径を示す瞳孔径情報を含み、前記情報取得部は、瞳孔径情報を取得する、前記(2)~(7)のいずれか1項に記載の情報処理装置。
(9)前記瞳孔情報は、ユーザの設定に基づいて決定される、前記(2)~(8)のいずれか1項に記載の情報処理装置。
(10)前記表示制御部は、前記瞳孔情報に基づいて前記画像の表示態様を制御する、前記(2)~(9)のいずれか1項に記載の情報処理装置。
(11)前記表示制御部は、前記瞳孔情報に基づいて表示画面における前記画像の表示位置を制御する、前記(10)に記載の情報処理装置。
(12)前記表示制御部は、前記瞳孔情報に基づいて前記表示画面における前記画像の表示可能な領域を決定する、前記(11)に記載の情報処理装置。
(13)前記表示制御部は、前記瞳孔情報に基づいて表示画面において前記画像として表示される情報の量を制御する、前記(10)~(12)のいずれか1項に記載の情報処理装置。
(14)前記表示制御部は、前記瞳孔情報に基づいて前記画像の大きさを制御する、前記(10)~(13)のいずれか1項に記載の情報処理装置。
(15)前記表示制御部は、ユーザの属性に応じて前記表示態様の制御内容について調整を行う、前記(10)~(14)のいずれか1項に記載の情報処理装置。
(16)前記画像の視認性が低下している旨をユーザに認識させるための出力を制御する出力制御部をさらに備える、前記(10)~(15)のいずれか1項に記載の情報処理装置。
(17)前記表示制御部は、前記出力制御部として、前記画像の視認性が低下している旨をユーザに通知するための画像を表示画面に表示させる、前記(16)に記載の情報処理装置。
(18)情報取得部が瞳孔径に係る瞳孔情報を取得することと、取得される前記瞳孔情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行うことと、を含む情報処理方法。
(19)
 瞳孔径に係る瞳孔情報を取得する情報取得機能と、前記情報取得機能によって取得される前記瞳孔情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御機能と、をコンピュータに実現させるためのプログラム。
 また、以下のような構成も本開示の技術的範囲に属する。
(21)ユーザの運動状態を示す運動状態情報を取得する情報取得部と、前記情報取得部によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御部と、を備える情報処理装置。
(22)前記接眼光学系は、前記ユーザの頭部に装着される装着装置に設けられる、前記(21)に記載の情報処理装置。
(23)前記運動状態は、前記ユーザの視線を変化させる運動の状態を含む、前記(22)に記載の情報処理装置。
(24)前記ユーザの視線を変化させる運動は、前記ユーザの身体の垂直方向における運動を含む、前記(23)に記載の情報処理装置。
(25)前記身体の上下運動は、移動を伴う運動を含む、前記(24)に記載の情報処理装置。
(26)前記運動状態情報は、前記運動状態に係る運動量を示す運動量情報を含む、前記(22)~(25)のいずれか1項に記載の情報処理装置。
(27)前記運動量情報は、前記ユーザの移動の加速度を示す加速度情報を含み、前記情報取得部は、前記加速度情報を取得する加速度センサを含む、前記(26)に記載の情報処理装置。
(28)前記表示制御部は、前記運動状態情報に基づいて前記画像の表示態様を制御する、前記(22)~(27)のいずれか1項に記載の情報処理装置。
(29)前記表示制御部は、前記運動状態情報に基づいて表示画面における前記画像の表示位置を制御する、前記(28)に記載の情報処理装置。
(30)前記表示制御部は、前記運動状態情報に基づいて前記表示画面における前記画像の表示可能な領域を決定する、前記(29)に記載の情報処理装置。
(31)前記表示制御部は、前記運動状態情報に基づいて表示画面において前記画像として表示される情報の量を制御する、前記(28)~(30)のいずれか1項に記載の情報処理装置。
(32)前記表示制御部は、前記運動状態情報に基づいて前記画像の大きさを制御する、前記(28)~(31)のいずれか1項に記載の情報処理装置。
(33)前記表示制御部は、ユーザの属性に応じて異なる前記表示態様の制御を行う、前記(28)~(32)のいずれか1項に記載の情報処理装置。
(34)前記画像の視認性が低下している旨をユーザに認識させるための出力を制御する出力制御部をさらに備える、前記(28)~(33)のいずれか1項に記載の情報処理装置。
(35)前記表示制御部は、前記出力制御部として、前記画像の視認性が低下している旨をユーザに通知するための画像を表示画面に表示させる、前記(34)に記載の情報処理装置。
(36)ユーザの運動状態を示す運動状態情報を取得することと、前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行うことと、を含む情報処理方法。
(37)ユーザの運動状態を示す運動状態情報を取得する情報取得機能と、前記情報取得機能によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御機能と、をコンピュータに実現させるためのプログラム。
 100  情報処理装置
 102  本体部
 104  アーム
 106  鏡筒
 108  投射部
 110  導光部
 112  反射部
 114  接眼レンズ
 120  瞳孔情報取得部
 122  表示制御部
 124  記憶部
 126  表示部
 130  運動状態情報取得部

Claims (17)

  1.  ユーザの運動状態を示す運動状態情報を取得する情報取得部と、
     前記情報取得部によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御部と、
     を備える情報処理装置。
  2.  前記接眼光学系は、前記ユーザの頭部に装着される装着装置に設けられる、請求項1に記載の情報処理装置。
  3.  前記運動状態は、前記ユーザの視線を変化させる運動の状態を含む、請求項2に記載の情報処理装置。
  4.  前記ユーザの視線を変化させる運動は、前記ユーザの身体の垂直方向における運動を含む、請求項3に記載の情報処理装置。
  5.  前記身体の上下運動は、移動を伴う運動を含む、請求項4に記載の情報処理装置。
  6.  前記運動状態情報は、前記運動状態に係る運動量を示す運動量情報を含む、請求項2に記載の情報処理装置。
  7.  前記運動量情報は、前記ユーザの移動の加速度を示す加速度情報を含み、
     前記情報取得部は、前記加速度情報を取得する加速度センサを含む、請求項6に記載の情報処理装置。
  8.  前記表示制御部は、前記運動状態情報に基づいて前記画像の表示態様を制御する、請求項2に記載の情報処理装置。
  9.  前記表示制御部は、前記運動状態情報に基づいて表示画面における前記画像の表示位置を制御する、請求項8に記載の情報処理装置。
  10.  前記表示制御部は、前記運動状態情報に基づいて前記表示画面における前記画像の表示可能な領域を決定する、請求項9に記載の情報処理装置。
  11.  前記表示制御部は、前記運動状態情報に基づいて表示画面において前記画像として表示される情報の量を制御する、請求項8に記載の情報処理装置。
  12.  前記表示制御部は、前記運動状態情報に基づいて前記画像の大きさを制御する、請求項8に記載の情報処理装置。
  13.  前記表示制御部は、ユーザの属性に応じて異なる前記表示態様の制御を行う、請求項8に記載の情報処理装置。
  14.  前記画像の視認性が低下している旨をユーザに認識させるための出力を制御する出力制御部をさらに備える、請求項8に記載の情報処理装置。
  15.  前記表示制御部は、前記出力制御部として、前記画像の視認性が低下している旨をユーザに通知するための画像を表示画面に表示させる、請求項14に記載の情報処理装置。
  16.  ユーザの運動状態を示す運動状態情報を取得することと、
     前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行うことと、
     を含む情報処理方法。
  17.  ユーザの運動状態を示す運動状態情報を取得する情報取得機能と、
     前記情報取得機能によって取得される前記運動状態情報に基づいて、光がユーザの瞳孔に向けて出射される領域の他の方向よりも長さが短い方向の長さが前記瞳孔の径の変動上限以下の長さである接眼光学系によって表示される画像の表示制御を行う表示制御機能と、
     をコンピュータに実現させるためのプログラム。
PCT/JP2016/051225 2015-03-02 2016-01-18 情報処理装置、情報処理方法およびプログラム WO2016139976A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2015040164 2015-03-02
JP2015040163 2015-03-02
JP2015-040164 2015-03-02
JP2015-040163 2015-03-02

Publications (1)

Publication Number Publication Date
WO2016139976A1 true WO2016139976A1 (ja) 2016-09-09

Family

ID=56848845

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/051225 WO2016139976A1 (ja) 2015-03-02 2016-01-18 情報処理装置、情報処理方法およびプログラム

Country Status (1)

Country Link
WO (1) WO2016139976A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007163634A (ja) * 2005-12-12 2007-06-28 Olympus Corp 情報表示装置
JP2008067218A (ja) * 2006-09-08 2008-03-21 Sony Corp 撮像表示装置、撮像表示方法
JP2011091789A (ja) * 2009-09-24 2011-05-06 Brother Industries Ltd ヘッドマウントディスプレイ
JP2013255102A (ja) * 2012-06-07 2013-12-19 Olympus Corp 頭部装着型表示装置、画像表示システム及びプログラム
JP2014010326A (ja) * 2012-06-29 2014-01-20 Sony Computer Entertainment Inc 立体映像観察デバイスおよび透過率制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007163634A (ja) * 2005-12-12 2007-06-28 Olympus Corp 情報表示装置
JP2008067218A (ja) * 2006-09-08 2008-03-21 Sony Corp 撮像表示装置、撮像表示方法
JP2011091789A (ja) * 2009-09-24 2011-05-06 Brother Industries Ltd ヘッドマウントディスプレイ
JP2013255102A (ja) * 2012-06-07 2013-12-19 Olympus Corp 頭部装着型表示装置、画像表示システム及びプログラム
JP2014010326A (ja) * 2012-06-29 2014-01-20 Sony Computer Entertainment Inc 立体映像観察デバイスおよび透過率制御方法

Similar Documents

Publication Publication Date Title
US11150738B2 (en) Wearable glasses and method of providing content using the same
US10203752B2 (en) Head-mounted devices having variable focal depths
US9921646B2 (en) Head-mounted display device and method of controlling head-mounted display device
JP4927631B2 (ja) 表示装置、その制御方法、プログラム、記録媒体および集積回路
US8799810B1 (en) Stability region for a user interface
JP6277673B2 (ja) 頭部装着型表示装置および頭部装着型表示装置の制御方法
JP6593337B2 (ja) 制御装置、および制御方法、並びにプログラム
EP3807744A1 (en) Positioning a virtual reality passthrough region at a known distance
JP6036291B2 (ja) 表示装置、表示システム、および、表示装置の制御方法
CN115598842A (zh) 提升用户体验和注视互动准确度的光学系统和相关方法
JP2020077271A (ja) 表示装置、学習装置、及び、表示装置の制御方法
JP6635048B2 (ja) 情報処理装置
JP2017079389A (ja) 表示装置、表示装置の制御方法、及び、プログラム
WO2016139976A1 (ja) 情報処理装置、情報処理方法およびプログラム
US10691250B2 (en) Information processing device, information processing method, and program for preventing reflection of an operation in an output
WO2017051721A1 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2016143389A1 (ja) 情報処理装置、情報処理方法およびプログラム
WO2015166881A1 (ja) 可撓性支持部材を備えるウェアラブル画像表示装置
JP2016071103A (ja) 制御装置、および制御方法、並びにプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16758672

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

NENP Non-entry into the national phase

Ref country code: JP

122 Ep: pct application non-entry in european phase

Ref document number: 16758672

Country of ref document: EP

Kind code of ref document: A1