WO2016157951A1 - 表示制御装置、表示制御方法および記録媒体 - Google Patents

表示制御装置、表示制御方法および記録媒体 Download PDF

Info

Publication number
WO2016157951A1
WO2016157951A1 PCT/JP2016/051790 JP2016051790W WO2016157951A1 WO 2016157951 A1 WO2016157951 A1 WO 2016157951A1 JP 2016051790 W JP2016051790 W JP 2016051790W WO 2016157951 A1 WO2016157951 A1 WO 2016157951A1
Authority
WO
WIPO (PCT)
Prior art keywords
display control
display area
designated position
control unit
display
Prior art date
Application number
PCT/JP2016/051790
Other languages
English (en)
French (fr)
Inventor
誠司 鈴木
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US15/559,873 priority Critical patent/US20180059811A1/en
Priority to JP2017509318A priority patent/JPWO2016157951A1/ja
Publication of WO2016157951A1 publication Critical patent/WO2016157951A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/34—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators for rolling or scrolling
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens

Definitions

  • the present disclosure relates to a display control device, a display control method, and a recording medium.
  • a technique in which an intersection between a user-designated vector and a display area is detected as a designated position, and display control is performed according to the designated position. For example, a user's hand region is detected from an image captured by a camera, a shadow portion is extracted from the hand region, a plurality of edges of the shadow portion are detected as line segments by Hough transform, and an acute angle is detected from the detected line segments.
  • a technique for detecting the position of an intersection formed as a position designated by a user is disclosed (for example, see Patent Document 1).
  • the display control unit includes: a detection unit that detects an intersection of a user-specified vector and a plane including a display region as a specified position; and a display control unit that performs display control based on the specified position. And a display control device that performs predetermined display control when the designated position is outside the display area.
  • the method includes: detecting an intersection of a user-specified vector and a plane including a display area as a specified position; and performing display control based on the specified position.
  • a display control method including performing predetermined display control when outside the display area is provided.
  • the computer includes a detection unit that detects an intersection of a user-specified vector and a plane including the display area as a specified position, and a display control unit that performs display control based on the specified position.
  • the display control unit is a computer-readable recording medium on which a program for causing the display control device to function as a display control device that performs predetermined display control when the designated position is outside the display area is recorded. Provided.
  • FIG. 3 is a diagram illustrating a hardware configuration example of a display control device according to an embodiment of the present disclosure.
  • a plurality of constituent elements having substantially the same functional configuration may be distinguished by attaching different alphabets or numbers after the same reference numeral.
  • it is not necessary to particularly distinguish each of a plurality of constituent elements having substantially the same functional configuration only the same reference numerals are given.
  • Embodiment 1-1 Overview of information processing system 1-2.
  • Functional configuration example of display control apparatus 1-3 Example of designated vector calculation 1-4.
  • FIG. 1 is a diagram for describing an overview of an information processing system 10 according to an embodiment of the present disclosure.
  • the information processing system 10 includes a display control device 100, a detection device 120, and a display device 170.
  • the detection device 120 is a camera module that captures an image.
  • the detection device 120 images an actual space using an image sensor such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS) to generate an image.
  • An image generated by the detection device 120 is output to the display control device 100.
  • the detection device 120 is configured separately from the display control device 100, but the detection device 120 may be integrated with the display control device 100.
  • the display device 170 displays various information in the display area 171 according to the control by the display control device 100.
  • the display device 170 includes, for example, an LCD (Liquid Crystal Display), an organic EL (Electroluminescence) display device, or the like.
  • the display device 170 is configured separately from the display control device 100, but the display device 170 may be integrated with the display control device 100.
  • the display device 170 has a display area 171, and the display control apparatus 100 displays contents C 1 to C 6 in the display area 171.
  • a technique is known in which an intersection between a user U's designated vector and the display area 171 is detected as a designated position, and display control is performed according to the designated position. For example, when the intersection of the designated vector and the display area 171 exists in any of the contents C1 to C6 for a predetermined time, the content in which the intersection exists for a predetermined time may be enlarged (predetermined time). The slide show of the content where the intersection exists may be started.
  • the display control apparatus 100 includes a video camera, a digital camera, a PDA (Personal Digital Assistants), a tablet terminal, a smartphone, a mobile phone, a portable music playback device, a portable video processing device, a portable game device, a television device, It may be applied to digital signage and the like.
  • a PC Personal Computer
  • PDA Personal Digital Assistants
  • the display control device 100 includes a video camera, a digital camera, a PDA (Personal Digital Assistants), a tablet terminal, a smartphone, a mobile phone, a portable music playback device, a portable video processing device, a portable game device, a television device, It may be applied to digital signage and the like.
  • FIG. 2 is a diagram illustrating a functional configuration example of the display control apparatus 100 according to the embodiment of the present disclosure.
  • the display control device 100 includes a control unit 110 and a storage unit 130.
  • the control unit 110 corresponds to a processor such as a CPU (Central Processing Unit) or a DSP (Digital Signal Processor).
  • the control unit 110 exhibits various functions of the control unit 110 by executing a program stored in the storage unit 130 or another storage medium.
  • the control unit 110 includes functional blocks such as a detection unit 111, a display control unit 112, and an execution unit 113. The functions of these functional blocks will be described later.
  • the storage unit 130 stores a program for operating the control unit 110 using a storage medium such as a semiconductor memory or a hard disk.
  • the storage unit 130 can also store various data (for example, images) used by the program.
  • the storage unit 130 is integrated with the display control device 100, but the storage unit 130 may be configured separately from the display control device 100.
  • FIG. 3 is a diagram illustrating an example in which the direction from the elbow to the wrist of the user U is given as a designated vector by the user U.
  • the detection unit 111 recognizes the skeleton information of the user U three-dimensionally from an image captured by the detection device 120. Then, when the positions of the elbow b1 and the wrist b2 are acquired from the three-dimensionally recognized skeleton information, the detection unit 111 can detect the direction from the elbow b1 to the wrist b2 as the designated vector v. is there.
  • FIG. 4 is a diagram showing an example in which the direction from the elbow of the user U to the fingertip is given as a designated vector by the user U.
  • the detection unit 111 recognizes the skeleton information of the user U three-dimensionally from an image captured by the detection device 120. Then, when the positions of the wrist b2 and the fingertip b3 are acquired from the three-dimensionally recognized skeleton information, the detection unit 111 can detect the direction from the wrist b2 to the fingertip b3 as the designated vector v. is there.
  • the designated vector v is calculated with higher accuracy than when the direction from the elbow b1 to the wrist b2 is detected as the designated vector v. I think it can be done.
  • any one of the direction from the wrist b2 to the fingertip b3 and the direction from the elbow b1 to the wrist b2 may be used as the designated vector v, but the direction from the wrist b2 to the fingertip b3 and the elbow
  • An average of directions from b1 to the wrist b2 may be used as the designated vector v.
  • the detecting unit 111 detects an intersection between the designated vector v and a plane including the display area 171 as a designated position.
  • FIG. 5 is a diagram for explaining an example in which the intersection point between the designated vector v and the plane including the display area 171 is detected as the designated position.
  • t is a scale variable
  • the coordinate of the wrist b2 is p
  • the projection matrix from the detection device 120 to the display device 170 is P
  • the detection unit 111 intersects the designated vector v and the plane including the display region 171.
  • x can be calculated by the following equation (1).
  • the relative positional relationship between the detection device 120 and the display device 170 is determined (for example, when the detection device 120 is incorporated at a predetermined position of the display device 170), the predetermined position is determined in advance.
  • a projection matrix P may be used.
  • the relative positional relationship between the detection device 120 and the display device 170 is not fixed (for example, when the display device 170 and the detection device 120 are installed separately, or the detection device 120 is embedded in the projector). In such a case, calibration may be executed by the display control device 100 (projection transformation P may be calculated).
  • the user U performs pointing in order for a total of five points including the four corners of the display area 171 and the center of the display area 171, and calibration is performed based on the pointing by the user U toward the five points. May be.
  • an object displayed in the display area 171 may be read by a camera fixed to the detection device 120, and calibration may be performed based on the position of the read object.
  • the calibration data once calculated can be used continuously as long as the positional relationship between the detection device 120 and the display device 170 does not change.
  • the display control unit 112 performs display control based on the designated position.
  • the display control unit 112 performs predetermined display control when the designated position is outside the display area 171. With this configuration, when the position designated by the user U is outside the display area 171, it can be fed back to the user U that the outside of the display area 171 has been designated.
  • the predetermined display control is not particularly limited. Hereinafter, an example of predetermined display control will be described.
  • FIG. 6 is a diagram illustrating a first display control example in a case where the designated position is outside the display area 171.
  • the center of the display area 171 is shown as the center position Pc.
  • the display control unit 112 may display the object in the display area 171 when the designated position is outside the display area 171. Then, it is possible to visually notify the user U that the outside of the display area 171 has been designated.
  • the display control unit 112 since the designated position Pt1 that is outside the display area 171 is designated by the user U, the display control unit 112 displays the object B1 in the display area 171.
  • the object displayed in the display area 171 only needs to be visible to the user U, and the color, size, shape, and the like of the object are not particularly limited.
  • the display position of the object is not particularly limited.
  • the display control unit 112 may display the object at the end of the display area 171 when the specified position is outside the display area 171. Then, it becomes possible to inform the user U more intuitively that the outside of the display area 171 has been designated. In the example shown in FIG. 6, since the designated position Pt1 is outside the display area 171, the display control unit 112 displays the object B1 at the end of the display area 171.
  • the display control unit 112 determines whether the end of the display area 171 is a predetermined position (for example, the center position Pc) of the display area 171 and the line segment connecting the designated position. Objects may be displayed at the intersections. By doing so, it is possible to notify the user U as to which direction the designated position by the user U is based on the position of the display area 171. In the example shown in FIG. 6, since the designated position Pt1 is outside the display area 171, the display control unit 112 determines the end of the display area 171, the predetermined position (for example, the center position Pc) of the display area 171, and the designated position. The object B1 is displayed at the intersection T1 with the line segment connecting Pt1.
  • a predetermined position for example, the center position Pc
  • the predetermined position of the display area 171 is the center position Pc
  • the predetermined position of the display area 171 is not limited to the center position Pc.
  • the display control unit 112 may display the same object in the display area 171 without depending on the designated position, or may change the object according to the designated position. For example, the display control unit 112 may change the size of the object according to the designated position. Referring to FIG. 6, since the designated position Pt2 is also outside the display area 171, the display control unit 112 intersects the end T2 of the display area 171, the center position Pc of the display area 171, and a line segment connecting the designated positions. The object B2 is displayed on the screen.
  • the display control unit 112 sets the size of the object B1 to the object because the distance D1 from the intersection T1 to the designated position Pt1 is smaller than the distance D2 from the intersection T2 to the designated position Pt2. It is larger than the size of B2.
  • the display control unit 112 increases the size of the object as the distance from the intersection between the end of the display area 171 and the line connecting the center position Pc of the display area 171 and the specified position to the specified position decreases.
  • the display control unit 112 may reduce the size of the object as the distance from the intersection to the designated position decreases.
  • FIG. 7 is a diagram illustrating a second display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 may change the shape of the object according to the designated position.
  • the display control unit 112 determines the degree of deformation of the object B1 because the distance D1 from the intersection T1 to the designated position Pt1 is smaller than the distance D2 from the intersection T2 to the designated position Pt2.
  • the degree of deformation of the object B2 is smaller (the shape of the object B1 is a semicircular shape as in the case where the designated position is inside the display area 171 and the shape of the object B2 is a semielliptical shape).
  • the display control unit 112 reduces the degree of deformation of the object as the distance from the intersection point between the end of the display area 171 and the line segment connecting the center position Pc of the display area 171 and the specified position decreases.
  • the display control unit 112 may increase the degree of deformation of the object as the distance from the intersection to the designated position decreases.
  • FIG. 8 is a diagram illustrating a third display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 changes the shape of the object according to the designated position has been described.
  • the display control unit 112 may change the color of the object according to the designated position.
  • the display control unit 112 determines that the distance D1 from the intersection point T1 to the designated position Pt1 is smaller than the distance D2 from the center position Pc to the designated position Pt2 of the display area 171.
  • the color of B1 is lighter than the color of object B2.
  • the display control unit 112 reduces the color of the object as the distance from the intersection between the end of the display area 171 and the line connecting the center position Pc of the display area 171 and the specified position to the specified position decreases.
  • how to change the color of the object is not limited. Therefore, the display control unit 112 may darken the color of the object as the distance from the center position Pc of the display area 171 to the designated position becomes smaller.
  • the change in the color of the object may not be a change in the color intensity of the object.
  • FIG. 9 is a flowchart showing an example of the flow of operations for displaying an object in the display area 171 when the designated position is outside the display area 171. Note that the operation of displaying an object in the display area 171 when the designated position is outside the display area 171 is not limited to the example shown in the flowchart of FIG.
  • the detection unit 111 calculates a user-designated vector based on the image captured by the detection device 120 (S11). Subsequently, the detection unit 111 detects an intersection point between a user-designated vector and a plane including the display area 171 as a designated position (S12). Subsequently, the display control unit 112 determines whether or not the designated position is outside the display area 171 (S13). If the display control unit 112 determines that the designated position is not outside the display area 171 (S13: No), the display control unit 112 shifts the operation to S15. On the other hand, when it is determined that the designated position is outside the display area 171 (S13: Yes), the object is displayed in the display area 171 (S14), and the operation is shifted to S15.
  • the execution unit 113 determines whether or not a predetermined operation has been performed by the user (S15). When it is determined that the user has not performed the predetermined operation (S15: No), the execution unit 113 ends the operation. On the other hand, if the execution unit 113 determines that a predetermined operation has been performed by the user (S15: Yes), the execution unit 113 executes a process corresponding to the designated position (S16) and ends the operation.
  • the process corresponding to the designated position is not particularly limited, but as described above, the process may be a process of enlarging and displaying the content in which the intersection of the designated vector by the user U and the display area 171 exists over a predetermined time.
  • FIG. 10 is a diagram illustrating a fourth display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 may correct the designated position when the designated position is outside the display area 171. With this configuration, even when the designated position is outside the display area 171, the designated position is shifted to the designated position after correction.
  • the display control unit 112 connects the center position Pc and the designated position Pd when the designated position Pd is outside the display area 171.
  • the designated position Pd may be corrected to the intersection Pe between the minute and the end of the display area 171. If the designated position Pd is corrected at the intersection Pe, the user can easily understand where the designated position after correction is.
  • a correction area Ar may be provided around the display area 171. The display control unit 112 may correct the designated position Pd when the designated position Pd is inside the correction area Ar.
  • FIG. 11 is a flowchart showing an example of the flow of operations for correcting the designated position when the designated position is outside the display area 171. Note that the operation of correcting the designated position when the designated position is outside the display area 171 is not limited to the example shown in the flowchart of FIG.
  • the detection unit 111 calculates a user-designated vector based on the image captured by the detection device 120 (S11). Subsequently, the detection unit 111 detects an intersection point between a user-designated vector and a plane including the display area 171 as a designated position (S12). Subsequently, the display control unit 112 determines whether or not the designated position is outside the display area 171 (S13). If the display control unit 112 determines that the designated position is not outside the display area 171 (S13: No), the display control unit 112 shifts the operation to S15. On the other hand, when it is determined that the designated position is outside the display area 171 (S13: Yes), the designated position is corrected (S21), and the operation is shifted to S15.
  • the execution unit 113 determines whether or not a predetermined operation has been performed by the user (S15). When it is determined that the user has not performed the predetermined operation (S15: No), the execution unit 113 ends the operation. On the other hand, if the execution unit 113 determines that a predetermined operation has been performed by the user (S15: Yes), the execution unit 113 executes a process corresponding to the designated position (S16) and ends the operation.
  • the process corresponding to the designated position is not particularly limited, but as described above, the process may be a process of enlarging and displaying the content in which the intersection of the designated vector by the user U and the display area 171 exists over a predetermined time.
  • FIG. 12 is a diagram illustrating a fifth display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 may scroll the content of the display area 171 based on the designated position. With this configuration, it is possible to increase the scrollable amount of content.
  • the scroll direction of the content is not limited, for example, as illustrated in FIG. 12, the display control unit 112, when the specified position Pt is outside the display area 171, the specified position Pt with reference to the center position Pc.
  • the content may be scrolled based on the direction. If the content is scrolled in such a direction, the user can intuitively specify the scroll direction of the content.
  • FIG. 12 shows an example in which the map data is content, but the content may be other than map data.
  • the content may be photo data (may be displayed by a photo viewer).
  • the content scrolling speed is not limited, for example, when the designated position Pt is outside the display area 171, the display control unit 112 uses the reference position of the display area 171 (for example, the end of the display area 171 and the display area 171).
  • the content may be scrolled at a speed corresponding to the distance D between the center position Pc and the line segment connecting the specified position Pt) and the specified position Pt. If the content is scrolled at such a speed, the user can intuitively specify the scroll speed of the content.
  • the display control unit 112 determines that the distance D between the reference position of the display area 171 and the designated position is The content may be scrolled at a higher speed as the size increases.
  • the display control unit 112 scrolls the content of the display area 171 based on the specified position when the specified position is outside the display area 171.
  • the display control unit 112 may switch the content of the display area 171 based on the specified position.
  • the display control unit 112 may switch the content based on the direction of the designated position Pt with respect to the center position Pc when the designated position Pt is outside the display area 171. .
  • the content switching speed is not limited, for example, when the designated position Pt is outside the display area 171, the display control unit 112 displays the reference position of the display area 171 (for example, the end portion of the display area 171 and the display area 171). The content may be switched at a speed corresponding to the distance D between the specified position Pt and the intersection point between the center position Pc of the region 171 and the line segment connecting the specified position Pt.
  • FIG. 13 is a flowchart illustrating an example of the flow of operations for scrolling content based on a specified position when the specified position is outside the display area 171. Note that the operation of scrolling the content based on the designated position when the designated position is outside the display area 171 is not limited to the example shown in the flowchart of FIG.
  • the detection unit 111 calculates a user-designated vector based on the image captured by the detection device 120 (S11). Subsequently, the detection unit 111 detects an intersection point between a user-designated vector and a plane including the display area 171 as a designated position (S12). Subsequently, the display control unit 112 determines whether or not the designated position is outside the display area 171 (S13). If the display control unit 112 determines that the designated position is not outside the display area 171 (S13: No), the operation is terminated. On the other hand, when it is determined that the designated position is outside the display area 171 (S13: Yes), the content is scrolled based on the designated position (S31), and the operation is terminated.
  • FIG. 14 is a diagram illustrating a sixth display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 may perform a drag operation based on the movement of the designated position when the designated position is moved from the inside to the outside of the display area 171. With this configuration, it is possible to increase the width of the drag operation.
  • the direction and size of the drag operation are not limited, for example, as shown in FIG. 14, the display control unit 112 has moved the designated position from the inner position Pt1 to the outer position Pt2 in the display area 171.
  • the drag operation may be performed according to the direction and size from the position Pt1 to the outer position Pt2. If the drag operation is performed according to such direction and size, the user can intuitively perform the drag operation.
  • FIG. 15 is a diagram illustrating a seventh display control example when the designated position is outside the display area 171.
  • the display control unit 112 may perform a pinch-out operation based on the movement of each of the plurality of designated positions when the movement of each of the plurality of designated positions is performed from the inside to the outside of the display area 171. With this configuration, it is possible to increase the width of the pinch-out operation.
  • the operation executed by the pinch-out operation may be content expansion.
  • the display control unit 112 moves the designated position from the position Pt1 inside the display area 171 to the position Pt2 outside and moves from the position Pt3 inside the display area 171 to the position Pt4 outside.
  • the designated position is moved, the content displayed in the display area 171 may be enlarged. If the content is expanded by a pinch-out operation, the user can intuitively expand the content.
  • FIG. 16 is a diagram illustrating an eighth display control example in the case where the designated position is outside the display area 171.
  • the display control unit 112 may perform a pinch-in operation based on the movement of each of the plurality of designated positions when the movement of each of the plurality of designated positions is performed from the outside to the inside of the display area 171. With this configuration, it is possible to increase the width of the pinch-in operation.
  • the operation executed by the pinch-in operation may be content reduction.
  • the display control unit 112 moves the designated position from the position Pt1 outside the display area 171 to the position Pt2 inside and moves from the position Pt3 outside the display area 171 to the position Pt4 inside.
  • the designated position is moved, the content displayed in the display area 171 may be reduced. If the content is reduced by a pinch-in operation, the user can intuitively reduce the content.
  • FIG. 17 is a flowchart illustrating an example of a flow of operations for performing processing on content based on movement of a designated position. Note that the operation for processing the content based on the movement of the designated position is not limited to the example shown in the flowchart of FIG.
  • the detection unit 111 calculates a user-designated vector based on the image captured by the detection device 120 (S11). Subsequently, the detection unit 111 detects an intersection point between a user-designated vector and a plane including the display area 171 as a designated position (S12). Subsequently, the display control unit 112 determines whether or not the designated position has been moved from the inside to the outside of the display area 171 (S40).
  • the display control unit 112 determines that the designated position has been moved from the inside to the outside of the display area 171 (S40: Yes)
  • the display control unit 112 performs a drag operation (S40) and ends the operation.
  • the display control unit 112 determines that the designated position is not moved from the inside to the outside of the display area 171 (S40: No)
  • the display control unit 112 moves each of the plurality of designated positions from the outside to the inside of the display area 171. It is determined whether or not has been made (S42).
  • the display control unit 112 determines that each of the plurality of designated positions has been moved from the outside to the inside of the display area 171 (S42: Yes)
  • the display control unit 112 performs a pinch-in operation (S43) and ends the operation.
  • the display control unit 112 determines that each of the plurality of designated positions has not been moved from the outside to the inside of the display area 171 (S42: No)
  • the plurality of designated positions from the inside to the outside of the display area 171. It is determined whether or not each movement has been made (S44).
  • the display control unit 112 determines that each of the plurality of designated positions has been moved from the inside to the outside of the display area 171 (S44: Yes), it performs a pinch-out operation (S45) and ends the operation. To do. On the other hand, when it is determined that the plurality of designated positions are not moved from the inside to the outside of the display area 171 (S44: No), the display control unit 112 ends the operation.
  • the designation vector by the user U may be given in any way.
  • the detection unit 111 may be given a designated vector based on sensor data detected by the sensor.
  • FIG. 18 is a diagram for explaining an example in which a designated vector is given based on sensor data detected by a sensor. As shown in FIG. 18, the user U can operate the sensor R.
  • the detection unit 111 calculates a designated vector based on the sensor data detected by the sensor R, and detects an intersection between the designated vector and a plane including the display area 171 as a designated position.
  • the sensor data detected by the sensor R may be a movement of the sensor R.
  • the sensor data may be an acceleration detected by an acceleration sensor or an angular velocity detected by a gyro sensor.
  • a method disclosed in International Publication No. 2009/008372 can be adopted as a method for calculating the intersection between the designated vector and the display area 171.
  • the designated vector may be given by the user's line of sight.
  • FIG. 19 is a diagram for explaining an example in which a designated vector is given by a user's line of sight. As shown in FIG. 19, the user U can send a line of sight to the display area 171.
  • the detection unit 111 detects the line of sight of the user U.
  • the method for detecting the line of sight of the user U is not particularly limited.
  • the detection unit 111 may detect the line of sight of the user U based on an imaging result obtained by imaging the eye area of the user U.
  • an imaging device for example, when an infrared camera is used as the imaging device, an infrared irradiation device that irradiates infrared rays to the eye region of the user U may be provided. If it does so, the infrared rays reflected by the user's eye area
  • the detection unit 111 may detect the line of sight of the user U based on the orientation of the HMD.
  • the detection unit 111 may detect the line of sight of the user U based on the myoelectricity detected by the myoelectric sensor. Then, the detection unit 111 calculates the line of sight of the user U as a designated vector, and detects an intersection between the designated vector and a plane including the display area 171 as a designated position.
  • FIG. 20 is a diagram illustrating a hardware configuration example of the display control apparatus 100 according to the embodiment of the present disclosure.
  • the hardware configuration example illustrated in FIG. 20 is merely an example of the hardware configuration of the display control apparatus 100. Therefore, the hardware configuration of the display control apparatus 100 is not limited to the example illustrated in FIG.
  • the display control apparatus 100 includes a CPU (Central Processing Unit) 801, a ROM (Read Only Memory) 802, a RAM (Random Access Memory) 803, an input device 808, and an output device 810.
  • the CPU 801 functions as an arithmetic processing device and a control device, and controls the overall operation in the display control device 100 according to various programs. Further, the CPU 801 may be a microprocessor.
  • the ROM 802 stores programs used by the CPU 801, calculation parameters, and the like.
  • the RAM 803 temporarily stores programs used in the execution of the CPU 801, parameters that change as appropriate during the execution, and the like. These are connected to each other by a host bus including a CPU bus.
  • the input device 808 includes an input unit for a user to input information, such as a mouse, a keyboard, a touch panel, a button, a microphone, a switch, and a lever, and an input control circuit that generates an input signal based on the input by the user and outputs the input signal to the CPU 801 Etc.
  • the user of the display control device 100 can input various data and instruct processing operations to the display control device 100 by operating the input device 808.
  • the output device 810 includes a display device such as a liquid crystal display (LCD) device, an OLED (Organic Light Emitting Diode) device, and a lamp. Furthermore, the output device 810 includes an audio output device such as a speaker and headphones. For example, the display device displays a captured image or a generated image. On the other hand, the audio output device converts audio data or the like into audio and outputs it.
  • a display device such as a liquid crystal display (LCD) device, an OLED (Organic Light Emitting Diode) device, and a lamp.
  • the output device 810 includes an audio output device such as a speaker and headphones.
  • the display device displays a captured image or a generated image.
  • the audio output device converts audio data or the like into audio and outputs it.
  • the storage device 811 is a data storage device configured as an example of a storage unit of the display control device 100.
  • the storage device 811 may include a storage medium, a recording device that records data on the storage medium, a reading device that reads data from the storage medium, a deletion device that deletes data recorded on the storage medium, and the like.
  • the storage device 811 stores programs executed by the CPU 801 and various data.
  • the drive 812 is a reader / writer for a storage medium, and is built in or externally attached to the display control device 100.
  • the drive 812 reads out information recorded on a removable storage medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and outputs the information to the RAM 803.
  • the drive 812 can also write information in a removable storage medium.
  • the imaging device 813 includes an imaging optical system such as a photographing lens and a zoom lens that collects light, and a signal conversion element such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor).
  • the imaging optical system collects light emitted from the subject and forms a subject image in the signal conversion unit, and the signal conversion element converts the formed subject image into an electrical image signal.
  • the communication device 815 is a communication interface configured with, for example, a communication device for connecting to a network.
  • the communication device 815 may be a wireless LAN (Local Area Network) compatible communication device, an LTE (Long Term Evolution) compatible communication device, or a wire communication device that performs wired communication.
  • the communication device 815 can communicate with other devices via a network, for example.
  • the detection unit 111 that detects the intersection of the specified vector by the user U and the plane including the display area 171 as the specified position, and the display control based on the specified position.
  • the display control unit 112 is provided, and the display control unit 112 performs predetermined display control when the designated position is outside the display area 171. According to such a configuration, when the position designated by the user is outside the display area 171, it is possible to feed back to the user that the outside of the display area 171 has been designated.
  • the display control unit 112 may suppress the vibration of the object by filtering the object displayed in the display area 171.
  • the display control unit 112 may suppress the vibration of the object by filtering the object displayed in the display area 171.
  • the display control unit 112 may suppress the vibration of the object by filtering the object displayed in the display area 171.
  • by adding an afterimage to the object displayed in the display area 171 it is possible to make the user feel as if the vibration of the object is suppressed.
  • the operation of the display control apparatus 100 does not necessarily have to be performed in time series in the order described in the flowchart.
  • the operations of the display control apparatus 100 may be performed in an order different from the order described in the flowchart, or at least a part of the operations described in the flowchart may be performed in parallel.
  • a detection unit that detects an intersection of a specified vector by a user and a plane including a display area as a specified position;
  • a display control unit that performs display control based on the designated position,
  • the display control unit is a display control device that performs predetermined display control when the designated position is outside the display area.
  • the display control unit displays a predetermined object in the display area when the designated position is outside the display area;
  • the display control device according to (1).
  • the display control unit displays a predetermined object at an end of the display area when the designated position is outside the display area;
  • the display control apparatus according to (2).
  • the display control unit displays a predetermined object at an intersection of an end of the display area, a predetermined position of the display area, and a line segment connecting the specified position when the specified position is outside the display area.
  • the display control device changes the predetermined object according to the designated position.
  • the display control apparatus changes a size of the predetermined object according to the designated position;
  • the display control apparatus changes to (5).
  • the display control unit changes the shape of the predetermined object according to the designated position.
  • the display control unit changes a color of the predetermined object according to the designated position;
  • the display control unit when the designated position is outside the display area, to scroll the content of the display area based on the designated position; The display control device according to (1).
  • the display control unit when the designated position is outside the display area, to scroll the content based on the direction of the designated position with respect to a predetermined position of the display area; The display control apparatus according to (9).
  • the display control unit scrolls the content at a speed according to a distance between a predetermined position of the display area and the designated position when the designated position is outside the display area; The display control apparatus according to (9).
  • (12) The display control unit switches the content of the display area based on the designated position when the designated position is outside the display area; The display control device according to (1).
  • the display control unit performs a drag operation based on the movement of the designated position when the designated position is moved from the inside to the outside of the display area.
  • the display control device according to (1).
  • the display control unit performs a pinch-in operation or a pinch-out operation based on the movement of each of the plurality of designated positions when the movement of each of the plurality of designated positions is performed between the inside and the outside of the display area.
  • the display control device according to (1).
  • the display control unit corrects the designated position when the designated position is outside the display area; The display control device according to (1).
  • the display control unit corrects the designated position at an intersection of a predetermined segment of the display area and a line segment connecting the designated position and an end of the display area when the designated position is outside the display area.
  • the display control apparatus according to (15).
  • Computer A detection unit that detects an intersection of a specified vector by a user and a plane including a display area as a specified position; A display control unit that performs display control based on the designated position,
  • the display control unit is a computer-readable recording medium that records a program for causing the display control unit to function as a display control device that performs predetermined display control when the designated position is outside the display area.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】ユーザによって指定された位置が表示領域の外側である場合に、表示領域の外側が指定された旨をユーザに対してフィードバックする。 【解決手段】ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、前記指定位置に基づいて表示制御を行う表示制御部と、を備え、前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置が提供される。

Description

表示制御装置、表示制御方法および記録媒体
　本開示は、表示制御装置、表示制御方法および記録媒体に関する。
　近年、ユーザによる指定ベクトルと表示領域との交点を指定位置として検出し、指定位置に応じた表示制御を行う技術が知られている。例えば、カメラによって撮像された画像からユーザの手領域を検出し、手領域から影部分を抽出し、ハフ変換により影部分のエッジを線分として複数検出し、検出した線分の中から鋭角をなす交点の位置をユーザによる指定位置として検出する技術が開示されている（例えば、特許文献１参照）。
特開２００８－５９２８３号公報
　しかし、ユーザによって指定された位置が表示領域の外側である場合に、表示領域の外側が指定された旨をユーザに対してフィードバックすることが望ましい。
　本開示によれば、ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、前記指定位置に基づいて表示制御を行う表示制御部と、を備え、前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置が提供される。
　また、本開示によれば、ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出することと、前記指定位置に基づいて表示制御を行うことと、を含み、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行うことを含む、表示制御方法が提供される。
　また、本開示によれば、コンピュータを、ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、前記指定位置に基づいて表示制御を行う表示制御部と、を備え、前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置として機能させるためのプログラムを記録した、コンピュータに読み取り可能な記録媒体が提供される。
　以上説明したように本開示によれば、ユーザによって指定された位置が表示領域の外側である場合に、表示領域の外側が指定された旨をユーザに対してフィードバックすることが可能である。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の実施形態に係る情報処理システムの概要について説明するための図である。 同実施形態に係る表示制御装置の機能構成例を示す図である。 ユーザの肘から手首への方向がユーザによる指定ベクトルとして与えられる例を示す図である。 ユーザの肘から指先への方向がユーザによる指定ベクトルとして与えられる例を示す図である。 指定ベクトルと表示領域を含む平面との交点を指定位置として検出する例を説明するための図である。 指定位置が表示領域の外側である場合における第一の表示制御例を示す図である。 指定位置が表示領域の外側である場合における第二の表示制御例を示す図である。 指定位置が表示領域の外側である場合における第三の表示制御例を示す図である。 指定位置が表示領域の外側である場合において表示領域にオブジェクトを表示させる動作の流れの例を示すフローチャートである。 指定位置が表示領域の外側である場合における第四の表示制御例を示す図である。 指定位置が表示領域の外側である場合において指定位置を補正する動作の流れの例を示すフローチャートである。 指定位置が表示領域の外側である場合における第五の表示制御例を示す図である。 指定位置が表示領域の外側である場合において指定位置に基づいてコンテンツをスクロールさせる動作の流れの例を示すフローチャートである。 指定位置が表示領域の外側である場合における第六の表示制御例を示す図である。 指定位置が表示領域の外側である場合における第七の表示制御例を示す図である。 指定位置が表示領域の外側である場合における第八の表示制御例を示す図である。 指定位置の移動に基づいてコンテンツに対する処理を行う動作の流れの例を示すフローチャートである。 センサによって検出されたセンサデータに基づいて指定ベクトルが与えられる例を説明するための図である。 センサによって検出されたセンサデータに基づいて指定ベクトルが与えられる例を説明するための図である。 本開示の実施形態に係る表示制御装置のハードウェア構成例を示す図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットまたは数字を付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
　なお、説明は以下の順序で行うものとする。
　　１．実施形態
　　　１－１．情報処理システムの概要
　　　１－２．表示制御装置の機能構成例
　　　１－３．指定ベクトル算出の一例
　　　１－４．キャリブレーションデータ
　　　１－５．指定位置に応じた表示制御例
　　　１－６．指定ベクトル算出の他の例
　　　１－７．ハードウェア構成例
　　２．むすび
　　＜＜１．実施形態＞＞
　　　［１－１．情報処理システムの概要］
　最初に、本開示の実施形態に係る情報処理システム１０の概要について説明する。図１は、本開示の実施形態に係る情報処理システム１０の概要について説明するための図である。図１に示すように、情報処理システム１０は、表示制御装置１００、検出装置１２０および表示装置１７０を備えている。
　検出装置１２０は、画像を撮像するカメラモジュールである。検出装置１２０は、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などの撮像素子を用いて実空間を撮像し、画像を生成する。検出装置１２０により生成される画像は、表示制御装置１００に出力される。なお、図１に示した例では、検出装置１２０は表示制御装置１００と別体に構成されているが、検出装置１２０は表示制御装置１００と一体化されていてもよい。
　表示装置１７０は、表示制御装置１００による制御に従って、表示領域１７１に各種情報の表示を行う。表示装置１７０は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）、有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ装置などにより構成される。なお、図１に示した例では、表示装置１７０は表示制御装置１００と別体に構成されているが、表示装置１７０は表示制御装置１００と一体化されていてもよい。表示装置１７０は、表示領域１７１を有しており、表示制御装置１００は、表示領域１７１にコンテンツＣ１～Ｃ６を表示させている。
　ここで、ユーザＵによる指定ベクトルと表示領域１７１との交点を指定位置として検出し、指定位置に応じた表示制御を行う技術が知られている。例えば、指定ベクトルと表示領域１７１との交点がコンテンツＣ１～Ｃ６のいずれかに所定時間を超えて存在する場合、所定時間を超えて当該交点が存在したコンテンツを拡大表示してもよい（所定時間を超えて当該交点が存在したコンテンツのスライドショーを開始してもよい）。
　しかし、ユーザＵによって指定された位置が表示領域１７１の外側である場合に、表示領域１７１の外側が指定された旨をユーザＵに対してフィードバックすることが望ましい。このようなフィードバックは、表示領域１７１の内側を指定しようとしたユーザＵにとっても有用であり、表示領域１７１の外側を指定しようとしたユーザＵにとっても有用であると考えられる。本明細書においては、かかるフィードバックを行う技術について主に説明する。
　なお、以下の説明においては、表示制御装置１００がＰＣ（Ｐｅｒｓｏｎａｌ　Ｃｏｍｐｕｔｅｒ）に適用される場合を例として説明するが、表示制御装置１００は、ＰＣ以外の装置に適用されてもよい。例えば、表示制御装置１００は、ビデオカメラ、デジタルカメラ、ＰＤＡ（Ｐｅｒｓｏｎａｌ　Ｄｉｇｉｔａｌ　Ａｓｓｉｓｔａｎｔｓ）、タブレット端末、スマートフォン、携帯電話、携帯用音楽再生装置、携帯用映像処理装置、携帯用ゲーム機器、テレビジョン装置、デジタルサイネージなどに適用されてもよい。
　以上、本開示の実施形態に係る情報処理システム１０の概要について説明した。
　　　［１－２．表示制御装置の機能構成例］
　続いて、本開示の実施形態に係る表示制御装置１００の機能構成例について説明する。図２は、本開示の実施形態に係る表示制御装置１００の機能構成例を示す図である。図２に示すように、表示制御装置１００は、制御部１１０および記憶部１３０を備える。
　制御部１１０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）またはＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）などのプロセッサに相当する。制御部１１０は、記憶部１３０または他の記憶媒体に記憶されるプログラムを実行することにより、制御部１１０が有する様々な機能を発揮する。制御部１１０は、検出部１１１、表示制御部１１２および実行部１１３などの各機能ブロックを有する。これら各機能ブロックが有する機能については後に説明する。
　記憶部１３０は、半導体メモリまたはハードディスクなどの記憶媒体を用いて、制御部１１０を動作させるためのプログラムを記憶する。また、例えば、記憶部１３０は、プログラムによって使用される各種のデータ（例えば、画像など）を記憶することもできる。なお、図２に示した例では、記憶部１３０は表示制御装置１００と一体化されているが、記憶部１３０は表示制御装置１００と別体に構成されていてもよい。
　以上、本開示の実施形態に係る表示制御装置１００の機能構成例について説明した。
　　　［１－３．指定ベクトル算出の一例］
　まず、ユーザＵによる指定ベクトルはどのように与えられてもよいが、ユーザＵによる指定ベクトルがユーザの指差しによって与えられる例について説明する。図３は、ユーザＵの肘から手首への方向がユーザＵによる指定ベクトルとして与えられる例を示す図である。図３に示すように、検出部１１１は、検出装置１２０によって撮像された画像からユーザＵの骨格情報を３次元的に認識する。そして、検出部１１１は、３次元的に認識された骨格情報から肘ｂ１および手首ｂ２それぞれの位置が取得された場合、肘ｂ１から手首ｂ２への方向を指定ベクトルｖとして検出することが可能である。
　また、図４は、ユーザＵの肘から指先への方向がユーザＵによる指定ベクトルとして与えられる例を示す図である。図４に示すように、検出部１１１は、検出装置１２０によって撮像された画像からユーザＵの骨格情報を３次元的に認識する。そして、検出部１１１は、３次元的に認識された骨格情報から手首ｂ２および指先ｂ３それぞれの位置が取得された場合、手首ｂ２から指先ｂ３への方向を指定ベクトルｖとして検出することが可能である。
　ここで、手首ｂ２から指先ｂ３への方向を指定ベクトルｖとして検出した場合には、肘ｂ１から手首ｂ２への方向を指定ベクトルｖとして検出した場合よりも、より高精度に指定ベクトルｖを算出することができると考えられる。これらの例のように、手首ｂ２から指先ｂ３への方向および肘ｂ１から手首ｂ２への方向のいずれか一方が指定ベクトルｖとして用いられてもよいが、手首ｂ２から指先ｂ３への方向および肘ｂ１から手首ｂ２への方向の平均が指定ベクトルｖとして用いられてもよい。
　　　［１－４．キャリブレーションデータ］
　続いて、検出部１１１は、指定ベクトルｖと表示領域１７１を含む平面との交点を指定位置として検出する。図５は、指定ベクトルｖと表示領域１７１を含む平面との交点を指定位置として検出する例を説明するための図である。例えば、ｔをスケール変数とし、手首ｂ２の座標をｐとし、検出装置１２０から表示装置１７０への射影行列をＰとすると、検出部１１１は、指定ベクトルｖと表示領域１７１を含む平面との交点ｘを、以下の式（１）によって算出することができる。
　ｘ＝Ｐ（ｔｖ＋ｐ）　・・・（１）
　このとき、検出装置１２０と表示装置１７０との相対的な位置関係が定まっている場合には（例えば、表示装置１７０の所定位置に検出装置１２０が組み込まれる場合などには）、あらかじめ決められた射影行列Ｐが用いられてよい。一方、検出装置１２０と表示装置１７０との相対的な位置関係が定まっていない場合には（例えば、表示装置１７０と検出装置１２０とが別々に設置される場合や、プロジェクタに検出装置１２０が埋め込まれる場合などには）、表示制御装置１００によってキャリブレーションが実行されるとよい（射影変換Ｐが算出されてよい）。
　例えば、表示領域１７１の四隅と表示領域１７１の中心との計５点に対してユーザＵによって順番に指差しが実行され、５点に向けたユーザＵによる指差しに基づいてキャリブレーションが実行されてもよい。また、検出装置１２０に固定されたカメラによって表示領域１７１に表示されたオブジェクトが読み取られ、読み取られたオブジェクトの位置に基づいてキャリブレーションが実行されてもよい。一度計算されたキャリブレーションデータは、検出装置１２０と表示装置１７０との位置関係が変わらない限り、使い続けられ得る。
　　　［１－５．指定位置に応じた表示制御例］
　続いて、表示制御部１１２は、指定位置に基づいて表示制御を行う。そして、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、所定の表示制御を行う。かかる構成により、ユーザＵによって指定された位置が表示領域１７１の外側である場合に、表示領域１７１の外側が指定された旨をユーザＵに対してフィードバックすることが可能となる。所定の表示制御については特に限定されない。以下、所定の表示制御の例について説明する。
　図６は、指定位置が表示領域１７１の外側である場合における第一の表示制御例を示す図である。図６を参照すると、表示領域１７１の中心が中心位置Ｐｃとして示されている。ここで、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、表示領域１７１にオブジェクトを表示させてもよい。そうすれば、表示領域１７１の外側が指定された旨をユーザＵに対して視覚的に知らせることが可能となる。図６に示した例では、ユーザＵによって表示領域１７１の外側である指定位置Ｐｔ１が指定されているため、表示制御部１１２は、表示領域１７１にオブジェクトＢ１を表示させている。
　表示領域１７１に表示されるオブジェクトは、ユーザＵが視認可能であればよく、オブジェクトの色、サイズ、形状などは特に限定されない。また、オブジェクトの表示位置は特に限定されないが、例えば、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、表示領域１７１の端部にオブジェクトを表示させてよい。そうすれば、表示領域１７１の外側が指定された旨をより直感的にユーザＵに知らせることが可能となる。図６に示した例では、指定位置Ｐｔ１が表示領域１７１の外側であるため、表示制御部１１２は、表示領域１７１の端部にオブジェクトＢ１を表示させている。
　特に、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、表示領域１７１の端部と表示領域１７１の所定位置（例えば、中心位置Ｐｃ）および指定位置を結ぶ線分との交点にオブジェクトを表示させてよい。そうすれば、ユーザＵによる指定位置が表示領域１７１の位置を基準としてどちらの方向にあるかについてもユーザＵに知らせることが可能となる。図６に示した例では、指定位置Ｐｔ１が表示領域１７１の外側であるため、表示制御部１１２は、表示領域１７１の端部と表示領域１７１の所定位置（例えば、中心位置Ｐｃ）および指定位置Ｐｔ１を結ぶ線分との交点Ｔ１にオブジェクトＢ１を表示させている。
　以下、表示領域１７１の所定位置が中心位置Ｐｃである場合を主に例として説明するが、表示領域１７１の所定位置は中心位置Ｐｃに限定されない。
　また、表示制御部１１２は、指定位置に依存せずに同一のオブジェクトを表示領域１７１に表示させてもよいし、指定位置に応じてオブジェクトを変化させてもよい。例えば、表示制御部１１２は、指定位置に応じてオブジェクトのサイズを変化させてもよい。図６を参照すると、表示制御部１１２は、指定位置Ｐｔ２も表示領域１７１の外側であるため、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置を結ぶ線分との交点Ｔ２にオブジェクトＢ２を表示させている。
　ここで、図６に示した例では、表示制御部１１２は、交点Ｔ１から指定位置Ｐｔ１までの距離Ｄ１が、交点Ｔ２から指定位置Ｐｔ２までの距離Ｄ２よりも小さいため、オブジェクトＢ１のサイズをオブジェクトＢ２のサイズよりも大きくしている。このように、表示制御部１１２は、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置を結ぶ線分との交点から指定位置までの距離が小さくなるほど、オブジェクトのサイズを大きくしてもよいが、オブジェクトのサイズをどのように変化させるかは限定されない。そのため、表示制御部１１２は、当該交点から指定位置までの距離が小さくなるほど、オブジェクトのサイズを小さくしてもよい。
　図７は、指定位置が表示領域１７１の外側である場合における第二の表示制御例を示す図である。上記した例では、表示制御部１１２が指定位置に応じてオブジェクトのサイズを変化させる例を説明した。しかし、表示制御部１１２は、指定位置に応じてオブジェクトの形状を変化させてもよい。ここで、図７に示した例では、表示制御部１１２は、交点Ｔ１から指定位置Ｐｔ１までの距離Ｄ１が、交点Ｔ２から指定位置Ｐｔ２までの距離Ｄ２よりも小さいため、オブジェクトＢ１の変形度合いをオブジェクトＢ２の変形度合いよりも小さくしている（オブジェクトＢ１の形状は、指定位置が表示領域１７１の内部にある場合と同様に半円形状であり、オブジェクトＢ２の形状は、半楕円形状である）。
　このように、表示制御部１１２は、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置を結ぶ線分との交点から指定位置までの距離が小さくなるほど、オブジェクトの変形度合いを小さくしてもよいが、オブジェクトの形状をどのように変化させるかは限定されない。そのため、表示制御部１１２は、当該交点から指定位置までの距離が小さくなるほど、オブジェクトの変形度合いを大きくしてもよい。
　図８は、指定位置が表示領域１７１の外側である場合における第三の表示制御例を示す図である。上記した例では、表示制御部１１２が指定位置に応じてオブジェクトの形状を変化させる例を説明した。しかし、表示制御部１１２は、指定位置に応じてオブジェクトの色を変化させてもよい。ここで、図８に示した例では、表示制御部１１２は、交点Ｔ１から指定位置Ｐｔ１までの距離Ｄ１が、表示領域１７１の中心位置Ｐｃから指定位置Ｐｔ２までの距離Ｄ２よりも小さいため、オブジェクトＢ１の色をオブジェクトＢ２の色よりも薄くしている。
　このように、表示制御部１１２は、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置を結ぶ線分との交点から指定位置までの距離が小さくなるほど、オブジェクトの色を薄くしてもよいが、オブジェクトの色をどのように変化させるかは限定されない。そのため、表示制御部１１２は、表示領域１７１の中心位置Ｐｃから指定位置までの距離が小さくなるほど、オブジェクトの色を濃くしてもよい。あるいは、オブジェクトの色の変化は、オブジェクトの色の濃さの変化でなくてもよい。
　以上、指定位置が表示領域１７１の外側である場合において表示領域１７１にオブジェクトを表示させる例について説明した。続いて、かかる動作の流れの例について説明する。図９は、指定位置が表示領域１７１の外側である場合において表示領域１７１にオブジェクトを表示させる動作の流れの例を示すフローチャートである。なお、指定位置が表示領域１７１の外側である場合において表示領域１７１にオブジェクトを表示させる動作は、図９のフローチャートに示された例に限定されない。
　まず、検出部１１１は、検出装置１２０によって撮像された画像に基づいてユーザによる指定ベクトルを算出する（Ｓ１１）。続いて、検出部１１１は、ユーザによる指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する（Ｓ１２）。続いて、表示制御部１１２は、指定位置が表示領域１７１の外側か否かを判定する（Ｓ１３）。表示制御部１１２は、指定位置が表示領域１７１の外側ではないと判定した場合には（Ｓ１３：Ｎｏ）、Ｓ１５に動作を移行させる。一方、指定位置が表示領域１７１の外側であると判定した場合には（Ｓ１３：Ｙｅｓ）、表示領域１７１にオブジェクトを表示させて（Ｓ１４）、Ｓ１５に動作を移行させる。
　続いて、実行部１１３は、ユーザによって所定の操作がなされたか否かを判定する（Ｓ１５）。実行部１１３は、ユーザによって所定の操作がなされなかったと判定した場合（Ｓ１５：Ｎｏ）、動作を終了する。一方、実行部１１３は、ユーザによって所定の操作がなされたと判定した場合（Ｓ１５：Ｙｅｓ）、指定位置に対応する処理を実行して（Ｓ１６）、動作を終了する。指定位置に対応する処理は特に限定されないが、上記したように、所定時間を超えてユーザＵによる指定ベクトルと表示領域１７１との交点が存在したコンテンツを拡大表示する処理であってもよい。
　続いて、指定位置が表示領域１７１の外側である場合における第四の表示制御例について説明する。図１０は、指定位置が表示領域１７１の外側である場合における第四の表示制御例を示す図である。上記した例では、表示制御部１１２が指定位置に応じて表示領域１７１にオブジェクトを表示させる例を説明した。しかし、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、指定位置を補正してもよい。かかる構成により、指定位置が表示領域１７１の外側に出てしまった場合であっても、指定位置が補正後の指定位置にシフトされる。
　補正後の指定位置は限定されないが、例えば、図１０に示したように、表示制御部１１２は、指定位置Ｐｄが表示領域１７１の外側である場合に、中心位置Ｐｃおよび指定位置Ｐｄを結ぶ線分と表示領域１７１の端部との交点Ｐｅに指定位置Ｐｄを補正してよい。交点Ｐｅに指定位置Ｐｄが補正されれば、どこが補正後の指定位置であるのかをユーザが把握しやすい。なお、表示領域１７１の周囲に補正領域Ａｒが設けられていてもよい。表示制御部１１２は、指定位置Ｐｄが補正領域Ａｒの内部である場合に、指定位置Ｐｄを補正するようにしてもよい。
　以上、指定位置が表示領域１７１の外側である場合において指定位置を補正する例について説明した。続いて、かかる動作の流れの例について説明する。図１１は、指定位置が表示領域１７１の外側である場合において指定位置を補正する動作の流れの例を示すフローチャートである。なお、指定位置が表示領域１７１の外側である場合において指定位置を補正する動作は、図１１のフローチャートに示された例に限定されない。
　まず、検出部１１１は、検出装置１２０によって撮像された画像に基づいてユーザによる指定ベクトルを算出する（Ｓ１１）。続いて、検出部１１１は、ユーザによる指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する（Ｓ１２）。続いて、表示制御部１１２は、指定位置が表示領域１７１の外側か否かを判定する（Ｓ１３）。表示制御部１１２は、指定位置が表示領域１７１の外側ではないと判定した場合には（Ｓ１３：Ｎｏ）、Ｓ１５に動作を移行させる。一方、指定位置が表示領域１７１の外側であると判定した場合には（Ｓ１３：Ｙｅｓ）、指定位置を補正して（Ｓ２１）、Ｓ１５に動作を移行させる。
　続いて、実行部１１３は、ユーザによって所定の操作がなされたか否かを判定する（Ｓ１５）。実行部１１３は、ユーザによって所定の操作がなされなかったと判定した場合（Ｓ１５：Ｎｏ）、動作を終了する。一方、実行部１１３は、ユーザによって所定の操作がなされたと判定した場合（Ｓ１５：Ｙｅｓ）、指定位置に対応する処理を実行して（Ｓ１６）、動作を終了する。指定位置に対応する処理は特に限定されないが、上記したように、所定時間を超えてユーザＵによる指定ベクトルと表示領域１７１との交点が存在したコンテンツを拡大表示する処理であってもよい。
　続いて、指定位置が表示領域１７１の外側である場合における第五の表示制御例について説明する。図１２は、指定位置が表示領域１７１の外側である場合における第五の表示制御例を示す図である。上記した例では、指定位置が表示領域１７１の外側である場合に、指定位置を補正する例を説明した。しかし、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、指定位置に基づいて表示領域１７１のコンテンツをスクロールさせてもよい。かかる構成により、コンテンツのスクロール可能量を大きくすることが可能となる。
　コンテンツのスクロール方向は限定されないが、例えば、図１２に示したように、表示制御部１１２は、指定位置Ｐｔが表示領域１７１の外側である場合に、中心位置Ｐｃを基準とした指定位置Ｐｔの方向に基づいてコンテンツをスクロールさせてもよい。このような方向にコンテンツがスクロールされれば、ユーザは直感的にコンテンツのスクロール方向を指定することが可能である。なお、図１２には、地図データがコンテンツである場合が例として示されているが、コンテンツは地図データ以外であってもよい。例えば、コンテンツは写真データであってもよい（写真ビューアによって表示されてもよい）。
　コンテンツのスクロール速度は限定されないが、例えば、表示制御部１１２は、指定位置Ｐｔが表示領域１７１の外側である場合に、表示領域１７１の基準位置（例えば、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置Ｐｔを結ぶ線分との交点）と指定位置Ｐｔとの距離Ｄに応じた速度によりコンテンツをスクロールさせてもよい。このような速度でコンテンツがスクロールされれば、ユーザは直感的にコンテンツのスクロール速度を指定することが可能である。
　距離Ｄとコンテンツのスクロール速度との関係は限定されないが、例えば、表示制御部１１２は、指定位置が表示領域の外側である場合に、表示領域１７１の当該基準位置と指定位置との距離Ｄが大きくなるほど大きな速度によりコンテンツをスクロールさせてもよい。
　なお、ここでは、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、指定位置に基づいて表示領域１７１のコンテンツをスクロールさせる例を説明した。しかし、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、指定位置に基づいて表示領域１７１のコンテンツを切り替えてもよい。
　コンテンツの切り替え方向は限定されないが、表示制御部１１２は、指定位置Ｐｔが表示領域１７１の外側である場合に、中心位置Ｐｃを基準とした指定位置Ｐｔの方向に基づいてコンテンツを切り替えてもよい。また、コンテンツの切り替え速度は限定されないが、例えば、表示制御部１１２は、指定位置Ｐｔが表示領域１７１の外側である場合に、表示領域１７１の基準位置（例えば、表示領域１７１の端部と表示領域１７１の中心位置Ｐｃおよび指定位置Ｐｔを結ぶ線分との交点）と指定位置Ｐｔとの距離Ｄに応じた速度によりコンテンツを切り替えてもよい。
　以上、指定位置が表示領域１７１の外側である場合において指定位置に基づいてコンテンツをスクロールさせる例について説明した。続いて、かかる動作の流れの例について説明する。図１３は、指定位置が表示領域１７１の外側である場合において指定位置に基づいてコンテンツをスクロールさせる動作の流れの例を示すフローチャートである。なお、指定位置が表示領域１７１の外側である場合において指定位置に基づいてコンテンツをスクロールさせる動作は、図１３のフローチャートに示された例に限定されない。
　まず、検出部１１１は、検出装置１２０によって撮像された画像に基づいてユーザによる指定ベクトルを算出する（Ｓ１１）。続いて、検出部１１１は、ユーザによる指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する（Ｓ１２）。続いて、表示制御部１１２は、指定位置が表示領域１７１の外側か否かを判定する（Ｓ１３）。表示制御部１１２は、指定位置が表示領域１７１の外側ではないと判定した場合には（Ｓ１３：Ｎｏ）、動作を終了する。一方、指定位置が表示領域１７１の外側であると判定した場合には（Ｓ１３：Ｙｅｓ）、指定位置に基づいてコンテンツをスクロールさせて（Ｓ３１）、動作を終了する。
　続いて、指定位置が表示領域１７１の外側である場合における第六の表示制御例について説明する。図１４は、指定位置が表示領域１７１の外側である場合における第六の表示制御例を示す図である。上記した例では、指定位置が表示領域１７１の外側である場合に、指定位置に基づいてコンテンツをスクロールさせる例を説明した。しかし、表示制御部１１２は、表示領域１７１の内側から外側への指定位置の移動がなされた場合に、指定位置の移動に基づいてドラッグ操作を行ってもよい。かかる構成により、ドラッグ操作の幅を大きくすることが可能となる。
　ドラッグ操作の方向および大きさは限定されないが、例えば、図１４に示したように、表示制御部１１２は、表示領域１７１の内側の位置Ｐｔ１から外側の位置Ｐｔ２への指定位置の移動がなされた場合に、位置Ｐｔ１から外側の位置Ｐｔ２への方向および大きさに従ってドラッグ操作を行ってもよい。このような方向および大きさに従ってドラッグ操作が行われれば、ユーザは直感的にドラッグ操作を行うことが可能である。
　続いて、指定位置が表示領域１７１の外側である場合における第七の表示制御例について説明する。図１５は、指定位置が表示領域１７１の外側である場合における第七の表示制御例を示す図である。上記した例では、表示領域１７１の内側から外側への指定位置の移動がなされた場合に、指定位置の移動に基づいてドラッグ操作を行う例を説明した。しかし、表示制御部１１２は、表示領域１７１の内側から外側に複数の指定位置それぞれの移動がなされた場合に、複数の指定位置それぞれの移動に基づいてピンチアウト操作を行ってもよい。かかる構成により、ピンチアウト操作の幅を大きくすることが可能となる。
　ピンチアウト操作によって実行される動作はコンテンツの拡大であってよい。例えば、図１５に示したように、表示制御部１１２は、表示領域１７１の内側の位置Ｐｔ１から外側の位置Ｐｔ２への指定位置の移動と表示領域１７１の内側の位置Ｐｔ３から外側の位置Ｐｔ４への指定位置の移動とがなされた場合に、表示領域１７１に表示されているコンテンツの拡大を行ってもよい。ピンチアウト操作によってコンテンツの拡大がなされれば、ユーザは直感的にコンテンツの拡大を行うことが可能である。
　続いて、指定位置が表示領域１７１の外側である場合における第八の表示制御例について説明する。図１６は、指定位置が表示領域１７１の外側である場合における第八の表示制御例を示す図である。上記した例では、表示領域１７１の内側から外側に複数の指定位置それぞれの移動がなされた場合に、複数の指定位置それぞれの移動に基づいてピンチアウト操作を行う例を説明した。しかし、表示制御部１１２は、表示領域１７１の外側から内側に複数の指定位置それぞれの移動がなされた場合に、複数の指定位置それぞれの移動に基づいてピンチイン操作を行ってもよい。かかる構成により、ピンチイン操作の幅を大きくすることが可能となる。
　ピンチイン操作によって実行される動作はコンテンツの縮小であってよい。例えば、図１６に示したように、表示制御部１１２は、表示領域１７１の外側の位置Ｐｔ１から内側の位置Ｐｔ２への指定位置の移動と表示領域１７１の外側の位置Ｐｔ３から内側の位置Ｐｔ４への指定位置の移動とがなされた場合に、表示領域１７１に表示されているコンテンツの縮小を行ってもよい。ピンチイン操作によってコンテンツの縮小がなされれば、ユーザは直感的にコンテンツの縮小を行うことが可能である。
　以上、指定位置の移動に基づいてコンテンツに対する処理を行う動作例について説明した。続いて、かかる動作の流れの例について説明する。図１７は、指定位置の移動に基づいてコンテンツに対する処理を行う動作の流れの例を示すフローチャートである。なお、指定位置の移動に基づいてコンテンツに対する処理を行う動作は、図１７のフローチャートに示された例に限定されない。
　まず、検出部１１１は、検出装置１２０によって撮像された画像に基づいてユーザによる指定ベクトルを算出する（Ｓ１１）。続いて、検出部１１１は、ユーザによる指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する（Ｓ１２）。続いて、表示制御部１１２は、表示領域１７１の内側から外側に指定位置の移動がなされたか否かを判定する（Ｓ４０）。
　表示制御部１１２は、表示領域１７１の内側から外側に指定位置の移動がなされたと判定した場合には（Ｓ４０：Ｙｅｓ）、ドラッグ操作を行い（Ｓ４０）、動作を終了する。一方、表示制御部１１２は、表示領域１７１の内側から外側に指定位置の移動がなされなかったと判定した場合には（Ｓ４０：Ｎｏ）、表示領域１７１の外側から内側に複数の指定位置それぞれの移動がなされたか否かを判定する（Ｓ４２）。
　続いて、表示制御部１１２は、表示領域１７１の外側から内側に複数の指定位置それぞれの移動がなされたと判定した場合には（Ｓ４２：Ｙｅｓ）、ピンチイン操作を行い（Ｓ４３）、動作を終了する。一方、表示制御部１１２は、表示領域１７１の外側から内側に複数の指定位置それぞれの移動がなされなかったと判定した場合には（Ｓ４２：Ｎｏ）、表示領域１７１の内側から外側に複数の指定位置それぞれの移動がなされたか否かを判定する（Ｓ４４）。
　続いて、表示制御部１１２は、表示領域１７１の内側から外側に複数の指定位置それぞれの移動がなされたと判定した場合には（Ｓ４４：Ｙｅｓ）、ピンチアウト操作を行い（Ｓ４５）、動作を終了する。一方、表示制御部１１２は、表示領域１７１の内側から外側に複数の指定位置それぞれの移動がなされなかったと判定した場合には（Ｓ４４：Ｎｏ）、動作を終了する。
　　　［１－６．指定ベクトル算出の他の例］
　以上、指定位置が表示領域１７１の外側である場合における表示制御例について説明した。ここで、上記したように、ユーザＵによる指定ベクトルはどのように与えられてもよい。例えば、検出部１１１は、センサによって検出されたセンサデータに基づいて指定ベクトルが与えられてもよい。図１８は、センサによって検出されたセンサデータに基づいて指定ベクトルが与えられる例を説明するための図である。図１８に示すように、ユーザＵは、センサＲを操作することが可能である。
　そして、検出部１１１は、センサＲによって検出されたセンサデータに基づいて指定ベクトルを算出し、指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する。センサＲによって検出されるセンサデータは、センサＲの動きであってよい。例えば、センサデータは、加速度センサによって検出される加速度であってもよいし、ジャイロセンサによって検出される角速度であってもよい。例えば、指定ベクトルと表示領域１７１との交点の算出手法としては、国際公開第２００９／００８３７２号に開示されている手法が採用され得る。
　また、指定ベクトルは、ユーザの視線によって与えられてもよい。図１９は、ユーザの視線によって指定ベクトルが与えられる例を説明するための図である。図１９に示すように、ユーザＵは、表示領域１７１に視線を送ることが可能である。ここで、検出部１１１は、ユーザＵの視線を検出する。ユーザＵの視線検出の手法は特に限定されない。
　例えば、図示しない撮像装置によってユーザＵの目領域が撮像される場合には、検出部１１１は、ユーザＵの目領域を撮像して得られる撮像結果に基づいてユーザＵの視線を検出してよい。例えば、撮像装置として赤外線カメラが用いられる場合には、ユーザＵの目領域に対して赤外線を照射する赤外線照射装置が設けられてもよい。そうすれば、ユーザの目領域によって反射された赤外線が撮像装置によって撮像され得る。
　あるいは、検出部１１１は、ユーザＵの頭部にＨＭＤ（Ｈｅａｄ　Ｍｏｕｎｔ　Ｄｉｓｐｌａｙ）が装着されている場合には、ＨＭＤの向きに基づいてユーザＵの視線を検出してもよい。また、検出部１１１は、ユーザＵの身体に筋電センサが装着されている場合には、筋電センサにより検出された筋電に基づいてユーザＵの視線を検出してもよい。そして、検出部１１１は、ユーザＵの視線を指定ベクトルとして算出し、指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する。
　　　［１－７．ハードウェア構成例］
　続いて、本開示の実施形態に係る表示制御装置１００のハードウェア構成例について説明する。図２０は、本開示の実施形態に係る表示制御装置１００のハードウェア構成例を示す図である。ただし、図２０に示したハードウェア構成例は、表示制御装置１００のハードウェア構成の一例を示したに過ぎない。したがって、表示制御装置１００のハードウェア構成は、図２０に示した例に限定されない。
　図２０に示したように、表示制御装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）８０１と、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）８０２と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）８０３と、入力装置８０８と、出力装置８１０と、ストレージ装置８１１と、ドライブ８１２と、撮像装置８１３と、通信装置８１５とを備える。
　ＣＰＵ８０１は、演算処理装置および制御装置として機能し、各種プログラムに従って表示制御装置１００内の動作全般を制御する。また、ＣＰＵ８０１は、マイクロプロセッサであってもよい。ＲＯＭ８０２は、ＣＰＵ８０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ８０３は、ＣＰＵ８０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバスにより相互に接続されている。
　入力装置８０８は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなどユーザが情報を入力するための入力部と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ８０１に出力する入力制御回路などから構成されている。表示制御装置１００のユーザは、該入力装置８０８を操作することにより、表示制御装置１００に対して各種のデータを入力したり処理動作を指示したりすることができる。
　出力装置８１０は、例えば、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）装置およびランプなどの表示装置を含む。さらに、出力装置８１０は、スピーカおよびヘッドホンなどの音声出力装置を含む。例えば、表示装置は、撮像された画像や生成された画像などを表示する。一方、音声出力装置は、音声データ等を音声に変換して出力する。
　ストレージ装置８１１は、表示制御装置１００の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置８１１は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。このストレージ装置８１１は、ＣＰＵ８０１が実行するプログラムや各種データを格納する。
　ドライブ８１２は、記憶媒体用リーダライタであり、表示制御装置１００に内蔵、あるいは外付けされる。ドライブ８１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記録されている情報を読み出して、ＲＡＭ８０３に出力する。また、ドライブ８１２は、リムーバブル記憶媒体に情報を書き込むこともできる。
　撮像装置８１３は、光を集光する撮影レンズおよびズームレンズなどの撮像光学系、およびＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などの信号変換素子を備える。撮像光学系は、被写体から発せられる光を集光して信号変換部に被写体像を形成し、信号変換素子は、形成された被写体像を電気的な画像信号に変換する。
　通信装置８１５は、例えば、ネットワークに接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置８１５は、無線ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）対応通信装置であっても、ＬＴＥ（Ｌｏｎｇ　Ｔｅｒｍ　Ｅｖｏｌｕｔｉｏｎ）対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。通信装置８１５は、例えば、ネットワークを介して他の装置と通信を行うことが可能である。
　以上、本開示の実施形態に係る表示制御装置１００のハードウェア構成例について説明した。
　　＜＜２．むすび＞＞
　以上説明したように、本開示の実施形態によれば、ユーザＵによる指定ベクトルと表示領域１７１を含む平面との交点を指定位置として検出する検出部１１１と、指定位置に基づいて表示制御を行う表示制御部１１２と、を備え、表示制御部１１２は、指定位置が表示領域１７１の外側である場合に、所定の表示制御を行う、表示制御装置１００が提供される。かかる構成によれば、ユーザによって指定された位置が表示領域１７１の外側である場合に、表示領域１７１の外側が指定された旨をユーザに対してフィードバックすることが可能となる。
　なお、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　例えば、表示領域１７１に表示されるオブジェクトは、検出装置１２０による検出精度が高くない場合などには、細かく振動しやすいため、ユーザにとって見づらい可能性がある。そこで、表示制御部１１２は、表示領域１７１に表示されるオブジェクトに対してフィルタを掛けることによって、オブジェクトの振動を抑制してもよい。あるいは、表示領域１７１に表示されるオブジェクトに対して残像を付加することによって、オブジェクトの振動が抑えられているようにユーザに感じさせることが可能となる。
　また、コンピュータに内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上記した表示制御装置１００が有する構成と同等の機能を発揮させるためのプログラムも作成可能である。また、該プログラムを記録した、コンピュータに読み取り可能な記録媒体も提供され得る。
　また、例えば、表示制御装置１００の動作は、必ずしもフローチャートに記載された順序に沿って時系列になされる必要はない。例えば、表示制御装置１００の動作は、フローチャートに記載した順序と異なる順序でなされてもよいし、フローチャートに記載された動作の少なくとも一部が並列的になされてもよい。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、以下のような構成も本開示の技術的範囲に属する。
（１）
　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、
　前記指定位置に基づいて表示制御を行う表示制御部と、を備え、
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置。
（２）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域に所定のオブジェクトを表示させる、
　前記（１）に記載の表示制御装置。
（３）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の端部に所定のオブジェクトを表示させる、
　前記（２）に記載の表示制御装置。
（４）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の端部と前記表示領域の所定位置および前記指定位置を結ぶ線分との交点に所定のオブジェクトを表示させる、
　前記（３）に記載の表示制御装置。
（５）
　前記表示制御部は、前記所定のオブジェクトを前記指定位置に応じて変化させる、
　前記（２）～（４）のいずれか一項に記載の表示制御装置。
（６）
　前記表示制御部は、前記所定のオブジェクトのサイズを前記指定位置に応じて変化させる、
　前記（５）に記載の表示制御装置。
（７）
　前記表示制御部は、前記所定のオブジェクトの形状を前記指定位置に応じて変化させる、
　前記（５）に記載の表示制御装置。
（８）
　前記表示制御部は、前記所定のオブジェクトの色を前記指定位置に応じて変化させる、
　前記（５）に記載の表示制御装置。
（９）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置に基づいて前記表示領域のコンテンツをスクロールさせる、
　前記（１）に記載の表示制御装置。
（１０）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置を基準とした前記指定位置の方向に基づいて前記コンテンツをスクロールさせる、
　前記（９）に記載の表示制御装置。
（１１）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置と前記指定位置との距離に応じた速度により前記コンテンツをスクロールさせる、
　前記（９）に記載の表示制御装置。
（１２）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置に基づいて前記表示領域のコンテンツを切り替える、
　前記（１）に記載の表示制御装置。
（１３）
　前記表示制御部は、前記表示領域の内側から外側への前記指定位置の移動がなされた場合に、前記指定位置の移動に基づいてドラッグ操作を行う、
　前記（１）に記載の表示制御装置。
（１４）
　前記表示制御部は、前記表示領域の内側と外側との間において複数の指定位置それぞれの移動がなされた場合に、前記複数の指定位置それぞれの移動に基づいてピンチイン操作またはピンチアウト操作を行う、
　前記（１）に記載の表示制御装置。
（１５）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置を補正する、
　前記（１）に記載の表示制御装置。
（１６）
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置および前記指定位置を結ぶ線分と前記表示領域の端部との交点に前記指定位置を補正する、
　前記（１５）に記載の表示制御装置。
（１７）
　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出することと、
　前記指定位置に基づいて表示制御を行うことと、を含み、
　前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行うことを含む、
　表示制御方法。
（１８）
　コンピュータを、
　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、
　前記指定位置に基づいて表示制御を行う表示制御部と、を備え、
　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置として機能させるためのプログラムを記録した、コンピュータに読み取り可能な記録媒体。
　１０　　情報処理システム
　１００　表示制御装置
　１１０　制御部
　１１１　検出部
　１１２　表示制御部
　１１３　実行部
　１２０　検出装置
　１３０　記憶部
　１７０　表示装置
　１７１　表示領域
　Ａｒ　　補正領域
　Ｂ１、Ｂ２　オブジェクト
　Ｃ１～Ｃ６　コンテンツ
　Ｄ（Ｄ１、Ｄ２）　距離
　Ｐｃ　　中心位置
　Ｐｄ　　指定位置
　Ｐｅ　　交点
　Ｐｔ１～Ｐｔ４　指定位置
　Ｔ１　　交点
　Ｔ２　　交点
　Ｕ　　　ユーザ
　ｖ　　　指定ベクトル
　ｘ　　　交点

Claims (18)

  1. 　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、
    　前記指定位置に基づいて表示制御を行う表示制御部と、を備え、
    　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置。
  2. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域に所定のオブジェクトを表示させる、
    　請求項１に記載の表示制御装置。
  3. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の端部に所定のオブジェクトを表示させる、
    　請求項２に記載の表示制御装置。
  4. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の端部と前記表示領域の所定位置および前記指定位置を結ぶ線分との交点に所定のオブジェクトを表示させる、
    　請求項３に記載の表示制御装置。
  5. 　前記表示制御部は、前記所定のオブジェクトを前記指定位置に応じて変化させる、
    　請求項２に記載の表示制御装置。
  6. 　前記表示制御部は、前記所定のオブジェクトのサイズを前記指定位置に応じて変化させる、
    　請求項５に記載の表示制御装置。
  7. 　前記表示制御部は、前記所定のオブジェクトの形状を前記指定位置に応じて変化させる、
    　請求項５に記載の表示制御装置。
  8. 　前記表示制御部は、前記所定のオブジェクトの色を前記指定位置に応じて変化させる、
    　請求項５に記載の表示制御装置。
  9. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置に基づいて前記表示領域のコンテンツをスクロールさせる、
    　請求項１に記載の表示制御装置。
  10. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置を基準とした前記指定位置の方向に基づいて前記コンテンツをスクロールさせる、
    　請求項９に記載の表示制御装置。
  11. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置と前記指定位置との距離に応じた速度により前記コンテンツをスクロールさせる、
    　請求項９に記載の表示制御装置。
  12. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置に基づいて前記表示領域のコンテンツを切り替える、
    　請求項１に記載の表示制御装置。
  13. 　前記表示制御部は、前記表示領域の内側から外側への前記指定位置の移動がなされた場合に、前記指定位置の移動に基づいてドラッグ操作を行う、
    　請求項１に記載の表示制御装置。
  14. 　前記表示制御部は、前記表示領域の内側と外側との間において複数の指定位置それぞれの移動がなされた場合に、前記複数の指定位置それぞれの移動に基づいてピンチイン操作またはピンチアウト操作を行う、
    　請求項１に記載の表示制御装置。
  15. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記指定位置を補正する、
    　請求項１に記載の表示制御装置。
  16. 　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、前記表示領域の所定位置および前記指定位置を結ぶ線分と前記表示領域の端部との交点に前記指定位置を補正する、
    　請求項１５に記載の表示制御装置。
  17. 　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出することと、
    　前記指定位置に基づいて表示制御を行うことと、を含み、
    　前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行うことを含む、
    　表示制御方法。
  18. 　コンピュータを、
    　ユーザによる指定ベクトルと表示領域を含む平面との交点を指定位置として検出する検出部と、
    　前記指定位置に基づいて表示制御を行う表示制御部と、を備え、
    　前記表示制御部は、前記指定位置が前記表示領域の外側である場合に、所定の表示制御を行う、表示制御装置として機能させるためのプログラムを記録した、コンピュータに読み取り可能な記録媒体。
PCT/JP2016/051790 2015-03-31 2016-01-22 表示制御装置、表示制御方法および記録媒体 WO2016157951A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/559,873 US20180059811A1 (en) 2015-03-31 2016-01-22 Display control device, display control method, and recording medium
JP2017509318A JPWO2016157951A1 (ja) 2015-03-31 2016-01-22 表示制御装置、表示制御方法および記録媒体

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-073743 2015-03-31
JP2015073743 2015-03-31

Publications (1)

Publication Number Publication Date
WO2016157951A1 true WO2016157951A1 (ja) 2016-10-06

Family

ID=57004121

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/051790 WO2016157951A1 (ja) 2015-03-31 2016-01-22 表示制御装置、表示制御方法および記録媒体

Country Status (3)

Country Link
US (1) US20180059811A1 (ja)
JP (1) JPWO2016157951A1 (ja)
WO (1) WO2016157951A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020509439A (ja) * 2017-03-20 2020-03-26 グーグル エルエルシー 仮想現実における保持オブジェクトの安定化

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7247519B2 (ja) * 2018-10-30 2023-03-29 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
CN115004132A (zh) * 2020-01-29 2022-09-02 索尼集团公司 信息处理装置、信息处理系统和信息处理方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
JP2010282408A (ja) * 2009-06-04 2010-12-16 Sony Corp 制御装置、入力装置、制御システム、ハンドヘルド装置及び制御方法
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
JP2015028690A (ja) * 2013-07-30 2015-02-12 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7046242B2 (en) * 2000-06-05 2006-05-16 Namco Ltd. Game system, program and image generating method
US7487462B2 (en) * 2002-02-21 2009-02-03 Xerox Corporation Methods and systems for indicating invisible contents of workspace
US6892352B1 (en) * 2002-05-31 2005-05-10 Robert T. Myers Computer-based method for conveying interrelated textual narrative and image information
US8225224B1 (en) * 2003-02-25 2012-07-17 Microsoft Corporation Computer desktop use via scaling of displayed objects with shifts to the periphery
US7415352B2 (en) * 2005-05-20 2008-08-19 Bose Corporation Displaying vehicle information
US8037421B2 (en) * 2005-10-11 2011-10-11 Research In Motion Limited System and method for organizing application indicators on an electronic device
KR20110020642A (ko) * 2009-08-24 2011-03-03 삼성전자주식회사 사용자 접근을 인식하여 반응하는 ｇｕｉ제공 장치 및 방법
JP5372091B2 (ja) * 2011-09-15 2013-12-18 株式会社ワコム 電子機器および電子機器の表示画面制御方法
WO2013190538A1 (en) * 2012-06-20 2013-12-27 Pointgrab Ltd. Method for touchless control of a device
US20140046923A1 (en) * 2012-08-10 2014-02-13 Microsoft Corporation Generating queries based upon data points in a spreadsheet application
JP6036065B2 (ja) * 2012-09-14 2016-11-30 富士通株式会社 注視位置検出装置及び注視位置検出方法
US8589818B1 (en) * 2013-01-03 2013-11-19 Google Inc. Moveable viewport for indicating off-screen content
US9405982B2 (en) * 2013-01-18 2016-08-02 GM Global Technology Operations LLC Driver gaze detection system
US9448979B2 (en) * 2013-04-10 2016-09-20 International Business Machines Corporation Managing a display of results of a keyword search on a web page by modifying attributes of DOM tree structure
US20140375541A1 (en) * 2013-06-25 2014-12-25 David Nister Eye tracking via depth camera
US10281987B1 (en) * 2013-08-09 2019-05-07 Leap Motion, Inc. Systems and methods of free-space gestural interaction
US9880711B2 (en) * 2014-01-22 2018-01-30 Google Llc Adaptive alert duration
US9665240B2 (en) * 2014-01-27 2017-05-30 Groupon, Inc. Learning user interface having dynamic icons with a first and second visual bias
US10339141B2 (en) * 2014-10-03 2019-07-02 The Regents Of The University Of Michigan Detecting at least one predetermined pattern in stream of symbols
US10222927B2 (en) * 2014-10-24 2019-03-05 Microsoft Technology Licensing, Llc Screen magnification with off-screen indication

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009072504A1 (ja) * 2007-12-07 2009-06-11 Sony Corporation 制御装置、入力装置、制御システム、制御方法及びハンドヘルド装置
JP2010282408A (ja) * 2009-06-04 2010-12-16 Sony Corp 制御装置、入力装置、制御システム、ハンドヘルド装置及び制御方法
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
JP2015028690A (ja) * 2013-07-30 2015-02-12 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020509439A (ja) * 2017-03-20 2020-03-26 グーグル エルエルシー 仮想現実における保持オブジェクトの安定化

Also Published As

Publication number Publication date
JPWO2016157951A1 (ja) 2018-01-25
US20180059811A1 (en) 2018-03-01

Similar Documents

Publication Publication Date Title
US20230245262A1 (en) Display device, computer program, and computer-implemented method
JP5869177B1 (ja) 仮想現実空間映像表示方法、及び、プログラム
WO2014188798A1 (ja) 表示制御装置、表示制御方法および記録媒体
JP7005161B2 (ja) 電子機器及びその制御方法
US20110019239A1 (en) Image Reproducing Apparatus And Image Sensing Apparatus
EP3154255A1 (en) Imaging device and video generation method by imaging device
JP2014127184A (ja) 情報処理装置および表示制御方法
JP6255838B2 (ja) 表示装置、表示制御方法及びプログラム
JP7154789B2 (ja) 表示制御装置、その制御方法、プログラム及び記憶媒体
US20150063785A1 (en) Method of overlappingly displaying visual object on video, storage medium, and electronic device
JP6145738B2 (ja) 表示装置及びコンピュータプログラム
WO2015136952A1 (ja) ジェスチャー認識装置、ヘッドマウントディスプレイ、および携帯端末
JP5220157B2 (ja) 情報処理装置及びその制御方法、プログラム、並びに記憶媒体
WO2016157951A1 (ja) 表示制御装置、表示制御方法および記録媒体
JP2016224173A (ja) 制御装置及び制御方法
JP5919570B2 (ja) 画像表示装置及び画像表示方法
JP2017059196A (ja) 仮想現実空間映像表示方法、及び、プログラム
KR102278229B1 (ko) 전자기기 및 그 제어 방법
JP7005160B2 (ja) 電子機器及びその制御方法
JP5957619B2 (ja) 機器の形状変更の感知方法及び装置
JP6614516B2 (ja) 表示装置及びコンピュータプログラム
JP5170300B1 (ja) 情報処理端末、情報処理方法、およびプログラム
WO2019102885A1 (ja) 画像の表示部分を変更可能な電子機器
JP6344670B2 (ja) 表示装置及びコンピュータプログラム
KR102070925B1 (ko) 팬, 틸트, 줌 제어장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16771837

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017509318

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15559873

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16771837

Country of ref document: EP

Kind code of ref document: A1