WO2021001894A1 - 表示制御装置及び表示制御方法 - Google Patents
表示制御装置及び表示制御方法 Download PDFInfo
- Publication number
- WO2021001894A1 WO2021001894A1 PCT/JP2019/026145 JP2019026145W WO2021001894A1 WO 2021001894 A1 WO2021001894 A1 WO 2021001894A1 JP 2019026145 W JP2019026145 W JP 2019026145W WO 2021001894 A1 WO2021001894 A1 WO 2021001894A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- display
- detection range
- indicator
- range
- display object
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
Definitions
- the present invention relates to a display control device that controls the display of a first display device that can move with a vehicle, and a display control method.
- the driver When the driver operates an in-vehicle information system such as a navigation device or an audio device, it is preferable that the driver's line of sight is maintained in front of the vehicle as much as possible. Therefore, even if the operation input device is not touched by an indicator such as a hand or a finger, when the driver performs a gesture operation in the space in front of the vehicle, the gesture operation is detected and based on the gesture operation.
- an indicator such as a hand or a finger
- the indicator of the driver performing the gesture operation is the detection range, the range on the driver side with respect to the detection range, and the opposite side to the driver with respect to the detection range.
- the same display is performed regardless of the range of the range of. For this reason, the driver does not know in which direction the indicator should be moved with respect to the detection range, and as a result of performing the gesture operation in a range other than the detection range, the in-vehicle information system is appropriately operated by the gesture operation. Sometimes I could't.
- an object of the present invention is to provide a technique capable of displaying to the user the range in which the indicator is located.
- the display control device is a display control device that controls the display of the first display device that can move with the vehicle, and has a detection range that is a predetermined space in which the user should perform a gesture operation by an indicator body.
- the indicator is The acquisition unit that acquires the position range, the detection range display object that indicates the detection range, and the indicator based on the range acquired by the acquisition unit among the detection range, the front detection range, and the back detection range. It is provided with a control unit that controls the display of display objects including the indicator display object to be shown differently.
- the detection range display object indicating the detection range and the indicator display object indicating the indicator are included based on the acquired range. Controls the display of display objects to be different. According to such a configuration, it is possible to display to the user in what range the indicator is located.
- FIG. 1 It is a block diagram which shows the structure of the display control device which concerns on Embodiment 1.
- FIG. It is a figure which shows the detection range, the front detection range, and the back detection range which concerns on Embodiment 1.
- FIG. It is a block diagram which shows the structure of the display control device which concerns on Embodiment 2.
- FIG. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 2.
- FIG. It It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 2.
- FIG. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 2.
- FIG. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 2.
- FIG. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 2.
- FIG. It is
- FIG. 1 It is a block diagram which shows the structure of the display control device which concerns on Embodiment 3. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 3. It is a block diagram which shows the structure of the display control apparatus which concerns on modification 1 of Embodiment 3. It is a block diagram which shows the structure of the display control device which concerns on modification 2 of Embodiment 3. It is a figure which shows the display control of the display control apparatus which concerns on the modification 3 of Embodiment 3. It is a block diagram which shows the structure of the display control device which concerns on Embodiment 4. FIG. It is a figure which shows the display control of the display control apparatus which concerns on Embodiment 4. FIG.
- FIG. 1 is a block diagram showing a configuration of a display control device 1 according to a first embodiment of the present invention.
- the display control device 1 is connected to the first display device 51 that can move with the vehicle via wireless or wired, and controls the display of the first display device 51.
- the first display device 51 may be, for example, a display device such as a head-up display (HUD) that displays an image on the windshield of the vehicle, or a display device brought into the vehicle. Further, as will be described in detail later, the first display device 51 may be a display device that displays in a plane (has a two-dimensional display function), or performs a three-dimensional display in which a user such as a driver can perceive the depth. It may be a display device (having a three-dimensional display function). Although the first display device 51 in FIG. 1 is provided outside the display control device 1, the first display device 51 is not limited to this, and may be provided in the display control device 1.
- HUD head-up display
- the first display device 51 sets the display control device 1 to 1. Display related to gesture operation by controlling. The control of the display control device 1 will be described in detail later. It is preferable that the first display device 51 makes the display in front of the vehicle rather than the driver.
- the in-vehicle information system referred to here is a system including, for example, an operation input device, a display device, and a voice output device (not shown), and performs a predetermined application function based on a direct operation on the operation input device or a gesture operation. Display and audio output by executing.
- Such an in-vehicle information system includes, for example, at least one of a navigation device, an audio device, a control device for controlling a vehicle body, a control device for controlling the traveling of the vehicle, and a communication device.
- the display control device 1 of FIG. 1 includes an acquisition unit 11 and a control unit 12.
- the acquisition unit 11 acquires the range in which the user's indicator is located, out of the detection range, the front detection range, and the back detection range.
- FIG. 2 is a diagram showing a detection range, a front detection range, and a back detection range.
- the X-axis direction, the Y-axis direction, and the Z-axis direction correspond to the left-right direction, the up-down direction, and the depth direction with respect to the user, respectively.
- the detection range is a predetermined space in which the user should perform a gesture operation by an indicator. In other words, gesture operations within the detection range are valid, and gesture operations outside the detection range are invalid.
- the detection range may be set in an area on the front side of the display area of the first display device 51, or may be set in a region other than that area.
- the detection range has a rectangular parallelepiped shape as shown in FIG. 2, but is not limited to this, and any closed space shape may be used.
- the detection range of FIG. 2 is vertex A (0, Yd, Zd1), vertex B (Xd, Yd, Zd1), vertex C (Xd, 0, Zd1), vertex D (0,0, Zd1), and vertex E ( It has a rectangular parallelepiped shape defined by vertices F (Xd, Yd, Zd2), vertices G (Xd, 0, Zd2), and vertices H (0,0, Zd2) (0, Yd, Zd2). In the following description, any position within the detection range of FIG.
- P1 (Xp1, Yp1, Zp1).
- P1 Xp1, Yp1, Zp1
- 0 ⁇ Xp1 ⁇ Xd 0 ⁇ Yp1 ⁇ Yd
- Zd1 ⁇ Zp1 ⁇ Zd2 ...
- the front detection range is a predetermined space on the user side with respect to the detection range.
- P2 (Xp2, Yp2, Zp2).
- the back detection range is a predetermined space opposite to the front detection range with respect to the detection range.
- P3 an arbitrary position within the depth detection range of FIG. 2
- P3 Xp3, Yp3, Zp3
- the relational expression holds.
- the range acquired by the acquisition unit 11 may be ID information that can identify the detection range, the front detection range, and the back detection range, or may be the coordinates of the indicator.
- the acquisition unit 11 having the above-mentioned functions includes, for example, an image processing device that detects the position of an indicator from an image of the vehicle interior captured by a camera, a capacitance type position sensor, an optical sensor, and a millimeter wave sensor. , And at least one of these interfaces is used. Further, the method for detecting the position of the indicator is not limited to the above, and any method that will appear in the future may be used.
- the control unit 12 has a detection range display object indicating the detection range and an indicator display indicating the indicator based on the range acquired by the acquisition unit 11 among the detection range, the front detection range, and the back detection range. Display including objects Controls the display of objects differently.
- the display control device 1 According to the display control device 1 according to the first embodiment as described above, the range acquired by the acquisition unit 11 among the detection range, the front detection range, and the back detection range, that is, the range in which the indicator is located. Based on this, control is performed to make the display of the display object different. According to such a configuration, it is possible to display to the user in which range of the detection range, the front detection range, and the back detection range the indicator is located. Since the user can perform the gesture operation while checking such a display, the gesture operation can be easily performed within the detection range.
- FIG. 3 is a block diagram showing the configuration of the display control device 1 according to the second embodiment of the present invention.
- the same or similar components as those described above will be designated by the same or similar reference numerals, and different components will be mainly described.
- the display control device 1 of FIG. 3 is connected to the projection display device 51a, the spatial operation detection device 52, and the in-vehicle information system 53 via wireless or wired.
- the projection display device 51a is a device included in the concept of the first display device 51 in FIG. 1, and performs flat display (two-dimensional display).
- the projection display device 51a is, for example, a HUD capable of displaying a flat surface.
- the projection display device 51a is not limited to this, and may be, for example, a liquid crystal display device provided on the instrument panel.
- the spatial operation detection device 52 is, for example, at least one of an image processing device that detects the position of an indicator from an image of the vehicle interior captured by a camera, a capacitance type position sensor, an optical sensor, and a millimeter wave sensor. Is used. Further, the method for detecting the position of the indicator is not limited to the above, and any method that will appear in the future may be used.
- the spatial operation detection device 52 detects the range in which the indicator is located among the detection range, the front detection range, the back detection range, the lateral detection range, and the peripheral range.
- the lateral detection range is a predetermined space on the lateral side of the detection range other than the front detection range and the back detection range, and is, for example, a space on the upper, lower, left, and right sides of the detection range.
- any position within the lateral detection range may be referred to as P4 (Xp4, Yp4, Zp4).
- P4 ⁇ (Xp4 ⁇ 0 or Xp4> Xd) or (Yp4 ⁇ 0 or Yp4> Yd) ⁇ and (Zd2 ⁇ Zp4 ⁇ Zd1) with the coordinate system of FIG. 2 ... ( 4)
- the relational expression holds.
- the peripheral range is the range around the detection range, the front detection range, the back detection range, and the horizontal detection range.
- the peripheral range is a range obtained by excluding the detection range, the front detection range, the back detection range, and the lateral detection range from the range in which the spatial operation detection device 52 detects the position of the indicator.
- P1, P2, P3, and P4 are points that exist within the range in which the spatial operation detection device 52 detects the position of the indicator. Is.
- the in-vehicle information system 53 is the same system as the in-vehicle information system described in the first embodiment.
- the vehicle-mounted information system 53 executes the function of the radio application based on the direct operation input to the operation input device of the vehicle-mounted information system 53 or the gesture operation detected by the spatial operation detection device 52.
- the in-vehicle information system 53 selects a down search when a gesture operation of swinging a finger from right to left is performed, and when a gesture operation of swinging a finger from left to right is performed. Selects up-search and turns up the volume when a gesture operation such as turning the dial to the right is performed, and lowers the volume when a gesture operation such as turning the dial to the left is performed.
- the in-vehicle information system 53 may display icons and buttons for controlling the radio application when these gesture operations are performed.
- the display control device 1 of FIG. 3 includes a spatial operation acquisition unit 11a, a generation control unit 12a, and a generation unit 12b.
- the spatial operation acquisition unit 11a is included in the concept of the acquisition unit 11 of FIG. 1, and the generation control unit 12a and the generation unit 12b are included in the concept of the control unit 12 of FIG.
- the spatial operation acquisition unit 11a is an interface of the spatial operation detection device 52, and acquires the detection result of the spatial operation detection device 52. That is, the spatial operation acquisition unit 11a acquires the range in which the indicator is located among the detection range, the front detection range, the back detection range, the lateral detection range, and the peripheral range.
- the generation control unit 12a is generated by the generation unit 12b so that the display of the display object is different based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, and the back detection range. Determine the display object to be displayed.
- the generation control unit 12a acquires the indicator in the front detection range. Determine a display object similar to the display object in.
- the generation unit 12b generates a display object determined by the generation control unit 12a, and controls the projected display device 51a to display the generated display object.
- the generation control unit 12a substantially controls the display of the projection display device 51a and, by extension, the display object displayed on the projection display device 51a. Therefore, in the following description, it is described that the generation control unit 12a simplifies the control of displaying the display object on the projection display device 51a via the generation unit 12b, and the generation control unit 12a displays the display object. Sometimes.
- FIG. 4 to 7 are diagrams showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the second embodiment.
- FIG. 4 shows a display when the range in which the indicator is acquired is the detection range, that is, a display when the position of the indicator is P1.
- FIG. 5 shows a display when the range in which the indicator is acquired is the front detection range, that is, a display when the position of the indicator is P2.
- FIG. 6 shows a display when the range in which the indicator is acquired is the back detection range, that is, a display when the position of the indicator is P3.
- FIG. 7 shows a display when the range in which the indicator is acquired is the horizontal detection range, that is, a display when the position of the indicator is P4.
- the display object includes a planar detection range display object 71 indicating a detection range and an indicator display object 72 indicating an indicator such as a user's hand or finger. Since the detection range display object 71 has a shape corresponding to the detection range, when the detection range has a rectangular parallelepiped three-dimensional shape, the planar shape of the detection range display object 71 becomes a rectangular shape.
- the generation control unit 12a when the indicator is located within the detection range, the generation control unit 12a makes the color tone of the indicator display object 72 the same as or substantially the same as the color tone of the detection range display object 71. To do. In this case, the color tone of all the indicator display objects 72 may be changed, or the color tone of only the portion of the indicator display object 72 in the detection range display object 71 may be changed. As shown in FIG. 5, when the indicator is located within the front detection range, the generation control unit 12a changes the color tone of the indicator display object 72 to a default color tone different from the color tone of the detection range display object 71. To do.
- the generation control unit 12a makes the color tone of the indicator display object 72 different from the default color tone and the color tone of the detection range display object 71. Change to a color tone (for example, a color tone like a shadow). In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 7, when the indicator is located within the horizontal detection range, the generation control unit 12a changes the color tone of the indicator display object 72 to the default color tone.
- the generation control unit 12a displays the display object based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, and the back detection range. Control to make different.
- the control for changing the display mode of the display object includes a control for changing the display mode of the indicator display object 72 without changing the display mode of the detection range display object 71. According to such a configuration, it is possible to display to the user in which range of the detection range, the front detection range, and the back detection range the indicator is located.
- the display mode of the display object changed (controlled) by the generation control unit 12a has been described as being the color tone of the display object.
- the display mode of the display object changed (controlled) by the generation control unit 12a is not limited to the color tone of the display object, but may be the shape of the display object, or a combination of the color tone and the shape of the display object. It may be.
- FIG. 8 is a flowchart showing the operation of the display control device 1 according to the second embodiment.
- the indicator is in a range that cannot be detected by the spatial operation detection device 52 (detection range, front detection range, back detection range, lateral detection range, and range outside the peripheral range. ), And it is assumed that the detection range display object 71 and the indicator display object 72 are not displayed on the projection display device 51a.
- step S1 the generation control unit 12a determines whether or not the range in which the indicator is located has been acquired by the spatial operation acquisition unit 11a. If it is determined that the range in which the indicator is located has been acquired, the process proceeds to step S2, and if it is determined that the range in which the indicator is located has not been acquired, the process proceeds to step S6.
- step S2 the generation control unit 12a determines whether or not the range in which the indicator is located is one of the detection range, the front detection range, the back detection range, and the lateral detection range. If it is determined that the range in which the indicator is located is any of the detection range, the front detection range, the back detection range, and the lateral detection range, the process proceeds to step S3. If this is not the case, that is, if it is determined that the range in which the indicator is located is the peripheral range, the process proceeds to step S6.
- step S3 the generation control unit 12a is generated by the generation unit 12b based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, the back detection range, and the lateral detection range. Determine the display object to be displayed.
- the display object determined here includes the detection range display object 71 and the indicator display object 72.
- step S4 the generation unit 12b generates the display object determined by the generation control unit 12a.
- step S5 the generation unit 12b controls to display the generated display object on the projection display device 51a, and the projection display device 51a displays the display object. After that, the process returns to step S1. Since the user can perform the gesture operation while checking the display of the display object in step S5, the gesture operation can be easily performed within the detection range. At this time, the vehicle-mounted information system 53 does not execute the application function based on the gesture operation performed outside the detection range, but executes the application function based on the gesture operation performed within the detection range.
- step S6 If the process proceeds from step S1 or step S2 to step S6 and the projection display device 51a displays the display object including the detection range display object 71 and the indicator display object 72, the generation control unit 12a may display the display object.
- the display of the display object is stopped via the generation unit 12b. As a result, the display of the display object displayed on the projection display device 51a is stopped. After that, the process returns to step S1.
- ⁇ Summary of Embodiment 2> According to the display control device 1 according to the second embodiment as described above, if the display mode of the display object is different based on the range in which the indicator is located among the detection range, the front detection range, and the back detection range. Control to make. According to such a configuration, it is possible to display to the user in which range of the detection range, the front detection range, and the back detection range the indicator is located.
- ⁇ Modification 1 of the second embodiment> 9 to 12 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the first modification, in the same manner as in FIGS. 4 to 7.
- the display object according to the first modification further includes an auxiliary display object 73 that indicates the distance between the detection range and the indicator.
- the auxiliary display object 73 according to the first modification is a display object in which the circular display object 73a and the linear display object 73b are appropriately combined.
- the generation control unit 12a adds the circular display object 73a to the indicator display object 72 without displaying the linear display object 73b.
- the circular display object 73a is a display object showing the XY coordinates of FIG. 2 of the indicator, and is added on the detection range display object 71.
- the distance between the circular display object 73a and the indicator display object 72 is appropriately adjusted so that the distance between the detection range and the indicator corresponds to the distance between the detection range and the indicator.
- the generation control unit 12a displays the circular display object 73a and the linear display object 73b.
- the linear display object 73b is a display object that connects the circular display object 73a and the indicator display object 72.
- the generation control unit 12a displays the circular display object 73a and the linear display object 73b with a semi-transparent or broken line. In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 12, when the indicator is located within the horizontal detection range, the generation control unit 12a does not display the circular display object 73a and the linear display object 73b.
- the gesture operation can be easily performed within the detection range. It can be carried out.
- the combination of the display, the transparent display, and the non-display of the circular display object 73a and the linear display object 73b is the detection range, the front detection range, and the back detection range. And, it is different in each of the horizontal detection ranges. That is, the generation control unit 12a according to the present modification 1 is a display object based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, the back detection range, and the lateral detection range. Controls the display to be different. According to such a configuration, it is possible to display to the user in which range of the detection range, the front detection range, the back detection range, and the lateral detection range the indicator is located. Therefore, the user can easily perform the gesture operation within the detection range.
- the generation control unit 12a is an auxiliary display object based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, and the back detection range of the spatial operation acquisition unit 11a. Control was performed to switch between display and non-display of 73.
- the generation control unit 12a may display at least one of the detection range display object 71 and the indicator display object 72 differently based on the range acquired by the spatial operation acquisition unit 11a.
- the auxiliary display object 73 may always be displayed if it is configured to be such.
- ⁇ Modification 2 of the second embodiment> 13 to 16 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the second modification in the same manner as in FIGS. 4 to 7.
- the display object according to the modification 2 further includes an auxiliary display object 73 indicating the distance between the detection range and the indicator.
- the auxiliary display object 73 according to the modification 2 is a display object having the same shape as the indicator display object 72. Then, the positions of the auxiliary display object 73 and the indicator display object 72 are appropriately adjusted so that the deviation between the indicator display object 72 and the auxiliary display object 73 corresponds to the distance between the detection range and the indicator. Will be done.
- the generation control unit 12a when the indicator is located within the detection range, the generation control unit 12a does not display the auxiliary display object 73. As shown in FIG. 14, when the indicator is located within the front detection range, the generation control unit 12a displays the auxiliary display object 73 in a bright color tone.
- the generation control unit 12a displays the auxiliary display object 73 in a dark color tone. In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 16, when the indicator is located within the lateral detection range, the generation control unit 12a does not display the auxiliary display object 73.
- the user can know how far the indicator is from the detection range, so that the detection range Gesture operation can be easily performed within.
- the generation control unit 12a displays the color tone of the auxiliary display object 73, etc., based on the range acquired by the spatial operation acquisition unit 11a among the detection range, the front detection range, and the back detection range. Control was performed to change the mode.
- the present invention is not limited to this, and for example, the generation control unit 12a may display at least one of the detection range display object 71 and the indicator display object 72 differently based on the range acquired by the spatial operation acquisition unit 11a.
- the display mode such as the color tone of the auxiliary display object 73 may always be the same when it is configured to be used.
- ⁇ Modification 3 of Embodiment 2> 17 to 20 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the third modification in the same manner as in FIGS. 4 to 7.
- the display object according to the third modification further includes the detection range auxiliary display object 74.
- the detection range auxiliary display object 74 is a display object for preventing the indicator from colliding with the object when there is an object such as the interior of the vehicle behind the detection range.
- the position of the detection range auxiliary display object 74 with respect to the detection range display object 71 corresponds to the position of an object such as the interior of the vehicle with respect to the detection range. According to the present modification 3 as described above, the limit of movement of the indicator in the depth direction can be displayed to the user.
- the detection range auxiliary display object 74 of FIGS. 17 to 20 has a shape in which the detection range is projected, it may have another shape. Further, the detection range auxiliary display object 74 of FIGS. 17 to 20 is a display object having a broken line frame, but is not limited to this. For example, the detection range auxiliary display object 74 has a solid line frame instead of the broken line frame, and the inside thereof is filled. It may be a display object. Further, the detection range auxiliary display object 74 may be appropriately displayed in other modified examples.
- ⁇ Modification 4 of Embodiment 2> 21 to 24 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 4 in the same manner as in FIGS. 4 to 7.
- the generation unit 12b has a three-dimensional graphics function, and projects a three-dimensional display object generated by the three-dimensional graphics function onto a two-dimensional plane.
- the detection range display object 71 according to the present modification 4 has a three-dimensional shape such as a rectangular parallelepiped.
- a pseudo three-dimensional graphics function may be used instead of the three-dimensional graphics function to generate a three-dimensional display object.
- a three-dimensional display object is generated by combining a plurality of planar shape display objects generated by the two-dimensional graphics function.
- the display device having the two-dimensional display function performs the two-dimensional display
- the display device having the two-dimensional display function has an apparent three-dimensional display (3D). It is configured to perform (also called display).
- the generation control unit 12a displays the hidden line 71a, which is a part of the detection range display object 71, with a broken line. As shown in FIG. 22, when the indicator is located within the front detection range, the generation control unit 12a stops the display of the hidden line 71a of the detection range display object 71.
- the generation control unit 12a displays the hidden line 71a of the detection range display object 71 with a solid line. As shown in FIG. 24, when the indicator is located within the lateral detection range, the generation control unit 12a stops the display of the hidden line 71a of the detection range display object 71.
- the control for changing the display mode of the display object includes the control for changing the shape of the display object. Further, the control for changing the display mode of the display object includes a control for changing the display mode of the detection range display object 71 without changing the display mode of the indicator display object 72. Even with such a configuration, the same effect as that of the second embodiment can be obtained.
- ⁇ Modification 5 of Embodiment 2> 25 to 28 are views showing the display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 5 in the same manner as in FIGS. 4 to 7.
- the detection range display object 71 according to the present modification 5 has a three-dimensional shape as in the modification 4 (FIGS. 21 to 24). Further, in the present modification 5, the control for changing the display mode of the display object includes the control for changing the display mode of the detection range display object 71 and the indicator display object 72.
- the generation control unit 12a when the indicator is located within the detection range, the generation control unit 12a does not change the color tone of the indicator display object 72 from the default, but is located behind the detection range display object 71. Change the color tone of the surface from the default. As shown in FIG. 26, when the indicator is located within the front detection range, the generation control unit 12a does not change the color tone of the indicator display object 72 from the default, and all of the detection range display objects 71. Change the color tone of the surface from the default.
- the generation control unit 12a when the indicator is located within the depth detection range, the generation control unit 12a has the color tone of the surface on the back side of the detection range display object 71 and at least one of the indicator display objects 72. Change the color tone of the part from the default. In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 28, when the indicator is located within the horizontal detection range, the generation control unit 12a does not change the color tone of the indicator display object 72 from the default, and all of the detection range display objects 71. Change the color tone of the surface from the default.
- the control for changing the display mode of the display object includes the control for changing the display mode of the detection range display object 71 and the indicator display object 72. Even with such a configuration, the same effect as that of the second embodiment can be obtained.
- ⁇ Modified Example 6 of Embodiment 2> 29 to 32 are views showing the display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 6 in the same manner as in FIGS. 4 to 7.
- the detection range display object 71 according to the present modification 6 has a three-dimensional shape as in the modification 4 (FIGS. 21 to 24), and the display object according to the present modification 6 has been described in the modification 3.
- the detection range auxiliary display object 74 is included.
- the control for changing the display mode of the display object includes the control for changing the display mode of the indicator display object 72 and the detection range auxiliary display object 74.
- the generation control unit 12a of the indicator display object 72 does not change the shape and color tone of the detection range auxiliary display object 74 from the default. Change the color tone from the default.
- the generation control unit 12a sets the color tone of the indicator display object 72 and the shape and color tone of the detection range auxiliary display object 74 from the default. It does not change.
- the generation control unit 12a when the indicator is located within the depth detection range, the generation control unit 12a has the color tone of at least a part of the indicator display object 72, and the shape and shape of the detection range auxiliary display object 74. Change the color tone from the default.
- the color tone of the detection range auxiliary display object 74 after the change is, for example, white.
- the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line.
- the generation control unit 12a when the indicator is located within the horizontal detection range, the generation control unit 12a sets the color tone of the indicator display object 72 and the shape and color tone of the detection range auxiliary display object 74 from the default. It does not change.
- the control for different display modes of the display objects includes the control for different display modes of the indicator display object 72 and the detection range auxiliary display object 74. Even with such a configuration, the same effect as that of the second embodiment can be obtained.
- ⁇ Modification 7 of the second embodiment> 33 to 36 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 7 in the same manner as in FIGS. 4 to 7.
- the detection range display object 71 according to the present modification 7 has a three-dimensional shape as in the modification 4 (FIGS. 21 to 24).
- the control for changing the display mode of the display object includes the control for changing the display mode of the indicator display object 72 without changing the display mode of the detection range display object 71. That is, the same control as that described with reference to FIGS. 4 to 7 in the second embodiment is performed.
- the control for changing the display mode of the indicator display object 72 is not limited to the control for changing the color tone of the indicator display object 72, for example, the control for changing the size of the indicator display object 72. You may. Specifically, the generation control unit 12a enlarges the indicator display object 72 from the default when the indicator is located within the front detection range, and increases the indicator display object 72 from the default when the indicator is located within the back detection range. The indicator display object 72 may be made smaller than the default. According to such a configuration, the user can be displayed by the perspective method in which range of the detection range, the front detection range, and the back detection range the indicator is located.
- ⁇ Modification 8 of the second embodiment> 37 to 40 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 8 in the same manner as in FIGS. 4 to 7.
- the control for changing the shape of the display object includes a control for changing the shape of the display object to either a planar shape or a three-dimensional shape, and a control for changing the color tone of the display object.
- the generation control unit 12a changes the shape of the detection range display object 71 to a planar shape, and changes the color tone of the indicator display object 72 from the default. change.
- the generation control unit 12a changes the shape of the detection range display object 71 without changing the color tone of the indicator display object 72 from the default. Change to a three-dimensional shape.
- the generation control unit 12a changes the color tone of at least a part of the indicator display object 72 from the default, and changes the color tone of the detection range display object 71 from the default. Change the shape to a three-dimensional shape. In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 40, when the indicator is located within the horizontal detection range, the generation control unit 12a changes the shape of the detection range display object 71 without changing the color tone of the indicator display object 72 from the default. Change to a flat shape.
- the control for changing the shape of the display object includes the control for changing the shape of the display object to either a planar shape or a three-dimensional shape. Even with such a configuration, the same effect as that of the second embodiment can be obtained.
- the control for changing the shape of the display object includes a control for changing the shape of the display object to either a planar shape or a three-dimensional shape and a control for changing the color tone of the display object. However, it may include only the former control.
- control for changing the shape of the display object to either a planar shape or a three-dimensional shape is not limited to the above.
- the control may be such that the planar shape and the three-dimensional shape are interchanged.
- the display object changed to either the planar shape or the three-dimensional shape is the detection range display object 71, but may be the indicator display object 72.
- ⁇ Modification 9 of the second embodiment> 41 to 44 are views showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 9 in the same manner as in FIGS. 4 to 7.
- the detection range display object 71 according to the present modification 9 has a three-dimensional shape as in the modification 4 (FIGS. 21 to 24), and the display object according to the present modification 9 has a modification 1 (FIG. 9). Similar to FIG. 12), the auxiliary display object 73 indicating the distance between the detection range and the indicator is further included.
- the auxiliary display object 73 according to the present modification 9 is a display object in which two circular display objects 73c and 73d and a linear display object 73e are appropriately combined.
- the circular display object 73c is added on the front surface of the detection range display object 71
- the circular display object 73d is added on the back surface of the detection range display object 71.
- the distances between the circular display objects 73c and 73d and the indicator display object 72 are appropriately adjusted so as to correspond to the distance between the detection range and the indicator.
- the linear display object 73b is a display object that connects the two circular display objects 73c and 73d and the indicator display object 72 and extends parallel to the Z axis in FIG.
- the linear portion between the two circular display objects 73c and 73d may be displayed in a color tone different from that of the other portions of the linear display object 73b.
- the generation control unit 12a displays the auxiliary display object 73, changes the color tone of the indicator display object 72 from the default, and displays the indicator.
- the object 72 is displayed between the circular display objects 73c and 73d.
- the generation control unit 12a displays the auxiliary display object 73 without changing the color tone of the indicator display object 72 from the default.
- the indicator display object 72 is displayed in front of the circular display object 73c.
- the generation control unit 12a displays the auxiliary display object 73 without changing the color tone of the indicator display object 72 from the default.
- the indicator display object 72 is displayed in front of the circular display object 73d.
- the generation control unit 12a may display the auxiliary display object 73 or change the color tone of the indicator display object 72 from the default. Do not do.
- the gesture operation can be easily performed within the detection range. It can be carried out.
- the detection range display object 71 according to the present modification 9 has a three-dimensional shape such as a rectangular parallelepiped, but as shown in FIG. 45, the detection range display object 71 may have a planar shape such as a rectangular shape. Good. Further, the detection range display object 71 of FIG. 45 may be displayed at a position within the detection range display object 71 of FIGS. 41 to 44, for example, a central position in the Z-axis direction.
- ⁇ Modification 10 of the second embodiment> 46 and 47 are diagrams showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the present modification 10.
- the detection range includes the first detection range and the second detection range
- the spatial operation acquisition unit 11a acquires the range in which the indicator is located among the first detection range and the second detection range.
- the detection range display object 71 includes a first detection range display object 71b indicating a first detection range and a second detection range display object 71c indicating a second detection range. Then, the generation control unit 12a makes the display of the display object different based on the range acquired by the spatial operation acquisition unit 11a among the first detection range and the second detection range.
- the generation control unit 12a sets the color tone of the indicator display object 72 and the first detection range display object 71b from the default to the first. Change to color tone.
- the generation control unit 12a changes the color tone of the indicator display object 72 and the second detection range display object 71c from the default to the second color tone. change.
- the user can perform different gesture operations in each of the plurality of ranges within the detection range, so that the operability can be improved.
- the first detection range and the second detection range are ranges in which the detection range is divided in the Z-axis direction, but the detection range is not limited to this.
- the first detection range and the second detection range may be nested ranges.
- a range in which a margin is provided in the second detection range may be set as the first detection range.
- the second detection range may be a range in which the first detection range is narrowed by 5 cm in the vertical, horizontal, and height directions.
- the number of ranges formed by dividing the detection range is not limited to two, and may be three or more.
- the shapes of the first detection range display object 71b and the second detection range display object 71c are not limited to the three-dimensional shape, but may be a planar shape.
- FIG. 50 is a block diagram showing the configuration of the display control device 1 according to the third embodiment of the present invention.
- the components that are the same as or similar to the above-mentioned components are designated by the same or similar reference numerals, and different components will be mainly described.
- the information to be displayed on the projection display device 51a is output from the vehicle-mounted information system 53 to the generation control unit 12a.
- the generation control unit 12a determines the display object generated by the generation unit 12b in consideration of the information from the vehicle-mounted information system 53.
- FIG. 51 is a diagram showing a display example of the projection display device 51a by the display control of the display control device 1 according to the third embodiment.
- the mode display object 75 and the operation display object 76 are displayed.
- the mode display object 75 indicates the operation mode (radio operation in FIG. 51) performed by the vehicle-mounted information system 53
- the operation display object 76 indicates a gesture operation that the vehicle-mounted information system 53 can accept.
- the gesture operation that the vehicle-mounted information system 53 can accept may differ depending on the operation mode.
- the mode display object 75 and the operation display object 76 are determined and generated by the generation control unit 12a and the generation unit 12b in the same manner as the detection range display object 71 and the like.
- the display control device 1 for example, the current status of the vehicle-mounted information system 53, the gesture operation that the vehicle-mounted information system 53 can accept, and the like are displayed on the projection display device 51a. be able to.
- FIG. 52 is a block diagram showing the configuration of the display control device 1 according to the first modification.
- the gesture operation that can be accepted by the vehicle-mounted information system 53 is output from the vehicle-mounted information system 53 to the space operation detection device 52.
- the spatial operation detection device 52 invalidates the detection of a gesture operation different from the gesture operation output from the vehicle-mounted information system 53.
- the spatial operation detecting device 52 is prevented from detecting the gesture operation more than necessary, so that the processing load of the spatial operation detecting device 52 can be reduced.
- the spatial operation detection device 52 may change at least one of the detection range, the front detection range, the back detection range, and the lateral detection range based on the gesture operation output from the in-vehicle information system 53. Good. Then, in accordance with this change, the generation control unit 12a may change the shape of the display object.
- FIG. 53 is a block diagram showing the configuration of the display control device 1 according to the second modification.
- the display control device 1 includes the vehicle-mounted information system 53, and the vehicle-mounted information system 53 can control the display device 54, which is a second display device that can move with the vehicle.
- the display control device 1 including the in-vehicle information system 53 may display the contents executed by the gesture operation, such as channel selection and volume, on the display device 54.
- FIG. 54 is a diagram showing a display example of the projection display device 51a by the display control of the display control device 1 according to the present modification 3.
- the number of each of the detection range and the detection range display object 71 is one, but in the present modification 3, the number of each of the detection range and the detection range display objects 71m and 71n is a plurality.
- a configuration in which a detection range for a radio is provided near the panel surface on which the radio is arranged and a detection range for the air conditioner is provided near the panel surface on which the air conditioner is arranged will be described as an example. ..
- the display object according to the third modification includes a detection range display object 71m indicating a detection range for a radio and a detection range display object 71n indicating a detection range for an air conditioner.
- the detection range for the radio and the detection range for the air conditioner are different, and the positional relationship between them is displayed by the detection range display objects 71m and 71n. Therefore, the user can perform appropriate gesture operations in each of the detection range for the radio and the detection range for the air conditioner.
- FIG. 55 is a block diagram showing the configuration of the display control device 1 according to the fourth embodiment of the present invention.
- the components that are the same as or similar to the above-mentioned components are designated by the same or similar reference numerals, and different components will be mainly described.
- a stereoscopic display device 51b is connected instead of the projection display device 51a.
- a HUD capable of stereoscopically displaying a display object by displaying a virtual image display object is used.
- the display object is visually recognized by the user as if it actually exists in the three-dimensional space of the real world, and the position of the display object in the Z-axis direction (depth direction) in FIG. 2, that is, the perspective of the display object is determined. Perceived by the user.
- FIG. 56 is a diagram showing a display object displayed by the stereoscopic display device 51b by the display control of the display control device 1 according to the fourth embodiment.
- the HUD in which the distances between the plurality of points on one display object and the user 31 are all the same is used in the stereoscopic display device 51b.
- the distance between the display object and the user 31 is not the distance between the actual position of the display object (the position on the windshield of the vehicle) and the user 31, but the position of the display object in the three-dimensional space. It means the distance to the user 31, that is, the virtual image distance.
- a two-dimensional display object is three-dimensionally displayed in the three-dimensional space realized by the three-dimensional display of the three-dimensional display device 51b. Therefore, the detection range display object 71 and the indicator display object 72 of FIG. 56 have a planar shape in the three-dimensional space.
- the distance between the detection range display object 71 that is stereoscopically displayed by the stereoscopic display device 51b and the user 31 may be referred to as a “detection range distance”, and the indicator display object 72 that is stereoscopically displayed by the stereoscopic display device 51b.
- the distance between the user 31 and the user 31 may be referred to as an "indicator distance”.
- the control for changing the display of the display object includes the control for changing the indicator distance with reference to the detection range distance.
- the stereoscopic display device 51b displays stereoscopically based on the detection range, the front detection range, and the range in which the indicator is located in the back detection range.
- the distance between the indicator display object 72 to be displayed and the user is changed.
- the indicator can be included in the detection range, the front detection range, and the back detection range without changing the display mode such as the color tone and shape of the display object as in the second embodiment. It is possible to display to the user which range of the object is located.
- FIG. 57 is a diagram showing a display object displayed by the stereoscopic display device 51b by the display control of the display control device 1 according to the present modification 1.
- the stereoscopic display device 51b uses a HUD in which the distances between the plurality of points on one display object and the user 31 are all the same.
- the stereoscopic display device 51b uses a HUD in which the distances between a plurality of points on one display object and the user 31 are different.
- a three-dimensional display object is three-dimensionally displayed in the three-dimensional space realized by the three-dimensional display of the three-dimensional display device 51b. Therefore, the detection range display object 71 and the indicator display object 72 of FIG. 57 have a three-dimensional shape in the three-dimensional space. According to such a configuration, it is possible to perform a display closer to the three-dimensional space in the real world.
- the generation control unit 12a controls the indicator distance in three stages (far, medium, and near).
- the indicator distance may be changed in four or more steps.
- the distance between the detection range display object 71 and the indicator display object 72 may correspond to the distance between the detection range and the indicator.
- the stereoscopic display device 51b uses a HUD capable of stereoscopically displaying a display object, but the present invention is not limited to this.
- a display device having an autostereoscopic display function capable of stereoscopic display may be used as the stereoscopic display device 51b.
- This display device is, for example, a liquid crystal display device capable of stereoscopic display, an aerial display device capable of making a light source or a source image appear in space through a mirror element, a display device using holography, and the like. Even with such a configuration, the same effect as that of the fourth embodiment can be obtained.
- each embodiment and each modification thereof may be combined as appropriate.
- the display object according to the fourth embodiment may include the auxiliary display object 73 as shown in FIG. 9 described in the first modification of the second embodiment.
- FIG. 58 is a block diagram showing the configuration of the display control device 1 according to the fifth embodiment of the present invention.
- the components that are the same as or similar to the above-mentioned components are designated by the same or similar reference numerals, and different components will be mainly described.
- the display control device 1 of FIG. 58 further includes a storage unit 13.
- the storage unit 13 stores a predetermined arrangement (three-dimensional position) of the device in the vehicle.
- Predetermined devices include, for example, interiors and equipment in vehicles.
- the generation control unit 12a sets the repellent range based on the three-dimensional position stored in the storage unit 13.
- the repellent range is a predetermined space around the detection range and around the predetermined device, and for example, a range in which the presence of the indicator is not appropriate is set.
- FIG. 59 is a top view showing the repellent range 64.
- the repellent range 64 for example, a range up to a position separated by a length Xth (for example, 5 cm) in the X-axis direction and a length Zth (for example, 5 cm) in the Z-axis direction from a predetermined device 66 is used.
- the repellent range 64 may include a position separated from the device 66 by a length Yth (for example, 5 cm) in the Y-axis direction and a range between the device 66.
- the spatial operation detection device 52 detects the range in which the indicator is located among the detection range, the front detection range, the back detection range, the lateral detection range, and the repellent range 64. As a result, the spatial operation acquisition unit 11a also acquires the range in which the indicator is located among the detection range, the front detection range, the back detection range, the lateral detection range, and the repellent range 64.
- 60 and 61 are diagrams showing display objects displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the fifth embodiment.
- the generation control unit 12a when the indicator is located in a range other than the repellent range 64, for example, the back detection range, the generation control unit 12a changes the color tone of at least a part of the indicator display object 72 from the default. .. In this case, the generation control unit 12a displays the indicator display object 72 as a semi-transparent or broken line. As shown in FIG. 61, when the indicator is located within the repellent range 64, the generation control unit 12a displays the dark-colored repellent range display object 77 indicating the repellent range 64. The generation control unit 12a and the generation unit 12b perform the determination and generation of the repellent range display object 77 in the same manner as the detection range display object 71 and the like.
- the generation control unit 12a displays and hides the repellent range display object 77 based on whether or not the range acquired by the spatial operation acquisition unit 11a is the repellent range 64. Controls switching.
- the indicator body invades the periphery of the predetermined device 66. Can be suppressed.
- the repellent range display object 77 may have the same shape as the indicator display object 72 and may have a dark color tone, as in the auxiliary display object 73 of FIG. 15, for example.
- the repellent range display object 77 of FIGS. 60 and 61 has a planar shape, but is not limited to this.
- the repellent range display object 77 may have a three-dimensional shape.
- each embodiment and each modification thereof may be appropriately combined.
- the detection range display object 71 according to the fifth embodiment may have a three-dimensional shape as shown in the modified examples 4 (FIGS. 21 to 24) of the second embodiment.
- the virtual image repellent range display object 77 may be three-dimensionally displayed as in the fourth embodiment.
- the predetermined device 66 includes a contact-type operation input device that can move with the vehicle so that inconvenience occurs when the indicator comes into contact with the indicator.
- This operation input device includes, for example, a panel device in which buttons and switches are present, a touch panel, a touch pad, and the like.
- FIG. 63 is a diagram showing a display object displayed on the display screen 60 of the projection display device 51a by the display control of the display control device 1 according to the second modification.
- the generation control unit 12a is a repellent range display object in which the display mode of the range around the operation input device and the display mode of the other range are different. 77 is displayed.
- the range without dot hatching is the range around the operation input device.
- the generation control unit 12a is the portion of the repellent range display object 77 corresponding to the range.
- the display mode of is changed.
- the generation control unit 12a determines the range of the repellent range display object 77.
- the display mode of the portion corresponding to may be changed.
- the range around the operation input device in the repellent range 64 may be set to be wider than the other range in the repellent range 64.
- FIG. 64 is a view of the detection range 21 according to the second embodiment along the direction from the front to the back (the ⁇ Z direction in FIG. 2)
- FIG. 65 is a view showing the detection range 21 according to the second embodiment. Is a view taken along the direction from the upper side to the lower side (the ⁇ Y direction in FIG. 2).
- the detection range 21, the front detection range 22, the back detection range 23, and the lateral detection range 24 shown in FIGS. 64 and 65 are the ranges defined by the above equations (1) to (4). Note that FIGS. 64 and 65 also show the peripheral range 25 described in the second embodiment.
- the detection range 21, the front detection range 22, the back detection range 23, and the lateral detection range 24 are limited to the range shown in FIG. 64, and by extension, the range defined by the above equations (1) to (4). It's not a thing.
- the lateral detection range 24 is a range obtained by hollowing out the detection range 21 from a range such as a cylinder or an elliptical cylinder in which the spatial operation detection device 52 can detect the position of the indicator. May be good.
- the ranges such as the detection range 21 and the lateral detection range 24 in FIG. 66 when viewed along the direction from the top to the bottom (-Y direction in FIG. 2) are the same as the ranges in FIG. 65.
- the lateral detection range 24 may be any range other than the cylindrical shape and the elliptical tubular shape as long as the above equation (4) is satisfied. Further, the lateral detection range 24 may be a range obtained by hollowing out the detection range 21 from the range of a sphere or an ellipsoid as long as the condition of Zd2 ⁇ Zp4 ⁇ Zd1 is satisfied. Further, the detection range 21 may be a range of a sphere or an ellipsoid.
- the front detection range 22 or the back detection range 23 protrudes from the detection range 21 when viewed along the direction from the front to the back (-Z direction in FIG. 2).
- An example in which there is no range has been described. More specifically, an example in which the outer shape of the detection range 21, the front detection range 22, and the back detection range 23 are the same when viewed along the direction has been described. However, the outer shape of the detection range 21, the front detection range 22, and the back detection range 23 may be different.
- FIGS. 64 and 65 are views of the detection range 21 according to the second modification from the same directions as those of FIGS. 64 and 65, respectively.
- an area that overlaps with the detection range 21 is defined as a first area, and an area that does not overlap is defined as a second area.
- the present modification 2 when the indicator is located in the second area, a display different from the display of the modification 1 of the second embodiment shown in FIGS. 9 to 12 is performed.
- the same display as in FIG. 10 when the indicator is located in the second area of the front detection range 22, FIG. 69 Is displayed.
- the same display as in FIG. 11 is performed, and when the indicator is located in the second area of the back detection range 23, the same display is performed.
- the display as shown in FIG. 70 is performed.
- the surface in front of the detection range display object 71 which is a rectangular parallelepiped (dot hatching with high density in FIG. 71 is attached.
- a display object 78 indicating a second area, which is an extension of the surface) is added. At this time, the color tone of the indicator display object 72 is not changed from the default.
- a display object 78 indicating a second area, which is an extension of the attached surface) is added. At this time, at least a part of the color tone of the indicator display object 72 is changed from the default.
- the outer shape of the lateral detection range 24 and the outer shape of the front detection range 22 or the back detection range 23 are the same, but may be different. Further, the outer shape of the front detection range 22 and the outer shape of the back detection range 23 may be different. Further, the front detection range 22 and the back detection range 23 are not limited to the rectangular parallelepiped range, but may be a range obtained by hollowing out the detection range 21 and the lateral detection range 24 from the ellipsoidal range.
- the acquisition unit 11 and the control unit 12 of FIG. 1 described above are hereinafter referred to as “acquisition unit 11 and the like”.
- the acquisition unit 11 and the like are realized by the processing circuit 81 shown in FIG. 73. That is, the processing circuit 81 includes the acquisition unit 11 that acquires the range in which the indicator is located among the detection range, the front detection range, and the back detection range, and the detection range, the front detection range, and the back detection range.
- a control unit 12 that controls the display of the detection range display object and the display object including the indicator display object to be different based on the range acquired by the acquisition unit 11 is provided.
- Dedicated hardware may be applied to the processing circuit 81, or a processor that executes a program stored in the memory may be applied. Examples of the processor include a central processing unit, a processing unit, an arithmetic unit, a microprocessor, a microcomputer, a DSP (Digital Signal Processor), and the like.
- the processing circuit 81 may be, for example, a single circuit, a composite circuit, a programmed processor, a parallel programmed processor, an ASIC (Application Specific Integrated Circuit), or an FPGA (Field Programmable Gate). Array), or a combination of these.
- Each of the functions of each part such as the acquisition unit 11 may be realized by a circuit in which processing circuits are dispersed, or the functions of each part may be collectively realized by one processing circuit.
- the processing circuit 81 When the processing circuit 81 is a processor, the functions of the acquisition unit 11 and the like are realized by combining with software and the like.
- the software and the like correspond to, for example, software, firmware, or software and firmware.
- Software and the like are described as programs and stored in memory.
- the processor 82 applied to the processing circuit 81 realizes the functions of each part by reading and executing the program stored in the memory 83.
- the step of acquiring the range in which the indicator is located among the detection range, the front detection range, and the back detection range, the detection range, and the front detection range , And, of the back detection range, the step of controlling the display of the display object including the detection range display object and the indicator display object to be different based on the acquired range is executed as a result.
- a memory 83 for storing the program is provided. In other words, it can be said that this program causes the computer to execute the procedure or method of the acquisition unit 11 or the like.
- the memory 83 is a non-volatile or non-volatile memory such as a RAM (RandomAccessMemory), a ROM (ReadOnlyMemory), a flash memory, an EPROM (ErasableProgrammableReadOnlyMemory), or an EEPROM (ElectricallyErasableProgrammableReadOnlyMemory). Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disc), its drive device, etc., or any storage medium that will be used in the future. You may.
- RAM RandomAccessMemory
- ROM ReadOnlyMemory
- flash memory an EPROM (ErasableProgrammableReadOnlyMemory), or an EEPROM (ElectricallyErasableProgrammableReadOnlyMemory).
- Volatile semiconductor memory Volatile semiconductor memory, HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk,
- each function of the acquisition unit 11 and the like is realized by either hardware or software has been described above.
- the present invention is not limited to this, and a configuration may be configured in which a part of the acquisition unit 11 or the like is realized by dedicated hardware and another part is realized by software or the like.
- the acquisition unit 11 realizes its function by a processing circuit 81 as dedicated hardware, an interface, a receiver, and the like, and other than that, the processing circuit 81 as a processor 82 reads a program stored in the memory 83. It is possible to realize the function by executing it.
- the processing circuit 81 can realize each of the above-mentioned functions by hardware, software, or a combination thereof.
- the display control device 1 described above includes a vehicle device such as a PND (Portable Navigation Device), a navigation device and an audio device, a communication terminal including a mobile terminal such as a mobile phone, a smartphone and a tablet, a vehicle device and communication. It can also be applied to a display control system constructed as a system by appropriately combining a function of an application installed on at least one of terminals and a server. In this case, each function or each component of the display control device 1 described above may be dispersedly arranged in each device for constructing the system, or may be centrally arranged in any of the devices. Good.
- FIG. 75 is a block diagram showing the configuration of the server 91 according to this modification.
- the server 91 of FIG. 75 includes a communication unit 91a and a control unit 91b, and can perform wireless communication with a vehicle device 93 such as a navigation device and an audio device of the vehicle 92.
- a vehicle device 93 such as a navigation device and an audio device of the vehicle 92.
- the communication unit 91a which is an acquisition unit, receives the range acquired by the vehicle device 93 among the detection range, the front detection range, and the back detection range by performing wireless communication with the vehicle device 93.
- the control unit 91b has the same function as the control unit 12 of FIG. 1 when a processor (not shown) of the server 91 or the like executes a program stored in a memory (not shown) of the server 91. That is, the control unit 91b displays the display object including the detection range display object and the indicator display object based on the range received by the communication unit 91a among the detection range, the front detection range, and the back detection range. Generates a control signal to perform different controls. Then, the communication unit 91a transmits the control signal generated by the control unit 91b to the vehicle device 93. According to the server 91 configured in this way, the same effect as that of the display control device 1 described in the first embodiment can be obtained.
- FIG. 76 is a block diagram showing the configuration of the communication terminal 96 according to this modification.
- the communication terminal 96 of FIG. 76 includes a communication unit 96a similar to the communication unit 91a and a control unit 96b similar to the control unit 91b, and can perform wireless communication with the vehicle device 98 of the vehicle 97. ing.
- a mobile terminal such as a mobile phone, a smartphone, or a tablet carried by the driver of the vehicle 97 is applied to the communication terminal 96, for example.
- the communication terminal 96 configured in this way, the same effect as that of the display control device 1 described in the first embodiment can be obtained.
- each embodiment and each modification can be freely combined, and each embodiment and each modification can be appropriately modified or omitted.
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Instrument Panels (AREA)
Abstract
指示体がどの範囲に位置するかをユーザに表示可能な技術を提供することを目的とする。表示制御装置は、検出範囲と手前検出範囲と奥検出範囲とのうち、指示体が位置する範囲を取得する取得部と、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得部で取得された範囲に基づいて、検出範囲を示す検出範囲表示オブジェクト、及び、指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う制御部とを備える。
Description
本発明は、車両とともに移動可能な第1表示装置の表示を制御する表示制御装置、及び、表示制御方法に関する。
運転者が、ナビゲーション装置やオーディオ装置などの車載情報システムに対して操作を行う場合、運転者の視線はなるべく車両前方に維持されることが好ましい。そこで、操作入力装置に手及び指などの指示体が接触されなくても、運転者から車両前方の空間においてジェスチャー操作が行われた場合に、当該ジェスチャー操作を検出し、当該ジェスチャー操作に基づいて車載情報システムを制御する技術が提案されている。
このような技術では、運転者は、ジェスチャー操作が行われるべき予め定められた空間である検出範囲内においてジェスチャー操作を行う必要がある。そこで、ジェスチャー操作が、検出範囲、及び、検出範囲に対して上下左右側の範囲のうちのどの範囲で行われているかを表示する技術が提案されている(例えば特許文献1及び特許文献2)。
しかしながら、特許文献1及び特許文献2の技術では、ジェスチャー操作を行う運転者の指示体が、検出範囲、検出範囲に対して運転者側の範囲、及び、検出範囲に対して運転者と逆側の範囲のうちのどの範囲に位置していても、同様の表示が行われる。このため、運転者は、検出範囲に対して指示体をどの方向に移動したらよいか分からずに、検出範囲以外の範囲でジェスチャー操作を行ってしまう結果、車載情報システムをジェスチャー操作によって適切に操作することができない場合があった。
そこで、本発明は、上記のような問題点を鑑みてなされたものであり、指示体がどの範囲に位置するかをユーザに表示可能な技術を提供することを目的とする。
本発明に係る表示制御装置は、車両とともに移動可能な第1表示装置の表示を制御する表示制御装置であって、ユーザが指示体によりジェスチャー操作を行うべき予め定められた空間である検出範囲と、検出範囲に対してユーザ側の予め定められた空間である手前検出範囲と、検出範囲に対して手前検出範囲と逆側の予め定められた空間である奥検出範囲とのうち、指示体が位置する範囲を取得する取得部と、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得部で取得された範囲に基づいて、検出範囲を示す検出範囲表示オブジェクト、及び、指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う制御部とを備える。
本発明によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得された範囲に基づいて、検出範囲を示す検出範囲表示オブジェクト、及び、指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う。このような構成によれば、指示体がどの範囲に位置するかをユーザに表示することができる。
本発明の目的、特徴、態様及び利点は、以下の詳細な説明と添付図面とによって、より明白となる。
<実施の形態1>
図1は、本発明の実施の形態1に係る表示制御装置1の構成を示すブロック図である。表示制御装置1は、車両とともに移動可能な第1表示装置51と無線または有線を介して接続されており、第1表示装置51の表示を制御する。
図1は、本発明の実施の形態1に係る表示制御装置1の構成を示すブロック図である。表示制御装置1は、車両とともに移動可能な第1表示装置51と無線または有線を介して接続されており、第1表示装置51の表示を制御する。
第1表示装置51は、例えば、車両のウインドシールドに画像を表示するヘッドアップディスプレイ(HUD)などの表示装置であってもよいし、車両に持ち込まれた表示装置であってもよい。また詳細は後述するが、第1表示装置51は、平面表示を行う(2次元表示機能を有する)表示装置であってもよいし、運転者などのユーザが奥行きを知覚可能な立体表示を行う(3次元表示機能を有する)表示装置であってもよい。なお、図1の第1表示装置51は表示制御装置1の外部に設けられているが、これに限ったものではなく、表示制御装置1に備えられてもよい。
ユーザが、ユーザの手及び指などの指示体を車載情報システムの操作入力装置に接触させないで車載情報システムを操作するためのジェスチャー操作を行った場合、第1表示装置51は、表示制御装置1の制御によってジェスチャー操作に関する表示を行う。表示制御装置1の制御については、後で詳細に説明する。なお、第1表示装置51は、運転者よりも車両前方において当該表示を行うことが好ましい。
ここでいう車載情報システムは、例えば図示しない操作入力装置、表示装置、音声出力装置を含むシステムであり、操作入力装置における直接操作、または、ジェスチャー操作に基づいて、予め定められたアプリケーションの機能を実行することにより表示及び音声出力を行う。このような車載情報システムは、例えば、ナビゲーション装置、オーディオ装置、車両の車体を制御する制御装置、車両の走行を制御する制御装置、及び、通信装置の少なくともいずれかを含む。
図1の表示制御装置1は、取得部11と制御部12とを備える。
取得部11は、検出範囲と、手前検出範囲と、奥検出範囲とのうち、ユーザの指示体が位置する範囲を取得する。図2は、検出範囲、手前検出範囲、及び、奥検出範囲を示す図である。X軸方向、Y軸方向、Z軸方向は、それぞれユーザに対する左右方向、上下方向、奥行き方向に対応している。
検出範囲は、ユーザが指示体によりジェスチャー操作を行うべき予め定められた空間である。言い換えれば、検出範囲内のジェスチャー操作は有効であり、検出範囲外のジェスチャー操作は無効である。検出範囲は、第1表示装置51の表示領域の手前側の領域に設定されてもよいし、その領域以外に設定されてもよい。
以下の説明では、検出範囲は図2のように直方体の形状を有するが、これに限ったものではなく、任意の閉空間の形状であればよい。図2の検出範囲は、頂点A(0,Yd,Zd1)、頂点B(Xd,Yd,Zd1)、頂点C(Xd,0,Zd1)、頂点D(0,0,Zd1)、頂点E(0,Yd,Zd2)、頂点F(Xd,Yd,Zd2)、頂点G(Xd,0,Zd2)、頂点H(0,0,Zd2)で規定される直方体の形状を有する。以下の説明では、図2の検出範囲内の任意の位置をP1(Xp1,Yp1,Zp1)と記すこともある。なお、P1については、
0≦Xp1≦Xd、0≦Yp1≦Yd、Zd1≦Zp1≦Zd2 ・・・(1)
という関係式が成り立つ。
0≦Xp1≦Xd、0≦Yp1≦Yd、Zd1≦Zp1≦Zd2 ・・・(1)
という関係式が成り立つ。
手前検出範囲は、検出範囲に対してユーザ側の予め定められた空間である。以下の説明では、図2の手前検出範囲内の任意の位置をP2(Xp2,Yp2,Zp2)と記すこともある。なお、P2については、
0≦Xp2≦Xd、0≦Yp2≦Yd、Zp2>Zd2 ・・・(2)
という関係式が成り立つ。
0≦Xp2≦Xd、0≦Yp2≦Yd、Zp2>Zd2 ・・・(2)
という関係式が成り立つ。
奥検出範囲は、検出範囲に対して手前検出範囲と逆側の予め定められた空間である。以下の説明では、図2の奥検出範囲内の任意の位置をP3(Xp3,Yp3,Zp3)と記すこともある。なお、P3については、
0≦Xp3≦Xd、0≦Yp3≦Yd、Zp3<Zd1 ・・・(3)
という関係式が成り立つ。
0≦Xp3≦Xd、0≦Yp3≦Yd、Zp3<Zd1 ・・・(3)
という関係式が成り立つ。
なお、取得部11で取得される範囲は、検出範囲、手前検出範囲、及び、奥検出範囲を識別可能なID情報であってもよいし、指示体の座標であってもよい。
上記のような機能を有する取得部11には、例えば、カメラで撮像された車両室内の画像から指示体の位置を検出する画像処理装置、静電容量式の位置センサ、光センサ、ミリ波センサ、及び、これらのインターフェースの少なくともいずれかが用いられる。また、指示体の位置を検出する方式は上記に限ったものではなく、今後出現する如何なる方式でもよい。
制御部12は、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得部11で取得された範囲に基づいて、検出範囲を示す検出範囲表示オブジェクト、及び、指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う。
<実施の形態1のまとめ>
以上のような本実施の形態1に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち取得部11で取得された範囲、つまり指示体が位置する範囲に基づいて、表示オブジェクトの表示を異ならせる制御を行う。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。ユーザは、このような表示を確認しながらジェスチャー操作を行うことができるので、検出範囲内でジェスチャー操作を容易に行うことができる。
以上のような本実施の形態1に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち取得部11で取得された範囲、つまり指示体が位置する範囲に基づいて、表示オブジェクトの表示を異ならせる制御を行う。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。ユーザは、このような表示を確認しながらジェスチャー操作を行うことができるので、検出範囲内でジェスチャー操作を容易に行うことができる。
<実施の形態2>
図3は、本発明の実施の形態2に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態2に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図3は、本発明の実施の形態2に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態2に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図3の表示制御装置1は、投影表示装置51aと、空間操作検出装置52と、車載情報システム53と無線または有線を介して接続されている。
投影表示装置51aは、図1の第1表示装置51の概念に含まれる装置であり、平面表示(2次元表示)を行う。投影表示装置51aは、例えば、平面表示が可能なHUDである。なお、投影表示装置51aは、これに限ったものではなく、例えば、インストルメントパネルに設けられた液晶表示装置などであってもよい。
空間操作検出装置52は、例えば、カメラで撮像された車両室内の画像から指示体の位置を検出する画像処理装置、静電容量式の位置センサ、光センサ、及び、ミリ波センサの少なくともいずれかが用いられる。また、指示体の位置を検出する方式は上記に限ったものではなく、今後出現する如何なる方式でもよい。空間操作検出装置52は、検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、周辺範囲のうち、指示体が位置する範囲を検出する。
ここで、横検出範囲は、手前検出範囲及び奥検出範囲以外の、検出範囲の横側の予め定められた空間であり、例えば検出範囲の上下左右側の空間である。以下の説明では、横検出範囲内の任意の位置をP4(Xp4,Yp4,Zp4)と記すこともある。なお、P4については、図2の座標系との間に
{(Xp4<0またはXp4>Xd)または(Yp4<0またはYp4>Yd)}、かつ、(Zd2≧Zp4≧Zd1) ・・・(4)
という関係式が成り立つ。
{(Xp4<0またはXp4>Xd)または(Yp4<0またはYp4>Yd)}、かつ、(Zd2≧Zp4≧Zd1) ・・・(4)
という関係式が成り立つ。
周辺範囲は、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲の周辺の範囲である。言い換えると、周辺範囲は、空間操作検出装置52が指示体の位置を検出する範囲から、検出範囲、手前検出範囲、奥検出範囲、横検出範囲を除いた範囲である。また、明示的に式(1)~式(4)には記載しなかったが、P1,P2,P3,P4は、空間操作検出装置52が指示体の位置を検出する範囲内に存在する点である。
車載情報システム53は、実施の形態1で説明した車載情報システムと同様のシステムである。例えば、車載情報システム53は、車載情報システム53の操作入力装置に入力された直接操作、または、空間操作検出装置52で検出されたジェスチャー操作に基づいて、ラジオのアプリケーションの機能を実行する。具体的には、車載情報システム53は、指を右から左に振るジェスチャー操作が行われた場合にはダウンサーチの選局を行い、指を左から右に振るジェスチャー操作が行われた場合にはアップサーチの選局を行い、ダイヤルを右に回すようなジェスチャー操作が行われた場合には音量を上げ、ダイヤルを左に回すようなジェスチャー操作が行われた場合には音量を下げる。なお、車載情報システム53は、これらのジェスチャー操作が行われる際に、ラジオアプリを制御するためのアイコンやボタンを表示してもよい。
次に図3の表示制御装置1の構成について説明する。図3の表示制御装置1は、空間操作取得部11aと、生成制御部12aと、生成部12bとを備える。なお、空間操作取得部11aは、図1の取得部11の概念に含まれ、生成制御部12a及び生成部12bは、図1の制御部12の概念に含まれる。
空間操作取得部11aは、空間操作検出装置52のインターフェースであり、空間操作検出装置52の検出結果を取得する。つまり、空間操作取得部11aは、検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、周辺範囲のうち、指示体が位置する範囲を取得する。
生成制御部12aは、検出範囲、手前検出範囲、及び、奥検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、表示オブジェクトの表示が異なるように、生成部12bで生成される表示オブジェクトを決定する。なお、本実施の形態2では、生成制御部12aは、空間操作取得部11aが横検出範囲で指示体を取得した場合には、空間操作取得部11aが手前検出範囲で指示体を取得した場合の表示オブジェクトと同様の表示オブジェクトを決定する。
生成部12bは、生成制御部12aで決定された表示オブジェクトを生成し、当該生成した表示オブジェクトを投影表示装置51aに表示させる制御を行う。
以上の構成によれば、実質的に、生成制御部12aは、投影表示装置51aの表示、ひいては、投影表示装置51aに表示される表示オブジェクトを制御する。そこで、以下の説明では、生成制御部12aが、生成部12bを介して、投影表示装置51aに表示オブジェクトを表示させる制御を行うことを簡略化して、生成制御部12aが表示オブジェクトを表示すると記載することもある。
図4~図7は、本実施の形態2に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを示す図である。図4は、指示体が取得された範囲が検出範囲である場合の表示、つまり指示体の位置がP1である場合の表示を示す。図5は、指示体が取得された範囲が手前検出範囲である場合の表示、つまり指示体の位置がP2である場合の表示を示す。
図6は、指示体が取得された範囲が奥検出範囲である場合の表示、つまり指示体の位置がP3である場合の表示を示す。図7は、指示体が取得された範囲が横検出範囲である場合の表示、つまり指示体の位置がP4である場合の表示を示す。
図4~図7に示すように、表示オブジェクトは、検出範囲を示す平面形状の検出範囲表示オブジェクト71と、ユーザの手及び指などの指示体を示す指示体表示オブジェクト72とを含む。なお、検出範囲表示オブジェクト71は、検出範囲に対応する形状を有するため、検出範囲が直方体の立体形状を有する場合には、検出範囲表示オブジェクト71の平面形状は矩形形状になる。
図4に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調を、検出範囲表示オブジェクト71の色調と同じにするかほぼ同じにする。この場合において、指示体表示オブジェクト72の全部の色調が変更されてもよいし、指示体表示オブジェクト72のうち検出範囲表示オブジェクト71内の部分のみの色調が変更されてもよい。図5に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調を、検出範囲表示オブジェクト71の色調と異なるデフォルトの色調に変更する。
図6に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調を、デフォルトの色調及び検出範囲表示オブジェクト71の色調とは異なる色調(例えば影のような色調)に変更する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図7に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトの色調に変更する。
このように本実施の形態2では、生成制御部12aは、検出範囲、手前検出範囲、及び、奥検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、表示オブジェクトの表示態様を異ならせる制御を行う。また、本実施の形態2では、表示オブジェクトの表示態様を異ならせる制御は、検出範囲表示オブジェクト71の表示態様を異ならせずに、指示体表示オブジェクト72の表示態様を異ならせる制御を含む。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。
なお以上では、生成制御部12aで変更(制御)される表示オブジェクトの表示態様は、表示オブジェクトの色調であるものとして説明した。しかしながら、生成制御部12aで変更(制御)される表示オブジェクトの表示態様は、表示オブジェクトの色調に限ったものではなく、表示オブジェクトの形状であってもよいし、表示オブジェクトの色調及び形状の組み合わせであってもよい。
<動作>
図8は、本実施の形態2に係る表示制御装置1の動作を示すフローチャートである。なお、ここで説明する動作例の動作開始時には、指示体は、空間操作検出装置52で検出できない範囲(検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、周辺範囲の外側の範囲)に位置し、投影表示装置51aには検出範囲表示オブジェクト71及び指示体表示オブジェクト72が表示されていないものとする。
図8は、本実施の形態2に係る表示制御装置1の動作を示すフローチャートである。なお、ここで説明する動作例の動作開始時には、指示体は、空間操作検出装置52で検出できない範囲(検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、周辺範囲の外側の範囲)に位置し、投影表示装置51aには検出範囲表示オブジェクト71及び指示体表示オブジェクト72が表示されていないものとする。
まずステップS1にて、生成制御部12aは、空間操作取得部11aによって指示体が位置する範囲が取得されたか否かを判定する。指示体が位置する範囲が取得されたと判定された場合には処理がステップS2に進み、指示体が位置する範囲が取得されなかったと判定された場合には処理がステップS6に進む。
ステップS2にて、生成制御部12aは、指示体が位置する範囲が、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のいずれかであるか否かを判定する。指示体が位置する範囲が、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のいずれかであると判定された場合には、処理がステップS3に進む。そうでない場合、つまり指示体が位置する範囲が周辺範囲であると判定された場合には、処理がステップS6に進む。
ステップS3にて、生成制御部12aは、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、生成部12bで生成される表示オブジェクトを決定する。ここで決定される表示オブジェクトには、検出範囲表示オブジェクト71及び指示体表示オブジェクト72が含まれる。
ステップS4にて、生成部12bは、生成制御部12aで決定された表示オブジェクトを生成する。
ステップS5にて、生成部12bは、生成した表示オブジェクトを投影表示装置51aに表示させる制御を行い、投影表示装置51aは、当該表示オブジェクトを表示する。その後、処理がステップS1に戻る。ユーザは、ステップS5の表示オブジェクトの表示を確認しながらジェスチャー操作を行うことができるので、検出範囲内でジェスチャー操作を容易に行うことができる。この際、車載情報システム53は、検出範囲外で行われたジェスチャー操作に基づいてアプリケーションの機能を実行しないが、検出範囲内で行われたジェスチャー操作に基づいてアプリケーションの機能を実行する。
ステップS1またはステップS2からステップS6に処理が進み、かつ、投影表示装置51aが検出範囲表示オブジェクト71及び指示体表示オブジェクト72を含む表示オブジェクトを表示していた場合には、生成制御部12aは、生成部12bを介して当該表示オブジェクトの表示を停止させる。これにより、投影表示装置51aで表示されていた表示オブジェクトの表示が停止する。その後、処理がステップS1に戻る。
<実施の形態2のまとめ>
以上のような本実施の形態2に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち指示体が位置する範囲に基づいて、表示オブジェクトの表示態様を異ならせる制御を行う。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。
以上のような本実施の形態2に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち指示体が位置する範囲に基づいて、表示オブジェクトの表示態様を異ならせる制御を行う。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。
<実施の形態2の変形例1>
図9~図12は、本変形例1に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。本変形例1に係る表示オブジェクトは、検出範囲と指示体との間の距離を示す補助表示オブジェクト73をさらに含む。そして、本変形例1に係る補助表示オブジェクト73は、円形状表示オブジェクト73a及び線状表示オブジェクト73bを適宜組み合わせた表示オブジェクトである。
図9~図12は、本変形例1に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。本変形例1に係る表示オブジェクトは、検出範囲と指示体との間の距離を示す補助表示オブジェクト73をさらに含む。そして、本変形例1に係る補助表示オブジェクト73は、円形状表示オブジェクト73a及び線状表示オブジェクト73bを適宜組み合わせた表示オブジェクトである。
図9に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、線状表示オブジェクト73bを表示せずに、円形状表示オブジェクト73aを指示体表示オブジェクト72に付加して表示する。円形状表示オブジェクト73aは、指示体の図2のXY座標を示す表示オブジェクトであり、検出範囲表示オブジェクト71上に付加される。円形状表示オブジェクト73aと指示体表示オブジェクト72との間の距離は、検出範囲と指示体との間の距離に対応するように、これらの位置は適宜調整される。
図10に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、円形状表示オブジェクト73a及び線状表示オブジェクト73bを表示する。線状表示オブジェクト73bは、円形状表示オブジェクト73aと指示体表示オブジェクト72とを結ぶ表示オブジェクトである。
図11に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、円形状表示オブジェクト73a及び線状表示オブジェクト73bを半透過または破線で表示する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図12に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、円形状表示オブジェクト73a及び線状表示オブジェクト73bを表示しない。
以上のような、補助表示オブジェクト73を表示する本変形例1によれば、ユーザは、指示体が検出範囲からどれぐらい離れているかを知ることができるので、検出範囲内でジェスチャー操作を容易に行うことができる。
また、以上のような本変形例1に係る表示制御では、円形状表示オブジェクト73a及び線状表示オブジェクト73bの表示、透過表示及び非表示の組み合わせが、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のそれぞれにおいて異なっている。つまり、本変形例1に係る生成制御部12aは、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、表示オブジェクトの表示を異ならせる制御を行う。このような構成によれば、指示体が、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。このため、ユーザは、検出範囲内でジェスチャー操作を容易に行うことができる。
なお以上の説明では、生成制御部12aは、空間操作取得部11aが検出範囲、手前検出範囲、及び、奥検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、補助表示オブジェクト73の表示及び非表示を切り替える制御を行った。しかしこれに限ったものではなく、例えば、生成制御部12aは、空間操作取得部11aで取得された範囲に基づいて、検出範囲表示オブジェクト71及び指示体表示オブジェクト72の少なくともいずれかの表示を異ならせるように構成されている場合には、補助表示オブジェクト73を常に表示してもよい。
<実施の形態2の変形例2>
図13~図16は、本変形例2に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図13~図16は、本変形例2に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例2に係る表示オブジェクトは、変形例1(図9~図12)と同様に、検出範囲と指示体との間の距離を示す補助表示オブジェクト73をさらに含む。ただし、本変形例2に係る補助表示オブジェクト73は、変形例1と異なり、指示体表示オブジェクト72と同様の形状を有する表示オブジェクトである。そして、指示体表示オブジェクト72と補助表示オブジェクト73との間のずれは、検出範囲と指示体との間の距離に対応するように、補助表示オブジェクト73及び指示体表示オブジェクト72の位置は適宜調整される。
図13に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示しない。図14に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を明るい色調で表示する。
図15に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を暗い色調で表示する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図16に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示しない。
以上のような、補助表示オブジェクト73を表示する本変形例2によれば、変形例1と同様に、ユーザは、指示体が検出範囲からどれぐらい離れているかを知ることができるので、検出範囲内でジェスチャー操作を容易に行うことができる。
なお以上の説明では、生成制御部12aは、検出範囲、手前検出範囲、及び、奥検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、補助表示オブジェクト73の色調などの表示態様を変更する制御を行った。しかしこれに限ったものではなく、例えば、生成制御部12aは、空間操作取得部11aで取得された範囲に基づいて、検出範囲表示オブジェクト71及び指示体表示オブジェクト72の少なくともいずれかの表示を異ならせるように構成されている場合には、補助表示オブジェクト73の色調などの表示態様を常に同じにしてもよい。
<実施の形態2の変形例3>
図17~図20は、本変形例3に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図17~図20は、本変形例3に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例3に係る表示オブジェクトは、検出範囲補助表示オブジェクト74をさらに含む。検出範囲補助表示オブジェクト74は、検出範囲の奥側に車両の内装などの物体がある場合に、指示体が当該物体に衝突しないようにするための表示オブジェクトである。検出範囲表示オブジェクト71に対する検出範囲補助表示オブジェクト74の位置は、検出範囲に対する車両の内装などの物体の位置に対応している。このような本変形例3によれば、奥行き方向において指示体が移動可能な限界を、ユーザに表示することができる。
なお、図17~図20の検出範囲補助表示オブジェクト74は、検出範囲を投影させた形状を有しているが、他の形状であってもよい。また、図17~図20の検出範囲補助表示オブジェクト74は、破線枠の表示オブジェクトであるが、これに限ったものではなく、例えば破線枠の代わりに実線枠を有し、その内部を塗りつぶした表示オブジェクトであってもよい。また、検出範囲補助表示オブジェクト74は、他の変形例などにおいて適宜表示されてもよい。
<実施の形態2の変形例4>
図21~図24は、本変形例4に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図21~図24は、本変形例4に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例4では、生成部12bは、3次元グラフィックス機能を有しており、3次元グラフィックス機能によって生成された立体形状の表示オブジェクトを2次元平面に投影する。これにより、本変形例4に係る検出範囲表示オブジェクト71は、直方体などの立体形状を有している。なお、立体形状の表示オブジェクトの生成には、3次元グラフィックス機能の代わりに、疑似3次元グラフィックス機能が用いられてもよい。この疑似3次元グラフィックス機能では、2次元グラフィックス機能で生成された複数の平面形状の表示オブジェクトを組み合わせることによって、立体形状の表示オブジェクトが生成される。すなわち、実施の形態2では2次元表示機能を有する表示装置が2次元表示を行う構成について説明したが、本変形例4では2次元表示機能を有する表示装置が、見かけ上の3次元表示(3D表示ともいう)を行うように構成されている。
図21に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の一部である隠れ線71aを破線で表示する。図22に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の隠れ線71aの表示を停止する。
図23に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の隠れ線71aを実線で表示する。図24に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の隠れ線71aの表示を停止する。
以上のような本変形例4では、表示オブジェクトの表示態様を異ならせる制御は、表示オブジェクトの形状を異ならせる制御を含む。また、表示オブジェクトの表示態様を異ならせる制御は、指示体表示オブジェクト72の表示態様を異ならせずに、検出範囲表示オブジェクト71の表示態様を異ならせる制御を含む。このような構成であっても、実施の形態2と同様の効果を得ることができる。
<実施の形態2の変形例5>
図25~図28は、本変形例5に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図25~図28は、本変形例5に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例5に係る検出範囲表示オブジェクト71は、変形例4(図21~図24)と同様に立体形状を有している。また、本変形例5では、表示オブジェクトの表示態様を異ならせる制御は、検出範囲表示オブジェクト71及び指示体表示オブジェクト72の表示態様を異ならせる制御を含む。
図25に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトから変更せずに、検出範囲表示オブジェクト71の奥側の面の色調をデフォルトから変更する。図26に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトから変更せずに、検出範囲表示オブジェクト71の全ての面の色調をデフォルトから変更する。
図27に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の奥側の面の色調、及び、指示体表示オブジェクト72の少なくとも一部の色調をデフォルトから変更する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図28に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトから変更せずに、検出範囲表示オブジェクト71の全ての面の色調をデフォルトから変更する。
以上のような本変形例5では、表示オブジェクトの表示態様を異ならせる制御は、検出範囲表示オブジェクト71及び指示体表示オブジェクト72の表示態様を異ならせる制御を含む。このような構成であっても、実施の形態2と同様の効果を得ることができる。
<実施の形態2の変形例6>
図29~図32は、本変形例6に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図29~図32は、本変形例6に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例6に係る検出範囲表示オブジェクト71は、変形例4(図21~図24)と同様に立体形状を有しており、本変形例6に係る表示オブジェクトは、変形例3で説明した検出範囲補助表示オブジェクト74を含む。また、本変形例6では、表示オブジェクトの表示態様を異ならせる制御は、指示体表示オブジェクト72及び検出範囲補助表示オブジェクト74の表示態様を異ならせる制御を含む。
図29に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、検出範囲補助表示オブジェクト74の形状及び色調をデフォルトから変更せずに、指示体表示オブジェクト72の色調をデフォルトから変更する。図30に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調、並びに、検出範囲補助表示オブジェクト74の形状及び色調をデフォルトから変更しない。
図31に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の少なくとも一部の色調、並びに、検出範囲補助表示オブジェクト74の形状及び色調をデフォルトから変更する。変更後の検出範囲補助表示オブジェクト74の色調は例えば白塗りである。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図32に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調、並びに、検出範囲補助表示オブジェクト74の形状及び色調をデフォルトから変更しない。
以上のような本変形例6では、表示オブジェクトの表示態様を異ならせる制御は、指示体表示オブジェクト72及び検出範囲補助表示オブジェクト74の表示態様を異ならせる制御を含む。このような構成であっても、実施の形態2と同様の効果を得ることができる。
<実施の形態2の変形例7>
図33~図36は、本変形例7に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図33~図36は、本変形例7に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例7に係る検出範囲表示オブジェクト71は、変形例4(図21~図24)と同様に立体形状を有している。本変形例7では、表示オブジェクトの表示態様を異ならせる制御は、検出範囲表示オブジェクト71の表示態様を異ならせずに、指示体表示オブジェクト72の表示態様を異ならせる制御を含む。つまり、実施の形態2において図4~図7を用いて説明した制御と同様の制御が行われる。
なお、指示体表示オブジェクト72の表示態様を異ならせる制御は、指示体表示オブジェクト72の色調を異ならせる制御に限ったものではなく、例えば、指示体表示オブジェクト72の大きさを異ならせる制御であってもよい。具体的には、生成制御部12aは、指示体が手前検出範囲内に位置する場合には、指示体表示オブジェクト72をデフォルトから大きくし、指示体が奥検出範囲内に位置する場合には、指示体表示オブジェクト72をデフォルトから小さくしてもよい。このような構成によれば、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかを、遠近法によってユーザに表示することができる。
<実施の形態2の変形例8>
図37~図40は、本変形例8に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図37~図40は、本変形例8に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例8では、表示オブジェクトの形状を異ならせる制御は、表示オブジェクトの形状を、平面形状及び立体形状のいずれかに変更する制御と、表示オブジェクトの色調を変更する制御とを含む。
図37に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、検出範囲表示オブジェクト71の形状を平面形状に変更し、指示体表示オブジェクト72の色調をデフォルトから変更する。図38に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトから変更せずに、検出範囲表示オブジェクト71の形状を立体形状に変更する。
図39に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の少なくとも一部の色調をデフォルトから変更し、検出範囲表示オブジェクト71の形状を立体形状に変更する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図40に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の色調をデフォルトから変更せずに、検出範囲表示オブジェクト71の形状を平面形状に変更する。
以上のような本変形例8では、表示オブジェクトの形状を異ならせる制御は、表示オブジェクトの形状を、平面形状及び立体形状のいずれかに変更する制御を含む。このような構成であっても、実施の形態2と同様の効果を得ることができる。なお、以上の説明では、表示オブジェクトの形状を異ならせる制御は、表示オブジェクトの形状を、平面形状及び立体形状のいずれかに変更する制御と、表示オブジェクトの色調を変更する制御とを含んでいたが、前者の制御だけを含んでもよい。
また、表示オブジェクトの形状を、平面形状及び立体形状のいずれかに変更する制御は、上記に限ったものではない。例えば上記の説明において、平面形状と立体形状とを入れ替えた制御であってもよい。また、以上の説明では、平面形状及び立体形状のいずれかに変更される表示オブジェクトは、検出範囲表示オブジェクト71であったが、指示体表示オブジェクト72であってもよい。
<実施の形態2の変形例9>
図41~図44は、本変形例9に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
図41~図44は、本変形例9に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを、図4~図7と同様に示す図である。
本変形例9に係る検出範囲表示オブジェクト71は、変形例4(図21~図24)と同様に立体形状を有しており、本変形例9に係る表示オブジェクトは、変形例1(図9~図12)と同様に、検出範囲と指示体との間の距離を示す補助表示オブジェクト73をさらに含む。
本変形例9に係る補助表示オブジェクト73は、二つの円形状表示オブジェクト73c,73dと線状表示オブジェクト73eとを適宜組み合わせた表示オブジェクトである。円形状表示オブジェクト73cは、検出範囲表示オブジェクト71の手前側の面上に付加され、円形状表示オブジェクト73dは、検出範囲表示オブジェクト71の奥側の面上に付加される。円形状表示オブジェクト73c,73dと指示体表示オブジェクト72との間の距離は、検出範囲と指示体との間の距離に対応するように、これらの位置は適宜調整される。
線状表示オブジェクト73bは、二つの円形状表示オブジェクト73c,73dと指示体表示オブジェクト72とを結び、図2のZ軸に平行に延在する表示オブジェクトである。なお、二つの円形状表示オブジェクト73c,73dの間の線状の部分は、線状表示オブジェクト73bの他の部分と異なる色調で表示されてもよい。
図41に示すように、指示体が検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示し、指示体表示オブジェクト72の色調をデフォルトから変更し、指示体表示オブジェクト72を円形状表示オブジェクト73c,73dの間に表示する。図42に示すように、指示体が手前検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示し、指示体表示オブジェクト72の色調をデフォルトから変更せずに、指示体表示オブジェクト72を円形状表示オブジェクト73cよりも手前に表示する。
図43に示すように、指示体が奥検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示し、指示体表示オブジェクト72の色調をデフォルトから変更せずに、指示体表示オブジェクト72を円形状表示オブジェクト73dよりも奥前に表示する。図44に示すように、指示体が横検出範囲内に位置する場合には、生成制御部12aは、補助表示オブジェクト73を表示することも、指示体表示オブジェクト72の色調をデフォルトから変更することも行わない。
以上のような、補助表示オブジェクト73を表示する本変形例9によれば、ユーザは、指示体が検出範囲からどれぐらい離れているかを知ることができるので、検出範囲内でジェスチャー操作を容易に行うことができる。
なお、図41~図44では、本変形例9に係る検出範囲表示オブジェクト71は、直方体などの立体形状を有していたが、図45に示すように矩形状などの平面形状であってもよい。また、図45の検出範囲表示オブジェクト71は、図41~図44の検出範囲表示オブジェクト71内の位置、例えばZ軸方向において中央の位置に表示されてもよい。
<実施の形態2の変形例10>
図46及び図47は、本変形例10に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを示す図である。
図46及び図47は、本変形例10に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを示す図である。
本変形例10では、検出範囲は第1検出範囲及び第2検出範囲を含み、空間操作取得部11aは、第1検出範囲及び第2検出範囲のうち指示体が位置する範囲を取得する。検出範囲表示オブジェクト71は、第1検出範囲を示す第1検出範囲表示オブジェクト71bと、第2検出範囲を示す第2検出範囲表示オブジェクト71cとを含む。そして、生成制御部12aは、第1検出範囲及び第2検出範囲のうち、空間操作取得部11aで取得された範囲に基づいて、表示オブジェクトの表示を異ならせる。
例えば、図46に示すように、指示体が第1検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72及び第1検出範囲表示オブジェクト71bの色調をデフォルトから第1色調に変更する。図47に示すように、指示体が第2検出範囲内に位置する場合には、生成制御部12aは、指示体表示オブジェクト72及び第2検出範囲表示オブジェクト71cの色調をデフォルトから第2色調に変更する。このような構成によれば、ユーザは、検出範囲内の複数の範囲のそれぞれにおいて異なるジェスチャー操作を行うことができるので、操作性を高めることができる。
なお、図46及び図47では、第1検出範囲及び第2検出範囲は、検出範囲をZ軸方向に区分した範囲であったが、これに限ったものではない。例えば、図48及び図49に示すように、第1検出範囲及び第2検出範囲は入れ子状の範囲であってもよい。このとき、ジェスチャー操作が多少大きくなっても指示体が第1検出範囲からはみ出さないようにするために、第2検出範囲にマージンが取られた範囲を第1検出範囲としてもよい。例えば、第2検出範囲は第1検出範囲を縦、横及び高さの方向に5cmずつ狭めた範囲としてもよい。また、検出範囲を区分してなる範囲の数は、2つに限ったものではなく、3つ以上であってもよい。さらに、第1検出範囲表示オブジェクト71b及び第2検出範囲表示オブジェクト71cの形状は立体形状に限ったものではなく、平面形状であってもよい。
<実施の形態3>
図50は、本発明の実施の形態3に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態3に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図50は、本発明の実施の形態3に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態3に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
本実施の形態3では、投影表示装置51aに表示させるべき情報が、車載情報システム53から生成制御部12aに出力される。生成制御部12aは、車載情報システム53からの情報も考慮して、生成部12bで生成される表示オブジェクトを決定する。
図51は、本実施の形態3に係る表示制御装置1の表示制御による投影表示装置51aの表示例を示す図である。図51では、モード表示オブジェクト75と、操作表示オブジェクト76とが表示されている。モード表示オブジェクト75は、車載情報システム53が行っている動作モード(図51ではラジオ動作)を示し、操作表示オブジェクト76は、車載情報システム53が受け付け可能なジェスチャー操作を示す。なお、車載情報システム53が受け付け可能なジェスチャー操作は、動作モードによって異なってもよい。モード表示オブジェクト75及び操作表示オブジェクト76の決定及び生成は、検出範囲表示オブジェクト71などと同様に生成制御部12a及び生成部12bによって行われる。
以上のような本実施の形態3に係る表示制御装置1によれば、例えば、車載情報システム53の現在のステータスや、車載情報システム53が受け付け可能なジェスチャー操作などを投影表示装置51aに表示することができる。
<実施の形態3の変形例1>
図52は、本変形例1に係る表示制御装置1の構成を示すブロック図である。本変形例1では、車載情報システム53が受け付け可能なジェスチャー操作が、車載情報システム53から空間操作検出装置52に出力される。空間操作検出装置52は、車載情報システム53から出力されたジェスチャー操作と異なるジェスチャー操作の検出を無効にする。
図52は、本変形例1に係る表示制御装置1の構成を示すブロック図である。本変形例1では、車載情報システム53が受け付け可能なジェスチャー操作が、車載情報システム53から空間操作検出装置52に出力される。空間操作検出装置52は、車載情報システム53から出力されたジェスチャー操作と異なるジェスチャー操作の検出を無効にする。
このような構成によれば、空間操作検出装置52が必要以上にジェスチャー操作を検出することが抑制されるので、空間操作検出装置52の処理負荷を低減することができる。なお、空間操作検出装置52は、車載情報システム53から出力されたジェスチャー操作に基づいて、検出範囲、手前検出範囲、奥検出範囲、及び、横検出範囲の少なくともいずれかの形状を変更してもよい。そして、この変更に合わせて、生成制御部12aは表示オブジェクトの形状を変更してもよい。
<実施の形態3の変形例2>
図53は、本変形例2に係る表示制御装置1の構成を示すブロック図である。図53に示すように、表示制御装置1は車載情報システム53を含み、車載情報システム53は、車両とともに移動可能な第2表示装置である表示装置54を制御可能となっている。このような構成において、車載情報システム53を含む表示制御装置1は、例えば、選局や音量など、ジェスチャー操作によって実行される内容を表示装置54に表示させてもよい。
図53は、本変形例2に係る表示制御装置1の構成を示すブロック図である。図53に示すように、表示制御装置1は車載情報システム53を含み、車載情報システム53は、車両とともに移動可能な第2表示装置である表示装置54を制御可能となっている。このような構成において、車載情報システム53を含む表示制御装置1は、例えば、選局や音量など、ジェスチャー操作によって実行される内容を表示装置54に表示させてもよい。
<実施の形態3の変形例3>
図54は、本変形例3に係る表示制御装置1の表示制御による投影表示装置51aの表示例を示す図である。以上の説明では、検出範囲及び検出範囲表示オブジェクト71のそれぞれの数は1つであったが、本変形例3では、検出範囲及び検出範囲表示オブジェクト71m,71nのそれぞれの数は複数となっている。以下、ラジオが配設されたパネル面の近傍にラジオ用の検出範囲が設けられ、エアコンが配設されたパネル面の近傍にエアコン用の検出範囲が設けられている構成を例にして説明する。
図54は、本変形例3に係る表示制御装置1の表示制御による投影表示装置51aの表示例を示す図である。以上の説明では、検出範囲及び検出範囲表示オブジェクト71のそれぞれの数は1つであったが、本変形例3では、検出範囲及び検出範囲表示オブジェクト71m,71nのそれぞれの数は複数となっている。以下、ラジオが配設されたパネル面の近傍にラジオ用の検出範囲が設けられ、エアコンが配設されたパネル面の近傍にエアコン用の検出範囲が設けられている構成を例にして説明する。
図54に示すように、本変形例3に係る表示オブジェクトは、ラジオ用の検出範囲を示す検出範囲表示オブジェクト71mと、エアコン用の検出範囲を示す検出範囲表示オブジェクト71nとを含む。このような構成によれば、ラジオ用の検出範囲とエアコン用の検出範囲とが異なること、及び、これらの位置関係を、検出範囲表示オブジェクト71m,71nによって表示する。このため、ユーザは、ラジオ用の検出範囲とエアコン用の検出範囲のそれぞれにおいて適切なジェスチャー操作を行うことができる。
<実施の形態4>
図55は、本発明の実施の形態4に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態4に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図55は、本発明の実施の形態4に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態4に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図55の表示制御装置1は、投影表示装置51aの代わりに、立体表示装置51bが接続されている。立体表示装置51bには、例えば、虚像の表示オブジェクトを表示することによって、表示オブジェクトの立体表示が可能なHUDが用いられる。このようなHUDによれば、表示オブジェクトがあたかも現実世界の3次元空間に実在するようにユーザに視認され、図2のZ軸方向(奥行き方向)の表示オブジェクトの位置、つまり表示オブジェクトの遠近がユーザに知覚される。
図56は、本実施の形態4に係る表示制御装置1の表示制御によって立体表示装置51bが表示する表示オブジェクトを示す図である。本実施の形態4では、一つの表示オブジェクト上の複数の点とユーザ31との間の距離が全て同じであるHUDが、立体表示装置51bに用いられている。なお、表示オブジェクトとユーザ31との間の距離とは、現実の表示オブジェクトの位置(車両のウインドシールド上の位置)とユーザ31との間の距離ではなく、表示オブジェクトの立体空間上の位置とユーザ31との間の距離、つまり虚像距離を意味する。上記のようなHUDでは、立体表示装置51bの立体表示で実現される3次元空間において平面形状の表示オブジェクトが立体表示される。このため、図56の検出範囲表示オブジェクト71及び指示体表示オブジェクト72は、当該3次元空間において平面形状を有することになる。
以下、立体表示装置51bで立体表示される検出範囲表示オブジェクト71とユーザ31との間の距離を「検出範囲距離」と記すこともあり、立体表示装置51bで立体表示される指示体表示オブジェクト72とユーザ31との間の距離を「指示体距離」と記すこともある。本実施の形態4では、表示オブジェクトの表示を異ならせる制御は、検出範囲距離を基準にして、指示体距離を変更する制御を含む。
例えば、指示体が検出範囲内に位置する場合には、生成制御部12aは、検出範囲距離と指示体距離とを同一にする(指示体距離=中)。指示体が手前検出範囲内に位置する場合には、生成制御部12aは、検出範囲距離よりも指示体距離を小さくする(指示体距離=近)。指示体が奥検出範囲内に位置する場合には、生成制御部12aは、検出範囲距離よりも指示体距離を大きくする(指示体距離=遠)。指示体が横検出範囲内に位置する場合には、生成制御部12aは、検出範囲距離と指示体距離とを同一にする(指示体距離=中)。
<実施の形態4のまとめ>
以上のような本実施の形態4に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち指示体が位置する範囲に基づいて、立体表示装置51bで立体表示される指示体表示オブジェクト72とユーザとの間の距離を変更する。このような構成によれば、実施の形態2のように表示オブジェクトの色調や形状などの表示態様を変更しなくても、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。
以上のような本実施の形態4に係る表示制御装置1によれば、検出範囲、手前検出範囲、及び、奥検出範囲のうち指示体が位置する範囲に基づいて、立体表示装置51bで立体表示される指示体表示オブジェクト72とユーザとの間の距離を変更する。このような構成によれば、実施の形態2のように表示オブジェクトの色調や形状などの表示態様を変更しなくても、指示体が、検出範囲、手前検出範囲、及び、奥検出範囲のうちのどの範囲に位置するかをユーザに表示することができる。
<実施の形態4の変形例1>
図57は、本変形例1に係る表示制御装置1の表示制御によって立体表示装置51bが表示する表示オブジェクトを示す図である。実施の形態4では、立体表示装置51bに、一つの表示オブジェクト上の複数の点とユーザ31との間の距離が全て同じであるHUDが用いられた。これに対して本変形例1では、立体表示装置51bに、一つの表示オブジェクト上の複数の点とユーザ31との間の距離が異なるHUDが用いられる。
図57は、本変形例1に係る表示制御装置1の表示制御によって立体表示装置51bが表示する表示オブジェクトを示す図である。実施の形態4では、立体表示装置51bに、一つの表示オブジェクト上の複数の点とユーザ31との間の距離が全て同じであるHUDが用いられた。これに対して本変形例1では、立体表示装置51bに、一つの表示オブジェクト上の複数の点とユーザ31との間の距離が異なるHUDが用いられる。
このようなHUDでは、立体表示装置51bの立体表示で実現される3次元空間において立体形状の表示オブジェクトが立体表示される。このため、図57の検出範囲表示オブジェクト71及び指示体表示オブジェクト72は、当該3次元空間において立体形状を有することになる。このような構成によれば、現実世界の3次元空間にさらに近づけた表示を行うことができる。
<実施の形態4の変形例2>
以上の説明では、生成制御部12aは指示体距離を3段階(遠、中、近)で制御した。しかしながらこれに限ったものではなく、指示体距離を4段階以上で変更してもよい。また、指示体距離が概ね連続する構成において、検出範囲表示オブジェクト71と指示体表示オブジェクト72との間の距離を、検出範囲と指示体との間の距離に対応させてもよい。
以上の説明では、生成制御部12aは指示体距離を3段階(遠、中、近)で制御した。しかしながらこれに限ったものではなく、指示体距離を4段階以上で変更してもよい。また、指示体距離が概ね連続する構成において、検出範囲表示オブジェクト71と指示体表示オブジェクト72との間の距離を、検出範囲と指示体との間の距離に対応させてもよい。
<実施の形態4の変形例3>
以上の説明では、立体表示装置51bには、表示オブジェクトの立体表示が可能なHUDが用いられたが、これに限ったものではない。例えば、立体表示装置51bには、立体表示が可能な裸眼立体視表示機能を有する表示装置が用いられてもよい。この表示装置は、例えば、立体表示が可能な液晶表示装置、光源や元となる映像をミラー素子を通して空間に浮かび上がらせることが可能な空中ディスプレイ装置、及び、ホログラフィを用いた表示装置などである。このような構成であっても、実施の形態4と同様の効果を得ることができる。
以上の説明では、立体表示装置51bには、表示オブジェクトの立体表示が可能なHUDが用いられたが、これに限ったものではない。例えば、立体表示装置51bには、立体表示が可能な裸眼立体視表示機能を有する表示装置が用いられてもよい。この表示装置は、例えば、立体表示が可能な液晶表示装置、光源や元となる映像をミラー素子を通して空間に浮かび上がらせることが可能な空中ディスプレイ装置、及び、ホログラフィを用いた表示装置などである。このような構成であっても、実施の形態4と同様の効果を得ることができる。
<実施の形態4の変形例4>
実施の形態4においても、各実施の形態及びその各変形例が適宜組み合わされてもよい。例えば、実施の形態4に係る表示オブジェクトは、実施の形態2の変形例1などで説明した図9などの補助表示オブジェクト73を含んでもよい。
実施の形態4においても、各実施の形態及びその各変形例が適宜組み合わされてもよい。例えば、実施の形態4に係る表示オブジェクトは、実施の形態2の変形例1などで説明した図9などの補助表示オブジェクト73を含んでもよい。
<実施の形態5>
図58は、本発明の実施の形態5に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態5に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図58は、本発明の実施の形態5に係る表示制御装置1の構成を示すブロック図である。以下、本実施の形態5に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じまたは類似する参照符号を付し、異なる構成要素について主に説明する。
図58の表示制御装置1は記憶部13をさらに備える。この記憶部13は、車両内の予め定められた装置の配置(3次元位置)を記憶している。予め定められた装置には、例えば、車両内の内装及び機器などが含まれる。
生成制御部12aは、記憶部13に記憶された3次元位置に基づいて忌避範囲を設定する。忌避範囲は、検出範囲の周辺、かつ、予め定められた装置の周辺の予め定められた空間であり、例えば、指示体が存在することが適切でない範囲が設定される。
図59は、忌避範囲64を示す上面図である。忌避範囲64には、例えば、予め定められた装置66からX軸方向に長さXth(例えば5cm)、Z軸方向に長さZth(例えば5cm)だけ離れた位置までの範囲が用いられる。なお図示しないが、忌避範囲64には、装置66からY軸方向に長さYth(例えば5cm)だけ離れた位置と、装置66との間の範囲が用いられてもよい。
空間操作検出装置52は、検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、忌避範囲64のうち、指示体が位置する範囲を検出する。これにより、空間操作取得部11aも同様に、検出範囲、手前検出範囲、奥検出範囲、横検出範囲、及び、忌避範囲64のうち、指示体が位置する範囲を取得する。
図60及び図61は、本実施の形態5に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを示す図である。
図60に示すように、指示体が忌避範囲64でない範囲、例えば奥検出範囲に位置する場合には、生成制御部12aは、指示体表示オブジェクト72の少なくとも一部の色調を、デフォルトから変更する。またこの場合には、生成制御部12aは、指示体表示オブジェクト72を半透過または破線で表示する。図61に示すように、指示体が忌避範囲64内に位置する場合には、生成制御部12aは、忌避範囲64を示す暗い色調の忌避範囲表示オブジェクト77を表示する。なお、忌避範囲表示オブジェクト77の決定及び生成は、検出範囲表示オブジェクト71などと同様に生成制御部12a及び生成部12bによって行われる。
このように本実施の形態5では、生成制御部12aは、空間操作取得部11aで取得された範囲が忌避範囲64であるか否かに基づいて、忌避範囲表示オブジェクト77の表示及び非表示を切り替える制御を行う。
<実施の形態5のまとめ>
以上のような本実施の形態5に係る表示制御装置1によれば、ユーザが忌避範囲表示オブジェクト77を確認することにより、指示体が、予め定められた装置66の周辺に侵入してしまうことを抑制することができる。なお、忌避範囲表示オブジェクト77は、例えば、図15の補助表示オブジェクト73のように、指示体表示オブジェクト72と同様の形状を有し、かつ、暗い色調を有してもよい。
以上のような本実施の形態5に係る表示制御装置1によれば、ユーザが忌避範囲表示オブジェクト77を確認することにより、指示体が、予め定められた装置66の周辺に侵入してしまうことを抑制することができる。なお、忌避範囲表示オブジェクト77は、例えば、図15の補助表示オブジェクト73のように、指示体表示オブジェクト72と同様の形状を有し、かつ、暗い色調を有してもよい。
<実施の形態5の変形例1>
図60及び図61の忌避範囲表示オブジェクト77は、平面形状を有していたが、これに限ったものではない。例えば、図62に示すように、忌避範囲表示オブジェクト77は、立体形状を有していてもよい。
図60及び図61の忌避範囲表示オブジェクト77は、平面形状を有していたが、これに限ったものではない。例えば、図62に示すように、忌避範囲表示オブジェクト77は、立体形状を有していてもよい。
また、実施の形態5においても、各実施の形態及びその各変形例が適宜組み合わされてもよい。例えば、実施の形態5に係る検出範囲表示オブジェクト71は、実施の形態2の変形例4(図21~図24)のような立体形状を有してもよい。また、実施の形態4と同様に虚像の忌避範囲表示オブジェクト77が立体表示されてもよい。
<実施の形態5の変形例2>
本変形例2では、予め定められた装置66(図59)は、指示体が接触した場合に不都合が生じるような、車両とともに移動可能な接触型の操作入力装置を含む。この操作入力装置には、例えば、ボタン及びスイッチ類が存在するパネル装置、タッチパネル、タッチパッドなどが含まれる。
本変形例2では、予め定められた装置66(図59)は、指示体が接触した場合に不都合が生じるような、車両とともに移動可能な接触型の操作入力装置を含む。この操作入力装置には、例えば、ボタン及びスイッチ類が存在するパネル装置、タッチパネル、タッチパッドなどが含まれる。
図63は、本変形例2に係る表示制御装置1の表示制御によって投影表示装置51aの表示画面60に表示される表示オブジェクトを示す図である。図63に示すように、指示体が忌避範囲64内に位置する場合に、生成制御部12aは、操作入力装置周辺の範囲の表示態様とそれ以外の範囲の表示態様とが異なる忌避範囲表示オブジェクト77を表示する。なお、図63にてドットハッチングが付されていない範囲は、操作入力装置周辺の範囲である。
このような構成によれば、指示体が、操作入力装置の周辺に侵入してしまうことを抑制することができる。なお、空間操作取得部11aで取得された範囲が、忌避範囲64のうちの操作入力装置周辺の範囲である場合に、生成制御部12aは、忌避範囲表示オブジェクト77のうち当該範囲に対応する部分の表示態様を変更してもよい。同様に、空間操作取得部11aで取得された範囲が、忌避範囲64のうちの操作入力装置周辺の範囲以外の範囲である場合に、生成制御部12aは、忌避範囲表示オブジェクト77のうち当該範囲に対応する部分の表示態様を変更してもよい。また、忌避範囲64のうちの操作入力装置周辺の範囲は、忌避範囲64のうちのそれ以外の範囲よりも広くなるように設定されてもよい。
<その他の変形例1>
図64は、実施の形態2に係る検出範囲21を手前から奥に向かう方向(図2の-Z方向)に沿って見た図であり、図65は、実施の形態2に係る検出範囲21を上方から下方に向かう方向(図2の-Y方向)に沿って見た図である。図64及び図65に示される検出範囲21、手前検出範囲22、奥検出範囲23、及び、横検出範囲24は、上式(1)~(4)で規定される範囲である。なお、図64及び図65には、実施の形態2で説明した周辺範囲25も図示されている。
図64は、実施の形態2に係る検出範囲21を手前から奥に向かう方向(図2の-Z方向)に沿って見た図であり、図65は、実施の形態2に係る検出範囲21を上方から下方に向かう方向(図2の-Y方向)に沿って見た図である。図64及び図65に示される検出範囲21、手前検出範囲22、奥検出範囲23、及び、横検出範囲24は、上式(1)~(4)で規定される範囲である。なお、図64及び図65には、実施の形態2で説明した周辺範囲25も図示されている。
ここで、検出範囲21、手前検出範囲22、奥検出範囲23、及び、横検出範囲24は、図64に示される範囲、ひいては上式(1)~(4)で規定される範囲に限ったものではない。例えば図66に示すように、例えば横検出範囲24は、空間操作検出装置52が指示体の位置を検出可能な円筒形や楕円筒形などの範囲から、検出範囲21をくり抜いた範囲であってもよい。なお、上方から下方に向かう方向(図2の-Y方向)に沿って見た場合の図66の検出範囲21及び横検出範囲24などの各範囲は、図65の各範囲と同じであってもよいし、異なっていてもよい。また、横検出範囲24は、上式(4)を満たすのであれば、円筒形や楕円筒形以外の任意の範囲でもよい。また、横検出範囲24は、Zd2≧Zp4≧Zd1の条件を満たせば、球体や楕円体の範囲から検出範囲21をくり抜いた範囲であってもよい。また、検出範囲21は、球体や楕円体の範囲であってもよい。
<その他の変形例2>
実施の形態2では、図64のように、手前検出範囲22または奥検出範囲23を、手前から奥に向かう方向(図2の-Z方向)に沿って見た場合に検出範囲21からはみ出さない範囲である例について説明した。詳しくは、当該方向に沿って見た場合に、検出範囲21、手前検出範囲22及び奥検出範囲23の外郭形状が同一である例について説明した。しかしながら、検出範囲21、手前検出範囲22及び奥検出範囲23の外郭形状は異なっていてもよい。
実施の形態2では、図64のように、手前検出範囲22または奥検出範囲23を、手前から奥に向かう方向(図2の-Z方向)に沿って見た場合に検出範囲21からはみ出さない範囲である例について説明した。詳しくは、当該方向に沿って見た場合に、検出範囲21、手前検出範囲22及び奥検出範囲23の外郭形状が同一である例について説明した。しかしながら、検出範囲21、手前検出範囲22及び奥検出範囲23の外郭形状は異なっていてもよい。
図67及び図68は、本変形例2に係る検出範囲21を図64及び図65と同様の方向からそれぞれ見た図である。図67において、手前検出範囲22または奥検出範囲23のうち、検出範囲21と重複するエリアを第1エリアとし、重複しないエリアを第2エリアと定義する。
まず、本変形例2を、実施の形態2の変形例1に適用した例について説明する。この場合、本変形例2では、指示体が第2エリアに位置する場合に、図9~12に示される実施の形態2の変形例1の表示と異なる表示を行う。例えば、指示体が手前検出範囲22の第1エリアに位置する場合には、図10と同様の表示が行われ、指示体が手前検出範囲22の第2エリアに位置する場合には、図69のような表示が行われる。また例えば、指示体が奥前検出範囲23の第1エリアに位置する場合には、図11と同様の表示が行われ、指示体が奥前検出範囲23の第2エリアに位置する場合には、図70のような表示が行われる。
次に、本変形例2を、実施の形態2の変形例5に適用した例について説明する。この場合、本変形例2では、指示体が第2エリアに位置する場合に、図25~28に示される実施の形態2の変形例1の表示と異なる表示を行う。
例えば図71に示すように、指示体が手前検出範囲22の第2エリアに位置する場合には、直方体である検出範囲表示オブジェクト71の手前の面(図71の密度が高いドットハッチングが付された面)を拡張してなる、第2エリアを示す表示オブジェクト78を追加する。この際、指示体表示オブジェクト72の色調をデフォルトから変更しない。一方、例えば図72に示すように、指示体が奥検出範囲23の第2エリアに位置する場合には、直方体である検出範囲表示オブジェクト71の奥の面(図72の密度が高いドットハッチングが付された面)を拡張してなる、第2エリアを示す表示オブジェクト78を追加する。この際、指示体表示オブジェクト72の少なくとも一部の色調をデフォルトから変更する。
なお、図67では、横検出範囲24の外郭形状と、手前検出範囲22または奥検出範囲23の外郭形状を同一としたが、異なっていてもよい。また、手前検出範囲22の外郭形状と奥検出範囲23の外郭形状とが異なっていてもよい。また、手前検出範囲22及び奥検出範囲23は直方体の範囲に限るものではなく、楕円体の範囲から検出範囲21及び横検出範囲24をくり抜いた範囲でもよい。
<その他の変形例3>
上述した図1の取得部11及び制御部12を、以下「取得部11等」と記す。取得部11等は、図73に示す処理回路81により実現される。すなわち、処理回路81は、検出範囲と手前検出範囲と奥検出範囲とのうち、指示体が位置する範囲を取得する取得部11と、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得部11で取得された範囲に基づいて、検出範囲表示オブジェクト及び指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う制御部12と、を備える。処理回路81には、専用のハードウェアが適用されてもよいし、メモリに格納されるプログラムを実行するプロセッサが適用されてもよい。プロセッサには、例えば、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、DSP(Digital Signal Processor)などが該当する。
上述した図1の取得部11及び制御部12を、以下「取得部11等」と記す。取得部11等は、図73に示す処理回路81により実現される。すなわち、処理回路81は、検出範囲と手前検出範囲と奥検出範囲とのうち、指示体が位置する範囲を取得する取得部11と、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得部11で取得された範囲に基づいて、検出範囲表示オブジェクト及び指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う制御部12と、を備える。処理回路81には、専用のハードウェアが適用されてもよいし、メモリに格納されるプログラムを実行するプロセッサが適用されてもよい。プロセッサには、例えば、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、DSP(Digital Signal Processor)などが該当する。
処理回路81が専用のハードウェアである場合、処理回路81は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field Programmable Gate Array)、またはこれらを組み合わせたものが該当する。取得部11等の各部の機能それぞれは、処理回路を分散させた回路で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。
処理回路81がプロセッサである場合、取得部11等の機能は、ソフトウェア等との組み合わせにより実現される。なお、ソフトウェア等には、例えば、ソフトウェア、ファームウェア、または、ソフトウェア及びファームウェアが該当する。ソフトウェア等はプログラムとして記述され、メモリに格納される。図74に示すように、処理回路81に適用されるプロセッサ82は、メモリ83に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、表示制御装置1は、処理回路81により実行されるときに、検出範囲と手前検出範囲と奥検出範囲とのうち、指示体が位置する範囲を取得するステップと、検出範囲、手前検出範囲、及び、奥検出範囲のうち、取得された範囲に基づいて、検出範囲表示オブジェクト及び指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行うステップと、が結果的に実行されることになるプログラムを格納するためのメモリ83を備える。換言すれば、このプログラムは、取得部11等の手順や方法をコンピュータに実行させるものであるともいえる。ここで、メモリ83は、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read Only Memory)、EEPROM(Electrically Erasable Programmable Read Only Memory)などの、不揮発性または揮発性の半導体メモリ、HDD(Hard Disk Drive)、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、DVD(Digital Versatile Disc)、そのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。
以上、取得部11等の各機能が、ハードウェア及びソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、取得部11等の一部を専用のハードウェアで実現し、別の一部をソフトウェア等で実現する構成であってもよい。例えば、取得部11については専用のハードウェアとしての処理回路81、インターフェース及びレシーバなどでその機能を実現し、それ以外についてはプロセッサ82としての処理回路81がメモリ83に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
以上のように、処理回路81は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。
また、以上で説明した表示制御装置1は、PND(Portable Navigation Device)、ナビゲーション装置及びオーディオ装置などの車両装置と、携帯電話、スマートフォン及びタブレットなどの携帯端末を含む通信端末と、車両装置及び通信端末の少なくとも1つにインストールされるアプリケーションの機能と、サーバとを適宜に組み合わせてシステムとして構築される表示制御システムにも適用することができる。この場合、以上で説明した表示制御装置1の各機能あるいは各構成要素は、前記システムを構築する各機器に分散して配置されてもよいし、いずれかの機器に集中して配置されてもよい。
図75は、本変形例に係るサーバ91の構成を示すブロック図である。図75のサーバ91は、通信部91aと制御部91bとを備えており、車両92のナビゲーション装置及びオーディオ装置などの車両装置93と無線通信を行うことが可能となっている。
取得部である通信部91aは、車両装置93と無線通信を行うことにより、検出範囲と手前検出範囲と奥検出範囲とのうち、車両装置93で取得された範囲を受信する。
制御部91bは、サーバ91の図示しないプロセッサなどが、サーバ91の図示しないメモリに記憶されたプログラムを実行することにより、図1の制御部12と同様の機能を有している。つまり、制御部91bは、検出範囲、手前検出範囲、及び、奥検出範囲のうち、通信部91aで受信された範囲に基づいて、検出範囲表示オブジェクト及び指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行うための制御信号を生成する。そして、通信部91aは、制御部91bで生成された制御信号を車両装置93に送信する。このように構成されたサーバ91によれば、実施の形態1で説明した表示制御装置1と同様の効果を得ることができる。
図76は、本変形例に係る通信端末96の構成を示すブロック図である。図76の通信端末96は、通信部91aと同様の通信部96aと、制御部91bと同様の制御部96bとを備えており、車両97の車両装置98と無線通信を行うことが可能となっている。なお、通信端末96には、例えば車両97の運転者が携帯する携帯電話、スマートフォン、及びタブレットなどの携帯端末が適用される。このように構成された通信端末96によれば、実施の形態1で説明した表示制御装置1と同様の効果を得ることができる。
なお、本発明は、その発明の範囲内において、各実施の形態及び各変形例を自由に組み合わせたり、各実施の形態及び各変形例を適宜、変形、省略したりすることが可能である。
本発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、本発明がそれに限定されるものではない。例示されていない無数の変形例が、本発明の範囲から外れることなく想定され得るものと解される。
1 表示制御装置、11 取得部、12 制御部、51 第1表示装置、64 忌避範囲、71 検出範囲表示オブジェクト、72 指示体表示オブジェクト、73 補助表示オブジェクト、77 忌避範囲表示オブジェクト。
Claims (19)
- 車両とともに移動可能な第1表示装置の表示を制御する表示制御装置であって、
ユーザが指示体によりジェスチャー操作を行うべき予め定められた空間である検出範囲と、前記検出範囲に対して前記ユーザ側の予め定められた空間である手前検出範囲と、前記検出範囲に対して前記手前検出範囲と逆側の予め定められた空間である奥検出範囲とのうち、前記指示体が位置する範囲を取得する取得部と、
前記検出範囲、前記手前検出範囲、及び、前記奥検出範囲のうち、前記取得部で取得された範囲に基づいて、前記検出範囲を示す検出範囲表示オブジェクト、及び、前記指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う制御部と
を備える、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記表示オブジェクトは、疑似3次元グラフィックス機能または3次元グラフィックス機能によって生成された立体形状を有し、前記第1表示装置は2次元表示を実行する、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記表示オブジェクトの表示を異ならせる制御は、前記表示オブジェクトの表示態様を異ならせる制御を含む、表示制御装置。 - 請求項3に記載の表示制御装置であって、
前記表示オブジェクトの表示態様を異ならせる制御は、前記表示オブジェクトの形状を異ならせる制御を含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記検出範囲表示オブジェクトは立体形状を有し、前記第1表示装置は3次元表示を実行する、表示制御装置。 - 請求項3に記載の表示制御装置であって、
前記表示オブジェクトの表示態様を異ならせる制御は、前記指示体表示オブジェクトの表示態様を異ならせずに、前記検出範囲表示オブジェクトの表示態様を異ならせる制御を含む、表示制御装置。 - 請求項3に記載の表示制御装置であって、
前記表示オブジェクトの表示態様を異ならせる制御は、前記検出範囲表示オブジェクトの表示態様を異ならせずに、前記指示体表示オブジェクトの表示態様を異ならせる制御を含む、表示制御装置。 - 請求項3に記載の表示制御装置であって、
前記表示オブジェクトの表示態様を異ならせる制御は、前記検出範囲表示オブジェクト及び前記指示体表示オブジェクトの表示態様を異ならせる制御を含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記取得部は、
前記検出範囲と、前記手前検出範囲と、前記奥検出範囲と、前記手前検出範囲及び前記奥検出範囲以外の、前記検出範囲の横側の予め定められた空間である横検出範囲とのうち、前記指示体が位置する範囲を取得し、
前記制御部は、
前記検出範囲、前記手前検出範囲、前記奥検出範囲、及び、前記横検出範囲のうち、前記取得部で取得された範囲に基づいて、前記表示オブジェクトの表示を異ならせる制御を行う、表示制御装置。 - 請求項4に記載の表示制御装置であって、
前記表示オブジェクトの形状を異ならせる制御は、前記表示オブジェクトの形状を、平面形状及び立体形状のいずれかに変更する制御を含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記表示オブジェクトは、
前記検出範囲と前記指示体との間の距離を示す補助表示オブジェクトをさらに含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記取得部は、
前記検出範囲に含まれる第1検出範囲及び第2検出範囲のうち、前記指示体が位置する範囲を取得し、
前記制御部は、
前記第1検出範囲及び前記第2検出範囲のうち、前記取得部で取得された範囲に基づいて、前記表示オブジェクトの表示を異ならせる、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記取得部は、
前記検出範囲の周辺、かつ、前記車両内の予め定められた装置の周辺の予め定められた空間である忌避範囲において前記指示体を取得し、
前記制御部は、
前記取得部で取得された範囲が前記忌避範囲であるか否かに基づいて、前記忌避範囲を示す忌避範囲表示オブジェクトの表示及び非表示を切り替える制御を行う、表示制御装置。 - 請求項13に記載の表示制御装置であって、
前記予め定められた装置は、前記車両とともに移動可能な接触型の操作入力装置を含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記第1表示装置は、平面表示が可能なヘッドアップディスプレイ、空中ディスプレイ、立体表示が可能なヘッドアップディスプレイ、空中ディスプレイ、または、立体表示が可能な裸眼立体視表示機能を有する表示装置を含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記第1表示装置は、立体表示が可能なヘッドアップディスプレイ、空中ディスプレイ、または、立体表示が可能な裸眼立体視表示機能を有する表示装置を含み、
前記表示オブジェクトの表示を異ならせる制御は、前記第1表示装置で立体表示される前記検出範囲表示オブジェクトと前記ユーザとの間の距離を基準にして、前記第1表示装置で立体表示される前記指示体表示オブジェクトと前記ユーザとの間の距離を変更する制御を含む、表示制御装置。 - 請求項16に記載の表示制御装置であって、
前記ヘッドアップディスプレイは、
一つの前記表示オブジェクト上の複数の点と前記ユーザとの間の距離が全て同じであるヘッドアップディスプレイ、または、一つの前記表示オブジェクト上の複数の点と前記ユーザとの間の距離が異なるヘッドアップディスプレイを含む、表示制御装置。 - 請求項1に記載の表示制御装置であって、
前記表示制御装置は、
車両とともに移動可能な第2表示装置に、前記ジェスチャー操作によって実行される内容を表示させる、表示制御装置。 - 車両とともに移動可能な第1表示装置の表示を制御する表示制御方法であって、
ユーザが指示体によりジェスチャー操作を行うべき予め定められた空間である検出範囲と、前記検出範囲に対して前記ユーザ側の予め定められた空間である手前検出範囲と、前記検出範囲に対して前記手前検出範囲と逆側の予め定められた空間である奥検出範囲とのうち、前記指示体が位置する範囲を取得し、
前記検出範囲、前記手前検出範囲、及び、前記奥検出範囲のうち、取得された範囲に基づいて、前記検出範囲を示す検出範囲表示オブジェクト、及び、前記指示体を示す指示体表示オブジェクトを含む表示オブジェクトの表示を異ならせる制御を行う、表示制御方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021529572A JP7179180B2 (ja) | 2019-07-01 | 2019-07-01 | 表示制御装置及び表示制御方法 |
PCT/JP2019/026145 WO2021001894A1 (ja) | 2019-07-01 | 2019-07-01 | 表示制御装置及び表示制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/026145 WO2021001894A1 (ja) | 2019-07-01 | 2019-07-01 | 表示制御装置及び表示制御方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2021001894A1 true WO2021001894A1 (ja) | 2021-01-07 |
Family
ID=74100537
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2019/026145 WO2021001894A1 (ja) | 2019-07-01 | 2019-07-01 | 表示制御装置及び表示制御方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7179180B2 (ja) |
WO (1) | WO2021001894A1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014026355A (ja) * | 2012-07-25 | 2014-02-06 | Hitachi Consumer Electronics Co Ltd | 映像表示装置および映像表示方法 |
JP2014067388A (ja) * | 2012-09-06 | 2014-04-17 | Toshiba Alpine Automotive Technology Corp | アイコン操作装置 |
WO2015125213A1 (ja) * | 2014-02-18 | 2015-08-27 | 三菱電機株式会社 | 移動体用ジェスチャ誘導装置、移動体用ジェスチャ誘導システムおよび移動体用ジェスチャ誘導方法 |
JP2016110249A (ja) * | 2014-12-03 | 2016-06-20 | 日本ユニシス株式会社 | 空間手書き入力システム、空間手書き入力方法およびコンピュータプログラム |
JP2018005663A (ja) * | 2016-07-05 | 2018-01-11 | 株式会社リコー | 情報処理装置、表示システム、プログラム |
JP2018036902A (ja) * | 2016-08-31 | 2018-03-08 | 島根県 | 機器操作システム、機器操作方法および機器操作プログラム |
-
2019
- 2019-07-01 WO PCT/JP2019/026145 patent/WO2021001894A1/ja active Application Filing
- 2019-07-01 JP JP2021529572A patent/JP7179180B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014026355A (ja) * | 2012-07-25 | 2014-02-06 | Hitachi Consumer Electronics Co Ltd | 映像表示装置および映像表示方法 |
JP2014067388A (ja) * | 2012-09-06 | 2014-04-17 | Toshiba Alpine Automotive Technology Corp | アイコン操作装置 |
WO2015125213A1 (ja) * | 2014-02-18 | 2015-08-27 | 三菱電機株式会社 | 移動体用ジェスチャ誘導装置、移動体用ジェスチャ誘導システムおよび移動体用ジェスチャ誘導方法 |
JP2016110249A (ja) * | 2014-12-03 | 2016-06-20 | 日本ユニシス株式会社 | 空間手書き入力システム、空間手書き入力方法およびコンピュータプログラム |
JP2018005663A (ja) * | 2016-07-05 | 2018-01-11 | 株式会社リコー | 情報処理装置、表示システム、プログラム |
JP2018036902A (ja) * | 2016-08-31 | 2018-03-08 | 島根県 | 機器操作システム、機器操作方法および機器操作プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7179180B2 (ja) | 2022-11-28 |
JPWO2021001894A1 (ja) | 2021-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5355683B2 (ja) | 表示入力装置および車載情報機器 | |
US9961259B2 (en) | Image generation device, image display system, image generation method and image display method | |
JP5933824B2 (ja) | 車両用電子装置 | |
US9489500B2 (en) | Manipulation apparatus | |
CA2730379C (en) | Vehicle user interface unit for a vehicle electronic device | |
JP5052677B2 (ja) | 表示入力装置 | |
JP5781080B2 (ja) | 3次元立体表示装置および3次元立体表示処理装置 | |
JP6244822B2 (ja) | 車載用表示システム | |
WO2016143613A1 (ja) | ミラー、車載操作装置、および車両 | |
US10712822B2 (en) | Input system for determining position on screen of display device, detection device, control device, storage medium, and method | |
US20180275414A1 (en) | Display device and display method | |
JP2016024751A (ja) | 画像表示装置 | |
JP2019175449A (ja) | 情報処理装置、情報処理システム、移動体、情報処理方法、及びプログラム | |
JP2015047885A (ja) | 車両搭載インタラクティブシステム | |
JP6858352B2 (ja) | 画像投影装置 | |
JP5067576B2 (ja) | 表示制御システム、表示制御方法、及び表示制御プログラム | |
CN113590070A (zh) | 导航界面的显示方法、装置、终端及存储介质 | |
JP6033465B2 (ja) | 表示制御装置 | |
WO2021001894A1 (ja) | 表示制御装置及び表示制御方法 | |
WO2013111280A1 (ja) | 表示装置及び表示方法 | |
JP6149825B2 (ja) | 車両用操作装置 | |
JP2013224050A (ja) | 車両用表示装置 | |
JP2015225570A (ja) | 操作装置 | |
JPWO2015083264A1 (ja) | 表示制御装置及び表示制御方法 | |
JP6180306B2 (ja) | 表示制御装置及び表示制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19936044 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021529572 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 19936044 Country of ref document: EP Kind code of ref document: A1 |