WO2019159818A1 - 電子機器、移動体、プログラムおよび制御方法 - Google Patents

電子機器、移動体、プログラムおよび制御方法 Download PDF

Info

Publication number
WO2019159818A1
WO2019159818A1 PCT/JP2019/004489 JP2019004489W WO2019159818A1 WO 2019159818 A1 WO2019159818 A1 WO 2019159818A1 JP 2019004489 W JP2019004489 W JP 2019004489W WO 2019159818 A1 WO2019159818 A1 WO 2019159818A1
Authority
WO
WIPO (PCT)
Prior art keywords
gesture
electronic device
user
controller
hand
Prior art date
Application number
PCT/JP2019/004489
Other languages
English (en)
French (fr)
Inventor
太郎 飯尾
優哉 山口
遼平 中村
恒雄 宮下
上野　泰弘
茂輝 田辺
英樹 森田
功 益池
浩太郎 山内
学 佐久間
Original Assignee
京セラ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 京セラ株式会社 filed Critical 京セラ株式会社
Priority to US16/968,252 priority Critical patent/US11307669B2/en
Priority to EP19754110.5A priority patent/EP3754460A4/en
Publication of WO2019159818A1 publication Critical patent/WO2019159818A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3664—Details of the user input interface, e.g. buttons, knobs or sliders, including those provided on a touch screen; remote controllers; input using gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/166—Navigation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/741—Instruments adapted for user detection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver

Definitions

  • the present invention relates to an electronic device, a moving object, a program, and a control method.
  • Patent Document 1 discloses a car navigation system mounted on a vehicle.
  • the car navigation system disclosed in Patent Literature 1 supports driving of a vehicle by displaying, for example, information on a moving route to a destination on a display.
  • An electronic device determines a sensor that detects a gesture without touching the device itself, a hand that a user operates according to a position of a driver's seat, and the sensor that operates according to the hand operated by the user And a controller for determining the direction of the gesture based on the output from.
  • a moving body includes the electronic device.
  • the mobile body is connected to the electronic device so as to be communicable.
  • a program includes a step of determining a hand operated by a user according to a position of a driver's seat in an electronic device including a sensor that detects a gesture without touching the device and a controller, and the user And determining the direction of the gesture based on the output from the sensor in accordance with the hand operated.
  • a control method is a control method executed by an electronic device including a sensor that detects a gesture without touching its own device and a controller, and is operated by a user according to the position of the driver's seat. And determining a direction of a gesture based on an output from the sensor according to a hand operated by the user.
  • a user of a conventional car navigation system performs touch input on the display when performing an input operation.
  • touch input is performed during driving of the vehicle, it becomes difficult to ensure the safety of driving of the vehicle.
  • the present disclosure relates to providing an electronic device, a moving body, a program, and a control method that can improve the safety of operation of the moving body. According to the electronic device, the moving body, the program, and the control method according to the present disclosure, it is possible to improve the driving safety of the moving body.
  • an electronic device 1 includes a timer 12, a camera 13, a display 14, a microphone 15, a storage 16, a communication unit 17, a speaker 25, and a proximity sensor 18 (gesture sensor). ) And a controller 11.
  • the electronic device 1 further includes a UV sensor 19, an illuminance sensor 20, an acceleration sensor 21, a geomagnetic sensor 22, an atmospheric pressure sensor 23, and a gyro sensor 24.
  • FIG. 1 is an illustration. The electronic device 1 may not include all of the components shown in FIG. Further, the electronic device 1 may include components other than those shown in FIG.
  • the electronic device 1 may be realized as various devices used in driving or maneuvering a moving body.
  • the moving body may be configured by any device that can move.
  • the moving body may be able to be boarded by a user.
  • the moving body may include, for example, a vehicle, a ship, an aircraft, and the like.
  • the vehicle may include, for example, an electric vehicle, a hybrid electric vehicle, a gasoline vehicle, a motorcycle, a two-wheeled vehicle, and a welfare vehicle.
  • the vehicle may include a rail vehicle, for example.
  • the mobile may be driven or steered by the user. At least a part of a user operation related to driving or maneuvering of the moving body may be automated.
  • the moving body may be able to move autonomously regardless of user operation. In this specification, it demonstrates below that a moving body is a motor vehicle which a user drives.
  • the electronic apparatus 1 may be realized as an in-vehicle apparatus such as a car navigation system mounted on the automobile.
  • the electronic device 1 may be realized as, for example, a mobile phone terminal, a fablet, a tablet PC (Personal Computer), a smartphone, or a feature phone.
  • the electronic device 1 may be communicably connected to a system mounted on a car driven by the user by wired or wireless.
  • the electronic device 1 may be realized as a smartphone and may be connected to a system mounted on an automobile via Bluetooth (registered trademark) so as to be communicable.
  • the electronic device 1 is not limited to these examples, and may be realized as an arbitrary device used in driving or maneuvering a mobile object.
  • the electronic device 1 may be realized by, for example, a PDA (Personal Digital Assistant), a remote control terminal, a portable music player, a game machine, an electronic book reader, a home appliance, or an industrial device (FA device).
  • the electronic apparatus 1 is demonstrated as what is implement
  • the timer 12 receives a timer operation instruction from the controller 11 and outputs a signal indicating that to the controller 11 when a predetermined time has elapsed. As shown in FIG. 1, the timer 12 may be provided independently of the controller 11, or may be configured to be built in the controller 11.
  • the camera 13 images a subject around the electronic device 1.
  • the camera 13 is provided on the surface of the electronic device 1 on which the display 14 is provided.
  • Display 14 displays a screen.
  • the screen includes at least one of, for example, a character, an image, a symbol, and a graphic.
  • the display 14 may be a liquid crystal display (Liquid Crystal Display), an organic EL panel (Organic Electro-Luminescence Panel), an inorganic EL panel (Inorganic Electro-Luminescence Panel), or the like.
  • the display 14 is a touch panel display (touch screen display).
  • the touch panel display detects the contact of a finger or a stylus pen and specifies the contact position.
  • the display 14 can simultaneously detect a plurality of positions touched by a finger or a stylus pen.
  • the microphone 15 detects sounds around the electronic device 1 including a voice uttered by a person.
  • the storage 16 stores programs and data as a storage unit.
  • the storage 16 temporarily stores the processing result of the controller 11.
  • the storage 16 may include any storage device such as a semiconductor storage device and a magnetic storage device.
  • the storage 16 may include a plurality of types of storage devices.
  • the storage 16 may include a combination of a portable storage medium such as a memory card and a storage medium reading device.
  • the program stored in the storage 16 includes an application executed in the foreground or the background, and a control program that supports the operation of the application.
  • the application causes the controller 11 to execute processing according to the gesture.
  • the control program is, for example, an OS (Operating System).
  • the application and the control program may be installed in the storage 16 via communication by the communication unit 17 or via a storage medium.
  • the communication unit 17 is an interface for communicating by wire or wireless.
  • the communication method performed by the communication unit 17 of one embodiment is a wireless communication standard.
  • the wireless communication standards include cellular phone communication standards such as 2G, 3G, and 4G.
  • communication standards for cellular phones include LTE (Long Term Evolution), W-CDMA (Wideband Code Division Multiple Access), CDMA2000, PDC (Personal Digital Cellular), GSM (registered trademark) (Global System Mobile for communications) and PHS (PHS). Includes Personal Handy-phone System).
  • wireless communication standards include WiMAX (Worldwide Interoperability for Microwave Access), IEEE 802.11, Bluetooth (registered trademark), IrDA (Infrared Data Association), NFC (Near Field Communication), and the like.
  • the communication unit 17 can support one or more of the communication standards described above.
  • Speaker 25 outputs sound.
  • the speaker 25 outputs, for example, voice that guides the route to the input destination of the automobile.
  • the electronic device 1 is realized as a device capable of making a call
  • the voice of the other party is output from the speaker 25 during a call.
  • the content is output from the speaker 25 as sound.
  • the proximity sensor 18 detects the relative distance to the object around the electronic device 1 and the moving direction of the object in a non-contact manner.
  • the proximity sensor 18 has one light source infrared LED (Light Emitting Diode) and four infrared photodiodes.
  • the proximity sensor 18 irradiates the target with infrared light from the light source infrared LED.
  • the proximity sensor 18 uses reflected light from the object as incident light of an infrared photodiode.
  • the proximity sensor 18 can measure the relative distance to the object based on the output current of the infrared photodiode.
  • the proximity sensor 18 detects the moving direction of the object based on a time difference in which the reflected light from the object enters each infrared photodiode. Therefore, the proximity sensor 18 can detect an operation using an air gesture (hereinafter simply referred to as “gesture”) performed by the user of the electronic device 1 without touching the electronic device 1.
  • the proximity sensor 18 may have a visible light photodiode.
  • the controller 11 is a processor such as a CPU (Central Processing Unit).
  • the controller 11 may be an integrated circuit such as an SoC (System-on-a-Chip) in which other components are integrated.
  • SoC System-on-a-Chip
  • the controller 11 may be configured by combining a plurality of integrated circuits.
  • the controller 11 controls various operations of the electronic device 1 to realize various functions.
  • the controller 11 included in the electronic device 1 may be configured by, for example, an ECU (Electric Control Unit or Engine Control Unit) included in the vehicle.
  • ECU Electronic Control Unit or Engine Control Unit
  • the controller 11 refers to the data stored in the storage 16 as necessary.
  • the controller 11 implements various functions by executing instructions included in the program stored in the storage 16 and controlling other functional units such as the display 14.
  • the controller 11 acquires contact data from the user from the touch panel.
  • the controller 11 acquires information related to the user's gesture detected by the proximity sensor 18.
  • the controller 11 grasps the activation status of the application.
  • the UV sensor 19 can measure the amount of ultraviolet rays contained in sunlight or the like.
  • the illuminance sensor 20 detects the illuminance of ambient light incident on the illuminance sensor 20.
  • the acceleration sensor 21 detects the direction and magnitude of acceleration acting on the electronic device 1.
  • the acceleration sensor 21 is, for example, a three-axis (three-dimensional) type that detects acceleration in the x-axis direction, the y-axis direction, and the z-axis direction.
  • the acceleration sensor 21 may be, for example, a piezoresistive type or a capacitance type.
  • the geomagnetic sensor 22 detects the direction of geomagnetism and makes it possible to measure the direction of the electronic device 1.
  • the atmospheric pressure sensor 23 detects the atmospheric pressure (atmospheric pressure) outside the electronic device 1.
  • the gyro sensor 24 detects the angular velocity of the electronic device 1.
  • the controller 11 can measure the change in the orientation of the electronic device 1 by time-integrating the angular velocity acquired by the gyro sensor 24.
  • FIG. 2 shows a state in which the user operates the electronic device 1 with a gesture.
  • the electronic apparatus 1 has a display 14 installed on a console panel of an automobile.
  • the electronic device 1 may be supported by a support provided in the automobile for supporting the electronic device 1.
  • the controller 11 performs processing based on the detected gesture.
  • the process based on the gesture is, for example, adjustment of the volume of the sound output from the speaker 25.
  • the volume increases in conjunction with the movement of the user's hand.
  • the user performs a gesture of moving his / her hand downward in the short direction of the electronic device 1 the volume decreases in conjunction with the movement of the user's hand.
  • Processing based on gestures is not limited to volume adjustment.
  • the process based on the gesture may be another process that can be executed based on the detected gesture.
  • the processing based on the gesture may include enlargement or reduction of information displayed on the display 14, adjustment of display brightness of the display 14, start of reading out predetermined information by voice, and stop of reading out by voice. Good.
  • FIG. 3 is a diagram illustrating a configuration example of the proximity sensor 18 when the electronic apparatus 1 is viewed from the front.
  • the proximity sensor 18 includes a light source infrared LED 180 and four infrared photodiodes SU, SR, SD, and SL.
  • the four infrared photodiodes SU, SR, SD, and SL detect reflected light from the detection target via the lens 181.
  • the four infrared photodiodes SU, SR, SD, and SL are arranged symmetrically when viewed from the center of the lens 181.
  • the virtual line D ⁇ b> 1 shown in FIG. 3 is substantially parallel to the longitudinal direction of the electronic device 1.
  • the infrared photodiode SU and the infrared photodiode SD are arranged apart from each other.
  • the infrared photodiodes SR and SL are arranged between the infrared photodiode SU and the infrared photodiode SD.
  • FIG. 4 shows the transition of the detection value when the detection objects (for example, the user's hand) of the four infrared photodiodes SU, SR, SD, and SL move along the direction of the virtual line D1 in FIG. Illustrate.
  • the infrared photodiode SU is farthest from the infrared photodiode SD in the direction of the virtual line D1. Therefore, as shown in FIG. 4, the time difference between the change (for example, increase) in the detection value (broken line) of the infrared photodiode SU and the same change (for example, increase) in the detection value (thin solid line) of the infrared photodiode SD. Is the largest.
  • the controller 11 can determine the moving direction of the detection object by grasping the time difference of the predetermined change in the detection values of the photodiodes SU, SR, SD, and SL.
  • the controller 11 acquires the detection values of the photodiodes SU, SR, SD, and SL from the proximity sensor 18. Then, the controller 11 integrates, for a predetermined time, a value obtained by subtracting the detection value of the photodiode SU from the detection value of the photodiode SD in order to grasp the movement of the detection object in the direction of the virtual line D1, for example. Also good.
  • the integral value is a non-zero value in the regions R41 and R42. From the change in the integrated value (for example, change in positive value, zero, and negative value), the controller 11 can grasp the movement of the detection target in the direction of the virtual line D1.
  • the controller 11 may integrate a value obtained by subtracting the detection value of the photodiode SR from the detection value of the photodiode SL in a predetermined time. From the change in the integrated value (for example, change in positive value, zero, or negative value), the controller 11 detects in a direction orthogonal to the virtual line D1 (for example, a direction substantially parallel to the longitudinal direction of the electronic device 1 shown in FIG. 2). The movement of the object can be grasped.
  • the controller 11 may perform calculation using all detection values of the photodiodes SU, SR, SD, and SL. That is, the controller 11 may grasp the moving direction of the detection target without calculating the components in the longitudinal direction and the short direction of the electronic device 1.
  • Detected gestures include, for example, left and right gestures, upper and lower gestures, diagonal gestures, gestures that draw a circle in a clockwise direction, and gestures that draw a circle in a counterclockwise direction.
  • the left / right gesture is a gesture performed in a direction substantially parallel to the longitudinal direction of the electronic device 1.
  • the upper and lower gestures are gestures performed in a direction substantially parallel to the short direction of the electronic device 1.
  • the oblique gesture is a gesture performed in a direction that is not parallel to either the longitudinal direction or the short direction of the electronic device 1 on a plane substantially parallel to the front surface of the electronic device 1.
  • FIG. 5 shows an example of a situation where the user operates the electronic device 1 with a gesture.
  • the electronic device 1 is arranged so that the display 14 is located at the center of the console panel of the automobile.
  • the user gets into the vehicle on which the electronic device 1 is mounted while referring to the displayed route, Driving a car.
  • the proximity sensor 18 is in a state in which the user's gesture can be detected.
  • the controller 11 performs processing based on the gesture detected by the proximity sensor 18.
  • the controller 11 can perform processing for adjusting the volume of the sound output from the electronic device 1 in accordance with a specific gesture (for example, a gesture in which the user moves his / her hand up and down).
  • the electronic device 1 can accept a touch input from a user on a touch screen display.
  • the user may erroneously operate the steering by reaching for the touch screen display.
  • the surrounding situation confirmation may be neglected when the user moves his / her line of sight to the display 14 to confirm the position where the touch input is to be performed on the display 14 during driving. In this case, the safety of driving the vehicle may be reduced.
  • the electronic device 1 can accept an input operation by a gesture as in the present embodiment, the user can perform the input operation without touching the electronic device 1. Thereby, even when the user performs an input operation during driving, it is easy to ensure driving safety.
  • the electronic device 1 may have a plurality of modes.
  • the mode means an operation mode (an operation state or an operation state) that restricts the overall operation of the electronic device 1. Only one mode can be selected at a time.
  • the mode of the electronic device 1 includes a first mode and a second mode.
  • the first mode is a normal operation mode (normal mode) suitable for use in situations other than driving, for example.
  • Conditions other than driving include, for example, a state where the engine of the car is not running, a state where the shift lever is in a predetermined range (for example, a parking range), a state where the brake is stepped on, and a route to the destination. It may include any state in which no display is performed.
  • the second mode is an operation mode (car mode) of the electronic device 1 suitable for driving the automobile by displaying the route to the destination on the display 14 of the electronic device 1.
  • the second mode it is preferable that input by a gesture is possible. That is, when the mode of the electronic device 1 is switched to the second mode, it is preferable to operate the proximity sensor 18 in conjunction with the gesture so that the gesture can be detected.
  • the electronic device 1 may switch the mode of the electronic device 1 based on, for example, a predetermined input operation on the electronic device 1 by the user or a predetermined input operation on the automobile.
  • gesture direction determination processing by the controller 11 of the electronic device 1 will be described.
  • the determination process of the gesture direction by the controller 11 may be executed, for example, when the electronic device 1 is in the car mode described above.
  • the direction detected as a gesture may be determined in advance.
  • the directions detected as gestures may be determined in the vertical direction and the horizontal direction.
  • the following description will be made assuming that the directions detected as gestures in the electronic device 1 are determined in the vertical direction and the horizontal direction. That is, in the present embodiment, hereinafter, an oblique gesture is not considered. However, this does not limit the direction detected as a gesture in the electronic apparatus 1 according to the present disclosure. Therefore, the electronic device 1 may detect an oblique gesture in the same manner as described below.
  • the controller 11 of the electronic device 1 detects the gesture, the detected gesture is an operation in any direction of up-down, left-right.
  • the controller 11 can determine whether the detected gesture is an operation in the vertical direction or an operation in the horizontal direction. For example, when detecting the gesture, the controller 11 decomposes the gesture into a vertical component (movement amount) and a horizontal component (movement amount). Then, the controller 11 determines that the gesture is an operation in the vertical direction when the vertical component is larger than the horizontal component. Conversely, the controller 11 can determine that the gesture is an operation in the left-right direction when the left-right direction component is larger than the up-down direction component.
  • the controller 11 determines the direction of the gesture using, for example, a determination criterion.
  • the determination criterion is a criterion for determining the direction of the gesture, and may be stored in the storage 16 in advance, for example.
  • FIG. 6 is a conceptual diagram for explaining a method for determining a gesture direction using a determination criterion.
  • an orthogonal coordinate system is set, and the x-axis is associated with the left-right direction and the y-axis is associated with the up-down direction.
  • the determination criterion is constituted by two straight lines L1 and L2, as shown as an example in FIG.
  • L1 and L2 straight lines
  • the positive x-axis direction is the reference (0 degree)
  • the counterclockwise rotation is the positive direction of the angle. Therefore, the positive y-axis direction is 90 degrees.
  • the straight line L1 is set to 45 degrees
  • the straight line L2 is set to ⁇ 45 degrees (that is, 315 degrees). That is, according to the criterion shown in FIG. 6, the straight line L1 and the straight line L2 are orthogonal to each other.
  • Four regions divided by the straight line L1 and the straight line L2 are associated with the upward direction, the downward direction, the right direction, and the left direction, respectively.
  • the region from ⁇ 45 degrees to 45 degrees is in the right direction
  • the region from 45 degrees to 135 degrees is in the upward direction
  • from 135 degrees to 225 degrees is associated with the downward direction.
  • the determination criteria shown in FIG. 6 are hereinafter also referred to as “standard determination criteria” in this specification.
  • the controller 11 calculates the direction of the vector indicated by the gesture based on the output (detection value) from the proximity sensor 18, and determines which direction the calculated vector indicates using the determination criterion. For example, when the gesture vector calculated based on the output from the proximity sensor 18 is in the direction of 90 degrees as shown by the arrow A1 in FIG. 6, the controller 11 uses the standard determination criterion in FIG. It can be determined that the gesture is an upward gesture. For example, when the gesture vector calculated based on the output from the proximity sensor 18 has a direction of 30 degrees as indicated by an arrow A2 in FIG. 6, the controller 11 uses the standard determination criterion in FIG. It can be determined that the gesture is a rightward gesture.
  • the user's gesture may not be determined as the gesture in the direction intended by the user.
  • the display 14 and the proximity sensor 18 are arranged in the center of the console panel and the driver's seat is arranged on the right side in the traveling direction in the automobile.
  • a gesture is performed in which the hand is moved upward from the bottom in order to perform an upward operation.
  • the driver's seat is arranged on the right side in the traveling direction, and the proximity sensor 18 is arranged in the center.
  • the palm of the left hand moves so as to draw an arc with the elbow or shoulder of the left hand as an axis, as schematically indicated by arrow A3 in FIG.
  • the gesture performed by the user has an upward component intended by the user and a right component generated by the palm drawing an arc.
  • the controller 11 calculates the direction of the vector indicated by the gesture based on the output from the proximity sensor 18 that has detected the gesture. Specifically, the controller 11 calculates the size of the upward component and the right component based on the output from the proximity sensor 18, and from the magnitude of the upward component and the right component, The direction of the vector indicated by the gesture (that is, the direction schematically indicated by the arrow A4 in FIG. 7) is calculated. The controller 11 determines the direction of the gesture using the determination criterion based on the calculated vector direction.
  • the direction of the vector indicated by the gesture is less than 45 degrees.
  • the controller 11 determines the direction of the vector indicated by the gesture using the standard determination criterion, the gesture is determined to be a gesture in the right direction.
  • the gesture intended by the user is an upward operation in the gesture, if the controller 11 determines that the gesture is a right direction and performs a right direction process, an erroneous operation occurs.
  • the controller 11 of the electronic device 1 determines a hand for the user to operate the own device (electronic device 1) according to the position of the driver's seat, and the user's operation according to the determined user's hand for operation. Determine the direction of the gesture. This makes it easy to prevent erroneous operations as described above. Specifically, the controller 11 of the electronic device 1 according to the present embodiment determines the position of the driver's seat in the automobile on which the electronic device 1 is mounted, and the user selects his / her own device according to the determined position of the driver's seat. Determine the hand to operate.
  • the controller 11 of the electronic device 1 determines a determination criterion for determining the direction of the gesture according to the hand operating the determined own device, and determines the direction of the gesture using the determined determination criterion. Thereby, the electronic device 1 becomes easy to prevent an erroneous operation. Details of control executed by the controller 11 of the electronic apparatus 1 according to the present embodiment will be described.
  • the controller 11 determines the position of the driver's seat in the automobile on which the electronic device 1 is mounted. For example, as shown in FIG. 8 as an example, it is assumed that the automobile 30 includes two seats in the front row and the rear row, respectively, and two seats in the right side and the left side in the traveling direction. That is, the automobile 30 includes seats 31 to 33 on the right side of the front row, the left side of the front row, the right side of the back row, and the left side of the back row. Further, in the automobile 30, the display 14 and the proximity sensor 18 are arranged in the center of the front side of the front row. For example, in the automobile 30 shown in FIG. 8, the controller 11 determines which of the seats 31 to 33 is the driver seat. The controller 11 can determine the position of the driver's seat using one of the methods described herein, or a combination of two or more.
  • the driver's seat refers to a seat on which a user who operates the automobile 30 sits.
  • the driver's seat is a front seat at a position where the steering wheel is disposed.
  • the right side seat 31 or the left front seat 32 is determined as the position of the driver seat.
  • the controller 11 may determine the position of the driver's seat based on information stored in the storage 16 in advance. For example, when the electronic device 1 is installed in the automobile 30 in advance, the storage 16 may store information regarding the position of the driver's seat. Alternatively, when the user inputs information regarding the position of the driver's seat by performing an input operation on the electronic device 1, the storage 16 may store information regarding the position of the driver's seat. In this case, the controller 11 can determine the position of the driver seat based on the information related to the position of the driver seat stored in the storage 16.
  • the controller 11 may determine the position of the driver's seat based on the image captured by the camera 13. Specifically, the controller 11 activates the camera 13 when executing control based on the gesture (for example, when the electronic device 1 is in the first operation mode).
  • the camera 13 images the front side of the display 14, that is, the inside of the automobile 30.
  • the controller 11 may analyze the image captured by the camera 13 and determine the position of the seat in front of the steering as the position of the driver's seat.
  • the controller 11 may analyze the image captured by the camera 13 and determine the position of the seat as the position of the driver seat when the user is reflected in the seat in front of the steering wheel.
  • the controller 11 may stop the operation of the camera 13 when determining the position of the driver seat. Thereby, the controller 11 can suppress the power consumption by the camera 13.
  • the controller 11 may determine the position of the driver seat based on the output of the pressure sensor.
  • the pressure sensor may be provided under a seating surface to which a load is applied when the user sits. The pressure sensor detects the pressure applied to the seating surfaces of the seats 31 to 34.
  • the controller 11 can identify the seat on which the user is seated based on the output from the pressure sensor arranged in the seat. The controller 11 may determine the position of the seat where the user is sitting as the position of the driver's seat. This method can be used when, for example, one user gets into a car.
  • the controller 11 may determine the position of the driver's seat based on the direction in which the gesture is first detected after power is supplied to the electronic device 1.
  • the user's hand extends from the direction of the seat on which the user is sitting. That is, if the user is sitting on the right side in the traveling direction, the user's hand extends from the right side of the proximity sensor 18 in the traveling direction. On the other hand, if the user is sitting on the left side in the traveling direction, the user's hand extends from the left side of the proximity sensor 18 in the traveling direction.
  • the electronic device 1 can determine that the user is present in the direction in which the gesture sensor is first detected by the proximity sensor 18.
  • the user who operates the electronic device 1 is generally considered to be a user who drives the automobile 30, so that the controller 11 first moves the driver seat in the direction in which the gesture is detected. It can be determined that there is a position.
  • the controller 11 may determine the position of the driver's seat based on the output of the human sensor. For example, the human sensor may detect whether a user is sitting on the seats 31 to 34 by sensing an ambient temperature change using infrared rays. When the user gets into the car and sits on the seat, the controller 11 can specify the seat on which the user is seated based on the output from the human sensor arranged in front of the seat. The controller 11 may determine the position of the seat where the user is sitting as the position of the driver's seat. This method can be used when, for example, one user gets into a car.
  • the controller 11 may determine the position of the driver's seat based on the opening / closing of the door of the automobile 30.
  • the automobile 30 includes one door near each seat 31 to 34.
  • the automobile 30 includes one door on each of the right side of the front row right seat 31, the left side of the front row left seat 32, the right side of the rear row right seat 33, and the left side of the rear row left seat 34.
  • Each door is provided with a sensor for detecting opening and closing.
  • the controller 11 can determine that the user sits in the seat closest to the door that has been opened and closed. This is because it is considered that the user usually gets into the automobile 30 through the door closest to the seat to be seated.
  • the controller 11 may determine the position of the seat that the user has determined to sit as the position of the driver's seat. This method can be used when, for example, one user gets into a car.
  • the controller 11 may determine the position of the driver's seat based on the position where the door of the automobile 30 is unlocked. As described above, when the automobile 30 is provided with a plurality of doors, the controller 11 can determine that the user sits in the seat closest to the door on which the unlocking operation has been performed. This is because it is considered that the user usually unlocks the door closest to the seat to be seated and gets into the automobile 30 through the door. The controller 11 may determine the position of the seat that the user has determined to sit as the position of the driver's seat. This method can be used when, for example, one user gets into a car.
  • the controller 11 may determine the position of the driver's seat based on the hand operating the touch screen display.
  • the user stores the fingerprint data of the left and right fingers in the storage 16 of the electronic device 1 in advance.
  • the user can perform an input operation for registering fingerprint data, and can store the fingerprint data in the storage 16 of the electronic device 1.
  • the controller 11 reads the fingerprint of the finger touching the touch screen display when the user touches the touch screen display in a state where power is supplied to the electronic device 1 when the automobile 30 is operated. , It is determined whether the finger is the right hand finger or the left hand finger of the user.
  • the controller 11 determines that the seat on the opposite side of the determined hand direction (that is, whether it is the right hand or the left hand) is the seat where the user is sitting.
  • the controller 11 determines that the finger touching the touch screen display is the user's left hand, the controller 11 determines that the user is sitting on the right seat.
  • the controller 11 determines that the finger touching the touch screen display is the user's right hand, the controller 11 determines that the user is sitting on the left seat.
  • the controller 11 may determine the position of the seat determined that the user is sitting as the position of the driver's seat.
  • the controller 11 may determine the position of the driver's seat based on the sound detected by the microphone 15. For example, the controller 11 determines the direction in which the sound is generated for the sound detected by the microphone 15. The controller 11 can determine that the direction in which the determined sound is generated is the direction in which the user exists. Therefore, the controller 11 may determine the position of the seat in the direction in which the sound is generated as the position of the driver's seat.
  • the controller 11 determines a hand for the user to operate the device.
  • the user's hand operating the device may be, for example, a hand that the user performs a gesture to operate the device.
  • the hand operating the own device means the right hand.
  • the hand operating the device means the left hand.
  • the controller 11 may determine, for example, a hand on the opposite side to the position of the driver's seat determined as described above as a hand for the user to operate the device. That is, for example, when it is determined that the position of the driver's seat is on the right side in the traveling direction, the controller 11 may determine the left hand as a hand for operating the own device. Similarly, for example, when it is determined that the position of the driver's seat is on the left side in the traveling direction, the controller 11 may determine the right hand as a hand for operating the own device. For example, when the proximity sensor 18 of the electronic device 1 is arranged at the center of the console panel, the controller 11 determines the hand for operating the device itself in this way, so that the user actually operates the electronic device 1. It becomes easier to determine the hand accurately.
  • the controller 11 may determine the hand which operates an own apparatus by the method different from the method mentioned above depending on arrangement
  • the controller 11 determines the hand with the higher possibility that the user sitting in the driver's seat will perform the gesture operation as the hand for the user to operate the device according to the positional relationship between the proximity sensor 18 and the driver's seat. You can do it.
  • the controller 11 may determine the hand closer to the proximity sensor 18 as the hand operating the own device.
  • the controller 11 determines a determination criterion according to, for example, a user who operates as described above and operates the own device. That is, the controller 11 determines a determination criterion according to the hand performing the gesture in a state where the user performs the gesture.
  • the controller 11 determines the direction of the gesture using the determination criterion of the left hand when the hand performing the gesture is the left hand.
  • the criterion for the left hand is a criterion that makes it easy to determine the direction of the gesture according to the user's intention when an operation is performed with the left hand, based on the nature of the left hand movement.
  • the property of the left-handed motion includes, for example, the property that the component in the right direction is likely to be included in the upward operation.
  • the nature of the left hand movement includes, for example, the tendency that the left direction component is likely to be included for the same reason as described with reference to FIG. 7 for the downward operation.
  • FIG. 9 is a diagram illustrating an example of the determination criterion for the left hand.
  • the left hand criterion is constituted by two straight lines L1R and L2R.
  • the straight lines L1R and L2R are straight lines obtained by rotating the straight lines L1 and L2 indicated by broken lines in FIG. 9 in the right direction (negative direction) by a predetermined angle, respectively.
  • the predetermined angle is 20 degrees. That is, the straight lines L1R and L2R shown in FIG. 9 are straight lines obtained by rotating the straight lines L1 and L2 20 degrees to the right (negative direction), respectively.
  • the four regions divided by the two straight lines L1R and L2R are associated with the upward direction, the downward direction, the right direction, and the left direction, respectively.
  • the region from ⁇ 65 degrees to 25 degrees is the right direction
  • the region from 25 degrees to 115 degrees is the upward direction
  • from 115 degrees to 205 degrees is associated with the left direction
  • the region between 205 degrees and 295 degrees is associated with the downward direction.
  • the controller 11 determines that the gesture vector calculated based on the output from the proximity sensor 18 is 90 degrees as shown by the arrow A1. Can be determined to be an upward gesture. Also, the controller 11 can determine that the gesture is an upward gesture even when the gesture vector calculated based on the output from the proximity sensor 18 has a direction of 30 degrees as indicated by the arrow A2. . That is, the gesture in the direction of 30 degrees indicated by the arrow A2 is determined to be a right direction gesture using the standard determination criterion, but is determined to be an upward gesture when using the left hand determination criterion.
  • the gesture in the direction of 30 degrees indicated by the arrow A2 is determined to be a right direction gesture using the standard determination criterion, but is determined to be an upward gesture when using the left hand determination criterion.
  • the controller 11 When a gesture is performed with the left hand, as described above, a component in the right direction is likely to be included in the upward gesture.
  • the controller 11 performs the standard determination. Using the criterion, it determines that the gesture is a rightward gesture. However, since the gesture intended by the user is an upward gesture, the determination that the gesture is a rightward gesture causes an erroneous operation. On the other hand, even if the gesture is the same, the controller 11 determines that the gesture is an upward gesture when the left hand determination criterion is used. Therefore, by using the left-hand determination criterion, the controller 11 can easily execute the control intended by the user. Therefore, according to the electronic device 1, it becomes easy to prevent an erroneous operation in an input operation by a gesture.
  • FIG. 10 is a diagram showing another example of the left hand determination criterion.
  • the left-hand determination criterion shown in FIG. 10 includes two straight lines L1R and L2.
  • the straight line L1R is a straight line obtained by rotating the straight line L1 rightward (negative direction) by a predetermined angle (for example, 20 degrees).
  • the straight line L2 is the same straight line as described with reference to FIG.
  • the four areas divided by the two straight lines L1R and L2 are associated with the upward direction, the downward direction, the right direction, and the left direction, respectively. Specifically, out of the four regions divided by the two straight lines L1R and L2, the region from ⁇ 45 ° to 25 ° is in the right direction, the region from 25 ° to 135 ° is upward, and the region from 135 ° to 205 ° is The region is associated with the left direction, and the region between 205 degrees and 315 degrees is associated with the downward direction.
  • the controller 11 determines that the gesture in the direction of 90 degrees indicated by the arrow A1 is an upward gesture, and performs the gesture in the direction of 30 degrees indicated by the arrow A2. It is determined as an upward gesture. For this reason, the controller 11 can easily execute the control intended by the user even when the left-hand determination criterion shown in FIG. 10 is used, as in the case where the left-hand determination criterion shown in FIG. 9 is used. Therefore, according to the electronic device 1, it becomes easy to prevent an erroneous operation in an input operation by a gesture.
  • the same straight line as the standard determination criterion can be used for the straight line L2 forming the boundary from the lower right direction to the upper left direction, as shown in the example of FIG.
  • the controller 11 determines the direction of the gesture using the determination criterion of the right hand.
  • the right-hand criterion is a criterion that makes it easy to determine the direction of the gesture according to the user's intention when an operation is performed with the right hand, based on the nature of the action of the right hand.
  • the property of the right hand motion is a property that is symmetric with respect to the motion of the left hand, and includes, for example, the property that a left component is easily included in an upward operation.
  • the property of the right hand movement includes, for example, the property that a right component is likely to be included in a downward operation.
  • FIG. 11 is a diagram illustrating an example of a determination criterion for the right hand.
  • the determination criterion for the right hand is composed of two straight lines L1L and L2L, as shown as an example in FIG.
  • the straight lines L1L and L2L are straight lines obtained by rotating the straight lines L1 and L2 indicated by broken lines in FIG. 6 in the left direction (positive direction) by a predetermined angle, respectively.
  • the predetermined angle is 20 degrees. That is, the straight lines L1L and L2L shown in FIG. 11 are straight lines obtained by rotating the straight lines L1 and L2 20 degrees leftward (positive direction), respectively.
  • the four areas divided by the two straight lines L1L and L2L are associated with the upward direction, the downward direction, the right direction, and the left direction, respectively.
  • the region from ⁇ 25 degrees to 65 degrees is in the right direction
  • the region from 65 degrees to 155 degrees is in the upward direction
  • from 155 degrees to 245 degrees is associated with the left direction
  • the region with 245 degrees to 335 degrees is associated with the downward direction.
  • the controller 11 executes the control intended by the user for the gesture performed with the right hand for the same reason as described in detail regarding the left hand criterion. It becomes easy. Therefore, according to the electronic device 1, it becomes easy to prevent an erroneous operation in an input operation by a gesture.
  • FIG. 12 is a diagram showing another example of the determination criterion for the right hand.
  • the determination criterion for the right hand shown in FIG. 12 includes two straight lines L1 and L2L.
  • the straight line L2L is a straight line obtained by rotating the straight line L2 leftward (positive direction) by a predetermined angle (for example, 20 degrees).
  • the straight line L1 is the same straight line as described with reference to FIG.
  • the four regions divided by the two straight lines L1 and L2L are associated with the upward direction, the downward direction, the right direction, and the left direction, respectively. Specifically, of the four regions divided by the two straight lines L1 and L2L, the region from ⁇ 25 degrees to 45 degrees is in the right direction, the region from 45 degrees to 155 degrees is in the upward direction, and from 155 degrees to 225 degrees. The region is associated with the left direction, and the region with 225 degrees to 335 degrees is associated with the downward direction.
  • the controller 11 executes the control intended by the user for the gesture performed with the right hand for the same reason as described in detail with respect to the left hand determination criterion even when the right hand determination criterion shown in FIG. 12 is used. It becomes easy to do. Therefore, according to the electronic device 1, it becomes easy to prevent an erroneous operation in an input operation by a gesture.
  • the predetermined angle is not limited to 20 degrees.
  • the predetermined angle may be an arbitrary angle at which it is easy to determine the direction of the gesture to the direction intended by the user.
  • left hand determination criterion and the right hand determination criterion are not limited to those shown in FIGS.
  • the left-hand determination criterion and the right-hand determination criterion can be any criterion that makes it easy to determine the direction of the gesture in the direction intended by the user, depending on the hand performing the gesture.
  • FIG. 13 is a flowchart illustrating an example of processing executed by the controller 11 of the electronic device 1.
  • the controller 11 determines the position of the driver's seat in the automobile by the method described above (step S1).
  • the controller 11 determines a hand for the user to operate the device, that is, a hand for performing a gesture based on the position of the driver's seat determined in step S1 (step S2).
  • the controller 11 determines a criterion used for determining the direction of the gesture based on the hand performing the gesture in a state where the hand performing the gesture is determined in step S2 (step S3).
  • the controller 11 acquires the output from the proximity sensor 18 (step S4).
  • the controller 11 determines the direction of the gesture using the determination criterion determined in step S3 based on the output from the proximity sensor 18 acquired in step S4 (step S5).
  • the controller 11 performs control according to the direction of the gesture determined in step S5 (step S6).
  • the user determines the hand to perform the gesture according to the position of the driver's seat, and the determined user receives the gesture from the proximity sensor 18 according to the hand performing the gesture.
  • the direction of the user's gesture is determined based on the output. Therefore, the electronic device 1 can easily detect the user's gesture as an operation intended by the user. Thereby, it becomes easy to prevent an erroneous operation in the input operation by the gesture.
  • the user driving the automobile may move his / her line of sight to the display 14 in order to grasp the content of the processing based on the input operation. is there.
  • the gesture is detected by the proximity sensor 18, but the gesture may not necessarily be detected by the proximity sensor 18.
  • the gesture may be detected by any sensor capable of detecting the user's gesture without touching the device.
  • An example of such a sensor includes a camera 13 and the like, for example.
  • the sensor that can detect the user's gesture without touching the device itself may include, for example, a distance measuring sensor.
  • the electronic device 1 may include a distance measuring sensor instead of the proximity sensor 18 or together with the proximity sensor 18, and the gesture may be detected by the distance measuring sensor.
  • the distance measuring sensor is a sensor that can measure the distance to the object.
  • the distance measuring sensor may be constituted by, for example, a ToF (Time of Flight) sensor.
  • a distance measuring sensor configured as a ToF sensor receives a light emitting unit that irradiates a target with sinusoidal modulated light (infrared laser light), and receives reflected light from the target of the irradiated infrared laser light.
  • the light receiving unit includes, for example, an image sensor in which a plurality of light receiving elements are arranged.
  • the ToF sensor measures time (flight time) from irradiation of infrared laser light to reception of reflected light by each light receiving element.
  • the ToF sensor can measure the time of flight based on the phase difference between the irradiated infrared laser light and the received reflected light.
  • the ToF sensor can measure the distance to the object reflecting the irradiated infrared laser beam based on the measured time of flight.
  • the ToF sensor can detect the moving direction of the object based on the time difference in which the reflected light from the object enters each of the plurality of light receiving elements. Thereby, the ToF sensor can also detect a gesture performed by the user based on the same principle as that described for the proximity sensor 18.
  • the distance measuring sensor may be disposed on the same surface as the surface on which the proximity sensor 18 is disposed, for example, in the electronic device 1.
  • FIG. 14 is a diagram schematically showing the distance measuring sensor 26.
  • FIG. 14 shows the distance measuring sensor 26 in a side view.
  • the distance measuring sensor 26 includes a light emitting unit 26a and a light receiving unit 26b. It is assumed that the light emitting unit 26 a and the light receiving unit 26 b are disposed substantially parallel to the longitudinal direction of the electronic device 1.
  • the light emitting unit 26a irradiates the target with infrared laser light.
  • the light receiving unit 26b receives reflected light from the object of the irradiated infrared light.
  • the light receiving unit 26b may include a plurality of light receiving elements.
  • the light receiving unit 26b may include nine light receiving elements arranged in 3 rows ⁇ 3 columns as shown in FIG. Each of the nine light receiving elements receives reflected light from the object.
  • three light receiving elements Ch11, Ch12, and Ch13 are arranged in order from the left in the upper stage, substantially parallel to the longitudinal direction of the electronic device 1.
  • three light receiving elements Ch21, Ch22, and Ch23 are arranged in order from the left in the middle stage, substantially parallel to the longitudinal direction of the electronic device 1.
  • three light receiving elements Ch31, Ch32, and Ch33 are arranged in order from the left, substantially parallel to the longitudinal direction of the electronic device 1.
  • the distance measuring sensor 26 is a distance from each of the nine light receiving elements to the object based on the phase difference between the infrared laser light emitted by the light emitting unit 26a and the reflected light received by each of the nine light receiving elements of the light receiving unit 26b. Can be measured.
  • the distance measuring sensor 26 can detect a gesture based on the distance from each of the nine light receiving elements to the object and the change in the distance over time.
  • FIG. 16 is a diagram schematically showing the transition of the distance to the object detected by each light receiving element.
  • the hand as the object approaches the light receiving element Ch21 first arranged on the left side, and therefore the distance D21 of the object detected by the light receiving element Ch21 is reduced.
  • the distance D22 of the object detected by the light receiving element Ch22 is reduced.
  • the distance D23 of the object that is detected by the light receiving element Ch23 arranged on the right side becomes shorter.
  • the order in which the hand approaching each light receiving element Ch21, Ch22, and Ch23 moves away is also the order of Ch21, Ch22, and Ch23. Therefore, the distances D21, D22, and D23 increase in this order (return to the initial values).
  • the vertical gesture can also be detected by using the light receiving elements Ch12, Ch22, and Ch32 arranged in the short direction based on the same principle. In this way, the distance measuring sensor 26 can detect a gesture based on the distance from each of the nine light receiving elements to the object and the change in the distance over time.
  • the light receiving unit 26b is described as including nine light receiving elements, but the number of light receiving elements included in the light receiving unit 26b is not limited thereto.
  • the arrangement of the plurality of light receiving elements is not limited to the arrangement shown in FIG.
  • the number and arrangement of the light receiving elements included in the light receiving unit 26b may be appropriately determined according to the type of gesture to be detected.
  • the light emitting unit 26a of the distance measuring sensor 26 may include a plurality of light emitting elements.
  • the distance from each of the nine light emitting elements to the object can be measured based on the phase difference between the infrared laser light emitted from each light emitting element and the reflected light received by the light receiving unit 26b.
  • the distance measuring sensor 26 can detect a gesture by applying the above-described principle based on the distance from each of the nine light emitting elements to the object and the change in the distance with time. it can.
  • the controller 11 may change the detection range of the gesture by the proximity sensor 18 according to the determined position of the driver's seat.
  • the detection range of the gesture may include a direction that can be detected by the proximity sensor 18.
  • the controller 11 may perform control so that the proximity sensor 18 is directed toward the determined driver seat. That is, for example, when the controller 11 determines that the driver's seat is on the right side in the traveling direction, the controller 11 may point the proximity sensor 18 on the right side in the traveling direction. Similarly, when it is determined that the driver's seat is on the left side in the traveling direction, the controller 11 may turn the proximity sensor 18 toward the left in the traveling direction.
  • the proximity sensor 18 Since the proximity sensor 18 has a limited viewing angle at which a gesture can be detected, even if the user performs a gesture, if the user is outside the detectable range of the proximity sensor 18, the user's gesture is not detected. However, by changing the detection range of the proximity sensor 18 and directing the detection range of the proximity sensor 18 toward the driver's seat where the user is sitting, for example, the proximity sensor 18 can more easily detect the user's gesture. . Since the proximity sensor 18 can easily detect the user's gesture, it is difficult for the user to overlook the input by the gesture, and thus it is easier to concentrate on driving. Therefore, driving safety is improved.
  • the computer system and other hardware include, for example, a general-purpose computer, a PC (personal computer), a dedicated computer, a workstation, a PCS (Personal Communications System), a mobile (cellular) telephone, and a data processing function.
  • a general-purpose computer e.g., a PC (personal computer), a dedicated computer, a workstation, a PCS (Personal Communications System), a mobile (cellular) telephone, and a data processing function.
  • Mobile phones, RFID receivers, game consoles, electronic notepads, laptop computers, GPS (Global Positioning System) receivers or other programmable data processing devices are included.
  • various operations or control methods are performed by dedicated circuitry (eg, individual logic gates interconnected to perform specific functions) implemented by program instructions (software), one or more processors. Note that it is executed by a logical block and / or a program module.
  • the one or more processors that execute logic blocks and / or program modules include, for example, one or more microprocessors, a CPU (Central Processing Unit), an ASIC (Application Specific Integrated Circuit), a DSP (Digital Signal Processor), and a PLD. (Programmable Logic Device), FPGA (Field Programmable Gate Array), processor, controller, microcontroller, microprocessor, electronic device, other devices designed to perform the functions described herein, and / or any combination thereof Is included.
  • the embodiments shown here are implemented by, for example, hardware, software, firmware, middleware, microcode, or any combination thereof.
  • the instructions may be program code or code segments for performing the necessary tasks.
  • the instructions can then be stored on a machine-readable non-transitory storage medium or other medium.
  • a code segment may represent any combination of procedures, functions, subprograms, programs, routines, subroutines, modules, software packages, classes or instructions, data structures or program statements.
  • a code segment transmits and / or receives information, data arguments, variables or stored contents with other code segments or hardware circuits, thereby connecting the code segments with other code segments or hardware circuits .
  • the storage 16 used here can be further configured as a computer-readable tangible carrier (medium) composed of solid state memory, magnetic disk, and optical disk.
  • a medium stores an appropriate set of computer instructions or a data structure such as a program module for causing a processor to execute the technology disclosed herein.
  • Computer readable media include electrical connections with one or more wires, magnetic disk storage media, magnetic cassettes, magnetic tape, and other magnetic and optical storage devices (eg, CD (Compact Disk), laser disks ( Registered trademark), DVD (registered trademark) (Digital Versatile Disc), floppy (registered trademark) disk and Blu-ray Disc (registered trademark)), portable computer disk, RAM (Random Access Memory), ROM (Read-Only Memory), EPROM (Erasable Programmable Read-Only Memory), EEPROM (Electrically-Erasable Programmable Read-Only Memory), rewritable and programmable ROM such as flash memory, other tangible storage media that can store information, or any combination thereof Is included.
  • CD Compact Disk
  • laser disks Registered trademark
  • DVD registered trademark
  • floppy registered trademark
  • Blu-ray Disc registered trademark
  • portable computer disk Portable computer disk
  • RAM Random Access Memory
  • ROM Read-Only Memory
  • EPROM Erasable Programmable Read-Only Memory
  • the memory can be provided inside and / or outside the processor or processing unit.
  • the term “memory” means any kind of long-term storage, short-term storage, volatile, non-volatile or other memory. That is, the “memory” is not limited to a specific type and / or number. Further, the type of medium in which the storage is stored is not limited.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)

Abstract

電子機器は、自機器に触れずにジェスチャを検出するセンサと、運転席の位置に応じてユーザが操作する手を決定し、ユーザが操作する手に応じて、センサからの出力に基づいて、ジェスチャの方向を決定するコントローラと、を備える。

Description

電子機器、移動体、プログラムおよび制御方法 関連出願の相互参照
　本出願は、２０１８年２月１４日に日本国において提出された特願２０１８－０２４１３７号の優先権を主張するものであり、この先の出願の開示全体を、ここに参照のために取り込む。
　本発明は、電子機器、移動体、プログラムおよび制御方法に関する。
　従来、ユーザによる車両の運転を支援する装置が知られている。例えば、特許文献１には、車両に搭載されるカーナビゲーションシステムが開示されている。特許文献１に開示されたカーナビゲーションシステムは、例えば目的地までの移動経路等に関する情報をディスプレイに表示することにより、車両の運転を支援する。
特開２０１１－１６９８６０号公報
　一実施形態に係る電子機器は、自機器に触れずにジェスチャを検出するセンサと、運転席の位置に応じてユーザが操作する手を決定し、前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するコントローラと、を備える。
　一実施形態に係る移動体は、上記電子機器を備える。
　一実施形態に係る移動体は、上記電子機器と通信可能に接続される。
　一実施形態に係るプログラムは、自機器に触れずにジェスチャを検出するセンサと、コントローラと、を備える電子機器に、運転席の位置に応じてユーザが操作する手を決定するステップと、前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するステップとを実行させる。
　一実施形態に係る制御方法は、自機器に触れずにジェスチャを検出するセンサと、コントローラと、を備える電子機器が実行する制御方法であって、運転席の位置に応じてユーザが操作する手を決定するステップと、前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するステップとを含む。
一実施形態に係る電子機器の概略構成図である。 ユーザがジェスチャにより電子機器を操作する様子を例示する図である。 近接センサの概略構成図である。 各赤外フォトダイオードが検出する検出値の推移を示す図である。 電子機器をジェスチャで操作する状況を例示する図である。 ジェスチャの方向の決定について説明するための概念図である。 ユーザのジェスチャの一例を模式的に示す図である。 自動車における座席の配置の一例を示す図である。 左手の判定基準の一例を示す図である。 左手の判定基準の他の一例を示す図である。 右手の判定基準の一例を示す図である。 右手の判定基準の他の一例を示す図である。 電子機器のコントローラが実行する処理の一例を示すフローチャートである。 測距センサを模式的に示す図である。 図１４に示す受光部における受光素子の配置の一例を模式的に示す図である。 各受光素子により検出される対象物までの距離の推移を模式的に示す図である。
　従来のカーナビゲーションシステムのユーザは、入力操作を行う際、ディスプレイにタッチ入力を行う。しかしながら、車両の運転中にタッチ入力を行うと、車両の運転の安全を確保しにくくなる。本開示は、移動体の運転の安全性を向上可能な電子機器、移動体、プログラムおよび制御方法を提供することに関する。本開示に係る電子機器、移動体、プログラムおよび制御方法によれば、移動体の運転の安全性を向上可能である。
（電子機器の構成）
　図１に示すように一実施形態の電子機器１は、タイマー１２と、カメラ１３と、ディスプレイ１４と、マイク１５と、ストレージ１６と、通信ユニット１７と、スピーカー２５と、近接センサ１８（ジェスチャセンサ）と、コントローラ１１と、を備える。電子機器１は、さらにＵＶセンサ１９と、照度センサ２０と、加速度センサ２１と、地磁気センサ２２と、気圧センサ２３と、ジャイロセンサ２４と、を備える。図１は例示である。電子機器１は図１に示す構成要素の全てを備えなくてもよい。また、電子機器１は図１に示す以外の構成要素を備えていてもよい。
　電子機器１は、移動体の運転または操縦において用いられる種々の機器として実現されてよい。移動体は、移動可能な任意の装置により構成されていてよい。移動体は、ユーザが乗り込むことが可能であってよい。移動体は、例えば、車両、船舶および航空機等を含んでもよい。車両は、例えば、電気自動車、ハイブリッド電気自動車、ガソリン自動車、バイク、二輪車、および福祉車両等を含んでもよい。車両は、例えば鉄道車両を含んでもよい。移動体は、ユーザによって運転または操縦されてもよい。移動体の運転または操縦に関するユーザ操作の少なくとも一部が自動化されていてもよい。移動体は、ユーザ操作によらず、自律して移動可能であってもよい。本明細書では、移動体が、ユーザが運転する自動車であるとして、以下説明する。
　移動体が自動車である場合、電子機器１は、例えば自動車に搭載されたカーナビゲーションシステム等の車載機器として実現されてよい。電子機器１は、例えば携帯電話端末、ファブレット、タブレットＰＣ（Personal Computer）、スマートフォンまたはフィーチャーフォン等として実現されてもよい。この場合、電子機器１は、ユーザが運転する自動車に搭載されたシステムと、有線または無線により通信可能に接続されてよい。例えば、電子機器１は、スマートフォンとして実現され、Ｂｌｕｅｔｏｏｔｈ（登録商標）により自動車に搭載されたシステムと通信可能に接続されてよい。電子機器１は、これらの例に限られず、移動体の運転または操縦において用いられる任意の機器として実現されてよい。電子機器１は、例えば、ＰＤＡ（Personal Digital Assistant）、リモコン端末、携帯音楽プレイヤ、ゲーム機、電子書籍リーダ、家電製品または産業用機器（ＦＡ機器）等により実現されてもよい。ここでは、電子機器１が、自動車に搭載されたカーナビゲーションシステムとして実現されるものとして、説明する。
　タイマー１２は、コントローラ１１からタイマー動作の指示を受け、所定時間経過した時点で、その旨を示す信号をコントローラ１１に出力する。タイマー１２は、図１に示すようにコントローラ１１とは独立して設けられていてもよいし、コントローラ１１が内蔵する構成であってもよい。
　カメラ１３は、電子機器１の周囲の被写体を撮像する。カメラ１３は一例として、電子機器１のディスプレイ１４が設けられる面に設けられる。
　ディスプレイ１４は画面を表示する。画面は、例えば文字、画像、記号および図形等の少なくとも一つを含む。ディスプレイ１４は、液晶ディスプレイ（Liquid Crystal Display）、有機ＥＬパネル（Organic Electro-Luminescence Panel）または無機ＥＬパネル（Inorganic Electro-Luminescence Panel）等であってもよい。本実施形態において、ディスプレイ１４はタッチパネルディスプレイ（タッチスクリーンディスプレイ）である。タッチパネルディスプレイは、指またはスタイラスペン等の接触を検出して、その接触位置を特定する。ディスプレイ１４は、指またはスタイラスペン等が接触した位置を同時に複数検出することができる。
　マイク１５は、人が発する声を含む、電子機器１の周囲の音を検出する。
　ストレージ１６は、記憶部としてプログラムおよびデータを記憶する。ストレージ１６は、コントローラ１１の処理結果を一時的に記憶する。ストレージ１６は、半導体記憶デバイスおよび磁気記憶デバイス等の任意の記憶デバイスを含んでよい。ストレージ１６は、複数の種類の記憶デバイスを含んでよい。ストレージ１６は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。
　ストレージ１６に記憶されるプログラムには、フォアグランドまたはバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとを含む。アプリケーションは、例えば、ジェスチャに応じた処理をコントローラ１１に実行させる。制御プログラムは、例えば、ＯＳ（Operating System）である。アプリケーションおよび制御プログラムは、通信ユニット１７による通信または記憶媒体を介してストレージ１６にインストールされてもよい。
　通信ユニット１７は、有線または無線により通信するためのインタフェースである。一実施形態の通信ユニット１７によって行われる通信方式は無線通信規格である。例えば、無線通信規格は、２Ｇ、３Ｇおよび４Ｇ等のセルラーフォンの通信規格を含む。例えばセルラーフォンの通信規格は、ＬＴＥ（Long Term Evolution）、Ｗ－ＣＤＭＡ（Wideband Code Division Multiple Access）、ＣＤＭＡ２０００、ＰＤＣ（Personal Digital Cellular）、ＧＳＭ（登録商標）（Global System for Mobile communications）およびＰＨＳ（Personal Handy-phone System）等を含む。例えば、無線通信規格は、ＷｉＭＡＸ（Worldwide Interoperability for Microwave Access）、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Infrared Data Association）およびＮＦＣ（Near Field Communication）等を含む。通信ユニット１７は、上述した通信規格の１つまたは複数をサポートすることができる。
　スピーカー２５は音を出力する。スピーカー２５は、例えば入力された自動車の目的地までの経路を案内する音声を出力する。電子機器１が通話可能な機器として実現されている場合には、例えば通話の際に、相手の声がスピーカー２５から出力される。また、例えばニュースまたは天気予報等の読み上げの際に、その内容がスピーカー２５から音で出力される。
　近接センサ１８は、電子機器１の周囲の対象物との相対距離および対象物の移動方向等を非接触で検出する。本実施形態において、近接センサ１８は１つの光源用赤外ＬＥＤ（Light Emitting Diode）と４つの赤外フォトダイオードとを有する。近接センサ１８は、光源用赤外ＬＥＤから赤外光を対象物に向けて照射する。近接センサ１８は、対象物からの反射光を赤外フォトダイオードの入射光とする。そして、近接センサ１８は赤外フォトダイオードの出力電流に基づいて対象物との相対距離を測定することができる。また、近接センサ１８は、対象物からの反射光がそれぞれの赤外フォトダイオードに入射する時間差により対象物の移動方向を検出する。したがって、近接センサ１８は、電子機器１のユーザが電子機器１に触れずに行うエアジェスチャ（以下単に「ジェスチャ」という）を用いた操作を検出することができる。ここで、近接センサ１８は可視光フォトダイオードを有していてもよい。
　コントローラ１１は、例えばＣＰＵ（Central Processing Unit）等のプロセッサである。コントローラ１１は、他の構成要素が統合されたＳｏＣ（System-on-a-Chip）等の集積回路であってもよい。コントローラ１１は、複数の集積回路を組み合わせて構成されてもよい。コントローラ１１は、電子機器１の動作を統括的に制御して各種の機能を実現する。
　電子機器１が自動車に搭載されたカーナビゲーションシステムとして実現される場合、電子機器１が備えるコントローラ１１は、例えば、自動車が備えるＥＣＵ（Electric Control UnitまたはEngine Control Unit）により構成されていてもよい。
　具体的にはコントローラ１１は、ストレージ１６に記憶されているデータを必要に応じて参照する。コントローラ１１は、ストレージ１６に記憶されているプログラムに含まれる命令を実行してディスプレイ１４等の他の機能部を制御することによって各種機能を実現する。例えばコントローラ１１は、ユーザによる接触のデータをタッチパネルから取得する。例えばコントローラ１１は、近接センサ１８が検出したユーザのジェスチャに関する情報を取得する。例えばコントローラ１１は、アプリケーションの起動状況を把握する。
　ＵＶセンサ１９は、太陽光等に含まれる紫外線（Ultraviolet）量を測定することができる。
　照度センサ２０は、当該照度センサ２０に入射する周囲光の照度を検出する。
　加速度センサ２１は、電子機器１に働く加速度の方向および大きさを検出する。加速度センサ２１は、例えばｘ軸方向、ｙ軸方向およびｚ軸方向の加速度を検出する３軸（３次元）タイプである。加速度センサ２１は、例えばピエゾ抵抗型であってもよいし、静電容量型であってもよい。
　地磁気センサ２２は、地磁気の向きを検出して、電子機器１の向きを測定可能にする。
　気圧センサ２３は、電子機器１の外側の気圧（大気圧）を検出する。
　ジャイロセンサ２４は、電子機器１の角速度を検出する。コントローラ１１は、ジャイロセンサ２４により取得された角速度を時間積分することにより、電子機器１の向きの変化を測定することができる。
（ジェスチャによる電子機器の操作）
　図２は、ユーザがジェスチャにより電子機器１を操作する様子を示す。図２において、電子機器１は一例として、ディスプレイ１４が自動車のコンソールパネルに設置されている。代替例として、電子機器１は、自動車内に設けられた、電子機器１を支持するための支持具に支持されてもよい。近接センサ１８がユーザのジェスチャを検出すると、コントローラ１１は検出されたジェスチャに基づく処理を行う。図２の例では、ジェスチャに基づく処理は、例えばスピーカー２５から出力されている音の音量の調整である。例えば、ユーザが電子機器１の短手方向の上方へと手を動かすジェスチャを行うと、ユーザの手の動きに連動して音量が大きくなる。また、例えば、ユーザが電子機器１の短手方向の下方へと手を動かすジェスチャを行うと、ユーザの手の動きに連動して音量が小さくなる。
　ジェスチャに基づく処理は、音量の調整に限られない。ジェスチャに基づく処理は、検出したジェスチャに基づいて実行可能な他の処理であってもよい。例えば、ジェスチャに基づく処理は、ディスプレイ１４に表示された情報の拡大または縮小、ディスプレイ１４の表示の明るさの調整、所定の情報の音声による読み上げ開始、および、音声による読み上げの停止等を含んでもよい。
（ジェスチャを検出する方法）
　ここで、図３および図４を参照しながら、コントローラ１１が近接センサ１８の出力に基づいてユーザのジェスチャを検出する方法を説明する。図３は、電子機器１を正面から見たときの近接センサ１８の構成例を示す図である。近接センサ１８は、光源用赤外ＬＥＤ１８０と、４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬと、を有する。４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬは、レンズ１８１を介して検出対象物からの反射光を検出する。４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬは、レンズ１８１の中心から見て対称的に配置されている。ここで、図３に示される仮想線Ｄ１は電子機器１の長手方向と略平行であるとする。図３の仮想線Ｄ１上に、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとが離れて配置されている。そして、図３の仮想線Ｄ１の方向において、赤外フォトダイオードＳＲおよびＳＬは、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとの間に配置されている。
　図４は、４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出対象物（例えばユーザの手等）が、図３の仮想線Ｄ１の方向に沿って移動したときの検出値の推移を例示する。ここで、仮想線Ｄ１の方向において、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとが最も離れている。そのため、図４に示すように、赤外フォトダイオードＳＵの検出値（破線）の変化（例えば上昇）と、赤外フォトダイオードＳＤの検出値（細い実線）の同じ変化（例えば上昇）との時間差が最も大きい。コントローラ１１は、フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出値の所定の変化の時間差を把握することによって、検出対象物の移動方向を判定できる。
　コントローラ１１は、近接センサ１８からフォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出値を取得する。そして、コントローラ１１は、例えば検出対象物の仮想線Ｄ１の方向への移動を把握するために、フォトダイオードＳＤの検出値からフォトダイオードＳＵの検出値を減算した値を所定の時間で積分してもよい。図４の例では、領域Ｒ４１およびＲ４２において積分値は非ゼロの値となる。この積分値の変化（例えば正値、ゼロ、負値の変化）から、コントローラ１１は、仮想線Ｄ１の方向における検出対象物の移動を把握できる。
　また、コントローラ１１は、フォトダイオードＳＬの検出値からフォトダイオードＳＲの検出値を減算した値を所定の時間で積分してもよい。この積分値の変化（例えば正値、ゼロ、負値の変化）から、コントローラ１１は、仮想線Ｄ１に直交する方向（例えば図２に示す電子機器１の長手方向に略平行な方向）における検出対象物の移動を把握できる。
　代替例として、コントローラ１１はフォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの全ての検出値を用いて演算を行ってもよい。すなわち、コントローラ１１は検出対象物の移動方向を、電子機器１の長手方向および短手方向の成分に分離して演算することなく把握してもよい。
　検出されるジェスチャは例えば、左右のジェスチャ、上下のジェスチャ、斜めのジェスチャ、時計回りで円を描くジェスチャ、および反時計回りで円を描くジェスチャ等である。例えば左右へのジェスチャとは、電子機器１の長手方向と略平行な方向に行われるジェスチャである。上下のジェスチャとは、電子機器１の短手方向と略平行な方向に行われるジェスチャである。斜めのジェスチャとは、電子機器１の正面と略平行な平面において、電子機器１の長手方向と短手方向とのいずれとも平行でない方向に行われるジェスチャである。
（カーモード）
　図５は、ユーザがジェスチャにより電子機器１を操作する状況の一例を示す。図５に示すように、例えば電子機器１は、ディスプレイ１４が自動車のコンソールパネルにおいて中央に位置するように、配置される。図５の例で、ユーザは、目的地までの経路を電子機器１のディスプレイ１４に表示させた状態で、表示された経路を参照しながら、電子機器１が搭載された自動車に乗り込んで、当該自動車を運転している。このとき、近接センサ１８はユーザのジェスチャを検出可能な状態である。コントローラ１１は近接センサ１８が検出したジェスチャに基づく処理を行う。
　例えば、コントローラ１１は特定のジェスチャ（例えばユーザが手を上下に動かすジェスチャ）に応じて電子機器１から出力させている音の音量を調整する処理が可能である。電子機器１は、タッチスクリーンディスプレイにおいて、ユーザからのタッチ入力を受け付け可能である。しかしながら、ユーザは、運転中にタッチ入力を行おうとすると、タッチスクリーンディスプレイに手を伸ばすことによってステアリングの操作を誤ったりする可能性がある。また、ユーザは、運転中にディスプレイ１４においてタッチ入力を行おうとする位置を確認するためにディスプレイ１４に視線を移すことによって、周囲の状況確認がおろそかになったりする可能性もある。この場合、自動車の運転の安全性が低下する可能性がある。これに対し、本実施形態のように電子機器１がジェスチャによる入力操作を受付可能な場合には、ユーザは電子機器１に触れることなく入力操作を行うことができる。これにより、ユーザが運転中に入力操作を行う場合であっても、運転の安全性を確保しやすくなる。
　ここで、電子機器１はモードを複数有してよい。モードとは電子機器１の全体の動作について制限等を与える動作モード（動作状態または動作状況）を意味する。モードは同時に１つだけ選択可能である。本実施形態において、電子機器１のモードは第１モードおよび第２モードを含む。第１モードは、例えば運転以外の状況での使用に適している通常の動作モード（通常モード）である。運転以外の状況は、例えば、自動車のエンジンがかかっていない状態、シフトレバーが所定のレンジ（例えばパーキングレンジ）になっている状態、ブレーキが踏まれている状態、および、目的地までの経路の表示が行われていない状態のいずれかを含んでよい。第２モードは、目的地までの経路を電子機器１のディスプレイ１４に表示させて自動車を運転するのに適した電子機器１の動作モード（カーモード）である。上記で説明したように、第２モードの場合には、ジェスチャによる入力が可能であることが好ましい。つまり、電子機器１のモードが第２モードに切り替わる場合には、連動して近接センサ１８を動作させてジェスチャを検出可能にすることが好ましい。電子機器１は、例えばユーザによる電子機器１に対する所定の入力操作または自動車に対する所定の入力操作に基づいて、電子機器１のモードを切り替えてよい。
（ジェスチャの方向を決定する方法）
　次に、電子機器１のコントローラ１１による、ジェスチャの方向の決定処理について説明する。コントローラ１１によるジェスチャの方向の決定処理は、例えば、電子機器１が上述したカーモードである場合に実行されてもよい。
　電子機器１において、ジェスチャとして検出される方向は、予め定められていてよい。例えば、ジェスチャとして検出される方向は、上下方向および左右方向に定められていてよい。本実施形態では、説明を簡潔にするため、電子機器１においてジェスチャとして検出される方向が、上下方向および左右方向に定められているとして、以下説明する。すなわち、本実施形態では、以下、斜め方向のジェスチャについては考慮しない。ただし、これは本開示に係る電子機器１においてジェスチャとして検出される方向を限定するものではない。従って、電子機器１は、以下の説明と同様の方法で、斜め方向のジェスチャの検出を行ってもよい。
　電子機器１においてジェスチャとして検出される方向が、上下方向および左右方向に定められている場合、電子機器１のコントローラ１１は、ジェスチャを検出すると、検出したジェスチャが上下左右いずれの方向の操作であるかを決定する。コントローラ１１は、例えば、検出したジェスチャが、上下方向の操作であるか、左右方向の操作であるかを決定できる。例えば、コントローラ１１は、ジェスチャを検出すると、ジェスチャを上下方向の成分（移動量）と左右方向の成分（移動量）とに分解する。そして、コントローラ１１は、上下方向の成分が左右方向の成分よりも大きい場合、ジェスチャが上下方向の操作であると決定する。反対に、コントローラ１１は、左右方向の成分が上下方向の成分よりも大きい場合、ジェスチャが左右方向の操作であると決定できる。
　コントローラ１１は、例えば判定基準を用いて、ジェスチャの方向を決定する。判定基準は、ジェスチャの方向を決定するための基準であり、例えば予めストレージ１６に記憶されていてよい。
　図６は、判定基準を用いた、ジェスチャの方向の決定方法について説明するための概念図である。図６では、直交座標系が設定されており、ｘ軸が左右方向、ｙ軸が上下方向にそれぞれ対応付けられている。判定基準は、図６に一例として示すように、２つの直線Ｌ１およびＬ２により構成される。以下、本明細書において、角度について言及する場合には、ｘ軸正方向を基準（０度）とし、反時計回りを角度の正方向とする。従って、ｙ軸正方向は、９０度である。
　図６に示す判定基準では、直線Ｌ１は４５度、直線Ｌ２は－４５度（つまり３１５度）に設定されている。つまり、図６に示す判定基準では、直線Ｌ１と直線Ｌ２とは、直交している。直線Ｌ１と直線Ｌ２とにより区分される４つの領域が、それぞれ、上方向、下方向、右方向および左方向に対応付けられている。具体的には、２つの直線Ｌ１およびＬ２によって区分される４つの領域のうち、－４５度から４５度の領域が右方向、４５度から１３５度の領域が上方向、１３５度から２２５度の領域が左方向、２２５度から３１５度の領域が下方向に対応付けられている。図６に示された判定基準を、本明細書において、以下、「標準判定基準」とも称する。
　コントローラ１１は、近接センサ１８からの出力（検出値）に基づいて、ジェスチャが示すベクトルの方向を算出し、判定基準を用いて、算出したベクトルがいずれの方向を示すかを判定する。例えば、コントローラ１１は、近接センサ１８からの出力に基づいて算出したジェスチャのベクトルが、図６の矢印Ａ１に示すように９０度の方向である場合、図６の標準判定基準を用いて、当該ジェスチャが上方向のジェスチャであると判定できる。また、例えば、コントローラ１１は、近接センサ１８からの出力に基づいて算出したジェスチャのベクトルが、図６の矢印Ａ２に示すように３０度の方向である場合、図６の標準判定基準を用いて、当該ジェスチャが右方向のジェスチャであると判定できる。
　ところで、標準判定基準を用いてジェスチャの方向が判定される場合、ユーザのジェスチャは、ユーザが意図する方向のジェスチャとして判定されない場合がある。例えば、図５に示すように、自動車内において、ディスプレイ１４および近接センサ１８がコンソールパネルの中央に配置され、運転席が進行方向に向かって右側に配置されているとする。例えば、運転席に座ったユーザがジェスチャによる入力を行うに際し、上方向の操作を行うことを意図して、手を下方向から上方向に動かすジェスチャを行うとする。自動車内において、運転席は進行方向に向かって右側に配置され、近接センサ１８は中央に配置されている。このため、運転席に座るユーザがジェスチャによる入力を行う場合、ユーザは左手でジェスチャを行うのが自然である。このとき、人体の構造上、左手の手のひらは、図７に手の動きを矢印Ａ３で模式的に示すように、左手の肘または肩を軸として弧を描くように移動する。この場合、ユーザが行ったジェスチャは、ユーザが意図した上方向の成分と、手のひらが弧を描いたことにより生じる右方向の成分とを有する。
　矢印Ａ３で模式的に示すジェスチャが行われた場合、コントローラ１１は、当該ジェスチャを検出した近接センサ１８からの出力に基づいて、当該ジェスチャが示すベクトルの方向を算出する。具体的には、コントローラ１１は、近接センサ１８からの出力に基づいて、上方向の成分と右方向の成分との大きさを算出し、上方向の成分および右方向の成分の大きさから、ジェスチャが示すベクトルの方向（つまり図７の矢印Ａ４で模式的に示す方向）を算出する。コントローラ１１は、算出したベクトルの方向に基づき、判定基準を用いて、ジェスチャの方向を決定する。
　矢印Ａ３で模式的に示すジェスチャにおいて、上方向の成分より右方向の成分の方が大きい場合、ジェスチャが示すベクトルの方向は、４５度未満となる。この場合、コントローラ１１が標準判定基準を用いてジェスチャが示すベクトルの方向を決定すると、ジェスチャは、右方向へのジェスチャであると決定される。しかしながら、当該ジェスチャにおいて、ユーザが意図したのは上方向の操作であるため、コントローラ１１が右方向のジェスチャであると決定して、右方向の処理を行うと、誤操作となる。
　本実施形態に係る電子機器１のコントローラ１１は、運転席の位置に応じてユーザが自機器（電子機器１）を操作する手を決定し、決定したユーザが操作する手に応じて、ユーザのジェスチャの方向を決定する。これにより、上述のような誤操作を防止しやすくする。具体的には、本実施形態に係る電子機器１のコントローラ１１は、電子機器１が搭載された自動車において、運転席の位置を決定し、決定した運転席の位置に応じてユーザが自機器を操作する手を決定する。さらに、電子機器１のコントローラ１１は、決定した自機器を操作する手に応じて、ジェスチャの方向を判定するための判定基準を決定し、決定した判定基準を用いてジェスチャの方向を決定する。これにより、電子機器１は、誤操作を防止しやすくなる。本実施形態に係る電子機器１のコントローラ１１が実行する制御の詳細について説明する。
（運転席の位置の決定方法）
　コントローラ１１は、電子機器１が搭載された自動車において、運転席の位置を決定する。例えば、一例として図８に示すように、自動車３０は、進行方向に向かって、前列および後列にそれぞれ２つの座席を備え、右側および左側にそれぞれ２つの座席を備えるとする。すなわち、自動車３０は、前列右側、前列左側、後列右側、および後列左側に、それぞれ座席３１ないし３３を備える。また、自動車３０には、前列の前方側の中央に、ディスプレイ１４および近接センサ１８が配置されている。コントローラ１１は、例えば、図８に示す自動車３０において、座席３１ないし３３のいずれが運転席であるかを決定する。コントローラ１１は、ここで説明する方法の１つを用いて、または２つ以上を組み合わせて、運転席の位置を決定できる。
　なお、ここで、運転席は、自動車３０の運転を行うユーザが座る座席をいう。自動車３０がステアリングを備え、ユーザがステアリングを操作して運転を行う場合、運転席はステアリングが配置された位置の正面の座席である。通常は、自動車３０のステアリングは前列のいずれかの座席の正面に配置されるため、前列右側の座席３１または前列左側の座席３２が運転席の位置として決定される。
　例えば、コントローラ１１は、予めストレージ１６に記憶された情報に基づいて、運転席の位置を決定してよい。例えば、電子機器１が予め自動車３０に備え付けられている場合、ストレージ１６には、運転席の位置に関する情報が記憶されていてよい。あるいは、ユーザが電子機器１に対して入力操作を行うことにより、運転席の位置に関する情報を入力した場合、ストレージ１６には、運転席の位置に関する情報が記憶されていてよい。この場合、コントローラ１１は、ストレージ１６に記憶された運転席の位置に関する情報に基づいて、運転席の位置を決定できる。
　例えば、コントローラ１１は、カメラ１３で撮像した画像に基づいて、運転席の位置を決定してもよい。具体的には、コントローラ１１は、ジェスチャに基づく制御を実行する場合（例えば電子機器１が第１の動作モードである場合）に、カメラ１３を起動する。カメラ１３は、ディスプレイ１４の正面側、つまり自動車３０の内部を撮像する。コントローラ１１は、カメラ１３が撮像した画像を解析して、ステアリングの正面の座席の位置を、運転席の位置と決定してよい。コントローラ１１は、カメラ１３が撮像した画像を解析して、ステアリングの正面の座席にユーザが映り込んでいる場合に、当該座席の位置を、運転席の位置と決定してもよい。コントローラ１１は、運転席の位置を決定した場合、カメラ１３の動作を停止してもよい。これにより、コントローラ１１は、カメラ１３による消費電力を抑えることができる。
　例えば、コントローラ１１は、各座席３１ないし３４に圧力センサが設けられている場合、圧力センサの出力に基づいて、運転席の位置を決定してもよい。圧力センサは、例えば、各座席３１ないし３４において、ユーザが座ったときに荷重がかかる座面の下に設けられていてよい。圧力センサは、各座席３１ないし３４の座面にかかる圧力を検出する。コントローラ１１は、ユーザが自動車に乗り込んで座席に座ったときに、当該座席に配置された圧力センサからの出力に基づいて、ユーザが座った座席を特定することができる。コントローラ１１は、ユーザが座った座席の位置を、運転席の位置と決定してよい。この方法は、例えば、自動車に乗り込む人がユーザ１人の場合に用いることができる。
　例えば、コントローラ１１は、電子機器１に電源が供給された後に最初にジェスチャが検出された方向に基づいて、運転席の位置を決定してもよい。ユーザは、電子機器１を使用するために、電子機器１の電源をオンにしたり、自動車のエンジンをかけることによって電子機器１に電源が供給されたりした後、電子機器１を操作するために、手を近づける。この場合、ユーザの手は、ユーザが座っている座席の方向から伸びてくる。つまり、ユーザが進行方向に向かって右側に座っていれば、ユーザの手は、進行方向に向かって近接センサ１８の右側から伸びてくる。反対に、ユーザが進行方向に向かって左側に座っていれば、ユーザの手は、進行方向に向かって近接センサ１８の左側から伸びてくる。そこで、電子機器１は、近接センサ１８によって最初にジェスチャを検出した方向に、ユーザが存在すると判定することができる。自動車３０を運転するに際して、電子機器１の操作を行おうとするユーザは、通常、当該自動車３０を運転するユーザであると考えられるため、コントローラ１１は、最初にジェスチャを検出した方向に、運転席の位置があると決定することができる。
　例えば、コントローラ１１は、各座席３１ないし３４の正面に人感センサが設けられている場合、人感センサの出力に基づいて、運転席の位置を決定してもよい。人感センサは、例えば、赤外線を利用して周囲の温度変化を感知することにより、座席３１ないし３４にユーザが座ったか否かを検出するものであってよい。コントローラ１１は、ユーザが自動車に乗り込んで座席に座ったときに、当該座席の正面に配置された人感センサからの出力に基づいて、ユーザが座った座席を特定することができる。コントローラ１１は、ユーザが座った座席の位置を、運転席の位置と決定してよい。この方法は、例えば、自動車に乗り込む人がユーザ１人の場合に用いることができる。
　例えば、コントローラ１１は、自動車３０のドアの開閉に基づいて、運転席の位置を決定してもよい。例えば、自動車３０は、各座席３１ないし３４の近くに、それぞれ１つずつドアを備えるとする。具体的には、自動車３０は、前列右側の座席３１の右側、前列左側の座席３２の左側、後列右側の座席３３の右側、および後列左側の座席３４の左側に、それぞれ１つのドアを備えるとする。また、各ドアには、開閉を検出するセンサが設けられているとする。コントローラ１１は、開閉が行われたドアの最も近くの座席に、ユーザが座ると判定することができる。ユーザは、通常、座ろうとする座席の最も近くのドアから自動車３０に乗り込むと考えられるためである。コントローラ１１は、ユーザが座ると判定した座席の位置を、運転席の位置と決定してよい。この方法は、例えば、自動車に乗り込む人がユーザ１人の場合に用いることができる。
　例えば、コントローラ１１は、自動車３０のドアのロックを解除した位置に基づいて、運転席の位置を決定してもよい。上述のように自動車３０に複数のドアが設けられている場合、コントローラ１１は、ロックの解除操作が行われたドアの最も近くの座席に、ユーザが座ると判定することができる。ユーザは、通常、座ろうとする座席の最も近くのドアにおいてロックを解除し、当該ドアから自動車３０に乗り込むと考えられるためである。コントローラ１１は、ユーザが座ると判定した座席の位置を、運転席の位置と決定してよい。この方法は、例えば、自動車に乗り込む人がユーザ１人の場合に用いることができる。
　例えば、コントローラ１１は、タッチスクリーンディスプレイを操作した手に基づいて、運転席の位置を決定してもよい。例えば、ユーザは、左右の指の指紋のデータを予め電子機器１のストレージ１６に記憶させる。ユーザは、例えば、指紋のデータを登録するための入力操作を行って、指紋のデータを電子機器１のストレージ１６に記憶させることができる。そして、コントローラ１１は、自動車３０の運転を行うに際して電子機器１に電源が供給された状態で、タッチスクリーンディスプレイにユーザの指が触れたときに、当該タッチスクリーンディスプレイに触れた指の指紋を読み取り、当該指がユーザの右手の指であるか、左手の指であるかを判定する。コントローラ１１は、決定した手の方向（つまり右手であるか左手であるか）と反対側の座席が、ユーザが座っている座席であると判定する。例えば、ユーザが右側の座席に座っている場合には、ユーザは、中央に配置されたタッチスクリーンディスプレイに対して、左手でタッチ入力を行うことが想定される。そこで、コントローラ１１は、タッチスクリーンディスプレイに触れた指がユーザの左手であると判定した場合、ユーザが右側の座席に座っていると判定する。反対に、ユーザが左側の座席に座っている場合には、ユーザは、中央に配置されたタッチスクリーンディスプレイに対して、右手でタッチ入力を行うことが想定される。そこで、コントローラ１１は、タッチスクリーンディスプレイに触れた指がユーザの右手であると判定した場合、ユーザが左側の座席に座っていると判定する。コントローラ１１は、ユーザが座っていると判定した座席の位置を、運転席の位置と決定してよい。
　例えば、コントローラ１１は、マイク１５が検出した音に基づいて、運転席の位置を決定してもよい。例えば、コントローラ１１は、マイク１５が検出した音について、音が発生した方向を決定する。コントローラ１１は、決定した音が発生した方向が、ユーザが存在する方向であると判定できる。そこで、コントローラ１１は、音が発生した方向にある座席の位置を、運転席の位置と決定してよい。
（自機器を操作する手の決定方法）
　コントローラ１１は、運転席の位置に基づいて、ユーザが自機器を操作する手を決定する。ユーザが自機器を操作する手は、例えばユーザが自機器を操作するためにジェスチャを行う手であってよい。例えば、ユーザが自機器をジェスチャで操作するために、右手でジェスチャを行う場合、自機器を操作する手は、右手を意味する。反対に、ユーザが左手でジェスチャを行う場合、自機器を操作する手は、左手を意味する。
　コントローラ１１は、例えば、上述のようにして決定した運転席の位置とは左右反対側の手を、ユーザが自機器を操作する手として決定してよい。つまり、コントローラ１１は、例えば、運転席の位置が進行方向に向かって右側にあると判定した場合には、左手を、自機器を操作する手として決定してよい。同様に、コントローラ１１は、例えば、運転席の位置が進行方向に向かって左側にあると判定した場合には、右手を、自機器を操作する手として決定してよい。コントローラ１１は、例えば電子機器１の近接センサ１８がコンソールパネルの中央に配置されている場合に、このように自機器を操作する手を決定することで、ユーザが実際に電子機器１を操作する手を的確に決定しやすくなる。
　なお、コントローラ１１は、自動車内における近接センサ１８の配置によっては、上述した方法とは異なる方法で、自機器を操作する手を決定してもよい。コントローラ１１は、近接センサ１８の位置と、運転席との位置関係に応じて、運転席に座るユーザがジェスチャ操作を行う可能性が高い方の手を、ユーザが自機器を操作する手として決定してよい。コントローラ１１は、例えば、近接センサ１８に近い方の手を、自機器を操作する手として決定してよい。
（判定基準に基づくジェスチャの決定方法）
　コントローラ１１は、例えば上述のようにして決定したユーザが自機器を操作する手に応じて、判定基準を決定する。すなわち、コントローラ１１は、ユーザがジェスチャを行う手が決定されている状態で、当該ジェスチャを行う手に応じて、判定基準を決定する。
　コントローラ１１は、ジェスチャを行う手が左手である場合、左手の判定基準を用いてジェスチャの方向を判定する。左手の判定基準とは、左手による動作の性質を踏まえて、左手で操作を行った場合にユーザの意図に応じたジェスチャの方向の決定を行いやすい判定基準である。左手による動作の性質は、図７を参照して説明したように、例えば、上方向の操作に対して、右方向の成分が含まれやすくなるという性質を含む。左手による動作の性質は、例えば、下方向の操作に対して、図７を参照して説明したのと同様の理由により左方向の成分が含まれやすくなるという性質を含む。
　図９は、左手の判定基準の一例を示す図である。左手の判定基準は、図９に一例として示すように、２つの直線Ｌ１ＲおよびＬ２Ｒにより構成される。直線Ｌ１ＲおよびＬ２Ｒは、それぞれ図９に破線で示される直線Ｌ１およびＬ２を、所定の角度右方向（負方向）に回転させた直線である。図９では、所定の角度は２０度である。つまり、図９に示す直線Ｌ１ＲおよびＬ２Ｒは、それぞれ直線Ｌ１およびＬ２を２０度右方向（負方向）に回転させた直線である。
　図９に示す左手の判定基準では、２つの直線Ｌ１ＲおよびＬ２Ｒにより区分される４つの領域が、それぞれ、上方向、下方向、右方向および左方向に対応付けられる。具体的には、２つの直線Ｌ１ＲおよびＬ２Ｒによって区分される４つの領域のうち、－６５度から２５度の領域が右方向、２５度から１１５度の領域が上方向、１１５度から２０５度の領域が左方向、２０５度から２９５度の領域が下方向に対応付けられる。
　図９に示す左手の判定基準を用いた場合、コントローラ１１は、近接センサ１８からの出力に基づいて算出したジェスチャのベクトルが、矢印Ａ１に示すように９０度の方向である場合に、当該ジェスチャが上方向のジェスチャであると判定できる。また、コントローラ１１は、近接センサ１８からの出力に基づいて算出したジェスチャのベクトルが、矢印Ａ２に示すように３０度の方向である場合にも、当該ジェスチャが上方向のジェスチャであると判定できる。すなわち、矢印Ａ２に示す３０度の方向のジェスチャは、標準判定基準を用いると、右方向のジェスチャであると決定されるが、左手の判定基準を用いると、上方向のジェスチャであると決定される。
　左手でジェスチャが行われる場合には、上述したように、上方向のジェスチャに対して、右方向の成分が含まれやすくなる。ユーザが上方向の操作を意図して行ったジェスチャに右方向の成分が含まれることによって当該ジェスチャが矢印Ａ２に示す３０度の方向のジェスチャであると判断された場合、コントローラ１１は、標準判定基準を用いると、当該ジェスチャを右方向のジェスチャであると決定する。しかしながらユーザが意図したジェスチャは、上方向のジェスチャであるため、右方向のジェスチャであるとの決定は、誤操作の原因となる。これに対し、同じジェスチャであっても、コントローラ１１は、左手の判定基準を用いた場合、当該ジェスチャを上方向のジェスチャであると決定する。そのため、左手の判定基準を用いることによって、コントローラ１１は、ユーザの意図した制御を実行しやすくなる。そのため、電子機器１によれば、ジェスチャによる入力操作において誤操作を防止しやすくなる。
　図１０は、左手の判定基準の他の一例を示す図である。図１０に示す左手の判定基準は、２つの直線Ｌ１ＲおよびＬ２により構成される。直線Ｌ１Ｒは、直線Ｌ１を、所定の角度（例えば２０度）右方向（負方向）に回転させた直線である。直線Ｌ２は、図６を参照して説明したものと同じ直線である。
　図１０に示す左手の判定基準では、２つの直線Ｌ１ＲおよびＬ２により区分される４つの領域が、それぞれ、上方向、下方向、右方向および左方向に対応付けられる。具体的には、２つの直線Ｌ１ＲおよびＬ２によって区分される４つの領域のうち、－４５度から２５度の領域が右方向、２５度から１３５度の領域が上方向、１３５度から２０５度の領域が左方向、２０５度から３１５度の領域が下方向に対応付けられる。
　コントローラ１１は、図１０に示す左手の判定基準を用いた場合においても、矢印Ａ１に示す９０度の方向のジェスチャを、上方向のジェスチャと判定し、矢印Ａ２に示す３０度の方向のジェスチャを、上方向のジェスチャと判定する。そのため、コントローラ１１は、図１０に示す左手の判定基準を用いた場合においても、図９に示した左手の判定基準を用いた場合と同様に、ユーザの意図した制御を実行しやすくなる。そのため、電子機器１によれば、ジェスチャによる入力操作において誤操作を防止しやすくなる。
　左手でジェスチャを行う場合には、人体の構造上、上下左右のいずれの方向をユーザが意図してジェスチャを行った場合であっても、右下方向および左上方向の成分を含むジェスチャとして検出されにくい。そのため、左手の判定基準においても、右下方向から左上方向について境界を形成する直線Ｌ２については、図１０の例で示すように、標準判定基準と同じ直線を用いることができる。
　コントローラ１１は、ジェスチャを行う手が右手である場合、右手の判定基準を用いてジェスチャの方向を判定する。右手の判定基準とは、右手による動作の性質を踏まえて、右手で操作を行った場合にユーザの意図に応じたジェスチャの方向の決定を行いやすい判定基準である。右手による動作の性質は、左手による動作に対して左右対称となる性質であり、例えば、上方向の操作に対して、左方向の成分が含まれやすくなるという性質を含む。右手による動作の性質は、例えば、下方向の操作に対して、右方向の成分が含まれやすくなるという性質を含む。
　図１１は、右手の判定基準の一例を示す図である。右手の判定基準は、図１１に一例として示すように、２つの直線Ｌ１ＬおよびＬ２Ｌにより構成される。直線Ｌ１ＬおよびＬ２Ｌは、それぞれ図６に破線で示される直線Ｌ１およびＬ２を、所定の角度左方向（正方向）に回転させた直線である。図１１では、所定の角度は２０度である。つまり、図１１に示す直線Ｌ１ＬおよびＬ２Ｌは、それぞれ直線Ｌ１およびＬ２を２０度左方向（正方向）に回転させた直線である。
　図１１に示す右手の判定基準では、２つの直線Ｌ１ＬおよびＬ２Ｌにより区分される４つの領域が、それぞれ、上方向、下方向、右方向および左方向に対応付けられる。具体的には、２つの直線Ｌ１ＬおよびＬ２Ｌによって区分される４つの領域のうち、－２５度から６５度の領域が右方向、６５度から１５５度の領域が上方向、１５５度から２４５度の領域が左方向、２４５度から３３５度の領域が下方向に対応付けられる。
　コントローラ１１は、図１１に示す右手の判定基準を用いた場合、上記左手の判定基準に関して詳細に説明したのと同様の理由で、右手で行われたジェスチャについて、ユーザの意図した制御を実行しやすくなる。そのため、電子機器１によれば、ジェスチャによる入力操作において誤操作を防止しやすくなる。
　図１２は、右手の判定基準の他の一例を示す図である。図１２に示す右手の判定基準は、２つの直線Ｌ１およびＬ２Ｌにより構成される。直線Ｌ２Ｌは、直線Ｌ２を、所定の角度（例えば２０度）左方向（正方向）に回転させた直線である。直線Ｌ１は、図６を参照して説明したものと同じ直線である。
　図１２に示す右手の判定基準では、２つの直線Ｌ１およびＬ２Ｌにより区分される４つの領域が、それぞれ、上方向、下方向、右方向および左方向に対応付けられる。具体的には、２つの直線Ｌ１およびＬ２Ｌによって区分される４つの領域のうち、－２５度から４５度の領域が右方向、４５度から１５５度の領域が上方向、１５５度から２２５度の領域が左方向、２２５度から３３５度の領域が下方向に対応付けられる。
　コントローラ１１は、図１２に示す右手の判定基準を用いた場合も、上記左手の判定基準に関して詳細に説明したのと同様の理由で、右手で行われたジェスチャについて、ユーザの意図した制御を実行しやすくなる。そのため、電子機器１によれば、ジェスチャによる入力操作において誤操作を防止しやすくなる。
　図９から図１２の説明においては、判定基準を構成する直線の回転角度（所定の角度）が２０度である場合について説明したが、所定の角度は、２０度に限られない。所定の角度は、ジェスチャの方向を、ユーザの意図した方向に決定しやすい任意の角度であってよい。
　また、左手の判定基準および右手の判定基準は、図９から図１２に示すものに限られない。左手の判定基準および右手の判定基準は、ジェスチャを行う手に応じて、ジェスチャの方向を、ユーザの意図した方向に決定しやすい任意の基準とすることができる。
（コントローラが実行する処理のフロー）
　図１３は、電子機器１のコントローラ１１が実行する処理の一例を示すフローチャートである。
　コントローラ１１は、上記説明した方法により、自動車における運転席の位置を決定する（ステップＳ１）。
　コントローラ１１は、ステップＳ１で決定した運転席の位置に基づき、ユーザが自機器を操作する手、つまりジェスチャを行う手を決定する（ステップＳ２）。
　コントローラ１１は、ステップＳ２によりジェスチャを行う手が決定した状態で、ジェスチャを行う手に基づいて、ジェスチャの方向の決定のために用いる判定基準を決定する（ステップＳ３）。
　コントローラ１１は、近接センサ１８からの出力を取得する（ステップＳ４）。
　コントローラ１１は、ステップＳ４で取得した近接センサ１８からの出力に基づいて、ステップＳ３で決定した判定基準を用いて、ジェスチャの方向を決定する（ステップＳ５）。
　コントローラ１１は、ステップＳ５で決定したジェスチャの方向に応じて、制御を行う（ステップＳ６）。
　以上説明したように、本実施形態に係る電子機器１は、運転席の位置に応じてユーザがジェスチャを行う手を決定し、決定したユーザがジェスチャを行う手に応じて、近接センサ１８からの出力に基づいて、ユーザのジェスチャの方向を決定する。そのため、電子機器１は、ユーザのジェスチャを、ユーザが意図する操作として検出しやすくなる。これにより、ジェスチャによる入力操作において誤操作を防止しやすくなる。また、仮に運転中にジェスチャによる入力操作において誤操作が発生した場合、自動車を運転しているユーザは、入力された操作に基づく処理の内容を把握するために、視線をディスプレイ１４に移す可能性がある。本実施形態に係る電子機器１によれば、誤操作を防止することにより、このようにユーザの視線がディスプレイ１４に向けられることを防止しやすくなる。そのため、ユーザは、運転に集中しやすくなり、運転の安全性が向上する。
（その他の実施形態）
　本発明を図面および実施形態に基づき説明してきたが、当業者であれば本開示に基づき種々の変形および修正を行うことが容易であることに注意されたい。したがって、これらの変形および修正は本発明の範囲に含まれることに留意されたい。例えば、各手段または各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段またはステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。
　上記の実施形態では、ジェスチャは、近接センサ１８により検出されると説明したが、必ずしも近接センサ１８により検出されなくてもよい。ジェスチャは、自機器に触れずにユーザのジェスチャを検出可能な任意のセンサにより検出されてもよい。このようなセンサの一例は、例えば、カメラ１３等を含む。
　自機器に触れずにユーザのジェスチャを検出可能なセンサは、例えば測距センサを含んでよい。例えば、電子機器１は、近接センサ１８に代えて、または近接センサ１８とともに、測距センサを含み、測距センサにより、ジェスチャを検出してもよい。
　測距センサは、対象物との距離を測定可能なセンサである。測距センサは、例えばＴｏＦ（Ｔｉｍｅ　ｏｆ　Ｆｌｉｇｈｔ）センサにより構成されていてよい。ＴｏＦセンサとして構成される測距センサは、正弦波変調光（赤外レーザ光）を対象物に向けて照射する発光部と、照射された赤外レーザ光の対象物からの反射光を受光する受光部とを備える。受光部は、例えば複数の受光素子を配置したイメージセンサを有する。ＴｏＦセンサは、赤外レーザ光を照射してから、各受光素子で反射光を受光するまでの時間（飛行時間）を測定する。ＴｏＦセンサは、照射した赤外レーザ光と、受光した反射光との位相差に基づき、飛行時間を測定できる。ＴｏＦセンサは、測定した飛行時間に基づき、照射した赤外レーザ光を反射した対象物までの距離を測定できる。ＴｏＦセンサは、対象物からの反射光が複数の受光素子それぞれに入射する時間差により対象物の移動方向を検出することができる。これにより、ＴｏＦセンサも、近接センサ１８で説明した原理と同様の原理で、ユーザが行うジェスチャを検出することができる。測距センサは、電子機器１において、例えば近接センサ１８が配置された面と同じ面に配置されてよい。
　ここで、図１４から図１６を参照しながら、コントローラ１１が測距センサの出力に基づいてユーザのジェスチャを検出する方法を説明する。図１４は、測距センサ２６を模式的に示す図である。図１４は、側面視における測距センサ２６を示している。測距センサ２６は、発光部２６ａと受光部２６ｂとを備える。発光部２６ａおよび受光部２６ｂは、電子機器１の長手方向と略平行に配置されているとする。発光部２６ａは、赤外レーザ光を対象物に向けて照射する。受光部２６ｂは、照射された赤外光の対象物からの反射光を受光する。
　受光部２６ｂは、複数の受光素子を備えていてよい。例えば、受光部２６ｂは、図１５に示すように、３行×３列に配置された９つの受光素子を備えていてよい。９つの受光素子は、それぞれ対象物からの反射光を受光する。受光部２６ｂにおいて、上段には、電子機器１の長手方向と略平行に、左から順にＣｈ１１、Ｃｈ１２およびＣｈ１３の３つの受光素子が配置されている。受光部２６ｂにおいて、中段には、電子機器１の長手方向と略平行に、左から順にＣｈ２１、Ｃｈ２２およびＣｈ２３の３つの受光素子が配置されている。受光部２６ｂにおいて、下段には、電子機器１の長手方向と略平行に、左から順にＣｈ３１、Ｃｈ３２およびＣｈ３３の３つの受光素子が配置されている。
　測距センサ２６は、発光部２６ａが照射した赤外レーザ光と、受光部２６ｂの９つの受光素子がそれぞれ受光した反射光との位相差に基づき、９つの受光素子それぞれから対象物までの距離を測定できる。測距センサ２６は、９つの受光素子それぞれから対象物までの距離と、時間経過に伴う距離の変化に基づいて、ジェスチャを検出することができる。
　例えば、ユーザが手を左から右に動かすジェスチャを行ったとする。このとき、例えば中段の受光素子Ｃｈ２１、Ｃｈ２２およびＣｈ２３により検出される、対象物までの距離をそれぞれＤ２１、Ｄ２２およびＤ２３とする。図１６は、各受光素子により検出される対象物までの距離の推移を模式的に示す図である。例えば図１６に模式的に示すように、まず、対象物である手が最初に左側に配置された受光素子Ｃｈ２１に近づくため、受光素子Ｃｈ２１により検出される対象物の距離Ｄ２１が近くなる。その後、対象物である手が中央に配置された受光素子Ｃｈ２２に近づくと、受光素子Ｃｈ２２により検出される対象物の距離Ｄ２２が近くなる。最後に、対象物である手が右側に移動すると、右側に配置された受光素子Ｃｈ２３により検出される対象物の距離Ｄ２３が近くなる。各受光素子Ｃｈ２１、Ｃｈ２２およびＣｈ２３に近づいた手が遠ざかる順序も、Ｃｈ２１、Ｃｈ２２、Ｃｈ２３の順である。そのため、距離Ｄ２１、Ｄ２２およびＤ２３は、この順序で大きくなる（初期値に戻る）。上下方向のジェスチャも、同様の原理により、例えば短手方向に配置された受光素子Ｃｈ１２、Ｃｈ２２およびＣｈ３２を用いて検出することができる。このように、測距センサ２６は、９つの受光素子それぞれから対象物までの距離と、時間経過に伴う距離の変化に基づいて、ジェスチャを検出することができる。
　なお、ここでは、受光部２６ｂが９つの受光素子を備えるとして説明したが、受光部２６ｂが備える受光素子の数量はこれに限られない。複数の受光素子の配置も図１５に示す配置に限られない。受光部２６ｂが備える受光素子の数量およびその配置は、検出するジェスチャの種類に応じて、適宜定められてよい。
　また、測距センサ２６の発光部２６ａは、複数の発光素子を備えていてもよい。この場合、各発光素子から発光される赤外レーザ光と、受光部２６ｂが受光する反射光との位相差に基づき、９つの発光素子それぞれから対象物までの距離を測定できる。この場合においても、測距センサ２６は、９つの発光素子それぞれから対象物までの距離と、時間経過に伴う距離の変化に基づいて、上述の原理を応用することにより、ジェスチャを検出することができる。
　上記実施形態において、コントローラ１１は、決定した運転席の位置に応じて、近接センサ１８によるジェスチャの検出範囲を変更してよい。ジェスチャの検出範囲は、近接センサ１８により検出可能な方向を含んでよい。例えば、コンソールパネルにおいて近接センサ１８が左右方向に可動に設けられているとする。コントローラ１１は、決定した運転席の方向に、近接センサ１８を向けるように制御してもよい。つまり、例えば、コントローラ１１は、運転席が進行方向に向かって右側であると判定した場合、近接センサ１８を進行方向に向かって右側に向けてよい。同様に、コントローラ１１は、運転席が進行方向に向かって左側であると判定した場合、近接センサ１８を進行方向に向かって左側に向けてよい。近接センサ１８は、ジェスチャを検出可能な視野角が限られているため、ユーザがジェスチャを行っても、近接センサ１８の検出可能範囲外である場合には、ユーザのジェスチャは検出されない。しかしながら、近接センサ１８の検出範囲を変更し、例えば、ユーザが座っている運転席の方向に近接センサ１８の検出範囲を向けることにより、近接センサ１８は、ユーザのジェスチャを、より検出しやすくなる。近接センサ１８がユーザのジェスチャを検出しやすくなることによって、ユーザにとってはジェスチャによる入力が見落とされにくくなるため、より運転に集中しやすくなる。そのため、運転の安全性が向上する。
　本開示内容の多くの側面は、プログラム命令を実行可能なコンピュータシステムその他のハードウェアにより実行される、一連の動作として示される。コンピュータシステムその他のハードウェアには、例えば、汎用コンピュータ、ＰＣ（パーソナルコンピュータ）、専用コンピュータ、ワークステーション、ＰＣＳ（Personal Communications System、パーソナル移動通信システム）、移動（セルラー）電話機、データ処理機能を備えた移動電話機、ＲＦＩＤ受信機、ゲーム機、電子ノートパッド、ラップトップコンピュータ、ＧＰＳ（Global Positioning System）受信機またはその他のプログラム可能なデータ処理装置が含まれる。各実施形態では、種々の動作または制御方法は、プログラム命令（ソフトウェア）で実装された専用回路（例えば、特定機能を実行するために相互接続された個別の論理ゲート）、一以上のプロセッサにより実行される論理ブロックおよび／またはプログラムモジュール等により実行されることに留意されたい。論理ブロックおよび／またはプログラムモジュール等を実行する一以上のプロセッサには、例えば、一以上のマイクロプロセッサ、ＣＰＵ（中央演算処理ユニット）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＤＳＰ（Digital Signal Processor）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、電子機器、ここに記載する機能を実行可能に設計されたその他の装置および／またはこれらいずれかの組合せが含まれる。ここに示す実施形態は、例えば、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコードまたはこれらいずれかの組合せにより実装される。命令は、必要なタスクを実行するためのプログラムコードまたはコードセグメントであってもよい。そして、命令は、機械読取り可能な非一時的記憶媒体その他の媒体に格納することができる。コードセグメントは、手順、関数、サブプログラム、プログラム、ルーチン、サブルーチン、モジュール、ソフトウェアパッケージ、クラスまたは命令、データ構造もしくはプログラムステートメントのいずれかの任意の組合せを示すものであってもよい。コードセグメントは、他のコードセグメントまたはハードウェア回路と、情報、データ引数、変数または記憶内容の送信および／または受信を行い、これにより、コードセグメントが他のコードセグメントまたはハードウェア回路と接続される。
　ここで用いられるストレージ１６は、さらに、ソリッドステートメモリ、磁気ディスクおよび光学ディスクの範疇で構成されるコンピュータ読取り可能な有形のキャリア（媒体）として構成することができる。かかる媒体には、ここに開示する技術をプロセッサに実行させるためのプログラムモジュール等のコンピュータ命令の適宜なセットまたはデータ構造が格納される。コンピュータ読取り可能な媒体には、一つ以上の配線を備えた電気的接続、磁気ディスク記憶媒体、磁気カセット、磁気テープ、その他の磁気および光学記憶装置（例えば、ＣＤ（Compact Disk）、レーザーディスク（登録商標）、ＤＶＤ（登録商標）（Digital Versatile Disc）、フロッピー（登録商標）ディスクおよびブルーレイディスク（登録商標))、可搬型コンピュータディスク、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）もしくはフラッシュメモリ等の書換え可能でプログラム可能なＲＯＭもしくは情報を格納可能な他の有形の記憶媒体またはこれらいずれかの組合せが含まれる。メモリは、プロセッサまたはプロセッシングユニットの内部および／または外部に設けることができる。ここで用いられるように、「メモリ」という語は、あらゆる種類の長期記憶用、短期記憶用、揮発性、不揮発性またはその他のメモリを意味する。つまり、「メモリ」は特定の種類および／または数に限定されない。また、記憶が格納される媒体の種類も限定されない。
１　電子機器
１１　コントローラ
１２　タイマー
１３　カメラ
１４　ディスプレイ
１５　マイク
１６　ストレージ
１７　通信ユニット
１８　近接センサ
１９　ＵＶセンサ
２０　照度センサ
２１　加速度センサ
２２　地磁気センサ
２３　気圧センサ
２４　ジャイロセンサ
２５　スピーカー
２６　測距センサ
２６ａ　発光部
２６ｂ　受光部
３０　自動車
３１、３２、３３、３４　座席
１８０　光源用赤外ＬＥＤ
１８１　レンズ
ＳＵ，ＳＲ，ＳＤ，ＳＬ　フォトダイオード
 
 

Claims (12)

  1. 　自機器に触れずにジェスチャを検出するセンサと、
    　運転席の位置に応じてユーザが操作する手を決定し、前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するコントローラと、
    を備える電子機器。
  2. 　前記コントローラは、前記運転席の位置とは反対側の手を、前記ユーザが操作する手として決定する、請求項１に記載の電子機器。
  3. 　前記コントローラは、当該電子機器に電源が供給された後に最初にジェスチャが検出された方向に基づいて、前記運転席の位置を決定する、請求項１または請求項２に記載の電子機器。
  4. 　前記コントローラは、前記最初にジェスチャが検出された方向に前記運転席の位置があると決定する、請求項３に記載の電子機器。
  5. 　前記コントローラは、前記運転席の位置に応じて、前記センサによるジェスチャの検出範囲を変更する、請求項１乃至請求項４のいずれか一項に記載の電子機器。
  6. 　前記コントローラは、前記ユーザが操作する手に応じて、前記ジェスチャの方向を判定するための判定基準を決定し、該決定した判定基準を用いて、前記ジェスチャの方向を決定する、請求項１乃至請求項５のいずれか一項に記載の電子機器。
  7. 　前記コントローラは、前記操作する手が右手である場合に、右手の判定基準を用いて前記ジェスチャの方向を決定する、請求項６に記載の電子機器。
  8. 　前記コントローラは、前記操作する手が左手である場合に、左手の判定基準を用いて前記ジェスチャの方向を決定する、請求項６に記載の電子機器。
  9. 　請求項１乃至請求項８のいずれか一項に記載の電子機器を備える、移動体。
  10. 　請求項１乃至請求項８のいずれか一項に記載の電子機器と通信可能に接続された、移動体。
  11. 　自機器に触れずにジェスチャを検出するセンサと、コントローラと、を備える電子機器に、
    　　運転席の位置に応じてユーザが操作する手を決定するステップと、
    　　前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するステップと
    を実行させるプログラム。
  12. 　自機器に触れずにジェスチャを検出するセンサと、コントローラと、を備える電子機器が実行する制御方法であって、
    　　運転席の位置に応じてユーザが操作する手を決定するステップと、
    　　前記ユーザが操作する手に応じて、前記センサからの出力に基づいて、ジェスチャの方向を決定するステップと
    を含む制御方法。
     
     
PCT/JP2019/004489 2018-02-14 2019-02-07 電子機器、移動体、プログラムおよび制御方法 WO2019159818A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/968,252 US11307669B2 (en) 2018-02-14 2019-02-07 Electronic device, moving body, program and control method
EP19754110.5A EP3754460A4 (en) 2018-02-14 2019-02-07 ELECTRONIC DEVICE, MOVABLE BODY, PROGRAM AND CONTROL PROCEDURE

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-024137 2018-02-14
JP2018024137A JP2019139633A (ja) 2018-02-14 2018-02-14 電子機器、移動体、プログラムおよび制御方法

Publications (1)

Publication Number Publication Date
WO2019159818A1 true WO2019159818A1 (ja) 2019-08-22

Family

ID=67619408

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/004489 WO2019159818A1 (ja) 2018-02-14 2019-02-07 電子機器、移動体、プログラムおよび制御方法

Country Status (4)

Country Link
US (1) US11307669B2 (ja)
EP (1) EP3754460A4 (ja)
JP (1) JP2019139633A (ja)
WO (1) WO2019159818A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019163503A1 (ja) * 2018-02-22 2019-08-29 京セラ株式会社 電子機器、制御方法およびプログラム
JP7174817B1 (ja) * 2021-07-30 2022-11-17 功憲 末次 不適切使用抑制システムおよび不適切使用抑制プログラム
FR3127612A1 (fr) * 2021-09-29 2023-03-31 Afi Centrifuge moyen de commande par reconnaissance gestuelle, destiné à équiper des appareils de laboratoire
US12001535B2 (en) * 2022-02-07 2024-06-04 Ford Global Technologies, Llc Vehicle control panel with passenger detection for function enablement

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011169860A (ja) 2010-02-22 2011-09-01 Toyota Motor Corp カーナビゲーションシステム
JP2012178161A (ja) * 2006-03-22 2012-09-13 Volkswagen Ag <Vw> 対話型操作装置および対話型操作装置を動作させるための方法
WO2014073403A1 (ja) * 2012-11-08 2014-05-15 アルプス電気株式会社 入力装置
JP2014119295A (ja) * 2012-12-14 2014-06-30 Clarion Co Ltd 制御装置、及び携帯端末
JP2017114191A (ja) * 2015-12-22 2017-06-29 クラリオン株式会社 車載装置
JP2017119508A (ja) * 2017-01-30 2017-07-06 パナソニックＩｐマネジメント株式会社 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両
JP2017224161A (ja) * 2016-06-15 2017-12-21 株式会社東海理化電機製作所 ジェスチャ判定装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3752246B2 (ja) * 2003-08-11 2006-03-08 学校法人慶應義塾 ハンドパターンスイッチ装置
JP5080383B2 (ja) * 2008-06-25 2012-11-21 スリーエム イノベイティブ プロパティズ カンパニー 操作者識別装置、操作者識別方法及び車載装置
JP5916566B2 (ja) * 2012-08-29 2016-05-11 アルパイン株式会社 情報システム
US9411925B2 (en) * 2014-04-14 2016-08-09 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Simultaneously viewing multi paired schematic and layout windows on printed circuit board (PCB) design software and tools
JP2015052982A (ja) * 2013-09-09 2015-03-19 パイオニア株式会社 表示制御装置
KR101537936B1 (ko) * 2013-11-08 2015-07-21 현대자동차주식회사 차량 및 그 제어방법
US10156906B2 (en) * 2014-10-13 2018-12-18 Honda Motor Co., Ltd. Systems and methods for distinguishing gestures
JP2017059103A (ja) * 2015-09-18 2017-03-23 パナソニックＩｐマネジメント株式会社 判定装置、判定方法、判定プログラムおよび記録媒体
US9990044B2 (en) * 2015-10-30 2018-06-05 Intel Corporation Gaze tracking system
US11458981B2 (en) * 2018-01-09 2022-10-04 Motherson Innovations Company Limited Autonomous vehicles and methods of using same
US11024193B1 (en) * 2018-03-06 2021-06-01 Eureka Saxton Interactive driver test administration systems
US20210255764A1 (en) * 2018-06-26 2021-08-19 Kyocera Corporation Electronic apparatus, mobile body, program, and control method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012178161A (ja) * 2006-03-22 2012-09-13 Volkswagen Ag <Vw> 対話型操作装置および対話型操作装置を動作させるための方法
JP2011169860A (ja) 2010-02-22 2011-09-01 Toyota Motor Corp カーナビゲーションシステム
WO2014073403A1 (ja) * 2012-11-08 2014-05-15 アルプス電気株式会社 入力装置
JP2014119295A (ja) * 2012-12-14 2014-06-30 Clarion Co Ltd 制御装置、及び携帯端末
JP2017114191A (ja) * 2015-12-22 2017-06-29 クラリオン株式会社 車載装置
JP2017224161A (ja) * 2016-06-15 2017-12-21 株式会社東海理化電機製作所 ジェスチャ判定装置
JP2017119508A (ja) * 2017-01-30 2017-07-06 パナソニックＩｐマネジメント株式会社 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両

Also Published As

Publication number Publication date
JP2019139633A (ja) 2019-08-22
EP3754460A1 (en) 2020-12-23
EP3754460A4 (en) 2021-09-22
US20200371601A1 (en) 2020-11-26
US11307669B2 (en) 2022-04-19

Similar Documents

Publication Publication Date Title
WO2019159818A1 (ja) 電子機器、移動体、プログラムおよび制御方法
WO2020003914A1 (ja) 電子機器、移動体、プログラムおよび制御方法
KR101611205B1 (ko) 디스플레이 장치, 디스플레이 장치가 설치된 차량 및 디스플레이 장치의 제어 방법
US10209832B2 (en) Detecting user interactions with a computing system of a vehicle
JP2016503741A (ja) 自動車用の入力装置
KR20180091732A (ko) 사용자 인터페이스, 운송 수단 및 사용자 구별을 위한 방법
US10613638B2 (en) Electronic device
JP6293953B1 (ja) 電子機器、プログラムおよび制御方法
JP2019144955A (ja) 電子機器、制御方法およびプログラム
US11354030B2 (en) Electronic device, control method, and program
JP6541910B1 (ja) 電子機器、制御方法、及びプログラム
JP2019145094A (ja) 電子機器、制御方法およびプログラム
JP2019139738A (ja) 電子機器、移動体、プログラムおよび制御方法
JP6557385B1 (ja) 電子機器、移動体、プログラムおよび制御方法
JP6557384B1 (ja) 電子機器、移動体、プログラムおよび制御方法
JP6568331B1 (ja) 電子機器、制御方法、及びプログラム
US20180061413A1 (en) Electronic device, control method, and computer code
JP6471261B1 (ja) 電子機器、制御方法およびプログラム
JP6417062B1 (ja) 電子機器、制御方法およびプログラム
JP2020003474A (ja) 電子機器、移動体、プログラムおよび制御方法
JP6173625B1 (ja) 電子機器、プログラムおよび制御方法
US9848387B2 (en) Electronic device and display control method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19754110

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019754110

Country of ref document: EP

Effective date: 20200914