CN113022304A - 车载设备操作装置 - Google Patents

车载设备操作装置 Download PDF

Info

Publication number
CN113022304A
CN113022304A CN202011196196.8A CN202011196196A CN113022304A CN 113022304 A CN113022304 A CN 113022304A CN 202011196196 A CN202011196196 A CN 202011196196A CN 113022304 A CN113022304 A CN 113022304A
Authority
CN
China
Prior art keywords
vehicle
vehicle occupant
instruction
motion
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011196196.8A
Other languages
English (en)
Inventor
稻田智洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN113022304A publication Critical patent/CN113022304A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D1/00—Steering controls, i.e. means for initiating a change of direction of the vehicle
    • B62D1/02—Steering controls, i.e. means for initiating a change of direction of the vehicle vehicle-mounted
    • B62D1/04—Hand wheels
    • B62D1/046—Adaptations on rotatable parts of the steering wheel for accommodation of switches
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60H—ARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00—Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642—Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/0065—Control members, e.g. levers or knobs
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60H—ARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00—Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642—Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00735—Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models
    • B60H1/00742—Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models by detection of the vehicle occupants' presence; by detection of conditions relating to the body of occupants, e.g. using radiant heat detectors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/001—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles integrated in the windows, e.g. Fresnel lenses
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D1/00—Steering controls, i.e. means for initiating a change of direction of the vehicle
    • B62D1/02—Steering controls, i.e. means for initiating a change of direction of the vehicle vehicle-mounted
    • B62D1/04—Hand wheels
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3664—Details of the user input interface, e.g. buttons, knobs or sliders, including those provided on a touch screen; remote controllers; input using gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/119—Icons
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/161—Explanation of functions, e.g. instructions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/782—Instrument locations other than the dashboard on the steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/005—Electro-mechanical devices, e.g. switched
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/001—Vehicle control means, e.g. steering-wheel or column
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Thermal Sciences (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Automation & Control Theory (AREA)
  • Ophthalmology & Optometry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Steering Controls (AREA)

Abstract

本发明涉及车载设备操作装置。车载设备操作装置包括存储器、耦合到该存储器的处理器、显示单元、操作单元和舱内相机。显示单元显示与车载设备有关的信息，显示在显示单元处的、对车载设备的指令被配置为作为操作单元的手动操作的结果而被接收。舱内相机捕获车辆乘员的图像。处理器被配置为：从车辆乘员的脸部或身体的动作中检测预定动作，车辆乘员的脸部或身体的动作由舱内相机成像；向车载设备输入与预定动作相对应的指令；以及，在其中与预定动作相对应的指令已经被输入到车载设备的情况下，在显示单元处以可操作状态显示与车载设备有关的信息。

Description

车载设备操作装置
技术领域
本公开涉及一种车载设备操作装置。
背景技术
日本专利申请特开(JP-A)No.2016-052861公开了一种车载设备操作装置，该车载设备操作装置检测在方向盘周围的区域中的手指的手势，并将该手势识别为用于操作车载设备的信息。
然而，上述JP-A No.2016-052861的车载设备操作装置仅处理其中执行简单操作的情况，诸如接通/关断转向信号灯开关，接通/关断前灯开关，接通/关断刮水器装置等，并且对于相对于诸如空调等的需要精细调节的车载设备有效地执行操作还有改进的空间。
发明内容
鉴于上述情况，本公开的目的在于提供一种能够有效地执行需要精细调节的车载设备的操作的车载设备操作装置。
本公开的第一方面的机载设备操作装置包括：存储器、耦合到存储器的处理器、显示单元、操作单元和舱内相机。显示单元显示与车载设备有关的信息，显示在显示单元处的、对车载设备的指令被配置为作为操作单元的手动操作的结果而被接收，以及舱内相机捕获车辆乘员的图像。处理器被配置为：从车辆乘员的脸部的动作和车辆乘员的身体的动作的至少一个中检测预定动作，车辆乘员的脸部的动作或车辆乘员的身体的动作由舱内相机成像；向车载设备输入与预定动作相对应的指令；以及在其中与预定动作相对应的指令已经被输入到车载设备的情况下，在显示单元上以能够操作的状态显示与车载设备有关的信息。
在本公开的第一方面的车载设备操作装置中，与车载设备有关的信息被显示在显示单元上。被显示在显示单元上的对车载设备的指令可以作为操作单元的手动操作的结果来被接收。车辆乘员的图像由舱内相机捕获。处理器从车辆乘员的脸部的动作和车辆乘员的身体的动作的至少一个中检测预定动作，车辆乘员的脸部和身体的动作由舱内相机成像。处理器将与预定动作相对应的指令输入到车载设备。因此，可以通过车辆乘员移动其脸部和身体中的至少一个来将指令输入到车载设备，而无需车辆乘员通过使用操作单元来手动地输入指令。
另外，在其中已经将与预定动作相对应的指令输入到车载设备的情况下，处理器在显示单元上显示与处于可操作状态的车载设备有关的信息。因此，在通过车辆乘员移动其脸部和身体中的至少一个来向车载设备输入指令之后，可以通过车辆乘员连续地执行操作单元的操作来接收对车载设备的设定的精细调节的指令等。注意，这里的脸部动作不限于整个脸部动作，并且广泛地包括移动视线方向和打开/闭合眼睑的动作。
在本公开的第二方面的车载设备操作装置中，在第一方面的车载设备操作装置中，在其中处理器已经将与预定动作相对应的指令输入到车载设备的情况下，处理器通知车辆乘员对车载设备的指令已经被输入。
在本公开的第二方面的车载设备操作装置中，在其中处理器已经将指令输入到车载设备的情况下，通知车辆乘员对车载设备的指令已经被输入。因此，车辆乘员无需执行特殊操作就可以知道对车载设备的指令已经被输入。注意，这里所谓的“对车载设备的指令已经被输入”包括以下情形中的至少一种：操作操作单元的车辆乘员接收到指令，和指令通过车辆乘员的动作被输入到车载设备。
在本公开的第三方面的车载设备操作装置中，在第二方面的车载设备操作装置中，处理器通过声音通知车辆乘员对车载设备的指令已经被输入。
在第三方面的车载设备操作装置中，与通过显示单元上的显示来给出指令已经被输入通知的结构相比，车辆乘员可以在不将他的视线移动到显示单元的情况下理解指令已经被输入。
在本公开的第四方面的车载设备操作装置中，在第一方面至第三方面中的任何一个的车载设备操作装置中，操作单元是被设置在方向盘处的方向盘开关。
在本公开第四方面的车载设备操作装置中，方向盘开关被设置在方向盘处。通过车辆乘员操作方向盘开关可以将指令输入到车载设备。
在本公开的第五方面的车载设备操作装置中，在第一方面至第四方面中的任一方面的车载设备操作装置中，处理器从由舱内相机成像的、车辆乘员的动作中检测包括预定手势的动作，并且处理器将与所检测到的包括预定手势的动作相对应的指令输入到车载设备。
在本公开的第五方面的车载设备操作装置中，处理器从由舱内相机捕获的动作中检测包括车辆乘员的预定手势的动作。然后，处理器将与所检测到的包括预定手势的动作相对应的指令输入到车载设备。
在本公开的第六方面的车载设备操作装置中，在第一方面至第五方面中任一项的车载设备操作装置中，处理器从由舱内相机成像的、车辆乘员的脸部的动作中检测包括预定视线移动模式的动作，并且处理器将与所检测到的包括预定视线移动模式的动作相对应的指令输入到车载设备。
在本公开的第六方面的车载设备操作装置中，处理器从由舱内相机捕获的图像中检测包括车辆乘员的预定视线运动模式的动作。然后，处理器将与所检测到的包括预定视线移动模式的动作相对应的指令输入到车载设备。
在本公开的第七方面的车载设备操作装置中，在第一方面至第六方面中的任一个的车载设备操作装置中，车载设备包括空调、音频系统和导航系统中的至少一个。
在本公开的第七方面的车载设备操作装置中，处理器从由舱内相机成像的车辆乘员的脸部和身体中至少一个的动作中检测预定动作，并且将与检测到的动作相对应的指令输入到空调、音频系统、导航系统等。此外，由于处理器以可操作状态在显示单元上显示空调、音频系统、导航系统等的信息，因此车辆乘员可以通过操作操作单元来对这些车载设备的设定连续地执行精细调节。
在本公开的第八方面的车载设备操作装置中，在第一方面至第七方面中的任一方面的车载设备操作装置中，对车载设备的附加指令被配置为作为车辆乘员对操作单元的手动操作的结果而被接收，该附加指令已经由处理器以可操作状态在显示单元处显示。
在本公开的第八方面的车载设备操作装置中，对车载设备的设定的精细调节的附加指令作为车辆乘员对操作单元的手动操作的结果来接收，该附加指令已经由处理器以可操作状态显示。
如上所述，根据本公开的第一方面的车载设备操作装置，可以有效地执行需要精细调节的车载设备的操作。
根据本发明第二方面的车载设备操作装置，车辆乘员可以确认对车载设备的指令已经被输入。
根据本公开的第三方面的车载设备操作装置，车辆乘员可以舒适地输入指令。
根据本公开的第四方面的车载设备操作装置，车辆乘员可以在驾驶时不将他的手离开方向盘的情况下向车载设备输入指令。
根据本公开的第五方面的车载设备操作装置，可以通过车辆乘员移动他的手而仅利用手势将指令输入到车载设备。
根据本公开的第六方面的车载设备操作装置，可以在车辆乘员不移动他的手的情况下利用车辆乘员的视线移动将指令输入到车载设备。
根据本公开的第七方面的车载设备操作装置，可以有效地执行诸如空调、音频系统、导航系统等的车载设备的操作。
根据本公开的第八方面的车载设备操作装置，可以有效地执行对车载设备的精细调节的操作。
附图说明
将基于以下附图详细描述本发明的示例性实施例，其中：
图1表示从车辆后方示出的，应用了与实施例有关的车载设备操作装置的车辆的乘客舱的前部；
图2A示出实施例的显示单元所显示的图像的示例，并且示出将温度设定为25°的状态；
图2B示出实施例的显示单元所显示的图像的示例，并且示出将温度设定为23°的状态；
图3A示出实施例的显示单元所显示的图像的另一示例，并且示出将气流设定为3的状态；
图3B示出实施例的显示单元所显示的图像的另一示例，并且示出将气流设定为4的状态；
图4是示出与实施例有关的车载设备操作装置的硬件结构的框图；
图5是示出与实施例有关的车载设备操作装置的功能结构的框图；以及
图6是示出实施例中的车载设备操作处理的流程的示例的流程图。
具体实施方式
参照附图描述与实施例有关的车载设备操作装置12。如图1所示，仪表板14被布置在车辆10的应用车载设备操作装置12的乘客室的前部。挡风玻璃16被布置在仪表板14的前端部。挡风玻璃16在车辆竖直方向和车辆横向方向上延伸，并且将乘客舱内部和乘客室外部分开。
在挡风玻璃16上设定有用作显示单元的显示区域22。显示区域22是从图4所示的平视显示器44将图像投影到挡风玻璃16上的区域。显示区域22被设定在驾驶员座椅的车辆前侧的挡风玻璃16处。在显示区域22处显示包括车载设备的信息。
方向盘18经由未示出的转向柱被设置在仪表板14的车辆左侧。方向盘18具有基本为环形的轮缘部18A。在轮缘部18A的内周侧设置有构造中央部的轮毂部18B。轮缘部18A和轮毂部18B通过多个轮辐部18C连接。在本实施例中，作为示例，轮缘部18A和轮毂部18B通过两个轮辐部18C连接。
轮辐部18C被设置在轮毂部18B的右侧和左侧的两个位置处，并且被设置在轮缘部18A和轮毂部18B之间。在此，在图1的轮毂部18B的右侧所示的轮辐部18C上设置用作操作单元的右侧开关20R。另外，在轮毂部18B的左侧所示的轮辐部18C上设置用作操作单元的左侧开关20L。注意，在以下说明中，当不需要在右侧开关20R和左侧开关20L之间进行区分时，将它们简称为“方向盘开关20”。方向盘开关20的细节将在后面描述。
(硬件结构)
图4是示出车载设备操作装置12的硬件结构的框图。如图4所示，车载设备操作装置12具有作为控制部的ECU(电气控制单元)30。此外，ECU 30被构造为包括CPU(中央处理单元：处理器)32、ROM(只读存储器)34、RAM(随机存取存储器)36、存储器38、通信接口40和输入/输出接口42。这些各个结构被连接以便能够经由总线31彼此通信。
CPU 32是中央计算处理单元，并且执行各种程序并控制各个部。即，CPU 32从ROM34或存储器38中读出程序，并且通过使用RAM 36作为操作空间来执行程序。CPU 32根据记录在ROM 34或存储器38中的程序来执行上述各个结构的控制和各种计算处理。
ROM 34存储各种程序和各种数据。RAM 36作为操作空间将程序和数据临时存储。存储器38由HDD(硬盘驱动器)或SSD(固态驱动器)构造，并且存储包括操作系统的各种程序以及各种数据。
通信接口40是ECU 30与服务器和其他设备进行通信的接口，并且，为此例如使用
Figure BDA0002754082100000071
FDDI、
Figure BDA0002754082100000072
等。
HUD(平视显示器)44、方向盘开关20、舱内相机24、扬声器46、空调48、用作车载设备的音频系统50和用作车载设备的导航系统52被连接到输入/输出接口42。具体地，将图像投影到显示区域22上的HUD 44被连接到输入/输出接口42，并从ECU 30接收信号，并且将图像从HUD 44投影到显示区域22上。
如图1所示，右侧开关20R和左侧开关20L的每一个被构造成包括设置在中央的按钮以及设置在此按钮的上方、下方、左侧和右侧的按钮。由于这些按钮被操作，可以将指令手动地输入到在显示区域22处显示的车载设备。例如，如图2A所示，在其中与用作车载设备的空调48的设定温度有关的图像被显示在显示区域22上的情况下，由于车辆乘员按压右侧开关20R的上部按钮，升高设定温度。相反，由于车辆乘员按压右侧开关20R的下部按钮，降低设定温度。注意，可以通过操作左侧开关20L来输入对另一车载设备的指令。
这里，参照图2A至图3B描述在显示区域22处显示的图像的示例。如图2A和图2B所示，在显示区域22处显示基本上为矩形并且其长度方向沿垂直方向的中央框状部分F1。在中央框状部分F1的右侧处显示基本上为矩形的右框状部分F1，并且在中央框状部分F1的左侧处显示基本上为矩形的左框状部分F3。
右框状部分F2和左框状部分F3位于中央框状部分F1的垂直方向中间部分，并且它们的垂直方向长度和左右方向长度基本上是相同的。
这里，“温度”被显示在中央框状部分F1的上部分和内侧，并且示出用于设定空调48的温度的画面被显示。另外，“25.0”被显示在在中央框状部分F1的内侧，并且示出当前设定温度为25.0°。此外，在设定温度显示部分的上侧显示其顶点在上侧处的三角形图标T1，在设定温度显示部分的下侧显示其顶点在下侧处的三角形图标T2。这些图标T1和T2示出可以通过车辆乘员分别按压方向盘开关20的上部按钮和下部按钮来改变设定温度。
在右侧框状部分F2的内侧显示“气流”，在左侧框状部分F3的内侧显示“空气出口”。因此，由于车辆乘员按压方向盘开关20的右按钮，显示转移到气流设定画面，并且由于车辆乘员按压方向盘开关20的左按钮，显示转移到空气出口选择画面。
在图3A和图3B中示出了空调48的气流设定画面的示例。在这些气流设定画面中，在中央框状部分F1的内侧的上部分显示“气流”。另外，“3”被显示在中央框状部分F1的内侧，并且示出当前气流为3。注意，该气流例如具有10级，最弱气流为1，并且最强气流是10。
如图4所示，舱内相机24捕获乘客舱内部的图像，并且尤其捕获车辆乘员的上部身体的图像。如图1所示，舱内相机24在方向盘18处位于轮毂部18B的上方，并被安装在未图示的转向柱上。由舱内相机24捕获的图像被发送到ECU 30。
如图4所示，扬声器46被设置在乘客舱内，并将信号转换成声音，并将声音输出到乘客舱。例如，空调48将温度已被调节的空气吹入乘客舱。另外，音频系统50例如播放音乐并从扬声器46输出音乐。导航系统52例如显示到车辆10的目的地的路线。
(功能结构)
车载设备操作装置12通过使用图4所示的硬件资源来实现各种功能。参照图5描述由车载设备操作装置实现的功能结构。
如图5所示，车载设备操作装置12被构造为包括手动操作接收部54、图像获取部56、特定动作检测部58、车载设备控制部60、显示切换部62和通知部64作为其功能结构。注意，这些各个功能结构通过CPU 32读出存储在存储器38中的程序并执行该程序来实现。
由于车辆乘员操作方向盘开关20，因此手动操作接收部54接收输入到空调48、音频系统50或导航系统52的指令。由于指令被手动操作接收部54接收，对应车载设备操作。
图像获取部56获取由舱内相机24捕获的图像作为图像数据。由图像获取部56获取的图像数据例如存储在存储器38中直到给定时间段流逝。
特定动作检测部58从由舱内相机24成像的车辆乘员的脸部和身体中至少一个的动作中检测预定动作。具体而言，特定动作检测部58分析由图像获取部56获取的图像，并检测车辆乘员的脸部和身体中至少一个的动作。然后，特定动作检测部58将检测到的动作与预先设定的动作进行比较。在此，车辆乘员的脸部的动作例如是视线移动模式。在其中视线移动模式与预设移动模式相同的情况下，将该动作检测为预定动作。另外，车辆乘员的身体的动作例如是手的手势。在其中该手势与预设手势相同的情况下，将该手势检测为预定动作。注意，即使在车辆乘员的动作与预设动作之间存在差异的情况下，如果动作被确定为总体上相同，则将其检测为相同动作。另外，可以调整用于判断动作是否相同的阈值。
车载设备控制部60将与由特定动作检测部58检测到的动作相对应的指令输入到空调48、音频系统50或导航系统52。
在其中通过车载设备控制部60将与预定动作相对应的指令输入到空调48、音频系统50或导航系统52的情况下，显示切换部62以可操作状态将该车载设备的信息显示在显示区域22上。另外，当指令被输入到空调48、音频系统50或导航系统52时，通知部64通知车辆乘员对车载设备的指令已经被输入。通过声音和图像通知车辆乘员对车载设备的指令已经被输入的事实。
在下文中描述在显示区域22中显示的图像的示例。在空调48的非操作状态下，如果在舱内相机24的成像范围内车辆乘员移动他的手以便向他的脸扇风，则特定动作检测部58将该动作检测为特定动作。然后，车载设备控制部60使空调48以预定设定温度操作。另外，如图2A所示，在显示区域22中显示与空调48有关的图像。即，显示从另一图像被显示的状态切换到与空调48有关的图像。这样，乘客舱内部的温度被降低。这里，空调48的当前设定温度被显示在显示区域22中。
另外，在其中空调48正在操作的状态下，如果在舱内相机24的成像范围内车辆乘员移动他的手以便向他的脸扇风，则特定动作检测部58将该动作检测为特定动作。然后，车载设备控制部60如图2B所示降低设定温度。设定温度从25°降至23.0°。另外，通过在显示区域22中显示的指示，向车辆乘员通知设定温度已经改变为23.0°。此外，由于从扬声器46输出了预定声音，向车辆乘员通知已经改变了设定温度。可以通过输出说明“设定温度已经被改变为23°”的声音来通知车辆乘员。
此外，由于在该状态下操作方向盘开关20而将指令输入到空调48。即，在通过手的手势将指令输入到空调48之后，可以手动地改变空调48的设定温度。由于在图2B所示的状态下车辆乘员按压方向盘开关20的上部按钮，所以可以将设定温度改变为24°。
由于在图2A和图2B所示的状态下操作方向盘开关20，显示被切换到空调48的气流设定画面和空气出口选择画面。由于在图2A所示的状态下车辆乘员按压方向盘开关20的右按钮，显示切换到如图3A所示的气流设定画面。
在图3A的画面被显示的状态下，由于在舱内相机24的成像范围内车辆乘员在其中他的手的手掌朝下的状态下从上到下移动他的手，则该动作被特定动作检测部58检测为特定动作。然后，车载设备控制部60降低空调48的设定气流。相反，由于在舱内相机24的成像范围内车辆乘员在其中他的手的手掌朝上的状态下从下到上移动他的手，则该动作被特定动作检测部58检测为特定动作。然后，车载设备控制部60使空调48的设定气流上升。即，从图3A的显示切换为图3B的显示。此外，由于从扬声器46输出的声音，通知车辆乘员设定的气流已经改变。
除了手势之外，由于车辆乘员改变视线，因此特定动作检测部58可以将该动作检测为特定动作。例如，由于车辆乘员从上到下改变他的视线，因此特定动作检测部58可以将该动作检测为特定动作。
注意，除了空调48之外，可以类似地通过手势或视线移动将指令输入到音频系统50或导航系统52。例如，在其中音频系统50正在操作的状态下，如果在舱内相机24的成像范围内车辆乘员通过将他的手移动到他的耳朵的一侧来做出像听声音的手势，则可以通过特定动作检测部58将该动作检测为特定动作。然后，将音频系统50的音量升高预定量，并且在显示区域22中显示音量改变的事实。此外，由于从扬声器46输出了预定声音，通知车辆乘员音量已改变。
此外，例如，在其中音频系统50正在操作的状态下，如果车辆乘员从右到左移动他的视线，则特定动作检测部58可以将该动作检测为特定动作。然后，可以将由音频系统50播放的歌曲改变为下一首歌曲，并且可以将与已经被改变的歌曲有关的信息显示在显示区域22中。
(操作)
接下来描述本实施例的操作。
参照图6的流程图，说明由车载设备操作装置12进行的车载设备操作处理的流程的示例。例如，在接通车辆10的点火(动力)时执行该操作处理，并且由于CPU 32从ROM 34或存储器38中读出程序，并且在RAM 36中扩展程序并执行该程序来执行该操作处理。注意，下文描述的流程图描述了当空调48被操作时车载设备操作处理的流程的示例。然而，对于诸如音频系统50、导航系统52等的其他车载设备也执行类似的处理。
如图6所示，在步骤S102中，CPU 32开始由舱内相机24捕获图像。接下来，在步骤S104中，CPU 32确定是否已检测到特定动作。例如，在其中根据被舱内相机24成像的车辆乘员的手势由特定动作检测部58检测到用于操作空调48的预定动作的情况下，CPU 32确定已经检测到特定动作。此外，在其中从由舱内相机24成像的车辆乘员的手势中未检测到特定动作的情况下，CPU 32确定未检测到特定动作。
在其中CPU 32在步骤S104中确定已经检测到特定动作的情况下，CPU 32前进到步骤S106。另一方面，在其中CPU 32在步骤S104中确定未检测到特定动作的情况下，CPU 32结束车载设备操作处理。
在步骤S106中，CPU 32使空调48操作。具体地，由于对应于由特定动作检测部58检测到的动作的指令由车载设备控制部60输入到空调48，因此CPU 32使空调48操作。
接下来，在步骤S108中，CPU 32确定是否在显示区域22处显示空调48的设定画面。具体地，在其中从HUD 44接收信号，以及从HUD 44投影到显示区域22上的信息是空调48的设定画面的情况下，则CPU 32确定正在显示空调48的设定画面。另一方面，在其中从HUD 44投影到显示区域22上的信息是除空调48的设定画面以外的画面的情况下，则CPU 32确定未显示空调48的设定画面。
在其中CPU 32在步骤S108中确定正在显示空调48的设定画面的情况下，不需要切换显示，并且因此，CPU 32结束车载设备操作处理。
此外，在其中CPU 32在步骤S108中确定未显示空调48的设定画面的情况下，CPU32前进到步骤S110的处理，并显示空调48的设定画面。具体地，通过显示切换部62，CPU 32进行操作，使得空调48的设定画面从HUD 44显示在显示区域22上。由于空调48的设定画面以这种方式被显示在显示区域22中，可以通过方向盘开关20进行操作。
如上所述，在本实施例的车载设备操作装置12中，ECU 30从由舱内相机24成像的车辆乘员的脸部和身体中至少一个的动作中检测预定动作，并且将与该动作相对应的指令输入到诸如空调48等的车载设备。因此，无需车辆乘员通过使用方向盘开关20手动地输入指令，可以将指令输入到车载设备。即，可以操作车载设备，并且可以改变车载设备的设定值。
另外，在本实施例中，通过ECU 30在显示区域22处以可操作状态显示车载设备的信息。具体地，由于ECU 30，HUD 44将图像投影到显示区域22上。由于车辆乘员移动了其脸部和身体中的至少一个，指令被输入到车载设备，并且此后，作为输入的继续，车辆乘员操作方向盘开关20，使得可以执行对车载设备等的设定进行精细调节。结果，可以有效地执行需要精细调节的车载设备的操作。
此外，在将指令输入到车载设备时，通过使用扬声器46将到车载设备的指令已被输入的事实通知给车辆乘员。车辆乘员无需执行特殊操作就可以理解到车载设备的指令已被输入。即，车辆乘员可以容易地确认他对车载设备的指令已被输入。特别地，与其中基于在显示区域22处显示的信息被更新来通知车辆乘员指令已被输入的结构相比，车辆乘员无需将他的视线移动到显示区域22就可以理解该指令已被输入。例如，驾驶员可以在驾驶员向前看的状态下知道到车载设备的指令已被输入。
此外，在本实施例中，方向盘开关20是操作单元。因此，由于在车辆乘员保持握住方向盘18的状态下车辆乘员操作方向盘开关20，指令可以被输入到车载设备，并且车辆乘员可以舒适地输入该指令。
另外，ECU 30通过特定动作检测部58检测到包括车辆乘员的手势的动作，并且将与该手势相对应的指令输入到车载设备。因此，可以仅通过车辆乘员移动他的手来将指令输入到诸如空调48等的车载设备。
此外，如果ECU 30通过特定动作检测部58检测到包括车辆乘员的视线移动模式的动作，并且将与该视线移动模式相对应的指令输入到车载设备。因此，可以在不使车辆乘员在驾驶时将他的手从方向盘18离开的情况下，向诸如空调48等的车载设备输入指示。
尽管以上已经描述了实施例，但是本公开当然可以以不脱离本公开的范围的各种形式来实现。例如，在上述实施例中，将设定在挡风玻璃16上的显示区域22用作显示单元。然而，本公开不限于此，并且可以将设置在仪表板14处的中央显示器或仪表显示器等用作显示单元。另外，可以使用可以将图像投影到预定显示区域上的可佩戴眼镜。在这种情况下，可以将图像投影到可佩戴眼镜的镜片或车辆乘员的视网膜上，并且该镜片或视网膜是显示区域。
此外，尽管在上述实施例中将方向盘开关20用作操作单元，但是本公开不限于此。例如，可以使用未图示的扶手等处的开关。替代地，可以在仪表板处设置开关。此外，方向盘开关20不限于压敏开关，并且可以是基于静电电容的开关。
此外，上述实施例被构造成使得由于在显示区域22处显示的图像被更新而向车辆乘员通知指令已经被输入到车载设备的事实，并且此外通过声音通知车辆乘员。然而，本公开不限于此。例如，由于在通过方向盘开关20向车载设备输入指令时使方向盘开关20振动，可以向车辆乘员给出通知。另外，由于使方向盘18的一部分发射预定颜色的光，可以向车辆乘员通知指令已被输入到车载设备。例如，在其中已经通过手势成功输入了输入的情况下，方向盘18的一部分可以被点亮为绿色，并且在其中输入失败的情况下，方向盘18的一部分可以被点亮为红色。因此，车辆乘员可以直观地知道指令是否可以被输入。
此外，上述实施例描述了其中通过手势或视线移动来输入车载设备的指令的结构，但是本公开不限于此。例如，可能存在其中由于车辆乘员在预定方向上移动其整个脸部而到车载设备的指令被输入的结构。另外，除了手势或视线移动以外，还存在其中由车辆乘员发出的声音被识别的结构。
此外，在以上实施例中，通过使用图2A至图3B作为在显示区域22上显示的图像的示例进行了描述，但是本公开不限于此。例如，车载设备的信息可以分阶段显示。即，可以在作为第一阶段的主菜单画面上显示所有可以操作的车载设备的图标，并且当选择一个图标时，可以将与该图标相对应的车载设备的详细信息显示作为第二阶段。在这种情况下，由于检测到车辆乘员的预定动作并且指令被输入到车载设备，可以在显示区域22处显示与所选择的车载设备相对应的第二阶段的画面，并且可以有效执行车载设备的操作。
此外，在上述实施例中，除CPU外，各种类型的处理器中的任何一种可以通过读取并执行软件(程序)来执行CPU 32执行的车载设备操作处理。在这种情况下，处理器的示例包括：可在生产后改变其电路结构的PLD(可编程逻辑器件)——诸如FPGA(现场可编程门阵列)等、或者作为具有为执行特定处理的单独目的设计的电路结构的处理器的专用电路——诸如ASIC(专用集成电路)等、等等。另外，车载设备操作处理可以由这些各种类型的处理器之一执行，或者可以通过组合两个或更多个相同类型或不同类型的处理器(例如，多个FPGA或CPU和FPGA的组合等)来执行。另外，这些各种类型的处理器的硬件结构更具体地是组合诸如半导体元件等的电路元件的电路。
另外，尽管在上述实施例中存储器38是记录部，但是本公开不限于此。例如，诸如CD(光盘)、DVD(数字通用盘)、USB(通用串行总线)存储器等的记录介质可以用作记录部。在这种情况下，各种程序被存储在这些记录介质上。

Claims (8)

1.一种车载设备操作装置，包括：存储器、耦合到所述存储器的处理器、显示单元、操作单元和舱内相机，其中：
所述显示单元显示与车载设备有关的信息；
显示在所述显示单元处的、对所述车载设备的指令被配置为作为所述操作单元的手动操作的结果而被接收；
所述舱内相机捕获车辆乘员的图像，以及
所述处理器被配置为：
从所述车辆乘员的脸部的动作和所述车辆乘员的身体的动作的至少一个中检测预定动作，所述车辆乘员的脸部的动作或所述车辆乘员的身体的动作由所述舱内相机成像；
向所述车载设备输入与所述预定动作相对应的指令；以及
在与所述预定动作相对应的指令已经被输入到所述车载设备的情况下，在所述显示单元处以能够操作的状态显示与所述车载设备有关的信息。
2.根据权利要求1所述的车载设备操作装置，其中，在所述处理器已经将与所述预定动作相对应的指令输入到所述车载设备的情况下，所述处理器通知所述车辆乘员对所述车载设备的指令已经被输入。
3.根据权利要求2所述的车载设备操作装置，其中，所述处理器通过声音通知所述车辆乘员对所述车载设备的指令已经被输入。
4.根据权利要求1至3中的任一项所述的车载设备操作装置，其中，所述操作单元是被设置在方向盘处的方向盘开关。
5.根据权利要求1至4中的任一项所述的车载设备操作装置，其中，所述处理器从由所述舱内相机成像的、所述车辆乘员的动作中检测包括预定手势的动作，并且所述处理器将与所检测到的包括所述预定手势的动作相对应的指令输入到所述车载设备。
6.根据权利要求1至5中的任一项所述的车载设备操作装置，其中，所述处理器从由所述舱内相机成像的、所述车辆乘员的脸部的动作中检测包括预定视线移动模式的动作，并且所述处理器将与所检测到的包括所述预定视线移动模式的动作相对应的指令输入到所述车载设备。
7.根据权利要求1至6中的任一项所述的车载设备操作装置，其中，所述车载设备包括空调、音频系统和导航系统中的至少一个。
8.根据权利要求1至7中的任一项所述的车载设备操作装置，其中，对所述车载设备的附加指令被配置为作为所述车辆乘员对所述操作单元的手动操作的结果而被接收，所述附加指令已经由所述处理器以能够操作的状态在所述显示单元处显示。
CN202011196196.8A 2019-12-24 2020-10-30 车载设备操作装置 Pending CN113022304A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-233249 2019-12-24
JP2019233249A JP2021102357A (ja) 2019-12-24 2019-12-24 車載機器操作装置

Publications (1)

Publication Number Publication Date
CN113022304A true CN113022304A (zh) 2021-06-25

Family

ID=76206658

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011196196.8A Pending CN113022304A (zh) 2019-12-24 2020-10-30 车载设备操作装置

Country Status (4)

Country Link
US (1) US11772490B2 (zh)
JP (1) JP2021102357A (zh)
CN (1) CN113022304A (zh)
DE (1) DE102020128336A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023132041A1 (ja) * 2022-01-06 2023-07-13 日本電気株式会社 機器操作制御システム、装置、方法、及びコンピュータ可読媒体
CN114475764A (zh) * 2022-03-25 2022-05-13 重庆长安汽车股份有限公司 一种多功能方向盘按键调节记忆系统、工作方法及汽车

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05270296A (ja) * 1992-03-23 1993-10-19 Nissan Motor Co Ltd 車両用操作装置
JP2004171476A (ja) * 2002-11-22 2004-06-17 Keio Gijuku ハンドパターンスイッチ装置
JP2009190675A (ja) * 2008-02-18 2009-08-27 Denso Corp 車両用操作装置
JP2016153250A (ja) * 2015-02-20 2016-08-25 クラリオン株式会社 情報処理装置
CN109969076A (zh) * 2017-12-28 2019-07-05 丰田自动车株式会社 车载通信装置以及车辆

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1408303B1 (en) * 2002-03-15 2011-12-21 Mitsubishi Denki Kabushiki Kaisha Vehicular navigation device
KR20150062317A (ko) * 2013-11-29 2015-06-08 현대모비스 주식회사 자동차의 통합 멀티미디어 장치
US9476729B2 (en) * 2014-05-29 2016-10-25 GM Global Technology Operations LLC Adaptive navigation and location-based services based on user behavior patterns
JP6282188B2 (ja) * 2014-07-04 2018-02-21 クラリオン株式会社 情報処理装置
JP6414420B2 (ja) 2014-09-04 2018-10-31 三菱自動車工業株式会社 車載機器操作装置
US9248839B1 (en) * 2014-09-26 2016-02-02 Nissan North America, Inc. Vehicle interface system
JP7225770B2 (ja) 2018-12-19 2023-02-21 トヨタ自動車株式会社 車載機器操作システム
US20210072831A1 (en) * 2019-09-09 2021-03-11 Byton North America Corporation Systems and methods for gaze to confirm gesture commands in a vehicle
US11091100B2 (en) * 2019-10-03 2021-08-17 Deere & Company Work vehicle multi-camera vision systems
JP2022027500A (ja) * 2020-07-29 2022-02-10 レッド ベンド リミテッド 通信指紋を使用するブルートゥース（登録商標）認証のためのシステム及び方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05270296A (ja) * 1992-03-23 1993-10-19 Nissan Motor Co Ltd 車両用操作装置
JP2004171476A (ja) * 2002-11-22 2004-06-17 Keio Gijuku ハンドパターンスイッチ装置
JP2009190675A (ja) * 2008-02-18 2009-08-27 Denso Corp 車両用操作装置
JP2016153250A (ja) * 2015-02-20 2016-08-25 クラリオン株式会社 情報処理装置
CN109969076A (zh) * 2017-12-28 2019-07-05 丰田自动车株式会社 车载通信装置以及车辆

Also Published As

Publication number Publication date
DE102020128336A9 (de) 2021-08-19
US20210188087A1 (en) 2021-06-24
US11772490B2 (en) 2023-10-03
DE102020128336A1 (de) 2021-06-24
JP2021102357A (ja) 2021-07-15

Similar Documents

Publication Publication Date Title
US20230356595A1 (en) Vehicle input device, vehicle input method, and non-transitory storage medium stored with vehicle input program
US10353658B2 (en) Human machine interface (HMI) control unit for multiple vehicle display devices
JP6073497B2 (ja) 表示制御装置、情報表示方法および情報表示システム
US10967737B2 (en) Input device for vehicle and input method
US10650787B2 (en) Vehicle and controlling method thereof
JP2007106353A (ja) 車両用情報表示装置及び車両用情報表示システム
US10289217B2 (en) Multi-function control knobs for multimedia systems of vehicles
US20070013676A1 (en) Display apparatus
KR102288698B1 (ko) 차량 탑재 기기 조작 시스템
CN113022304A (zh) 车载设备操作装置
JP2006219000A (ja) 車両用操作装置
EP3316574A1 (en) Image display control device
US20180239424A1 (en) Operation system
JP6003773B2 (ja) 車両用操作装置、ナビゲーション装置
JP2007302154A (ja) 車載用入力装置
JP2007161064A (ja) 車両用情報表示装置
JP6375715B2 (ja) 視線入力装置
US9235295B2 (en) Vehicle graphical user interface arrangement
JP5136948B2 (ja) 車両用操作装置
US20230347965A1 (en) Operation control device, operation device, steering device, vehicle, operation control method, and storage medium
JP7484756B2 (ja) 表示システム
JP7512976B2 (ja) 車両用表示制御装置、車両用表示装置、車両用表示制御方法およびプログラム
CN114630761A (zh) 用于控制车辆的安全关键功能的用户界面
JP2019139009A (ja) 表示制御方法およびそれを利用した表示制御装置、表示システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination