KR20190113917A - 차량탑재 시스템을 제어하기 위한 방법 및 장치 - Google Patents

차량탑재 시스템을 제어하기 위한 방법 및 장치 Download PDF

Info

Publication number
KR20190113917A
KR20190113917A KR1020197025948A KR20197025948A KR20190113917A KR 20190113917 A KR20190113917 A KR 20190113917A KR 1020197025948 A KR1020197025948 A KR 1020197025948A KR 20197025948 A KR20197025948 A KR 20197025948A KR 20190113917 A KR20190113917 A KR 20190113917A
Authority
KR
South Korea
Prior art keywords
steering wheel
gesture
driver
finger
ultrasonic
Prior art date
Application number
KR1020197025948A
Other languages
English (en)
Other versions
KR102288115B1 (ko
Inventor
신위 자오
청핑 류
허솨이 쓰
융팡 쑤
쩌스 장
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20190113917A publication Critical patent/KR20190113917A/ko
Application granted granted Critical
Publication of KR102288115B1 publication Critical patent/KR102288115B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/50—Systems of measurement, based on relative movement of the target
    • G01S15/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G01S15/60—Velocity or trajectory determination systems; Sense-of-movement determination systems wherein the transmitter and receiver are mounted on the moving object, e.g. for determining ground speed, drift angle, ground track
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/50—Systems of measurement, based on relative movement of the target
    • G01S15/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G01S15/62—Sense-of-movement determination
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/539—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1434—Touch panels
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1468—Touch gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/40—Hardware adaptations for dashboards or instruments
    • B60K2360/48—Sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/782—Instrument locations other than the dashboard on the steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/785—Instrument locations other than the dashboard on or in relation to the windshield or windows
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54—Audio sensitive means, e.g. ultrasound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D1/00—Steering controls, i.e. means for initiating a change of direction of the vehicle
    • B62D1/02—Steering controls, i.e. means for initiating a change of direction of the vehicle vehicle-mounted
    • B62D1/04—Hand wheels
    • B62D1/06—Rims, e.g. with heating means; Rim covers

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Acoustics & Sound (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Steering Controls (AREA)
  • Position Input By Displaying (AREA)

Abstract

탑재된 시스템을 제어하기 위한 방법 및 장치가 개시된다. 이 방법은: 스티어링 휠에 장착된 센서를 사용하여, 운전자가 상기 스티어링 휠을 잡고 있는 과정 중에 상기 운전자의 현재 제스처의 궤적을 결정하는 단계(110); 상기 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 상기 현재 제스처의 유형을 결정하는 단계(120); 및 상기 현재 제스처의 유형에 대응하는 조작을 수행하도록 상기 탑재된 시스템을 제어하는 단계(130)를 포함한다. 이 방법에서는, 운전자가 수행하는 제스처의 유형이 스티어링 휠에 장착된 센서를 사용하여 식별되고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행되므로, 차량의 운전 동안 운전자가 수행하는 일부 기능 조작들이 크게 용이해지고, 운전 안전이 보장되고, 차량과 인간 간의 상호작용이 더 긴밀해진다.

Description

차량탑재 시스템을 제어하기 위한 방법 및 장치
본 출원은 2017년 2월 27일자로 중국 지적 재산권 관리국(China National Intellectal Property Administration)에 출원된 발명의 명칭이 "탑재된 시스템을 제어하기 위한 방법 및 장치"인 중국 특허 출원 제201710106795.8호에 대한 우선권을 주장하며, 이는 그 전체가 인용에 의해 본 명세서에 포함된다.
본 발명의 실시예들은 차량 전자 분야에 관한 것으로, 더 구체적으로는, 탑재된 시스템(onboard system)을 제어하기 위한 방법 및 장치에 관한 것이다.
차량 안전 표준들 및 차량 전자화 레벨들에서의 계속적인 개선 및 운전 안전에 대한 사람들의 요구가 증가함에 따라, 차량 전자 시장에서의 꾸준한 성장이 크게 증진된다.
종래의 차량에서, 상이한 기능들을 구현하기 위해, 예를 들어, 음악이 재생될 때 노래들의 전환, 재생, 또는 일시정지와 같은 기능들을 구현하기 위해, 또는 탑재된 내비게이션이 디스플레이될 때 탑재된 디스플레이 스크린 상의 지도의 크기를 제어하는 것과 같은 기능을 구현하기 위해, 스티어링 휠, 탑재된 센터 콘솔, 또는 다른 위치들 상에 배치된 기능 키들을 사용하여 상이한 기능 조작들이 구현될 필요가 있다. 그러나, 스티어링 휠, 탑재된 센터 콘솔, 또는 다른 위치들 상의 기능 키들의 위치들은 고정되고, 조정될 수 없고, 기능 키들의 수량이 많고, 일부 기능 키들은 스티어링 휠의 위치로부터 비교적 멀리 떨어져 있고, 기타 등등이다. 따라서, 운전자는 차량을 운전할 때 대응하는 조작을 수행하기 위해 산만해질 필요가 있고, 교통 사고의 위험이 있다. 따라서, 차량 전자에 있어서, 인간-컴퓨터 상호작용에서 더 안전하고 더 신뢰성 있고 더 간단한 조작 방법이 필요하다.
본 발명의 실시예들은 탑재된 시스템을 제어하기 위한 방법 및 장치를 제공한다. 운전자가 수행하는 일부 제스처들의 유형들이 스티어링 휠에 장착된 센서를 사용하여 식별되고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행되므로, 차량의 운전 동안 운전자의 일부 기능 조작 요구들이 바람직하게 만족되고, 운전 안전이 보장되고, 차량과 인간 간의 상호작용이 더 긴밀해진다.
일 양태에 따르면, 탑재된 시스템을 제어하기 위한 방법이 제공된다. 이 방법은: 스티어링 휠에 장착된 센서를 사용하여, 운전자가 상기 스티어링 휠을 잡고 있는 과정 중에 상기 운전자의 현재 제스처의 궤적을 결정하는 단계; 상기 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 상기 현재 제스처의 유형을 결정하는 단계; 및 상기 현재 제스처의 유형에 대응하는 조작을 수행하도록 상기 탑재된 시스템을 제어하는 단계를 포함한다.
본 발명의 이 실시예에서, 운전자가 손을 이용하여 스티어링 휠을 잡을 때, 운전자가 수행하는 일부 제스처들의 유형들이 스티어링 휠에 장착된 센서를 사용하여 식별될 수 있고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행되므로, 차량의 운전 동안 운전자의 일부 기능 조작 요구들이 바람직하게 만족되고, 운전 안전이 보장되고, 차량과 인간 간의 상호작용이 더 긴밀해진다.
제1 양태에 관련하여, 제1 양태의 제1 구현에서, 상기 스티어링 휠에 복수의 센서가 장착된다. 상기 복수의 센서는 복수의 초음파 센서이다. 스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 단계는: 일정 기간 내에 상기 복수의 초음파 센서에 의해 수집된 초음파 신호들을 획득하는 단계; 상기 수집된 초음파 신호들로부터 반사 신호를 선택하는 단계; 및 상기 선택된 반사 신호에 기초하여 일정 기간 내의 상기 운전자의 손 또는 손가락을 포지셔닝하여 상기 현재 제스처의 궤적을 결정하는 단계를 포함한다.
본 발명의 이 실시예에서, 상기 반사 신호는 상기 초음파 신호들에서 결정되어, 상기 현재 제스처의 궤적을 정확하게 결정한다.
제1 양태 또는 제1 양태의 제1 구현에 관련하여, 제1 양태의 제2 구현에서, 스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 단계 전에, 상기 방법은: 상기 스티어링 휠이 회전 상태에 있는지를 결정하는 단계를 추가로 포함한다. 스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 단계는: 상기 스티어링 휠이 비회전 상태에 있을 때, 상기 스티어링 휠에 장착된 센서를 사용하여 상기 운전자의 현재 제스처의 궤적을 결정하는 단계를 포함한다.
제1 양태 또는 제1 양태의 제1 및 제2 구현들 중 어느 하나에 관련하여, 제1 양태의 제3 구현에서, 상기 스티어링 휠에 자이로스코프가 장착된다. 상기 스티어링 휠이 회전 상태에 있는지를 결정하는 단계는: 상기 자이로스코프에 기초하여, 상기 스티어링 휠이 회전 상태에 있는지를 결정하는 단계를 포함한다.
본 발명의 이 실시예에서, 스티어링 휠이 회전 상태에 있는지를 결정하는 것은, 스티어링 휠이 회전 상태에 있을 때 운전자의 제스처를 식별하는 것을 피하고, 제스처 식별의 정밀도를 보장하기 위함이다.
제1 양태, 또는 제1 양태의 제1 내지 제3 구현들 중 어느 하나에 관련하여, 제1 양태의 제4 구현에서, 상기 미리 설정된 제스처 유형들은 다음의 제스처 유형들 중 적어도 하나를 포함한다: 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것; 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것; 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것; 하나의 손가락으로 더블 클릭하는 것; 한 손을 흔드는 것; 스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 2개의 손가락으로 더블 클릭하는 것.
제1 양태 또는 제1 양태의 제1 내지 제4 구현들 중 어느 하나에 관련하여, 제1 양태의 제5 구현에서, 상기 스티어링 휠의 원주에는 복수의 사운드 홀이 제공된다. 상기 복수의 사운드 홀은 상기 복수의 초음파 센서와 일 대 일 대응관계에 있다. 상기 사운드 홀들의 방향들은 상기 운전자의 손 또는 손가락의 활성 영역 및 상기 초음파 신호들의 커버리지에 기초하여 결정된다.
제1 양태의 제5 구현에 관련하여, 제1 양태의 제6 구현에서, 상기 초음파 센서들과 상기 사운드 홀들 사이에 방수 통기 막이 배치된다. 상기 방수 통기 막은 수증기가 사운드 홀들을 통해 초음파 센서들에 들어가는 것을 방지하도록 구성된다.
본 발명의 이 실시예에서, 상기 방수 통기 막은 수증기가 초음파 센서들에 들어가는 것을 방지하여, 제스처 식별의 정밀도를 보장할 수 있다.
제2 양태에 따르면, 탑재된 시스템을 제어하기 위한 장치가 제공된다. 이 장치는: 스티어링 휠에 장착된 센서를 사용하여, 운전자가 스티어링 휠을 잡고 있는 과정 중에 상기 운전자의 현재 제스처의 궤적을 결정하도록 구성된 제1 결정 모듈; 상기 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 상기 현재 제스처의 유형을 결정하도록 구성된 제2 결정 모듈; 및 상기 현재 제스처의 유형에 대응하는 조작을 수행하도록 상기 탑재된 시스템을 제어하도록 구성된 제어 모듈을 포함한다.
제2 양태에 관련하여, 제2 양태의 제1 구현에서, 상기 스티어링 휠에 복수의 센서가 장착된다. 상기 복수의 센서는 복수의 초음파 센서이다. 상기 제1 결정 모듈은: 일정 기간 내에 상기 복수의 초음파 센서에 의해 수집된 초음파 신호들을 획득하고; 상기 수집된 초음파 신호들로부터 반사 신호를 선택하고; 상기 선택된 반사 신호에 기초하여 일정 기간 내의 상기 운전자의 손 또는 손가락을 포지셔닝하여 상기 현재 제스처의 궤적을 결정하도록 구체적으로 구성된다.
제2 양태 또는 제2 양태의 제1 구현에 관련하여, 제2 양태의 제2 구현에서, 상기 장치는 상기 스티어링 휠이 회전 상태에 있는지를 결정하도록 구성된 제3 결정 모듈을 포함한다. 상기 제3 결정 모듈은, 상기 스티어링 휠이 비회전 상태에 있을 때, 상기 스티어링 휠에 장착된 센서를 사용하여 상기 운전자의 현재 제스처의 궤적을 결정하도록 구체적으로 구성된다.
제2 양태 또는 제2 양태의 제1 및 제2 구현들 중 어느 하나에 관련하여, 제2 양태의 제3 구현에서, 상기 스티어링 휠에 자이로스코프가 장착된다. 상기 제3 결정 모듈은, 상기 자이로스코프에 기초하여, 상기 스티어링 휠이 회전 상태에 있는지를 결정하도록 구체적으로 구성된다.
제2 양태, 또는 제2 양태의 제1 내지 제3 구현들 중 어느 하나에 관련하여, 제2 양태의 제4 구현에서, 상기 미리 설정된 제스처 유형들은 다음의 제스처 유형들 중 적어도 하나를 포함한다: 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것; 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것; 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것; 하나의 손가락으로 더블 클릭하는 것; 한 손을 흔드는 것; 스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 2개의 손가락으로 더블 클릭하는 것.
제2 양태, 또는 제2 양태의 제1 내지 제4 구현들 중 어느 하나에 관련하여, 제2 양태의 제5 구현에서, 상기 스티어링 휠의 원주에는 복수의 사운드 홀이 제공된다. 상기 복수의 사운드 홀은 상기 복수의 초음파 센서와 일 대 일 대응관계에 있다. 상기 사운드 홀들의 방향들은 상기 운전자의 손 또는 손가락의 활성 영역 및 상기 초음파 신호들의 커버리지에 기초하여 결정된다.
제2 양태의 제5 구현에 관련하여, 제2 양태의 제6 구현에서, 상기 초음파 센서들과 상기 사운드 홀들 사이에 방수 통기 막이 배치된다. 상기 방수 통기 막은 수증기가 사운드 홀들을 통해 초음파 센서들에 들어가는 것을 방지하도록 구성된다.
제3 양태에 따르면, 탑재된 시스템을 제어하기 위한 장치가 제공된다. 이 장치는 메모리 및 프로세서를 포함한다. 상기 메모리는 프로그램 코드를 저장하도록 구성된다. 상기 프로세서는 상기 프로그램 코드를 호출하여 제1 양태 및 제1 양태의 구현들에 따른 방법을 구현하도록 구성된다.
제4 양태에 따르면, 컴퓨터 판독가능 저장 매체가 제공된다. 상기 컴퓨터 판독가능 저장 매체는 명령어를 저장한다. 상기 명령어가 컴퓨터 상에서 실행될 때, 상기 컴퓨터는 전술한 양태들에 따른 방법을 수행할 수 있게 된다.
본 발명의 실시예들에서, 운전자가 수행하는 일부 제스처들의 유형들이 스티어링 휠에 장착된 센서를 사용하여 식별될 수 있고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행되므로, 탑재된 시스템에 대한 운전자의 상이한 조작들이 구현되고, 운전자는 크게 편리해지고, 운전 안전이 보장된다.
도 1은 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 방법의 개략 흐름도이다.
도 2는 본 발명의 실시예에 따른 제1 제스처의 응용의 개략도이다.
도 3은 본 발명의 실시예에 따른 제2 제스처의 응용의 개략도이다.
도 4는 본 발명의 실시예에 따른 제3 제스처의 응용의 개략도이다.
도 5는 본 발명의 실시예에 따른 제4 제스처의 응용의 개략도이다.
도 6은 본 발명의 실시예에 따른 제5 제스처의 응용의 개략도이다.
도 7은 본 발명의 실시예에 따른 제6 제스처의 응용의 개략도이다.
도 8은 본 발명의 실시예에 따른 제7 제스처의 응용의 개략도이다.
도 9는 본 발명의 실시예에 따른 스티어링 휠의 원주 상에 제공되는 사운드 홀들의 개략도이다.
도 10은 본 발명의 실시예에 따른 스티어링 휠에 장착된 초음파 센서의 개략도이다.
도 11은 본 발명의 실시예에 따른 연성 인쇄 회로 기판 FPC의 레이아웃 형식의 개략도이다.
도 12는 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 방법의 다른 개략 흐름도이다.
도 13은 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 장치의 개략 블록도이다.
도 14는 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 장치의 다른 개략 블록도이다.
이하에서는 첨부 도면들을 참조하여 본 발명의 실시예들에서의 기술적 해결책들을 설명한다.
종래의 차량에서, 운전자는 상이한 기능 키들을 사용하여 상이한 기능 조작들을 구현할 필요가 있다. 예를 들어, 멀티미디어 재생 동안 볼륨 조절과 같은 기능이 스티어링 휠 상의 키를 사용하여 구현되고, 탑재된 전화를 갖는 차량에서, 스티어링 휠 상의 키가 전화에 에 응답하는 것과 같은 기능을 추가로 구현할 수 있거나, 내비게이션 디스플레이 기능, 차량 내 온도 조절 기능, 또는 다른 기능들이 탑재된 센터 콘솔 상의 키를 사용하여 구현될 수 있다. 그러나, 차량에는 많은 기능 키들이 있고, 기능 키들의 위치들은 고정되고, 많은 기능 키들의 위치들은 운전자로부터 비교적 멀리 떨어져 있고, 기타 등등이다. 따라서, 운전자의 정상적인 운전 동안, 운전자가 일부 기능 키들에 대해 조작들을 수행할 필요가 있다면, 운전자는 산만해질 수 있고, 교통 사고가 쉽게 야기된다.
전술한 문제점을 해결하기 위해, 본 발명의 실시예는 탑재된 시스템을 제어하기 위한 방법을 제공한다. 운전자의 제스처는 스티어링 휠에 장착된 센서를 사용하여 식별되므로, 차량의 운전 동안 운전자가 필요로 하는 일부 기능 조작들이 편리하고 빠르게 구현될 수 있고, 차량과 인간 간의 상호작용이 더 긴밀해진다.
도 1은 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 방법(100)의 개략 흐름도이다. 도 1에 도시된 방법(100)은 다음의 단계들 중 일부 또는 전부를 포함한다.
110: 스티어링 휠에 장착된 센서를 사용하여, 운전자가 스티어링 휠을 잡고 있는 과정 중에 운전자의 현재 제스처의 궤적을 결정한다.
120: 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 현재 제스처의 유형을 결정한다.
130: 현재 제스처의 유형에 대응하는 조작을 수행하도록 탑재된 시스템을 제어한다.
구체적으로, 운전자가 손을 사용하여 스티어링 휠을 잡을 때, 운전자가 수행하는 제스처들의 유형들이 스티어링 휠에 장착된 센서를 사용하여 식별될 수 있고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행된다. 전체 과정에서, 운전자의 손은 스티어링 휠을 잡고 있는 상태에 남아 있을 수 있고, 일부 제스처들은 단지 운전자의 일부 손가락들 또는 한 손을 사용하여 수행될 필요가 있으므로, 상이한 기능 조작들이 구현될 수 있고, 차량의 운전 동안 운전자의 일부 기능 조작 요구들이 바람직하게 만족되고, 운전 안전이 보장되고, 차량과 인간 간의 상호작용이 더 긴밀해진다.
본 발명의 이 실시예에서 탑재된 시스템은 탑재된 헤드업 디스플레이(Head Up Display, HUD)일 수 있거나, 탑재된 내비게이션 시스템, 탑재된 메뉴 시스템, 및 탑재된 멀티미디어 시스템, 또는 다른 탑재된 시스템일 수 있다는 것을 이해해야 한다. 이는 본 발명의 이 실시예에서 제한되지 않는다.
옵션으로, 일부 실시예들에서, 센서는 스티어링 휠의 원주 상에 장착될 수 있다.
옵션으로, 일부 실시예들에서, 복수의 센서가 존재할 수 있다. 복수의 센서는 직렬로 접속되어 센서 어레이를 형성한다.
센서들의 특정 수량은 스티어링 휠의 크기에 의해 결정될 수 있거나, 제스처 식별에 필요한 정밀도에 의해 결정될 수 있다는 것을 이해해야 한다. 예를 들어, 운전자가 수행하는 제스처가 정밀하게 식별될 필요가 있을 때, 센서들의 수량은 적절히 증가될 수 있다.
옵션으로, 일부 실시예들에서, 센서는 초음파 센서일 수 있다.
옵션으로, 일부 실시예들에서, 복수의 초음파 센서가 또한 존재할 수 있다. 복수의 초음파 센서의 특정 수량은 스티어링 휠의 크기에 의해 결정될 수 있거나, 제스처 식별의 정밀도에 의해 결정될 수 있다. 복수의 초음파 센서는 직렬로 접속되어 초음파 센서 어레이를 형성한다.
본 발명의 이 실시예에서는, 운전자가 수행하는 제스처를 초음파 멀티포인트 포지셔닝 원리에 따라 포지셔닝하여 제스처를 식별한다는 것을 이해해야 한다. 따라서, 초음파 센서들의 수량은 적어도 2개이다.
센서가 초음파 센서일 때, 초음파 센서는 송신단으로서 사용될 수 있거나, 수신단으로서 사용될 수 있다는 것을 이해해야 한다.
옵션으로, 일부 실시예들에서, 센서가 초음파 센서일 때, 초음파 센서에 의해 수신되는 초음파 신호들은 운전자가 수행하는 제스처의 신호를 포함할 수 있고, 또한 일부 다른 간섭 신호들, 예를 들어, 고정 엔진의 잡음 신호 및 다른 기계적 구조의 잡음 신호, 및 비-초음파 센서에 의해 송신되는 다른 주파수를 갖는 신호를 포함할 수 있다.
옵션으로, 일부 실시예들에서, 초음파 센서의 수신단에 의해 수신된 초음파 신호들은 일정 기간 내의 초음파 신호들일 수 있고, 예를 들어, 샘플링 기간들 내의 초음파 신호들일 수 있다. 이러한 방식으로, 처리될 필요가 있는 데이터의 양이 비교적 크고 데이터를 처리하기 어려운 문제를 피할 수 있다.
옵션으로, 일부 실시예들에서, 샘플링 기간들의 파라미터는 초음파 센서에서 미리 설정될 수 있다. 사용자는 샘플링 기간들의 길이를 자유롭게 설정하거나, 신호 속도에 기초하여 초음파 센서에서 샘플링 기간들의 길이를 미리 설정할 수 있다.
샘플링 기간들은 연속적일 수 있거나, 간격을 가질 수 있다는 것을 이해해야 한다.
샘플링 기간들이 연속적일 때, 초음파 센서에 의해 수신되는 초음파 신호들의 시간이 샘플링 기간에 도달할 때, 초음파 센서에 데이터를 저장하기 위한 유닛이 샘플링 기간에서 수집된 초음파 신호를 프로세서에 자동으로 송신하고, 저장 유닛에서 초음파 신호를 비우거나, 저장 유닛이 현재 수집된 데이터 신호를 처리할 필요가 없을 때, 저장 유닛은 샘플링 기간 내에 수신된 초음파 신호를 바로 삭제하여, 다음 샘플링 기간에 수집된 초음파 신호를 저장할 준비를 할 수 있다.
샘플링 기간들이 간격을 가질 때, 구현을 위해 초음파 센서에서 인터럽트가 설정될 수 있다. 샘플링 시간이 현재 샘플링 기간에 도달할 때, 초음파 센서에 데이터를 저장하기 위한 유닛이 또한 샘플링 기간 내의 초음파 신호들을 프로세서에 자동으로 송신하고, 저장 유닛에서 초음파 신호들을 비울 수 있다. 2개의 샘플링 기간 사이의 내부 시간 내에서, 초음파 센서는 초음파 신호를 송신하지 않을 수 있다. 다음 샘플링 기간에 도달할 때, 초음파 센서에서의 인터럽트가 깨워진다. 초음파 센서는 초음파 신호들을 송신 및 수신하기 시작한다. 이러한 방식은 초음파 신호가 장시간 동안 작동 상태에 있는 것을 방지하고, 초음파 센서의 에너지 소비를 감소시킬 수 있다.
인터럽트 시간 간격은 사용자에 의해 설정될 수 있거나, 초음파 센서에서 미리 설정될 수 있다. 이는 본 발명의 이 실시예에서 제한되지 않는다.
옵션으로, 일부 실시예들에서, 초음파 센서가 초음파 신호들을 수신한 후에, 초음파 신호들에서 반사 신호들이 결정될 수 있다. 예를 들어, 초음파 신호들의 전파 거리들은 초음파 신호의 위상차들 및 지연 파라미터들에 기초하여 결정될 수 있고, 초음파 신호들 내의 반사 신호들은 최종적으로 초음파 신호들 내의 상이한 신호 전파 거리들에 기초하여 결정된다. 반사 신호들은 운전자가 수행하는 제스처들을 식별하기 위한 원하는 신호들이다.
옵션으로, 일부 실시예들에서, 반사 신호들 중 일부는 운전자의 손 또는 손가락의 활성 영역으로부터의 신호들일 수 있다. 운전자의 손 또는 손가락의 활성 영역으로부터의 신호들은 운전자의 제스처들의 식별에 대한 간섭을 야기한다. 따라서, 운전자의 손 또는 손가락의 활성 영역 내의 반사 신호는 또한 반사 신호의 위상차 및 지연 파라미터에 기초하여 결정될 수 있다. 운전자의 손 또는 손가락의 활성 영역 내의 반사 신호는 제스처들의 최종 식별을 위해 요구되는 신호이다.
옵션으로, 일부 실시예들에서, 초음파 신호들에서 반사 신호가 결정되기 전에, 방법(100)은: 초음파 센서의 수신단이 초음파 신호를 수신할 때, 먼저 수신된 초음파 신호를 미리 판단하는 단계, 초음파 신호를 송신하고 초음파 신호를 수신하는 것으로부터의 시간 길이가 미리 설정된 조건을 만족시킬 때 수신된 초음파 신호를 저장하는 단계, 및 미리 설정된 조건이 만족되지 않을 때 현재 초음파 신호를 초음파 센서에 의해 저장하는 것을 생략하고, 다음 기간에서 초음파 신호를 재수신하고 초음파 신호를 미리 판단하는 단계를 추가로 포함한다. 미리 설정된 조건은 사용자에 의해 미리 설정된 시간 임계값일 수 있다. 초음파 신호를 송신하는 것으로부터 초음파 신호를 수신하는 것까지의 시간 길이가 미리 설정된 시간 임계값보다 클 때, 초음파 신호가 미리 설정된 조건을 만족시키는 것으로 결정될 수 있다.
본 발명의 이 실시예에서, 미리 판단하는 단계를 통해, 반사되지 않고 초음파 센서의 수신단에 직접 들어가는 수신된 초음파 신호들 중 일부는 사전에 제거될 수 있으므로, 제스처 식별 시간이 감소되고, 제스처 식별 효율이 개선된다.
미리 판단하는 단계를 통해, 초음파 신호들 중 일부는 제거될 수 있지만, 초음파 신호들에서 반사되지 않은 모든 신호들이 제거될 수 있는 것은 아니라는 것을 이해해야 한다. 이 단계는 단지 미리 판단하는 것이다. 초음파 신호가 미리 설정된 조건을 만족시키지 않는다고 결정될 때, 수신된 초음파 신호는 추가로 처리되지 않고, 제스처 식별 효율이 개선된다.
옵션으로, 일부 실시예들에서, 초음파 센서의 수신단에 의해 수신되는 초음파 신호가 미리 판단되기 전에, 방법(100)은: 스티어링 휠이 회전 상태에 있는지를 결정하는 단계, 및 스티어링 휠이 비회전 상태에 있는 경우, 스티어링 휠에 장착된 센서를 사용하여 운전자의 제스처를 식별하는 단계를 추가로 포함한다.
운전자는 스티어링 휠을 조작하기 때문에, 예를 들어, 방향을 틀거나 차선을 변경할 때 스티어링 휠을 조작하기 때문에, 통상적으로, 스티어링 휠은 회전 상태에 있다는 것을 이해해야 한다. 이 경우, 탑재된 시스템 상에 대한 운전자의 조작의 확률은 매우 낮다. 또한, 운전자가 스티어링 휠을 조작할 때, 운전자의 손들의 배치 위치들은 제스처에 대한 센서의 식별에 영향을 미칠 수 있다. 따라서, 스티어링 휠이 회전 상태에 있을 때, 운전자의 제스처는 식별되지 않는다.
옵션으로, 일부 실시예들에서, 스티어링 휠이 회전 상태에 있는지를 결정하는 단계는 스티어링 휠에 배치된 자이로스코프에 의해 수행될 수 있다. 구체적으로, 스티어링 휠이 회전 상태에 있는지는 자이로스코프에 의해 획득된 데이터 정보에 기초하여 결정될 수 있다.
옵션으로, 일부 실시예들에서, 초음파 센서에 의해 수신된 초음파 신호들은 다른 간섭 신호들을 추가로 포함한다. 따라서, 운전자의 제스처를 더 효율적으로 그리고 정확하게 식별하기 위해, 초음파 신호들에서 반사 신호가 결정되기 전에, 초음파 신호들 내의 간섭 신호들이 추가로 제거될 필요가 있다.
옵션으로, 일부 실시예들에서, 초음파 센서에 의해 수신된 초음파 신호들은 고유 주파수들을 갖는 일부 간섭 신호들, 예를 들어, 엔진의 사운드 및 다른 기계적 구조의 잡음을 포함할 수 있다. 잡음 신호들은 고유 주파수들을 갖는 신호들이다. 따라서, 고유 주파수들을 갖는 잡음 신호들에 대해 시간 영역 및 주파수 영역 변환이 수행될 수 있다. 그 후, 고유 주파수들을 갖는 잡음 신호들은 대역 통과 필터를 사용하여 필터링된다.
옵션으로, 일부 실시예들에서, 고유 주파수들을 갖는 잡음 신호들이 필터링된 후에, 획득된 초음파 신호들은 일부 다른 신호들을 추가로 포함할 수 있다. 다른 신호들은 초음파 센서에 의해 송신되지 않는다. 초음파 센서에 의해 송신된 신호들은 고유 주파수들을 갖는 신호들이다. 따라서, 다른 신호들의 주파수들은 초음파 센서에 의해 송신된 신호들의 주파수들과 상이하다. 다른 신호들의 주파수들에 대해 시간 영역 및 주파수 영역 변환이 수행될 수 있다. 다른 주파수들을 갖는 신호들은 대역 통과 필터를 사용하여 필터링된다.
고유 잡음 신호들을 제거하는 단계와 다른 주파수들을 갖는 신호들을 제거하는 단계 사이에 명확한 시퀀스가 없다는 것을 이해해야 한다. 또한, 본 발명의 이 실시예에서, 2개의 단계 중 하나만이 수행될 수 있거나, 또는 2개의 단계 둘 다 수행된다. 단계들 둘 다를 수행하는 것은 수신된 초음파 신호의 모든 간섭 신호들을 제거하고, 제스처 식별 정확도를 보장할 수 있다. 따라서, 이는 본 발명의 이 실시예에서 예로서 사용된다. 그러나, 본 발명의 이 실시예는 이에 제한되지 않는다.
옵션으로, 일부 실시예들에서, 초음파 신호들에서 반사 신호가 결정된 후에, 일정 기간 내의 반사 신호에 기초하여 그 일정 기간 내의 운전자의 손 또는 손가락이 포지셔닝될 수 있다. 예를 들어, 초음파 멀티포인트 포지셔닝 원리에 따라 일정 기간 내의 운전자의 손 또는 손가락의 위치들의 좌표들이 결정될 수 있다.
옵션으로, 일부 실시예들에서, 일정 기간 내의 운전자의 손 또는 손가락이 포지셔닝된 후에, 획득된 위치 정보에 기초하여 운전자의 현재 제스처의 궤적이 결정될 수 있다. 예를 들어, 일정 기간 내의 운전자의 손 또는 손가락의 위치들의 좌표들에 대해 함수 피팅을 수행하여 피팅된 함수 곡선을 획득할 수 있다. 피팅된 함수 곡선은 운전자의 현재 제스처의 궤적이다.
옵션으로, 일부 실시예들에서, 현재 제스처의 유형은 현재 제스처의 결정된 궤적에 기초하여 미리 설정된 제스처 유형들로부터 결정될 수 있다.
예를 들어, 현재 제스처의 궤적의 함수 곡선은 데이터베이스 내의 함수 곡선들과 비교될 수 있고, 데이터베이스 내의 함수 곡선들로부터 현재 제스처의 궤적의 함수 곡선과 가장 높은 매칭 정도를 갖는 함수 곡선이 선택된다. 가장 높은 매칭 정도를 갖는 함수 곡선에 대응하는 제스처 유형이 현재 제스처의 유형이다.
옵션으로, 일부 실시예들에서, 미리 설정된 제스처 유형들은 다음의 제스처 유형들 중 적어도 하나를 포함할 수 있다:
2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것;
2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것;
하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것;
하나의 손가락으로 더블 클릭하는 것;
한 손을 흔드는 것;
스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 및
2개의 손가락으로 더블 클릭하는 것.
2개의 손가락은 왼손과 오른손의 동일한 손가락이라는 것을 이해해야 한다. 예를 들어, 2개의 손가락에 의해, 안쪽으로 슬라이딩하는 것은 왼손의 엄지손가락과 오른손의 엄지손가락에 의해, 안쪽으로 슬라이딩하는 것이고, 2개의 손가락에 의해 시계방향으로 슬라이딩하는 것은 왼손의 엄지손가락과 오른손의 엄지손가락에 의해, 시계방향으로 슬라이딩하는 것이다. 하나의 손가락은 왼손 또는 오른손의 임의의 손가락일 수 있고, 한 손은 왼손 또는 오른손 중 어느 하나일 수 있다.
운전자가 차량을 운전할 때, 손들은 통상적으로 스티어링 휠 상에 배치되고, 엄지손가락들 이외의 다른 손가락들은 통상적으로 스티어링 휠을 잡고 있는 상태에 있고, 엄지손가락은 통상적으로 자유롭게 이동할 수 있다는 것을 추가로 이해해야 한다. 따라서, 제스처가 수행될 때, 가장 흔하게 사용되는 손가락들은 엄지손가락들이어야 한다. 따라서, 본 발명의 이 실시예에서는, 다양한 제스처들을 상세히 설명하기 위해 예로서 엄지손가락들만이 사용된다. 그러나, 본 발명의 이 실시예는 이에 제한되지 않는다.
제스처 유형들의 관리를 용이하게 하기 위해, 전술한 제스처들에서 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것의 제스처는 제1 제스처로서 표시될 수 있고, 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것은 제2 제스처로서 표시되고, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것은 제3 제스처로서 표시되고, 하나의 손가락으로 더블 클릭하는 것은 제4 제스처로서 표시되고, 한 손을 흔드는 것은 제5 제스처로서 표시되고, 스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것은 제6 제스처로서 표시되고, 2개의 손가락으로 더블 클릭하는 것은 제7 제스처로서 표시된다.
미리 설정된 제스처 유형들의 설명은 미리 설정된 제스처 유형들을 제한하도록 의도되지 않는다는 것을 이해해야 한다. 차후의 개발 과정에서, 연구자는 다른 기능들을 제어하기 위한 제스처들을 미리 설정된 제스처 유형들에 더 추가할 수 있다. 본 발명의 이 실시예에서는, 미리 설정된 제스처들을 상세히 설명하기 위해 예로서 7개의 제스처만이 사용된다. 그러나, 본 발명의 이 실시예는 이에 제한되지 않는다.
도 2는 본 발명의 실시예에 따른 제1 제스처의 응용의 개략도이다. 제1 제스처는 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것이고, 탑재된 시스템의 디스플레이 크기 또는 디스플레이된 내용의 크기를 제어할 수 있다.
도 2에 도시된 바와 같이, 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것의 제스처는 HUD를 제어하기 위해 사용되고, HUD의 디스플레이 크기를 제어하거나, HUD 상에 디스플레이된 정보의 폰트 크기를 제어하거나, 등등을 할 수 있다. 예를 들어, 제스처는 차량의 바람막이용 유리 상의 HUD의 디스플레이 크기를 제어하기 위해 사용될 수 있다. 대안적으로, 운전자가 차량이 재급유할 필요가 있는지를 결정하기 위해 연료 소비 정보에 주의를 기울일 필요가 있을 때, 제스처에서 2개의 손가락을 바깥쪽으로 슬라이딩하는 것은 HUD 상에 디스플레이된 정보, 예를 들어, 연료 소비 및 차량 속도의 폰트 크기를 확대하여, 운전자의 보기를 용이하게 할 수 있다.
도 2에 도시된 바와 같이, 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것의 제스처가 탑재된 내비게이션 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 탑재된 중앙 제어 디스플레이 스크린 상에 디스플레이된 지도의 크기가 조정될 수 있다. 일부 도로 상태들이 복잡하거나 차량이 차선들을 변경하거나 방향을 틀 필요가 있을 때, 제스처에서 2개의 손가락을 바깥쪽으로 슬라이딩하는 것은 지도를 확대하여, 운전자가 언제든지 지도 내의 비교적 작은 표지를 보는 것을 용이하게 할 수 있다. 도로 상태가 비교적 양호할 때 또는 차량이 고속도로 상에서 운전할 때, 제스처에서 2개의 손가락을 안쪽으로 슬라이딩하는 것은 지도를 축소시킬 수 있다.
도 2에 도시된 바와 같이, 2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것의 제스처가 탑재된 메뉴 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 탑재된 중앙 제어 디스플레이 스크린 상의 메뉴의 폰트 크기가 조정될 수 있다. 예를 들어, 운전자가 노인이거나 비교적 좋지 않은 시력을 갖고 있을 때, 2개의 손가락을 바깥쪽으로 슬라이딩하는 것은 탑재된 시스템의 메뉴의 폰트를 확대하여 운전자의 보기를 용이하게 할 수 있다.
도 3은 본 발명의 실시예에 따른 제2 제스처의 응용의 개략도이다. 제2 제스처는 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것이고, 탑재된 시스템에서 디스플레이된 내용의 시각(visual angle)의 변환을 제어할 수 있다.
도 3에 도시된 바와 같이, 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것의 제스처가 HUD 상에 디스플레이된 도로 상태를 제어하기 위해 사용될 때, 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것은 HUD 상에 디스플레이된 도로 상태를 참조하여 디스플레이의 경사 각도를 조정할 수 있다.
도 3에 도시된 바와 같이, 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것의 제스처가 탑재된 내비게이션 시스템을 제어하기 위해 사용될 때, 2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것은 운전자가 탑재된 내비게이션 시스템의 지도에서 특정 건물 또는 특정 도로 상태를 볼 필요가 있을 때 지도를 조감도, 정면도, 또는 다른 시각들에서의 투시도로 전환할 수 있다.
도 4는 본 발명의 실시예에 따른 제3 제스처의 응용의 개략도이다. 제3 제스처는 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것이고, 탑재된 시스템의 디스플레이 위치를 제어하고, 메뉴의 옵션의 선택 또는 멀티미디어 시스템에서의 옵션의 조작과 같은 기능들을 구현할 수 있다.
도 4에 도시된 바와 같이, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처가 HUD를 제어하기 위해 사용될 때, 차량의 바람막이용 유리 상에 디스플레이되는 HUD의 위치를 제어하는 기능이 구현될 수 있다. 예를 들어, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처는 운전자의 신장 및 운전석에서의 운전자의 상이한 안구 위치들에 기초하여 HUD의 디스플레이 위치를 조정할 수 있다.
도 4에 도시된 바와 같이, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처가 탑재된 내비게이션 시스템을 제어하기 위해 사용될 때, 탑재된 중앙 제어 디스플레이 스크린 상에 디스플레이되는 지도의 위치를 제어하는 기능이 구현될 수 있다. 예를 들어, 현재 위치 위의 일부 위치 정보를 보기 위해 하나의 손가락이 위쪽으로 슬라이딩할 수 있고, 현재 위치의 좌측의 일부 위치 정보를 보기 위해 하나의 손가락이 왼쪽으로 슬라이딩할 수 있고, 기타 등등이다.
도 4에 도시된 바와 같이, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처가 탑재된 메뉴 시스템을 제어하기 위해 사용될 때, 메뉴에서 특정 옵션을 선택하는 기능이 구현될 수 있다. 예를 들어, 하나의 손가락은 현재 옵션의 다음 옵션을 선택하기 위해 아래쪽으로 슬라이딩할 수 있고, 하나의 손가락은 현재 옵션의 우측의 옵션을 선택하기 위해 오른쪽으로 슬라이드할 수 있고, 기타 등등이다.
도 4에 도시된 바와 같이, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처가 멀티미디어 시스템을 제어하기 위해 사용될 때, 멀티미디어 시스템에서 특정 옵션의 조작을 제어하는 기능이 구현될 수 있다. 예를 들어, 멀티미디어 시스템이 음악을 재생하기 위해 사용될 때, 하나의 손가락을 위쪽으로 슬라이딩하는 것은 이전 노래를 재생하도록 제어할 수 있고, 하나의 손가락을 아래쪽으로 슬라이딩하는 것은 다음 노래를 재생하도록 제어할 수 있고, 하나의 손가락을 왼쪽으로 슬라이딩하는 것은 볼륨을 감소시킬 수 있고, 하나의 손가락을 오른쪽으로 슬라이딩하는 것은 볼륨을 증가시킬 수 있고, 기타 등등이다.
도 5는 본 발명의 실시예에 따른 제4 제스처의 응용의 개략도이다. 제4 제스처는 하나의 손가락으로 더블 클릭하는 것이고, 탑재된 시스템에서 상이한 옵션들에 들어가는 것 또는 재생을 일시정지하는 것과 같은 기능을 구현할 수 있다.
도 5에 도시된 바와 같이, 하나의 손가락으로 더블 클릭하는 것의 제스처는 HUD를 제어하기 위해 사용되고, 상이한 디스플레이된 내용의 옵션들에 들어가는 기능을 구현할 수 있다. 예를 들어, 하나의 손가락으로 더블 클릭하는 것을 한 번 수행하는 것에 의해 속도 옵션에 들어갈 수 있고, 그 후 하나의 손가락으로 더블 클릭하는 것을 다시 수행하는 것에 의해 연료 소비 옵션에 들어갈 수 있고, 기타 등등이다.
도 5에 도시된 바와 같이, 하나의 손가락으로 더블 클릭하는 것의 제스처가 탑재된 내비게이션 시스템을 제어하기 위해 사용될 때, 예를 들어, 현재 위치 근처의 상가 또는 사용자의 목표 건물의 위치들을 검색하는 기능이 구현될 수 있다. 예를 들어, 하나의 손가락으로 더블 클릭하는 것을 한 번 수행하는 것에 의해 상가 또는 다른 건물의 위치가 보일 수 있고, 그 후 하나의 손가락으로 더블 클릭하는 것을 다시 수행하는 것에 의해 상이한 상가 또는 건물로 전환될 수 있다.
도 5에 도시된 바와 같이, 하나의 손가락으로 더블 클릭하는 것이 탑재된 메뉴의 디스플레이를 제어하기 위해 사용될 때, 메뉴에서 특정 옵션에 들어가는 기능이 구현될 수 있다.
도 5에 도시된 바와 같이, 하나의 손가락으로 더블 클릭하는 것이 멀티미디어 시스템을 제어하기 위해 사용될 때, 일시정지하는 기능이 구현될 수 있다. 예를 들어, 노래가 재생될 때, 하나의 손가락으로 더블 클릭하는 것은 재생을 일시정지할 수 있다.
도 6은 본 발명의 실시예에 따른 제5 제스처의 응용의 개략도이다. 제5 제스처는 한 손을 흔드는 것이고, 탑재된 시스템에서의 상이한 애플리케이션들 또는 상이한 모드들 간의 전환을 제어할 수 있다.
도 6에 도시된 바와 같이, 한 손을 흔드는 것의 제스처가 HUD를 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 상이한 디스플레이된 내용이 전환될 수 있다. 예를 들어, HUD가 현재 실시간 연료 소비를 디스플레이하고 있을 때, 한 손을 흔드는 것을 수행하는 것에 의해 평균 연료 소비로 전환될 수 있다.
도 6에 도시된 바와 같이, 한 손을 흔드는 것의 제스처가 탑재된 중앙 제어 스크린을 제어하기 위해 사용될 때, 한 손을 흔드는 것을 수행하는 것에 의해 탑재된 중앙 제어 스크린 상의 상이한 애플리케이션들이 전환될 수 있다. 예를 들어, 탑재된 중앙 제어 스크린이 현재 탑재된 내비게이션의 지도를 디스플레이하고 있을 때, 한 손을 흔드는 것을 수행하는 것에 의해 라디오 방송과 같은 다른 애플리케이션으로 전환될 수 있다.
도 6에 도시된 바와 같이, 한 손을 흔드는 것의 제스처가 탑재된 메뉴 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 상이한 설정 모드들이 전환될 수 있다. 예를 들어, 차량이 현재 통용 모드에 있을 때, 한 손을 흔드는 것을 수행하는 것에 의해 안전 모드로 전환될 수 있다.
도 6에 도시된 바와 같이, 한 손을 흔드는 것의 제스처가 멀티미디어 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 상이한 애플리케이션들이 전환될 수 있다. 예를 들어, 멀티미디어 시스템이 현재 음악을 재생하고 있을 때, 한 손을 흔드는 것을 수행하는 것에 의해 음악 재생이 비디오 재생, 이미지 등으로 전환될 수 있다.
도 7은 본 발명의 실시예에 따른 제6 제스처의 응용의 개략도이다. 제6 제스처는 스티어링 휠의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것이고, 이전 메뉴로 돌아가거나 애플리케이션으로부터 나오는 기능을 구현할 수 있다.
도 7에 도시된 바와 같이, 스티어링 휠의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것의 제스처가 HUD를 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 현재 디스플레이된 내용으로부터 이전 메뉴로 돌아갈 수 있다.
도 7에 도시된 바와 같이, 스티어링 휠의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것의 제스처가 탑재된 내비게이션 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 탑재된 내비게이션 시스템으로부터 나올 수 있다.
도 7에 도시된 바와 같이, 스티어링 휠의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것의 제스처가 탑재된 메뉴 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 탑재된 메뉴 시스템으로부터 나올 수 있다.
도 7에 도시된 바와 같이, 스티어링 휠의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것의 제스처가 멀티미디어 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 멀티미디어 시스템으로부터 나올 수 있다.
도 8은 본 발명의 실시예에 따른 제7 제스처의 응용의 개략도이다. 제7 제스처는 2개의 손가락으로 더블 클릭하는 것이고, 애플리케이션을 닫고 제스처 식별 모드를 시작 또는 정지하는 기능을 구현할 수 있다.
도 8에 도시된 바와 같이, 2개의 손가락으로 더블 클릭하는 것의 제스처가 HUD를 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 HUD가 직접 닫힐 수 있거나, 그 제스처를 수행하는 것에 의해 제스처 식별 모드들이 차례로 열리거나 닫힐 수 있다.
도 8에 도시된 바와 같이, 2개의 손가락으로 더블 클릭하는 것의 제스처가 탑재된 내비게이션의 디스플레이를 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 내비게이션 모드가 직접 닫힐 수 있거나, 그 제스처를 수행하는 것에 의해 제스처 식별 모드들이 차례로 열리거나 닫힐 수 있다.
도 8에 도시된 바와 같이, 2개의 손가락으로 더블 클릭하는 것의 제스처가 탑재된 메뉴의 디스플레이를 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 제스처 식별 모드들이 열리거나 닫힐 수 있다.
도 8에 도시된 바와 같이, 2개의 손가락으로 더블 클릭하는 것의 제스처가 멀티미디어 시스템을 제어하기 위해 사용될 때, 그 제스처를 수행하는 것에 의해 제스처 식별 모드들이 열리거나 닫힐 수 있다.
옵션으로, 일부 실시예들에서, 제스처 식별 모드들이 복수의 디스플레이 모드 사이에서 전환될 필요가 있을 때, 예를 들어, HUD로부터 탑재된 내비게이션 디스플레이 모드로 전환될 필요가 있을 때, 최상위 레벨 메뉴로 돌아갈 때까지, 스티어링 휠의 내측을 따라 터치하고 슬라이딩하는 것의 제스처를 수행하는 것에 의해 한 레벨씩 이전 메뉴들로 돌아갈 수 있다. 최상위 레벨 메뉴로 돌아간 후에, 스티어링 휠의 내측을 따라 터치하고 슬라이딩하는 것의 제스처가 다시 수행된다. 탑재된 중앙 제어 디스플레이 스크린은 복수의 모드의 선택 메뉴, 예를 들어, 4개 모드, 즉, HUD, 탑재된 내비게이션 디스플레이 모드, 탑재된 메뉴 디스플레이 모드, 및 멀티미디어 디스플레이 모드를 제시하는 선택 메뉴를 제시한다. 이 경우, 하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것의 제스처를 수행하는 것에 의해 상이한 모드들이 선택될 수 있다.
옵션으로, 일부 실시예들에서, 스티어링 휠의 원주에는 복수의 사운드 홀이 제공된다. 복수의 사운드 홀은 초음파 센서들과 일 대 일 대응관계에 있다.
도 9는 본 발명의 실시예에 따른 스티어링 휠의 원주 상에 제공되는 사운드 홀들의 개략도이다.
도 9에 도시된 바와 같이, 복수의 사운드 홀이 존재할 수 있다. 복수의 사운드 홀은 스티어링 휠의 원주 상에 균일하게 분포된다.
옵션으로, 일부 실시예들에서, 센서들이 초음파 센서들일 때, 사운드 홀들의 수량은 적어도 2개이다.
옵션으로, 일부 실시예들에서, 사운드 홀들은 초음파 센서들과 일 대 일 대응관계에 있다.
도 10은 본 발명의 실시예에 따른 스티어링 휠에 장착된 초음파 센서의 개략도이다.
도 10에 도시된 바와 같이, 사운드 홀(05)과 초음파 센서(15) 사이에 방수 통기 막(10)이 배치된다. 방수 통기 막은 수증기, 예를 들어, 운전자 손 위의 땀 또는 공기 중의 수증기가 사운드 홀(05)을 통해 초음파 센서(15)에 들어가서 초음파 센서(15)의 정상적인 작동에 영향을 미치는 것을 방지하도록 구성된다.
옵션으로, 일부 실시예들에서, 초음파 센서(15)는 표면 실장 기술(Surface Mount Technology, SMT)을 통해 연성 인쇄 회로 기판(20)(Flexible Printed Circuit, FPC) 상에 장착된다.
도 11은 본 발명의 실시예에 따른 연성 인쇄 회로 기판(FPC)의 레이아웃 형식의 개략도이다.
도 11에 도시된 바와 같이, FPC는 마이크로프로세서에의 접속을 구현하기 위해 스티어링 휠의 원주 브래킷을 통해 스티어링 휠의 샤프트 내로 케이블된다.
도 10에 도시된 바와 같이, FPC(20) 뒤에 보강판(25)이 장착된다. 보강판(25)은 초음파 센서를 보강하고, 초음파 센서(15) 및 FPC(20)를 나사(30)를 통해 고정하도록 구성된다.
도 10에 도시된 바와 같이, 사운드 홀(05)의 방향은 운전자의 손 또는 손가락의 활성 영역 및 초음파 센서의 시야(Field of View, FOV), 즉, 초음파 신호의 커버리지에 기초하여 결정될 수 있다.
도 12는 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 방법(200)의 개략 흐름도이다. 방법(200)에서, 스티어링 휠에 장착된 센서는 초음파 센서이다. 도 12에 도시된 바와 같이, 방법(200)은 다음의 단계들 중 일부 또는 전부를 포함한다.
200: 초음파 센서를 초기화한다.
옵션으로, 일부 실시예들에서, 초기화는: 초음파 센서에 전력을 투입하는 것, 초음파 센서의 파라미터를 설정하는 것, 예를 들어, 초음파 센서의 샘플링 시간 길이를 설정하는 것, 및 초음파 센서의 인터럽트를 설정하는 것을 포함한다.
210: 스티어링 휠이 회전 상태에 있는지를 결정한다.
옵션으로, 일부 실시예들에서, 스티어링 휠에 자이로스코프가 장착될 수 있다. 자이로스코프는, 자이로스코프에 의해 수집된 데이터 정보에 기초하여, 스티어링 휠이 회전 상태에 있는지를 결정할 수 있다. 스티어링 휠이 회전 상태에 있을 때, 초음파 센서에 의해 송신되는 초음파 신호는 수집될 필요가 없을 수 있다. 구체적으로, 운전자가 수행하는 제스처가 식별되지 않아, 제스처 식별의 정밀도를 보장한다.
220: 초음파 신호들을 미리 판단한다.
옵션으로, 일부 실시예들에서, 초음파 센서의 수신단이 일정 기간 내에 초음파 신호들을 수신한 후에, 일정 기간 내의 초음파 신호들은 초음파 신호들을 송신하는 것으로부터 초음파 신호들을 수신하는 것까지의 시간 길이가 미리 설정된 조건을 만족시키는지를 결정하기 위해 미리 판단될 수 있다. 미리 설정된 조건은 초음파 신호들을 송신하는 것으로부터 초음파 신호들을 수신하는 것까지의 시간 길이가 미리 설정된 시간 임계값 이상인 것이다. 시간 길이가 미리 설정된 조건을 만족시키는 경우, 수신된 초음파 신호들이 저장되고 추가로 처리될 수 있다. 시간 길이가 미리 설정된 조건을 만족시키지 않을 때, 초음파 센서는 현재 초음파 신호들을 저장하지 않고, 다시 다음 기간에서 초음파 신호들을 수신하고 미리 판단한다.
본 발명의 이 실시예에서, 초음파 신호들이 미리 판단되어 초음파 신호들 중에 제스처 식별을 위해 쓸모없는 신호를 사전에 제거하고, 제스처 식별 정확도를 보장한다.
230: 고유 잡음 신호들을 제거한다.
옵션으로, 일부 실시예들에서, 고유 잡음 신호들은 차량 엔진의 잡음 신호들 또는 다른 기계적 구조의 잡음 신호들일 수 있다.
옵션으로, 일부 실시예들에서, 고유 주파수들을 갖는 잡음 신호들에 대해 시간 영역 및 주파수 영역 변환이 수행될 수 있다. 그 후, 고유 주파수들을 갖는 잡음 신호들은 대역 통과 필터를 사용하여 필터링된다.
240: 간섭 신호를 제거한다.
옵션으로, 일부 실시예들에서, 간섭 신호는 초음파 센서에 의해 송신되는 신호가 아니다. 따라서, 간섭 신호는 운전자의 제스처의 식별을 위한 원치 않는 신호이다. 간섭 신호에 대해 시간 영역 및 주파수 영역 변환이 수행될 수 있다. 간섭 신호는 대역 통과 필터를 사용하여 필터링되고, 초음파 센서에 의해 송신된 초음파 신호만이 보존된다.
250: 반사 신호들을 결정한다.
옵션으로, 일부 실시예들에서, 고유 잡음 신호들 및 간섭 신호가 필터링된 후에, 초음파 신호들에서의 나머지 신호들은 모두 초음파 센서에 의해 송신된 신호들이다. 초음파 신호들은 직접 신호들 및 반사 신호들을 포함한다. 직접 신호들은 초음파 센서의 송신단으로부터 송신되고, 어떠한 물체에 의해서도 반사되지 않고 초음파 센서의 수신단에 직접 들어간다. 따라서, 직접 신호들은 제스처 식별을 위한 원치 않는 신호들이다. 반사 신호들은 초음파 센서의 송신단으로부터 송신되고 물체에 의해 반사된 후에 수신단에 들어가는 신호들이다. 초음파를 반사하는 물체는 운전자의 손 또는 손가락일 수 있거나, 다른 물체일 수 있다. 반사 신호들에서, 운전자의 손 또는 손가락에 의해 반사된 신호들은 제스처 식별을 위한 최종 원하는 신호들이다.
옵션으로, 일부 실시예들에서, 초음파 신호들의 전파 거리들은 초음파 신호들의 위상차들 및 지연 파라미터들을 사용하여 계산될 수 있고, 그 후 초음파 신호들에서의 반사 신호들은 상이한 전파 거리들에 기초하여 결정된다. 반사 신호들이 결정된 후에, 반사 신호들의 전파 거리들은 반사 신호들의 위상차들 및 지연 파라미터들을 사용하여 계산될 수 있고, 그에 의해 반사 신호들 중에 운전자의 손 또는 손가락에 의해 반사되는 신호를, 구체적으로, 운전자의 손 또는 손가락의 활성 영역에서의 반사 신호인 것으로 결정한다. 그 신호는 제스처 식별을 위한 최종 원하는 신호이다.
260: 어떤 시각에서의 반사 신호들의 위치 정보에 기초하여 그 시각에서의 현재 제스처의 윤곽 정보를 결정하고, 윤곽 정보가 유효한지를 결정한다.
그 시각에서의 운전자의 손 또는 손가락의 활성 영역에서의 반사 신호들의 위치 정보는 반사 신호들을 사용하여 결정된다. 그 시각에서의 현재 제스처의 윤곽 정보는 위치 정보에 기초하여 결정된다. 윤곽 정보는 미리 저장된 윤곽 정보와 비교된다. 유사도가 미리 설정된 임계값 이상일 때, 윤곽 정보는 유효한 윤곽 정보로서 간주될 수 있다. 구체적으로, 윤곽 정보는 사람의 손 또는 손가락의 윤곽 정보이고, 그에 의해 반사 신호들에 대한 후속 처리가 수행되어, 반사 신호들에 의해 표현되는 제스처를 결정한다. 윤곽 정보가 무효하면, 제스처 식별 시간을 감소시키기 위해 반사 신호들에 대해 후속 처리가 수행되지 않을 수 있다.
운전자의 손 또는 손가락의 윤곽 정보를 결정하여, 획득된 반사 신호들이 운전자의 손 또는 손가락에 의해 반사된 반사 신호들인지를 결정하고, 그에 의해 제스처 식별 정확도를 더 보장한다.
270: 운전자의 현재 제스처의 궤적을 결정한다.
옵션으로, 일부 실시예들에서, 초음파 신호들로부터 반사 신호들이 결정된 후에, 그 일정 기간 내의 반사 신호들에 기초하여 그 일정 기간 내의 운전자의 손 또는 손가락이 포지셔닝될 수 있다. 예를 들어, 초음파 멀티포인트 포지셔닝 원리에 따라 일정 기간 내의 운전자의 손 또는 손가락의 위치의 좌표들이 결정될 수 있다.
옵션으로, 일부 실시예들에서, 일정 기간 내의 운전자의 손 또는 손가락이 포지셔닝된 후에, 획득된 위치 정보에 기초하여 운전자의 현재 제스처의 궤적이 결정될 수 있다. 예를 들어, 일정 기간 내의 운전자의 손 또는 손가락의 위치의 좌표들에 대해 함수 피팅을 수행하여 피팅된 함수 곡선을 획득할 수 있다. 피팅된 함수 곡선은 운전자의 현재 제스처의 궤적이다.
280: 현재 제스처의 유형을 결정한다.
옵션으로, 일부 실시예들에서, 현재 제스처의 유형은 현재 제스처의 결정된 궤적에 기초하여 미리 설정된 제스처 유형들로부터 결정될 수 있다.
예를 들어, 현재 제스처의 궤적의 함수 곡선은 데이터베이스 내의 함수 곡선들과 비교될 수 있고, 데이터베이스 내의 함수 곡선들로부터 현재 제스처의 궤적의 함수 곡선과 가장 높은 매칭 정도를 갖는 함수 곡선이 선택된다. 가장 높은 매칭 정도를 갖는 함수 곡선에 대응하는 제스처 유형이 현재 제스처의 유형이다.
옵션으로, 일부 실시예들에서, 미리 설정된 제스처 유형들은 다음의 제스처 유형들 중 적어도 하나를 포함할 수 있다:
2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것;
2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것;
하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것;
하나의 손가락으로 더블 클릭하는 것;
한 손을 흔드는 것;
스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 및
2개의 손가락으로 더블 클릭하는 것.
290: 현재 제스처의 유형에 대응하는 조작을 수행하도록 현재 제스처의 유형에 기초하여 탑재된 시스템을 제어한다.
본 발명의 이 실시예에서 탑재된 시스템은 탑재된 헤드업 디스플레이(Head Up Display, HUD), 탑재된 내비게이션 시스템, 탑재된 메뉴 시스템, 및 탑재된 멀티미디어 시스템, 또는 다른 탑재된 시스템일 수 있다. 이는 본 발명의 이 실시예에서 제한되지 않는다.
위에서는 도 1 내지 도 12를 참조하여 본 발명의 실시예들의 방법 실시예들이 상세히 설명되었다. 이하에서는 도 13 및 도 14를 참조하여 본 발명의 실시예들에서 탑재된 시스템을 제어하기 위한 장치의 실시예들을 상세히 설명한다. 탑재된 시스템을 제어하기 위한 장치의 실시예들은 방법 실시예들에 대응한다는 점에 유의해야 한다. 유사한 설명들에 대해서는, 방법 실시예들을 참조한다.
도 13은 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 장치(300)의 개략 블록도이다. 도 13에 도시된 바와 같이, 장치는 다음의 모듈들 중 일부 또는 전부를 포함한다:
스티어링 휠에 장착된 센서를 사용하여, 운전자가 스티어링 휠을 잡고 있는 과정 중에 운전자의 현재 제스처의 궤적을 결정하도록 구성된 제1 결정 모듈(310);
현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 현재 제스처의 유형을 결정하도록 구성된 제2 결정 모듈(320); 및
현재 제스처의 유형에 대응하는 조작을 수행하도록 탑재된 시스템을 제어하도록 구성된 제어 모듈(330).
구체적으로, 운전자가 손을 사용하여 스티어링 휠을 잡을 때, 운전자가 수행하는 일부 제스처들의 유형들이 스티어링 휠에 장착된 센서를 사용하여 식별될 수 있고, 제스처들의 유형들에 기초하여 탑재된 시스템에 대해 상이한 유형들의 제스처들에 대응하는 조작들이 수행된다. 전체 과정에서, 운전자의 손은 스티어링 휠을 잡고 있는 상태에 남아 있을 수 있고, 일부 제스처들은 단지 운전자의 일부 손가락들 또는 한 손을 사용하여 수행될 필요가 있으므로, 상이한 기능 조작들이 구현될 수 있고, 차량의 운전 동안 운전자의 일부 기능 조작 요구들이 크게 용이해지고, 운전 안전이 보장되고, 차량과 인간 간의 상호작용이 더 긴밀해진다.
본 발명의 이 실시예에서 탑재된 시스템은 탑재된 헤드업 디스플레이(Head Up Display, HUD)일 수 있거나, 탑재된 내비게이션 시스템, 탑재된 메뉴 시스템, 및 탑재된 멀티미디어 시스템, 또는 다른 탑재된 시스템일 수 있다는 것을 이해해야 한다. 이는 본 발명의 이 실시예에서 제한되지 않는다.
옵션으로, 일부 실시예들에서, 센서는 스티어링 휠의 원주 상에 장착될 수 있다.
옵션으로, 일부 실시예들에서, 복수의 센서가 존재할 수 있다. 복수의 센서는 직렬로 접속되어 센서 어레이를 형성한다.
센서들의 특정 수량은 스티어링 휠의 크기에 의해 결정될 수 있거나, 제스처 식별에 필요한 정밀도에 의해 결정될 수 있다는 것을 이해해야 한다. 예를 들어, 운전자가 수행하는 제스처가 정밀하게 식별될 필요가 있을 때, 센서들의 수량은 적절히 증가될 수 있다.
옵션으로, 일부 실시예들에서, 센서는 초음파 센서일 수 있다.
옵션으로, 일부 실시예들에서, 복수의 초음파 센서가 또한 존재할 수 있다. 복수의 초음파 센서의 특정 수량은 스티어링 휠의 크기에 의해 결정될 수 있거나, 제스처 식별의 정밀도에 의해 결정될 수 있다. 복수의 초음파 센서는 직렬로 접속되어 초음파 센서 어레이를 형성한다.
초음파 멀티포인트 포지셔닝 원리에 따라 제스처가 식별된다는 것을 이해해야 한다. 따라서, 초음파 센서들의 수량은 적어도 2개이다.
센서가 초음파 센서일 때, 초음파 센서는 송신단으로서 사용될 수 있거나, 수신단으로서 사용될 수 있다는 것을 이해해야 한다.
옵션으로, 일부 실시예들에서, 센서가 초음파 센서일 때, 초음파 센서는: 일정 기간 내에 복수의 초음파 센서에 의해 수집된 초음파 신호들을 획득하고; 상기 수집된 초음파 신호들로부터 반사 신호를 선택하고; 상기 선택된 반사 신호에 기초하여 일정 기간 내의 상기 운전자의 손 또는 손가락을 포지셔닝하여 상기 현재 제스처의 궤적을 결정하도록 구체적으로 구성된다.
옵션으로, 일부 실시예들에서, 장치(300)는 제3 결정 모듈(340)을 추가로 포함한다. 제3 결정 모듈(340)은 스티어링 휠이 회전 상태에 있는지를 결정하도록 구성된다.
옵션으로, 일부 실시예들에서, 미리 설정된 제스처 유형들은 다음의 제스처 유형들 중 적어도 하나를 포함한다:
2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것;
2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것;
하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것;
하나의 손가락으로 더블 클릭하는 것;
한 손을 흔드는 것;
스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 및
2개의 손가락으로 더블 클릭하는 것.
옵션으로, 일부 실시예들에서, 스티어링 휠의 원주에는 복수의 사운드 홀이 제공된다. 상기 복수의 사운드 홀은 상기 복수의 초음파 센서와 일 대 일 대응관계에 있다. 상기 사운드 홀들의 방향들은 상기 운전자의 손 또는 손가락의 활성 영역 및 상기 초음파 신호들의 커버리지에 기초하여 결정된다.
옵션으로, 일부 실시예들에서, 초음파 센서들과 사운드 홀들 사이에 방수 통기 막이 배치된다. 상기 방수 통기 막은 수증기가 사운드 홀들을 통해 초음파 센서들에 들어가는 것을 방지하도록 구성된다.
본 발명의 이 실시예에 따른 탑재된 시스템을 제어하기 위한 장치는 본 발명의 실시예들에서 탑재된 시스템을 제어하기 위한 장치에 대응할 수 있고, 탑재된 시스템을 제어하기 위한 장치(300)의 모듈들의 전술한 및 다른 동작들 및/또는 기능들은 도 1 및 도 12의 방법들의 대응하는 절차들을 각각 구현한다는 것을 이해해야 한다. 간결함을 위해, 세부사항들은 여기서 다시 설명되지 않는다.
도 14는 본 발명의 실시예에 따른 탑재된 시스템을 제어하기 위한 장치(400)의 개략 구조도이다. 도 14에 도시된 바와 같이, 장치(400)는 메모리(410) 및 프로세서(420)를 포함한다. 메모리(410) 및 프로세서(420)는 서로 통신하고, 내부 접속 경로를 통해 제어 및/또는 데이터 신호를 전송한다.
메모리(410)는 프로그램 코드를 저장하도록 구성된다.
프로세서(420)는 프로그램 코드를 호출하여 본 발명의 실시예들에서의 전술한 실시예들에서의 방법을 구현하도록 구성된다.
본 발명의 이 실시예에서, 프로세서(420)는 중앙 처리 유닛(central processing unit, CPU), 네트워크 프로세서(network processor, NP), 또는 CPU와 NP의 조합일 수 있다. 프로세서는 하드웨어 칩을 추가로 포함할 수 있다. 전술한 하드웨어 칩은 주문형 집적 회로(application-specific integrated circuit, ASIC), 프로그래머블 로직 디바이스(programmable logic device, PLD), 또는 이들의 조합일 수 있다.
본 발명의 실시예는 컴퓨터 프로그램의 코드를 저장하도록 구성된 컴퓨터 판독가능 저장 매체를 제공한다. 컴퓨터 프로그램은 도 1 내지 도 12에서 본 발명의 실시예들에서 고장 포지셔닝 방법을 수행하기 위해 사용되는 명령어를 포함한다. 판독가능 저장 매체는 판독 전용 메모리(read-only memory, ROM) 또는 랜덤 액세스 메모리(random access memory, RAM)일 수 있다. 이는 본 발명의 이 실시예에서 제한되지 않는다.
본 발명의 실시예들의 전부 또는 일부는 소프트웨어, 하드웨어, 펌웨어, 또는 이들의 임의의 조합에 의해 구현될 수 있다. 소프트웨어가 실시예들을 구현하기 위해 사용될 때, 실시예들은 완전히 또는 부분적으로 컴퓨터 프로그램 제품의 형식으로 구현될 수 있다. 컴퓨터 프로그램 제품은 하나 이상의 컴퓨터 명령어를 포함한다. 컴퓨터 프로그램 명령어들이 컴퓨터 상에서 로딩되고 실행될 때, 본 발명의 실시예들에 따른 프로세스들 또는 기능들의 전부 또는 일부가 생성된다. 컴퓨터는 범용 컴퓨터, 전용 컴퓨터, 컴퓨터 네트워크, 또는 다른 프로그램 가능한 장치들일 수 있다. 컴퓨터 명령어들은 컴퓨터 판독가능 매체에 저장될 수 있거나, 컴퓨터 판독가능 저장 매체로부터 다른 컴퓨터 판독가능 저장 매체로 송신될 수 있다. 예를 들어, 컴퓨터 명령어들은 웹사이트, 컴퓨터, 서버, 또는 데이터 센터로부터 유선(예를 들어, 동축 케이블, 광섬유, 또는 디지털 가입자 회선(Digital Subscriber Line, DSL)) 또는 무선(예를 들어, 적외선, 라디오, 및 마이크로파) 방식으로 다른 웹사이트, 컴퓨터, 서버, 또는 데이터 센터로 송신될 수 있다. 컴퓨터 판독가능 저장 매체는 컴퓨터에 의해 액세스 가능한 임의의 사용가능한 매체, 또는 하나 이상의 사용가능 매체를 통합하는, 서버 또는 데이터 센터와 같은, 데이터 저장 디바이스일 수 있다. 사용가능 매체는 자기 매체(예를 들어, 플로피 디스크, 하드 디스크, 자기 테이프), 광학 매체(예를 들어, 디지털 비디오 디스크(Digital Video Disc, DVD)), 또는 반도체 매체(예를 들어, 솔리드-스테이트 디스크(Solid State Disk, SSD)) 등일 수 있다.
본 발명의 이 실시예에 따른 탑재된 시스템을 제어하기 위한 장치는 본 발명의 실시예들에서 탑재된 시스템을 제어하기 위한 장치에 대응할 수 있고, 탑재된 시스템을 제어하기 위한 장치(400)의 모듈들의 전술한 및 다른 동작들 및/또는 기능들은 도 1 및 도 12의 방법들의 대응하는 절차들을 각각 구현한다는 것을 이해해야 한다. 간결함을 위해, 세부사항들은 여기서 다시 설명되지 않는다.
본 명세서에서 "및/또는"이라는 용어는 연관된 대상들을 기술하기 위한 연관 관계만을 기술하고 3개의 관계가 존재할 수 있다는 것을 나타낸다는 것을 이해해야 한다. 예를 들어, A 및/또는 B는 다음의 3가지 경우를 나타낼 수 있다: A만 존재하고, A와 B 양쪽 모두 존재하고, B만 존재한다. 또한, 본 명세서에서 문자 "/"는 연관된 대상들 간의 "또는" 관계를 일반적으로 지시한다.
본 기술분야의 통상의 기술자는, 본 명세서에 개시된 실시예들에서 설명된 예들과 조합하여, 유닛들 및 알고리즘 단계들이 전자 하드웨어 또는 컴퓨터 소프트웨어와 전자 하드웨어의 조합에 의해 구현될 수 있다는 것을 인식할 것이다. 기능들이 하드웨어에 의해 수행되는지 또는 소프트웨어에 의해 수행되는지는 기술적 해결책들의 특정 응용들 및 설계 제약 조건들에 의존한다. 본 기술분야의 통상의 기술자는 각각의 특정 응용에 대해 설명된 기능들을 구현하기 위해 상이한 방법들을 이용할 수 있지만, 그 구현이 본 발명의 실시예들의 범위를 넘어서는 것으로 간주되어서는 안 된다.
편리하고 간단한 설명을 목적으로, 전술한 시스템, 장치, 및 유닛의 상세한 작업 프로세스들에 대해서는, 전술한 방법 실시예들에서의 대응하는 프로세스들이 참조되고, 세부사항들은 여기서 다시 설명되지 않는다는 것을 본 기술분야의 통상의 기술자는 명확하게 이해할 수 있다.
본 발명에서 제공되는 몇몇 실시예들에서, 개시된 시스템, 장치, 및 방법은 다른 방식들로 구현될 수 있다는 것을 이해해야 한다. 예를 들어, 설명된 장치 실시예는 예에 불과하다. 예를 들어, 유닛 구분은 논리적 기능 구분에 불과하고, 실제 구현에서는 다른 구분일 수 있다. 예를 들어, 복수의 유닛 또는 컴포넌트가 조합되거나 다른 시스템에 통합될 수 있거나, 또는 일부 특징이 무시되거나 수행되지 않을 수 있다. 또한, 디스플레이되거나 논의된 상호 결합들 또는 직접 결합들 또는 통신 접속들은 일부 인터페이스들을 사용하여 구현될 수 있다. 장치들 또는 유닛들 간의 간접 결합들 또는 통신 접속들은 전자적, 기계적, 또는 다른 형식들로 구현될 수 있다.
개별적인 부분들로서 설명된 유닛들은 물리적으로 분리되어 있을 수 있거나 그렇지 않을 수 있고, 유닛들로서 디스플레이된 부분들은 물리적 유닛들일 수 있거나 그렇지 않을 수 있고, 하나의 위치에 위치할 수 있거나, 또는 복수의 네트워크 유닛들 상에 분산될 수 있다. 유닛들의 일부 또는 전부는 실시예들의 해결책들의 목적들을 달성하기 위해 실제 요건들에 기초하여 선택될 수 있다.
또한, 본 발명의 실시예들에서의 기능 유닛들은 하나의 처리 유닛으로 통합될 수 있거나, 또는 유닛들 각각은 물리적으로 단독으로 존재할 수 있거나, 또는 2개 이상의 유닛이 하나의 유닛으로 통합된다.
기능들이 소프트웨어 기능 유닛의 형식으로 구현되고 독립 제품으로서 판매되거나 사용될 때, 이러한 기능들은 컴퓨터 판독가능 저장 매체에 저장될 수 있다. 그러한 이해에 기초하여, 본질적으로 본 발명의 실시예들의 기술적 해결책들, 또는 종래 기술에 기여하는 부분, 또는 기술적 해결책들의 일부는, 소프트웨어 제품의 형식으로 구현될 수 있다. 컴퓨터 소프트웨어 제품은 저장 매체에 저장되고, 컴퓨터 디바이스(개인용 컴퓨터, 서버, 또는 네트워크 디바이스일 수 있음)에게 본 발명의 실시예들에서 설명된 방법들의 단계들의 전부 또는 일부를 수행하도록 지시하기 위한 여러 명령어들을 포함한다. 전술한 저장 매체는: USB 플래시 드라이브, 이동식 하드 디스크, 판독 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크, 또는 광 디스크와 같은, 프로그램 코드를 저장할 수 있는 임의의 매체를 포함한다.
전술한 설명들은 본 발명의 실시예들의 특정 구현들에 불과하고, 본 발명의 실시예들의 보호 범위를 제한하도록 의도된 것은 아니다. 본 발명의 실시예들에 개시된 기술적 범위 내에서 본 기술분야의 통상의 기술자에 의해 용이하게 안출되는 임의의 변형 또는 치환은 본 발명의 실시예들의 보호 범위 내에 속할 것이다. 따라서, 본 발명의 실시예들의 보호 범위는 청구항들의 보호 범위에 따라 결정되어야 한다.

Claims (12)

  1. 탑재된 시스템을 제어하기 위한 방법으로서,
    스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 단계;
    상기 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 상기 현재 제스처의 유형을 결정하는 단계; 및
    상기 현재 제스처의 유형에 대응하는 조작을 수행하도록 상기 탑재된 시스템을 제어하는 단계를 포함하는, 방법.
  2. 제1항에 있어서, 상기 스티어링 휠에 복수의 센서가 장착되고, 상기 복수의 센서는 복수의 초음파 센서이고,
    스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 상기 단계는:
    일정 기간 내에 상기 복수의 초음파 센서에 의해 수집된 초음파 신호들을 획득하는 단계;
    상기 수집된 초음파 신호들로부터 반사 신호를 선택하는 단계; 및
    상기 선택된 반사 신호에 기초하여 일정 기간 내의 상기 운전자의 손 또는 손가락을 포지셔닝하여 상기 현재 제스처의 궤적을 결정하는 단계를 포함하는, 방법.
  3. 제1항 또는 제2항에 있어서, 스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 상기 단계 전에, 상기 방법은:
    상기 스티어링 휠이 회전 상태에 있는지를 결정하는 단계를 추가로 포함하고;
    스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하는 상기 단계는:
    상기 스티어링 휠이 비회전 상태에 있을 때, 상기 스티어링 휠에 장착된 센서를 사용하여 상기 운전자의 현재 제스처의 궤적을 결정하는 단계를 포함하는, 방법.
  4. 제3항에 있어서, 상기 스티어링 휠에 자이로스코프가 장착되고,
    상기 스티어링 휠이 회전 상태에 있는지를 결정하는 상기 단계는:
    상기 자이로스코프에 기초하여, 상기 스티어링 휠이 상기 회전 상태에 있는지를 결정하는 단계를 포함하는, 방법.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 미리 설정된 제스처 유형들은 다음의 제스처 유형들:
    2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것;
    2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것;
    하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것;
    하나의 손가락으로 더블 클릭하는 것;
    한 손을 흔드는 것;
    상기 스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 및
    2개의 손가락으로 더블 클릭하는 것 중 적어도 하나를 포함하는, 방법.
  6. 제2항 내지 제5항 중 어느 한 항에 있어서, 상기 스티어링 휠의 원주에는 복수의 사운드 홀이 제공되고, 상기 복수의 사운드 홀은 상기 복수의 초음파 센서와 일 대 일 대응관계에 있고, 상기 사운드 홀들의 방향들은 상기 운전자의 손 또는 손가락의 활성 영역 및 상기 초음파 신호들의 커버리지에 기초하여 결정되는, 방법.
  7. 탑재된 시스템을 제어하기 위한 장치로서,
    스티어링 휠에 장착된 센서를 사용하여 운전자의 현재 제스처의 궤적을 결정하도록 구성된 제1 결정 모듈;
    상기 현재 제스처의 궤적에 기초하여 미리 설정된 제스처 유형들로부터 상기 현재 제스처의 유형을 결정하도록 구성된 제2 결정 모듈; 및
    현재 제스처의 유형에 대응하는 조작을 수행하도록 상기 탑재된 시스템을 제어하도록 구성된 제어 모듈을 포함하는, 장치.
  8. 제7항에 있어서, 상기 스티어링 휠에 복수의 센서가 장착되고, 상기 복수의 센서는 복수의 초음파 센서이고,
    상기 제1 결정 모듈은: 일정 기간 내에 상기 복수의 초음파 센서에 의해 수집된 초음파 신호들을 획득하고;
    상기 수집된 초음파 신호들로부터 반사 신호를 선택하고;
    상기 선택된 반사 신호에 기초하여 일정 기간 내의 상기 운전자의 손 또는 손가락을 포지셔닝하여 상기 현재 제스처의 궤적을 결정하도록 구체적으로 구성되는, 장치.
  9. 제7항 또는 제8항에 있어서, 상기 장치는 상기 스티어링 휠이 회전 상태에 있는지를 결정하도록 구성된 제3 결정 모듈을 포함하고;
    상기 제3 결정 모듈은, 상기 스티어링 휠이 비회전 상태에 있을 때, 상기 스티어링 휠에 장착된 센서를 사용하여 상기 운전자의 현재 제스처의 궤적을 결정하도록 구체적으로 구성되는, 장치.
  10. 제9항에 있어서, 상기 스티어링 휠에 자이로스코프가 장착되고,
    상기 제3 결정 모듈은, 상기 자이로스코프에 기초하여, 상기 스티어링 휠이 회전 상태에 있는지를 결정하도록 구체적으로 구성되는, 장치.
  11. 제7항 내지 제10항 중 어느 한 항에 있어서, 상기 미리 설정된 제스처 유형들은 다음의 제스처 유형들:
    2개의 손가락을 안쪽 또는 바깥쪽으로 슬라이딩하는 것;
    2개의 손가락을 시계방향 또는 반시계방향으로 슬라이딩하는 것;
    하나의 손가락을 위쪽, 아래쪽, 왼쪽, 및 오른쪽으로 슬라이딩하는 것;
    하나의 손가락으로 더블 클릭하는 것;
    한 손을 흔드는 것;
    상기 스티어링 휠의 원주의 내측을 따라 하나의 손가락을 터치하고 슬라이딩하는 것; 및
    2개의 손가락으로 더블 클릭하는 것 중 적어도 하나를 포함하는, 장치.
  12. 제7항 내지 제11항 중 어느 한 항에 있어서, 상기 스티어링 휠의 원주에는 복수의 사운드 홀이 제공되고, 상기 복수의 사운드 홀은 상기 복수의 초음파 센서와 일 대 일 대응관계에 있고, 상기 사운드 홀들의 방향들은 상기 운전자의 손 또는 손가락의 활성 영역 및 상기 초음파 신호들의 커버리지에 기초하여 결정되는, 장치.
KR1020197025948A 2017-02-27 2017-09-15 차량탑재 시스템을 제어하기 위한 방법 및 장치 KR102288115B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710106795.8A CN108509023A (zh) 2017-02-27 2017-02-27 车载系统的控制方法和装置
CN201710106795.8 2017-02-27
PCT/CN2017/101846 WO2018153067A1 (zh) 2017-02-27 2017-09-15 车载系统的控制方法和装置

Publications (2)

Publication Number Publication Date
KR20190113917A true KR20190113917A (ko) 2019-10-08
KR102288115B1 KR102288115B1 (ko) 2021-08-11

Family

ID=63253066

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197025948A KR102288115B1 (ko) 2017-02-27 2017-09-15 차량탑재 시스템을 제어하기 위한 방법 및 장치

Country Status (6)

Country Link
US (3) US10884510B2 (ko)
EP (1) EP3570140B1 (ko)
JP (1) JP6910455B2 (ko)
KR (1) KR102288115B1 (ko)
CN (2) CN116279746A (ko)
WO (1) WO2018153067A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109799508A (zh) * 2019-01-29 2019-05-24 肇庆奥迪威传感科技有限公司 车辆盲区监测装置、方法及系统
DE102021110691A1 (de) 2021-04-27 2022-10-27 Bayerische Motoren Werke Aktiengesellschaft Lenkrad und Verfahren zur Steuerung eines Fahrzeuges und Fahrzeug umfassend das Lenkrad
CN113589931A (zh) * 2021-07-30 2021-11-02 重庆长安汽车软件科技有限公司 手势功能展示模块、车内手势系统及汽车
CN113844265A (zh) * 2021-08-20 2021-12-28 识瓴电子科技(南通)有限责任公司 车辆控制方法、装置及电子设备
CN115056745B (zh) * 2021-12-16 2024-05-17 博泰车联网科技(上海)股份有限公司 车辆、控制车辆的方法以及识别车辆外部手势的方法
DE102022128277A1 (de) 2022-10-25 2024-04-25 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Anzeigen einer Textmeldung in einem Fahrzeug

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254431A (ja) * 1995-03-16 1996-10-01 Aqueous Res:Kk 車両の切れ角検出装置
JP2013093064A (ja) * 2013-02-20 2013-05-16 Seiko Epson Corp 入力装置及び入力方法
JP2013218391A (ja) * 2012-04-05 2013-10-24 Pioneer Electronic Corp 操作入力装置、操作入力方法、及び、操作入力プログラム
US20160185385A1 (en) * 2014-12-31 2016-06-30 Harman International Industries, Inc. Steering wheel control system

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3035339B2 (ja) * 1989-11-30 2000-04-24 エヌシーアール インターナショナル インコーポレイテッド 通過人数の計数方法
JP2004138481A (ja) * 2002-10-17 2004-05-13 Matsushita Electric Ind Co Ltd 位置測定装置およびこれを用いたロボット
GB0810179D0 (en) 2008-06-04 2008-07-09 Elliptic Laboratories As Object location
JP5206433B2 (ja) * 2009-01-13 2013-06-12 セイコーエプソン株式会社 入力装置及び入力方法
US9272724B2 (en) * 2009-09-08 2016-03-01 Golomb Mercantile Company Llc Integrated vehicle control system and apparatus
US8886407B2 (en) * 2011-07-22 2014-11-11 American Megatrends, Inc. Steering wheel input device having gesture recognition and angle compensation capabilities
JP2014038409A (ja) * 2012-08-13 2014-02-27 Nec Casio Mobile Communications Ltd 電子機器、プログラム、及び、入力受付方法
EP3466741B1 (en) * 2012-11-27 2024-03-06 Neonode Inc. Light-based touch controls on a steering wheel and dashboard
KR20140079025A (ko) * 2012-12-18 2014-06-26 현대자동차주식회사 차량 내 다리 제스처 인식을 이용한 사용자 인터페이스 조작 방법
CN104276201A (zh) 2013-07-05 2015-01-14 鸿富锦精密工业（深圳）有限公司 方向盘、采用该方向盘的汽车及辅助系统
KR101500130B1 (ko) * 2013-09-02 2015-03-06 현대자동차주식회사 스티어링 휠에 설치된 차량용 제어장치
WO2015089453A1 (en) 2013-12-12 2015-06-18 Qualcomm Incorporated Micromechanical ultrasonic transducers and display
CN103699224A (zh) * 2013-12-16 2014-04-02 苏州佳世达光电有限公司 一种手势感应的方法和系统
US9939912B2 (en) 2014-03-05 2018-04-10 Denso Corporation Detection device and gesture input device
KR101561917B1 (ko) * 2014-04-10 2015-11-20 엘지전자 주식회사 차량 제어 장치 및 그 제어 방법
US9972184B2 (en) * 2014-07-24 2018-05-15 State Farm Mutual Automobile Insurance Company Systems and methods for monitoring a vehicle operator and for monitoring an operating environment within the vehicle
US9720591B2 (en) * 2014-08-20 2017-08-01 Harman International Industries, Incorporated Multitouch chording language
CN105607770B (zh) 2014-11-13 2021-05-04 现代自动车株式会社 触摸输入装置以及包括该装置的车辆
CN105530365A (zh) * 2014-12-26 2016-04-27 比亚迪股份有限公司 一种车载电话系统及包含该系统的车辆
CN106289299A (zh) * 2015-05-22 2017-01-04 深圳市凯立德科技股份有限公司 一种导航设备及其操作方法
CN105389003A (zh) * 2015-10-15 2016-03-09 广东欧珀移动通信有限公司 一种移动终端应用程序的控制方法和装置
CN105260024B (zh) * 2015-10-15 2018-01-26 广东欧珀移动通信有限公司 一种在屏幕上模拟手势运动轨迹的方法及装置
CN105373230A (zh) * 2015-11-12 2016-03-02 惠州华阳通用电子有限公司 一种车机手势识别方法及装置
US10210451B2 (en) * 2016-07-22 2019-02-19 Alpine Electronics of Silicon Valley, Inc. Neural network applications in resource constrained environments
GB2552984B (en) * 2016-08-17 2018-10-24 Ford Global Tech Llc An ultrasonic haptic control system
US10466844B1 (en) * 2018-05-21 2019-11-05 UltraSense Systems, Inc. Ultrasonic touch and force input detection
US20190354238A1 (en) * 2018-05-21 2019-11-21 UltraSense Systems, Inc. Ultrasonic touch detection and decision

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254431A (ja) * 1995-03-16 1996-10-01 Aqueous Res:Kk 車両の切れ角検出装置
JP2013218391A (ja) * 2012-04-05 2013-10-24 Pioneer Electronic Corp 操作入力装置、操作入力方法、及び、操作入力プログラム
JP2013093064A (ja) * 2013-02-20 2013-05-16 Seiko Epson Corp 入力装置及び入力方法
US20160185385A1 (en) * 2014-12-31 2016-06-30 Harman International Industries, Inc. Steering wheel control system

Also Published As

Publication number Publication date
US11275449B2 (en) 2022-03-15
KR102288115B1 (ko) 2021-08-11
EP3570140A1 (en) 2019-11-20
US20190384413A1 (en) 2019-12-19
EP3570140B1 (en) 2021-09-01
US20220137715A1 (en) 2022-05-05
JP6910455B2 (ja) 2021-07-28
CN108509023A (zh) 2018-09-07
US10884510B2 (en) 2021-01-05
CN116279746A (zh) 2023-06-23
US11847265B2 (en) 2023-12-19
EP3570140A4 (en) 2020-01-01
US20210103341A1 (en) 2021-04-08
WO2018153067A1 (zh) 2018-08-30
JP2020509489A (ja) 2020-03-26

Similar Documents

Publication Publication Date Title
KR102288115B1 (ko) 차량탑재 시스템을 제어하기 위한 방법 및 장치
US20190394097A1 (en) Vehicle application store for console
US9098367B2 (en) Self-configuring vehicle console application store
EP3488326A1 (en) Haptic system for actuating materials
US20160269469A1 (en) Vehicle Supervising of Occupant Applications
US20150015521A1 (en) Gesture input operation processing device
US11005720B2 (en) System and method for a vehicle zone-determined reconfigurable display
WO2013036289A2 (en) Vehicle user interface system
US20170123534A1 (en) Display zoom operation with both hands on steering wheel
CN115291770A (zh) 用于车辆的方法、装置、电子设备、存储介质和车辆
JP2015020677A (ja) 画像認識装置、ジェスチャ入力装置及びコンピュータプログラム
CN117103992A (zh) 车辆信息的显示方法、装置、车辆及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant