KR20190138757A - 입력을 인식하기 위한 방법 - Google Patents

입력을 인식하기 위한 방법 Download PDF

Info

Publication number
KR20190138757A
KR20190138757A KR1020190066771A KR20190066771A KR20190138757A KR 20190138757 A KR20190138757 A KR 20190138757A KR 1020190066771 A KR1020190066771 A KR 1020190066771A KR 20190066771 A KR20190066771 A KR 20190066771A KR 20190138757 A KR20190138757 A KR 20190138757A
Authority
KR
South Korea
Prior art keywords
gesture
sensor
input
assigned
signal
Prior art date
Application number
KR1020190066771A
Other languages
English (en)
Inventor
프랑크 뮐러
Original Assignee
아우디 아게
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아우디 아게 filed Critical 아우디 아게
Publication of KR20190138757A publication Critical patent/KR20190138757A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06K9/00335
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/64Three-dimensional objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 센서(6)를 이용해서 사용자(10)의 입력을 인식하기 위한 방법에 관한 것으로, 입력에 할당된 사용자(10)의 적어도 하나의 제스처에 의한 입력이 센서(6)에 의해 인식되고, 상기 센서(6)에 의해 검출된 제 1 제스처는 입력의 검출을 위해 적용되고, 제 1 제스처를 검출하기 위한 상기 센서(6)의 기능이 검사되고, 제 1 제스처의 인식을 위한 기능이 제공되지 않는 경우에, 대안으로서 제 2 제스처가 선택되어 입력에 할당되고, 상기 센서(6)에 의해 입력을 인식하기 위해 제 1 제스처로부터 제 2 제스처로 전환된다.

Description

입력을 인식하기 위한 방법{METHOD FOR RECOGNIZING AN INPUT}
본 발명은 사용자의 입력을 인식하기 위한 방법에 관한 것이다.
명령을 입력하기 위해 사용자는 스위치를 작동할 수 있다. 그러나 사용자의 제스처에 기초해서 이러한 명령을 인식하는 것도 가능하며, 사용자의 제스처는 센서에 의해 검출된다. 그러나 이 경우, 제스처가 센서에 의해 신뢰적으로 검출되는 것이 보장되어야 한다.
사용자의 입력 제스처를 검출하기 위한 시스템 및 방법은 간행물 DE 10 2016 204 274 A1호에 공개되어 있다.
본 발명의 과제는 제스처를 센서에 의해 신뢰적으로 검출하고, 제스처에 할당된 입력 또는 제스처에 할당된 명령을 인식하는 것이다.
상기 과제는 독립 특허 청구항들의 특징들을 갖는 방법과 시스템에 의해 해결된다. 방법 및 시스템의 실시예들은 종속 청구항에 제시된다.
본 발명에 따른 방법은, 예를 들어 광학 센서를 통해 또는 광학 센서로 사용자의 입력, 예를 들어 명령을 인식하기 위해 제공된다. 이 경우 입력은 사용자의 적어도 하나의 제스처에 의해 구현되어 시각적으로 재현되고, 이 경우 적어도 하나의 제스처는 센서에 의해 검출될 것이다. 여기서, 일반적으로 다수의 제스처 중 제 1 제스처는 입력을 인식하기 위해 적용 및/또는 규정되고, 즉 입력에 또는 입력과 연관된 명령에 할당된다. 제 1 제스처는 입력 또는 이와 연관된 명령에 할당된 센서에 및/또는 센서에 액세스 가능한 메모리에 저장되며, 센서의 교란 없는 작동 시 일반적으로 센서에 의해 검출할 또는 검출 가능한 영역에서 센서에 의해 사진 또는 이미지로서 광학적으로 검출될 수 있다. 이 방법에서, 제 1 제스처를 검출하기 위한 센서의 기능이 검사된다. 센서에 의해 제 1 제스처를 검출하기 위한 기능이 제공되지 않거나 더 이상 제공되지 않는 경우에, 입력을 인식하기 위해 대안으로서 입력에 사전에 미리 할당되거나 선택의 결과로서 할당된 제 2 제스처가 선택되고, 이 경우 센서에 의해 입력을 인식하기 위해 제 1 제스처로부터 제 2 제스처로 센서 내부에서, 특히 자동으로 전환된다. 인식할 입력 또는 상응하는 명령 또는 상응하는 기능에 먼저 제 1 제스처가 할당되고, 이어서 상기 제스처의 검출이 오류 없이 더 이상 불가능한 경우, 제 1 제스처와 구별되는 대안적인 제 2 제스처가 할당된다. 인식할 입력에 처음에는 다수의 제스처, 특히 제 1 및 제 2 제스처가 할당되지만, 처음에는 입력을 인식하기 위해 제 1 제스처만이 활성으로 전환되고, 제 1 제스처가 더 이상 충분히 신뢰적으로 검출될 수 없는 경우에야, 제 2 제스처는 활성으로 전환되는 한편, 제 1 제스처는 비활성으로 전환되는 것이 고려될 수 있다.
센서에 의해 신호가 생성되고, 각각의 제스처에 신호가 할당되고, 신호들의 품질, 특히 제 1 제스처에 할당되어 있는 또는 할당되는 제 1 신호의 품질이 관리 및/또는 검사된다. 제 1 신호의 품질에 기초해서, 제 1 제스처를 검출하기 위한 센서의 기능이 제공되는지 여부가 결정된다.
또한, 제 2 제스처가 규정되고, 상기 제 2 제스처에는 제 2 신호가 할당되고 또는 할당되어 있다.
제 2 제스처가 다수의 미리 결정된 제스처로부터 선택되고, 상기 제 2 제스처에 제 2 신호가 할당되는 것이 가능하다.
이 방법에서, 센서의 기능이 센서에 작용하는 환경 영향에 의존하고, 센서에 작용하는 현재 지배적인 환경 영향에 기반해서, 제 1 제스처를 검출하기 위한 센서의 기능이 제공되는지 여부가 결정되는 것이 고려된다. 이 경우 선택적으로, 환경 영향의 인식을 위해 추가 환경 센서를 사용하는 것이 가능하다.
본 발명에 따른 시스템은 시스템의 센서에 의해 사용자의 입력을 인식하도록 형성되며, 상기 센서는, 사용자에 의해 구현되며 입력에 할당된 적어도 하나의 제스처의 검출에 의해 입력, 예를 들어 명령을 인식하도록 구성되며, 이 경우 일반적으로 다수의 제 1 제스처 중에 하나의 제 1 제스처는 입력에 할당되어 적용된다. 센서는, 제 1 제스처를 광학적으로 검출하도록 구성된다. 시스템은, 제 1 제스처를 검출하기 위한 센서의 기능을 검사하도록 구성되며, 제 1 제스처를 검출하기 위한 기능이 제공되지 않는 경우에, 시스템은, 대안으로서 제 2 제스처를 선택하도록, 입력에 할당하도록 그리고 센서에 의해 입력을 인식하기 위해 제 1 제스처로부터 제 2 제스처로 센서 내부에서, 특히 자동으로 전환하도록 구성된다.
실시예에서 시스템은 센서에 연결된 컴퓨팅 유닛을 포함하고, 상기 센서는, 신호들을 생성하도록 그리고 컴퓨팅 유닛으로 전송하도록 구성된다. 이 경우 컴퓨팅 유닛은 센서에 할당되고 센서와 동일한 하우징에 배치될 수 있다.
컴퓨팅 유닛은, 센서로부터 상기 컴퓨팅 유닛에 전송된 신호들의 품질을 관리 및/또는 검사하도록, 그리고 센서가 제 1 제스처의 검출에 응답해서 생성하여 컴퓨팅 유닛에 전송한 신호들에 기반해서, 제 1 제스처의 검출을 위해 센서의 기능이 제공되는지 여부를 결정하도록 구성된다. 이러한 각각의 신호가 센서에 의해 검출할 또는 인식할 영역의 그리고 상기 영역에서 실현된 또는 재현된 제스처의 이미지를 제공하는 것이 가능하다. 또한, 영역을 복수의 부분 영역으로 세분 또는 분할하는 것이 가능하며, 이 경우 적어도 2개의 이러한 부분 영역은 공간적으로 또는 위치에 따라 서로 구별되며, 이 경우 적어도 2개의 부분 영역은 적어도 부분적으로 교차할 수 있는 것도 가능하다.
또한, 컴퓨팅 유닛은, 제 2 제스처를 선택하도록 그리고 센서를 제 1 제스처로부터 제 2 제스처로 전환하도록 구성되는 것이 가능하다.
시스템은, 예를 들어 자동차, 특히 승용차를 위해 설계된다.
센서 및/또는 컴퓨팅 유닛에 의해 제스처들을 검출하여 서로 구별하는 알고리즘이 실행된다. 이러한 알고리즘에 의해 관련 제스처들의 관련 검출에 응답해서 관련 신호들도 생성되고 상기 신호들의 품질도 관리된다.
실시예에서 센서는 차량의 실내에 배치되고, 실내에서 사용자의 제스처를 검출 및/또는 인식하도록 구성된다.
이 방법 및 시스템에 의해 차량, 예를 들어 자동차 또는 승용차에서 광학 센서에 의해 검출할 제스처들 사이의 전환이 가능하다.
일반적으로 차량 내에 배치된 광학 센서는, 센서에 설치된 알고리즘으로, 입력, 예를 들어 명령의 인식 및 검출을 위해 규정된 또는 적용된 특정한 제 1 제스처를 포함하고, 상기 제스처는 상기 입력에 할당된다. 이 경우 제스처는 신체 부위의 움직임, 예를 들어 머리, 손 또는 발의 움직임, 예를 들어 바닥과 같은 표면으로 발길질일 수 있다. 그러나 환경 영향으로 인해, 예를 들어 먼지, 물, 강한 태양 복사 등으로 인해, 적용된 제 1 제스처를 센서가 검출하지 못하고 또는 적절하게 검출하지 못할 수 있고, 그렇기 때문에 검출되고 적용된 제 1 제스처에 기초해서 입력을 인식하기 위해 센서의 기능이 더 이상 제공되지 않는 위험이 있는데, 왜냐하면 센서는 적용된 제 1 제스처를 더 이상 적절하게 검출할 수 없고 및/또는 관측할 수 없고 또는 기록할 수 없으므로, 관련된 입력이 더 이상 인식될 수 없기 때문이다. 제 1 제스처에 응답해서 센서에 의해 신호가 더 이상 생성 및 재현되지 않거나 제 1 제스처에 할당된 원래의 신호와 달리 교란된 신호가 출력된다.
시스템으로 수행될 수 있는 방법과 관련해서, 센서의 또는 센서의 기능의 영향이 센서에 의해, 예를 들어 자동 관리 방식으로 및/또는 컴퓨팅 유닛 또는 제어부에 의해 검출되며, 이는 예를 들어, 센서로부터 지속적으로 교란된 신호가 제공되는 경우에 가능하다. 이러한 경우에 처음에 인식할 제 1 제스처로부터 대안적인 제 2 제스처로 전환된다. 즉, 센서에 저장되어 센서의 작동 시 실행되는 알고리즘으로 제 1 제스처는 제 2 제스처로 교체되며, 즉 제 1 제스처는 비활성으로, 제 2 제스처는 활성으로 전환된다. 가능한 실시예에서 제 1 제스처는 센서에 의해 검출할 또는 검출 가능한 영역 내의 제 1 지점 및/또는 마킹으로 킥(kick) 또는 발길질을 포함하고, 이 경우 제 1 마킹은 센서 전방에 배치되고, 센서에 대해 규정 가능한 또는 규정된 제 1 간격을 가지며, 센서에 의해 검출될 것이고 또는 검출될 수 있다. 상응하게 제 2 제스처는 제 2 지점 및/또는 제 2 마킹으로 킥 또는 발길질을 포함하고, 이 경우 제 2 마킹은 센서 전방에 배치되고, 센서에 대해 규정 가능한 또는 규정된 제 2 간격을 가지며, 센서에 의해 검출될 것이고 또는 검출될 수 있다. 이는, 대안적인 제 2 제스처를 센서의 구성과 관련해서 그리고 제 2 마킹에 대해 및 제 1 마킹에 대해 적절하게 센서의 위치 또는 위치 설정과 관련해서 공간적으로 또는 위치에 따라 규정하고 및/또는 적용하는 것을 가능하게 한다.
가능한 실시예에서 이 경우 제 1 제스처를 위해 제공된, 오염되지 않았다면 센서에 의해 검출될 영역의 설정-이미지는 영역의 실제 검출된 현재-이미지와 비교될 수 있다. 따라서 센서 및/또는 컴퓨팅 유닛은 환경 영향으로 인한, 예를 들어 습기에 의한 오염의 경우에도, 영역에서의 또는 영역 내의 제 1 제스처에 대해 명확한 이미지 또는 설정-이미지, 특히 명확하게 분석 가능한 이미지를 인식하지 않는다. 또한, 영역 내의 적어도 하나의 제 2 제스처에 대해 설정-이미지가 검출될 수 있는지 여부가 검사된다. 결과적으로, 다수의 제 2 제스처의 선택으로 영역에서 신뢰적으로 검출할 수 있는 제스처로만 전환된다. 이 경우, 센서에 의해 검출 가능한 영역의 상이한 공간적 부분 영역에서 상이한 제스처가 재현될 것이고 또는 재현될 수 있다. 이 경우, 각각의 제스처에 대해 전체 영역의 각 부분 영역 내의 설정-이미지가 제공된다. 이로써 예를 들어, 제 1 부분 영역은 제 1 제스처가 재현 및 검출될 제 1 위치를 포함한다. 따라서 제 2 부분 영역은 제 2 제스처가 재현 및 검출될 제 2 위치를 포함한다.
실시예에서, 광학 센서는 외부로부터 광을 수신하여 검출하는, 예를 들어 투과 윈도우와 같은 광학 소자를 포함하며, 광학 소자의 다양한 섹션을 통하여 영역의 개별 부분 영역들이 검출된다. 이 경우에, 사용자가 제 1 제스처, 즉 일반적으로 센서가 검출할 수 있는 관련된 제 1 움직임을 수행하는 제 1 부분 영역은 광학 투과 소자의 제 1 섹션을 통하여 센서에 의해 광학적으로 검출된다. 따라서 제 2 제스처 또는 관련된 제 2 움직임이 재현될 수 있는 제 2 부분 영역은 광학 투과 소자의 제 2 부분 섹션을 통하여 센서에 의해 검출된다. 이로써 각 제스처는 부분 영역에 할당되고 관련 섹션에 의해 검출될 수 있다. 이 섹션들은 공간적으로 서로 구별되고, 상기 섹션들은 적어도 부분적으로 교차할 수도 있다. 센서, 특히 센서의 투과 윈도우가 환경 영향으로 인해 오염된 경우에, 이러한 오염으로 인해 센서에 의해 적어도 투과 소자의 섹션을 통하여 스캔할 영역의, 특히 부분 영역의 그리고 거기에서 실현될 또는 재현될 적어도 하나의 제스처의 명확한 이미지 또는 사진이 더 이상 기록될 수 없다.
광학 센서의 오염은 시스템의 가능한 구성 요소로서 환경 영향에 대한 측정 장치 또는 다른 환경 센서에 의해 측정될 수 있고, 인간-기계 인터페이스(MMI)에 의해 사용자에게 시각적으로 및/또는 음향으로 표시될 수 있다. 이 경우, 인간-기계 인터페이스에 의해 사용자에게 추가로 광학 센서의 청소 요청이 표시될 수 있다. 제 1 제스처로부터 제 2 제스처로 예를 들어 자동 전환은 오염 인식 및/또는 청소 요청에 자동으로 연결될 수 있다.
이 방법은 센서에 의해 제 1 제스처의 재현을 위한 제 1 부분 영역이 검출될 수 있는 것이 제 2 제스처의 재현을 위한 제 2 부분 영역이 검출될 수 있는 것보다 양호하지 않은 경우에, 수행될 수 있다.
원래의 제 1 제스처가 더 이상 인식되지 않고 또는 더 이상 명확하게 검출될 수 없는 경우에도, 이 방법에서 인식할 2개의 제스처 사이의 전환을 통해 사용자 및 고객에 의한 제스처에 기초해서 입력을 인식하기 위한 센서의 기능이 보장될 수 있다.
방법의 실시예에서, 정상적인 제 1 제스처의 적용 후에 다양한 환경 영향이 조사된다. 특히 제 1 제스처의 인식과 관련하여 센서의 결함이 검출되는 경우에, 여전히 제공되는 신호들을 고려하여 대안적인 제 2 제스처가 규정된다. 후속해서 또는 필요 시, 센서의 실제 작동 시 제 1 제스처를 적절하게 검출하기 위한 센서의 이러한 결함이 확인되면, 최초에 인식될 최초의 제 1 제스처로부터 대안적인 제 2 제스처로 전환된다.
대안적인 또는 추가의 실시예에서, 센서에 의해 이미지 또는 사진이 생성되고, 센서에 의해 검출된 영역, 예를 들어 각각의 제스처를 위해 제공된 부분 영역의 이미지가 각각의 제스처에 할당되며, 이 경우 이미지의 품질, 특히 예를 들어 제 1 부분 영역에서의 제 1 제스처에 관련되어 있는 또는 관련된 제 1 이미지의 품질이 관리 및/또는 검사된다. 제 1 이미지의 품질에 기초하여, 제 1 제스처를 검출하기 위한 센서의 기능이 제공되는지 여부가 결정된다. 또한, 제 2 제스처가 규정되고, 이 경우 예를 들어 제 2 부분 영역에서 제 2 제스처에 제 2 이미지가 관련된다.
컴퓨팅 유닛은, 센서에 의해 상기 컴퓨팅 유닛에 전송된 이미지의 품질을 관리 및/또는 검사하도록 그리고 또한 제 1 제스처의 검출에 응답하여 센서가 생성하여 컴퓨팅 유닛에 전송하는 이미지에 기초해서, 제 1 제스처를 검출하기 위한 센서의 기능이 제공되는지 여부를 결정하도록 구성된다.
센서 및/또는 컴퓨팅 유닛에 의해 제스처를 인식하고 서로 구별하는 알고리즘이 수행된다. 이 알고리즘에 의해, 관련 제스처의 관련 검출에 응답하여 관련 이미지가 생성되고, 또한 그 품질이 관리된다.
이 경우, 제 1 제스처에 응답하여, 센서에 의해 이미지가 생성 및 재생되지 않거나 제 1 제스처에 할당된 원래의 신호와 달리 교란된 이미지가 출력된다.
시스템으로 실행될 수 있는 방법과 관련해서 센서의 영향이 센서 또는 제어부에 의해 인식되고, 이는 예를 들어, 지속적으로 교란된 이미지가 센서에 의해 제공될 때 가능하다.
물론, 전술한 그리고 이하에서 설명될 특징들은 제시된 각각의 조합으로뿐만 아니라, 본 발명의 범위를 벗어나지 않으면서 다른 조합으로도 또는 단독으로도 이용 가능하다.
본 발명은 실시예를 참고로 도면에 도시되고, 도면을 참고로 개략적으로 및 상세히 설명된다.
도 1은 본 발명에 따른 시스템의 실시예를 개략적으로 도시한 도면.
도 1은 자동차(2)를 개략도에 도시하고, 상기 자동차의 실내에 본 발명에 따른 방법의 실시예를 수행하기 위한 본 발명에 따른 시스템(4)의 실시예가 배치된다. 시스템(4)은 통신 기술적으로 서로 연결된 광학 센서(6)와 컴퓨팅 유닛(8)을 포함한다. 도 1은 또한 차량(2)의 실내에 있는 사용자(10)도 도시한다.
센서(6)는, 실내 영역에서 사용자(10)에 의해 재현된 제 1 제스처를 검출하도록 구성되고, 상기 영역은 다양한 부분 영역으로 세분되고, 상기 부분 영역들은 위치에 따라 또는 공간적으로 서로 구별된다. 도 1의 제스처는 제 1 영역에 및/또는 제 1 영역 내의 제 1 위치에 별(12)에 의해 표시된다. 이러한 다양한 제 1 제스처에 의해 다양한 입력, 예를 들어 명령이 가능해지고, 이러한 입력에 기초해서 해당하는 기능이 수행되며, 각각의 특정한 기능에 특정한 입력이 할당되고, 상기 입력에 또한 특정한 제 1 제스처가 할당된다. 각각의 할당된 제 1 제스처에 의해 활성화 및/또는 트리거되는 이러한 기능 또는 동작은 차량(2)의 적어도 하나의 장치에 의해 실행된다.
특정한 입력 또는 특정한 기능에 최초에 적용된 및/또는 규정된 제 1 제스처가 할당된다. 또한, 각각의 제스처에 적어도 하나의 신호가 할당되고 제 1 제스처에도 적어도 하나의 제 1 신호가 할당되며, 상기 신호는 센서(6)로부터 컴퓨팅 유닛(8)에 전송되고, 이 경우 컴퓨팅 유닛(8)은 추가로, 적어도 하나의 장치의 기능이 수행되게 한다.
그러나 환경 영향으로 인해 제 1 제스처를 위해 제공된 부분 영역에서 적용된 제 1 제스처의 적절한 검출과 관련해서 센서(6)의 기능이 저하될 수 있다. 제 1 제스처를 검출하기 위한 기능의 이러한 저하는 방법의 실시예에서 제 1 제스처에 할당되어 센서(6)에 의해 제 1 제스처의 검출 시 컴퓨팅 유닛(8)에 전달될 수 있는 제 1 신호의 품질에 의해 평가된다. 센서(6)는 제 1 제스처의 검출 시 제 1 신호와 달리 교란된, 예를 들어 왜곡된 신호를 생성하여 출력할 수 있다. 이제 제 1 제스처를 검출하기 위한 기능이 더 이상 제공되지 않는 경우에, 대안으로서 제 2 제스처가 선택, 적용 및/또는 규정된다. 이러한 제 2 제스처는 이제 입력, 예를 들어 명령, 및/또는 기능에 할당되며, 이러한 제 2 제스처는 제 1 제스처보다 센서(6)에 의해 더 간단하게 및/또는 더 확실하게 검출되고 또는 검출될 수 있는데, 왜냐하면 상기 제 2 제스처는 일반적으로 제 1 제스처와 다른 부분 영역 및/또는 다른 위치에서 재현될 수 있기 때문이다.
실시예에서 영역 내의, 특히 관련 제스처에 할당된 부분 영역의 관련 제스처의 이미지가 센서(6)에 의해 생성되어 관련 신호로 컴퓨팅 유닛에 전송된다. 이미지의 품질에 기초해서, 대안으로서 또는 추가로 제 1 제스처를 검출하기 위한 센서(6)의 기능이 제공되는지 여부가 결정될 수 있다. 이를 위해, 현재 기록된 이미지 또는 실제-이미지는 제 1 제스처의 설정-이미지와 비교될 수 있으며, 실제-이미지가 설정-이미지에 상응하거나 또는 설정-이미지를 포함하는 적어도 하나의 오차 범위에 있으면, 기능이 제공된다.
다른 실시예에서 제 2 제스처는 제 1 제스처에 대해 센서의 기능의 확인 후에야 입력에 할당될 수 있다. 대안으로서 또는 추가로 제 2 제스처는 미리 입력에 할당되어, 그대로 호출 가능하게 저장되지만, 아직 활성화되지 않을 수 있다.

Claims (8)

  1. 센서(6)를 이용해서 사용자(10)의 입력을 인식하기 위한 방법으로서,
    입력에 할당된, 사용자(10)의 적어도 하나의 제스처에 의한 입력이 센서(6)에 의해 인식되고, 상기 센서(6)에 의해 검출된 제 1 제스처는 입력의 검출을 위해 적용되고, 제 1 제스처를 검출하기 위한 상기 센서(6)의 기능이 검사되고, 제 1 제스처의 인식을 위한 기능이 제공되지 않는 경우에, 대안으로서 입력에 할당되어 있는 또는 할당되는 제 2 제스처가 선택되고, 상기 센서(6)에 의해 입력을 인식하기 위해 제 1 제스처로부터 제 2 제스처로 전환되는 것인 방법.
  2. 제 1 항에 있어서, 제 1 제스처의 검출 시 상기 센서(6)에 의해 신호가 생성되고, 상기 제 1 제스처에 제 1 신호가 할당되고, 생성된 신호의 품질은 제 1 신호와 비교에 의해 관리되고, 생성된 신호의 품질에 기초해서, 제 1 제스처를 검출하기 위한 상기 센서(6)의 기능이 제공되는지 여부가 결정되는 것인 방법.
  3. 제 2 항에 있어서, 제 2 제스처가 규정되고, 상기 제 2 제스처에는 제 2 신호가 할당되는 것인 방법.
  4. 센서(6)를 이용해서 사용자(10)의 입력을 인식하기 위한 시스템으로서,
    시스템(4)은 상기 센서(6)를 포함하고, 상기 센서는, 입력에 할당된, 상기 사용자(10)의 적어도 하나의 제스처의 검출에 의해 입력을 인식하도록 구성되고, 상기 제 1 제스처는 입력을 인식하기 위해 적용될 수 있고, 상기 센서(6)는, 제 1 제스처를 검출하도록 구성되고, 상기 시스템(4)은, 제 1 제스처를 검출하기 위한 상기 센서(6)의 기능을 검사하도록 구성되고, 제 1 제스처를 검출하기 위한 기능이 제공되지 않는 경우에, 상기 시스템(4)은, 대안으로서 제 2 제스처를 입력을 인식하기 위해 선택하도록, 입력에 할당하도록 그리고 상기 센서(6)에 의해 입력을 인식하기 위해 제 1 제스처로부터 제 2 제스처로 전환하도록 구성되는 것인 시스템.
  5. 제 4 항에 있어서, 컴퓨팅 유닛(8)을 포함하고, 상기 컴퓨팅 유닛은 상기 센서(6)에 연결되고, 상기 센서(6)는, 제스처의 검출에 응답해서 제스처에 할당된 적어도 하나의 신호를 생성하도록 그리고 상기 컴퓨팅 유닛(10)으로 전송하도록 구성되는 것인 시스템.
  6. 제 5 항에 있어서, 상기 컴퓨팅 유닛(10)은, 상기 센서(6)로부터 상기 컴퓨팅 유닛에 전송된 적어도 하나의 신호의 품질을 관리하도록 그리고 제 1 제스처에 할당된 신호의 결정된 품질에 기초해서, 제 1 제스처를 검출하기 위한 상기 센서(6)의 기능이 제공되는지 여부를 결정하도록 구성되는 것인 시스템.
  7. 제 5 항 또는 제 6 항에 있어서, 상기 컴퓨팅 유닛(10)은, 제 2 제스처를 선택하도록 그리고 입력을 인식하기 위한 상기 센서(6)를 제 1 제스처로부터 제 2 제스처로 전환하도록 구성되는 것인 시스템.
  8. 제 4 항 내지 제 6 항 중 어느 한 항에 있어서, 자동차(2)용 인 것인 시스템.
KR1020190066771A 2018-06-06 2019-06-05 입력을 인식하기 위한 방법 KR20190138757A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018208866.7A DE102018208866A1 (de) 2018-06-06 2018-06-06 Verfahren zum Erkennen einer Eingabe
DE102018208866.7 2018-06-06

Publications (1)

Publication Number Publication Date
KR20190138757A true KR20190138757A (ko) 2019-12-16

Family

ID=66597483

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190066771A KR20190138757A (ko) 2018-06-06 2019-06-05 입력을 인식하기 위한 방법

Country Status (5)

Country Link
US (1) US11163368B2 (ko)
EP (1) EP3579082B1 (ko)
KR (1) KR20190138757A (ko)
CN (1) CN110568922B (ko)
DE (1) DE102018208866A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020214556A1 (de) 2020-11-19 2022-05-19 Volkswagen Aktiengesellschaft Kommunikationssystem für ein Fahrzeug zum Vorgehen bei einer Schlafstörung eines Insassen

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5413673B2 (ja) * 2010-03-08 2014-02-12 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20130155237A1 (en) * 2011-12-16 2013-06-20 Microsoft Corporation Interacting with a mobile device within a vehicle using gestures
US20130191789A1 (en) * 2012-01-23 2013-07-25 Bank Of America Corporation Controlling a transaction with command gestures
US9389690B2 (en) * 2012-03-01 2016-07-12 Qualcomm Incorporated Gesture detection based on information from multiple types of sensors
DE102012024778A1 (de) * 2012-05-23 2013-11-28 Elmos Semiconductor Ag Kontinuierlich arbeitende, berührungslose, optische Gestenerkennungsvorrichtung
EP2821897B1 (en) * 2013-07-04 2019-08-21 Sony Corporation Finger detection on touch screens for mobile devices
JP2015095164A (ja) * 2013-11-13 2015-05-18 オムロン株式会社 ジェスチャ認識装置およびジェスチャ認識装置の制御方法
KR101579855B1 (ko) 2013-12-17 2015-12-23 주식회사 씨제이헬로비전 사용자 입력 제스처에 따른 콘텐츠 서비스 시스템 및 방법
US10691215B2 (en) * 2014-01-31 2020-06-23 Nanotronics Imaging, Inc. Apparatus and method for manipulating objects with gesture controls
US9996160B2 (en) * 2014-02-18 2018-06-12 Sony Corporation Method and apparatus for gesture detection and display control
US9880632B2 (en) * 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
CN105120052B (zh) * 2015-06-25 2019-03-08 努比亚技术有限公司 一种移动终端及信息处理方法
DE102016204274A1 (de) 2016-03-15 2017-09-21 Volkswagen Aktiengesellschaft System und Verfahren zum Erfassen einer Eingabegeste eines Nutzers
CN106445125A (zh) * 2016-09-08 2017-02-22 上海斐讯数据通信技术有限公司 一种手势操作模式自动开启方法及装置、移动终端
CN107799125A (zh) * 2017-11-09 2018-03-13 维沃移动通信有限公司 一种语音识别方法、移动终端及计算机可读存储介质

Also Published As

Publication number Publication date
EP3579082A1 (de) 2019-12-11
US11163368B2 (en) 2021-11-02
CN110568922B (zh) 2023-06-30
DE102018208866A1 (de) 2019-12-12
EP3579082B1 (de) 2023-07-19
US20190377418A1 (en) 2019-12-12
CN110568922A (zh) 2019-12-13

Similar Documents

Publication Publication Date Title
US8854431B2 (en) Optical self-diagnosis of a stereoscopic camera system
KR102128756B1 (ko) 자동차의 트렁크 개방 장치 및 방법과, 이 방법을 실행하기 위한 프로그램을 기록한 기록 매체
KR101417399B1 (ko) 차량의 주차 위치 표시 장치 및 방법
JP6077119B2 (ja) 超音波センサの改善された作動方法、運転者支援装置および自動車
WO2018154000A1 (en) A 3d-camera device comprising a dirt detection unit
US20170270368A1 (en) Method for detecting a soiling of an optical component of a driving environment sensor used to capture a field surrounding a vehicle; method for automatically training a classifier; and a detection system
KR101592060B1 (ko) 향상된 접근 감지를 갖는 조작자 제어 장치 및 조작자 제어 장치 작동 방법
US20050267632A1 (en) Vehicle diagnosis robot
US9446716B2 (en) Method and device for adjusting a mirror for a motor vehicle
US10200684B2 (en) Device for monitoring the proper functioning of a transmission path, particularly of a camera
CN106537480A (zh) 用于分析车辆的交通环境状况的方法
US10182229B2 (en) Device for monitoring a vehicle environment
CN106030679A (zh) 车辆周围监视装置
US10752256B2 (en) Method and device for controlling at least one driver interaction system
JP7138175B2 (ja) バーチャルコンテンツを表示するためのヘッドマウント式電子ディスプレイ装置の操作方法およびバーチャルコンテンツを表示するためのディスプレイシステム
KR101946746B1 (ko) 차량에서 비-차량 오브젝트의 위치 결정
CN110024010A (zh) 用于探测位于停车场内的突起对象的方法和系统
CN109708751A (zh) 光敏传感器检测修正方法、装置及空调器
US11080530B2 (en) Method and system for detecting an elevated object situated within a parking facility
KR20190138757A (ko) 입력을 인식하기 위한 방법
CN108628433A (zh) 手势识别方法及其系统
JP2009129251A (ja) 操作入力装置
JP2014085695A (ja) 車両窓検出システム、車両窓検出方法、車両窓検出装置、プログラム、及び記録媒体
JP5903716B2 (ja) 能動型物体検出装置
US20200265130A1 (en) Processing system and processing method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application