KR20040032820A - 사용자 입력 장치 - Google Patents

사용자 입력 장치 Download PDF

Info

Publication number
KR20040032820A
KR20040032820A KR10-2003-7015682A KR20037015682A KR20040032820A KR 20040032820 A KR20040032820 A KR 20040032820A KR 20037015682 A KR20037015682 A KR 20037015682A KR 20040032820 A KR20040032820 A KR 20040032820A
Authority
KR
South Korea
Prior art keywords
user
user input
gesture
input device
human body
Prior art date
Application number
KR10-2003-7015682A
Other languages
English (en)
Inventor
준이찌 레끼모또
Original Assignee
소니 가부시끼 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 가부시끼 가이샤 filed Critical 소니 가부시끼 가이샤
Publication of KR20040032820A publication Critical patent/KR20040032820A/ko

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • Multimedia (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명에 따른 사용자 입력 장치는, 손목 시계와 같이 구성되며, 사용자는 손목에 장착하는 것만으로 「잡다」나 「놓다」 등의 제스처를 시스템이 인식하여 커맨드로서 입력할 수 있다. 또한, 팔의 운동 그 자체를 계측하는 가속도 센서 등을 팔찌에 추가함으로써, 보다 복잡한 지시·명령을 입력할 수 있도록 구성할 수 있다. 장착형 컴퓨터(혹은, 웨어러블 컴퓨터)를 위한 입력 장치, 혹은, 게임기 등에 있어서의 커맨드 입력용의 컨트롤러로서 이용할 수 있다.

Description

사용자 입력 장치{USER INPUT APPARATUS}
작금의 기술 혁신에 수반하여, 워크 스테이션(WS)이나 퍼스널 컴퓨터(PC)로 불리는, 비교적 소형이며 저가격이고, 고부가 가치화·고기능화된 범용 타입의 컴퓨터 시스템이 개발, 시판되어, 대학, 그 밖의 연구 기관이나 기업, 그 밖의 사무실, 또는 일반 가정 내의 일상 생활에도 깊게 침투하고 있다. 지금, 일상 업무의 대부분이 컴퓨터와의 관계를 갖고 있으며, 많은 사람들은 키보드나 마우스에 접촉하면서 하루를 보낸다.
컴퓨터 시스템은, 일반적으로, 사용자 입력 커맨드에 응답하여 구동하고, 처리 결과를 디스플레이 스크린 상에 표시함으로써, 「인터랙티브」, 즉 대화적인 처리 환경을 제공하고 있다. 최근에는, DOS(Disk Operating System) 셸 화면을 대표로 하는 구래의 키보드를 통한 캐릭터 베이스의 사용자 입력 환경 즉 「CUI(Character User Interface)」로부터, 그래픽 베이스의 사용자 입력을 실현한 「GUI(Graphical User Interface)」로의 이행을 들 수 있다. GUI 환경 하에서는, 컴퓨터 시스템이 시뮬레이트된 데스크탑과 무수한 아이콘이 디스플레이 스크린에 준비된다.
GUI가 제공된 데스크탑 상에서는, 파일 등의 컴퓨터 시스템 상에서 취급되는 모든 자원 오브젝트는 아이콘으로서 표현되어 있다. 사용자는, 디스플레이 스크린 상의 프로그램, 데이터, 폴더, 디바이스 등을 상징하는 아이콘 등 화면 상의 표시 오브젝트에 대하여 마우스 등의 사용자 입력 장치를 이용하여 직접 조작을 인가함으로써(예를 들면, 클릭이나 드러그 앤드 드롭), 직감적으로 또한 알고 쉽게 컴퓨터 조작을 행할 수 있다. 또한, 데스크탑 상에는, 메뉴 바나 툴 박스 등, 각종 기능 즉 컴퓨터 처리를 빨리 호출하기 위한 버튼이 준비되어 있어, 컴퓨터에의 커맨드 입력 양식은 점점 더 직감적이며 이해하기 쉽게 되어 가고 있다.
GUI 환경의 도입에 의해, 이미 사용자는, 특정한 커맨드의 명칭이나 커맨드조작 방법 등을 특별히 습득하거나, 번잡한 키 입력을 행하지 않아도, 컴퓨터를 충분히 조작할 수 있다. 또한, 컴퓨터는, 사용자 의사에 충실한 사용자 입력을 시스템에 저장할 수 있다.
한편, 일상 생활에서, 사람은 자신의 감정이나 의사를 반영시킨 「몸짓」이나 「손짓」 등의 제스처를 발현하는 경우가 종종 있다. 이와 같이 제스처는, 사람으로부터의 메시지의 일 형태이지만, 외계에 대하여 제공하는 커맨드로서 파악할수도 있다.
예를 들면, 손목 시계 등과 같이 사용자가 위화감 없이 신체에 장착할 수 있으며, 또한, 사용자의 「잡다」나 「놓다」, 혹은 그 밖의 제스처를 인식할 수 있는 입력 장치가 있으면, 사용자는 이것을 장착하는 것만으로, 돌아다니거나 하면서 각종 커맨드를 자유롭게 컴퓨터에 입력하는 것이 가능해질 것이다.
종래, 근전위(EMG : Electromyogram)를 계측함으로써, 근육의 변위를 인식하는 기술이 있다. 또한, 근전위를 컴퓨터 입력 수단으로서 이용하는 시도도 몇 개가 제안되었다.
그러나, 인체의 근전위를 계측 대상으로 한 경우, 전극을 사용자의 피부에 직접 접촉시킬 필요가 있기 때문에, 사용자에게 불쾌감이나 육체적·정신적인 부담을 주게 된다. 또한, 그 측정 원리로부터, 근육 상의 떨어진 위치(예를 들면, 상박의 양단 부근)에 전극을 장착할 필요가 있지만, 이러한 경우, 인체에의 장착이 번잡해져, 손목 시계와 같은 자연스러운 형태로 입력 장치를 구성하는 것은 곤란하다.
<발명의 개시>
본 발명의 목적은, 사용자가 인체의 일부를 이용하여 입력 조작을 행할 수 있는, 우수한 사용자 입력 장치를 제공하는 것이다.
본 발명의 또 다른 목적은, 인체에 장착하여 이용되어 사용자의 의사에 충실한 입력 조작을 행할 수 있는, 우수한 사용자 입력 장치를 제공하는 것이다.
본 발명의 또 다른 목적은, 사용자가 발현하는 제스처를 인식하여 사용자 입력으로서 취득할 수 있는, 우수한 사용자 입력 장치를 제공하는 것이다.
본 발명의 또 다른 목적은, 인체에의 장착이 번잡하지 않게 손목 시계와 같은 자연스러운 형태로 구성된, 우수한 사용자 입력 장치를 제공하는 것이다.
본 발명은, 상기 과제를 참작하여 이루어진 것으로, 그 제1 측면은, 인체에 장착하여 이용되는 사용자 입력 장치에 있어서,
복수의 송신 전극과,
복수의 수신 전극과,
상기한 송신 전극 및 수신 전극을 교대로 인체의 표면을 따라 장착하는 인체 장착 수단과,
상기한 각 송신 전극에 소정 주파수의 파형 신호를 공급하는 발신기와,
상기한 각 수신 전극에서 수신되는 파형 신호를 수신하는 수신기를 구비한 사용자 입력 장치이다. 그리고, 인접하는 송신 전극과 수신 전극과 인체 표면 사이에서, 컨덴서와 등가인 회로가 형성되어 있다.
이러한 구성의 사용자 입력 장치에서는, 사용자가 발현한 제스처에 의해 인체 표면이 변형된 것에 따라, 인접하는 송신 전극과 수신 전극과 인체 표면 사이에서 형성되고 있는 각각의 컨덴서의 정전 용량이 변화된다.
따라서, 각 송신 전극과 수신 전극과 인체 표면 사이에서 형성된 컨덴서의 정전 용량이 변화되는 것을 이용하여, 사용자가 발현한 제스처를 각 송신 전극과 수신 전극과 인체 사이에서 계측된 다차원 벡터값으로서 계측할 수 있다.
사용자 입력 장치는, 각 송신 전극과 수신 전극의 인체 표면 사이에서 계측된 다차원 벡터값으로서 제스처를 등록하는 제스처 등록 수단과, 등록된 제스처에 기초하여 사용자가 발현하는 제스처를 인식하는 제스처 인식 수단을 더 포함하고 있어도 된다. 이 제스처 인식 수단은, 사용자가 제스처를 발현하였을 때에 계측된 다차원 벡터값과, 사전에 상기 제스처 등록 수단에 등록되어 있는 다차원 벡터값을, 거리 계산 등의 방법에 의해 비교 대조함으로써, 제스처를 인식·특정할 수 있다.
여기서, 상기 인체 장착 수단은, 사용자의 손목에 장착 가능한 팔찌 형상으로 구성되어 있어도 된다. 이러한 경우에는, 사용자가 「잡다」나 「놓다」, 혹은 그 밖의 제스처를 발현하였을 때에, 손목의 표면에서의 변형량에 기초하여 제스처를 인식하거나 특정할 수 있다.
물론, 사용자는 이러한 사용자 입력 장치를 장착해 두는 것만으로, 키보드 등 컴퓨터 본체로부터 떨어져 돌아다니거나 하면서 각종 커맨드를 자유롭게 컴퓨터 입력하는 것이 가능해진다.
또한, 사용자 입력 장치는, 가속도 센서 또는 경사 센서 등의, 인체의 운동 특성 그 자체를 계측하는 센서를 탑재하고 있어도 된다. 이러한 경우에는, 「잡다」나 「놓다」 등의 사용자가 발현한 제스처와, 팔 그 자체의 운동(비틀다, 흔들다) 등을 동시에 계측하는 것이 가능하게 된다. 따라서, 사용자 입력 장치는, 제스처가 나타내는 자세와 그 운동 특성을 조합한 복합적인 제스처에 의해, 보다 복잡한 명령을 조립할 수 있다.
혹은, 상기 인체 장착 수단은, 사용자의 발바닥에 깔아 장착 가능한 구두창형상으로 구성되어 있어도 된다. 이러한 경우에는, 구두 저면 또는 착상하는 노면을 따르도록 송수신 전극을 교대로 배치함으로써, 보행이나 무게 중심 이동 등을 인식할 수 있다.
혹은, 상기 인체 장착 수단은, 사용자의 얼굴에 장착 가능한 안경테 형상을 이루고 있어도 된다. 이러한 경우에는, 안경테를 따라 송수신 전극을 교대로 배치함으로써, 얼굴의 변형(특히 눈꺼플이나 눈 언저리 주변에서 일어나는 표정의 변화)을 인식할 수 있다.
본 발명의 또 다른 목적, 특징이나 이점은 후술하는 본 발명의 실시예나 첨부하는 도면에 기초하는 보다 상세한 설명에 의해 명백해질 것이다.
본 발명은, 사용자가 컴퓨터에 대하여 커맨드나 데이터 등을 입력하기 위한 사용자 입력 장치에 관한 것으로, 특히, 사용자가 인체의 일부를 이용하여 입력 조작을 행하는 사용자 입력 장치에 관한 것이다.
더 자세하게는, 본 발명은, 인체에 장착하여 이용되어 사용자의 의사에 충실한 입력 조작을 행하는 사용자 입력 장치에 관한 것으로, 특히, 사용자가 발현하는 제스처를 인식하여 사용자 입력으로서 취득하는 사용자 입력 장치에 관한 것이다.
도 1은 본 발명의 일 실시 형태에 따른 사용자 입력 장치(1)가 사용자의 인체에 장착되어 있는 모습을 묘사한 도면.
도 2는 계측부(10) 및 계측부(10)에서의 검출 신호를 처리하는 처리부의 구성을 개략적으로 도시한 도면.
도 3은 송신 전극(12)과 수신 전극(13) 사이에 인체(손목)가 개재되어 있는 모습을 묘사한 도면.
도 4는 사용자 입력 장치(1) 상에서 제스처를 다른 차원 벡터로서 등록하기 위한 처리 수순을 도시한 흐름도.
도 5는 사용자 입력 장치(1) 상에서 입력된 제스처를 인식하기 위한 처리 수순을 도시한 흐름도.
도 6은 사용자 입력 장치(1)에 대하여 팔찌에 가속도 센서나 경사 센서 등, 팔의 운동 그 자체를 계측하는 센서를 더 탑재하여 이루어지는 본 발명의 변형예를 도시한 도면.
<발명을 실시하기 위한 최량의 형태>
이하, 도면을 참조하면서 본 발명의 실시 형태에 대하여 상세하게 설명한다.
도 1에는, 본 발명의 일 실시 형태에 따른 사용자 입력 장치(1)가 사용자의 인체에 장착되어 있는 모습을 묘사하고 있다.
도 1에 도시한 바와 같이, 본 실시 형태에 따른 사용자 입력 장치(1)는, 손목 시계와 마찬가지의 구조를 갖고 있다. 사용자는, 이러한 사용자 입력 장치(1)를, 몸에 지니고 있는 것을 의식하지 않고(또는, 몸에 지니고 있는 것이 정신적·육체적인 고통이 되지 않고), 자연스럽게 장착할 수 있다.
도시한 예에서는, 사용자 입력 장치(1)는, 손목 시계 본체와 일체적으로 구성되어 있으며, 시계부(5)와, 이 시계부(5)를 사용자의 손목에 장착함과 함께 손목의 동작을 계측하는 벨트형의 계측부(10)로 구성된다.
시계부(5)는, 원환 형상으로 메모리가 배열된 표시부와, 이 표시부 상을 시간의 경과에 따라 각각의 속도로 회전하는 시침, 분침, 초침으로 구성된다. 단, 시계 기능 자체는 본 발명의 요지와는 직접 관련되지 않기 때문에, 여기서는 이 이상 설명하지 않는다.
한편, 계측부(10)에는, 손목 주위 방향을 따라, 송신 신호를 송신하는 송신 전극과, 송신 신호를 수신하는 수신 전극이 교대로 배치되어 있고, 각 수신 전극에있어서의 수신 신호의 강도에 기초하여, 사용자가 「잡다」 혹은 「놓다」 등의 제스처를 발현한 것을 인식할 수 있도록 되어 있다.
도 2에는 계측부(10), 및 이 계측부(10)에서의 검출 신호를 처리하는 처리부의 구성을 개략적으로 도시하고 있다.
도 2에 도시한 바와 같이, 계측부(10)는, 손목 주위 방향을 따라 배치된 복수의 송신 전극(12-1, 12-2, …)과, 각 송신 전극(12-1…)에 송신용의 소정 주파수(예를 들면 100KHz)의 교류 전류를 공급하는 발신기(11)와, 각 송신 전극(12-1…)의 간극에 삽입되어 전극간의 정전 용량에 따른 용량 결합에 의해 각 송신 전극(12-1…)으로부터의 교류 전류를 수신하는 복수의 수신 전극(13-1, 13-2, …)과, 각 수신 전극(13-1…)을 흐르는 교류 전류를 AM 변조나 A/D 변환 등의 신호 처리를 행하는 수신기(16)로 구성된다.
수신기(14)는, 소정 주파수 대역의 교류 전류만을 통과시키는 대역 통과 필터(BPF)(14A)와, 증폭기(14B)와, 검파기(14C)로 이루어지는 AM 변조기와, 검파 출력을 디지털 형식의 신호로 변환하는 A/D 변환기(14D)로 구성된다. 디지털 변환된 검출 신호는, 프로세서(15)에 의해 신호 처리된 후, 예를 들면 소정의 사용자 입력 신호로서 컴퓨터(도시 생략) 등에 외부 출력된다.
도 1 및 도 2에 도시한 바와 같이, 사용자는 송신 전극(12) 및 수신 전극(13)이 교대로 배치된 팔찌 형상의 사용자 입력 장치(1)를 손목에 장착하여 이용한다.
발신기(11)로부터는 고유의 주파수(예를 들면 100KHz)를 갖는 파형 신호가생성된다. SW1은 복수의 아날로그 스위치로 구성되며, 임의의 아날로그 스위치가 온 상태로 전환되면, 팔찌 상의 해당하는 송신 전극(12)에 파형 신호를 공급하도록 되어 있다. SW1의 각 아날로그 스위치의 개폐 조작은 프로세서(15)에 의해 소정 타이밍에서 순차 전환 제어된다. 보다 구체적으로는, 임의의 시점에서는, 단 1개의 송신 전극(12)에만 파형 신호가 흐르도록 스위치가 스캔된다.
또한, 팔찌 상에는, 각 송신 전극(11-1, 11-2…)과는 교대로 되도록, 복수의 수신 전극(12-1, 12-2, …)이 배치되어 있다.
지금, 각 1개의 송신 전극(12) 및 수신 전극(13)의 조합에 주목하면, 송수신 전극 사이에서는 컨덴서와 등가인 회로가 형성되어 있다. 따라서, 발신기(11)로부터 소정 주파수의 파형 신호를 공급함으로써 송신 전극(12)에서 발생된 전계는, 정전 용량에 따른 용량 결합에 의해, 수신 전극(13)측으로 수신된다.
또한, 송신 전극(12)과 수신 전극(13) 사이에는, 도 3에 도시한 바와 같이 인체(손목)가 개재되어 있다. 인체는 가상적으로 접지되어 있는 접지로 간주되기 때문에, 송신 전극으로부터 발생한 전계에 의해 발생하는 전하의 이동은, 손목 경유로 접지로 흐르게 된다. 이 전하의 이동량은, 전극과 손목의 위치 관계에 의존한다. 예를 들면, 손을 잡다, 놓다 등의 동작에 의해, 손목의 형상이 미묘하게 변화되는데, 이러한 손목의 형상 변화에 따라, 송신 전극(12)과 수신 전극(13) 사이에서 형성되는 컨덴서의 정전 용량은 변화된다.
SW2는 복수의 아날로그 스위치로 구성되며, 각 아날로그 스위치는, 해당하는 수신 전극(13-1, 13-2, …)을 수신기(14)에 접속하고, 그 수신 신호를 송신 주파수와 동일한 값으로 설정된 대역 통과 필터(BPF)(14A), 증폭기(14B), 검파기(14C)를 경유하여 A/D 변환된 결과를 프로세서(15)에서 판독하도록 되어 있다.
SW2를 구성하는 각 아날로그 스위치의 개폐 조작은 프로세서(15)에 의해 소정 타이밍에서 순차 전환 제어된다. 보다 구체적으로는, 임의의 시점에서는, 단 1개의 수신 전극(13)에 의한 수신 신호가 수신기(14)에서 판독되도록 스위치가 스캔된다.
송신 전극(12-1…)측의 SW1과 수신 전극(13-1…)측의 SW2 각각에서의 개폐 조작의 조합에 의해, 임의의 순간에는 1개의 송신 전극과 1개의 수신 전극의 조합만이 접속되어 있다. 프로세서(15)는, 이들 SW1 및 SW2를 소정 타이밍에서 순차 전환해 감으로써, 모든 송수신 전극 조합(도 2에 도시한 예에서는 4×4=16가지)에 대한 A/D 변환된 값을 소정 주기로 얻을 수 있다. 이 결과, 사용자 입력 장치(1)로서는, 사용자의 손목으로부터 16차원의 값을 시시각각 취득할 수 있다.
사용자 입력 장치(1)가 실제로 제스처를 인식하기 위해서는, 사용자는 사용자 입력 장치(1)를 손목에 장착한 상태에서, 우선 「잡다」 혹은 「놓다」 등의 동작을 여러번 행하여, 계측된 다차원 벡터의 조(組)를 기록해 둔다. 즉, 금후 이용하고자 하는 제스처를 등록하는 작업을 행한다. 그리고, 사용자 입력 시에는, 사용자 입력 장치(1)로부터 얻어진 벡터값과, 이들 기록된 각 벡터값을 비교 대조하고, 그 거리에 기초하여 해당하는 제스처를 인식한다.
도 4에는, 사용자 입력 장치(1) 상에서 제스처를 다른 차원 벡터로서 등록하기 위한 처리 수순을 흐름도의 형식으로 도시하고 있다.
이 경우, 사용자는, 손목 시계 타입의 사용자 입력 장치(1)를 자신의 손목에 장착한 상태에서, 원하는 제스처를 제시한다(단계 S1).
그리고, 사용자 입력 장치(1)측에서는, 모든 송수신 전극의 조합에 대하여 판독 처리를 행하여, 검출된 다차원 벡터값을 데이터베이스에 기록한다(단계 S2). 데이터베이스 등록 시, 해당 제스처에 할당하고자 하는 의미(예를 들면, 컴퓨터에 대한 커맨드나, 특정한 데이터값 등)를 더불어 기록하도록 해도 된다.
또한, 도 5에는 사용자 입력 장치(1) 상에서 입력된 제스처를 인식하기 위한 처리 수순을 흐름도의 형식으로 도시하고 있다.
우선, 사용자는, 사용자 입력 장치(1)를 자신의 손에 장착한 상태에서 원하는 제스처를 발현한다(단계 S11).
사용자 입력 장치(1)측에서는, 모든 송수신 전극의 조합에 대하여 판독 처리를 행한다(단계 S12).
그리고, 사용자 입력 장치(1)는, 검출된 다차원 벡터값을, 사전에 데이터베이스에 등록된 각 벡터값과의 거리 계산을 행하여, 최단 거리가 되는 것을 선택한다(단계 S13).
산출된 최단 거리가 소정의 임계값 미만이면, 최단 거리인 벡터값을 갖는 제스처가 입력된 것으로서 인식한다(단계 S14). 이와 같이 하여 얻어진 인식 결과를, 사용자 입력으로서 컴퓨터 등의 접속된 장치로 외부 출력한다.
또한, 제스처에 할당된 의미(특정한 커맨드나 데이터값)가 데이터베이스 등록되어 있는 경우에는, 이것을 사용자 입력 결과로서 외부 출력하도록 해도 된다.
도 2에 도시한 바와 같은 사용자 입력 장치(1)에 대하여, 팔찌에 가속도 센서나 경사 센서 등, 팔의 운동 그 자체를 계측하는 센서를 더 탑재하는 실시 형태(도 6을 참조)도 상당된다.
이러한 기기 구성에서는, 「잡다」나 「놓다」 등의 사용자가 발현한 제스처와, 팔 그 자체의 운동(비틀다, 흔들다) 등을 동시에 계측하는 것이 가능하게 된다. 따라서, 사용자 입력 장치(1)는, 제스처가 나타내는 자세와 그 운동 특성을 조합한 복합적인 제스처에 의해, 보다 복잡한 명령을 조립할 수 있다.
사용자 입력 장치(1)는, 예를 들면, 「잡으면서 팔을 회전시킨다」라는 제스처를, 단순히 「잡다」라는 제스처와는 구별하여 인식할 수 있다. 물론, 팔을 회전시키는 방법(회전 방향이나 회전 속도)을 구별하여 제스처를 인식하는 것도 가능하다.
지금까지는, 손목 시계와 유사한 팔찌형으로 구성된 사용자 입력 장치(1)를 예로 들어, 본 발명의 실시 형태에 대하여 설명하였지만, 본 발명의 요지는 이에 한정되는 것은 아니다.
예를 들면, 구두 바닥에, 저면 또는 노면을 따라 복수의 송신 전극과 수신 전극을 교대로 배치함으로써, 상술과 마찬가지의 컨덴서에 있어서의 용량 결합 작용에 의해 다차원값을 계측하여, 보행이나 무게 중심 이동 등을 인식하는 사용자 입력 장치(1)를 구성할 수 있다.
또한, 안경테를 따라 복수의 송신 전극과 수신 전극을 교대로 배치함으로써, 상술과 마찬가지의 컨덴서에 있어서의 용량 결합 작용에 의해 다차원값을 계측하여, 얼굴의 변형(특히 눈꺼플이나 눈 언저리 주변에서 일어나는 표정의 변화)을 인식하는 사용자 입력 장치(1)를 구성할 수 있다.
추보
이상, 특정한 실시예를 참조하면서, 본 발명에 대하여 상세하게 설명하였다. 그러나, 본 발명의 요지를 일탈하지 않는 범위에서 당업자가 해당 실시예의 수정이나 대용을 행할 수 있는 것은 자명하다. 즉, 예시라는 형태로 본 발명을 개시하였으므로, 한정적으로 해석되어서는 안된다. 본 발명의 요지를 판단하기 위해서는, 특허 청구 범위란을 참작해야 한다.
본 발명에 따르면, 사용자가 인체의 일부를 이용하여 입력 조작을 행할 수 있는, 우수한 사용자 입력 장치를 제공할 수 있다.
또한, 본 발명에 따르면, 인체에 장착하여 이용되어 사용자의 의사에 충실한 입력 조작을 행할 수 있는, 우수한 사용자 입력 장치를 제공할 수 있다.
또한, 본 발명에 따르면, 사용자가 발현하는 제스처를 인식하여 사용자 입력으로서 취득할 수 있는, 우수한 사용자 입력 장치를 제공할 수 있다.
또한, 본 발명에 따르면, 인체에의 장착이 번잡하지 않게 손목 시계와 같은 자연스러운 형태로 구성된, 우수한 사용자 입력 장치를 제공할 수 있다.
본 발명에 따른 사용자 입력 장치는, 예를 들면 손목 시계와 같이 구성되어 있으므로, 사용자는 손목에 장착하는 것만으로, 「잡다」나 「놓다」 등의 제스처를 시스템이 인식하여 커맨드로서 입력할 수 있다. 또한, 팔의 운동 그 자체를 계측하는 센서(예를 들면 가속도 센서)를 팔찌에 추가함으로써, 보다 복잡한 지시·명령을 입력할 수 있도록 구성할 수 있다.
본 발명에 따른 사용자 입력 장치는, 장착형 컴퓨터(혹은, 웨어러블 컴퓨터)를 위한 입력 장치로서, 혹은, 게임기 등에 있어서의 커맨드 입력용의 컨트롤러로서 이용할 수 있다.

Claims (6)

  1. 인체에 장착하여 이용되는 사용자 입력 장치에 있어서,
    복수의 송신 전극과,
    복수의 수신 전극과,
    상기한 송신 전극 및 수신 전극을 교대로 인체의 표면을 따라 장착하는 인체 장착 수단과,
    상기한 각 송신 전극에 소정 주파수의 파형 신호를 공급하는 발신기와,
    상기한 각 수신 전극에서 수신되는 파형 신호를 수신하는 수신기를 포함하며,
    상기 송신 전극과 상기 수신 전극과 인체 표면 사이에서 형성된 컨덴서의 정전 용량이 변화되는 것을 이용하여, 사용자가 발현한 제스처를 상기 복수의 송신 전극과 상기 복수의 수신 전극과 계측된 다차원 벡터값으로서 계측하는 계측 수단을 구비하고,
    상기 다차원 벡터값의 각 차원의 값은 서로 다른 상기 송신 전극과 상기 수신 전극의 쌍에 각각 대응하는 것을 특징으로 하는 사용자 입력 장치.
  2. 제1항에 있어서,
    각 송신 전극과 수신 전극 사이에서 계측된 다차원 벡터값으로서 제스처를 등록하는 제스처 등록 수단과,
    사용자가 제스처를 발현했을 때에 계측된 다차원 벡터값을 사전에 상기 제스처 등록 수단에 등록되어 있는 다차원 벡터값과 비교 대조함으로써, 제스처를 인식하는 제스처 인식 수단을 더 포함하는 것을 특징으로 하는 사용자 입력 장치.
  3. 제1항에 있어서,
    상기 인체 장착 수단은 사용자의 손목에 장착 가능한 팔찌형을 이루는 것을 특징으로 하는 사용자 입력 장치.
  4. 제1항에 있어서,
    가속도 센서 또는 경사 센서 등의 인체의 운동 특성 그 자체를 계측하는 센서를 더 탑재하는 것을 특징으로 하는 사용자 입력 장치.
  5. 제1항에 있어서,
    상기 인체 장착 수단은 사용자의 발바닥에 깔아 장착 가능한 구두창 형상을 이루는 것을 특징으로 하는 사용자 입력 장치.
  6. 제1항에 있어서,
    상기 인체 장착 수단은 사용자의 얼굴에 장착 가능한 안경의 프레임 형상을 이루는 것을 특징으로 하는 사용자 입력 장치.
KR10-2003-7015682A 2001-06-01 2002-05-30 사용자 입력 장치 KR20040032820A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2001-00167249 2001-06-01
JP2001167249A JP2002358149A (ja) 2001-06-01 2001-06-01 ユーザ入力装置
PCT/JP2002/005257 WO2002099614A1 (en) 2001-06-01 2002-05-30 User input apparatus

Publications (1)

Publication Number Publication Date
KR20040032820A true KR20040032820A (ko) 2004-04-17

Family

ID=19009662

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2003-7015682A KR20040032820A (ko) 2001-06-01 2002-05-30 사용자 입력 장치

Country Status (6)

Country Link
US (1) US6965842B2 (ko)
EP (1) EP1394665A1 (ko)
JP (1) JP2002358149A (ko)
KR (1) KR20040032820A (ko)
CN (1) CN1320419C (ko)
WO (1) WO2002099614A1 (ko)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100911716B1 (ko) * 2007-10-30 2009-08-10 엘아이지넥스원 주식회사 착용형 휴대용 기기의 착용 여부 판단 방법 및 장치
KR20110064237A (ko) * 2009-12-07 2011-06-15 엘지이노텍 주식회사 시계
KR101447625B1 (ko) * 2013-03-11 2014-10-08 한국기술교육대학교 산학협력단 손목 근감각 제공이 가능한 게임 컨트롤러
KR20150106425A (ko) * 2013-01-14 2015-09-21 퀄컴 인코포레이티드 두부 장착형 디스플레이들에서의 물리적 악수의 레버리징
KR20160006863A (ko) * 2014-07-09 2016-01-20 경북대학교 산학협력단 무설정 명함 교환 시스템 및 무설정 명함 교환 방법
KR20160097117A (ko) * 2015-02-06 2016-08-17 엘지이노텍 주식회사 웨어러블 디바이스
US10162512B2 (en) 2013-06-20 2018-12-25 Samsung Electronics Co., Ltd Mobile terminal and method for detecting a gesture to control functions

Families Citing this family (143)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7565295B1 (en) * 2003-08-28 2009-07-21 The George Washington University Method and apparatus for translating hand gestures
JP2005293505A (ja) 2004-04-05 2005-10-20 Sony Corp 電子機器、及び入力装置、並びに入力方法
WO2005121939A2 (en) * 2004-06-10 2005-12-22 Koninklijke Philips Electronics N.V. Generating control signals using the impedance of parts of a living body for controlling a controllable device
ES2330331T3 (es) * 2004-06-17 2009-12-09 Swisscom Ag Sistema y procedimiento para la entrada de datos controlada por el cuerpo.
KR100674090B1 (ko) * 2004-12-20 2007-01-24 한국전자통신연구원 착용형 범용 3차원 입력 시스템
US7513019B2 (en) * 2005-01-05 2009-04-07 Microsoft Corporation Fastening mechanisms maintaining electrical connections among fastened components
US20060154707A1 (en) * 2005-01-07 2006-07-13 Microsoft Corporation Non-interfering wireless communication device fastener
US20070189544A1 (en) 2005-01-15 2007-08-16 Outland Research, Llc Ambient sound responsive media player
US8659546B2 (en) 2005-04-21 2014-02-25 Oracle America, Inc. Method and apparatus for transferring digital content
US7519537B2 (en) * 2005-07-19 2009-04-14 Outland Research, Llc Method and apparatus for a verbo-manual gesture interface
GB0515796D0 (en) * 2005-07-30 2005-09-07 Mccarthy Peter A motion capture and identification device
US20070145680A1 (en) * 2005-12-15 2007-06-28 Outland Research, Llc Shake Responsive Portable Computing Device for Simulating a Randomization Object Used In a Game Of Chance
JP4785526B2 (ja) * 2005-12-28 2011-10-05 セイコーインスツル株式会社 電子式歩数計
US7612786B2 (en) * 2006-02-10 2009-11-03 Microsoft Corporation Variable orientation input mode
US8930834B2 (en) * 2006-03-20 2015-01-06 Microsoft Corporation Variable orientation user interface
US8139059B2 (en) 2006-03-31 2012-03-20 Microsoft Corporation Object illumination in a virtual environment
US20070300140A1 (en) * 2006-05-15 2007-12-27 Nokia Corporation Electronic device having a plurality of modes of operation
US20070284429A1 (en) * 2006-06-13 2007-12-13 Microsoft Corporation Computer component recognition and setup
KR100799571B1 (ko) * 2006-06-20 2008-01-30 한국전자통신연구원 인체를 이용한 통신장치 및 그 방법
US7552402B2 (en) * 2006-06-22 2009-06-23 Microsoft Corporation Interface orientation using shadows
US8001613B2 (en) 2006-06-23 2011-08-16 Microsoft Corporation Security using physical objects
JP4736052B2 (ja) * 2006-07-21 2011-07-27 ブラザー工業株式会社 操作信号出力装置及び操作システム
WO2008010581A1 (fr) * 2006-07-21 2008-01-24 Brother Kogyo Kabushiki Kaisha Dispositif opérationnel et système opérationnel
US20080036737A1 (en) * 2006-08-13 2008-02-14 Hernandez-Rebollar Jose L Arm Skeleton for Capturing Arm Position and Movement
US20100023314A1 (en) * 2006-08-13 2010-01-28 Jose Hernandez-Rebollar ASL Glove with 3-Axis Accelerometers
KR100793079B1 (ko) * 2006-12-08 2008-01-10 한국전자통신연구원 손목착용형 사용자 명령 입력 장치 및 그 방법
JP4837590B2 (ja) * 2007-02-09 2011-12-14 株式会社エヌ・ティ・ティ・ドコモ 装着型情報入力装置
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
KR20090034642A (ko) * 2007-10-04 2009-04-08 박가람 팔찌형 키보드와 이를 이용한 키 입력방법
US7839269B2 (en) * 2007-12-12 2010-11-23 Immersion Corporation Method and apparatus for distributing haptic synchronous signals
US8542907B2 (en) * 2007-12-17 2013-09-24 Sony Computer Entertainment America Llc Dynamic three-dimensional object mapping for user-defined control device
GB0801287D0 (en) * 2008-01-24 2008-03-05 Lea Erik Wrist-mounted computer periferal
JP2009237792A (ja) * 2008-03-26 2009-10-15 Fujifilm Corp コンテンツ処理装置および方法
JP5290633B2 (ja) * 2008-06-13 2013-09-18 セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー 通信システム及びそれに用いられる受信装置
US8170656B2 (en) * 2008-06-26 2012-05-01 Microsoft Corporation Wearable electromyography-based controllers for human-computer interface
US9037530B2 (en) 2008-06-26 2015-05-19 Microsoft Technology Licensing, Llc Wearable electromyography-based human-computer interface
US8447704B2 (en) * 2008-06-26 2013-05-21 Microsoft Corporation Recognizing gestures from forearm EMG signals
WO2010024029A1 (ja) * 2008-08-29 2010-03-04 日本電気株式会社 コマンド入力装置および携帯用情報機器とコマンド入力方法
US8289162B2 (en) * 2008-12-22 2012-10-16 Wimm Labs, Inc. Gesture-based user interface for a wearable portable device
US8502704B2 (en) * 2009-03-31 2013-08-06 Intel Corporation Method, apparatus, and system of stabilizing a mobile gesture user-interface
JP5256109B2 (ja) * 2009-04-23 2013-08-07 株式会社日立製作所 表示装置
JP5545574B2 (ja) * 2009-07-15 2014-07-09 国立大学法人 筑波大学 分類推定システムおよび分類推定プログラム
US20110181510A1 (en) * 2010-01-26 2011-07-28 Nokia Corporation Gesture Control
US9335825B2 (en) 2010-01-26 2016-05-10 Nokia Technologies Oy Gesture control
WO2011115060A1 (ja) 2010-03-15 2011-09-22 日本電気株式会社 入力装置、入力方法及びプログラム
JP5786854B2 (ja) 2010-03-15 2015-09-30 日本電気株式会社 入力装置、入力方法及びプログラム
JP5962505B2 (ja) 2010-03-15 2016-08-03 日本電気株式会社 入力装置、入力方法及びプログラム
KR20110137587A (ko) * 2010-06-17 2011-12-23 한국전자통신연구원 공간 입출력 인터페이싱 장치 및 방법
JP2012043194A (ja) * 2010-08-19 2012-03-01 Sony Corp 情報処理装置、情報処理方法およびプログラム
CN101938561A (zh) * 2010-08-30 2011-01-05 惠州Tcl移动通信有限公司 一种挂断来电的方法及移动通信终端
JP5187380B2 (ja) 2010-12-08 2013-04-24 株式会社デンソー 情報入力装置および情報入力方法
RU2605357C2 (ru) * 2011-02-21 2016-12-20 Конинклейке Филипс Н.В. Система распознавания жестов
US9830507B2 (en) 2011-03-28 2017-11-28 Nokia Technologies Oy Method and apparatus for detecting facial changes
CN102261915B (zh) * 2011-04-27 2013-06-12 浙江大学 行人惯性导航装置和方法
JP5160673B2 (ja) * 2011-08-18 2013-03-13 株式会社エヌ・ティ・ティ・ドコモ 装着型情報入力装置
US9170674B2 (en) * 2012-04-09 2015-10-27 Qualcomm Incorporated Gesture-based device control using pressure-sensitive sensors
CN102670208B (zh) * 2012-05-15 2014-01-29 北京大学 一种用于人体运动模态识别的电容传感系统
EP2698686B1 (en) 2012-07-27 2018-10-10 LG Electronics Inc. Wrist-wearable terminal and control method thereof
US9081542B2 (en) * 2012-08-28 2015-07-14 Google Technology Holdings LLC Systems and methods for a wearable touch-sensitive device
KR20150082174A (ko) * 2012-11-01 2015-07-15 아리예 하임 카츠 상부 아암 컴퓨터 포인팅 장치
US20140198034A1 (en) 2013-01-14 2014-07-17 Thalmic Labs Inc. Muscle interface device and method for interacting with content displayed on wearable head mounted displays
CN103197529A (zh) * 2013-02-06 2013-07-10 方科峰 一种体感腕表及应用方法
KR102059346B1 (ko) * 2013-03-05 2020-02-11 삼성전자주식회사 근전도 센서 시스템 및 근전도 센서 시스템의 동작 방법
CN103217895B (zh) * 2013-04-07 2016-01-20 上海与德通讯技术有限公司 支持手势功能的电子腕表和电子通讯设备
WO2014186370A1 (en) 2013-05-13 2014-11-20 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices that accommodate different user forms
CN103235646A (zh) * 2013-05-14 2013-08-07 秦启力 前肢动作识别装置及其实现方法
CN103309226B (zh) * 2013-06-09 2016-05-11 深圳先进技术研究院 配合智能眼镜使用的智能手表
KR102170321B1 (ko) 2013-06-17 2020-10-26 삼성전자주식회사 파지된 물체를 이용한 모션을 인식하는 장치 및 방법, 시스템
JP6171615B2 (ja) 2013-06-21 2017-08-02 カシオ計算機株式会社 情報処理装置及びプログラム
JP6210272B2 (ja) * 2013-06-26 2017-10-11 セイコーエプソン株式会社 入力装置、脈拍数算出装置および入力方法
US9622074B2 (en) * 2013-07-24 2017-04-11 Htc Corporation Method for continuing operation on mobile electronic device, mobile device using the same, wearable device using the same, and computer readable medium
US10188309B2 (en) 2013-11-27 2019-01-29 North Inc. Systems, articles, and methods for electromyography sensors
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US11426123B2 (en) 2013-08-16 2022-08-30 Meta Platforms Technologies, Llc Systems, articles and methods for signal routing in wearable electronic devices that detect muscle activity of a user using a set of discrete and separately enclosed pod structures
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
EP3037946B1 (en) 2013-08-23 2018-01-03 Huawei Technologies Co., Ltd. Remote controller, information processing method and system
US9788789B2 (en) 2013-08-30 2017-10-17 Thalmic Labs Inc. Systems, articles, and methods for stretchable printed circuit boards
US9372535B2 (en) 2013-09-06 2016-06-21 Thalmic Labs Inc. Systems, articles, and methods for electromyography-based human-electronics interfaces
WO2015033327A1 (en) * 2013-09-09 2015-03-12 Belfiori Alfredo Wearable controller for wrist
CN104460955B (zh) * 2013-09-16 2018-08-10 联想(北京)有限公司 一种信息处理方法及穿戴式电子设备
CN103576902A (zh) * 2013-09-18 2014-02-12 酷派软件技术(深圳)有限公司 控制终端设备的方法及系统
US9483123B2 (en) * 2013-09-23 2016-11-01 Thalmic Labs Inc. Systems, articles, and methods for gesture identification in wearable electromyography devices
US9213044B2 (en) * 2013-10-14 2015-12-15 Nokia Technologies Oy Deviational plane wrist input
CN104679229A (zh) * 2013-11-27 2015-06-03 中国移动通信集团公司 一种手势识别方法和装置
JP6084153B2 (ja) * 2013-12-06 2017-02-22 独立行政法人国立高等専門学校機構 人体検知装置
CN104714631A (zh) * 2013-12-12 2015-06-17 李庆华 腕上智能设备及其控制方法和系统
US20150185884A1 (en) * 2013-12-28 2015-07-02 Aleksander Magi Abstracted pattern messaging wearable electronic device for wireless communication
CN103744427B (zh) * 2014-01-06 2016-08-17 山东大学 加速度传感手势操作系统及操作方法
US9600030B2 (en) 2014-02-14 2017-03-21 Thalmic Labs Inc. Systems, articles, and methods for elastic electrical cables and wearable electronic devices employing same
CN104866076B (zh) * 2014-02-21 2018-06-01 联想(北京)有限公司 一种信息处理方法及电子设备
EP3121687A4 (en) 2014-03-18 2017-11-01 Sony Corporation Information processing device, control method, and program
US10199008B2 (en) 2014-03-27 2019-02-05 North Inc. Systems, devices, and methods for wearable electronic devices as state machines
KR102248845B1 (ko) 2014-04-16 2021-05-06 삼성전자주식회사 웨어러블 디바이스, 웨어러블 디바이스와 연동되는 마스터 디바이스, 및 그에 따른 웨어러블 디바이스의 제어 방법
US20150325202A1 (en) * 2014-05-07 2015-11-12 Thalmic Labs Inc. Systems, devices, and methods for wearable computers with heads-up displays
CN105094301A (zh) * 2014-05-16 2015-11-25 中兴通讯股份有限公司 一种控制方法、装置及电子设备
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
US9389733B2 (en) * 2014-08-18 2016-07-12 Sony Corporation Modal body touch using ultrasound
US10274992B2 (en) 2014-11-12 2019-04-30 Kyocera Corporation Wearable device with muscle activity detector
US9807221B2 (en) 2014-11-28 2017-10-31 Thalmic Labs Inc. Systems, devices, and methods effected in response to establishing and/or terminating a physical communications link
CN107003740A (zh) * 2014-12-09 2017-08-01 Lg 伊诺特有限公司 带式传感器和具有带式传感器的可佩戴式设备
US9946395B2 (en) * 2015-02-16 2018-04-17 Samsung Electronics Co., Ltd. User interface method and apparatus
EP3258845A4 (en) * 2015-02-19 2018-09-26 6Degrees Ltd. Remote controlled physical activity monitoring
CN104834237B (zh) * 2015-04-14 2019-01-11 广东小天才科技有限公司 一种通过距离检测线性调节音量大小的方法及装置
US10437335B2 (en) 2015-04-14 2019-10-08 John James Daniels Wearable electronic, multi-sensory, human/machine, human/human interfaces
WO2016171467A1 (en) * 2015-04-23 2016-10-27 Samsung Electronics Co., Ltd. Electronic device including rotary member and display method thereof
US10078435B2 (en) 2015-04-24 2018-09-18 Thalmic Labs Inc. Systems, methods, and computer program products for interacting with electronically displayed presentation materials
CN105072264B (zh) * 2015-07-27 2019-04-16 深圳市嘀嗒互动科技有限公司 基于三轴加速度传感器的智能腕表控制方法及系统
CN105242780B (zh) * 2015-09-23 2018-05-18 谢小强 一种交互控制方法和装置
JP6170973B2 (ja) * 2015-09-29 2017-07-26 レノボ・シンガポール・プライベート・リミテッド 携帯情報端末、情報処理方法、及び、プログラム
JP6144743B2 (ja) * 2015-09-30 2017-06-07 京セラ株式会社 ウェアラブル装置
EP3182251B1 (en) 2015-12-18 2019-04-24 Stichting IMEC Nederland System for hand gesture detection
WO2017145382A1 (ja) * 2016-02-26 2017-08-31 株式会社blincam 信号出力装置および撮像装置
CN105824429A (zh) * 2016-05-12 2016-08-03 深圳市联谛信息无障碍有限责任公司 基于红外传感器的读屏应用指令输入方法及装置
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
EP3487395A4 (en) 2016-07-25 2020-03-04 CTRL-Labs Corporation METHODS AND APPARATUS FOR PREDICTING MUSCULOSKELETAL POSITION INFORMATION USING PORTABLE SELF-CONTAINED SENSORS
US10775854B2 (en) 2016-08-01 2020-09-15 Guangdong Appscomm Co., Ltd. Method for lighting screen of smart wristband by raising hand and smart wristband
CN106227300B (zh) * 2016-08-01 2018-07-06 广东乐源数字技术有限公司 一种智能手环抬手亮屏的方法
CN106293072B (zh) * 2016-08-01 2018-07-03 广东乐源数字技术有限公司 一种智能手环转腕亮屏的方法
CN106371631B (zh) * 2016-09-09 2018-07-06 广东乐源数字技术有限公司 一种智能手环抬手亮屏的方法
CN108125333B (zh) * 2016-08-01 2019-08-02 广东乐源数字技术有限公司 一种可实现抬手亮屏的智能手环
CN106075899A (zh) * 2016-08-10 2016-11-09 合肥泰壤信息科技有限公司 一种穿戴式智能设备操作的游戏设备及游戏方法
CN106547370B (zh) * 2016-10-12 2018-07-06 广东乐源数字技术有限公司 一种智能手环抬手亮屏、转腕切屏的控制方法
WO2018098046A2 (en) 2016-11-25 2018-05-31 Kinaptic, LLC Haptic human machine interface and wearable electronics methods and apparatus
US10684693B2 (en) 2017-03-02 2020-06-16 Samsung Electronics Co., Ltd. Method for recognizing a gesture and an electronic device thereof
CN107092360A (zh) * 2017-05-08 2017-08-25 电子科技大学 一种利用手腕扭动感应的定位输入装置
RU2670670C9 (ru) * 2017-09-20 2018-12-12 Общество С Ограниченной Ответственностью "Хилби" Способ управления устройством измерения физиологических параметров человека
WO2019079757A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation SYSTEMS AND METHODS FOR IDENTIFYING BIOLOGICAL STRUCTURES ASSOCIATED WITH NEUROMUSCULAR SOURCE SIGNALS
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US11073909B2 (en) 2018-04-13 2021-07-27 Facebook Technologies, Llc Interior sensing
US10592001B2 (en) 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
CN109009718A (zh) * 2018-08-10 2018-12-18 中国科学院合肥物质科学研究院 一种基于电阻抗技术结合手势控制轮椅的方法
JP2021535465A (ja) 2018-08-31 2021-12-16 フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニーFacebook Technologies, Llc 神経筋信号のカメラ誘導による解釈
CN112789577B (zh) 2018-09-20 2024-04-05 元平台技术有限公司 增强现实系统中的神经肌肉文本输入、书写和绘图
EP3886693A4 (en) 2018-11-27 2022-06-08 Facebook Technologies, LLC. METHOD AND DEVICE FOR AUTOCALIBRATION OF A PORTABLE ELECTRODE SENSING SYSTEM
US10948976B1 (en) * 2019-02-06 2021-03-16 Facebook Technologies, Llc Systems and methods for electric discharge-based sensing via wearables donned by users of artificial reality systems
CN115917406A (zh) * 2020-06-24 2023-04-04 日本电信电话株式会社 信息输入设备
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4414537A (en) * 1981-09-15 1983-11-08 Bell Telephone Laboratories, Incorporated Digital data entry glove interface device
JP3689285B2 (ja) * 1991-06-20 2005-08-31 富士ゼロックス株式会社 入力装置および入力装置用ヘッドマウントディスプレイ
JP3630712B2 (ja) 1994-02-03 2005-03-23 キヤノン株式会社 ジェスチャー入力方法及びその装置
JP3570163B2 (ja) 1996-07-03 2004-09-29 株式会社日立製作所 動作及び行動の認識方法及び装置及びシステム
DE69736622T2 (de) 1996-07-03 2007-09-13 Hitachi, Ltd. System zur Bewegungserkennung
US6223018B1 (en) * 1996-12-12 2001-04-24 Nippon Telegraph And Telephone Corporation Intra-body information transfer device
JPH11143608A (ja) * 1997-11-07 1999-05-28 Sony Corp 文字入力方法及び文字入力装置
JP2000221953A (ja) * 1999-01-29 2000-08-11 Sony Corp 映像表示装置、映像処理方法及びこれらを応用した映像表示システム
JP4189709B2 (ja) * 1999-05-13 2008-12-03 ソニー株式会社 モーションキャプチャー装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100911716B1 (ko) * 2007-10-30 2009-08-10 엘아이지넥스원 주식회사 착용형 휴대용 기기의 착용 여부 판단 방법 및 장치
KR20110064237A (ko) * 2009-12-07 2011-06-15 엘지이노텍 주식회사 시계
KR20150106425A (ko) * 2013-01-14 2015-09-21 퀄컴 인코포레이티드 두부 장착형 디스플레이들에서의 물리적 악수의 레버리징
KR101447625B1 (ko) * 2013-03-11 2014-10-08 한국기술교육대학교 산학협력단 손목 근감각 제공이 가능한 게임 컨트롤러
US10162512B2 (en) 2013-06-20 2018-12-25 Samsung Electronics Co., Ltd Mobile terminal and method for detecting a gesture to control functions
KR20160006863A (ko) * 2014-07-09 2016-01-20 경북대학교 산학협력단 무설정 명함 교환 시스템 및 무설정 명함 교환 방법
KR20160097117A (ko) * 2015-02-06 2016-08-17 엘지이노텍 주식회사 웨어러블 디바이스

Also Published As

Publication number Publication date
CN1531676A (zh) 2004-09-22
EP1394665A1 (en) 2004-03-03
JP2002358149A (ja) 2002-12-13
CN1320419C (zh) 2007-06-06
US20040243342A1 (en) 2004-12-02
WO2002099614A1 (en) 2002-12-12
US6965842B2 (en) 2005-11-15

Similar Documents

Publication Publication Date Title
KR20040032820A (ko) 사용자 입력 장치
US11009951B2 (en) Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
Rekimoto Gesturewrist and gesturepad: Unobtrusive wearable interaction devices
KR100793079B1 (ko) 손목착용형 사용자 명령 입력 장치 및 그 방법
US11822729B2 (en) Systems and methods for gesture-based control
US20120157886A1 (en) Mechanomyography Signal Input Device, Human-Machine Operating System and Identification Method Thereof
WO2016135718A1 (en) Closed loop feedback interface for wearable devices
WO2015033327A1 (en) Wearable controller for wrist
Rosenberg Computing without mice and keyboards: text and graphic input devices for mobile computing
US20210232224A1 (en) Human-machine interface
JP2003029899A (ja) ユーザ入力装置
EP3938872B1 (en) Hand-worn data-input device
US20160085311A1 (en) Control unit and method of interacting with a graphical user interface
Šumak et al. Design and development of contactless interaction with computers based on the Emotiv EPOC+ device
US11237639B2 (en) Method and system for electronic communication by persons with disabilities
JP7468785B2 (ja) 近接センサ及びコントローラ
Harrison The human body as an interactive computing platform
Panduranga et al. Sensors for virtual musical environment: A short survey
EP4080329A1 (en) Wearable control system and method to control an ear-worn device
JP2004013209A (ja) 手首装着型指動作情報処理装置
Saponas © Copyright 2010 Timothy Scott Saponas
Richa et al. PROPOSED NEW TECHNIQUE FOR EVALUATION OF SKIN AS TOUCH SCREEN IN COMPUTER ENGINEERING
Bharat Hand Gesture Recognition Using sEMG

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application