KR20160077070A - 손목 움직임을 이용한 손목밴드 디바이스 입력 - Google Patents

손목 움직임을 이용한 손목밴드 디바이스 입력 Download PDF

Info

Publication number
KR20160077070A
KR20160077070A KR1020167010727A KR20167010727A KR20160077070A KR 20160077070 A KR20160077070 A KR 20160077070A KR 1020167010727 A KR1020167010727 A KR 1020167010727A KR 20167010727 A KR20167010727 A KR 20167010727A KR 20160077070 A KR20160077070 A KR 20160077070A
Authority
KR
South Korea
Prior art keywords
wrist
gesture
sensors
gestures
sensor
Prior art date
Application number
KR1020167010727A
Other languages
English (en)
Inventor
안톤 엠. 데비도브
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20160077070A publication Critical patent/KR20160077070A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

전자 디바이스의 기능은 손목착용 디바이스에 의해 검출되는 손목 제스처(예컨대, 구부림 또는 신전)를 이용하여 호출될 수 있다. 제스처는 손목착용 디바이스 내의, 예컨대, 손목밴드 내의 그리고/또는 앞면 부재 뒤의 센서들을 이용하여 검출될 수 있다. 특정 제스처는 센서 신호들의 분석에 기초하여 라이브러리로부터 식별될 수 있다. 호출된 기능은 손목착용 디바이스, 또는 손목착용 디바이스와 통신하는 다른 디바이스 상에서 실행될 수 있다.

Description

손목 움직임을 이용한 손목밴드 디바이스 입력{WRISTBAND DEVICE INPUT USING WRIST MOVEMENT}
본 개시내용은 일반적으로 착용가능한 전자 디바이스에 관한 것으로, 보다 상세하게는 손목 움직임 및 손목착용 디바이스를 이용하여 사용자 입력을 제공하는 것에 관한 것이다.
모바일 폰, 스마트 폰, 태블릿 컴퓨터, 미디어 재생기 등과 같은 모바일 전자 디바이스가 상당히 인기있게 되었다. 많은 사용자들은 거의 어디를 가든지 디바이스를 들고 다니며, 그들의 디바이스들을, 전화를 걸고 받는 것, 텍스트 메시지 및 이메일을 보내고 받는 것, 내비게이션(예컨대, 지도 및/또는 GPS 수신기를 이용함), 상점에서 품목을 구매하는 것(예컨대, 비접촉식 지불 시스템을 이용함), 및/또는 인터넷에 액세스하는 것(예컨대, 정보 검색을 위함)을 포함한, 다양한 목적들에 사용한다.
그러나, 사용자의 모바일 디바이스가 언제나 쉽게 액세스가능한 것은 아니다. 예를 들어, 모바일 디바이스가 전화 호를 수신할 때에, 디바이스는 사용자의 가방이나 주머니 안에 있을 수 있고, 사용자는 걷거나, 운전하거나, 무언가를 들고 있거나, 또는 사용자가 디바이스를 찾기 위해 가방이나 주머니에 손을 넣는 것을 불편하거나 불가능하게 만드는 다른 행위에 관련되어 있을 수 있다.
본 발명의 소정 실시예들은 손목착용 디바이스에 의해 검출되는 손목 제스처(예컨대, 구부림 또는 신전)를 이용하여 전자 디바이스의 기능을 호출하는 것에 관한 것이다. 호출된 기능은 손목-착용 디바이스 또는 손목-착용 디바이스와 통신하는 다른 디바이스 상에서 실행될 수 있다. 손목착용 디바이스는 예를 들어, 손목밴드의 변형, 손목밴드에 인가된 힘, 손목밴드의 일부분에 대한 압력의 변화, 및/또는 디바이스의 후방(즉, 사용자의 손목 쪽으로 배향된 디바이스의 표면)에 대해 인가된 힘 또는 압력의 변화를 검출함으로써, 착용자의 손목의 위치의 변화를 검출할 수 있는 하나 이상의 센서를 통합하는 손목밴드를 포함할 수 있다. 손목밴드 센서들로부터의 신호들은 특정 손목 제스처를 식별하기 위해 분석될 수 있다. 식별된 제스처는, 예를 들어 특정 손목 제스처들을 손목착용 디바이스의 기능들, 또는 동작들에 매핑시키는 제스처 라이브러리를 참조하여, 호출될 기능을 결정하도록 해석될 수 있다. 일부 실시예들에서, 손목 제스처의 해석은 컨텍스트-의존적일 수 있으며, 예를 들어, 제스처가 행해질 때에 손목착용 디바이스 상에서 진행중인 임의의 동작들이 있다면 그것이 무엇인지에 의존할 수 있으며; 따라서, 동일한 손목 제스처는 상이한 컨텍스트들에서 상이한 기능들을 개시할 수 있다. 일부 실시예들에서, 손목 제스처에 의해 호출된 기능 또는 동작은 손목착용 디바이스와 통신하는 다른 디바이스로 제어 신호들을 송신하는 것을 포함함으로써, 손목 제스처들이 원격 제어에 사용되게 할 수 있다.
첨부 도면들과 함께 하기의 상세한 설명은 본 발명의 특성 및 이점들에 대한 보다 양호한 이해를 제공할 것이다.
도 1은 본 발명의 실시예에 따른 호스트 디바이스와 무선으로 통신하는 착용가능한 디바이스를 도시한다.
도 2는 본 발명의 실시예에 따른 착용가능한 디바이스의 단순화된 블록도이다.
도 3a 내지 도 3f는 손목 관절운동들을 예시한다. 신전(또는 배굴(dorsiflexion))이 도 3a에 도시되고; 구부림(또는 장굴(palmar flexion))이 도 3b에 도시되고; 외전(abduction)(또는 요골측 편위(radial deviation))이 도 3c에 도시되고; 내전(adduction)(또는 척골측 편위(ulnar deviation))이 도 3d에 도시되고; 회내(pronation)(또는 내향 회전(inward rotation))가 도 3e에 도시되고; 회외(supination)(또는 외향 회전(outward rotation))가 도 3f에 도시된다.
도 4는 본 발명의 실시예에 따른 착용가능에 포함될 수 있는 손목-제스처 프로세싱 시스템의 단순화된 블록도이다.
도 5a 및 도 5b는 본 발명의 실시예에 따른 센서들을 이용하여 손목 신전(또는 배굴)을 검출하기 위한 하나의 기법을 예시한다.
도 6a 및 도 6b는 본 발명의 실시예에 따른 센서들을 이용하여 손목 신전(또는 배굴)을 검출하기 위한 다른 기법을 예시한다.
도 7a 및 도 7b는 본 발명의 실시예에 따른 압력 센서들을 이용하여 손목 관절운동들을 검출하기 위한 기법을 예시한다.
도 8은 본 발명의 실시예에 따른 착용가능한 디바이스에 대한 손목-제스처 라이브러리의 일부분을 정의하는 테이블을 도시한다.
도 9는 본 발명의 실시예에 따른 손목 제스처들을 이용하여 손목착용 디바이스를 제어하기 위한 프로세스의 흐름도이다.
본 발명의 소정 실시예들은 손목착용 디바이스에 의해 검출되는 손목 제스처(예컨대, 구부림 또는 신전)를 이용하여 전자 디바이스의 기능을 호출하는 것에 관한 것이다. 호출된 기능은 손목착용 디바이스 또는 손목착용 디바이스와 통신하는 다른 디바이스 상에서 실행될 수 있다. 손목착용 디바이스는 예를 들어, 손목밴드의 변형, 손목밴드에 인가된 힘, 및/또는 손목밴드의 일부분에 대한 압력의 변화를 검출함으로써, 착용자의 손목의 위치의 변화를 검출할 수 있는 하나 이상의 센서를 통합하는 손목밴드를 포함할 수 있다. 손목밴드 센서들로부터의 신호들은 특정 손목 제스처를 식별하기 위해 분석될 수 있다. 식별된 제스처는, 예를 들어 특정 손목 제스처들을 손목착용 디바이스의 기능들, 또는 동작들에 매핑시키는 제스처 라이브러리에 대한 참조에 의해, 호출될 기능을 결정하도록 해석될 수 있다. 일부 실시예들에서, 손목 제스처의 해석은 컨텍스트-의존적일 수 있으며, 예를 들어, 제스처가 행해질 때에 손목착용 디바이스 상에서 진행중인 임의의 동작들이 있다면 그것이 무엇인지에 의존할 수 있으며; 따라서, 동일한 손목 제스처는 상이한 컨텍스트들에서 상이한 기능들을 개시할 수 있다. 일부 실시예들에서, 손목 제스처에 의해 호출된 기능 또는 동작은 손목착용 디바이스와 통신하는 다른 디바이스로 제어 신호들을 송신하는 것을 포함함으로써, 손목 제스처들이 원격 제어에 사용되게 할 수 있다.
도 1은 본 발명의 실시예에 따른 호스트 디바이스(102)와 무선으로 통신하는 착용가능한 디바이스(100)를 도시한다. 이 예에서, 착용가능한 디바이스(100)는 스트랩(106)에 연결된 앞면 부분(104)을 갖는 손목시계같은 디바이스로서 도시된다.
앞면 부분(104)은 예를 들어, 착용가능한 디바이스(100)가 사용자의 신체 상에서 어디에 착용되고자 하는지에 따라 적절하게 크기가 정해질 수 있는 터치스크린 디스플레이(105)를 포함할 수 있다. 사용자는 터치스크린 디스플레이(105) 상에서 착용가능한 디바이스(100)에 의해 나타내어진 정보를 볼 수 있고, 터치스크린 디스플레이(105)를 터치함으로써 착용가능한 디바이스(100)에 입력을 제공할 수 있다. 일부 실시예들에서, 터치스크린 디스플레이(105)는 앞면 부분(104)의 전방 표면의 대부분 또는 전체를 점유할 수 있다.
스트랩(106)(본 명세서에서 손목밴드 또는 손목 스트랩으로도 지칭됨)이 제공되어, 디바이스(100)는 예컨대, 사용자의 손목 주위에, 사용자에 의해 벗겨질 수 있게 착용될 수 있다. 일부 실시예들에서, 스트랩(106)은 임의의 가요성 재료(예컨대, 직물, 가요성 플라스틱, 피혁, 체인 또는 금속 또는 다른 강성 재료들로 제조된 가요성으로 인터리브(interleave)된 판 또는 링크)로 제조될 수 있으며, 예컨대 힌지, 루프, 또는 다른 적합한 부착 디바이스 또는 홀더에 의해 앞면 부분(104)에 연결될 수 있다. 대안적으로, 스트랩(106)은 걸쇠(108)에 의해 연결된 강성 재료의 2개 이상의 섹션으로 제조될 수 있다. 하나 이상의 힌지가 앞면(104)과 스트랩(106)의 근위 단부들(112a, 112b)의 연결부에서 그리고/또는 스트랩(106)의 길이를 따르는 모든 곳에서 위치설정되어, 사용자가 착용가능한 디바이스(100)를 착용하고 벗게 할 수 있다. 스트랩(106)의 상이한 부분들은 상이한 재료들로 제조될 수 있으며; 예를 들어, 가요성 또는 팽창가능한 섹션들이 강성 섹션들과 교번할 수 있다. 일부 실시예들에서, 스트랩(106)은 제거가능한 섹션들을 포함하여, 착용가능한 디바이스(100)가 특정 사용자의 손목 크기를 수용하도록 크기조정되게 할 수 있다. 일부 실시예들에서, 스트랩(106)은 앞면 부분(104) 뒤에서 또는 그것을 관통하여 이어지는 연속적 스트랩 부재의 부분들일 수 있다. 앞면 부분(104)은 스트랩(106)으로부터 분리가능하거나, 스트랩(106)에 영구적으로 부착되거나, 또는 스트랩(106)과 일체형으로 형성될 수 있다.
일부 실시예들에서, 스트랩(106)은 스트랩(106)의 원위 단부들의 연결 및 연결해제를 용이하게 하는 걸쇠(108)를 포함할 수 있다. 다양한 실시예들에서, 걸쇠(108)는 버클, 자기 걸쇠, 기계적 걸쇠, 스냅 폐쇄부 등을 포함할 수 있다. 일부 실시예들에서, 걸쇠 부재는 스트랩(106)의 길이의 적어도 일부분을 따라 이동가능하여, 착용가능한 디바이스(100)가 특정 사용자의 손목 크기를 수용하도록 크기조정되게 할 수 있다. 따라서, 디바이스(100)는 걸쇠(108)를 체결함으로써 사용자의 신체에, 예컨대, 사용자의 손목 둘레에 고정될 수 있고; 걸쇠(108)는 후속적으로, 사용자의 신체로부터 디바이스(100)의 제거를 용이하게 하기 위해 체결해제될 수 있다.
다른 실시예들에서, 스트랩(106)은 (예컨대, 탄성 직물, 팽창가능한 금속 링크, 또는 탄성 및 비탄성 섹션들의 조합을 포함한) 탄성 재료의 연속적 밴드로서 형성되어, 앞면 부분(104)에 연결된 스트랩(106)에 의해 형성된 밴드를 늘림으로써 착용가능한 디바이스(100)가 착용되고 벗겨지게 할 수 있다. 따라서, 걸쇠(108)는 필수적인 것은 아니다.
(존재할 수 있는 임의의 걸쇠를 포함한) 스트랩(106)은 착용가능한 디바이스(100)로 하여금 임의의 주어진 시간에 그것이 착용되어 있는지 여부를 결정하게 할 수 있는 센서들을 포함할 수 있다. 착용가능한 디바이스(100)는 현재 착용되어 있는지 여부에 따라 상이하게 동작할 수 있다. 예를 들어, 착용가능한 디바이스(100)는 착용되어 있지 않을 때 다양한 사용자 인터페이스 및/또는 RF 인터페이스 컴포넌트들을 비활성화할 수 있다. 또한, 일부 실시예들에서, 착용가능한 디바이스(100)는 사용자가 착용가능한 디바이스(100)를 착용하거나 벗을 때 호스트 디바이스(102)에 통지할 수 있다. 또한, 스트랩(106)은 디바이스(100)를 착용하고 있는 사용자의 손목 관절운동들을 검출할 수 있는 센서들을 포함할 수 있으며; 이러한 센서들의 예들이 하기에 기술된다.
호스트 디바이스(102)는 착용가능한 디바이스(100)와 통신하는 임의의 디바이스일 수 있다. 도 1에서, 호스트 디바이스(102)는 스마트 폰으로서 도시되지만; 다른 호스트 디바이스들, 예컨대 태블릿 컴퓨터, 미디어 재생기, 임의의 유형의 모바일 폰, 랩톱 또는 데스크톱 컴퓨터 등이 대체될 수 있다. 호스트 디바이스들의 다른 예들은 판매 시점 단말기, 보안 시스템, 환경 제어 시스템 등을 포함할 수 있다. 호스트 디바이스(102)는 예컨대, 블루투스(Bluetooth) 또는 Wi-Fi와 같은 프로토콜들을 이용하여 착용가능한 디바이스(100)와 무선으로 통신할 수 있다. 일부 실시예들에서, 착용가능한 디바이스(100)는 전기 커넥터(110)를 포함할 수 있으며, 이는, 예를 들어, 적합한 케이블들을 이용함으로써 호스트 디바이스(102)로 그리고/또는 다른 디바이스들로 유선 연결을 제공하는 데 사용될 수 있다. 예를 들어, 커넥터(110)는 착용가능한 디바이스(100)의 온보드 배터리를 충전하기 위해 전력 공급원에 연결하는 데 사용될 수 있다.
일부 실시예들에서, 착용가능한 디바이스(100)와 호스트 디바이스(102)는 호스트 디바이스(102) 상에서 이용가능한 기능성을 향상시키기 위해 상호동작할 수 있다. 예를 들어, 착용가능한 디바이스(100)와 호스트 디바이스(102)는 블루투스와 같은 무선 통신 기술을 이용하여 페어링(pairing)을 설정할 수 있다. 디바이스들이 페어링되어 있는 동안, 호스트 디바이스(102)는 선택된 이벤트들(예컨대, 전화 호, 텍스트 메시지, 또는 이메일 메시지를 수신하는 것)의 통지들을 착용가능한 디바이스(100)로 송신할 수 있고, 착용가능한 디바이스(100)는 대응하는 경보들을 사용자에게 나타낼 수 있다. 착용가능한 디바이스(100)는 또한 사용자가 (예컨대, 전화 호에 응답하기 위해 또는 텍스트 메시지에 답하기 위해) 경보에 응답할 수 있는 입력 인터페이스를 제공할 수 있다. 일부 실시예들에서, 착용가능한 디바이스(100)는 또한 사용자로 하여금 호스트 디바이스(102) 상에서 동작을 개시할 수 있게 하는, 예컨대 호스트 디바이스(102)를 잠금해제하거나 그것의 디스플레이 스크린을 켜는 것, 전화를 거는 것, 텍스트 메시지를 보내는 것, 또는 호스트 디바이스(102)의 미디어 재생 동작들을 제어하는 것을 개시할 수 있게 하는, 사용자 인터페이스를 제공할 수 있다. 본 명세서에서 기술된 기법들은 광범위한 호스트 디바이스 기능들이, 착용가능한 디바이스(100)를 통해 인터페이스를 제공함으로써 향상될 수 있도록 구성될 수 있다.
착용가능한 디바이스(100) 및 호스트 디바이스(102)는 예시적이며, 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 예를 들어, 착용가능한 디바이스(100)는 시계, 팔찌 등을 포함한, 다양한 착용가능한 물품들에서 구현될 수 있다. 일부 실시예들에서, 착용가능한 디바이스(100)는 호스트 디바이스(102)가 착용가능한 디바이스(100)와 통신하는지 여부에 상관없이 동작할 수 있고; 별개의 호스트 디바이스는 요구되지 않는다.
착용가능한 디바이스(100)는 앞면 부분(104) 및/또는 스트랩(106) 내에 배치된 전자 컴포넌트들을 이용하여 구현될 수 있다. 도 2는 본 발명의 실시예에 따른 (예컨대, 착용가능한 디바이스(100)를 구현하는) 착용가능한 디바이스(200)의 단순화된 블록도이다. 착용가능한 디바이스(200)는 프로세싱 서브시스템(202), 저장 서브시스템(204), 사용자 인터페이스(206), RF 인터페이스(208), 커넥터 인터페이스(210), 전력 서브시스템(212), 환경 센서들(214), 및 스트랩 센서들(216)을 포함할 수 있다. 착용가능한 디바이스(200)는 또한 다른 컴포넌트들(명시적으로 도시되지 않음)을 포함할 수 있다.
저장 서브시스템(204)은 예를 들어, 자기 저장 매체들, 플래시 메모리, 다른 반도체 메모리(예컨대, DRAM, SRAM), 또는 임의의 다른 비일시적 저장 매체, 또는 매체들의 조합을 이용하여 구현될 수 있으며, 휘발성 및/또는 비휘발성 매체들을 포함할 수 있다. 일부 실시예들에서, 저장 서브시스템(204)은 오디오 파일, 비디오 파일, 이미지 또는 삽화 파일과 같은 미디어 항목; 사용자의 연락처에 관한 정보(이름, 주소, 전화번호 등); 사용자의 스케줄링된 약속 및 이벤트에 관한 정보; 메모; 및/또는 다른 유형들의 정보를 저장할 수 있으며, 그 예들이 아래에 기술된다. 일부 실시예들에서, 저장 서브시스템(204)은 또한 프로세싱 서브시스템(210)에 의해 실행될 하나 이상의 애플리케이션 프로그램(또는 앱들)(234)(예컨대, 비디오 게임 프로그램, 개인 정보 관리 프로그램, 미디어 재생 프로그램, 특정 호스트 디바이스 및/또는 호스트 디바이스 기능성과 연관된 인터페이스 프로그램 등)을 저장할 수 있다.
사용자 인터페이스(206)는 입력 및 출력 디바이스들의 임의의 조합을 포함할 수 있다. 사용자는 착용가능한 디바이스(200)의 기능성을 호출하도록 사용자 인터페이스(206)의 입력 디바이스들을 동작시킬 수 있고, 사용자 인터페이스(206)의 출력 디바이스들을 통해 착용가능한 디바이스(200)로부터의 출력을 보고, 듣고, 그리고/또는 다른 식으로 겪을 수 있다.
출력 디바이스들의 예들은 디스플레이(220), 스피커들(222), 및 햅틱 출력 생성기(224)를 포함한다. 디스플레이(220)는 컴팩트한 디스플레이 기술들, 예를 들어, LCD(액정 디스플레이), LED(발광 다이오드), OLED(유기 발광 다이오드) 등을 이용하여 구현될 수 있다. 일부 실시예들에서, 디스플레이(220)는 가요성 디스플레이 요소 또는 만곡된-유리 디스플레이 요소를 포함하여, 착용가능한 디바이스(200)가 원하는 형상을 따르게 할 수 있다. 하나 이상의 스피커(222)는 전자 신호를 가청 음파로 변환할 수 있는 임의의 기술을 포함한, 소형 폼 팩터 스피커 기술들을 이용하여 제공될 수 있다. 일부 실시예들에서, 스피커들(222)은 톤들(예컨대, 삐 소리 또는 울리는 소리)을 생성하는 데 사용될 수 있고, 임의의 특정 정도의 충실도(fidelity)를 갖는 음성 또는 음악과 같은 사운드를 재생할 수는 있지만 반드시 해야 할 필요는 없다. 햅틱 출력 생성기(224)는 예를 들어, 전자 신호를 진동으로 변환하는 디바이스일 수 있고; 일부 실시예들에서, 진동은 착용가능한 디바이스(200)를 착용한 사용자가 느낄만큼 충분히 강할 수 있지만 별개의 사운드들을 생성할만큼 강하지는 않다.
입력 디바이스들의 예들은 마이크로폰(226), 터치 센서(228), 및 카메라(229)를 포함한다. 마이크로폰(226)은 음파를 전자 신호로 변환하는 임의의 디바이스를 포함할 수 있다. 일부 실시예들에서, 마이크로폰(226)은 사용자가 말한 특정 단어들의 표현을 제공할 만큼 충분히 민감할 수 있으며; 다른 실시예들에서, 마이크로폰(226)은 특정 소리들의 고품질 전자 표현을 반드시 제공하지는 않으면서 일반적인 주위 사운드 레벨들의 지시들을 제공하는 데 유용할 수 있다.
터치 센서(228)는 예를 들어, 센서의 표면 상의 특정 지점 또는 영역에 대한 접촉들의 위치를 알아내는 능력, 및 일부 경우들에서의, 다수의 동시 접촉들을 구별하는 능력을 갖는 용량성 센서 어레이를 포함할 수 있다. 일부 실시예들에서, 터치 센서(228)는 디스플레이(220) 위에 덮어씌워져 터치스크린 인터페이스(예컨대, 도 1의 터치스크린 인터페이스(105))를 제공할 수 있으며, 프로세싱 서브시스템(202)은, 디스플레이(220) 상에 현재 무엇이 표시되는지에 따라 터치 이벤트들(하나 이상의 접촉으로 행해진 탭들 및/또는 다른 제스처들을 포함함)을 특정 사용자 입력들로 변환할 수 있다.
카메라(229)는 예를 들어, 컴팩트한 디지털 카메라를 포함할 수 있으며, 이는, CMOS 센서와 같은 이미지 센서 및 이미지를 이미지 센서 상으로 집속시키도록 배열된 광학 컴포넌트들(예컨대, 렌즈들)과 함께, 이미징 컴포넌트들을 이용하여 스틸 및/또는 비디오 이미지들을 캡처 및 저장하도록 동작가능한 제어 로직을 포함한다. 이미지들은 예를 들어, 저장 서브시스템(204)에 저장될 수 있고/있거나, 저장을 위해 다른 디바이스들로 착용가능한 디바이스(200)에 의해 전송될 수 있다. 구현예들에 따라, 광학 컴포넌트들은 고정된 초점 거리 또는 가변 초점 거리를 제공할 수 있으며; 후자의 경우, 자동초점이 제공될 수 있다. 일부 실시예들에서, 카메라(229)는 도 1의 앞면 부재(104)의 에지, 예컨대, 상부 에지를 따라 배치되고, 사용자가 바코드 또는 QR 코드와 같은 환경에서 근방의 물체들의 이미지들을 캡처할 수 있도록 배향될 수 있다. 다른 실시예들에서, 카메라(229)는 예를 들어, 사용자의 이미지들을 캡처하기 위해 앞면 부재(104)의 전방 표면 상에 배치될 수 있다. 0개의, 하나의, 또는 더 많은 카메라들이 구현예들에 따라 제공될 수 있다.
일부 실시예들에서, 사용자 인터페이스(206)는 헤드셋과 같은 보조 디바이스로 출력을 제공하고/하거나 그로부터 입력을 수신할 수 있다. 예를 들어, 오디오 잭(230)은 오디오 케이블(예컨대, 표준 2.5-mm 또는 3.5-mm 오디오 케이블)을 통해 보조 디바이스에 연결될 수 있다. 오디오 잭(230)은 입력 및/또는 출력 경로들을 포함할 수 있다. 따라서, 오디오 잭(230)은 보조 디바이스에 오디오를 제공하고/하거나 보조 디바이스로부터 오디오를 수신할 수 있다. 일부 실시예들에서, 무선 연결 인터페이스는 보조 디바이스와 통신하는 데 사용될 수 있다.
프로세싱 서브시스템(202)은 하나 이상의 집적회로, 예컨대, 하나 이상의 단일 코어 또는 멀티 코어 마이크로프로세서 또는 마이크로제어기로서 구현될 있으며, 그 예들은 종래 기술에서 알려져 있다. 동작에서, 프로세싱 시스템(202)은 착용가능한 디바이스(200)의 동작을 제어할 수 있다. 다양한 실시예들에서, 프로세싱 서브시스템(202)는 프로그램 코드에 응답하여 각종 프로그램들을 실행할 수 있고, 다수의 동시에 실행 중인 프로그램들 또는 프로세스들을 유지할 수 있다. 임의의 주어진 시간에, 실행될 프로그램 코드의 일부 또는 전부는 프로세싱 서브시스템(202)에 그리고/또는 저장 서브시스템(204)과 같은 저장 매체들에 존재할 수 있다.
적합한 프로그래밍을 통해, 프로세싱 서브시스템(202)은 착용가능한 디바이스(200)에 다양한 기능성을 제공할 수 있다. 예를 들어, 일부 실시예들에서, 프로세싱 서브시스템(202)은 운영 체제(OS)(232) 및 다양한 애플리케이션들(234), 예컨대 전화-인터페이스 애플리케이션, 텍스트-메시지-인터페이스 애플리케이션, 미디어 인터페이스 애플리케이션, 체력 관리 애플리케이션, 및/또는 다른 애플리케이션들을 실행할 수 있다. 일부 실시예들에서, 이들 애플리케이션 프로그램의 일부 또는 전부는 예를 들어, 호스트 디바이스로 송신될 메시지들을 생성함으로써 그리고/또는 호스트 디바이스로부터 메시지들을 수신하고 해석함으로써, 호스트 디바이스와 상호작용할 수 있다. 일부 실시예들에서, 이들 애플리케이션 프로그램의 일부 또는 전부는 착용가능한 디바이스(200)에 로컬로 동작할 수 있다. 예를 들어, 착용가능한 디바이스(200)가 저장 서브시스템(204)에 저장된 로컬 미디어 라이브러리를 갖는 경우, 미디어 인터페이스 애플리케이션은 로컬로 저장된 미디어 항목들을 선택 및 재생하기 위한 사용자 인터페이스를 제공할 수 있다. 프로세싱 서브시스템(202)은 또한, 예를 들어, 제스처 프로세싱 코드(236)(원하는 바에 따라, OS(232)의 일부이거나 별개로 제공될 수 있음)를 실행함으로써, 손목-제스처-기반 제어를 제공할 수 있다.
RF(라디오 주파수) 인터페이스(208)는 착용가능한 디바이스(200)가 다양한 호스트 디바이스들과 무선으로 통신하게 할 수 있다. RF 인터페이스(208)는, 예를 들어, Wi-Fi(IEEE 802.11 계열 표준들), 블루투스®(블루투스 SIG, Inc.에 의해 공표된 표준들 계열), 또는 무선 데이터 통신을 위한 다른 프로토콜들을 이용하여 무선 매체를 통한 데이터 통신을 가능하게 하는 안테나와 같은 RF 송수신기 컴포넌트들 및 지원 회로를 포함할 수 있다. RF 인터페이스(208)는 하드웨어(예컨대, 드라이버 회로, 안테나, 변조기/복조기, 인코더/디코더, 및 다른 아날로그 및/또는 디지털 신호 프로세싱 회로) 및 소프트웨어 컴포넌트들의 조합을 사용하여 구현될 수 있다. 일부 실시예들에서, RF 인터페이스(208)는 예컨대, ISO/IEC 18092 표준들 등을 구현하는 근거리 통신("NFC") 기능을 제공할 수 있고; NFC는 단거리(예컨대, 20 센티미터 이하)에 있는 디바이스들 사이에서 무선 데이터 교환을 지원할 수 있다. 다수의 상이한 무선 통신 프로토콜들 및 연관된 하드웨어가 RF 인터페이스(208)에 통합될 수 있다.
커넥터 인터페이스(210)는 착용가능한 디바이스(200)가 다양한 호스트 디바이스들과 유선 통신 경로를 통해, 예를 들어, USB(Universal Serial Bus), UART(universal asynchronous receiver/transmitter), 또는 유선 데이터 통신을 위한 다른 프로토콜들을 이용하여 통신하게 할 수 있다. 일부 실시예들에서, 커넥터 인터페이스(210)는 전력 포트를 제공하여, 착용가능한 디바이스(200)가 예를 들어, 내부 배터리를 충전하기 위한 전력을 수신하게 할 수 있다. 예를 들어, 커넥터 인터페이스(210)는 mini-USB 커넥터 또는 맞춤 커넥터와 같은 커넥터뿐만 아니라, 지원 회로를 포함할 수 있다. 일부 실시예들에서, 커넥터는 전용 전력 및 접지 접점들뿐만 아니라, 상이한 통신 기술들을 병렬로 구현하는 데 사용될 수 있는 디지털 데이터 접점들을 제공하는 맞춤 커넥터일 수 있으며; 예를 들어, 2개의 핀이 USB 데이터 핀들(D+ 및 D-)로서 할당될 수 있고 2개의 다른 핀이 시리얼 전송/수신 핀들로서 할당될 수 있다(예를 들어, UART 인터페이스를 구현함). 특정 통신 기술들에 대한 핀들의 할당은 하드웨어 내장되거나(hardwired) 접속이 설정되는 동안에 협상될 수 있다. 일부 실시예들에서, 커넥터는 또한 오디오 및/또는 비디오 신호들을 위한 연결부들을 제공할 수 있으며, 이는 호스트 디바이스(202)로 또는 그로부터 아날로그 및/또는 디지털 포맷들로 전송될 수 있다.
일부 실시예들에서, 커넥터 인터페이스(210) 및/또는 RF 인터페이스(208)는 호스트 디바이스로부터 착용가능한 디바이스(200)로(또는 그 반대로) 데이터가 전달되는 동기화 동작들을 지원하는 데 사용될 수 있다. 예를 들어, 하기에 기술되는 바와 같이, 사용자는 소정 정보를 착용가능한 디바이스(200)에 대해 맞춤화할 수 있다(예컨대, 손목-제스처 제어에 관련된 설정들). 사용자 인터페이스(206)가 데이터-입력 동작들을 지원할 수 있지만, 사용자는, (예컨대, 실제 또는 가상 영숫자 키보드를 포함한) 더 큰 인터페이스를 갖는 별개의 디바이스(예컨대, 태블릿 또는 스마트폰) 상에서 맞춤화된 정보를 정의하고, 이어서 동기화 동작을 통해 착용가능한 디바이스(200)로 맞춤화된 정보를 전달하는 것이 더 편리해질 수 있다. 동기화 동작들은 또한 미디어 항목, 애플리케이션 프로그램, 개인 데이터, 및/또는 운영 체제 프로그램과 같은 다른 유형들의 데이터를 저장 서브시스템(204) 내에서 로딩 및/또는 업데이트하는 데 사용될 수 있다. 동기화 동작들은 명시적 사용자 요청에 응답하여 수행되고/되거나, 예를 들어, 무선 디바이스(200)가 특정 호스트 디바이스와의 통신을 재개할 때에 또는 둘 중 어느 하나의 디바이스가 동기화된 정보의 그것의 복사본에 대한 업데이트를 수신하는 것에 응답하여 자동으로 수행될 수 있다.
환경 센서들(214)은 착용가능한 디바이스(200) 주위의 외부 조건들에 관련된 정보를 제공하는 다양한 전자, 기계, 전자기계, 광학, 또는 다른 디바이스들을 포함할 수 있다. 일부 실시예들에서 센서들(214)은, 예를 들어, 원하는 바에 따라 스트리밍 기반으로 또는 프로세싱 서브시스템(202)에 의한 폴링(polling)에 응답하여, 디지털 신호들을 프로세싱 서브시스템(202)에 제공할 수 있다. 임의의 유형 및 조합의 환경 센서들이 사용될 수 있으며; 예로서 가속도계(242), 자력계(244), 자이로스코프(246), 및 GPS 수신기(248)가 도시된다.
일부 환경 센서들은 착용가능한 디바이스(200)의 위치 및/또는 움직임에 관한 정보를 제공할 수 있다. 예를 들어, 가속도계(242)는 예를 들어, 압전 또는 다른 컴포넌트들과 함께 연관된 전자장치들을 이용하여, 하나 이상의 축을 따르는 (자유낙하에 대한) 가속도를 감지하여, 신호를 생성할 수 있다. 자력계(244)는 주변 자기장(예컨대, 지구의 자기장)을 감지하여 대응하는 전기 신호를 생성할 수 있으며, 이는 나침반 방향으로 해석될 수 있다. 자이로스코프 센서(246)는 예를 들어, 하나 이상의 MEMS(마이크로전자기계 시스템들) 자이로스코프 및 관련된 제어 및 감지 회로를 이용하여 하나 이상의 방향으로 회전 움직임을 감지할 수 있다. 위성 위치확인 시스템(GPS) 수신기(248)는 GPS 위성들로부터 수신된 신호들에 기초하여 위치를 결정할 수 있다.
다른 센서들이 또한 이들 예에 추가하여 또는 그 대신에 포함될 수 있다. 예를 들어, 사운드 센서는 마이크로폰(226)과 함께, 예를 들어, 주변 사운드의 데시벨 레벨을 결정하기 위한 연관된 회로 및/또는 프로그램 코드를 포함할 수 있다. 온도 센서, 근접 센서, 주변광 센서 등이 또한 포함될 수 있다.
스트랩 센서들(216)은 착용가능한 디바이스(200)가 현재 착용되어 있는지 여부에 관한 정보뿐만 아니라, 사용자의 손목의 움직임으로 인해 스트랩 상에 작용하고 있을 수 있는 힘에 관한 정보를 제공하는 다양한 전자, 기계, 전자기계, 광학, 또는 다른 디바이스들을 포함할 수 있다. 스트랩 센서들(216)의 예들이 아래에 기술된다. 일부 실시예들에서, 센서들(216)로부터의 신호들은 예를 들어, 제스처 프로세싱 코드(236)를 이용하여 분석되어, 센서 신호들에 기초한 손목 제스처들을 식별할 수 있다. 이러한 제스처들은 착용가능한 디바이스(200)의 동작들을 제어하는 데 사용될 수 있다. 손목 제스처들 및 제스처 프로세싱의 예들이 아래에 기술된다.
전력 서브시스템(212)은 착용가능한 디바이스(200)에 대한 전력 및 전력 관리 기능들을 제공할 수 있다. 예를 들어, 전력 서브시스템(212)은 배터리(240)(예컨대, 재충전가능한 배터리), 및 배터리(240)로부터의 전력을, 전력을 요구하는 착용가능한 디바이스(200)의 다른 컴포넌트들로 분배하기 위한 연관된 회로를 포함할 수 있다. 일부 실시예들에서, 전력 서브시스템(212)은 예를 들어, 커넥터 인터페이스(210)가 전력 공급원에 연결될 때에 배터리(240)를 충전하도록 동작가능한 회로를 포함할 수 있다. 일부 실시예들에서, 전력 서브시스템(212)은 커넥터 인터페이스(210)에 의존하지 않으면서 배터리(240)를 충전하기 위한, 유도 충전기와 같은, "무선" 충전기를 포함할 수 있다. 일부 실시예들에서, 전력 서브시스템(212)은 또한 배터리(240)에 추가하여 또는 그 대신에, 태양전지와 같은 다른 전력 공급원들을 포함할 수 있다.
일부 실시예들에서, 전력 서브시스템(212)는 전력 소모를 효율적으로 관리하기 위해 착용가능한 디바이스(200) 내의 컴포넌트들로의 전력 분배를 제어할 수 있다. 예를 들어, 전력 서브시스템(212)은, 스트랩 센서들(216) 또는 다른 센서들이 디바이스(200)가 착용되어 있지 않다고 나타내는 경우, 디바이스(200)를 "하이버네이션(hibernation)" 상태에 자동으로 둘 수 있다. 하이버네이션 상태는 전력 소모를 감소시키도록 설계될 수 있고; 따라서, 사용자 인터페이스(206)(또는 그것의 컴포넌트들), RF 인터페이스(208), 커넥터 인터페이스(210), 및/또는 환경 센서들(214)이 전원 차단되는(예컨대, 저전력 상태 또는 전체적으로 턴오프) 동안에, 스트랩 센서들(216)은 사용자가 착용가능한 디바이스(200)를 착용할 때를 검출하기 위해 (연속적으로 또는 간격을 두고) 전원이 투입될 수 있다. 다른 예로서, 일부 실시예들에서, 착용가능한 디바이스(200)가 착용되어 있는 동안, 전력 서브시스템(212)은 환경 센서들(214)에 의해 검출된 착용가능한 디바이스(200)의 움직임 및/또는 배향에 따라 디스플레이(220) 및/또는 다른 컴포넌트들을 켜거나 끌 수 있다. 예를 들어, 착용가능한 디바이스(200)가 사용자의 손목에 착용되도록 설계된 경우, 전력 서브시스템(212)은 가속도계(242)에 의해 제공된 정보에 기초하여, 전형적으로 손목시계를 보는 것과 연관된, 사용자의 손목의 들어올림(raising) 및 롤링(rolling)을 검출할 수 있다. 이 검출된 움직임에 응답하여, 전력 서브시스템(212)은 디스플레이(220) 및/또는 터치 센서(228)를 자동으로 켤 수 있고; 유사하게, 전력 서브시스템(212)은 사용자의 손목이 중립 위치로 복귀되었음을(예컨대, 늘어뜨림(hanging down)) 검출하는 것에 응답하여 디스플레이(220) 및/또는 터치 센서(228)를 자동으로 끌 수 있다.
전력 서브시스템(212)은 또한, 이용가능한 전력의 공급원 및 양에 기초하여 착용가능한 디바이스(200)의 다른 컴포넌트들의 전력 소모를 조절하고, 배터리(240) 내의 저장된 전력을 모니터링하고, 저장된 전력이 최소 레벨 아래로 하락하는 경우 사용자 경보들을 생성하는 등과 같은 다른 전력 관리 기능들을 제공할 수 있다.
일부 실시예들에서, 전력 서브시스템(212)의 제어 기능들은 프로세싱 서브시스템(202)에 의해 생성된 제어 신호들에 응답하여 그 위에서 실행되는 프로그램 코드에 응답하여 동작하는 프로그램가능한 또는 제어가능한 회로들을 이용하여, 또는 별개의 마이크로프로세서 또는 마이크로제어기로서 구현될 수 있다.
착용가능한 디바이스(200)가 예시적이며, 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 예를 들어, 스트랩 센서들(216)은 수정될 수 있고, 착용가능한 디바이스(200)는 사용자가 입력을 제공하기 위해 동작시킬 수 있는 사용자-동작가능한 제어부(예컨대, 버튼 또는 스위치)를 포함할 수 있다. 제어부들은 또한 예를 들어, 디스플레이(220)를 켜거나 끄는 것, 스피커들(222)로부터의 사운드들을 음소거(mute)하거나 음소거 해제(unmute)하기 위한 것 등을 위해 제공될 수 있다. 착용가능한 디바이스(200)는 임의의 유형들 및 조합의 센서들을 포함할 수 있고, 일부 경우들에서 주어진 유형의 다수의 센서들을 포함할 수 있다.
다양한 실시예들에서, 사용자 인터페이스는 앞서 기술된 컴포넌트들의 일부 또는 전부뿐만 아니라, 명시적으로 기술되지 않은 다른 컴포넌트들의 임의의 조합을 포함할 수 있다. 예를 들어, 일부 실시예들에서, 사용자 인터페이스는 예를 들어, 단지 터치스크린만을, 또는 터치스크린과 스피커, 또는 터치스크린과 햅틱 디바이스를 포함할 수 있다. 착용가능한 디바이스가 RF 인터페이스를 갖는 경우, 커넥터 인터페이스가 생략될 수 있고, 착용가능한 디바이스와 다른 디바이스들 사이의 모든 통신은 무선 통신 프로토콜들을 이용하여 이행될 수 있다. 예컨대, 착용가능한 디바이스의 배터리를 충전하기 위한 유선 전력 연결부는, 임의의 데이터 연결부와 별개로 제공될 수 있다.
또한, 착용가능한 디바이스가 특정 블록들을 참조하여 설명되지만, 이들 블록들이 설명의 편리함을 위해 정의되며 컴포넌트 부분들의 특정 물리적 배열을 의미하도록 의도되지 않는다는 것이 이해될 것이다. 또한, 블록들은 물리적으로 별개인 컴포넌트들에 대응할 필요는 없다. 블록들은 예컨대 프로세서를 프로그래밍하거나 적절한 제어 회로를 제공함으로써 다양한 동작들을 수행하도록 구성될 수 있으며, 다양한 블록들은 초기 구성이 획득되는 방법에 따라 재구성 가능하거나 재구성 가능하지 않을 수 있다. 본 발명의 실시예들은 회로 및 소프트웨어의 임의의 조합을 사용하여 구현된 전자 디바이스들을 포함한, 다양한 장치에서 실현될 수 있다. 또한, 도 2의 모든 블록이 착용가능한 디바이스의 주어진 실시예에서 구현될 필요는 없다.
도 1의 호스트 디바이스(102)와 같은 호스트 디바이스는 전술한 블록들과 유사한 블록들(예컨대, 프로세서, 저장 매체, 사용자 인터페이스 디바이스, 데이터 통신 인터페이스 등) 및/또는 다른 블록들 또는 컴포넌트들을 이용하여 전자 디바이스로서 구현될 수 있다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는, 특정 착용가능한 디바이스와 통신할 수 있는 임의의 전자 디바이스가 그 착용가능한 디바이스에 관한 호스트 디바이스로서 작용할 수 있다는 것을 인식할 것이다.
호스트 디바이스와 무선 디바이스 사이의 통신은, 두 디바이스 모두가 프로그래밍되거나, 또는 다른 식으로 사용하도록 구성되는 임의의 통신 프로토콜(또는 프로토콜들의 조합)에 따라 구현될 수 있다. 일부 경우들에서, 블루투스 프로토콜과 같은 표준 프로토콜들이 사용될 수 있다. 일부 경우들에서, 맞춤 메시지 포맷 및 신택스(syntax)(예컨대, 디지털 데이터 전송 내의 특정 바이트들 또는 바이트들의 시퀀스들을 해석하기 위한 규칙들의 세트를 포함함)가 정의될 수 있고, 메시지들이 소정 블루투스 표준들로 정의된 가상 시리얼 포트와 같은 표준 시리얼 프로토콜들을 이용하여 전송될 수 있다. 본 발명의 실시예들은 특정 프로토콜들로 제한되지 않으며, 본 교시에 대해 접근할 수 있는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 다수의 프로토콜들이 사용될 수 있음을 인식할 것이다.
본 발명의 소정 실시예들은 사용자가 손목의 관절운동들을 이용하여 무선 디바이스 및/또는 호스트 디바이스를 제어하게 할 수 있다. 본 명세서에서 사용된 바와 같이, 손목의 관절운동은 일반적으로 사용자의 팔뚝에 대한 사용자의 손의 배향을 중립 위치로부터 변화시키는 임의의 움직임을 지칭하고; 중립으로의 복귀는 관절운동을 이완시키는 것으로 지칭된다. 도 3a 내지 도 3f에 도시된 바와 같이, 손목은, 손등이 팔뚝 쪽으로 회전되는, 도 3a에 도시된 바와 같은 신전(또는 배굴); 손바닥이 팔뚝 쪽으로 회전되는, 도 3b에 도시된 바와 같은 구부림(또는 장굴); 엄지를 팔뚝 쪽으로 이끄는 손바닥 면의 움직임인, 도 3c에 도시된 바와 같은 외전(또는 요골측 편위); 새끼손가락을 팔뚝 쪽으로 이끄는 손바닥 면의 움직임인, 도 3d에 도시된 바와 같은 내전(척골측 편위); 팔뚝에 평행한 축을 중심으로 엄지의 방향으로 손을 회전시키는 움직임인, 도 3e에 도시된 바와 같은 회내(또는 내향 회전); 및 회내와 반대 방향의 회전인, 도 3f에 도시된 바와 같은 회외(또는 외향 회전)를 포함한, 다수의 방향들로 관절운동할 수 있다.
다양한 실시예들에서, 이들 관절운동의 일부 또는 전부는 사용자 입력 메커니즘으로서 검출되고 사용될 수 있다. 도 4는 본 발명의 실시예에 따른 착용가능한 디바이스(예컨대, 도 1의 착용가능한 디바이스(100) 또는 도 2의 착용가능한 디바이스(200))에 포함될 수 있는 손목-제스처 프로세싱 시스템(400)의 단순화된 블록도이다. 시스템(400)은 하나 이상의 손목밴드(또는 스트랩) 센서들(402), 제스처 라이브러리(406)에 액세스하는 제스처 식별 모듈(404), 제스처 룩업 데이터 저장소(410)에 액세스하는 제스처 해석 모듈(408), 및 실행 모듈(412)을 포함할 수 있다. 모듈들(404, 408, 412)은 소프트웨어로서, 예를 들어, 착용가능한 디바이스(200)의 제스처 프로세싱 코드(236)의 일부로서 구현될 수 있다.
손목밴드 센서들(402)은 손목밴드 또는 그것의 부분들에 인가된 힘들을 검출하는 센서들을 포함할 수 있다. 임의의 유형 또는 조합의 센서들이 사용될 수 있다. 예를 들어, 센서들(402)은 인가된 힘을 나타내는, 손목밴드의 다른 부분 또는 앞면 부분에 대한 손목밴드의 일부분의 움직임을 검출하는 변위 센서들; 인가된 힘을 나타내는 손목밴드의 늘어남 또는 수축을 검출하는 변형 센서들; 및/또는 손목밴드의 내측 표면의 특정 영역들에 인가된 압력의 변화(단위 면적당 힘)를 검출하는 압력 센서들을 포함할 수 있다. 센서들의 특정예들이 아래에 기술된다. 센서들(402)은 예를 들어, 고정된-함수 또는 프로그램가능한 로직 회로들을 이용하여 분석될 수 있는 센서 신호들을 생성할 수 있다. 일부 실시예들에서, 센서 신호들은 아날로그 형태로 생성되고, 분석 전에 디지털 데이터로 변환될 수 있다.
제스처 식별 모듈(404)은 (예를 들어, 디지털 형태의) 센서 데이터를 수신할 수 있다. 제스처 식별 모듈(404)은 특정 손목 제스처들과 연관된 "시그니처들"의 데이터 저장소(406)에 액세스할 수 있다. 본 명세서에서 사용된 바와 같이, 손목 제스처(단순히 제스처로도 지칭됨)는 사용자가 실행할 수 있는 특정 손목 관절운동 또는 손목 관절운동들의 시퀀스, 예컨대 신전-이완(extend-and-release), 신전-유지(extend-and-hold), 이중-신전(double-extend)(신전-이완-신전-이완), 구부림-이완(flex-and-release), 구부림-유지(flex-and-hold), 이중-구부림(double-flex)(구부림-이완-구부림-이완) 등을 지칭한다. 제스처에 대한 시그니처는, 대응하는 제스처를 사용자가 실행할 때에 일어날 것으로 예상되는 하나 이상의 센서에 대한 센서 데이터 값들의 시퀀스를 포함할 수 있다. 일부 실시예들에서, 다양한 손목 제스처들에 대한 시그니처들은 제스처 식별 모듈(404)을 훈련 모드에서 동작시킴으로써 생성될 수 있으며, 훈련 모드에서 사용자는 프롬프트(prompt)들에 응답하여 특정 손목 제스처들을 실행하고, 사용자가 제스처를 실행하는 동안에 센서 데이터가 수집된다. 사용자는 훈련 동안에 여러 번 특정 제스처를 실행하도록 프롬프트될 수 있고, 실행의 상이한 경우들로부터의 센서 데이터의 통계 분석이 사용되어, 추가로 제스처에 대한 시그니처를 정의할 수 있다. 다른 실시예들에서, 시그니처들은 예를 들어, 다수의 상이한 시험 사용자들에 의해 수행된 제스처들에 대한 센서 응답의 분석에 기초하여, 최종 사용자에게 디바이스를 분배하기 전에 생성될 수 있다. 또 다른 실시예들에서, 사용자-특정 훈련 및 분배-전(pre-distribution) 분석의 조합이 사용되어, 다양한 제스처들에 대한 시그니처들을 정의할 수 있다.
정상 동작 동안에(훈련 모드에 있지 않을 때), 제스처 식별 모듈(404)은 수신된 센서 데이터를 시그니처 데이터 저장소(406) 내의 시그니처들과 비교하고, 수신된 센서 신호들과 데이터 저장소(406) 내의 시그니처들 중 하나 사이의 가장 좋은 매칭에 기초하여 제스처를 식별할 수 있다. 다양한 분석 기법들이 비교를 수행하는 데 사용될 수 있다. 예를 들어, 제스처 식별 모듈(404)은 수신된 센서 데이터와 다양한 시그니처들 사이의 상관관계의 정도를 나타내는 상관관계 측정치를 계산하고, 수신된 데이터와 가장 강한 상관관계를 갖는 시그니처에 기초하여 제스처를 식별할 수 있다.
제스처 식별 모듈(404)로부터의 출력은 센서 신호와 가장 잘 매칭된 제스처를 나타내는 제스처ID(GestureID) 코드일 수 있다. 일부 실시예들에서, 제스처 식별 모듈(404)은, 예를 들어, 모든 시그니처에 대한 상관관계 측정치가 최소 임계치 미만인 경우에, 널 결과치(null result)(어떠한 제스처도 매칭되지 않음)를 생성할 수 있다. 제스처를 검출하기 위해 최소 임계치를 요구하는 것은, 다른 사용자 움직임들을 제스처 입력들로 해석하는 것을 피하는 데 도움을 줄 수 있다. 일부 실시예들에서, 제스처 식별 모듈(404)은, 예를 들어, 가장 높은 상관관계 측정치 및 두 번째 높은 상관관계 측정치가 서로의 허용 한계 내에 있는 경우, 모호한 결과치(다수의 제스처들이 매칭됨)를 생성할 수 있으며; 이 경우에, 다수의 제스처ID들이 출력될 수 있고, 의도된 제스처는 이후의 단계에서 명확해질(disambiguated) 수 있다.
제스처 해석 모듈(408)은 제스처 식별 모듈(404)로부터 제스처ID를 수신하고, 제스처를 동작 또는 명령으로 매핑할 수 있다. 본 명세서에서 사용되는 바와 같이, "동작(action)"은 일반적으로 호출될 기능을 지칭하고, "명령(command)"은 일반적으로 기능을 호출하기 위해 (도 4에서 실행 모듈(412)로서 표현된) 착용가능한 디바이스의 적절한 컴포넌트에 제공될 수 있는 제어 신호를 지칭한다. 일부 실시예들에서, 착용가능한 디바이스가 실행할 수 있는 임의의 기능은 제스처로 매핑될 수 있다. 예를 들어, 제스처 룩업 데이터 저장소(410)는 제스처ID를 명령으로 매핑하는 룩업 테이블을 포함할 수 있다. 제스처는 원하는 바에 따라, 동작으로 매핑되고 이어서 명령으로 매핑되거나, 또는 명령으로 직접 매핑될 수 있다.
일부 경우들에서, 매핑은 컨텍스트-민감할 수 있으며, 즉, 착용가능한 디바이스의 현재 상태에 의존할 수 있다. 예를 들어, 룩업 데이터 저장소(410)는 다수의 룩업 테이블들을 포함할 수 있으며, 각각은 "홈 상태(home state)", "미디어 재생기", "폰 인터페이스" 등과 같은 상이한 컨텍스트와 연관된다. 신전-이완 제스처와 연관된 ID와 같은 특정 제스처ID는, 상이한 컨텍스트들에서 상이한 기능들로 매핑될 수 있다. 디바이스 기능들(또는 동작들)에 대한 제스처 매핑들의 특정 예들이 아래에 기술된다.
제스처 식별이 모호한 경우, 제스처 해석 모듈(406)이 모호성을 해결하려고 시도할 수 있다. 예를 들어, 2개 이상의 제스처ID가 제스처 식별 모듈(404)로부터 수신되는 경우, 제스처 해석 모듈(406)은, 제스처ID들 중 하나만이 현재 컨텍스트 또는 디바이스 상태 내에서 정의되는 제스처에 대응하는지 여부를 결정할 수 있다. 그런 경우, 제스처 해석 모듈(406)은 정의된 제스처를 선택할 수 있다. 수신된 제스처ID들과 매칭되는 다수의 제스처들이 현재 컨텍스트에서 정의되는 경우, 제스처 해석 모듈(406)은 입력을 무시하거나, 또는 수신된 제스처ID들 중에서 선택할 수 있다.
실행 모듈(412)은 명령에 응답하여 기능을 수행할 수 있는 착용가능한 디바이스의 임의의 컴포넌트를 포함할 수 있다. 다양한 실시예들에서, 실행 모듈(412)은 도 2의 운영 체제(232) 및/또는 앱들(234)의 양태들을 포함할 수 있다.
손목 관절운동들을 검출하는 데 사용될 수 있는 센서들의 예들이 이제 기술될 것이다.
도 5a 및 도 5b는 본 발명의 실시예에 따른 센서들을 이용하여 손목 신전(또는 배굴)을 검출하기 위한 하나의 기법을 예시한다. 도 5a는 전면 부재(502) 및 스트랩(504)을 갖는 손목 디바이스(500)를 도시한다. 스트랩(504)은 앞면 부재(502)의 상부 및 하부 면들에 따라 배치된 팽창가능한 스트랩 홀더들(506, 508)을 이용하여 전면 부재(502)에 연결된다. 삽도(510)는 손목(512)이 중립 위치에 있는, 사용자 착용 디바이스(500)를 도시한다. 도 5b에 도시된 바와 같이, 사용자의 손목이 신전될 때(삽도(520)), 팽창가능한 스트랩 홀더들(506, 508)은 팽창한다. 이러한 팽창은, 예를 들어, 신전 동안에 사용자의 손목이 형상이 변화하는 것의 결과로서 그리고/또는 사용자의 손등이나 손목이 앞면 부재(502)에 대해 누르는 결과로서 일어날 수 있다. 팽창가능한 스트랩 홀더들(506, 508)에 인접한 또는 그 내에 배치된 센서들은 팽창을 검출하고, 구부림을 나타내는 신호를 생성할 수 있다.
도 6a 및 도 6b는 본 발명의 실시예에 따른 센서들을 이용하여 손목 신전(또는 배굴)을 검출하기 위한 다른 기법을 예시한다. 도 6a는 앞면 부재(602) 및, 앞면 부재(602)의 상부 및 하부 면들을 따라 배치된 고정된 스트랩 홀더들(606, 608)을 이용하여 앞면 부재(602)에 고정된 탄성 스트랩(604)을 갖는 손목 디바이스(600)를 도시한다. 삽도(610)는 손목(612)이 중립 위치에 있는, 사용자 착용 손목 디바이스(600)를 도시한다. 도 6b에 도시된 바와 같이, 사용자의 손목이 신전될 때(삽도(620)), 탄성 스트랩(604)은 팽창한다. (팽창을 예시하기 위한 목적으로, 탄성 스트랩(604)이 지그재그 패턴(614)으로 도시된다). 탄성 스트랩(604)의 팽창은 예를 들어, 스트랩(604)의 탄성 재료에 적어도 부분적으로 내장되고, 늘어날 때 증가된 전기 저항을 제공하는 스트레인 게이지 와이어 등을 이용하여 검출될 수 있다. 일부 실시예들에서, 스트랩(604)의 일부분만이 탄성이고, 탄성 부분의 팽창이 검출될 수 있다.
도 7a 및 도 7b는 본 발명의 실시예에 따른 압력 센서들을 이용하여 손목 관절운동들을 검출하기 위한 기법을 예시한다. 도 7a는 앞면 부재(702) 및, 앞면 부재(702)의 상부 및 하부 표면들을 따라 배치된 고정된 스트랩 홀더들(706, 708)을 이용하여 앞면 부재(702)에 고정된 스트랩(704)을 갖는 손목 디바이스(700)를 도시한다. 하나 이상의 압력 센서(710)는 앞면 부재(702)의 내향-대면 표면 상에 배치되어, 디바이스(700)가 착용될 때에 센서들(710)이 사용자의 손목과 접촉하게 할 수 있다. 도 7b에 도시된 바와 같이, 손목 디바이스(700)는 또한 스트랩(704)의 내부 면 상에 배치된 하나 이상의 압력 센서(712)를 가져서, 디바이스(700)가 착용될 때에 센서들(712) 중 적어도 일부가 사용자의 손목과 접촉하게 할 수 있다. 손목 관절운동은 센서들(710, 712) 상의 압력의 분포를 변화시킨다. 예를 들어, 장굴은 하나 이상의 센서(710)에서의 압력을 증가시키는 한편 하나 이상의 센서(712)에서의 압력을 감소시킬 수 있으며; 배굴(신전)은 그 반대 효과를 가질 수 있다. 외전, 내전, 회내, 및 회외는 또한 적합하게 배치된 압력 센서들 상의 압력 변화들의 패턴들에 기초하여 구별될 수 있다. 일부 실시예들에서, 근접 센서들이 압력 센서들에 추가하여 또는 그 대신에 사용될 수 있다. 적합한 스트랩 재료들의 경우, 로컬화된 팽창 또는 스트레인 센서들 등이 또한 사용될 수 있다.
본 명세서에서 기술되는 센서 예들은 예시적이며, 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 다양한 실시예들에서, 센서들은 손목 스트랩 또는 앞면 부재(또는 그것의 로컬화된 부분)의 변형 또는 움직임, 손목 스트랩 또는 앞면 부재(또는 그것의 로컬화된 부분) 상의 스트레스 또는 스트레인, 손목 스트랩 상의 또는 손목 스트랩이나 앞면 부재의 일부분 상의 압력, 또는 손목 스트랩 상에 또는 손목 스트랩이나 앞면 부재의 일부분 상에 작용하는 임의의 다른 힘뿐만 아니라, 센서에 대한 사용자 피부(또는 가능하게는 다른 표면들)의 근접성을 검출할 수 있다. 센서들이 응답하는, 검출된 힘들, 변형들, 스트레스들 및 스트레인들, 압력들 등은 손목 관절운동의 결과일 수 있지만, 이것은 변화가 검출되는 모든 경우에서 반드시 그런 것은 아니다. 다른 원인들이 센서 응답을 생성할 수 있고, 이들 다른 원인들은 항상 손목 관절운동들과 구별되지는 않을 수 있다. 일부 실시예들에서, 다수의 센서들 및 센서 유형들이 단일 손목착용 디바이스에 배치될 수 있고, 상이한 센서들로부터 수신된 신호들 및/또는 데이터 사이의 상관관계들은 손목 관절운동들을 다른 원인들과 구별하는 데 사용될 수 있다.
손목밴드 및/또는 손목착용 디바이스 내의 상기의 그리고/또는 다른 센서들의 임의의 조합이 사용되어, 손목 관절운동을 검출하고/하거나 손목 관절운동의 상이한 유형들 사이의 구별을 용이하게 할 수 있다.
전술한 바와 같이, 센서 데이터는 손목 제스처들을 검출하기 위해 분석될 수 있고, 이는 결국 착용가능한 디바이스에 의해 취해질 동작들로 그리고/또는 동작들을 유도하는 특정 명령 신호들로 매핑될 수 있다. 도 8은 본 발명의 실시예에 따른 착용가능한 디바이스(예컨대, 도 1의 착용가능한 디바이스(100))에 대한 손목-제스처 라이브러리의 일부분을 정의하는 테이블(800)을 도시한다. 이 예에서, 손목 제스처(열 804)는 착용가능한 디바이스의 현재 동작중인 컨텍스트(열 802)에 기초하여 해석되어, 대응하는 동작(열 806)을 결정한다. 동작을 개시하는 명령들 및/또는 제어 신호들에 대한 동작들의 추가의 매핑은 도시되지 않았지만; 본 발명이 속하는 기술분야에 통상의 지식을 가진 자는 특정 명령들 또는 제어 신호들이 착용가능한 디바이스의 특정 구현예에 의존한다는 것을 인식할 것이다.
이 예에서, 착용가능한 디바이스(100)는 "홈" 상태를 가진다고 가정되고, 여기서 그것은 사용자가 기능들을 실행하기 위해 론칭할 수 있는 애플리케이션들(또는 앱들)의 메뉴를 포함할 수 있는 홈 스크린을 나타낸다. 임의의 수 및 조합의 앱들이 지원될 수 있으며, 이는 음악 재생 앱들, 통신 앱들(전화, 텍스트 메시징 등), 음성 레코딩 앱들, 정보 제시 앱들(주식, 뉴스 헤드라인 등), 체력 관리 앱들(운동 또는 다른 활동 데이터를 로그하고/하거나 리뷰하는 것 등) 등을 포함할 수 있다. 사용자는 손목 구부림을 이용하여 앱들의 메뉴를 위로 그리고 아래로 페이징할 수 있으며, 이는 예를 들어, 앱들을 나타내는 아이콘들의 리스트 또는 어레이로서 나타날 수 있다. 이 예에서, 단일 신전-이완 제스처(라인 810)는 리스트 또는 어레이를 아래로 페이징하고, 단일 구부림-이완 제스처(라인 182)는 리스트 또는 어레이를 위로 스크롤한다.
이 예에서, 착용가능한 디바이스는 음성-입력 모드를 지원하는 것으로 또한 가정되며, 여기서 사용자는 말하는 것으로써 기능들을 호출하거나 요청들을 행할 수 있고; (착용가능한 디바이스에, 또는 착용가능한 디바이스가 통신하는 다른 디바이스에 포함될 수 있는) 음성 해석기가 검출된 음성 사운드를 프로세싱하여 어떤 요청이 되고 있는지를 결정함으로써, 디바이스가 요청에 대해 작용하게 할 수 있다. 이 예에서의 홈 상태에서, 이중-신전 제스처(빠르게 연속되는 두 번의 신전 및 이완(라인 814))는 음성-입력 모드를 활성화할 수 있고, 예컨대, 마이크로폰 및 음성 해석기를 켜고; 이중-구부림(빠르게 연속되는 두 번의 구부림 및 이완(라인 816))은 음성-입력 모드를 비활성화할 수 있다.
착용가능한 디바이스가 전화 호를 수신할 수 있는 경우(또는 전화 호를 수신할 수 있는, 모바일 폰과 같은, 다른 디바이스와 페어링되는 경우), 착용가능한 디바이스는 호가 수신될 때 "착신 호(incoming call)" 컨텍스트에 진입할 수 있다. 이 컨텍스트에서, 소정 손목 제스처들의 해석은 변화할 수 있다. 예를 들어, 테이블(800)에 도시된 바와 같이, 착신-호 컨텍스트에서, 단일 신전(라인 818)은 착신 호를 수락(예컨대, 응답)하는 데 사용될 수 있는 한편 단일 구부림(라인 820)은 호를 거부(예컨대, 호를 음성 메일로 전환시킴)하는 데 사용될 수 있다.
다른 예로서, 사용자는 사용자의 연락처의 리스트, 또는 재생되는 데 이용가능한 미디어 자산들의 리스트와 같은, 리스트 뷰를 제공할 수 있는 앱을 론칭할 수 있다. 이러한 리스트를 보는 동안에, 사용자는 손목 제스처들을 이용하여 리스트를 스크롤할 수 있다. 예를 들어, 구부림-유지 제스처(라인 822)는 아래로의 스크롤을 개시할 수 있고, 스크롤은 사용자가 구부림을 이완시키거나(손목을 중립 위치로 복귀시킴) 리스트의 끝이 도달될 때까지 계속될 수 있다. 유사하게, 신전-유지 제스처(라인 824)는 위로의 스크롤을 개시할 수 있고, 스크롤은 사용자가 신전을 이완시키거나 리스트의 시작이 도달될 때까지 계속될 수 있다.
다른 예로서, 이중-신전(라인 826)과 같은 손목 제스처는, 디바이스가 뭔가 다른 것을 표시하고 있는 임의의 시간에 홈 스크린으로의 빠른 복귀를 제공하도록 정의될 수 있다. 따라서, 예를 들어, 사용자가 이중-신전을 하여 홈 스크린으로 복귀할 수 있으며, 이어서 다시 이중-신전하여 음성 입력을 활성화할 수 있다.
구부림 및 신전 이외의 손목 관절운동들이 제스처들을 정의하는 데 사용될 수 있다. 예를 들어, 미디어 재생 동안에, 손목 회전들(회내 및 회외)은 볼륨 제어에 사용될 수 있고(라인들 828, 830); 손목 편위들(외전 및 내전)은 다음 트랙으로 진행하거나, 이전 트랙으로 복귀하는 데 사용될 수 있다(라인들 832, 834).
테이블(800)이 예시적이며, 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 임의의 수 및 조합의 손목 제스처들이 정의될 수 있고, 제스처들이 정의되는 컨텍스트들은 또한 변화될 수 있다. 일부 실시예들에서, 사용자는 예를 들어, 설정 메뉴 등을 이용하여 제스처 라이브러리를 맞춤화할 수 있고; 설정 메뉴 인터페이스가 착용가능한 디바이스 상에, 또는 사용자의 선호도를 착용가능한 디바이스에 전달할 수 있는 다른 디바이스 상에 제공될 수 있다. 일부 실시예들에서, 앱들의 제3자 개발자들은 그 앱들의 컨텍스트 내에서 다양한 손목 제스처들의 해석을 정의할 수 있다.
도 9는 본 발명의 실시예에 따른 손목 제스처들을 이용하여 손목착용 디바이스를 제어하기 위한 프로세스(900)의 흐름도이다. 프로세스(900)는 예를 들어, 도 4의 손목-제스처 프로세싱 시스템(400), 또는 손목착용 디바이스의 다른 컴포넌트들을 이용하여 구현될 수 있다.
단계(902)에서, 손목 동작이 도 4의 손목밴드 센서들(402)과 같은 센서들을 이용하여 검출될 수 있다. 이들 센서는 도 5a, 도 5b, 도 6a, 도 6b, 도 7a, 및/또는 도 7b를 참조하여 전술한 센서들의 임의의 또는 모든 센서, 및/또는 다른 센서들을 포함할 수 있다. 단계(904)에서, 센서 데이터는 예를 들어, 전술한 제스처 식별 모듈(404)을 이용하여 제스처들을 식별하도록 분석될 수 있다. 단계(906)에서, 제스처가 검출되지 않는 경우, 프로세스(900)는 단계(902)로 복귀되어 추가의 센서 입력을 기다릴 수 있다.
일부 실시예들에서, 프로세스(900)는 일정 기간에 걸친 센서 데이터 판독치들을 샘플링할 수 있으며, 단계(904)의 해석은 가장 최근 센서 데이터 샘플들의 롤링 윈도우(rolling window) 상에서 수행될 수 있다. 윈도우의 지속기간은 충분히 크게 선택될 수 있어, 사용자가 의도된 손목 제스처를 대응하는 시간 간격 내에서 실행하게 될 것이다(예컨대, 제스처들이 정의되는 것에 따라, 0.5초, 1초, 2초). 프로세스(900)는 윈도우의 지속기간보다 훨씬 더 짧은 간격들에서 반복될 수 있어서(예컨대, 초당 수백 회), 사용자가 어느 때이든 제스처를 개시할 수 있게 한다.
단계(906)에서, 제스처가 식별되는 경우, 이어서 단계(908)에서, 프로세스(900)는 예를 들어, 전술한 제스처 해석 모듈(408)을 이용하여 제스처와 연관된 동작을 식별할 수 있다. 동작 식별은 전술한 바와 같은 룩업 테이블을 이용하는 것을 포함할 수 있으며, 일부 실시예들에서, 식별은 착용가능한 디바이스의 현재 컨텍스트(예컨대, 동작 상태)에 의존할 수 있다. 단계(910)에서, 동작이 실행될 수 있다. 예를 들어, 전술한 바와 같이, 제스처 해석 모듈(408)은 적절한 명령(또는 다수의 명령들)을 실행 모듈(412)로 송신할 수 있고, 이는 명령에 응답하여 동작을 수행할 수 있다. 그 후에, 프로세스(900)는 계속해서, 손목 동작을 검출하고 동작을 제스처들로 해석할 수 있다.
프로세스(900)는 예시적이며, 변형들 및 수정들이 가능하다는 것이 이해될 것이다. 순차적인 것으로서 설명되는 단계들은 병렬로 실행될 수 있고, 단계들의 순서가 변할 수 있으며, 단계들이 수정, 조합, 추가 또는 생략될 수 있다. 예를 들어, 제스처 및 연관된 동작을 식별하는 것은 단일 동작으로 통합될 수 있다. 다양한 알고리즘들이 사용되어 센서 데이터에 기초하여 제스처를 식별할 수 있으며, 이는 이용가능한 센서들의 세트 및 구별될 제스처들의 세트에 부분적으로 의존한다.
일부 실시예들에서, 추가의 해석이, "노이즈", 또는 사용자의 손의 우발적인 움직임으로 인한 제스처들의 오검출을 감소시키기 위해 수행될 수 있다. 예를 들어, 손목착용 디바이스가 가속도계를 포함하는 경우, 가속도계로부터의 데이터가 사용되어, 사용자의 팔이 움직임 상태에 있는지 여부, 예를 들어, 걷기, 수영하기, 골프채 휘두르기, 말하는 동안의 손짓, 또는 다른 활동 중인지 여부를 결정할 수 있다. 그러한 사용자 활동이 검출되는 경우에서, 손목 제스처들의 인식은 전체적으로 억제될 수 있거나, 또는 제스처 식별에 대한 더 엄격한 기준들이 적용되어 바람직하지 않은 동작을 우연히 실행할 가능성을 감소시킬 수 있다. 유사하게, 손목착용 디바이스가 사용자가 디바이스의 디스플레이를 보고 있는지 여부를 검출할 수 있는 센서들을 갖는 경우(예컨대, 얼굴 및/또는 눈을 검출하기 위해 이미지 분석 소프트웨어와 조합된, 앞면 부분(104) 상의 전방-대면 카메라), 제스처 식별 기준들은 사용자가 디스플레이를 보고 있거나 보고 있지 않은지 여부에 기초하여 수정될 수 있다. 예를 들어, 사용자가 실제로 디스플레이를 보고 있지 않은 경우에는 사용자가 디바이스와 상호작용하는 제스처로서 움직임을 의도할 가능성이 더 적다고 가정될 수 있으며, 손목 제스처들의 인식은 전체적으로 억제될 수 있거나, 또는 사용자가 디스플레이를 보고 있지 않다고 여겨질 때에 더 엄격한 기준들이 적용될 수 있다.
프로세스(900)는 디바이스(100)가 착용되는 동안에 계속해서 실행될 수 있다. 일부 실시예들에서, 프로세스(900)는, 손목 제스처들이 일어날 것으로 예상되지 않는 상태로 디바이스(100)가 진입하는 경우에, 디스에이블될 수 있다. 예를 들어, 일부 실시예들에서, 디바이스(100)는 그것이 현재 착용되어 있는지 여부를 결정할 수 있고, 프로세스(900)는 디바이스(100)가 그것이 착용되어 있지 않다고 결정하는 경우에 디스에이블될 수 있다. 유사하게, 앞서 논의한 바와 같이, 디바이스(100)가 사용자가 팔 움직임을 수반하는 물리적 활동에 관여하거나 디스플레이를 보고 있지 않다고 결정할 수 있는 경우, 프로세스(900)는 디스에이블될 수 있다(또는 제스처 식별에 대한 더 엄격한 기준들로 실행을 계속할 수 있다).
앞서 논의한 바와 같이, 일부 실시예들에서, 사용자는 디바이스의 행동을 맞춤화할 수 있다. 예를 들어, 사용자는 손목-제스처 인식을 전체적으로 인에이블 또는 디스에이블할지를 선택하고, 그리고/또는 특정 손목 제스처들에 대해 해석들을 할당할 수 있다.
본 발명은 특정 실시예들에 대하여 설명되었지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 다수의 수정들이 가능하다는 것을 인식할 것이다. 예를 들어, 신전 및 구부림과 같은 특정 손목 관절운동들을 참조하여 설명이 이루어지지만, 요골측 편위, 척골측 편위, 회내, 및/또는 회외를 포함한, 다른 손목 움직임들 또한 손목 스트랩 내의 적합한 센서들을 이용하여 감지되고, 제스처들로 해석되고, 디바이스 기능들을 호출하는 데 사용될 수 있다. 착용가능한 디바이스가 상이한 제스처들을 구별할 수 있고 특정 기능들에 대한 특정 제스처들의 매핑이 변화될 수 있으면, 임의의 디바이스 기능 또는 기능들의 조합이 손목 제스처들을 이용하여 호출될 수 있다.
또한, 전술한 소정 실시예들이 다수의 손목 제스처들을 인식 및 구별하고, 상이한 제스처들에 응답하여 상이한 기능들을 호출할 수 있지만, 다른 실시예들은 단일의 인식된 손목 제스처를 이용해 동작할 수 있다. 예를 들어, 신전-이완 제스처가 정의될 수 있고, 제스처 식별은, 그 제스처가 행해졌는지 여부를 센서 데이터로부터 결정함으로써 수행될 수 있다. 단일의 인식된 손목 제스처는 전체적으로 특정 기능(예컨대, 홈 스크린으로의 복귀)으로 매핑될 수 있거나, 또는 매핑은 컨텍스트 의존적일 수 있다(예컨대, 손목착용 디바이스가 현재 미디어 재생 앱을 실행하고 있는 경우에 재생/일시정지를 토글하는 것, 손목착용 디바이스가 현재 착신 호 경보를 표시하고 있는 경우에 착시 호에 응답하는 것 등). 일부 실시예들에서, 손목 제스처는 디바이스를 슬립 상태(sleep state)(예컨대, 임의의 감소된-전력 상태)에서 웨이크(wake)하는 데 사용될 수 있고; 디바이스를 웨이크하는 것은 디스플레이를 켜는 것 및/또는 터치 센서 또는 마이크로폰과 같은 사용자 입력 컴포넌트를 켜는 것과 같은 기능들을 포함할 수 있다.
전술한 실시예들은 손목착용 디바이스로부터의 센서 데이터, 보다 상세하게는, 디바이스의 손목밴드 및/또는 앞면 부재에 내장된 센서들로부터의 데이터에 의존한다. 손목착용 디바이스 내의 센서들에 의존하는 것은 제스처-기반 제어를 허용하면서도 사용자에 대한 방해를 감소시킬 수 있다. 예를 들어, 사용자는 제어부를 터치하기 위해 손을 자유롭게 할(free up) 필요 없이 손목 제스처를 실행할 수 있으며, 이는 예를 들어, 사용자가 무언가를 들고 있거나, 운전하고 있거나, 한 손 또는 두 손을 차지하는 어떤 다른 과제를 행하고 있는 경우에 편리할 수 있다. 또한, 사용자는 다른 움직임-기반 제어 시스템들에 의해 요구되는 바와 같이 번거로운 장갑을 착용하거나 외부 센서의 시야 내에 계속 있어야 할 필요가 없으며; 따라서, 사용자는 자유롭게 돌아다니고 정상적인 활동에 관여한다.
일부 경우들에서, 다른 센서들 또는 디바이스들로부터의 데이터는 또한 내장된 센서들과 조합하여 사용될 수 있다. 예를 들어, 손목착용 디바이스가 다른 모바일 디바이스(예컨대, 도 1에 도시된 바와 같음)와 페어링되는 경우, 다른 모바일 디바이스로부터의 데이터(예컨대, 가속도계 데이터, GPS 데이터)는, 사용자가 무엇을 하고 있는지, 및 사용자가 손목착용 디바이스를 동작시키기 위해 의도된 손목 제스처들을 행하고 있을 가능성이 있는지 없는지 여부에 관한 추가의 지시들을 제공할 수 있다.
일부 실시예들에서, 다른 입력 형식들이 손목-제스처 입력과 조합될 수 있다. 예를 들어, 전술한 바와 같이, 손목 제스처는 음성 입력 모드를 활성화하는 데 사용되어, 사용자가 적절한 손목 제스처를 실행한 후에 디바이스에 명령들을 말하게 할 수 있다. 손목 제스처들은 또한 터치스크린들, 터치패드들, 버튼들, 및 다른 유형들의 입력 제어부들과 조합되어 사용될 수 있다. 예를 들어, 손목 제스처들은 터치스크린을 인에이블 또는 디스에이블하는 데 사용될 수 있거나, 또는 터치스크린으로부터 동작가능한 제어부는 손목-제스처 인식을 인에이블하거나 일시적으로 디스에이블하는 데 사용될 수 있다.
손목착용 디바이스가 다른 디바이스(예컨대, 도 1에 도시된 바와 같음)와 페어링되는 경우들에서, 손목착용 디바이스에 의해 검출된 손목 제스처들은 다른 페어링된 디바이스의 기능들을 제어하는 데 사용될 수 있다. 예를 들어, 전술한 바와 같이, 손목 제스처는 착신 호가 응답되어야 함을 나타낼 수 있다. 일부 실시예들에서, 호는 실제로 다른 페어링된 디바이스(예컨대, 모바일 폰)에 의해 수신되고, 손목착용 디바이스는 검출된 손목 제스처에 응답하여 호에 응답하도록 다른 디바이스에 명령을 전달할 수 있다.
전술한 설명은 착용가능한 디바이스(예컨대, 손목착용 디바이스) 및/또는 호스트 디바이스(예컨대, 모바일 폰 또는 스마트 폰)의 특정 예들을 참조할 수 있다. 이들 예는 예시적인 것이고 한정하는 것이 아니며; 다른 디바이스들이 대체될 수 있고, 본 명세서에 기술된 동작들 및/또는 다른 동작들을 수행하기 위해 유사한 기능적 블록들 및/또는 알고리즘들을 구현할 수 있다는 것이 이해될 것이다.
본 발명의 실시예들은, 예를 들어, 방법들, 장치들, 컴퓨터 판독가능 매체들 등에서, 전용 컴포넌트들 및/또는 프로그램가능한 프로세서들 및/또는 다른 프로그램가능한 디바이스들의 임의의 조합을 이용하여 실현될 수 있다. 본 명세서에 기술된 다양한 프로세스들은 동일한 프로세서 또는 임의의 조합의 상이한 프로세서들 상에서 구현될 수 있다. 컴포넌트들이 소정 동작들을 수행하도록 구성되어 있는 것으로 기술되어 있는 경우, 이러한 구성은, 예컨대, 전자 회로들을 그 동작을 수행하도록 설계하는 것에 의해, (마이크로프로세서들과 같은) 프로그램가능한 전자 회로들을 그 동작을 수행하도록 프로그래밍하는 것에 의해, 또는 이들의 임의의 조합에 의해 달성될 수 있다. 또한, 전술한 실시예들은 특정 하드웨어 및 소프트웨어 컴포넌트들을 참조할 수 있지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 하드웨어 및/또는 소프트웨어 컴포넌트들의 상이한 조합들이 또한 사용될 수 있으며, 하드웨어로 구현되는 것으로서 설명된 특정 동작들이 또한 소프트웨어로 구현될 수 있거나 그 역도 마찬가지임을 이해할 것이다.
본 발명의 다양한 특징들을 통합한 컴퓨터 프로그램들이 다양한 컴퓨터 판독가능 저장 매체들 상에 인코딩 및 저장될 수 있으며; 적합한 매체들은 자기 디스크 또는 테이프, 콤팩트 디스크(CD) 또는 DVD(digital versatile disk)와 같은 광 저장 매체, 플래시 메모리, 및 다른 비일시적 매체를 포함한다. 프로그램 코드로 인코딩된 컴퓨터 판독가능 매체는 호환 가능한 전자 디바이스와 패키징될 수 있거나, 프로그램 코드는 (예컨대, 인터넷 다운로드를 통해 또는 별도로 패키징된 컴퓨터 판독가능 저장 매체로서) 전자 디바이스들과는 별개로 제공될 수 있다.
따라서, 본 발명이 특정 실시예들에 대하여 설명되었지만, 본 발명은 하기의 청구범위의 범주 내의 모든 수정들 및 등가물들을 커버하도록 의도된다는 것이 이해될 것이다.

Claims (23)

  1. 손목착용 디바이스를 동작시키는 방법으로서,
    상기 손목착용 디바이스 상의 센서를 이용하여, 상기 손목착용 디바이스의 밴드 요소 상에 작용하는 힘을 검출하는 단계 - 상기 힘은 손목 관절운동을 나타냄 -;
    상기 손목착용 디바이스의 프로세싱 서브시스템에 의해, 상기 검출된 힘을 손목 제스처에 대응하는 것으로 해석하는 단계; 및
    상기 손목 제스처에 기초하여 상기 손목착용 디바이스의 기능을 호출하는 단계를 포함하는, 방법.
  2. 제1항에 있어서, 상기 손목 제스처는 상기 손목의 배굴(dorsiflexion)을 포함하는, 방법.
  3. 제1항에 있어서, 상기 손목 제스처는 상기 손목의 장굴(palmar flexion)을 포함하는, 방법.
  4. 제1항에 있어서, 상기 기능을 호출하는 단계는 상기 손목착용 디바이스의 음성 입력 모드를 활성화하는 단계를 포함하는, 방법.
  5. 제1항에 있어서, 상기 기능을 호출하는 단계는 상기 손목착용 디바이스의 디스플레이 상에 표시되는 항목들의 리스트를 스크롤하는 단계를 포함하는, 방법.
  6. 제1항에 있어서, 상기 기능을 호출하는 단계는 상기 손목착용 디바이스를 슬립 상태(sleep state)에서 웨이크(wake)하는 단계를 포함하는, 방법.
  7. 제1항에 있어서, 상기 기능을 호출하는 단계는 상기 손목착용 디바이스를 홈 상태(home state)로 복귀시키는 단계를 포함하는, 방법.
  8. 손목착용 디바이스를 동작시키는 방법으로서,
    상기 손목착용 디바이스 상의 센서를 이용하여, 상기 손목착용 디바이스의 밴드 요소 상에 작용하는 힘의 패턴을 검출하는 단계 - 상기 패턴은 하나 이상의 손목 관절운동을 나타냄 -;
    상기 검출된 패턴을 제스처 라이브러리 내에 정의된 복수의 손목 제스처 중 하나에 매칭시키는 단계;
    상기 매칭된 손목 제스처에 기초하여 호출할 동작을 선택하는 단계; 및
    상기 선택된 동작을 호출하는 단계를 포함하는, 방법.
  9. 제8항에 있어서, 상기 복수의 손목 제스처는 단일의 신전-이완(extend-and-release) 제스처 및 이중의 신전-이완 제스처를 포함하는, 방법.
  10. 제8항에 있어서, 상기 복수의 손목 제스처는 신전-이완 제스처 및 신전-유지(extend-and-hold) 제스처를 포함하는, 방법.
  11. 제8항에 있어서, 상기 검출된 패턴을 복수의 손목 제스처 중 하나에 매칭시키는 단계는 상기 검출된 패턴을 상기 제스처 라이브러리 내에 정의된 복수의 시그니처 패턴(signature pattern)의 각각과 비교하는 단계를 포함하며, 상기 시그니처 패턴들 중 상이한 것들은 상기 손목 제스처들 중 상이한 것들에 대응하는, 방법.
  12. 제8항에 있어서, 호출할 동작을 선택하는 단계는, 룩업 테이블로부터, 상기 매칭된 손목 제스처에 대응하는 동작을 식별하는 단계를 포함하는, 방법.
  13. 제8항에 있어서, 상기 선택된 동작을 호출하는 단계는 상기 선택된 동작에 대응하는 제어 신호를 생성하는 단계를 포함하며, 상기 제어 신호는 상기 손목착용 디바이스의 기능을 호출하는, 방법.
  14. 손목착용 디바이스로서,
    앞면 부재;
    상기 앞면 부재에 연결된 손목밴드;
    상기 손목밴드 또는 상기 앞면 부재에 배치되고 손목 관절운동에 응답하여 신호를 생성하도록 구성된 적어도 하나의 센서;
    상기 적어도 하나의 센서로부터의 신호들에 기초하여 손목 제스처를 식별하기 위한 제스처 식별 모듈;
    상기 식별된 손목 제스처에 기초하여 호출할 동작을 결정하기 위한 제스처 해석 모듈; 및
    상기 제스처 해석 모듈로부터의 명령 신호에 응답하여 상기 동작을 실행하기 위한 실행 모듈을 포함하는, 손목착용 디바이스.
  15. 제14항에 있어서, 상기 앞면 부재를 상기 손목밴드에 연결하는 팽창가능한 스트랩 홀더를 추가로 포함하며, 상기 적어도 하나의 센서는 상기 팽창가능한 스트랩 홀더의 팽창을 검출하도록 위치설정된 센서를 포함하는, 손목착용 디바이스.
  16. 제14항에 있어서, 상기 손목밴드의 적어도 일부분은 탄성 재료로 제조되고, 상기 적어도 하나의 센서는 상기 탄성 재료의 팽창을 검출하기 위한 팽창 센서를 포함하는, 손목착용 디바이스.
  17. 손목착용 디바이스로서,
    앞면 부재;
    상기 앞면 부재에 연결된 손목밴드;
    상기 손목밴드 및 상기 앞면 부재 중 하나 또는 둘 다에 배치된 복수의 센서 - 상기 복수의 센서는 손목 관절운동에 응답하여 신호들을 생성하도록 구성됨 -; 및
    상기 복수의 센서에 결합된 프로세싱 서브시스템
    을 포함하며, 상기 프로세싱 서브시스템은,
    상기 복수의 센서에 의해 생성된 상기 신호들을 분석하여 손목 제스처를 식별하고;
    상기 식별된 손목 제스처와 연관된 동작을 식별하고;
    상기 식별된 동작을 실행하도록 구성된, 손목착용 디바이스.
  18. 제17항에 있어서, 상기 복수의 센서는 상기 앞면 부재의 후방 표면 상에 배치된 적어도 하나의 압력 센서를 포함하는, 손목착용 디바이스.
  19. 제17항에 있어서, 상기 복수의 센서는 상기 손목밴드의 내측 표면 상에 배치된 적어도 하나의 압력 센서를 포함하는, 손목착용 디바이스.
  20. 제17항에 있어서, 상기 손목밴드의 적어도 일부분은 탄성 재료로 제조되고, 상기 복수의 센서는 상기 탄성 재료에 적어도 부분적으로 배치된 적어도 하나의 스트레인 센서를 포함하는, 손목착용 디바이스.
  21. 제17항에 있어서, 상기 앞면 부재의 제1 단부 표면 및 상기 손목밴드에 연결된 팽창가능한 스트랩 홀더를 추가로 포함하며, 상기 복수의 센서는 상기 팽창가능한 스트랩 홀더의 팽창을 검출하도록 구성된 센서를 포함하는, 손목착용 디바이스.
  22. 제17항에 있어서, 상기 프로세싱 서브시스템은, 상기 신호들을 분석하는 것이 상기 신호들을 제스처 라이브러리 내의 복수의 손목 제스처 중 하나의 손목 제스처의 시그니처에 매칭시키는 것을 포함하도록, 추가로 구성되는, 손목착용 디바이스.
  23. 제22항에 있어서, 상기 제스처 라이브러리 내의 상기 복수의 손목 제스처는 배굴 제스처, 장굴 제스처, 외전(abduction) 제스처, 내전(adduction) 제스처, 회내(pronation) 제스처, 또는 회외(supination) 제스처 중 하나 이상을 포함하는, 손목착용 디바이스.
KR1020167010727A 2013-10-24 2013-10-24 손목 움직임을 이용한 손목밴드 디바이스 입력 KR20160077070A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2013/066689 WO2015060856A1 (en) 2013-10-24 2013-10-24 Wristband device input using wrist movement

Publications (1)

Publication Number Publication Date
KR20160077070A true KR20160077070A (ko) 2016-07-01

Family

ID=49551797

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167010727A KR20160077070A (ko) 2013-10-24 2013-10-24 손목 움직임을 이용한 손목밴드 디바이스 입력

Country Status (7)

Country Link
US (1) US20160299570A1 (ko)
JP (1) JP2017501469A (ko)
KR (1) KR20160077070A (ko)
CN (1) CN105706024A (ko)
DE (1) DE112013007524T5 (ko)
HK (1) HK1222733A1 (ko)
WO (1) WO2015060856A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180080897A (ko) * 2017-01-05 2018-07-13 (주)유티엘코리아 가상현실을 이용한 재난훈련 시스템 및 방법
KR20200141476A (ko) * 2018-04-06 2020-12-18 디엔에이넛지 리미티드 손목 착용형 제품 코드 판독기
KR102273759B1 (ko) * 2021-01-27 2021-07-06 안중영 기록매체에 저장된 동작신호 전달 어플리케이션 프로그램 및 이를 이용한 동작신호 전달 시스템
US11790698B2 (en) 2019-11-01 2023-10-17 Samsung Electronics Co., Ltd. Electronic device for recognizing gesture of user using a plurality of sensor signals

Families Citing this family (99)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9582035B2 (en) * 2014-02-25 2017-02-28 Medibotics Llc Wearable computing devices and methods for the wrist and/or forearm
EP2741176A3 (en) * 2012-12-10 2017-03-08 Samsung Electronics Co., Ltd Mobile device of bangle type, control method thereof, and UI display method
FR3006477B1 (fr) * 2013-05-29 2016-09-30 Blinksight Dispositif et procede de detection de la manipulation d'au moins un objet
CN105659310B (zh) 2013-08-13 2021-02-26 飞利斯有限公司 电子显示区域的优化
TWI655807B (zh) 2013-08-27 2019-04-01 飛利斯有限公司 具有可撓曲電子構件之可附接裝置
WO2015031426A1 (en) * 2013-08-27 2015-03-05 Polyera Corporation Flexible display and detection of flex state
WO2015038684A1 (en) 2013-09-10 2015-03-19 Polyera Corporation Attachable article with signaling, split display and messaging features
WO2015100224A1 (en) 2013-12-24 2015-07-02 Polyera Corporation Flexible electronic display with user interface based on sensed movements
TWI676880B (zh) 2013-12-24 2019-11-11 美商飛利斯有限公司 動態可撓物品
TWI653522B (zh) 2013-12-24 2019-03-11 美商飛利斯有限公司 動態可撓物品
EP3087812B9 (en) 2013-12-24 2021-06-09 Flexterra, Inc. Support structures for an attachable, two-dimensional flexible electronic device
WO2015102588A1 (en) 2013-12-30 2015-07-09 Apple Inc. User identification system based on plethysmography
US9665143B2 (en) * 2014-01-06 2017-05-30 Intel Corporation Contextual platform power management
US20150227245A1 (en) 2014-02-10 2015-08-13 Polyera Corporation Attachable Device with Flexible Electronic Display Orientation Detection
JP2015158747A (ja) * 2014-02-21 2015-09-03 ソニー株式会社 制御装置、情報処理装置、制御方法、情報処理方法、情報処理システム、およびウェアラブル機器
US20150273321A1 (en) * 2014-04-01 2015-10-01 E-Squared Labs, Inc. Interactive Module
WO2015176228A1 (zh) * 2014-05-20 2015-11-26 华为技术有限公司 手势操作智能穿戴设备的方法和智能穿戴设备
TWI692272B (zh) 2014-05-28 2020-04-21 美商飛利斯有限公司 在多數表面上具有可撓性電子組件之裝置
US9612862B2 (en) 2014-06-24 2017-04-04 Google Inc. Performing an operation during inferred periods of non-use of a wearable device
CN106575150B (zh) 2014-08-16 2020-03-03 谷歌有限责任公司 使用运动数据识别手势的方法和可穿戴计算设备
US9772684B2 (en) * 2014-09-17 2017-09-26 Samsung Electronics Co., Ltd. Electronic system with wearable interface mechanism and method of operation thereof
US9952675B2 (en) 2014-09-23 2018-04-24 Fitbit, Inc. Methods, systems, and apparatuses to display visibility changes responsive to user gestures
US10488936B2 (en) 2014-09-30 2019-11-26 Apple Inc. Motion and gesture input from a wearable device
KR102283546B1 (ko) * 2014-10-16 2021-07-29 삼성전자주식회사 웨어러블 디바이스 및 웨어러블 디바이스에서의 어플리케이션 실행 방법
CN105653013A (zh) * 2014-11-10 2016-06-08 安徽华米信息科技有限公司 一种播放多媒体的控制方法、装置及系统
WO2017014330A1 (ko) * 2015-07-17 2017-01-26 전자부품연구원 웨어러블 장치 및 이를 이용한 정보 입력 방법
US10488924B2 (en) * 2014-12-17 2019-11-26 Korea Electronics Technology Institute Wearable device, and method of inputting information using the same
US10599327B2 (en) * 2014-12-24 2020-03-24 Korea Electronics Technology Institute Wearable electronic device
KR20160090584A (ko) * 2015-01-22 2016-08-01 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US10484827B2 (en) * 2015-01-30 2019-11-19 Lutron Technology Company Llc Gesture-based load control via wearable devices
US20160231772A1 (en) * 2015-02-09 2016-08-11 Mediatek Inc. Wearable electronic device and touch operation method
US9734779B2 (en) 2015-02-12 2017-08-15 Qualcomm Incorporated Efficient operation of wearable displays
US9747015B2 (en) * 2015-02-12 2017-08-29 Qualcomm Incorporated Efficient display of content on wearable displays
WO2016138356A1 (en) 2015-02-26 2016-09-01 Polyera Corporation Attachable device having a flexible electronic component
KR20160121318A (ko) * 2015-04-10 2016-10-19 삼성전자주식회사 전자 장치 및 전자 장치의 사용자 인터페이스 제공 방법
CN104851368A (zh) * 2015-06-04 2015-08-19 京东方科技集团股份有限公司 一种柔性显示装置
US10635457B2 (en) * 2015-06-12 2020-04-28 Tyrenn Co., Ltd. Input device and UI configuration and execution method thereof
KR102334084B1 (ko) * 2015-06-16 2021-12-03 삼성전자주식회사 전자 장치 및 그의 제어 방법
CN104978142B (zh) 2015-06-17 2018-07-31 华为技术有限公司 一种智能穿戴设备及智能穿戴设备的控制方法
US10052530B2 (en) * 2015-06-29 2018-08-21 Taylor Made Golf Company, Inc. Golf club
US11179608B2 (en) 2015-06-29 2021-11-23 Taylor Made Golf Company, Inc. Golf club
US9804679B2 (en) * 2015-07-03 2017-10-31 Google Inc. Touchless user interface navigation using gestures
KR20170011557A (ko) * 2015-07-23 2017-02-02 삼성전자주식회사 웨어러블 전자 장치
US10067564B2 (en) * 2015-08-11 2018-09-04 Disney Enterprises, Inc. Identifying hand gestures based on muscle movement in the arm
KR20170027607A (ko) * 2015-09-02 2017-03-10 엘지전자 주식회사 웨어러블 디바이스 및 그 제어 방법
US20180246578A1 (en) * 2015-09-10 2018-08-30 Agt International Gmbh Method of device for identifying and analyzing spectator sentiment
US9939899B2 (en) 2015-09-25 2018-04-10 Apple Inc. Motion and gesture input from a wearable device
KR102017067B1 (ko) * 2016-08-16 2019-09-03 (주)참케어 손목 혈압계
CN108292167B (zh) * 2015-11-30 2021-08-03 索尼公司 信息处理设备、信息处理方法和程序
US10782790B2 (en) 2015-12-22 2020-09-22 Intel Corporation System and method to collect gesture input through wrist tendon and muscle sensing
US9939913B2 (en) 2016-01-04 2018-04-10 Sphero, Inc. Smart home control using modular sensing device
US10831273B2 (en) * 2016-01-26 2020-11-10 Lenovo (Singapore) Pte. Ltd. User action activated voice recognition
TWI621968B (zh) * 2016-02-05 2018-04-21 財團法人工業技術研究院 控制電子設備之方法及穿戴裝置
US20170269697A1 (en) * 2016-03-21 2017-09-21 Intel Corporation Under-wrist mounted gesturing
US10638316B2 (en) 2016-05-25 2020-04-28 Intel Corporation Wearable computer apparatus with same hand user authentication
CN106094864A (zh) * 2016-06-30 2016-11-09 成都西可科技有限公司 一种飞行器手环及其交互方法
DE102016212240A1 (de) * 2016-07-05 2018-01-11 Siemens Aktiengesellschaft Verfahren zur Interaktion eines Bedieners mit einem Modell eines technischen Systems
US11262850B2 (en) * 2016-07-20 2022-03-01 Autodesk, Inc. No-handed smartwatch interaction techniques
US10086267B2 (en) * 2016-08-12 2018-10-02 Microsoft Technology Licensing, Llc Physical gesture input configuration for interactive software and video games
US11389084B2 (en) 2016-08-15 2022-07-19 Georgia Tech Research Corporation Electronic device and method of controlling same
CN106293131A (zh) * 2016-08-16 2017-01-04 广东小天才科技有限公司 表情输入方法及装置
CN107783642A (zh) * 2016-08-24 2018-03-09 中国航天员科研训练中心 一种腕部手势识别设备
CN109643190A (zh) 2016-08-29 2019-04-16 乔治亚技术研究公司 便携式电子设备的扩展交互
US10478099B2 (en) 2016-09-22 2019-11-19 Apple Inc. Systems and methods for determining axial orientation and location of a user's wrist
EP3521968A4 (en) * 2016-09-30 2020-05-20 Shenzhen Royole Technologies Co., Ltd. ELECTRONIC DEVICE
CN109891382B (zh) * 2016-10-24 2023-06-30 福特汽车公司 基于手势的用户界面
KR20190068543A (ko) * 2016-10-25 2019-06-18 소니 주식회사 정보 처리 장치, 방법 및 프로그램
JP6078685B1 (ja) * 2016-11-15 2017-02-08 京セラ株式会社 電子機器
TWI647595B (zh) * 2016-11-21 2019-01-11 宏達國際電子股份有限公司 人體姿勢偵測系統、穿戴裝置以及方法
US10592185B2 (en) 2017-01-04 2020-03-17 International Business Machines Corporation Mobile device application view management
US11209908B2 (en) * 2017-01-12 2021-12-28 Sony Corporation Information processing apparatus and information processing method
EP3571829B1 (en) * 2017-01-30 2022-03-02 Samsung Electronics Co., Ltd. Apparatus and method for managing operations for providing services automatically
JP2018129610A (ja) * 2017-02-07 2018-08-16 ソニーセミコンダクタソリューションズ株式会社 通信装置、通信制御方法およびプログラム
JP2018180988A (ja) * 2017-04-14 2018-11-15 日本精工株式会社 装着型伸縮検出装置及び操作デバイス
US10558278B2 (en) 2017-07-11 2020-02-11 Apple Inc. Interacting with an electronic device through physical movement
CN107403178A (zh) * 2017-08-08 2017-11-28 方超 手势采集系统
CN107301415B (zh) * 2017-08-08 2024-03-22 方超 手势采集系统
WO2019028650A1 (zh) * 2017-08-08 2019-02-14 方超 手势采集系统
DE102017217998A1 (de) * 2017-10-10 2019-04-11 Deutsches Zentrum für Luft- und Raumfahrt e.V. Mensch Maschine Interface und Verfahren zum Betreiben eines solchen
CN107817891B (zh) * 2017-11-13 2020-01-14 Oppo广东移动通信有限公司 屏幕控制方法、装置、设备及存储介质
US10488831B2 (en) * 2017-11-21 2019-11-26 Bose Corporation Biopotential wakeup word
CN110415387A (zh) * 2018-04-27 2019-11-05 开利公司 包括设置在由用户携带的容纳件中的移动设备的姿势进入控制系统
CN110415389B (zh) 2018-04-27 2024-02-23 开利公司 姿势进入控制系统和预测移动设备相对于用户所在部位的方法
US10561367B1 (en) * 2018-05-21 2020-02-18 Apple, Inc. Electronic devices having adjustable fabric
CN108920085B (zh) * 2018-06-29 2020-05-08 百度在线网络技术（北京）有限公司 用于可穿戴设备的信息处理方法和装置
US11422692B2 (en) * 2018-09-28 2022-08-23 Apple Inc. System and method of controlling devices using motion gestures
CN109730653B (zh) * 2018-12-07 2023-12-29 南京医科大学 一种脑卒中患者手部康复评定系统及方法
US10867448B2 (en) * 2019-02-12 2020-12-15 Fuji Xerox Co., Ltd. Low-power, personalized smart grips for VR/AR interaction
CN110083208B (zh) * 2019-04-29 2022-06-10 努比亚技术有限公司 一种翻转控制方法、设备及计算机可读存储介质
US11565161B2 (en) 2019-06-07 2023-01-31 Connecticut Scientific LLC Training aid and alert
US11115075B2 (en) * 2019-07-30 2021-09-07 Ppip Llc Safe case with security choke point control
US11219803B2 (en) 2019-08-30 2022-01-11 Taylor Made Golf Company, Inc. Golf club
CN110623673B (zh) * 2019-09-29 2022-01-28 华东交通大学 一种用于驾驶员手势识别的全柔性智能腕带
IT201900019037A1 (it) * 2019-10-16 2021-04-16 St Microelectronics Srl Metodo perfezionato per rilevare un gesto di inclinazione del polso e unita' elettronica e dispositivo elettronico indossabile che implementano il medesimo
CN111110205B (zh) * 2019-12-25 2023-12-22 维沃移动通信有限公司 腕带、可穿戴设备、可穿戴设备控制方法及装置
JP7070594B2 (ja) * 2020-03-10 2022-05-18 カシオ計算機株式会社 リスト端末、作業時間管理装置、プログラム及び作業時間管理システム
EP3984458A1 (de) * 2020-10-13 2022-04-20 Siemens Healthcare GmbH Gestenbasierte simultane ansteuerung einer medizintechnischen einrichtung
CN112817443A (zh) * 2021-01-22 2021-05-18 歌尔科技有限公司 基于手势的显示界面控制方法、装置、设备及存储介质
US11460919B1 (en) * 2021-03-16 2022-10-04 Zeit Technologies Corporation Wearable gesture detector

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE60215504T2 (de) * 2002-10-07 2007-09-06 Sony France S.A. Verfahren und Gerät zur Analyse von Gesten eines Menschen, z.B. zur Steuerung einer Maschine durch Gestik
US20060195020A1 (en) * 2003-08-01 2006-08-31 Martin James S Methods, systems, and apparatus for measuring a pulse rate
KR100853605B1 (ko) * 2004-03-23 2008-08-22 후지쯔 가부시끼가이샤 핸드헬드 장치에서의 경사 및 평행 이동 운동 성분들의구별
JP4379214B2 (ja) * 2004-06-10 2009-12-09 日本電気株式会社 携帯端末装置
US20060028429A1 (en) * 2004-08-09 2006-02-09 International Business Machines Corporation Controlling devices' behaviors via changes in their relative locations and positions
JP2006113777A (ja) * 2004-10-14 2006-04-27 Citizen Watch Co Ltd 情報入力装置
US7633076B2 (en) * 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
KR20100072377A (ko) * 2007-11-19 2010-06-30 노키아 코포레이션 입력 장치, 시스템 및 방법
US8503932B2 (en) * 2008-11-14 2013-08-06 Sony Mobile Comminications AB Portable communication device and remote motion input device
WO2011007569A1 (ja) * 2009-07-15 2011-01-20 国立大学法人筑波大学 分類推定システムおよび分類推定プログラム
WO2011055326A1 (en) * 2009-11-04 2011-05-12 Igal Firsov Universal input/output human user interface
CN102111490A (zh) * 2009-12-23 2011-06-29 索尼爱立信移动通讯有限公司 移动终端的键盘自动解锁方法及装置
CN101777250B (zh) * 2010-01-25 2012-01-25 中国科学技术大学 家用电器的通用遥控装置及方法
KR101413539B1 (ko) * 2010-11-22 2014-07-02 한국전자통신연구원 자세인식을 이용하는 제어신호 입력장치 및 제어신호 입력방법
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
US20130120106A1 (en) * 2011-11-16 2013-05-16 Motorola Mobility, Inc. Display device, corresponding systems, and methods therefor
US9934713B2 (en) * 2012-03-28 2018-04-03 Qualcomm Incorporated Multifunction wristband
US20140180595A1 (en) * 2012-12-26 2014-06-26 Fitbit, Inc. Device state dependent user interface management
US9477313B2 (en) * 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
EP2741176A3 (en) * 2012-12-10 2017-03-08 Samsung Electronics Co., Ltd Mobile device of bangle type, control method thereof, and UI display method
US9568891B2 (en) * 2013-08-15 2017-02-14 I.Am.Plus, Llc Multi-media wireless watch
US9389694B2 (en) * 2013-10-22 2016-07-12 Thalmic Labs Inc. Systems, articles, and methods for gesture identification in wearable electromyography devices
CN103676604B (zh) * 2013-12-24 2017-02-15 华勤通讯技术有限公司 手表及其运行方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180080897A (ko) * 2017-01-05 2018-07-13 (주)유티엘코리아 가상현실을 이용한 재난훈련 시스템 및 방법
KR20200141476A (ko) * 2018-04-06 2020-12-18 디엔에이넛지 리미티드 손목 착용형 제품 코드 판독기
US11250225B2 (en) 2018-04-06 2022-02-15 Dnanudge Limited Wrist-worn product code reader
US11790698B2 (en) 2019-11-01 2023-10-17 Samsung Electronics Co., Ltd. Electronic device for recognizing gesture of user using a plurality of sensor signals
KR102273759B1 (ko) * 2021-01-27 2021-07-06 안중영 기록매체에 저장된 동작신호 전달 어플리케이션 프로그램 및 이를 이용한 동작신호 전달 시스템
WO2022164170A1 (ko) * 2021-01-27 2022-08-04 안중영 기록매체에 저장된 동작신호 전달 어플리케이션 프로그램 및 이를 이용한 동작신호 전달 시스템

Also Published As

Publication number Publication date
US20160299570A1 (en) 2016-10-13
HK1222733A1 (zh) 2017-07-07
DE112013007524T5 (de) 2016-08-04
CN105706024A (zh) 2016-06-22
WO2015060856A1 (en) 2015-04-30
JP2017501469A (ja) 2017-01-12

Similar Documents

Publication Publication Date Title
KR20160077070A (ko) 손목 움직임을 이용한 손목밴드 디바이스 입력
US11045117B2 (en) Systems and methods for determining axial orientation and location of a user's wrist
US11009951B2 (en) Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
US11513557B2 (en) Enhanced application preview mode
US11539831B2 (en) Providing remote interactions with host device using a wireless device
US10698497B2 (en) Vein scanning device for automatic gesture and finger recognition
EP3446217B1 (en) Memory management for application loading
US10459887B1 (en) Predictive application pre-launch
EP2975497B1 (en) Terminal device, terminal device control method, and program
US9081542B2 (en) Systems and methods for a wearable touch-sensitive device
US10191574B2 (en) Flexible electronic device and operating method thereof
US20160028869A1 (en) Providing remote interactions with host device using a wireless device
US20160277891A1 (en) Detecting stowing or unstowing of a mobile device
US11188033B2 (en) Wearable device comprising microphone for obtaining sound by using plurality of openings
KR20150091723A (ko) 변형가능한 기재를 가지는 손목착용형 장치
KR20180054228A (ko) 콘텐츠를 제공하기 위한 방법 및 그 전자 장치
US20230076068A1 (en) Systems for interpreting a digit-to-digit gesture by a user differently based on roll values of a wrist-wearable device worn by the user, and methods of use thereof
AU2016100962B4 (en) Wristband device input using wrist movement
AU2013403419A1 (en) Wristband device input using wrist movement
WO2023034631A1 (en) Systems for interpreting a digit-to-digit gesture by a user differently based on roll values of a wrist- wearable device worn by the user, and methods of use thereof
EP4396657A1 (en) Systems for interpreting a digit-to-digit gesture by a user differently based on roll values of a wrist- wearable device worn by the user, and methods of use thereof
KR20150021243A (ko) 진동 및 소리 중 적어도 하나를 제어하는 전자 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application