KR20190142228A - 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들 - Google Patents
햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들 Download PDFInfo
- Publication number
- KR20190142228A KR20190142228A KR1020190069306A KR20190069306A KR20190142228A KR 20190142228 A KR20190142228 A KR 20190142228A KR 1020190069306 A KR1020190069306 A KR 1020190069306A KR 20190069306 A KR20190069306 A KR 20190069306A KR 20190142228 A KR20190142228 A KR 20190142228A
- Authority
- KR
- South Korea
- Prior art keywords
- haptic
- signal
- sensor
- reference signal
- error
- Prior art date
Links
- 230000000694 effects Effects 0.000 title claims abstract description 95
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000003287 optical effect Effects 0.000 claims description 8
- 230000005355 Hall effect Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 230000015654 memory Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013016 damping Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 229910001285 shape-memory alloy Inorganic materials 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B06—GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS IN GENERAL
- B06B—METHODS OR APPARATUS FOR GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS OF INFRASONIC, SONIC, OR ULTRASONIC FREQUENCY, e.g. FOR PERFORMING MECHANICAL WORK IN GENERAL
- B06B1/00—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency
- B06B1/02—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy
- B06B1/0207—Driving circuits
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1679—Programme controls characterised by the tasks executed
- B25J9/1689—Teleoperation
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B11/00—Automatic controllers
- G05B11/01—Automatic controllers electric
- G05B11/36—Automatic controllers electric with provision for obtaining particular characteristics, e.g. proportional, integral, differential
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/40—Robotics, robotics mapping to robotics vision
- G05B2219/40132—Haptic joystick with force feedback based on accelerometer included in joystick
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Robotics (AREA)
- Automation & Control Theory (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들이 개시된다. 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 하나의 예시적인 시스템은 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스, 햅틱 출력 디바이스의 출력을 감지하고 센서 신호를 생성하도록 구성된 센서, 및 센서와 통신하는 프로세서를 포함한다. 프로세서는: 기준 신호를 수신하고, 센서 신호를 수신하고, 기준 신호 및 센서 신호에 적어도 부분적으로 기초하여 에러를 결정하고, 기준 신호 및 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하고, 햅틱 신호를 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하도록 구성된다.
Description
본 출원은 햅틱 효과들의 분야에 관한 것이다. 더 구체적으로, 본 출원은 햅틱 효과들의 다중 레벨 폐루프 제어에 관한 것이다.
햅틱 효과들은 일반적으로 디바이스들 및 애플리케이션들에서의, 그리고 특히 모바일 및 가상 및 증강 현실 디바이스들에서 및 게이밍과 같은 애플리케이션들에서의 사용성을 개선한다. 이는 햅틱들의 구현의 폭의 증가로 이어졌다. 햅틱들이 다양한 디바이스들에서 구현됨에 따라, 고품질, 상이한 디바이스들의 범위에 걸쳐 일관된 햅틱 효과들, 및 심지어 상이한 버전들 또는 심지어는 동일한 디바이스의 제조 실행들을 보장하는 것이 도전과제일 수 있다. 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들은 그러한 햅틱 효과들의 품질 및 일관성을 보장하는 것을 돕기 위해 필요하다.
일 실시예에서, 시스템은 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스, 햅틱 출력 디바이스의 출력을 감지하고 센서 신호를 생성하도록 구성된 센서, 및 센서와 통신하는 프로세서를 포함한다. 프로세서는 기준 신호를 수신하고, 센서 신호를 수신하고,
상기 기준 신호 및 상기 센서 신호에 적어도 부분적으로 기초하여 에러를 결정하고, 상기 기준 신호 및 상기 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하고, 상기 햅틱 신호를 상기 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하도록 구성된다.
다른 실시예에서, 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 방법은 센서로부터 센서 신호를 수신하는 단계- 센서는 햅틱 출력 디바이스의 출력을 감지하도록 구성됨 -, 기준 신호를 수신하는 단계, 및 센서 신호와 기준 신호 사이의 에러를 결정하는 단계를 포함한다. 방법은 기준 신호 및 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하는 단계, 및 햅틱 신호를 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하는 단계를 추가로 포함한다. 다른 실시예에서, 컴퓨터 판독가능 매체는, 프로세서에 의해 실행될 때, 상술한 방법을 가능하게 하도록 구성된 프로그램 코드를 포함할 수 있다.
이 예시적인 실시예들은 본 주제의 범위를 제한하거나 한정하기 위한 것이 아니라 오히려 본 발명의 이해를 돕기 위한 예들을 제공하기 위해 언급되어 있다. 예시적인 실시예들은 상세한 설명에서 논의되고 있으며, 추가적인 설명이 제공되어 있다. 다양한 실시예들에 의해 제공되는 이점들은 본 명세서를 검토함으로써 및/또는 청구된 주제의 하나 이상의 실시예를 실시함으로써 더욱 이해될 수 있다.
상세하고 실시가능한 개시내용이 명세서의 나머지 부분에 더 구체적으로 기술되어 있다. 명세서는 이하의 첨부 도면들을 참조한다.
도 1은 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 예시적인 시스템을 도시한다.
도 2는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 3은 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 4는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 5는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 또 다른 예시적인 시스템을 도시한다.
도 6은 일 실시예에 따른 방법(600)을 나타내는 흐름도이다.
도 7은 일 실시예에 따른 다른 방법(700)을 나타내는 흐름도이다.
도 1은 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 예시적인 시스템을 도시한다.
도 2는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 3은 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 4는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다.
도 5는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 또 다른 예시적인 시스템을 도시한다.
도 6은 일 실시예에 따른 방법(600)을 나타내는 흐름도이다.
도 7은 일 실시예에 따른 다른 방법(700)을 나타내는 흐름도이다.
지금부터 다양한 그리고 대안의 예시적인 실시예들 및 첨부 도면들에 대해 상세히 언급될 것이다. 각각의 예는 제한이 아니라 설명으로 제공된다. 본 기술분야의 통상의 기술자들에게는 수정들 및 변형들이 이루어질 수 있다는 것이 명백할 것이다. 예를 들어, 일 실시예의 일부로서 예시 또는 설명되는 특징들이 다른 실시예에서 사용되어 또 다른 실시예를 산출해 낼 수 있다. 따라서, 본 개시내용이 첨부된 청구항들 및 그 등가물들의 범위 내에 속하는 수정들 및 변형들을 포함하는 것으로 의도된다.
햅틱 효과들의 다중 레벨 폐루프 제어를 위한 실례적 예시적인 시스템
하나의 예시적인 실시예에서, 스마트 폰과 같은 모바일 디바이스 상에서 실행하는 모바일 애플리케이션은 사용자가 다양한 작업들을 수행할 수 있게 한다. 모바일 애플리케이션은 사용자에게 가상 버튼들과 같은 사용자 인터페이스 요소들을 제공하는 인터페이스를 포함한다. 사용자가 버튼의 위치에서 스마트 폰의 터치 스크린을 터치할 때, 애플리케이션은 버튼과 연관된 기능을 실행한다.
사용자 인터페이스와의 사용자의 상호작용은 사용자의 액션들에 응답하여 햅틱 효과들을 제공함으로써 개선된다. 예를 들어, 사용자가 가상 버튼을 누를 때, 예시적인 실시예에서의 모바일 디바이스는 버튼 누름이 성공적이었다는 것을 사용자에게 알리기 위해 크리스프(crisp) 클릭을 출력한다. 모바일 폰은 햅틱 피드백을 제공하기 위해 선형 공진 액추에이터(LRA)를 이용할 수 있다. 또는, 모바일 디바이스는 상이한 타입의 햅틱 출력 디바이스를 사용할 수 있다. 액추에이터의 차이들은 햅틱 출력 디바이스가 그 사용에 대해 제공할 수 있는 클릭 감각에 영향을 미칠 수 있다. 또한, 상이한 LRA는 제조 시 분산들로 인해 동일한 신호에 응답하여 상이한 효과들을 출력할 수 있고, 예를 들어, 하나의 LRA는 2개의 LRA의 사양들이 동일하더라도, 다른 LRA에 더 응답적일 수 있다. 예를 들어, LRA는 긴 테일(tail)을 갖는 신호를 출력할 수 있는데, 예를 들어, LRA는 효과가 출력된 후 시간 기간 동안 "링잉(ring)"할 수 있다.
이러한 차이들을 보상하기 위해, 예시적인 실시예는 햅틱 출력 디바이스에 의해 출력되는 효과를 검출하기 위한 가속도계와 같은 센서를 포함한다. 프로세서는 햅틱 효과 설계자가 출력될 햅틱 효과에 대해 의도했던 것과 같은 신호에 대응하는 기준 신호를 수신한다. 예를 들어, 센서가 가속도를 검출하고 있다면, 기준 신호는 예상되는 또는 원하는 가속도이다. 프로세서는 이어서 햅틱 신호를 결정하여 햅틱 출력 디바이스로 전송할 수 있고, 이는 햅틱 신호에 응답하여 햅틱 효과를 출력한다. 센서는 햅틱 효과를 검출하고, 그 후 센서 신호를 비교기에 전송하고, 비교기는 이 신호를 기준 신호와 비교한다.
에러에 기초하여, 예시적인 실시예는 기준 신호를 더 대표하는 효과를 달성하기 위해 기준 신호를 어떻게 수정할지를 결정할 수 있다. 예를 들어, 예시적인 실시예는 더 강한 효과를 생성하기 위해 신호의 이득을 증가시킬 수 있다. 대안적으로, 실시예는 햅틱 출력 디바이스로 전송되는 신호를 수정하기 위해 비례 또는 비례 적분 제어기와 같은, 상이한 타입의 제어기를 이용할 수 있다. 예시적인 실시예에서, 제어기의 타입 및 이득을 변경하는 것의 조합이 햅틱 출력 디바이스로 전송되는 신호를 수정하기 위해 사용된다.
앞선 예는 단지 예시적인 것이며, 청구된 발명을 임의의 방식으로 제한하려는 것은 아니다.
햅틱 효과들의 다중 레벨 폐루프 제어를 위한 예시적인 시스템들
도 1은 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 예시적인 시스템(100)을 도시한다. 특히, 이 예에서, 시스템(100)은 버스(106)를 통해 다른 하드웨어와 인터페이스하는 프로세서(102)를 갖는 컴퓨팅 디바이스(101)를 포함한다. 디바이스(101)는 예를 들어 모바일 폰 또는 패드, 가상 또는 증강 현실 헤드셋 및 컨트롤들, 자동차 인터페이스, 랩톱, 또는 다른 디바이스를 포함하는 임의의 타입의 디바이스일 수 있다. RAM, ROM, EEPROM 등과 같은 임의의 적합한, 유형의(tangible)(그리고 비일시적) 컴퓨터 판독가능 매체를 포함할 수 있는 메모리(104)는 컴퓨팅 디바이스의 동작을 구성하는 프로그램 컴포넌트들을 구현한다. 이 예에서, 컴퓨팅 디바이스(101)는 하나 이상의 네트워크 인터페이스 디바이스(110), 입/출력(I/O) 인터페이스 컴포넌트들(112), 및 추가적인 스토리지(114)를 추가로 포함한다.
네트워크 디바이스(110)는 네트워크 접속을 용이하게 하는 임의의 컴포넌트들 중 하나 이상을 나타낼 수 있다. 예들은, 이더넷, USB, IEEE 1394와 같은 유선 인터페이스들, 및/또는 IEEE 802.11, 블루투스, 또는 셀룰러 전화 네트워크에 액세스하기 위한 무선 인터페이스들(예를 들어, CDMA, GSM, UMTS, 또는 다른 모바일 통신 네트워크(들)에 액세스하기 위한 송수신기/안테나)와 같은 무선 인터페이스들을 포함하지만 이들에 제한되지 않는다.
I/O 컴포넌트들(112)은 하나 이상의 디스플레이, 터치 스크린 디스플레이들, 키보드들, 마우스들, 스피커들, 마이크로폰들, 카메라들 및/또는 데이터를 입력하거나 데이터를 출력하는데 이용되는 다른 하드웨어와 같은 디바이스들에 대한 접속을 용이하게 하는데 이용될 수 있다. 가상 또는 증강 현실 환경에서 사용하기 위한 실시예에서, I/O 컴포넌트들(112)은 핸드헬드 VR 제어기들을 포함할 수 있다. 스토리지(114)는 디바이스(101)에 포함된 자기, 광학, 또는 다른 저장 매체와 같은 비휘발성 스토리지를 나타낸다.
시스템(100)은 이 예에서는 디바이스(101)에 통합되어 있는 터치 표면(116)을 추가로 포함한다. 터치 표면(116)은 사용자의 터치 입력을 감지하도록 구성된 임의의 표면을 나타낸다. 터치 표면(116)은, 예를 들어, 하나 이상의 버튼과 같은, 사용자가 상호작용할 수 있는 인터페이스 요소들을 디스플레이하는 디스플레이를 포함할 수 있다.
하나 이상의 센서(108)가 물체가 터치 표면과 접촉할 때 터치 영역에서 터치를 검출하고 프로세서(102)에 의해 사용하기 위한 적절한 데이터를 제공하도록 구성된다. 센서(108)는 또한 햅틱 출력 디바이스(118)의 출력을 검출하기 위해 사용될 수 있다. 임의의 적합한 수, 타입, 또는 배열의 센서들이 사용될 수 있다. 예를 들어, 저항 및/또는 정전용량 센서가 터치 표면(116)에 임베딩되어 있을 수 있고 터치의 위치 및 기타 정보(압력 등)를 결정하기 위해 사용될 수 있다. 다른 예로서, 터치 표면의 뷰와 함께 광 센서들이 터치 위치를 결정하기 위해 사용될 수 있다. 출력되는 햅틱 효과를 결정하기 위한 센서(108)는 또한 가속도계, 홀 효과 센서, 또는 광학 센서를 포함할 수 있다.
일부 실시예들에서, 센서(108), 터치 표면(116), 및 I/O 컴포넌트들(112)은 터치 스크린 디스플레이와 같은 단일 컴포넌트에 통합될 수 있다. 예를 들어, 일부 실시예들에서, 터치 표면(116) 및 센서(108)는, 디스플레이 신호를 수신하고 사용자에게 이미지를 출력하도록 구성된 디스플레이의 최상부 위(overtop)에 장착된 터치 스크린을 포함할 수 있다. 이러한 실시예들은 차량들과 같은 애플리케이션들에서 또는 독립형 패드들로서 사용되는 것들과 같은 스마트 폰들 또는 터치 패드들을 포함할 수 있다.
다른 실시예들에서, 센서(108)는 LED 검출기를 포함할 수 있다. 예를 들어, 일 실시예에서, 터치 표면(116)은 디스플레이의 측면 상에 장착된 LED 손가락 검출기를 포함할 수 있다. 일부 실시예들에서, 프로세서(102)는 단일 센서(108)와 통신하고, 다른 실시예들에서, 프로세서(102)는 복수의 센서(108), 예를 들어, 제1 터치 스크린 및 제2 터치 스크린과 통신한다. 센서(108)는 사용자 상호작용, 햅틱 효과들 또는 다른 액션들을 검출하고, 액션에 기초하여, 프로세서(102)로 센서 신호들을 송신하도록 구성된다. 일부 실시예들에서, 센서(108)는 사용자 상호작용의 다수의 양태를 검출하도록 구성될 수 있다. 예를 들어, 센서(108)는 사용자 상호작용의 속도 및 압력을 검출하고, 이 정보를 인터페이스 신호에 포함시킬 수 있다. 유사하게, 센서(108)(또는 다수의 센서(108))는 크기, 방향, 주파수, 또는 다른 특성들과 같은, 출력 햅틱 효과의 다수의 특성을 검출할 수 있다.
디바이스(101)는 햅틱 출력 디바이스(118)를 추가로 포함한다. 도 1에 도시된 예에서, 햅틱 출력 디바이스(118)는 프로세서(102)와 통신하고 터치 표면(116)에 연결된다. 도 1에 도시된 실시예는 단일의 햅틱 출력 디바이스(118)를 포함한다. 다른 실시예들에서, 컴퓨팅 디바이스(101)는 복수의 햅틱 출력 디바이스를 포함할 수 있다.
여기서 단일의 햅틱 출력 디바이스(118)가 도시되지만, 실시예들은 동일하거나 상이한 타입의 다수의 햅틱 출력 디바이스를 이용하여 햅틱 효과들을 출력할 수 있다. 예를 들어, 햅틱 출력 디바이스(118)는, 예를 들어, 압전 액추에이터, 전기 모터, 전자기 액추에이터, 보이스 코일, 형상 기억 합금, 전기 활성 폴리머, 솔레노이드, 편심 회전 질량 모터(ERM), 또는 선형 공진 액추에이터(LRA), 로우(low) 프로파일 햅틱 액추에이터, 햅틱 테이프, 또는 정전기적 효과를 출력하도록 구성된 햅틱 출력 디바이스, 예컨대 정전 마찰(ESF) 액추에이터 중 하나 이상을 포함할 수 있다. 일부 실시예들에서, 햅틱 출력 디바이스(118)는 복수의 액추에이터, 예를 들어 로우 프로파일 햅틱 액추에이터, 압전 액추에이터 및 LRA를 포함할 수 있다.
메모리(104)로 돌아가서, 햅틱 효과들을 결정하고 출력하기 위해 디바이스가 어떻게 구성될 수 있는지를 예시하기 위해 예시적인 프로그램 컴포넌트들(124, 126 및 128)이 도시되어 있다. 이 예에서, 검출 모듈(124)은 터치의 위치를 결정하기 위해 센서(108)를 통해 터치 표면(116)을 모니터링하도록 프로세서(102)를 구성한다. 예를 들어, 모듈(124)은 터치의 존재 또는 부존재를 추적하기 위해, 그리고 터치가 존재하는 경우, 시간 경과에 따른 터치의 위치, 경로, 속도, 가속도, 압력 및/또는 기타 특성들 중 하나 이상을 추적하기 위해 센서(108)를 샘플링할 수 있다. 대안적으로 또는 추가로, 검출 모듈(124)은 햅틱 출력 디바이스(118)로부터의 출력을 검출하도록 구성될 수 있다.
햅틱 효과 결정 모듈(126)은 출력 햅틱 효과 및 기준 신호에 관한 데이터를 분석하여, 햅틱 출력 디바이스(118)에 전송하기 위한 구동 신호를 결정하는 프로그램 컴포넌트를 나타낸다.
햅틱 효과 생성 모듈(128)은 프로세서(102)로 하여금 햅틱 신호를 생성하고 햅틱 신호를 햅틱 출력 디바이스(118)로 송신하게 하는 프로그래밍을 나타내며, 이는 햅틱 출력 디바이스(118)로 하여금 선택된 햅틱 효과를 생성하게 한다. 예를 들어, 생성 모듈(128)은 햅틱 출력 디바이스(118)에 전송하기 위한 저장된 파형들 및 커맨드들에 액세스할 수 있다. 다른 예로서, 햅틱 효과 생성 모듈(128)은 원하는 타입의 햅틱 효과를 수신하고 신호 처리 알고리즘들을 이용하여 햅틱 출력 디바이스(118)로 전송할 적절한 신호를 생성할 수 있다. 추가의 예로서, 표면(및/또는 기타 디바이스 컴포넌트들)의 적절한 변위를 생성하여 햅틱 효과를 제공하기 위해 하나 이상의 액추에이터로 전송되는 적절한 파형 및 텍스처에 대한 목표 좌표들과 함께, 원하는 햅틱 효과가 표시될 수 있다. 일부 실시예들은 특징을 시뮬레이팅하기 위해 다수의 햅틱 출력 디바이스를 협력하여 이용할 수 있다. 예를 들어, 텍스처의 변동은 인터페이스 상의 버튼들 간의 경계를 가로지르는 것을 시뮬레이팅하기 위해 사용될 수 있는 한면, 진동촉각 효과는 버튼이 눌러질 때 응답을 시뮬레이팅한다.
도 2는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다. 도 2에 도시된 실시예에서, 기준 신호(202)가 시스템에 제공된다. 기준 신호(202)는 설계자가 디바이스에 의해 출력되기를 원하는 햅틱 효과를 나타낸다. 예를 들어, 설계자는 가상 버튼이 매우 크리스프하고 기계적으로 느껴지기를 원할 수 있다. 다른 실시예에서, 햅틱 효과 설계자는 햅틱 효과가 비브라토(vibrato) 또는 크런치(crunchy)하게 느껴지기를 원할 수 있다. 기준 신호(202)는 디자이너의 의도들 또는 설계 선택들을 반영한다.
기준 신호는 스위치(204)에 제공된다. 스위치(204)는 가변 이득, 이득 1 내지 이득 n을 제공하는 복수의 증폭기(206a-n) 중 하나에 에러 신호를 제공한다. 초기 햅틱 효과가 출력될 때까지, 스위치(204)는 증폭기들 중 하나, 예를 들어 "이득 1"(206a)을 출력하는 증폭기로 디폴트할 수 있다. 기준 신호(202)는 원하는 햅틱 출력을 반영하도록 의도된다. 기준 신호(202)는 예를 들어, 주파수, 크기, 지속기간 및 파형을 포함하는 다양한 특성들을 포함한다. 이러한 특성들은 스위치(204)가 특정 증폭기(206)를 선택하게 할 수 있다. 예를 들어, 적절한 이득 및 대응하는 증폭기(206)를 선택하기 위해 원하는 형상 대 실제 형상이 사용될 수 있다. 예를 들어, 실시예는 효과 또는 테일을 단축하도록 설계될 수 있다. 다른 실시예는 효과의 상승, 또는 효과의 상승 및 테일 둘 다를 관리하도록 설계될 수 있다. 다른 실시예에서, 기준 신호(202)의 주파수는 이득을 선택하기 위해 사용될 수 있다. 다른 실시예들에서, 스위치(204)는 기준 신호(202)가 아니라 제어 신호에 의해 제어될 수 있다.
증폭기(206)의 출력은 햅틱 또는 구동 신호를 생성하기 위해 합산기(208)와 같은 결합기에 제공된다. 합산기(208)는 햅틱 신호를 햅틱 출력 디바이스(210)로 송신한다. 햅틱 출력 디바이스(208)는 예를 들어 LRA, 진동 액추에이터, 또는 캔틸레버형(cantilevered) 압전 액추에이터를 포함하는 임의의 종류의 액추에이터일 수 있다.
그 후, 햅틱 출력 디바이스(210)의 출력은 센서(212)에 의해 감지된다. 센서(212)는 다양한 타입의 센서를 포함할 수 있고 복수의 센서를 포함할 수 있다. 예를 들어, 센서(212)는 홀 효과 센서, 햅틱 출력 디바이스(210) 내에서의 움직임을 감지하기 위한 위치 센서, 가속도계, 자이로스코프, 카메라 또는 적외선 센서와 같은 광학 센서, 또는 햅틱 출력 디바이스의 출력을 검출하고 출력 햅틱 효과에 대응하는 센서 신호를 생성하기 위한 임의의 다른 타입의 센서 또는 센서들의 조합들을 포함할 수 있다. 햅틱 출력 디바이스(210) 및 센서(212)는 별개의 컴포넌트들로서 도시되지만, 이들은 일부 실시예들에서 조합될 수 있다.
센서 신호는 기준 신호(202)와 센서(212)에 의해 출력되는 센서 신호 사이의 에러를 결정하기 위해 비교기(214)에 제공된다. 도시된 실시예에서, 기준 신호(202) 및 센서 신호는 동일한 타입의 신호가 되어야 한다. 즉, 기준 신호는, 원하는 햅틱 피드백 효과의 설계가 그대로 햅틱 출력 디바이스로부터 출력된 것을 반영한다. 그러나, 다른 실시예들에서는, 에러를 결정하기 위해 상이한 타입의 신호들이 사용될 수 있다. 그 다음, 에러는 스위치(204)에 그리고 피드백 루프 제어기(216)에 제공된다. 피드백 루프 제어기(216)는 에러를 사용하여 구동 신호를 변조한다.
피드백 루프 제어기(216)는 다양한 타입들일 수 있다. 예를 들어, 피드백 루프 제어기(216)는 PD(proportional-derivative), PID(proportional-integral-derivative), 또는 리드-래그(lead-lag) 제어기일 수 있다. 제어기의 타입은 특정 응용에 기초할 수 있다. 예를 들어, 리드-래그 제어기는 실질적인 댐핑(damping)을 제공하고, 따라서 크리스프 효과가 요구될 때 사용될 수 있다. 피드백 루프 제어기(216)는 기준 신호의 타입에 기초하여 선택될 수 있다.
기준 신호에 기초하여, 스위치(204)는 얼마나 많은 이득 1-n이 인가되어야 하는지를 결정하고, 그 결정에 기초하여 증폭기(206)를 선택한다. 다른 실시예들에서, 시스템은 에러에 기초하여 또는 에러, 기준 신호, 또는 다른 입력들의 조합에 기초하여 증폭기를 선택할 수 있다. 예를 들어, 에러가 피드백 루프 제어기(216)의 능력 밖에 있다면, 도 2에 도시된 시스템은 에러를 정정하는 데 도움을 주기 위해 이득을 사용할 수 있다. 이득은 또한 기준 신호의 다양한 특성들에 기초할 수 있다. 예를 들어, 일 실시예에서, 이득은 기준 신호의 주파수에 기초한다. 그러한 실시예에서, 400Hz 신호는 증폭기(206a)로 지향될 수 있지만, 380Hz 신호는 다소 더 긴 테일을 가질 수 있고, 따라서, 증폭기(206b)에 전송되고, 이는 더 높은 이득을 가질 것이다. 증폭기(206) 및 피드백 루프 제어기(216)는 신호들을 결합기(208)에 제공하고 이는 2개의 신호를 가산하여 햅틱 출력 디바이스(210)에 제공되는 햅틱 신호에 대한 최종 구동을 결정한다. 이러한 방식으로, 도 2에 도시된 시스템은 다양한 디바이스들에 걸쳐 동일한 기준 신호를 사용하면서 햅틱 효과의 형상(예를 들어, 테일(tail)을 갖는 것에 비해 날카로운 효과), 크기 및 지속기간을 제어할 수 있다.
일부 실시예들에서, 도 2에 도시된 컴포넌트들은 칩 상에 구현될 수 있다. 다른 실시예들에서, 컴포넌트들은 예들로서 모바일 디바이스 상에서, 사용자 인터페이스 디바이스 상에서, 예컨대 가상 또는 증강 현실 컨트롤들, 또는 게이밍 컴퓨터 상에서 실행되는 소프트웨어로서 구현될 수 있다. 추가 실시예들에서, 컴포넌트들은 다수의 디바이스들에 걸쳐 또는 디바이스 상에서 실행되는 소프트웨어 및 하나 이상의 칩의 조합으로서 또는 구현될 수 있다. 다른 구성들도 구현될 수 있다. 예를 들어, 일부 실시예들에서, 컴포넌트들은 명령어 세트를 갖는 일반 코어를 사용하여 ASIC로 구현될 수 있다. ASIC는 파라미터들로 제어될 수 있다. 예를 들어, ASIC는 다수의 제어기 또는 다수의 파라미터를 갖는 단일 제어기를 포함할 수 있어 그 동작을 제어할 수 있다.
도 3은 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다. 도 2는 도 3과 유사하다. 그러나, 기준 신호(302)는 스위치(304)에 제공되고, 이는 대안적으로 기준 신호의 특성들에 따라 증폭기(306), 피드백 루프 제어기(316) 또는 둘 다로부터의 입력을 수락할 수 있다.
도 2에 도시된 시스템에서와 같이, 결합기(308)는 햅틱 신호를 햅틱 출력 디바이스(310)에 제공한다. 센서(312)는 햅틱 출력 디바이스(310)의 출력을 감지하고, 센서 신호를 비교기(314)에 제공한다. 비교기(314)는 기준 신호(302)에 센서 신호를 비교하여 증폭기(306) 및 피드백 루프 제어기(316)에 공급하기 위한 에러를 결정한다.
도 4는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 다른 예시적인 시스템을 도시한다. 도 2 및 도 3에서와 같이, 도 4는 기준 신호(402)를 포함한다. 기준 신호는 스위치(404)에 제공된다. 도 2에 도시된 바와 같이 다양한 증폭기들 사이에서 스위칭하기보다는, 스위치(404)는 다양한 피드백 루프 제어기들(416a-n) 사이에서 스위칭한다. 도시된 실시예에서, 피드백 루프 제어기(416a)는 PD 제어기일 수 있는 한편, 피드백 루프 제어기(416b)는 PID 제어기이고, 피드백 루프 제어기(416c)는 리드-래그 제어기이다. 예로서, LRA와 같은 햅틱 출력 디바이스(210)가 오버드라이브되면, 그것은 전력이 차단된 후에 다수의 밀리초 동안 종종 링잉한다. 일 실시예에서, 기준 신호가 0으로 복귀할 때(즉, 어떤 햅틱 효과도 예상되지 않음), 제어기는 액추에이터를 0으로 구동할 수 있다. 예를 들어, 하나의 그러한 실시예에서, 신호를 구동할 때, PD 제어기가 이용되지만, 기준 신호가 0으로 떨어질 때, 스위치(404)는 그 후 제어를 리드-래그 제어기로 스위칭하고, 이는 햅틱 출력 디바이스(416)를 0으로 더 잘 구동할 수 있다.
제어기들의 다양한 다른 조합들 및 타입들이 이용될 수 있다. 선택된 피드백 루프 제어기(416)로부터의 출력은 결합기, 합산기(408)에 공급되고, 이는 햅틱 신호를 생성하고 그것을 햅틱 출력 디바이스(410)에 전송한다.
센서(412)는 출력을 감지하고, 센서 신호를 생성하고 이 센서 신호는 비교기(414)에 제공된다. 비교기(414)는 스위치(404) 및 증폭기(406)에 에러를 제공한다. 증폭기(404)는 신호의 이득을 증가시키고 그것을 피드백 루프 제어기(416)로부터의 신호와 결합되도록 합산기(408)에 제공한다. 이득이 도 4에서 고정된 것으로 도시되지만, 이득을 변경하기 위해 추가적인 증폭기들이 이용될 수 있다. 또한, 도 2, 3 및 4가 별개의 시스템들을 설명하지만, 다양한 실시예들의 특징들이 서로 조합될 수 있다. 예를 들어, 하나의 대안적인 실시예는 다수의 증폭기(206, 306, 406) 및 다수의 피드백 루프 제어기(216, 316, 416)로부터 선택하는 능력을 포함할 수 있다.
도 5는 일 실시예에서 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 또 다른 예시적인 시스템을 도시한다. 도 5에 도시된 예시적인 시스템은 도 5의 시스템이 햅틱 신호의 개루프(open loop) 및 폐루프 제어 둘 다를 허용한다는 점을 제외하고 도 2-4에 도시된 시스템들과 유사하다. 도 5에 도시된 실시예에서, 기준 신호(502)는 스위치(504)에 제공되고, 이는 기준 신호(502)를 결합기(508)에 직접 제공할 수 있다. 이러한 실시예는 개루프 제어와 폐루프 제어 사이의 스위칭을 위해 사용될 수 있다.
예를 들어, 일 실시예에서, 센서는 항상 이용가능하지 않거나 또는 센서(512)를 사용하는 것은 자원들의 효율적인 사용이 아닐 것이다. 이러한 경우에, 센서(512)는 특정 레이트로 샘플링될 수 있다. 스위치(504)는 센서가 이용가능하지 않은 동안 개루프 처리를 선택할 수 있고, 이어서 센서가 이용가능해질 때 폐루프 처리를 선택할 수 있다. 이용하기 위한 제어의 타입은 또한 햅틱 출력 디바이스(510)의 특정 사용에 기초할 수 있다. 예를 들어, 일 실시예에서, 햅틱 출력 디바이스(510)는 전화가 링잉할 때 진동한다. 이러한 경우에, 햅틱 효과 설계자는 효과의 정밀도에 관해 주의를 기울이지 않을 수 있고, 따라서 개루프 처리가 사용된다. 그러나, 동일한 햅틱 출력 디바이스(510)가 그 사용이 디바이스의 디스플레이 상의 버튼을 눌렀다는 것을 나타내기 위해 사용될 때, 폐루프 처리는 고품질 햅틱 효과를 보장하는 데 사용될 수 있다.
이러한 실시예들에 도시된 시스템들에 대한 다양한 수정들이 이용될 수 있다. 예를 들어, 일부 실시예들은 신호를 평활화하기 위해 508과 510 사이에 저역 통과 필터를 포함할 수 있다. 이러한 구성은, 햅틱 신호에서 일부 불연속성들을 발생시킬 수 있는 개루프와 폐루프 제어 사이에서 전이할 때 특히 유용할 수 있다. 하나의 이러한 실시예에서, 저역 통과 필터는 500Hz, 또는 대안적으로 1000Hz의 대역을 사용할 수 있다.
다른 실시예에서, 폐루프 처리는 컴퓨팅 디바이스 상의 자원들을 과도하게 이용하지 않고 햅틱 효과들의 품질을 보장하기 위해 교대하는 방식으로 사용된다. 예를 들어, 하나의 그러한 실시예에서, 개루프 처리는 20 밀리초 동안 이용될 수 있고, 이어서 폐루프 처리가 10 밀리초 동안 이용될 수 있다. 다수의 햅틱 효과가 연속하여 출력되는 다른 실시예에서, 폐루프 처리는 예를 들어 햅틱 효과의 테일이 댐핑되는 것을 보장하기 위해 마지막 효과만을 위해 이용될 수 있다. 또 다른 실시예에서, 센서(512) 및 제어기(516)는 기준 신호(502)의 2개의 샘플이 모든 하나의 센서 신호에 대해 생성될 수 있도록 상이한 레이트들로 동작할 수 있다. 따라서, 스위치(504)는 센서(512)와 주파수를 매칭하여, 개루프 처리와 폐루프 처리 사이에서 앞-뒤-로(back-and-forth) 스위칭할 수 있다.
햅틱 효과들의 다중 레벨 폐루프 제어를 위한 실례적 예시적인 방법
도 6은 일 실시예에 따른 방법(600)을 나타내는 흐름도이다. 도시된 프로세스는 프로세서가 햅틱 출력 디바이스(602)의 출력에 대응하는 센서 신호를 수신할 때 시작된다. 프로세서는 또한 기준 신호(604)를 수신한다. 도시된 실시예에서의 기준 신호는 햅틱 출력 디바이스가 햅틱 효과를 정확하게 생성했던 경우에 발생될 센서 신호를 나타내도록 의도된다.
그 후 프로세서는 기준 신호와 센서 신호(606) 사이의 에러를 결정한다. 예를 들어, 센서 신호 및 기준 신호는 센서 신호가 기준 신호를 근사화해야 하도록 설계될 수 있다. 따라서, 신호들 사이의 임의의 에러 또는 차이는 출력되는 햅틱 효과가 기준 신호를 정확하게 반영하지 않는다는 것을 나타낸다.
그 다음, 프로세서는 햅틱 출력 디바이스를 구동하기 위한 햅틱 효과 신호를 생성하고, 햅틱 효과 신호는 에러(608)에 적어도 부분적으로 기초한다. 예를 들어, 프로세서는 수정된 구동 신호를 출력하기 전에 기준 신호를 수정하기 위해 결정된 에러를 사용할 수 있다.
그 다음, 프로세서는 햅틱 신호를 햅틱 출력 디바이스(610)로 송신한다. 그 후, 햅틱 출력 디바이스는 햅틱 효과(612)를 출력한다. 도 6에 도시된 프로세스(600)는 도 1 내지 도 5에 도시된 시스템들 중 임의의 것 또는 햅틱 효과들의 폐루프 생성을 수행하기 위한 다른 시스템들에 의해 수행될 수 있다.
도 7은 일 실시예에 따른 다른 방법(700)을 나타내는 흐름도이다. 도시된 실시예에서, 프로세서는 기준 신호(702)를 수신한다. 프로세서는 또한 기준 신호와 센서 신호(704) 사이의 에러를 수신한다. 센서 신호는 햅틱 출력 디바이스의 출력을 감지하도록 구성된 센서에 의해 생성된다.
기준 신호 및 에러에 응답하여, 프로세서는 기준 신호(706)에 인가될 이득을 결정한다. 예를 들어, 프로세서는 기준 신호에 따라, 이득을 증가 또는 감소시킬 수 있다. 대안적으로, 프로세서는 에러에 기초하여 또는 일부 다른 제어 신호에 일부 기초하여 이득을 결정할 수 있다.
프로세서는 또한 에러 및/또는 기준 신호(708)에 기초하여 에러에 제어를 적용하기 위한 제어기를 결정한다. 예를 들어, 프로세서는 PD 제어기가 하나의 타입의 에러 또는 기준 신호에 대해 사용될 수 있고 리드-래그 제어기가 상이한 타입의 기준 신호 또는 에러에 대해 사용되는 것으로 결정할 수 있다.
그 다음, 프로세서는 기준 신호와 에러를 결합하여 햅틱 신호(710)를 생성한다. 전술한 바와 같이, 프로세서는 생성될 햅틱 신호에 대한 입력들을 생성하기 위해 사용되는 이득 또는 제어기를 변경할 수 있다.
프로세서는 이어서 햅틱 신호를 햅틱 출력 디바이스(712)로 송신한다. 그 후, 햅틱 출력 디바이스는 햅틱 효과(714)를 출력한다. 디바이스 내의 센서는 가속 및 감속 또는 액추에이터의 변위와 같은 햅틱 효과의 일부 양태를 감지하고, 에러를 결정하기 위해 그 정보를 비교기에 제공하고, 프로세스(700)는 다시 시작할 수 있다.
본 명세서에 설명된 실시예들은 햅틱 효과들을 생성하기 위한 종래의 시스템들에 비해 다수의 장점을 제공한다. 예를 들어, 실시예들은 햅틱 출력 디바이스들(예를 들어, 액추에이터들)에 걸쳐 그리고 디바이스들에 걸쳐 주어진 기준 신호에 응답하여 더 큰 일관성 레벨을 제공한다. 그러한 일관성은 더 낮은 제조 공차들을 갖고 따라서 더 큰 변동성을 갖는 햅틱 출력 디바이스들이 이용될 때 유용하다. 그러한 햅틱 출력 디바이스들은 종종 보다 정밀한 것들보다 더 저렴하다. 또한, 실시예들은 다수의 디바이스에 걸쳐 햅틱 효과 설계자의 의도의 일관성을 제공하는 것을 도울 수 있다. 본 명세서에서 사용되는 바와 같이, 일관성은 효과가 디바이스들에 걸쳐 정확하게 동일한 것으로 제안하는 것이 아니라, 오히려 그렇지 않은 경우보다 더 일관된 것이다.
또한, 실시예들은 개선된 햅틱 효과들을 제공할 수 있다. 예를 들어, 종래의 시스템들과 비교할 때 주어진 액추에이터 상에 더 크리스프한(crisper) 효과가 출력될 수 있다. 또한, 특정 디바이스에 대한 공진 근처의 신호와 같은 예측불가능한 효과들을 초래할 수 있는 신호들에 대해, 실시예는 원하는 햅틱 효과가 출력되는 것을 보장할 수 있다. 일부 실시예들에서, 햅틱 효과들의 테스트는 단순화되어야 하는데, 그 이유는 시스템이 개별 디바이스들의 특정 컴포넌트들에서의 분산들에도 불구하고 적절한 햅틱 효과를 출력하도록 적응할 수 있기 때문이다. 예를 들어, 2개의 상이한 모바일 폰에서의 햅틱 효과 액추에이터들이 상이한 성능 특성들을 가질 수 있지만, 실시예는 디바이스들 각각에 대해 상이한 효과들을 구현하거나 디바이스들 둘 다를 테스트할 필요 없이 적응할 수 있다.
일반적인 고려사항들
위에서 논의된 방법들, 시스템들, 및 디바이스들은 예들이다. 다양한 구성들은 적절한 경우 다양한 절차들 또는 컴포넌트들을 생략하거나, 대체하거나 또는 추가할 수 있다. 예를 들어, 대안적인 구성들에서, 방법들은 설명된 것과 상이한 순서로 수행될 수 있고/있거나, 다양한 스테이지들이 추가, 생략, 및/또는 조합될 수 있다. 또한, 특정 구성들과 관련하여 설명된 특징들은 다양한 다른 구성들에서 조합될 수 있다. 구성들의 상이한 양태들 및 요소들은 유사한 방식으로 조합될 수 있다. 또한, 기술이 진화하고, 따라서, 요소들 중 다수가 예들이고 본 개시내용 또는 청구항들의 범위를 제한하지 않는다.
예시적인 구성들(구현들을 포함함)의 철저한 이해를 제공하기 위해 특정 상세들이 설명에 주어진다. 그러나, 구성들은 이들 특정 상세들 없이 실시될 수 있다. 예를 들어, 구성들을 불명확하게 하지 않기 위해 공지된 회로들, 프로세스들, 알고리즘들, 구조들 및 기술들은 불필요한 상세 없이 나타내었다. 이 설명은 예시적인 구성들만을 제공하고, 청구항들의 범위, 적용가능성, 또는 구성들을 제한하지 않는다. 오히려, 앞선 구성들의 설명은 본 기술분야의 통상의 기술자에게 설명된 기술들을 구현 가능하게 하는 설명을 제공할 것이다. 다양한 변화들이 본 개시내용의 사상 또는 범위에서 벗어나지 않고서 요소들의 기능 및 배열에서 이루어질 수 있다.
또한, 구성들은 흐름도 또는 블록도로서 도시되는 프로세스로서 설명될 수 있다. 이들 각각은 동작들을 순차적인 프로세스로서 설명할 수 있지만, 동작들 중 다수는 병렬로 또는 동시에 수행될 수 있다. 또한, 동작들의 순서가 재배열될 수 있다. 프로세스는 도면에 포함되지 않은 추가 단계들을 가질 수 있다. 게다가, 방법들의 예들은 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로코드, 하드웨어 기술 언어(hardware description language)들, 또는 이들의 임의의 조합으로 구현될 수 있다. 소프트웨어, 펌웨어, 미들웨어 또는 마이크로코드로 구현될 때, 필요한 작업들을 수행하기 위한 프로그램 코드 또는 코드 세그먼트들은 저장 매체와 같은 비일시적 컴퓨터 판독가능 매체에 저장될 수 있다. 프로세서들이 설명된 작업들을 수행할 수 있다.
여러 예시적 구성들을 설명하였지만, 본 개시내용의 사상으로부터 벗어나지 않고 다양한 수정들, 대안적 구성들, 및 등가물들이 사용될 수 있다. 예를 들어, 위의 요소들은 더 큰 시스템의 컴포넌트들일 수 있고, 여기서 다른 규칙들은 본 발명의 응용보다 우선할 수 있거나 또는 이를 다른 방식으로 수정할 수 있다. 또한, 위의 요소들이 고려되기 전에, 그 동안에, 또는 그 이후에 다수의 단계가 착수될 수 있다. 따라서, 위의 설명은 청구항들의 범위를 제한하지 않는다.
본 명세서에서 "~하는 데 적응하게 되는" 또는 "~하도록 구성되는"의 사용은 부가의 작업들 또는 단계들을 수행하는 데 적응하게 되는 또는 부가의 작업들 또는 단계들을 수행하도록 구성되는 디바이스들을 제외시키지 않는 개방적이고 포괄적인 어구로서 의도된다. 추가로, “에 기초한”의 사용은 하나 이상의 열거된 조건들 또는 값들”에 기초한” 프로세스, 단계, 계산, 또는 다른 액션은, 실제로는, 열거된 것들 이외에 추가적인 조건들 또는 값들에 기초할 수 있다는 점에서, 개방적이고 포괄적인 것으로 의도된다. 본 명세서에 포함된 표제들, 목록들, 및 번호 기재는 설명의 편의를 위한 것일 뿐이며 제한하는 것으로 의도된 것은 아니다.
본 주제의 양태들에 따른 실시예들은, 디지털 전자 회로, 컴퓨터 하드웨어, 펌웨어, 소프트웨어 또는 이들의 조합으로 구현될 수 있다. 일 실시예에서, 컴퓨터는 프로세서 또는 프로세서들을 포함할 수 있다. 프로세서는 프로세서에 연결되는 RAM(Random Access Memory) 등의 컴퓨터-판독가능 매체로의 액세스를 포함하거나 또는 구비한다. 프로세서는 센서 샘플링 루틴, 선택 루틴들, 및 전술한 방법들을 수행하기 위해 다른 루틴들을 포함하는 하나 이상의 컴퓨터 프로그램을 실행하는 것과 같은 메모리에 저장된 컴퓨터 실행가능 프로그램 명령어들을 실행한다.
이 프로세서들은 마이크로프로세서, 디지털 신호 프로세서(DSP), ASIC(application-specific integrated circuit), FPGA들(field-programmable gate arrays), 및 상태 머신들을 포함할 수 있다. 이러한 프로세서는 PLC들, PIC(programmable interrupt controller)들, PLD(programmable logic device)들, PROM(programmable read-only memory)들, 전기적 프로그램가능 판독 전용 메모리(EPROM 또는 EEPROM)들, 또는 기타 유사한 디바이스들 등의 프로그램가능 전자 디바이스들을 추가로 포함할 수 있다.
그러한 프로세서들은 매체, 예를 들어, 프로세서에 의해 실행될 때, 프로세서로 하여금, 프로세서에 의해 수행되거나 도움을 받아 여기에 설명된 단계들을 수행하게 할 수 있는 명령어들을 저장할 수 있는 유형의(tangible) 컴퓨터 판독가능 매체를 포함할 수 있거나, 또는 이와 통신할 수 있다. 컴퓨터 판독가능 매체의 실시예들은 웹 서버 내의 프로세서와 같은 프로세서에 컴퓨터 판독가능 명령어들을 제공할 수 있는 모든 전자, 광학, 자기, 또는 다른 저장 디바이스들을 포함할 수 있지만, 이에 제한되지는 않는다. 매체의 다른 일례들은, 플로피 디스크, CD-ROM, 자기 디스크, 메모리 칩, ROM, RAM, ASIC, 구성된 프로세서, 모든 광학 매체, 모든 자기 테이프 또는 다른 자기 매체, 또는 컴퓨터 프로세서가 판독할 수 있는 임의의 다른 매체를 포함하지만, 이들로만 제한되지는 않는다. 또한, 라우터, 사설 또는 공공 네트워크, 또는 다른 송신 디바이스와 같은 다양한 다른 디바이스들이 컴퓨터 판독가능 매체를 포함할 수 있다. 설명된 프로세서 및 처리는 하나 이상의 구조일 수 있고, 하나 이상의 구조를 통해 분산될 수 있다. 프로세서는 본 명세서에 기술된 방법들(또는 방법들의 부분들) 중 하나 이상을 실행하기 위한 코드를 포함할 수 있다.
본 주제는 그의 특정 실시예들에 관련하여 상세히 설명되었지만, 본 기술분야의 통상의 기술자들은, 전술한 내용을 이해하게 되면, 그러한 실시예들의 변경들, 변형들, 및 동등물들을 쉽게 만들어 낼 수 있음을 알 것이다. 따라서, 본 개시내용은 제한보다는 예시의 목적으로 제시되었고, 본 기술분야의 통상의 기술자가 쉽게 알 수 있을 본 주제에 대한 그러한 변경들, 변형들 및/또는 추가들을 포함하는 것을 배제하지 않는다.
Claims (20)
- 방법으로서,
센서로부터 센서 신호를 수신하는 단계- 상기 센서는 햅틱 출력 디바이스의 출력을 감지하도록 구성됨 -;
기준 신호를 수신하는 단계;
상기 센서 신호와 상기 기준 신호 사이의 에러를 결정하는 단계;
상기 기준 신호 및 상기 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하는 단계; 및
상기 햅틱 신호를 상기 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하는 단계를 포함하는 방법. - 제1항에 있어서,
상기 햅틱 신호를 생성하는 단계는 상기 기준 신호에 부분적으로 기초하여 이득을 수정하는 것을 포함하는 방법. - 제1항에 있어서,
상기 햅틱 신호를 생성하는 단계는 상기 에러에 부분적으로 기초하여 제어기를 선택하는 것을 포함하는 방법. - 제3항에 있어서,
상기 제어기는 비례-미분 제어기(proportional-derivative controller), 비례-적분-미분 제어기(proportional-integral-derivative controller) 및 리드-래그 제어기(lead-lag controller) 중 적어도 하나를 포함하는 방법. - 제3항에 있어서,
상기 햅틱 신호를 결정하는 단계는 상기 에러에 부분적으로 기초하여 이득을 수정하는 것을 추가로 포함하는 방법. - 제3항에 있어서,
상기 제어기를 선택하는 것은 추가로 상기 기준 신호에 부분적으로 기초하는 방법. - 제1항에 있어서,
상기 센서 및 상기 햅틱 출력 디바이스는 모바일 디바이스 내에 포함되는 방법. - 제1항에 있어서,
상기 햅틱 출력 디바이스는 선형 공진 액추에이터, 압전(piezo-electric), 또는 편심 회전 질량(eccentric rotating mass) 중 적어도 하나를 포함하는 방법. - 제1항에 있어서,
상기 센서는 가속도계, 자이로스코프, 광학 센서, 또는 홀 효과 센서 중 적어도 하나를 포함하는 방법. - 제1항에 있어서,
대안적으로 (a) 상기 기준 신호 및 상기 에러에 적어도 부분적으로 기초하여 상기 햅틱 신호를 생성하는 것, 및 (b) 상기 에러에 부분적으로 기초하지 않는 상기 햅틱 신호를 생성하는 것을 추가로 포함하는 방법. - 시스템으로서,
햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스;
상기 햅틱 출력 디바이스의 출력을 감지하고 센서 신호를 생성하도록 구성된 센서; 및
상기 센서와 통신하는 프로세서를 포함하고, 상기 프로세서는:
기준 신호를 수신하고;
상기 센서 신호를 수신하고;
상기 기준 신호 및 상기 센서 신호에 적어도 부분적으로 기초하여 에러를 결정하고;
상기 기준 신호 및 상기 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하고;
상기 햅틱 신호를 상기 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하도록 구성되는 시스템. - 제11항에 있어서,
상기 프로세서는 상기 기준 신호에 부분적으로 기초하여 이득을 수정함으로써 상기 햅틱 신호를 생성하도록 구성되는 시스템. - 제11항에 있어서,
상기 프로세서는 상기 에러에 부분적으로 기초하여 제어기를 선택함으로써 상기 햅틱 신호를 생성하도록 구성되는 시스템. - 제13항에 있어서,
상기 제어기는 비례-미분 제어기, 비례-적분-미분 제어기, 및 리드-래그 제어기 중 적어도 하나를 포함하는 시스템. - 제13항에 있어서,
상기 프로세서는 상기 에러에 부분적으로 기초하여 이득을 수정함으로써 상기 햅틱 신호를 결정하도록 구성되는 시스템. - 제13항에 있어서,
상기 프로세서는 추가로 상기 기준 신호에 부분적으로 기초하여 상기 제어기를 선택하도록 구성되는 시스템. - 제11항에 있어서,
상기 센서 및 상기 햅틱 출력 디바이스를 포함하는 모바일 디바이스를 추가로 포함하는 시스템. - 제11항에 있어서,
상기 햅틱 출력 디바이스는 선형 공진 액추에이터, 압전, 또는 편심 회전 질량 중 적어도 하나를 포함하는 시스템. - 제11항에 있어서,
상기 센서는 가속도계, 자이로스코프, 광학 센서, 또는 홀 효과 센서 중 적어도 하나를 포함하는 시스템. - 프로그램 코드를 포함하는 비일시적 컴퓨터 판독가능 매체로서,
상기 프로그램 코드는 프로세서에 의해 실행될 때 상기 프로세서로 하여금:
센서로부터 센서 신호를 수신하고- 상기 센서는 햅틱 출력 디바이스의 출력을 감지하도록 구성됨 -;
기준 신호를 수신하고;
상기 센서 신호와 상기 기준 신호 사이의 에러를 결정하고;
상기 기준 신호 및 상기 에러에 적어도 부분적으로 기초하여 햅틱 신호를 생성하고;
상기 햅틱 신호를 상기 햅틱 신호에 기초하여 햅틱 효과를 출력하도록 구성된 햅틱 출력 디바이스로 송신하게 하도록 구성되는 비일시적 컴퓨터 판독가능 매체.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/010,131 | 2018-06-15 | ||
US16/010,131 US10579146B2 (en) | 2018-06-15 | 2018-06-15 | Systems and methods for multi-level closed loop control of haptic effects |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20190142228A true KR20190142228A (ko) | 2019-12-26 |
Family
ID=66912575
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020190069306A KR20190142228A (ko) | 2018-06-15 | 2019-06-12 | 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10579146B2 (ko) |
EP (1) | EP3582082A1 (ko) |
JP (1) | JP2020009425A (ko) |
KR (1) | KR20190142228A (ko) |
CN (1) | CN110609612A (ko) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10732714B2 (en) | 2017-05-08 | 2020-08-04 | Cirrus Logic, Inc. | Integrated haptic system |
US10832537B2 (en) * | 2018-04-04 | 2020-11-10 | Cirrus Logic, Inc. | Methods and apparatus for outputting a haptic signal to a haptic transducer |
US10579146B2 (en) * | 2018-06-15 | 2020-03-03 | Immersion Corporation | Systems and methods for multi-level closed loop control of haptic effects |
GB201817495D0 (en) | 2018-10-26 | 2018-12-12 | Cirrus Logic Int Semiconductor Ltd | A force sensing system and method |
US11509292B2 (en) | 2019-03-29 | 2022-11-22 | Cirrus Logic, Inc. | Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter |
US11644370B2 (en) | 2019-03-29 | 2023-05-09 | Cirrus Logic, Inc. | Force sensing with an electromagnetic load |
US12035445B2 (en) | 2019-03-29 | 2024-07-09 | Cirrus Logic Inc. | Resonant tracking of an electromagnetic load |
US10955955B2 (en) | 2019-03-29 | 2021-03-23 | Cirrus Logic, Inc. | Controller for use in a device comprising force sensors |
US10828672B2 (en) | 2019-03-29 | 2020-11-10 | Cirrus Logic, Inc. | Driver circuitry |
US10992297B2 (en) | 2019-03-29 | 2021-04-27 | Cirrus Logic, Inc. | Device comprising force sensors |
US10976825B2 (en) | 2019-06-07 | 2021-04-13 | Cirrus Logic, Inc. | Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system |
US11249464B2 (en) * | 2019-06-10 | 2022-02-15 | Fisher-Rosemount Systems, Inc. | Industrial control system architecture for real-time simulation and process control |
CN114008569A (zh) | 2019-06-21 | 2022-02-01 | 思睿逻辑国际半导体有限公司 | 用于在装置上配置多个虚拟按钮的方法和设备 |
US11408787B2 (en) | 2019-10-15 | 2022-08-09 | Cirrus Logic, Inc. | Control methods for a force sensor system |
US11380175B2 (en) | 2019-10-24 | 2022-07-05 | Cirrus Logic, Inc. | Reproducibility of haptic waveform |
US11545951B2 (en) | 2019-12-06 | 2023-01-03 | Cirrus Logic, Inc. | Methods and systems for detecting and managing amplifier instability |
US11126267B2 (en) * | 2019-12-19 | 2021-09-21 | Giantplus Technology Co., Ltd | Tactile feedback device and operation method thereof |
US11662821B2 (en) | 2020-04-16 | 2023-05-30 | Cirrus Logic, Inc. | In-situ monitoring, calibration, and testing of a haptic actuator |
JP2021173941A (ja) * | 2020-04-28 | 2021-11-01 | 日本製紙株式会社 | 塗工液の塗工方法、及びハードコートフィルムの製造方法 |
JP2021173940A (ja) * | 2020-04-28 | 2021-11-01 | 日本製紙株式会社 | 塗工液の塗工方法、及びハードコートフィルムの製造方法 |
CN111949135B (zh) * | 2020-08-31 | 2022-06-17 | 福州大学 | 一种基于混合预测的触感通信容错方法及系统 |
US11933822B2 (en) | 2021-06-16 | 2024-03-19 | Cirrus Logic Inc. | Methods and systems for in-system estimation of actuator parameters |
CN117597202A (zh) * | 2021-06-22 | 2024-02-23 | 思睿逻辑国际半导体有限公司 | 用于管理混合模式机电致动器驱动的方法和系统 |
US11908310B2 (en) | 2021-06-22 | 2024-02-20 | Cirrus Logic Inc. | Methods and systems for detecting and managing unexpected spectral content in an amplifier system |
US11765499B2 (en) | 2021-06-22 | 2023-09-19 | Cirrus Logic Inc. | Methods and systems for managing mixed mode electromechanical actuator drive |
KR20240026186A (ko) * | 2021-06-22 | 2024-02-27 | 시러스 로직 인터내셔널 세미컨덕터 리미티드 | 혼합 모드 전자기계식 액츄에이터 드라이브 관리 방법 및 시스템 |
US11573639B1 (en) | 2021-10-20 | 2023-02-07 | Immersion Corporation | Apparatus and methods for localizing one or more effects in a haptic interface |
US11983322B2 (en) | 2021-10-20 | 2024-05-14 | Immerson Corporation | Systems and methods for controlling a multi-actuator system to generate a localized haptic effect |
CN114123937B (zh) * | 2021-10-22 | 2024-04-09 | 衢州元立金属制品有限公司 | 一种实现手动与自动pid调节的平滑转换方法 |
US11552649B1 (en) | 2021-12-03 | 2023-01-10 | Cirrus Logic, Inc. | Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths |
US12056296B1 (en) * | 2023-04-11 | 2024-08-06 | Microsoft Technology Licensing, Llc | Stylus usage state identification from acceleration profile |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US158291A (en) * | 1874-12-29 | Improvement in machines for making fence-pickets | ||
US5734373A (en) * | 1993-07-16 | 1998-03-31 | Immersion Human Interface Corporation | Method and apparatus for controlling force feedback interface systems utilizing a host computer |
US5739811A (en) * | 1993-07-16 | 1998-04-14 | Immersion Human Interface Corporation | Method and apparatus for controlling human-computer interface systems providing force feedback |
DE20080209U1 (de) | 1999-09-28 | 2001-08-09 | Immersion Corp | Steuerung von haptischen Empfindungen für Schnittstellenvorrichtungen mit Vibrotaktiler Rückkopplung |
US6680729B1 (en) | 1999-09-30 | 2004-01-20 | Immersion Corporation | Increasing force transmissibility for tactile feedback interface devices |
US7154470B2 (en) | 2001-07-17 | 2006-12-26 | Immersion Corporation | Envelope modulator for haptic feedback devices |
US6933920B2 (en) * | 2001-09-24 | 2005-08-23 | Immersion Corporation | Data filter for haptic feedback devices having low-bandwidth communication links |
US7369115B2 (en) | 2002-04-25 | 2008-05-06 | Immersion Corporation | Haptic devices having multiple operational modes including at least one resonant mode |
WO2006071449A1 (en) | 2004-11-30 | 2006-07-06 | Immersion Corporation | Systems and methods for controlling a resonant device for generating vibrotactile haptic effects |
US7920694B2 (en) | 2006-02-03 | 2011-04-05 | Immersion Corporation | Generation of consistent haptic effects |
US8378965B2 (en) | 2007-04-10 | 2013-02-19 | Immersion Corporation | Vibration actuator with a unidirectional drive |
KR101174450B1 (ko) * | 2007-09-14 | 2012-08-16 | 독립행정법인 산업기술종합연구소 | 버추얼 리얼리티 환경 생성 장치 및 콘트롤러 장치 |
US8325144B1 (en) | 2007-10-17 | 2012-12-04 | Immersion Corporation | Digital envelope modulator for haptic feedback devices |
JP2009181242A (ja) | 2008-01-29 | 2009-08-13 | Panasonic Corp | デジタルpid制御装置 |
US8156809B2 (en) | 2008-03-27 | 2012-04-17 | Immersion Corporation | Systems and methods for resonance detection |
US7843277B2 (en) | 2008-12-16 | 2010-11-30 | Immersion Corporation | Haptic feedback generation based on resonant frequency |
US8552859B2 (en) | 2009-09-30 | 2013-10-08 | Apple Inc. | Self adapting alert device |
US8610549B2 (en) | 2009-10-16 | 2013-12-17 | Immersion Corporation | Systems and methods for providing haptic feedback at multiple resonance frequencies |
US9158291B1 (en) * | 2010-06-04 | 2015-10-13 | The Mathworks, Inc. | Automatic H-infinity optimization for multivariable control systems |
US20110309918A1 (en) | 2010-06-17 | 2011-12-22 | Immersion Corporation | System and Method for Compensating for Aging Haptic Actuators |
GB2482190A (en) * | 2010-07-23 | 2012-01-25 | New Transducers Ltd | Methods of generating a desired haptic sensation in a touch sensitive device |
US8686839B2 (en) | 2011-11-01 | 2014-04-01 | Texas Instruments Incorporated | Closed-loop haptic or other tactile feedback system for mobile devices, touch screen devices, and other devices |
CN104169847B (zh) * | 2011-11-18 | 2019-03-12 | 森顿斯公司 | 局部触觉反馈 |
US8791799B2 (en) | 2012-02-01 | 2014-07-29 | Immersion Corporation | Eccentric rotating mass actuator optimization for haptic effects |
KR101458192B1 (ko) * | 2013-06-11 | 2014-11-05 | 재단법인 실감교류인체감응솔루션연구단 | 햅틱 피드백 생성 장치, 방법 및 컴퓨터 판독 가능한 기록 매체 |
US9520036B1 (en) * | 2013-09-18 | 2016-12-13 | Amazon Technologies, Inc. | Haptic output generation with dynamic feedback control |
KR101547291B1 (ko) * | 2014-07-01 | 2015-08-25 | 주식회사 동운아나텍 | 액추에이터 구동장치와 이를 포함하는 단말장치 및 그 제어방법 |
US9846484B2 (en) * | 2014-12-04 | 2017-12-19 | Immersion Corporation | Systems and methods for controlling haptic signals |
KR102274908B1 (ko) * | 2015-04-30 | 2021-07-08 | 엘지디스플레이 주식회사 | 햅틱 구동 장치 및 햅틱 기능을 갖는 전자 기기 |
JP2017004262A (ja) * | 2015-06-10 | 2017-01-05 | 株式会社東海理化電機製作所 | 操作装置 |
CN105511514B (zh) * | 2015-12-31 | 2019-03-15 | 歌尔股份有限公司 | 一种智能终端的触觉振动控制系统和方法 |
US9886829B2 (en) | 2016-06-20 | 2018-02-06 | Immersion Corporation | Systems and methods for closed-loop control for haptic feedback |
US20190121433A1 (en) * | 2017-10-20 | 2019-04-25 | Immersion Corporation | Determining a haptic profile using a built-in accelerometer |
US10579146B2 (en) * | 2018-06-15 | 2020-03-03 | Immersion Corporation | Systems and methods for multi-level closed loop control of haptic effects |
-
2018
- 2018-06-15 US US16/010,131 patent/US10579146B2/en active Active
-
2019
- 2019-06-11 JP JP2019108362A patent/JP2020009425A/ja active Pending
- 2019-06-12 KR KR1020190069306A patent/KR20190142228A/ko not_active Application Discontinuation
- 2019-06-14 CN CN201910515064.8A patent/CN110609612A/zh not_active Withdrawn
- 2019-06-14 EP EP19180364.2A patent/EP3582082A1/en not_active Withdrawn
-
2020
- 2020-01-24 US US16/751,927 patent/US11287889B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN110609612A (zh) | 2019-12-24 |
US20200159330A1 (en) | 2020-05-21 |
US10579146B2 (en) | 2020-03-03 |
US11287889B2 (en) | 2022-03-29 |
EP3582082A1 (en) | 2019-12-18 |
US20190384393A1 (en) | 2019-12-19 |
JP2020009425A (ja) | 2020-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20190142228A (ko) | 햅틱 효과들의 다중 레벨 폐루프 제어를 위한 시스템들 및 방법들 | |
US10649532B2 (en) | Systems and methods for multi-rate control of haptic effects with sensor fusion | |
EP2977859B1 (en) | Systems and methods for determining haptic effects for multi-touch input | |
JP6504809B2 (ja) | 触覚的に動作可能とされる映写されたユーザインターフェースのためのシステム及び方法 | |
JP5668076B2 (ja) | 電子デバイスにおける触覚帯域を増加するためのシステム及び方法 | |
US20190385421A1 (en) | Systems and Methods for Controlling Actuator Drive Signals for Improving Transient Response Characteristics | |
US10572017B2 (en) | Systems and methods for providing dynamic haptic playback for an augmented or virtual reality environments | |
US20150323994A1 (en) | Dynamic haptic effect modification | |
US11938400B2 (en) | Object control method and apparatus, storage medium, and electronic apparatus | |
CN112882035A (zh) | 一种检测方法、设备以及存储介质 | |
CN109618234A (zh) | 视频播放控制方法、装置、移动终端及存储介质 | |
US20180267618A1 (en) | Method for gesture based human-machine interaction, portable electronic device and gesture based human-machine interface system | |
US10747321B2 (en) | Systems and methods for differential optical position sensing for haptic actuation | |
KR102086676B1 (ko) | 유저 인터페이스를 통한 입력 처리 장치 및 방법 | |
US9606710B1 (en) | Configuring movement-based user interface control |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |