KR20170034340A - 전자 디바이스용 커버의 변형에 응답하여 햅틱 효과를 제공하기 위한 시스템 및 방법 - Google Patents

전자 디바이스용 커버의 변형에 응답하여 햅틱 효과를 제공하기 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20170034340A
KR20170034340A KR1020160117893A KR20160117893A KR20170034340A KR 20170034340 A KR20170034340 A KR 20170034340A KR 1020160117893 A KR1020160117893 A KR 1020160117893A KR 20160117893 A KR20160117893 A KR 20160117893A KR 20170034340 A KR20170034340 A KR 20170034340A
Authority
KR
South Korea
Prior art keywords
cover
electronic device
haptic effect
input gesture
haptic
Prior art date
Application number
KR1020160117893A
Other languages
English (en)
Inventor
빈센트 레베스크
자말 사본
후안 마누엘 크루즈-헤르난데즈
압델와합 하맘
바히드 코쉬카바
리웬 우
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20170034340A publication Critical patent/KR20170034340A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1677—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for detecting open or closed state or particular intermediate positions assumed by movable parts of the enclosure, e.g. detection of display lid position with respect to main body in a laptop, detection of opening of the cover of battery compartment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1679—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for locking or maintaining the movable parts of the enclosure in a fixed position, e.g. latching mechanism at the edge of the display in a laptop or for the screen protective cover of a PDA
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675—Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1681—Details related solely to hinges
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1633—Protecting arrangement for the entire housing of the computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1634—Integrated protective display lid, e.g. for touch-sensitive display in handheld computer

Abstract

시스템은 디스플레이 스크린을 포함하는 전자 디바이스, 디스플레이 스크린을 덮도록 구성된 커버, 전자 디바이스에 대한 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하도록 구성된 센서, 및 입력 제스쳐에 기초하여 전자 디바이스가 수행할 동작을 결정하고, 입력 제스쳐 및/또는 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하며, 동작을 개시하도록 구성된 프로세서를 포함한다. 이 시스템은 또한, 햅틱 효과를 생성하도록 구성된 햅틱 출력 디바이스를 포함한다.

Description

전자 디바이스용 커버의 변형에 응답하여 햅틱 효과를 제공하기 위한 시스템 및 방법{SYSTEMS AND METHODS FOR PROVIDING HAPTIC EFFECTS IN RESPONSE TO DEFORMATION OF A COVER FOR AN ELECTRONIC DEVICE}
본 발명은 대체로 전자 디바이스용 가요성 커버(flexible cover)의 변형에 응답하여 햅틱 효과(haptic effect)를 제공하기 위한 시스템 및 방법에 관한 것이다.
스마트폰, 태블릿, 및 전자서적 판독기 등의 핸드헬드 전자 디바이스들은, 종종, 그들의 스크린을 보호하고 사용중에는 벗겨낼 수 있는 커버와 함께 이용된다. 이러한 디바이스들이 커버의 상태를 검출하고 검출된 상태에 기초하여 동작을 취할 수 있는 것이 점점 흔해지고 있다. 예를 들어, 많은 스크린 커버들은 커버가 닫힐 때 전자 디바이스의 디스플레이 스크린이 오프되게 한다. 전자 디바이스용 커버는, 결국, 커버 또는 커버의 코너들 중 하나를 구부리는 것, 또는 커버를 전자 디바이스로부터 벗겨내는 것 등의 제스쳐가 검출될 수 있고 사용자 입력에 이용될 수 있도록 장착될 것이라고 예상된다.
사용자에게 추가 정보를 제공함으로써 사용자의 전자 디바이스용 커버와의 상호작용을 개선시키는 것이 바람직하다.
본 발명의 양태에 따르면 시스템이 제공되고, 시스템은 디스플레이 스크린을 포함하는 전자 디바이스, 디스플레이 스크린을 덮도록 구성된 커버, 전자 디바이스에 대한 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하도록 구성된 센서, 및 입력 제스쳐에 기초하여 전자 디바이스가 수행할 동작을 결정하고, 입력 제스쳐 및/또는 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하며, 동작을 개시하도록 구성된 프로세서를 포함한다. 이 시스템은 또한, 햅틱 효과를 생성하도록 구성된 햅틱 출력 디바이스를 포함한다.
실시예에서, 센서는, 구부림 센서, 광 센서, 압력 센서, 접촉 센서, 전위차계, 각도 센서, 각속도 센서, 가속도계, 및 자기 센서로 구성된 그룹으로부터 선택된다.
실시예에서, 햅틱 출력 디바이스는 진동을 생성하도록 구성된 액츄에이터(actuator)를 포함한다.
실시예에서, 커버는 액츄에이터를 포함한다.
실시예에서, 이 시스템은 커버를 전자 디바이스에 접속하는 힌지(hinge)를 포함하고, 힌지는 액츄에이터를 포함한다.
실시예에서, 햅틱 출력 디바이스는 커버 내에 임베딩되고, 커버의 강성도(stiffness)를 제어하는 전기유동(electro-rheological) 또는 자기유동(magneto-rheological) 유체를 포함한다.
실시예에서, 햅틱 출력 디바이스는 커버의 표면에서 마찰 효과를 생성하도록 구성된 정전 마찰 디바이스(electrostatic friction device)를 포함한다. 실시예에서, 커버의 표면은, 커버가 디스플레이 스크린을 덮을 때 전자 디바이스와 대향한다.
본 발명의 양태에 따르면 방법이 제공되고, 방법은 센서를 이용하여 전자 디바이스에 대한 전자 디바이스용 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하는 단계, 프로세서를 이용하여 입력 제스쳐에 기초하여 전자 디바이스가 수행할 동작을 결정하는 단계, 프로세서를 이용하여 입력 제스쳐 및/또는 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하는 단계, 프로세서를 이용하여 전자 디바이스가 수행할 동작을 개시하는 단계, 및 입력 제스쳐의 감지 동안에 및/또는 이후에 햅틱 출력 디바이스를 이용하여 햅틱 효과를 생성하는 단계를 포함한다.
실시예에서, 햅틱 효과는 입력 제스쳐의 감지 동안에 생성된다.
실시예에서, 햅틱 효과는 입력 제스쳐의 감지 이후에 생성된다.
실시예에서, 햅틱 효과는 동작이 완료된 이후에 생성되어 동작의 완료를 확인시킨다.
실시예에서, 햅틱 효과는 전자 디바이스로부터 커버를 벗겨내는 것에 저항하는 것을 포함한다.
실시예에서, 햅틱 효과는 커버가 전자 디바이스로부터 벗겨질 때 질감(texture)을 생성하는 것을 포함한다.
실시예에서, 햅틱 효과는 커버의 강성도(stiffness)를 변경하는 것을 포함한다.
실시예에서, 햅틱 효과는, 커버가 전자 디바이스를 덮을 때 전자 디바이스와 대향하는 커버의 표면 상의 촉감(tactile sensation)을 포함한다.
실시예에서, 햅틱 효과는, 커버가 전자 디바이스를 덮을 때 전자 디바이스와 대향하는 표면의 반대쪽의 커버의 상부 표면 상의 촉감을 포함한다.
실시예에서, 이 방법은 동작이 개시될 수 있는지를 결정하는 단계를 포함하고, 햅틱 효과는 동작이 개시될 수 없을 때 변형에 저항하는 것을 포함한다.
실시예에서, 햅틱 효과는 커버의 적어도 하나의 주름을 따라 위치한 적어도 하나의 힌지를 작동시켜 그 주름에서 커버를 접는 것을 포함한다.
실시예에서, 햅틱 효과는 동작에 기초하여 전자 디바이스에 대한 미리결정된 각도로 커버의 움직임을 제약하는 것을 포함한다.
본 발명의 양태에 따르면, 전자 디바이스용 커버가 제공된다. 이 커버는, 전자 디바이스에 대한 커버의 변형 및/또는 움직임을 포함한 입력 제스쳐를 감지하도록 구성된 센서, 및 입력 제스쳐에 기초하여 햅틱 효과를 생성하도록 구성된 햅틱 출력 디바이스를 포함한다.
실시예에서, 커버는, 입력 제스쳐에 기초하여 전자 디바이스가 수행할 동작을 결정하고, 입력 제스쳐 및/또는 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하며, 동작을 개시하도록 구성된 프로세서를 포함한다.
본 발명의 이들 및 다른 양태, 피쳐, 및 특성들 뿐만 아니라, 구조물의 관련된 요소들의 동작 및 기능의 방법과 부품들의 조합 및 제조 경제성은, 본 명세서의 일부를 형성하는 첨부된 도면을 참조한 이하의 상세한 설명과 첨부된 청구항들을 고려하면 더욱 명백해질 것이다. 그러나, 도면들은 단지 예시와 설명의 목적을 위한 것이며 본 발명의 한계의 정의로서 의도한 것은 아님을 분명히 이해하여야 한다. 본 명세서 및 청구항들에서 사용될 때, 단수 형태 "한(a)", "하나(an)", 및 "그 하나(the)"는, 정황상 분명하게 달리 지시하지 않는 한 복수의 대상을 포함한다.
이하의 도면들의 컴포넌트들은 본 개시내용의 일반 원리를 강조하도록 예시된 것이며 반드시 축척비율대로 그려진 것은 아니다. 대응하는 컴포넌트들을 지시하는 참조 문자들은 일관성과 명료성의 목적을 위해 필요하다면 도면들에 걸쳐 반복된다.
도 1은 본 발명의 실시예에 따른 전자 디바이스와 커버를 포함하는 시스템을 나타낸다;
도 2는 도 1의 시스템을 개략적으로 나타낸다;
도 3은 도 2의 시스템의 프로세서를 개략적으로 나타낸다;
도 4a는 도 1의 커버의 힌지의 실시예를 나타낸다;
도 4b는 도 1의 커버의 힌지의 실시예를 나타낸다;
도 4c는 도 1의 커버의 힌지의 실시예를 나타낸다;
도 5는 도 1의 시스템의 실시예를 나타낸다;
도 6은 도 1의 시스템의 실시예를 나타낸다;
도 7은 도 1의 시스템의 실시예를 나타낸다;
도 8a는 가요성 상태의 도 1의 커버의 실시예를 나타낸다;
도 8b는 강성 상태의 도 8a의 커버의 실시예를 나타낸다;
도 9는 도 9의 시스템의 실시예를 나타낸다;
도 10a는, 입력 제스쳐의 제1 부분이 수행되고 있는 도 1의 시스템의 실시예를 나타낸다;
도 10b는, 입력 제스쳐의 제2 부분이 수행되고 있는 도 10a의 시스템의 실시예를 나타낸다;
도 10c는, 입력 제스쳐의 제3 부분이 수행되고 있는 도 10b의 시스템의 실시예를 나타낸다;
도 11은 도 1의 시스템의 실시예를 나타낸다;
도 12는 도 1의 시스템의 실시예를 나타낸다;
도 13은 본 발명의 실시예에 따른 방법을 개략적으로 나타낸다.
도 1은 본 발명의 실시예에 따른 시스템(100)의 개략적 도면이다. 시스템(100)은, 디스플레이 스크린(112)를 포함한 전자 디바이스(110), 및 그것의 한 엣지를 따라 전자 디바이스(110)에 결합, 접속, 또는 부착되도록 구성된 커버(120)를 포함한다. 전자 디바이스(110)는, 태블릿, 스마트폰, 전자서적 판독기, 계산기 또는 접속가능하거나 부착가능한 커버와 함께 이용될 수 있는 기타 임의의 전자 디바이스일 수 있다. 커버(120)는, 도 1에 나타낸 바와 같이, 개방 위치에 있을 때 전자 디바이스(110)로의 액세스를 허용하고, 닫힌 위치(미도시)에 있을 때 전자 디바이스(110)의 디스플레이 스크린(112)을 덮도록 구성된다.
커버(120)는 닫힌 위치에 있을 때 전자 디바이스(110)를 보호하도록 구성될 수 있다. 실시예에서, 커버(120)는, 전자 디바이스(110)를 수용하도록 구성되어 전자 디바이스(110)가 커버(120) 내부에 놓이고 커버(120)가 닫힌 위치에 있을 때, 커버(120)는 전자 디바이스(110)를 실질적으로 또는 완전히 둘러싼다. 실시예에서, 커버(120)는, 커버(120)가 전자 디바이스(110)에 분리가능하게 접속되는 것을 허용하는 자석 또는 기타의 메커니즘을 통해 커버(120)를 전자 디바이스(110)에 분리가능하게 접속하거나 부착하도록 구성된 적어도 하나의 힌지(122)를 포함할 수 있다. 커버(120)는 투명하거나 부분적으로 투명할 수 있어서, 커버(120)가 닫힌 위치에 있을 때 커버(120)의 적어도 일부가 디스플레이 스크린(112)이 사용자에게 이미지를 디스플레이하는 것을 허용하게 한다. 실시예에서, 커버(120)는, 사용자가 입력 제스쳐를 전자 디바이스(110)에 제공하기 위한 상호작용 층(interactive layer)으로서 이용되는 투명하거나 불투명한 커버일 수 있다. 실시예에서, 커버(120)는 가요성이어서 사용자는 커버(120)를 구부리거나, 접거나, 비틀거나, 말거나 기타의 방식으로 변형할 수 있고, 커버(120)는 아래에 놓인 전자 디바이스(110) 상에서 실행되는 애플리케이션을 위한 상호작용 인터페이스로서 이용될 수도 있다.
커버(120)의 변형의 형태로 된 입력 제스쳐의 검출시에, 전자 디바이스(110)는, 디스플레이 스크린(112)을 켜는 것 또는 디스플레이 스크린(112)에 디스플레이된 정보를 변경하는 것 등의 검출된 입력 제스쳐에 기초하여 동작을 수행할 수 있다. 수행될 동작은 정황에 의존할 수 있고, 전자 디바이스(110)의 운영 체제 또는 애플리케이션의 일부로서 프로그램될 수도 있다.
도 2에 개략적으로 나타낸 바와 같이, 시스템(100)은, 버스 및/또는 통신 네트워크(160)를 통해 상호접속될 수 있는, 프로세서(130), 메모리 디바이스(140), 및 입력/출력 디바이스(150)를 포함한다. 실시예에서, 입력/출력 디바이스(150)는, 도 1에 나타낸 디스플레이(112), 적어도 하나의 센서(170), 적어도 하나의 햅틱 출력 디바이스(180), 스피커(190) 및/또는 기타의 입력/출력 디바이스를 포함할 수 있다.
프로세서(130)는, 시스템(100)의 동작과 기능을 관리하거나 제어하기 위한 범용 또는 특별 목적 프로세서 또는 마이크로제어기일 수 있다. 예를 들어, 프로세서(130)는 사용자에게 햅틱 피드백 또는 효과를 제공하기 위해 입력/출력 디바이스(150)의 사용자로의 출력 신호를 제어하는 주문형 집적 회로("ASIC")으로서 특별히 설계될 수도 있다. 프로세서(130)는, 미리정의된 인자들에 기초하여, 프로세서(130)에 의해 수신되거나 결정된 햅틱 신호에 기초하여 어떤 햅틱 피드백 또는 효과가 생성될지, 햅틱 효과들이 생성되는 순서, 및 햅틱 효과들의 크기, 빈도, 지속기간 및/또는 기타의 파라미터를 결정하도록 구성될 수도 있다. 프로세서(130)는 또한, 특정한 햅틱 효과를 제공하기 위해 햅틱 출력 디바이스(180)를 구동하는 데 이용될 수 있는 스트리밍 명령을 제공하도록 구성될 수 있다. 프로세서(130)는 전자 디바이스(110) 또는 커버(120)의 일부일 수 있다. 일부 실시예에서, 시스템(100)에는 하나보다 많은 프로세서(130)가 포함될 수 있고, 여기서, 각각의 프로세서(130)는 시스템(100) 내의 소정 기능을 수행하도록 구성된다. 예를 들어, 실시예에서, 제1 프로세서는 전자 디바이스(110)의 일부일 수 있고 제2 프로세서는 커버(120)의 일부일 수 있다. 프로세서(130)의 실시예가 이하에서 더 상세히 설명된다.
메모리 디바이스(140)는 하나 이상의 내부적으로 고정된 스토리지 유닛, 착탈식 스토리지 유닛, 및/또는 원격 액세스가능한 스토리지 유닛을 포함할 수 있다. 다양한 스토리지 유닛들은 휘발성 메모리와 비휘발성 메모리의 임의의 조합을 포함할 수 있다. 스토리지 유닛은, 정보, 데이터, 명령어, 소프트웨어 코드 등의 임의의 조합을 저장하도록 구성될 수 있다. 더 구체적으로는, 스토리지 유닛은, 햅틱 효과 프로파일, 입력/출력 디바이스(150)의 햅틱 출력 디바이스(180)가 어떻게 구동될 것인지에 대한 명령어, 및/또는 햅틱 피드백 또는 효과를 생성하기 위한 기타의 정보를 포함할 수 있다. 메모리 디바이스(140)는 전자 디바이스(110) 또는 커버(120)의 일부일 수 있다.
버스 및/또는 통신 네트워크(160)는, 시스템(100)의 다양한 컴포넌트들 사이의 신호 통신을 허용하고 또한 또 다른 통신 네트워크를 통해 원격 컴퓨터 또는 서버들로부터의 정보에 액세스하도록 구성될 수 있다. 통신 네트워크는, 무선 통신 네트워크, 인터넷, 개인 영역 네트워크("PAN"), 근거리 네트워크("LAN"), 거대도시권 네트워크("MAN"), 광역 네트워크("WAN") 등 중에서 하나 이상을 포함할 수 있다. 통신 네트워크는, 로컬 무선 주파수들, 셀룰러(GPRS, CDMA, GSM, CDPD, 2.5G, 3G, 4G LTE 등), 초광대역("UWB"), WiMax, ZigBee, 및/또는 기타의 애드혹/메시 무선 네트워크 기술 등을 포함할 수 있다.
센서(170)는, 전자 디바이스(110)에 대한 커버(120)의 변형 및/또는 움직임을 검출하도록 구성된다. 센서(170)는, 커버(120), 전자 디바이스(110), 또는 커버(120)와 전자 디바이스(110) 양쪽 모두의 일부일 수 있다. 변형은, 커버(120)를 구부리거나, 접거나, 말거나(rolling), 또는 비트는 것, 또는 전자 디바이스(110)에서 엣지 또는 코너로부터 커버(120)를 벗겨내는 것을 포함할 수 있다. 움직임은, 커버(120)를 전자 디바이스(110)에 대해 슬라이딩하는 것, 또는 전자 디바이스(110)로부터 커버(120)를 분리하는 것을 포함할 수 있다. 센서(170)는, 구부림 센서(예를 들어, FSR, 장력 게이지, 광 섬유 센서), 광 센서, 압력 센서, 접촉 센서, 커버(120)가 전자 디바이스(110)로부터 멀리 움직이는 때를 검출할 수 있는 기계적 스위치, 힌지(122) 내의 전위차계 또는 기타의 각도 센서, 가속도계, 자이로스코프 또는 기타의 각속도 센서, 자기 센서(예를 들아, 커버(120) 상의 자기 마커) 등을 포함할 수 있다.
시스템(100)에는 추가적인 센서(170)가 포함될 수도 있다. 예를 들어, 실시예에서, 전자 디바이스(110)는, 터치 감응 디바이스의 일부일 수 있는 디스플레이 스크린(112)에 대한, 사용자의 손 또는 손가락 등의 사용자 손의 일부, 또는 스타일러스 등의, 사용자 입력 요소의 위치를 감지하도록 구성된 근접성 센서를 포함할 수 있다. 실시예에서, 커버(120)는, 커버(120) 상에서 사용자에 의해 제공된 터치 입력을 감지하여, 사용자가 커버(120)를 열거나 커버(120)를 전자 디바이스(110)로부터 벗기지 않고 전자 디바이스와 상호작용할 수 있게 하도록 구성된 터치 감응 디바이스를 포함할 수 있다. 실시예에서, 전자 디바이스(110) 및/또는 커버(120)는, 터치 감응 디바이스에서의 터치 위치에 인가된 압력을 측정하도록 구성된 압력 센서를 포함할 수 있다. 실시예에서, 시스템(100)은, 환경 상태를 측정하도록 구성된 온도, 습도, 및/또는 대기압 센서를 포함할 수 있다. 실시예에서, 시스템(100)은, 심박수 등의, 사용자의 생리학적 신호를 포착하도록 구성된 생리학적 센서를 포함할 수 있다. 실시예에서, 시스템(100)은, 사용자의 얼굴 표정 및 연관된 생체인식 정보(biometric information)를 포착하도록 구성된 이미지 센서 및/또는 카메라를 포함할 수 있다.
햅틱 출력 디바이스(180)는 햅틱 피드백을 시스템(100)의 사용자에게 제공하도록 구성되고 커버(120) 또는 전자 디바이스(110)의 일부일 수 있다. 실시예에서, 커버(120) 및 전자 디바이스(110) 각각은 적어도 하나의 햅틱 출력 디바이스(180)를 포함할 수 있다. 햅틱 출력 디바이스(180)는 전자 디바이스(110) 및/또는 커버(120) 상에 제공된 에너지 소스에 의해 전력공급될 수 있다.
햅틱 출력 디바이스(180)에 의해 제공되는 햅틱 피드백은, 진동, 변형, 운동 감각, 정전 또는 초음파 마찰 등의 햅틱 효과를 생성하는 방법들 중 임의의 것에 의해 생성될 수 있다. 실시예에서, 햅틱 출력 디바이스(180)는, 예를 들어, 모터에 의해 편심 질량이 이동되는 편심 회전 질량("ERM"; Eccentric Rotating Mass) 등의 전자기 액츄에이터, 스프링에 부착된 질량이 앞뒤로 구동되는 선형 공진 액츄에이터("LRA"; Linear Resonant Actuator), 압전 재료, 전기활성 폴리머 또는 형상 기억 합금 등의 "스마트 재료", 매크로-복합 섬유 액츄에이터, 정전 액츄에이터, 전기-촉각 액츄에이터, 및/또는 진동촉각 피드백 등의 물리적 피드백을 제공하는 다른 유형의 액츄에이터 등의, 액츄에이터를 포함할 수 있다. 크기 및/또는 출력에 기초하여 적절한 햅틱 출력 디바이스(180)가 선택될 수 있다. 도 1에서 180A로 표시된, 예를 들어, 압전 재료 및/또는 전기활성 폴리머는, 그들의 얇은 성질로 인해 가요성 커버(120)에 임베딩되는 데 더욱 적합할 수 있다. ERM 및 LRA 등의 다른 액츄에이터들은, 도 1에서 180B로 표시된 커버(120)의 힌지(122), 또는 도 1에서 180C로 표시된 전자 디바이스(110)의 본체부 등의, 시스템(100)의 더 큰 컴포넌트들에 임베딩될 수 있지만, 바람직하게는, 커버(120)를 통해 햅틱 효과가 느껴질 수 있는 방식으로 배치된다. 커버(120) 상에 및 전자 디바이스(110) 상에 햅틱 출력 디바이스를 제공함으로써, 예를 들어, 전자 디바이스(110) 상에만 햅틱 출력 디바이스를 갖는 것에 비해, 더 풍부하고, 더 분별되는 햅틱 피드백이 생성되어 사용자에게 추가 정보를 제공할 수 있다.
햅틱 출력 디바이스(180)는, 정전 마찰(ESF), 초음파 표면 마찰(USF)을 이용하는 것들, 초음파 햅틱 트랜스듀서로 음향 방사 압력을 유도하는 것들, 햅틱 기판과 가요성 또는 변형가능한 표면을 이용하는 것들, 또는 열 효과를 이용하는 것들, 또는 에어젯을 이용하여 공기의 퍼프(puff) 등의 토출되는 햅틱 출력을 제공하는 것들 등과 같은, 비-기계식 또는 비-진동식 디바이스를 포함할 수 있다. 변형, 진동 등의 광범위한 효과를 생성하는 데 이용될 수 있는 상이한 햅틱 효과들을 생성하기 위해 복수의 햅틱 출력 디바이스(180)가 이용될 수 있다. 예를 들어, 진동의 펄스들은, 가요성 표면이 실제보다 더 가요성이라는 착각, 나무나 플라스틱 등의 특정한 재료로 제작되어 있다는 착각, 또는 개별 지점들(즉, 멈춤쇠들)에서 구부러질 것이라는 착각을 줄 수 있다. 햅틱 출력 디바이스(180)에 의해 생성될 수 있는 햅틱 효과의 추가적인 예들은 이하에서 논의된다.
도 3은 프로세서(130)의 실시예를 더 상세히 나타낸다. 프로세서(130)는 하나 이상의 컴퓨터 프로그램 모듈을 실행하도록 구성될 수 있다. 하나 이상의 컴퓨터 프로그램 모듈은, 센서 모듈(132), 입력 모듈(134), 결정 모듈(136), 햅틱 출력 디바이스 제어 모듈(138), 및/또는 기타의 모듈들 중 하나 이상을 포함할 수 있다. 프로세서(130)는 또한, 메모리 디바이스(140)와 동일할 수 있는, 또는 메모리 디바이스(140)에 추가적일 수 있는, 전자 스토리지(139)를 포함할 수 있다. 프로세서(130)는, 소프트웨어, 하드웨어, 펌웨어, 또는 소프트웨어, 하드웨어, 및/또는 펌웨어의 소정 조합, 및/또는 프로세서(130) 상의 처리 능력들을 구성하기 위한 기타의 메커니즘들에 의해 모듈들(132, 134, 136 및/또는 138)을 실행하도록 구성될 수 있다.
모듈들(132, 134, 136 및 138)은 도 3에서 단일의 처리 유닛 내에 함께 위치한 것으로 도시되어 있지만, 시스템이 복수의 프로세서를 포함하는 실시예에서는, 모듈들(132, 134, 136 및/또는 138) 중 하나 이상은 다른 모듈들로부터 원격지에 위치할 수도 있다는 것을 이해하여야 한다. 이하에서 기술되는 상이한 모듈들(132, 134, 136 및/또는 138)에 의해 제공되는 기능의 설명은, 모듈들(132, 134, 136 및/또는 138) 중 임의의 것은 설명된 것보다 많거나 적은 기능을 제공할 수도 있기 때문에, 설명의 목적을 위한 것이지, 제한을 위한 것은 아니다. 예를 들어, 모듈들(132, 134, 136 및/또는 138) 중 하나 이상은 제거될 수 있고, 그 기능 중 일부 또는 전부는 모듈들(132, 134, 136 및/또는 138) 중 다른 모듈들에 의해 제공될 수도 있다. 또 다른 예로서, 프로세서(130)는, 모듈들(132, 134, 136 및/또는 138) 중 하나에 속하는 기능의 일부 또는 전부를 수행할 수 있는 하나 이상의 추가 모듈을 실행하도록 구성될 수 있다.
센서 모듈(132)은, 센서(170)가 사용자에 의한 입력 제스쳐로서 이용될 수도 있는 커버(120)의 변형을 검출할 때 생성되는, 센서(170)로부터의 신호를 수신하도록 구성된다. 센서 모듈(132)은, 센서(170)로부터 수신된 원시 센서 데이터를 분석하고, 사용자에 의한 입력 제스쳐를 나타내기 위해 커버(120)의 변형이 미리결정된 임계치 위에서 발생했는지를 결정하도록 프로그램된다. 예를 들어, 센서 모듈(132)은, 입력 제스쳐가 행해졌다는 것을 나타내는 양만큼의 커버(120) 상의 하나 이상의 센서(170)로부터의 판독치에 기초하여, 커버(120)의 한 개의 코너가 구부러졌다고 결정할 수 있다. 센서 모듈(132)은 또한, 특정한 입력 제스쳐와 상관되는, 디스플레이 스크린(112) 상의 소정의 컬럼에서 시작하는 픽셀들을 노출하는 양에 의해, 커버(120)가 디스플레이 스크린(112)으로부터 벗겨졌다고 결정할 수 있다. 커버(120)의 감지된 변형이 사용자에 의해 입력 제스쳐가 행해지고 있다는 것을 나타내는 미리결정된 임계치 위에 있다는 판정시에, 센서 모듈(132)은 추가 처리를 위해 입력 모듈(134)에 신호를 출력할 수 있다.
입력 모듈(134)은, 센서 모듈(132)이, 사용자가 입력 제스쳐를 행하고 있다는 것을 나타내는 미리결정된 임계치 위에 있는 커버(120)의 변형을 검출할 때 생성되는 신호를 센서 모듈(132)로부터 수신하도록 구성되거나 프로그램된다. 예를 들어, 사용자는 커버(120)를 그 한 코너에서 구부림으로써, 또는 커버(120)의 일부를 전자 디바이스(110)로부터 멀리 접음으로써, 또는 커버(120)의 일부를 비틈으로써, 또는 커버(120)의 부분들을 구부리거나, 접거나, 그리고/또는 비트는 시퀀스에 의해, 입력을 나타낼 수 있다. 입력 모듈(134)은, 센서 모듈(132)로부터 수신된 신호의 미리정의된 입력 제스쳐와의 상관을 제공하는 조회 테이블(look-up table)을 가지고 프로그램될 수 있다. 입력 제스쳐가 식별될 후에, 입력 모듈(134)은, 추가 처리를 위해 결정 모듈(136)에 신호를 전송하도록 구성되거나 프로그램된다.
결정 모듈(136)은, 입력 모듈(134)로부터 수신된 신호에 따라 어떤 유형의 동작이 시스템(100)에 의해 취해질 것인지, 그리고 햅틱 출력 디바이스(180)에 의해 어떤 유형의 햅틱 피드백이 생성될 것인지를 결정하도록 구성되거나 프로그램된다. 결정 모듈(136)은, 시스템(100)에 이용가능한 입력 제스쳐 및 기능 정보, 및 대응하는 햅틱 효과의 라이브러리를 (있다면) 가지고 프로그램되어, 결정 모듈(136)이 대응하는 출력을 결정할 수 있게 할 수 있다. 전자 디바이스(110)에 의해 취해질 특정한 동작을 명령하는 신호를 전송하는 것 외에도, 결정 모듈(136)은 또한 신호를 햅틱 출력 디바이스 제어 모듈(138)에 출력하여 적절한 햅틱 효과가 사용자에게 제공되게 할 수 있다. 예를 들어, 커버(120)의 코너를 구부리는 것을 수반하는 입력 제스쳐는 전자 디바이스(110)가 서버로부터 전자메일을 검색하는 것에 대응할 수 있고, 햅틱 효과는 얼마나 많은 새로운 전자메일이 서버로부터 검색되었는지를 나타낼 수 있다.
햅틱 출력 디바이스 제어 모듈(138)은, 결정 모듈(136)에 의해 생성된 신호에 기초하여, 햅틱 출력 디바이스(180)에 출력할 햅틱 제어 신호를 결정하도록 구성되거나 프로그램된다. 햅틱 제어 신호를 결정하는 것은, 시스템(100)으로의 모든 입력에 기초하여, 햅틱 출력 디바이스(180)에 의해 생성될 햅틱 피드백의 진폭, 빈도, 지속기간 등을 포함하는 하나 이상의 파라미터를 결정하여 사용자에게 원하는 효과를 제공하는 것을 포함할 수 있다.
앞서 나타낸 바와 같이, 햅틱 출력 디바이스(180)는, 사용자가 입력 제스쳐를 수행하는 동안 또는 입력 제스쳐가 완료된 후에 햅틱 효과를 생성하는 데 이용될 수 있다. 햅틱 피드백은, 예를 들어, 진행중인 입력 제스쳐와 그 효과에 대한 정보를 제공할 수 있다. 햅틱 피드백은 또한, 입력 제스쳐가 수락되었다는 것을 확인시키는 데 이용될 수 있다.
실시예에서, 햅틱 피드백은, 사용자가 커버(120)를 이용하여 입력 제스쳐를 수행하는 동안 생성될 수 있다. 예를 들어, 실시예에서, 커버(120)는, 전자 디바이스(110)로부터의 벗겨내어질 때 벗겨냄에 저항하거나 현실적인 질감을 생성하도록 구성될 수 있다. 이것은, 예를 들어, 테이프의 감촉, 정적 인력, 힌지의 삐걱거림, 또는 목재 등의 재료가 구부러지는 질감을 복제할 수 있다. 실시예에서, 커버(120)는 물, 모래, 또는 기타의 재료를 모사하게끔 강성도를 변경하도록 구성될 수 있다. 실시예에서, 커버(120)는, 예를 들어, 정전 마찰 효과를 이용하여, 그 표면들 중 하나 또는 양쪽 모두에서 촉감을 생성하도록 구성될 수 있다.
햅틱 피드백은, 많은 가능한 입력 제스쳐들 중 어느 것이 사용자에 의해 제공되었는지를 확인시키는 데 이용될 수 있다. 상이한 동작은, 예를 들어, 그 엣지를 따른 상이한 위치들에서 커버(120)를 잡아당김으로써 트리거될 수 있고, 햅틱 질감은 이들 동작들 중 어느 것이 선택되었는지를 나타내는 데 이용될 수 있다.
햅틱 출력 디바이스(180)는 또한, 어느 입력 제스쳐가 수행될 수 있는지를 나타내거나 제약하는 데 이용될 수 있다. 예를 들어, 실시예에서, 커버(120)는, 연관된 기능이 이용가능하지 않을 때, 벗겨내기 등의 입력 제스쳐에 저항하도록 구성될 수 있다. 커버(120)는 또한, 특정한 콘텐트가 드러내지려고 할 때 등에서, 특정한 위치에서의 벗겨내기에 저항하도록 구성될 수 있다.
실시예에서, 커버(120)는, 도 1에 나타낸 작동된 힌지(180D)에 의한 특정한 주름(124)을 따른 접기를 허용하도록 구성될 수 있다. 접기는 응용에 따라 제약될 수 있어서, 예를 들어, 45도 접기만이 행해지는 것을 허용한다. 실시예에서, 커버(120)는 응용에 기초하여 특정한 각도에서 스크린에 대해 스냅되도록 강제될 수 있다. 실시예에서, 커버(120)는, 코너 구부리기 등의, 이용가능한 입력 제스쳐를 나타내도록 가시적 방식으로 변형되도록 구성될 수 있다.
햅틱 피드백은 다양한 햅틱 출력 디바이스들을 통해 전달될 수 있고, 이들 중 일부는 힌지(122)의 존재 등의 커버(120)의 고유 속성을 이용할 수 있다. 커버(120)는 전자 디바이스(110)의 전면 또는 배면에 위치하면서 햅틱 피드백을 전달하는 데 이용될 수 있다. 본 발명의 실시예에 따른 제3자 커버는, 전자 디바이스(110)가 햅틱 피드백을 생성하도록 구성되어 있지 않더라도 시스템(100)에 햅틱 피드백을 제공할 수 있다. 햅틱 피드백은, 커버(120)가 전자 디바이스(110)에 결합되는 곳이거나, 커버(120)의 폴드(124) 내에, 커버(120)의 힌지(122)를 통해 인가될 수 있다.
도 4a에 나타낸 실시예에서, DC 모터(410)는, 예를 들어, 힌지(122)에 위치할 수 있고, 전자 디바이스(110)에 대한 힌지(122) 및 그에 따라 커버(120)의 움직임을 제어한다. 도 4b에 나타낸 실시예에서, 하나 이상의 와이어(420)는 유사하게 힌지(122)의 양측을 잡아 당기는 데 이용될 수 있고 힌지(122)를 움직여 커버(120)가 전자 디바이스(110)에 대해 움직이게 한다. 실시예에서, DC 모터는 와이어(들)(420)를 단축하는 데 이용될 수 있다. 실시예에서, 와이어(들)(420)은 형상 기억 합금 또는 유사한 재료로부터 제작될 수 있고 함께 힌지(122)의 양 측을 잡아 당기게끔 수축하도록 구성될 수 있다. 실시예에서, 힌지(122)는, 커버(120)를 전자 디바이스(110)에 대해 회전하게 하는 것 대신에, 커버(120)를 전자 디바이스(110)에 대하여 측방향으로 움직이는 데 이용될 수 있다. 예를 들어, 도 4c에 개략적으로 나타낸 바와 같이, DC 모터 또는 보이스 코일(430)은, 예를 들어, 힌지(122) 내에서 작동되어 커버(120)를 이중 화살표로 나타낸 바와 같이 전자 디바이스(110)에 대해 측방향으로 밀 수 있다. 도 4a 내지 도 4c에 나타낸 형태들 중 임의의 형태의 햅틱 출력 디바이스를 가짐으로써, 커버(120)는 전자 디바이스(110)에 대해 힌지(122) 상에서 회전하거나 전자 디바이스(110)에 대해 힌지(122) 상에서 측방향으로 움직일 때 다양한 햅틱 효과를 생성할 수 있다. 일반적으로 도 5에서 500으로 표시된 바와 같은 이러한 햅틱 효과는, 저항, 질감, 멈춤쇠 등을 포함할 수 있다. 실시예에서, 햅틱 효과(500)는, 커버(120)가 전자 디바이스(110)로부터 화살표 방향으로 멀리 잡아당겨질 때 삐걱거리는 문을 여는 것 등의, 상이한 경험들에 맵핑될 수 있다.
상이한 메커니즘들은 커버(120)와 전자 디바이스(110) 사이에서 인력 또는 척력을 생성하는 데 이용될 수 있고, 커버(120)가 당겨져 열리는 것에 어떻게 반응하는지에 영향을 미친다. 도 6에 나타낸 바와 같이, 실시예에서, 공압 시스템(pneumatic system, 600)은, 예를 들어, 커버(120)의 내측 표면(126) 상의 마이크로밸브(610)를 개방할 수 있고 전자 디바이스(110)에 대해 마이크로밸브(610)를 통한 흡입력을 생성하는 펌프(620)를 이용할 수 있다. 실시예에서, 펌프(620)는 마이크로밸브(610)를 통해 공기 등의 가스를 밀어 커버(120)와 전자 디바이스(110) 사이에 척력을 생성하는 데 이용될 수 있다. 실시예에서, 유사하게 전자 디바이스(110) 상에 또는 커버(120)의 내측 부분 상에 전계가 생성되어 전자 디바이스(110)와 커버(120) 사이에 정전 인력 또는 척력을 생성할 수 있다. 도 7에 개략적으로 나타낸 실시예에서, 전자석(700)이 커버(120) 및/또는 전자 디바이스(110) 내에 임베딩될 수 있어서, 전자석(700)의 극성에 따라, 커버(120)와 전자 디바이스(110) 사이에 인력 또는 척력을 야기할 수 있다. 실시예에서, 예를 들어, 자기 스냅핑 메커니즘(magnetic snapping mechanism) 또는 자연 정전기력으로 인한 인력을 단절하기 위하여, 마이크로유체가 또한 이용되어 커버(120)의 내측 표면 상에 또는 전자 디바이스(110) 상에 작은 오목부(dimple)를 생성할 수 있다.
본 발명의 실시예에서, 햅틱 효과는, 도 8a 및 도 8b에 개략적으로 나타낸 바와 같이, 커버(120)의 강성도를 변경하는 형태일 수 있다. 실시예에서, 전기유동 또는 자기유동 유체가 커버(120) 내에 임베딩되어 그 강성도를 제어할 수 있다. 실시예에서, 명령시에 입자 재밍(particle jamming)이 커버(120)를 강성화하는 데 이용될 수 있다. 실시예에서, 커버(120)를 더욱 단단하게 하기 위하여 형상 기억 합금으로부터 제작된 와이어(800)가 강성화될 수 있거나 DC 모터로 작동된 와이어가 당겨질 수 있다. 도 8a는 가요성 상태의 커버(120)를 나타내고, 도 8b는 강성 또는 경성 상태의 커버(120)를 나타낸다.
도 9에 나타낸 실시예에서, 커버(120)는, 커버(120)가 닫힌 위치에 있을 때 전자 디바이스(110)와 대향하는 그 내측 표면(126) 상에 및/또는 외측 표면 상에 정전 마찰 디바이스(900)를 가질 수 있다. 도 9에서 910으로 표시되고 정전 마찰 디바이스(900)에 의해 생성되는 정전 마찰력 효과는, 커버(120)를 열 때 등의, 커버(120)가 조작될 때 느껴질 수 있다. 정전 마찰력 피드백은 또한, 커버(120)가 닫혀 있는 동안 전자 디바이스(110)의 상태 또는 디스플레이 스크린(112)의 콘텐트를 나타낼 수도 있다. 정전 마찰력 효과(910)는 또한, 커버(120)의 마찰 속성에, 그리고 그에 따라 커버(120)가 얼마나 용이하게 조작될 것인지에 영향을 미치는 데 이용될 수 있다.
도 10a, 10b 및 10c에 나타낸 본 발명의 실시예들의 구현에서, 전자 디바이스(110)는 전화 또는 태블릿일 수 있고, 사용자는 사용자만이 알고 있는 방식으로 커버(120)를 롤 오프(rolling off)함으로써 자신의 전화를 잠금해제할 수 있다. 사용자가, 도 10a, 10b 및 10c의 화살표들로 나타낸 바와 같은, 입력 제스쳐의 상이한 단계들을 완료하면, 사용자는 입력 제스쳐의 단계들을 확인시키는 햅틱 피드백을 수신할 수 있다.
도 11에 나타낸 본 발명의 실시예들의 구현에서, 사용자는 태블릿일 수도 있는 자신의 전자 디바이스(110)에 결합된 커버(120)를 접거나 약간 언롤(unroll)하여 태블릿의 스크린을 부분적으로 노출시켜 신중하고 은밀한 방식으로 착신 통보를 볼 수 있다. 커버(120) 내의 센서(들)은 커버(120)가 이 모드에 있을 때 입력에 이용되는 것을 허용할 수 있어서, 사용자는 커버(120)를 구부리거나 롤링하여 통보들을 스크롤하고 "엿보기 모드(peeking mode)"가 활성화되었다는 것을 나타내고 각각의 입력을 확인시키는 확인 햅틱 피드백을 수신할 수 있다.
본 발명의 실시예들의 구현에서, 사용자는 가요성 오버레이를 갖는 전자서적을 이용할 수 있다. 사용자는 오버레이의 코너들을 약간 구부려 전자서적의 다음 페이지로 넘어갈 수 있다. 사용자는 복수의 페이지들을 넘기기 위해 구부림 및 유지(bend and hold)를 이용할 수 있다. 사용자가 그렇게 할 때, 사용자는, 자신이 실제의 책을 조작하는 것을 떠올리게 하는 현실적인 햅틱 효과를 느낄 수 있다.
본 발명의 실시예들의 구현에서, 사용자는 자신의 데스크탑 컴퓨터 상에서 드로잉 애플리케이션을 이용할 수 있다. 컴퓨터의 모니터는, 소정의 동작이 적용되기 이전 및 이후에 사용자가 자신이 작업하고 있는 이미지를 엿보는 것을 허용하는 오버레이를 가질 수 있다. 사용자에게 플라스틱 아세테이트 시트의 정적 느낌을 떠올리게 하는 햅틱 효과가 생성될 수 있다. 동작을 미리볼 수 없을 때, 오버레이는 옵션이 이용가능하지 않다는 것을 명확히 표시하도록 벗기기(peeling)에 저항할 수 있다.
도 12에 나타낸 실시예에서, 전자 디바이스(110)의 양태를 제어하기 위해 커버(120)의 변형이 사용자에 의해 이용될 수 있다. 예를 들어, 사용자가 커버(120)의 코너를 휙 넘기면(flick), 전자 디바이스(110)의 디스플레이 스크린(112)은 디스플레이되고 있는 콘텐트들을 스크롤할 수 있다. 전자 디바이스(110)의 상이한 기능들을 제어하기 위해, 예를 들어, 커버(120)의 상이한 부분을 구부리거나 커버(120)를 비트는 등의 상이한 입력 제스쳐들이 이용될 수 있어서, 보통의 경성의 전자 디바이스(110)에 가요성 입력을 제공할 수 있다.
도 13은 본 발명의 실시예에 따른 방법(1300)을 나타낸다. 1310에서, 전자 디바이스(110)에 대한 커버(120)의 변형 및/또는 움직임을 포함하는 입력 제스쳐가 전술된 바와 같이 센서(170)에 의해 감지되거나 검출된다. 1320에서, 입력 제스쳐에 기초하여, 전술된 프로세서(130)에 의해, 전자 디바이스(110)가 수행할 동작이 결정된다. 1330에서, 입력 제스쳐 및/또는 전자 디바이스(110)가 수행할 동작에 기초하여 생성될 햅틱 효과가 프로세서(130)에 의해 결정된다. 1340에서, 전자 디바이스(110)가 수행할 동작이 프로세서(130)에 의해 개시된다. 1350에서, 입력 제스쳐의 감지 동안에 및/또는 이후에 햅틱 출력 디바이스(180)에 의해 햅틱 효과가 생성된다. 방법(1300)은 반복될 수 있다.
여기서 설명된 실시예들은 다수의 가능한 구현 및 예를 나타내며, 본 개시내용을 반드시 임의의 특정한 실시예로 제한하기 위한 것이 아니다. 본 기술분야의 통상의 기술자라면 이해하는 바와 같이 이들 실시예들에 대해 다양한 수정이 이루어질 수 있다. 이러한 임의의 수정은 본 개시내용의 사상과 범위 내에 포함되며 청구항들에 의해 보호되도록 의도된다.

Claims (22)

  1. 시스템으로서,
    디스플레이 스크린을 포함하는 전자 디바이스;
    상기 디스플레이 스크린을 덮도록 구성된 커버;
    상기 전자 디바이스에 대한 상기 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하도록 구성된 센서;
    상기 입력 제스쳐에 기초하여 상기 전자 디바이스가 수행할 동작을 결정하고, 상기 입력 제스쳐 및/또는 상기 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하며, 상기 동작을 개시하도록 구성된 프로세서; 및
    상기 햅틱 효과를 생성하도록 구성된 햅틱 출력 디바이스
    를 포함하는, 시스템.
  2. 제1항에 있어서, 상기 센서는, 구부림 센서, 광 센서, 압력 센서, 접촉 센서, 전위차계, 각도 센서, 각속도 센서, 가속도계, 및 자기 센서로 구성된 그룹으로부터 선택되는, 시스템.
  3. 제1항에 있어서, 상기 햅틱 출력 디바이스는 진동을 생성하도록 구성된 액츄에이터(actuator)를 포함하는, 시스템.
  4. 제3항에 있어서, 상기 커버는 상기 액츄에이터를 포함하는, 시스템.
  5. 제3항에 있어서, 상기 커버를 상기 전자 디바이스에 접속하는 힌지(hinge)를 더 포함하고, 상기 힌지는 상기 액츄에이터를 포함하는, 시스템.
  6. 제1항에 있어서, 상기 햅틱 출력 디바이스는 상기 커버 내에 임베딩되고, 상기 커버의 강성도(stiffness)를 제어하는 전기유동(electro-rheological) 또는 자기유동(magneto-rheological) 유체를 포함하는, 시스템.
  7. 제1항에 있어서, 상기 햅틱 출력 디바이스는 상기 커버의 표면에서 마찰 효과를 생성하도록 구성된 정전 마찰 디바이스(electrostatic friction device)를 포함하는, 시스템.
  8. 제7항에 있어서, 상기 커버의 표면은, 상기 커버가 상기 디스플레이 스크린을 덮을 때 상기 전자 디바이스와 대향하는, 시스템.
  9. 방법으로서,
    센서를 이용하여 전자 디바이스에 대한 상기 전자 디바이스용 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하는 단계;
    프로세서를 이용하여 상기 입력 제스쳐에 기초하여 상기 전자 디바이스가 수행할 동작을 결정하는 단계;
    상기 프로세서를 이용하여 상기 입력 제스쳐 및/또는 상기 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하는 단계;
    상기 프로세서를 이용하여 상기 전자 디바이스가 수행할 동작을 개시하는 단계; 및
    상기 입력 제스쳐의 감지 동안에 및/또는 이후에 햅틱 출력 디바이스를 이용하여 상기 햅틱 효과를 생성하는 단계
    를 포함하는, 방법.
  10. 제9항에 있어서, 상기 햅틱 효과는 상기 입력 제스쳐의 감지 동안에 생성되는, 방법.
  11. 제9항에 있어서, 상기 햅틱 효과는 상기 입력 제스쳐의 감지 이후에 생성되는, 방법.
  12. 제9항에 있어서, 상기 햅틱 효과는 상기 동작이 완료된 이후에 생성되어 상기 동작의 완료를 확인시키는, 방법.
  13. 제9항에 있어서, 상기 햅틱 효과는 상기 전자 디바이스로부터 커버를 벗겨내는 것(peeling off)에 저항하는 것을 포함하는, 방법.
  14. 제9항에 있어서, 상기 햅틱 효과는 상기 커버가 상기 전자 디바이스로부터 벗겨내어질 때 질감(texture)을 생성하는 것을 포함하는, 방법.
  15. 제9항에 있어서, 상기 햅틱 효과는 상기 커버의 강성도(stiffness)를 변경하는 것을 포함하는, 방법.
  16. 제9항에 있어서, 상기 햅틱 효과는, 상기 커버가 상기 전자 디바이스를 덮을 때 상기 전자 디바이스와 대향하는 상기 커버의 표면 상의 촉감(tactile sensation)을 포함하는, 방법.
  17. 제9항에 있어서, 상기 햅틱 효과는, 상기 커버가 상기 전자 디바이스를 덮을 때 상기 전자 디바이스와 대향하는 표면의 반대쪽의 상기 커버의 상부 표면 상의 촉감을 포함하는, 방법.
  18. 제9항에 있어서, 상기 동작이 개시될 수 있는지를 결정하는 단계를 더 포함하고, 상기 햅틱 효과는 상기 동작이 개시될 수 없을 때 상기 변형에 저항하는 것을 포함하는, 방법.
  19. 제9항에 있어서, 상기 햅틱 효과는 상기 커버의 적어도 하나의 주름을 따라 위치한 적어도 하나의 힌지(hinge)를 작동시켜 그 주름에서 상기 커버를 접는 것을 포함하는, 방법.
  20. 제9항에 있어서, 상기 햅틱 효과는 상기 동작에 기초하여 상기 전자 디바이스에 대한 미리결정된 각도로 상기 커버의 움직임을 제약하는 것을 포함하는, 방법.
  21. 전자 디바이스용 커버로서, 상기 커버는,
    상기 전자 디바이스에 대한 상기 커버의 변형 및/또는 움직임을 포함하는 입력 제스쳐를 감지하도록 구성된 센서; 및
    상기 입력 제스쳐에 기초하여 햅틱 효과를 생성하도록 구성된 햅틱 출력 디바이스
    를 포함하는, 전자 디바이스용 커버.
  22. 제21항에 있어서, 상기 입력 제스쳐에 기초하여 상기 전자 디바이스가 수행할 동작을 결정하고, 상기 입력 제스쳐 및/또는 상기 전자 디바이스가 수행할 동작에 기초하여 생성할 햅틱 효과를 결정하며, 상기 동작을 개시하도록 구성된 프로세서를 더 포함하는, 전자 디바이스용 커버.
KR1020160117893A 2015-09-18 2016-09-13 전자 디바이스용 커버의 변형에 응답하여 햅틱 효과를 제공하기 위한 시스템 및 방법 KR20170034340A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/858,148 2015-09-18
US14/858,148 US10013060B2 (en) 2015-09-18 2015-09-18 Systems and methods for providing haptic effects in response to deformation of a cover for an electronic device

Publications (1)

Publication Number Publication Date
KR20170034340A true KR20170034340A (ko) 2017-03-28

Family

ID=56939929

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160117893A KR20170034340A (ko) 2015-09-18 2016-09-13 전자 디바이스용 커버의 변형에 응답하여 햅틱 효과를 제공하기 위한 시스템 및 방법

Country Status (5)

Country Link
US (3) US10013060B2 (ko)
EP (1) EP3144770A1 (ko)
JP (1) JP2017059238A (ko)
KR (1) KR20170034340A (ko)
CN (1) CN106547348A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021066364A1 (ko) * 2019-09-30 2021-04-08 삼성전자 주식회사 햅틱 액츄에이터를 포함하는 전자 장치
KR20210072673A (ko) * 2019-12-06 2021-06-17 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 모바일 단말, 진동 제어 방법, 장치 및 저장 매체
US11513566B2 (en) 2019-03-14 2022-11-29 Samsung Electronics Co., Ltd. Electronic device including haptic actuator

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10571972B2 (en) * 2014-03-28 2020-02-25 Intel Corporation Rotation sensor device
US10013060B2 (en) 2015-09-18 2018-07-03 Immersion Corporation Systems and methods for providing haptic effects in response to deformation of a cover for an electronic device
US10236710B1 (en) * 2016-12-20 2019-03-19 Quirklogic, Inc. Stylus securing apparatus
CN107179828B (zh) * 2017-04-27 2020-12-18 南京车链科技有限公司 一种移动终端及其控制方法
US10437336B2 (en) * 2017-05-15 2019-10-08 Microsoft Technology Licensing, Llc Haptics to identify button regions
JP2018200522A (ja) * 2017-05-26 2018-12-20 レノボ・シンガポール・プライベート・リミテッド 電子機器
US10996755B2 (en) * 2018-02-28 2021-05-04 Google Llc Piezoelectric haptic feedback module
US10642318B1 (en) * 2018-09-14 2020-05-05 Apple Inc. Planar hinge assembly
US11556153B2 (en) * 2019-07-01 2023-01-17 Microsoft Technology Licensing, Llc Electrostatic clutch for active control of free hinge
GB2602316A (en) * 2020-12-23 2022-06-29 Asady Baback A communication aid for the disabled
DE102022122156A1 (de) 2022-09-01 2024-03-07 Hauke Reiser Stelleinrichtung

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3033533B2 (ja) * 1997-07-22 2000-04-17 日本電気株式会社 小型電子機器
US6297838B1 (en) 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US7289121B1 (en) 2000-03-31 2007-10-30 Autodesk, Inc. System for creating and modifying curves and surfaces
KR100769783B1 (ko) 2002-03-29 2007-10-24 가부시끼가이샤 도시바 표시 입력 장치 및 표시 입력 시스템
US7456823B2 (en) 2002-06-14 2008-11-25 Sony Corporation User interface apparatus and portable information apparatus
JP2005174006A (ja) 2003-12-11 2005-06-30 Canon Inc 表示装置
US20060238494A1 (en) 2005-04-22 2006-10-26 International Business Machines Corporation Flexible displays as an input device
US20070247422A1 (en) 2006-03-30 2007-10-25 Xuuk, Inc. Interaction techniques for flexible displays
GB0611452D0 (en) 2006-06-12 2006-07-19 Plastic Logic Ltd Page refreshing e-reader
US9823833B2 (en) 2007-06-05 2017-11-21 Immersion Corporation Method and apparatus for haptic enabled flexible touch sensitive surface
KR101345755B1 (ko) 2007-09-11 2013-12-27 삼성전자주식회사 휴대용 단말기의 조작제어장치 및 그 방법
DE102007048596A1 (de) 2007-10-10 2009-04-23 Vodafone Holding Gmbh Flexibles elektronisches Gerät und Verfahren zu dessen Steuerung
JP4909922B2 (ja) 2008-02-29 2012-04-04 株式会社日立製作所 可撓操作可能な情報表示端末装置、及び情報表示用インタフェース
US20100011291A1 (en) 2008-07-10 2010-01-14 Nokia Corporation User interface, device and method for a physically flexible device
US9459656B2 (en) 2008-10-12 2016-10-04 Samsung Electronics Co., Ltd. Flexible devices and related methods of use
KR101521219B1 (ko) 2008-11-10 2015-05-18 엘지전자 주식회사 플렉서블 디스플레이를 이용하는 휴대 단말기 및 그 제어방법
KR20100065418A (ko) 2008-12-08 2010-06-17 삼성전자주식회사 가요성 표시부를 가지는 단말기 및 그의 데이터 표시 방법
WO2011011552A1 (en) * 2009-07-22 2011-01-27 Immersion Corporation Interactive touch screen gaming metaphors with haptic feedback across platforms
FR2955813B1 (fr) * 2010-02-02 2015-05-22 Dav Module de retour haptique destine a etre integre dans un vehicule automobile pour dispositif nomade et dispositif de commande correspondant
JP2011242386A (ja) 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体
US8462106B2 (en) 2010-11-09 2013-06-11 Research In Motion Limited Image magnification based on display flexing
US10120446B2 (en) * 2010-11-19 2018-11-06 Apple Inc. Haptic input device
US20120169609A1 (en) 2010-12-29 2012-07-05 Nokia Corporation Methods and apparatuses for facilitating content navigation
US8587539B2 (en) 2011-01-21 2013-11-19 Blackberry Limited Multi-bend display activation adaptation
US20120260220A1 (en) 2011-04-06 2012-10-11 Research In Motion Limited Portable electronic device having gesture recognition and a method for controlling the same
US9448713B2 (en) 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
US20130009882A1 (en) 2011-07-07 2013-01-10 Nokia Corporation Methods and apparatuses for providing haptic feedback
US9729685B2 (en) * 2011-09-28 2017-08-08 Apple Inc. Cover for a tablet device
KR101602663B1 (ko) 2011-10-10 2016-03-14 한국전자통신연구원 촉각 피드백을 제공하기 위한 전자기기용 케이스 및 그 구동 방법
US9007300B2 (en) 2011-10-14 2015-04-14 Blackberry Limited Method and system to control a process with bend movements
KR101350543B1 (ko) * 2011-10-18 2014-01-14 삼성전기주식회사 햅틱 피드백 디바이스 및 휴대용 전자기기
US9411423B2 (en) 2012-02-08 2016-08-09 Immersion Corporation Method and apparatus for haptic flex gesturing
US9465520B2 (en) 2012-05-01 2016-10-11 Jorge Mestre Messaging device
US9035872B2 (en) * 2012-06-08 2015-05-19 Apple Inc. Detection system and method between accessory and electronic device
US8878637B2 (en) * 2012-08-08 2014-11-04 Jared A. Sartee Accessory device
US10139868B2 (en) * 2012-09-21 2018-11-27 Apple Inc. Cover for electronic device
JP2014067291A (ja) 2012-09-26 2014-04-17 Toshiba Corp 情報処理装置、入力装置及び情報処理方法
JP2014167772A (ja) * 2013-02-28 2014-09-11 Nikon Corp 触覚呈示装置および電子機器
KR102060756B1 (ko) * 2013-03-14 2019-12-30 삼성전자주식회사 보호 케이스를 갖는 전자 장치 및 그 운용 방법
US9524030B2 (en) * 2013-04-26 2016-12-20 Immersion Corporation Haptic feedback for interactions with foldable-bendable displays
KR102265083B1 (ko) 2013-08-22 2021-06-15 삼성전자주식회사 가변강성 필름, 가변강성 유연 디스플레이 및 이의 제조 방법
US9639158B2 (en) * 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects
KR20150073747A (ko) * 2013-12-23 2015-07-01 삼성전자주식회사 햅틱 피드백을 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체.
US10095320B2 (en) * 2014-04-30 2018-10-09 Htc Corporation Accessory and control method
CN204498194U (zh) * 2015-04-23 2015-07-22 曹再平 一种多功能手机套
US10013060B2 (en) 2015-09-18 2018-07-03 Immersion Corporation Systems and methods for providing haptic effects in response to deformation of a cover for an electronic device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11513566B2 (en) 2019-03-14 2022-11-29 Samsung Electronics Co., Ltd. Electronic device including haptic actuator
US11907024B2 (en) 2019-03-14 2024-02-20 Samsung Electronics Co., Ltd. Electronic device including haptic actuator
WO2021066364A1 (ko) * 2019-09-30 2021-04-08 삼성전자 주식회사 햅틱 액츄에이터를 포함하는 전자 장치
US11758032B2 (en) 2019-09-30 2023-09-12 Samsung Electronics Co., Ltd. Electronic device comprising haptic actuator
KR20210072673A (ko) * 2019-12-06 2021-06-17 베이징 시아오미 모바일 소프트웨어 컴퍼니 리미티드 모바일 단말, 진동 제어 방법, 장치 및 저장 매체

Also Published As

Publication number Publication date
US10013060B2 (en) 2018-07-03
US20170083092A1 (en) 2017-03-23
EP3144770A1 (en) 2017-03-22
US10310614B2 (en) 2019-06-04
CN106547348A (zh) 2017-03-29
US20180321752A1 (en) 2018-11-08
US20190243453A1 (en) 2019-08-08
US10466793B2 (en) 2019-11-05
JP2017059238A (ja) 2017-03-23

Similar Documents

Publication Publication Date Title
US10466793B2 (en) Systems and methods for providing haptic effects in response to deformation of a cover for an electronic device
US10048758B2 (en) Haptic feedback for interactions with foldable-bendable displays
US10466791B2 (en) Interactivity model for shared feedback on mobile devices
JP6431126B2 (ja) モバイルデバイス上での共有されたフィードバックのための双方向性モデル
CN104123035B (zh) 用于支持触觉的可变形表面的系统和方法
US20120223880A1 (en) Method and apparatus for producing a dynamic haptic effect
JP2016520915A (ja) 触覚セルのアレイを用いた有形のユーザ・インターフェース・インタラクション及びジェスチャのシミュレーション
Farooq et al. Haptic user interface enhancement system for touchscreen based interaction