KR20150104808A - 피드백을 출력하는 전자 장치 및 방법 - Google Patents

피드백을 출력하는 전자 장치 및 방법 Download PDF

Info

Publication number
KR20150104808A
KR20150104808A KR1020140026603A KR20140026603A KR20150104808A KR 20150104808 A KR20150104808 A KR 20150104808A KR 1020140026603 A KR1020140026603 A KR 1020140026603A KR 20140026603 A KR20140026603 A KR 20140026603A KR 20150104808 A KR20150104808 A KR 20150104808A
Authority
KR
South Korea
Prior art keywords
unit
feedback signal
input
handwriting
feedback
Prior art date
Application number
KR1020140026603A
Other languages
English (en)
Inventor
오해석
김정연
박대범
방래혁
최규철
양철형
위태환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140026603A priority Critical patent/KR20150104808A/ko
Priority to US14/584,478 priority patent/US20150253851A1/en
Priority to CN201510101094.6A priority patent/CN104898825A/zh
Publication of KR20150104808A publication Critical patent/KR20150104808A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 개시는 입력되는 필기에 대응하여 피드백을 출력하는 전자 장치 및 방법에 관한 것으로서, 필기 궤적에 따라 피드백을 출력하는 방법에 있어서, 스크린 상에 필기 궤적을 입력받는 동작과, 상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하는 동작과, 상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하는 동작과, 상기 피드백 신호를 상기 필기 궤적에 대응하여 출력하는 과정을 포함한다.

Description

피드백을 출력하는 전자 장치 및 방법{ELECTRONIC DEVICE AND METHOD FOR OUTPUTING FEEDBACK}
본 개시는 입력되는 필기에 대응하여 피드백을 출력하는 전자 장치 및 방법에 관한 것이다.
최근 전자 장치에서 제공하는 다양한 서비스 및 부가 기능들은 점차 확대되고 있다. 이러한 전자 장치의 효용 가치를 높이고 사용자들의 다양한 욕구를 만족시키기 위해서 전자 장치에서 실행 가능한 다양한 애플리케이션들이 개발되고 있다.
이에 따라 최근 스마트 폰 및 태블릿 PC와 같은 전자 장치 내에는 적어도 수 개에서 수백 개의 애플리케이션들이 저장될 수 있다. 그리고, 상기 애플리케이션들 각각을 실행시키기 위한 객체들(또는 단축 아이콘), 또는 손가락이나 입력 유닛을 통해 필기를 입력할 수 있는 노트, 메모장, 다이어리와 같은 필기 가능한 애플리케이션들이 전자 장치의 스크린 상에 표시된다. 이에 따라 사용자는 스크린 상에 표시된 단축 아이콘들 중 어느 하나를 터치하거나 필기를 입력함으로써 원하는 애플리케이션을 전자 장치에서 실행시키거나 또는 필기 컨텐츠를 작성할 수 있다.
이와 같이, 전자 장치에서 필기를 입력하는 경우 출력되는 사운드는 입력 유닛 또는 손가락이 스크린에서 이동이 감지될때 기 매핑된 단일의 사운드를 출력한다. 이러한 단일의 사운드는 필기의 속도, 진행 방향 및 압력에 상관없이 동일한 사운드를 출력하거나 마찬가지로 진동 출력 역시 동일한 진동으로 피드백을 출력한다.
상기한 바와 같이 종래의 피드백 출력은 사용자가 필기를 하고 있다는 행위 자체만을 인지할 수 있도록 사운드 또는 진동으로 피드백을 제공하기 때문에, 사용자는 어떻게 필기를 하고 있는가에 대한 적응적인 피드백을 제공되지 못하였다. 이에 따라, 사용자는 단순한 일차원적인 사용자 경험을 느낄 수 밖에 없는 단조로움이 있었다.
따라서, 터치 입력이 발생되는 경우, 또는 필기 입력이 발생되는 경우 진행 방향, 속도, 및 압력 중 적어도 하나를 이용한 필기 및 진동 중 적어도 하나의 피드백을 생성하여 출력함으로써 사용자로 하여금 보다 구체적이고 다양한 피드백을 느낄 수 있고, 사용자가 전자 장치를 조작함에 따라 이에 대응되는 조작감을 느낄 수 있는 필요성이 있다.
따라서 본 발명의 다양한 실시예는 입력되는 필기에 대응하여 피드백을 출력하는 전자 장치 및 방법을 제공한다.
상술한 바를 달성하기 위해 본 발명의 일 실시예는 필기 궤적에 따라 피드백을 출력하는 방법에 있어서, 스크린 상에 필기 궤적을 입력받는 동작과, 상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하는 동작과, 상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하는 동작과, 상기 피드백 신호를 상기 필기 궤적에 대응하여 출력하는 동작을 포함할 수 있다.
본 발명의 일 실시예는 적어도 하나의 지정된(specified) 단위 피드백 신호 중 상기 각 좌표축에 대응하는 단위 피드백 신호를 호출하는 동작을 더 포함할 수 있다.
본 발명의 일 실시예는 상기 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력하거나 또는 합성하여 출력할 수 있다.
본 발명의 일 실시예에 따른 피드백 신호는 진폭 및 주파수 중 적어도 하나가 조정되어 출력될 수 있다.
본 발명의 일 실시예에 따른 각 좌표축에 대응하는 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함할 수 있다.
본 발명의 일 실시예에 따른 제1 단위 피드백 신호와 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함할 수 있다.
본 발명의 일 실시예에 따른 상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하되, 상기 복수의 피드백 신호는 상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경하고, 상기 제2 좌표축에 대응하여 상기 피드백 신호의 주파수를 변경하는 동작을 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 상기 피드백 신호는 미리 결정된 단위 시간 마다 측정된 성분 벡터의 길이에 따라 생성될 수 있다.
또한, 본 발명의 일 실시예에 따른 상기 피드백 신호는 상기 필기 궤적의 진행 방향, 속도 및/또는 압력 중 적어도 하나에 따라서 다를 수 있다.
본 발명의 일 실시예는 상기 입력의 진행 방향에 따라 상기 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하는 동작과, 상기 추출된 패턴을 합산하는 동작을 더 포함할 수 있다.
본 발명의 일 실시예에 따른 상기 피드백 신호는 상기 필기 궤적의 입력에 대응하여 실시간으로 출력될 수 있다.
또한, 본 발명의 일 실시예에 따른 상기 피드백 신호는 상기 필기 궤적의 속도 및 압력 중 적어도 하나에 비례하거나 또는 반비례하여 출력될 수 있다.
본 발명의 일 실시예는 상기 전자 장치에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신하는 동작을 더 포함할 수 있다.
또한, 상술한 바를 달성하기 위해 본 발명의 다른 실시예는 필기 궤적을 입력받기 위한 스크린, 상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하고, 상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하는 제어부, 상기 피드백 신호를 다른 장치로 송신하기 위한 통신부, 상기 피드백 신호를 상기 필기 궤적에 대응하여 출력하는 출력부를 포함한다.
본 발명의 일 실시예는 상기 필기 궤적의 진행 방향, 속도 및 압력 중 적어도 하나에 각각 대응하는 각 좌표축 별 지정된(specified) 단위 피드백 신호를 저장하기 위한 저장부를 더 포함하되, 상기 제어부는 상기 단위 피드백 신호를 상기 필기 궤적에 대응하여 호출하도록 설정될 수 있다.
본 발명의 다른 실시예에 따른 제어부는 상기 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력하거나 또는 상기 각 좌표축 별로 생성된 피드백 신호를 합성하여 출력하도록 설정될 수 있다.
본 발명의 다양한 실시예에 따른 피드백은 청각적 피드백, 촉각적 피드백 및 시각적 피드백 중 적어도 하나를 포함한다.
또한, 상술한 바를 달성하기 위해 본 발명의 일 실시예에 따른 입력 유닛은 전자 장치와 기능적으로 연결되어 상기 전자 장치로부터 피드백 신호를 수신하기 위한 근거리 통신부, 상기 피드백 신호를 제어하기 위한 제어부, 및 상기 피드백 신호를 출력하기 위한 출력부를 포함할 수 있다.
또한, 상술한 바를 달성하기 위해 본 발명의 다른 실시예는 전자 장치를 이용하여 스크린을 제어하는 방법에 있어서, 상기 스크린을 통하여 사용자로부터 입력을 획득하는 동작, 상기 입력의 이동 방향, 속도 또는 압력 중 적어도 하나에 기반하여 상기 입력에 대응하는 적어도 하나의 입력 속성을 결정하는 동작, 및 상기 적어도 하나의 입력 속성에 기반하여 결정된 피드백 신호를 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 출력하는 동작을 포함하되, 상기 적어도 하나의 입력 속성이 제1 속성인 경우에는 제1 피드백 신호를 제공하고, 상기 적어도 하나의 입력 속성이 제2 속성인 경우에는 제2 피드백 신호를 제공하는 동작을 포함할 수 있다.
본 발명의 다른 실시예는 적어도 하나의 지정된(specified) 단위 피드백 신호 중 각 좌표축에 대응하는 단위 피드백 신호를 호출하는 동작을 더 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 적어도 하나의 입력 속성은, 제1 입력 속성 및 제2 입력 속성을 포함하고, 상기 출력하는 동작은, 상기 제1 입력 속성 및 상기 제2 입력 속성 각각에 대응하는 피드백 신호를 개별적으로 복수의 신호로서 출력하거나 또는 조합하여 하나의 신호로서 출력하는 동작을 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 피드백 신호는 상기 적어도 하나의 입력 속성에 따라 진폭 또는 주파수 중 적어도 하나가 조정되어 출력될 수 있다.
본 발명의 다른 실시예에 따른 상기 각 좌표축에 대응하는 상기 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 제1 단위 피드백 신호와 상기 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하되, 상기 피드백 신호는, 상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경하고, 상기 제2 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 주파수를 변경하는 방법을 포함할 수 있다.
본 발명의 다른 실시예에 따른 상기 피드백 신호의 진폭은, 상기 입력의 속도 및 압력 중 적어도 하나에 비례하거나 또는 반비례하여 출력되는 동작을 포함할 수 있다.
본 발명의 다른 실시예는 상기 입력의 진행 방향에 따라 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하는 동작과, 상기 추출된 패턴을 합산하는 동작을 포함할 수 있다.
본 발명의 다른 실시예는 상기 전자 장치에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신하는 동작을 더 포함할 수 있다.
본 발명의 다양한 실시예에 따르면, 입력되는 필기에 대응하여 피드백을 출력하는 전자 장치 및 방법을 제공함으로써 사용자에게 편의성을 제공할 수 있다.
또한, 본 발명의 일 실시예는 입력되는 필기의 속성에 따라 피드백을 출력함으로써 사용자는 다양한 피드백을 제공받을 수 있다.
또한, 본 발명의 다른 실시예는 스크린 상에 필기 궤적을 입력받고, 상기 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할하고, 상기 각 성분 벡터에 대한 피드백 신호를 생성하고, 상기 생성된 피드백 신호를 출력함으로써 한 차원 높은 사용자 경험을 제공할 수 있다.
또한, 본 발명의 다른 실시예는 입력되는 필기의 속도 및 압력 중 적어도 하나를 측정하고, 측정된 속도 및 압력 중 적어도 하나에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하여 입력되는 필기에 대응하여 출력함으로써 다양한 시각적, 촉각적 또는 청각적인 피드백을 제공할 수 있다.
도 1은 본 발명의 다양한 실시예에 따른 전자 장치를 도시한 예시도.
도 2는 본 발명의 일 실시예에 따른 입력 유닛을 도시한 예시도.
도 3은 본 발명의 일 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 나타낸 순서도.
도 4는 본 발명의 다른 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 나타낸 순서도.
도 5는 본 발명의 또 다른 실시예에 따른 스크린 상에 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 나타낸 순서도.
도 6은 본 발명의 다양한 실시예에 따른 패턴의 파형을 나타낸 예시도.
도 7a는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 단위 시간 당 성분 벡터로 분할한 예시도.
도 7b는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 X축의 단위 벡터로 분할한 예시도.
도 7c는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 Y축의 단위 벡터로 분할한 예시도.
도 8a는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 설정된 파형을 나타낸 예시도.
도 8b는 본 발명의 다양한 실시 예에 따른 Y축의 단위 벡터에 설정된 파형을 나타낸 예시도.
도 8c는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산하는 과정을 나타낸 예시도.
도 8d는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산한 결과를 나타낸 예시도.
도 9는 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 속도에 대응하여 피드백을 출력하는 과정을 나타낸 순서도.
도 10은 본 발명의 일 실시예에 따른 스크린상에 입력되는 필기의 속도에 따라 출력되는 패턴을 나타낸 예시도.
도 11은 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 압력에 대응하여 피드백을 출력하는 과정을 나타낸 순서도.
도 12는 본 발명의 일 실시예에 따른 스크린상에 입력되는 필기의 압력에 따라 출력되는 패턴을 나타낸 예시도.
도 13은 본 발명의 일 실시예에 따른 필기 궤적에 대응하여 피드백을 다른 장치로 송신하는 과정을 나타낸 순서도.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하여 상세하게 설명한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대한 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 사용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 다양한 실시예에 따른 전자 장치를 도시한 예시도이다.
도 1을 참조하면, 전자 장치(100)는 통신부(140), 입/출력부(150), 커넥터(미도시), 및 이어폰 연결잭(미도시) 중 적어도 하나를 이용하여 외부 장치(도시되지 아니함)와 연결될 수 있다. 본 발명의 일 실시예에 따른 전자 장치는 데이터 송수신과 음성 및 영상 통화가 가능한 이동 단말을 포함하며 적어도 하나의 스크린이 구비될 수 있다. 이러한, 전자 장치는 스마트 폰, 태블릿 PC, 3D-TV, 스마트 TV, LED TV, LCD TV, 테이블 PC등을 포함 할 수 있으며 이외도 주변 기기 또는 원거리에 위치한 다른 단말과 통신할 수 있는 적어도 하나 이상의 스크린이 구비된 모든 기기를 포함할 수 있다. 이러한, 외부 장치는 상기 전자 장치(100)에 탈착되어 유선으로 연결 가능한 이어폰(Earphone), 외부 스피커(External speaker), USB(Universal Serial Bus) 메모리, 충전기, 크래들/도크(Cradle/Dock), DMB 안테나, 모바일 결제 관련 장치, 건강 관리 장치(혈당계 등), 게임기, 자동차 네비게이션 장치 등 다양한 장치들을 포함할 수 있다. 또한 상기 외부 장치는 무선으로 연결 가능한 블루투스 통신 장치, NFC(Near Field Communication) 장치 및 WiFi Direct 통신 장치, 무선 액세스 포인트(AP, Access Point)를 포함할 수 있다. 그리고, 전자 장치는 유선 또는 무선을 이용하여 다른 장치, 예컨데, 휴대 단말, 스마트폰, 태블릿 PC, 데스크탑 PC, 디지타이저, 입력 장치, 카메라 및 서버와 연결될 수 있다.
도 1을 참조하면, 전자 장치(100)는 적어도 하나의 스크린(120) 및 적어도 하나의 스크린 컨트롤러(130)를 포함할 수 있다. 또한, 전자 장치(100)는 스크린(120), 스크린 컨트롤러(130), 통신부(140), 입/출력부(150), 전원 공급부(160) 및 저장부(170) 중 적어도 하나를 포함한다.
전자 장치(100)는 사용자에게 다양한 서비스(예, 통화, 문서 작성, 그림 그리기, 데이터 전송, 방송, 사진촬영, 문자열 입력 등)에 대응되는 유저 인터페이스를 제공하는 적어도 하나의 스크린(120)을 포함할 수 있다. 각각의 스크린은 입력 유닛 및 손가락 중 적어도 하나를 이용한 입력을 인식하는 펜 인식 장치(121) 및 손가락 및 입력 유닛 중 적어도 하나의 터치를 인식하는 터치 인식 장치(122) 중 적어도 하나를 구비할 수 있으며, 이러한 펜 인식 장치(121) 및 터치 인식 장치(122)는 펜 인식 패널 및 터치 패널로 각각 칭할 수도 있다. 이러한, 각각의 스크린은 유저 인터페이스에 입력되는 적어도 하나의 터치에 대응되는 아날로그 신호를 해당 스크린 컨트롤러로 전송할 수 있다. 이와 같이, 전자 장치(100)는 복수의 스크린을 구비할 수 있는데, 각각의 스크린 별로 터치 또는 호버링에 대응되는 아날로그 신호를 수신하는 스크린 컨트롤러가 구비될 수 있다. 이러한, 각각의 스크린은 힌지의 연결을 통한 복수의 하우징에 각각 연결되거나 또는 복수의 스크린들이 힌지 연결 없이 하나의 하우징에 위치할 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치(100)는 상술한 바와 같이, 적어도 하나의 스크린을 구비할 수 있으며, 이하에서는 설명 편의상 하나의 스크린의 경우에 대해서 설명한다.
제어부(110)는 CPU, 전자 장치(100)의 제어를 위한 제어 프로그램이 저장된 롬(ROM) 및 전자 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 전자 장치(100)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(RAM)을 포함할 수 있다. 그리고, CPU는 싱글 코어, 듀얼 코어, 트리플 코어, 또는 쿼드 코어를 포함할 수 있다.
또한, 제어부(110)는 전자 장치(100)를 전반적으로 제어하며 스크린(120), 펜 인식 장치(121), 터치 인식 장치(122), 스크린 컨트롤러(130), 통신부(140), 입/출력부(150), 전원 공급부(160) 및 저장부(170) 중 적어도 하나를 제어할 수 있다.
제어부(110)는 스크린(120) 상에 다양한 객체들, 입력되는 문자열 또는 작성되는 필기에 의한 궤적을 디스플레이할 수 있으며, 다양한 입력 유닛에 의해 어느 하나의 객체에 근접함에 따른 호버링 또는 터치가 인식되는지 판단하고, 호버링 또는 터치가 발생한 위치에 대응하는 객체를 식별할 수 있으며, 호버링 또는 터치가 발생되는 스크린(120)상의 지점을 파악할 수 있다. 또한, 제어부(110)는 전자 장치(100)로부터 입력 유닛까지의 높이와, 높이에 따른 호버링 입력 이벤트를 감지할 수 있는데, 이러한, 호버링에 의한 입력 이벤트는 입력 유닛에 형성된 버튼 눌림, 입력 유닛에 대한 두드림, 입력 유닛이 미리 정해진 속도보다 빠르게 이동함, 객체에 대한 터치 중 적어도 하나를 포함할 수 있다.
이러한, 제어부(110)는 통신부(140)에 구비된 서브통신부(미도시) 및 무선랜부(미도시) 중 적어도 하나를 통해서 인접한 통신 장치 또는 원격에 위치한 통신 장치와 통신할 수 있고, 인터넷 망을 통해서 이미지, 이모티콘, 사진 등 다양한 데이터를 수신 제어할 수 있고, 입력 유닛과 통신할 수 있다. 이러한 통신은 제어 신호의 송수신을 이용하여 이루어질 수 있다.
또한, 본 발명의 다양한 실시예에 따른 제어부(110)는 스크린(120) 또는 전자 장치(100)의 외관에 터치 또는 호버링의 입력에 대응하여 전자 장치(100)의 진동 및 소리 중 적어도 하나의 피드백을 제어하여 출력할 수 있다. 또한, 제어부(110)는 전자 장치(100)의 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나를 제어하여 출력할 수 있다. 제어부(110)는 스크린(120) 또는 전자 장치(100)의 외관에 구성된 홈 버튼(미도시), 메뉴 버튼(미도시) 및 뒤로 가기 버튼(미도시)에 입력되는 적어도 하나의 입력에 대응하여 미리 설정된 세기의 진동 및 사운드 중 적어도 하나를 출력할 수 있다. 또는 제어부(110)는 입력되는 명령에 대응하여 새로운 진동 및 새로운 사운드 중 적어도 하나를 생성하여 출력할 수 있다. 또한, 제어부(110)는 스크린(120) 상의 입력에 대응하여 시각적 피드백, 촉각적 피드백 및 청각적 피드백 중 적어도 하나를 출력할 수 있다. 그리고, 제어부(110)는 사용자로부터 입력되는 터치 입력 또는 호버링 입력의 유형 또는 속성을 분석할 수 있다. 스크린(120) 상에 필기를 입력받기 위해 디스플레이되는 필기 애플리케이션을 통해서 사용자가 필기를 입력하는 경우의 입력 유형은 필기가 시작됨을 알 수 있는 개시 입력, 필기가 끝남을 알 수 있는 해제 입력 그리고, 상기 개시 입력과 해제 입력 사이에 실질적인 필기가 이루어지는 이동 입력을 포함한다. 그리고, 본 발명의 다양한 실시예에 따른 필기를 입력 받는 필기 애플리케이션은 입력 유닛 및 손가락 중 적어도 하나를 이용하여 입력되는 문자, 단어, 문자열 및 그림 중 적어도 하나를 입력 받아서 스크린에 디스플레이할 수 있는 메모장, 일기장, 일정 기록부 등 다양한 문서 작성이 가능한 애플리케이션을 포함한다.
또한, 본 발명의 일 실시예에 따른 제어부(110)는 입력되는 필기의 속성에 따라 피드백을 출력할 수 있다. 제어부(110)는 입력되는 필기의 궤적에 따라 피드백을 출력할 수 있다. 또한, 제어부(110)는 상기 필기의 진행 방향, 속도 및 압력 중 적어도 하나를 측정하고, 측정 결과에 대응하여 서로 다른 세기를 갖는 사운드 및 진동 중 적어도 하나를 상기 입력에 대응하여 출력할 수 있다. 또한, 제어부(110)는 스크린 상에 필기 애플리케이션을 통해서 입력되는 필기의 속성에 따라서 적어도 하나의 피드백을 생성하여 출력할 수 있다. 이러한 속성은 필기의 진행 방향, 속도 및 압력 중 적어도 하나를 포함한다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 전자 장치(100)에 구비된 카메라(미도시)를 통해 촬영되는 필기의 궤적을 통해서 필기의 궤적에 대한 각각의 좌표축의 단위 벡터 및/또는 성분 벡터에 대응되는 필기 작성이 발생되는 사운드의 녹음 상황을 스크린(120) 상에 디스플레이할 수 있다. 이를 통해, 제어부(110)는 촬영되는 필기의 단위 벡터 또는 성분 벡터와 이에 대응되는 사운드를 매핑할 수 있으며, 매핑된 결과는 저장부(170)에 저장될 수 있다. 그리고, 제어부(110)는 카메라(미도시)를 통해 촬영되는 필기의 궤적을 파악하고, 필기의 궤적을 실시간 또는 비실시간으로 좌표계로 매핑시킬 수 있다. 제어부(110)는 필기의 궤적이 촬영되면, 시간순으로 촬영된 궤적에 대응하는 필기를 필기 애플리케이션을 통해 디스플레이할 수 있다. 제어부(110)는 촬영된 필기의 궤적이 좌표계로의 매핑에 대응하여 필기의 진행 방향 및 속도 중 적어도 하나를 분석하고 분석 결과를 통해 피드백을 생성하여 저장하거나 또는 출력할 수 있다. 또한, 제어부(110)는 카메라(미도시)를 이용해 촬영되는 필기를 광학 문자 인식(Optical Character Recognition: OCR) 기능을 이용하여 촬영된 필기를 인식하고, 인식된 필기의 진행 방향 또는 획 방향과 촬영시 녹음된 사운드를 조합할 수 있다. 그리고, 제어부(110)는 인식된 필기의 진행 방향 또는 획 방향과 촬영시 녹음된 사운드를 조합하여 샘플링을 수행하고, 촬영된 필기의 단위 벡터에 대응되는 시각적 피드백, 촉각적 피드백, 청각적 피드백을 생성하여 저장부(170)에 저장하거나 입/출력부(150)를 통해 출력할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 필기에 대응하여 샘플링이 완성된 경우, 완성된 샘플링에 대응되는 필기를 저장부(170)로부터 추출하여 스크린(120)에 디스플레이할 수 있다. 또한, 제어부(110)는 전자 장치(100)의 기울림 정도를 파악하여 입력되는 필기에 의해 생성되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 피드백을 변조할 수 있다. 이러한 변조된 적어도 하나의 피드백은 전자 장치(100)의 기울림 정도에 따라 다를 수 있다. 예를 들어, 전자 장치(100)가 기울어져 있는 경우, 제어부(110)는 기울어진 정도를 파악할 수 있다. 그리고, 입력되는 필기에 대응하여 출력되는 피드백은 동일한 필기를 입력하여도 전자 장치(100)가 기울어져 있지 않는 경우에 출력되는 피드백과는 다를 수 있다. 뿐만 아니라, 제어부(110)는 전자 장치(100)의 이동 상태에 따라서도 서로 다른 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 피드백을 출력할 수 있다.
또한, 제어부(110)는 전자 장치(100)의 외관에 구비될 수 있는 날씨를 분석할 수 있는 센서를 통해서 날씨를 파악하고, 입력되는 필기에 의해 생성되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 피드백을 파악된 날씨를 적용하여 변조할 수 있다. 예를 들어, 날씨가 흐릴 경우 출력되는 청각적 피드백은 날씨가 맑은 경우보다 저주파수이거나 고주파수일 수 있다.
그리고, 제어부(110)는 측정 결과에 따라서 출력되는 세기를 측정 결과에 비례 또는 반비례로 조절하여 출력할 수 있다.
또한, 필기를 입력받는 필기 애플리케이션을 2인 이상의 사용자가 함께 사용하는 경우, 제어부(110)는 필기 애플리케이션에 입력되는 각각의 사용자에 의한 입력 또는 필기를 구분하고, 필기 위치, 입력 시간, 입력된 지점, 전자 장치의 놓여진 상태 등을 분석하여 어떠한 필기가 메인 사용자가 작성한 필기이고 어떠한 필기가 보조 사용자가 작성한 필기인지 판단할 수 있다. 그리고, 제어부(110)는 필기 애플리케이션에 2인 이상의 사용자가 동시에 필기를 입력하여도, 각각의 사용자가 입력하는 필기의 단위 벡터 또는 성분 벡터를 분석하여 분석 결과에 대응되는 각각의 사용자가 입력하는 필기에 대응되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나를 출력할 수 있다 또한, 제어부(110)는 다른 사용자(예: 보조 사용자)에 의해 입력되는 필기의 속성을 분석하고, 분석 결과에 대응되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나를 출력한다. 이 경우, 다른 사용자에 의해 입력되는 필기에 대응하여 출력되는 피드백은 제어부(110)의 제어하에 자신(예: 주 사용자)이 입력하는 필기에 대응하여 출력되는 피드백보다 적은 진동 또는 적은 사운드로 출력될 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린(120) 상에 입력되는 필기의 속성을 분석하고 이에 대응되는 피드백을 출력할 수 있다. 제어부(110)는 스크린(120) 상에 입력되는 필기를 감지하고, 감지된 필기의 진행 방향, 속도 및 압력 중 적어도 하나를 이용하여 피드백을 생성하고, 생성된 피드백을 입/출력부(150)을 통해 출력할 수 있다. 그리고, 제어부(110)는 가상의 키패드를 통해 입력되는 텍스트에 대응하여 피드백을 출력할 수 있고, 키패드를 통한 텍스트 입력 도중에 손필기가 입력되는 경우에도 손필기에 의한 입력을 필기 애플리케이션이 디스플레이할 수 있고, 이에 대응하여 피드백을 출력할 수 있다. 제어부(110)는 마이크(미도시)를 통해 입력되는 음성을 인식하고, 인식 결과에 대응되는 텍스트를 필기 애플리케이션을 통해 디스플레이할 수 있다. 또한, 제어부(110)는 인식 결과에 대응되는 텍스트의 디스플레이에 대응하여 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나를 출력할 수 있다. 상기 입/출력부(150)는 스피커(151), 진동 모터(152) 및 입력 유닛(153) 중 적어도 하나를 포함할 뿐만 아니라, 스크린(120)을 포함할 수 있다. 상기 필기는 스크린(120) 상의 터치에 의해 입력되거나 또는 호버링에 의해 입력될 수 있다. 제어부(110)는 스크린 상에 입력되는 필기의 감지에 대응하여, 입력되는 필기의 궤적의 단위 벡터 당 각 좌표축의 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나의 세기 및 길이 중 적어도 하나를 계산하여 하고, 추출된 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 입력되는 필기가 속도 및 거리 중 적어도 하나를 측정할 수 있다. 제어부(110)는 스크린(120)을 2차원의 좌표축(예: X축 및 Y축)으로 구성할 수 있거나 또는 3차원의 좌표축(예: X축, Y축 및 Z축)으로 구성할 수 있다. 또한, 제어부(110)는 스크린(120)을 직교 좌표계, 극 좌표계, 원통 좌표계 및 다각형 좌표계 중 적어도 하나의 좌표계로 구성할 수 있다. 그리고, 제어부(110)는 2차원 또는 3차원의 좌표축으로 구성된 스크린(120)을 통해서 입력되는 필기의 단위 벡터 당 또는 좌표상의 속도 및 거리 중 적어도 하나를 측정할 수 있으며, 이러한 측정 결과를 통해 출력되는 피드백의 음색, 볼륨, 피치, 진동 및 굵기 중 적어도 하나를 조절할 수 있다. 이와 같이, 제어부(110)가 스크린(120)을 2차원 또는 3차원의 좌표축으로 구성할 수 있는 것은 제어부(110)는 스크린(120) 상에 터치에 의한 입력 및 호버링에 의한 입력 중 적어도 하나를 감지할 수 있기 때문이다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린(120)에 입력되는 필기를 좌표 공간에 매핑하고, 좌표 공간에 매핑된 필기의 각 좌표축의 단위 벡터로 분할하고, 다른 좌표축의 단위 벡터에 대응하여 좌표축을 성분 벡터로 분할할 수 있다. 각 좌표축의 단위 벡터에 대응되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백에 대응되는 적어도 하나의 패턴은 기 설정될 수 있다. 그리고, 각 좌표축의 단위 벡터에 대응하여 분할되는 성분 벡터를 곱하고, 성분 벡터에 대응되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 패턴은 각 좌표축의 단위 벡터에 기 설정된 패턴의 크기 및 길이 중 적어도 하나를 조절함으로써 생성할 수 있다. 상기 각 좌표축의 성분 벡터에 대응하는 패턴은 각 좌표축의 단위 벡터에 기 설정된 패턴의 크기 및 길이 중 적어도 하나를 조절함으로써 생성될 수 있다. 그리고, 제어부(110)는 분할된 각 좌표축의 단위 벡터에 대응되는 패턴과 이에 대응되는성분 벡터의 패턴을 합산할 수 있다. 제어부(110)는 각 좌표축(예: X축, Y축 또는 Z축)을 일정 크기 또는 거리를 갖는 단위 벡터로 분할하고, 출력부를 통해 출력되는 사운드 및 진동 중 적어도 하나의 패턴을 각각의 좌표축의 단위 벡터에 설정할 수 있다. 이러한, 각각의 좌표축의 단위 벡터에 설정되는 사운드 패턴 및 진동 패턴 중 적어도 하나는 서로 다르거나 같을 수 있다. 또한, 각각의 좌표축의 단위 벡터에 설정되는 시각적 피드백, 촉각적 피드백 및 청각적 피드백의 패턴은 서로 같거나 다를 수 있다. 또한, 제어부(110)는 단위 시간 당 필기의 진행 방향, 속도 및 압력 중 적어도 하나에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 출력되도록, 스피커(151), 진동 모터(152) 및 스크린(120) 중 적어도 하나를 제어할 수 있다. 스크린(120)에 디스플레이되는 시각적 피드백은 사용자에 의해 기 설정되거나 전자 장치(100)의 환경 설정에서 변경될 수 있다. 그리고, 스피커(151) 및 진동 모터(152) 중 적어도 하나를 통해 출력되는 사운드 패턴 및 진동 패턴은 측정 결과값에 비례되어 출력되거나 또는 반비례되어 출력될 수 있다. 제어부(110)는 측정 결과가 미리 결정된 임계값 이상인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 이상으로 크게 조절하여 출력할 수 있다. 제어부(110)는 측정 결과가 미리 결정된 임계값 미만인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 미만으로 작게 조절하여 출력할 수 있다. 또한, 제어부(110)는 측정 결과가 미리 결정된 임계값 이상인 경우, 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 이상으로 크게 조절하여 출력할 수 있다. 제어부(110)는 측정 결과가 미리 결정된 임계값 미만인 경우, 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 미만으로 작게 조절하여 출력할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 입력되는 필기의 진행 방향, 속도 및 압력 중 적어도 하나를 측정하고, 측정 결과에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 실시간으로 출력할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린 상에 필기 궤적을 입력받고, 상기 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할하고, 상기 각 성분 벡터에 대한 피드백 신호를 생성하고, 상기 생성된 피드백 신호를 출력한다. 제어부(110)는 각 좌표축에 대응하는 단위 피드백 신호를 저장부(170)로부터 호출할 수 있다. 상기 각 좌표축에 대응하는 단위 피드백 신호는 좌표축에 따라 서로 다를 수 있다. 이러한 좌표축은 제1 및 제2 좌표축을 포함하되, 상기 제1 좌표축에 할당된 단위 피드백 신호는 제1 신호 패턴으로 이루어지고, 상기 제2 좌표축에 할당된 단위 피드백 신호는 상기 제1 신호 패턴과 다른 제2 신호 패턴으로 이루어 질 수 있다. 그리고, 상기 저장부(170)는 필기 궤적의 진행 방향, 속도 및 압력 중 적어도 하나에 따라 서로 다른 각 좌표축 별 단위 피드백 신호를 저장할 수 있다. 또한, 저장부(170)는 상술한 피드백 신호 이외에 스크린 상에 입력되는 필기 궤적에 대응하는 피드백 신호를 실시간으로 출력하기 위한 다양한 소리, 진동에 대한 패턴을 저장할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력되도록 입/출력부(150)를 제어하거나 각 좌표축 별로 생성된 피드백 신호를 합성하여 출력할 수 있다. 제어부(110)는 피드백 신호의 진폭 및 주파수 중 적어도 하나를 조절하여 출력할 수 있다. 본 발명의 다양한 실시예에 따른 피드백 신호는 제1 좌표축에 대한 성분 벡터에 따라 상기 피드백 신호의 진폭 변경 및 제2 좌표축에 대한 성분 벡터에 따라 상기 피드백 신호의 주파수 변경 중 적어도 하나를 통해 생성될 수 있다. 제어부(110)는 입력되는 필기 궤적을 미리 결정된 단위 시간 마다 측정하고, 단위 시간 마다 측정된 성분 벡터의 길이에 따라 피드백 신호가 생성될 수 있다. 이러한 피드백 신호는 필기 궤적의 진행 방향, 속도 및 압력 중 적어도 하나에 따라서 다를 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린 상에 입력되는 필기 궤적을 감지하고, 감지된 필기 궤적의 진행 방향에 대응하여 각 좌표축에 대응되는 패턴을 합산하여 피드백을 생성하고, 필기의 입력에 대응하여 생성된 피드백을 출력할 수 있다. 제어부(110)는 스크린(120)을 2차원의 좌표축(예: X축 및 Y축)으로 구성할 수 있거나 또는 3차원의 좌표축(예: X축, Y축 및 Z축)으로 구성할 수 있으며, 각각의 좌표축을 일정 크기 또는 일정 단위로 분할할 수 있다. 그리고, 일정 크기 또는 일정 단위로 분할된 각각의 좌표축의 단위 벡터에 입/출력부(150)를 통해 출력될 수 있는 사운드 및 진동을 설정할 수 있고, 각각의 좌표축의 단위 벡터에 설정된 사운드 및 진동 중 적어도 하나를 합산할 수 있다. 이러한, 각각의 좌표축의 단위 벡터에 설정되는 사운드 패턴 및 진동 패턴 중 적어도 하나는 서로 다르거나 같을 수 있다. 제어부(110)는 각 좌표축의 단위 벡터에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 이용하여 각 좌표축에 대한 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴을 조절하고, 조절된 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 합산된 패턴을 청각적 피드백, 촉각적 피드백 및 시각적 피드백 중 적어도 하나를 통해, 스크린(120) 및 입/출력부(150) 중 적어도 하나를 통해 출력할 수 있다. 상기 청각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 사운드를 인지할 수 있는 피드백이며 스피커(151)를 통해 출력될 수 있고, 상기 촉각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 진동을 인지할 수 있는 피드백이며 진동 모터(152)를 통해 출력될 수 있고, 상기 시각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 시각적으로 인지할 수 있는 피드백이며 스크린(120)를 통해 출력될 수 있다. 이러한 시각적 피드백은 사용자에 의해 기 설정되거나 또는 기 설정된 시각적 정보가 입력되는 필기의 진행 방향, 속도 및 압력 중 적어도 하나에 의해 조합된 피드백일 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린 상에 입력되는 필기 궤적을 감지하고, 감지된 필기의 속도 및 압력 중 적어도 하나를 측정하고, 측정된 속도 및 압력 중 적어도 하나에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하여 상기 입력되는 필기 궤적에 대응하여 출력할 수 있다. 제어부(110)는 스크린(120) 상에 입력되는 필기의 궤적을 통해서 속도를 측정하거나 단위 시간당 스크린(120) 상의 이동 지점을 통해서 속도를 측정할 수 있다. 통상적으로 필기를 입력하는 경우, 진행 방향에 따라 궤적이 형성되는데 스크린(120)은 이러한 궤적을 디스플레이하며, 제어부(110)는 필기의 이동 방향에 따라서 필기의 궤적을 파악할 수 있다. 제어부(110)는 이러한 궤적을 통해서 각각의 픽셀에 필기가 입력되는 시간을 파악하고, 두 지점간의 소요 시간을 측정하여 속도를 계산할 수 있다. 또한, 스크린(120)에 필기를 입력하는 경우 스크린(120)에 압력이 가해지는데 필기 속도, 진행 방향에 따라 이러한 압력은 다를 수 있다. 그리고, 제어부(110)는 스크린(110)에 가해진 압력의 세기를 실시간 또는 미리 결정된 단위 시간 별로 측정할 수 있다. 제어부(110)는 이러한 속도 및 압력 중 적어도 하나를 측정할 수 있으며, 또한, 상기 속도 및 압력 중 적어도 하나는 단위 시간당 또는 단위 거리당 측정될 수 있다. 제어부(110)는 단위 시간 당 또는 단위 거리당 측정되는 속도 및 압력 중 적어도 하나에 대응되는 사운드 및 진동 패턴 중 적어도 하나를 입력되는 필기 궤적에 대응하여 출력할 수 있다. 그리고, 제어부(110)는 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기를 측정 결과에 비례 또는 반비례가 되도록 조절할 수 있다. 제어부(110)는 측정 결과가 미리 결정된 임계값 이상인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 크게 하여 출력할 수 있다. 또한, 제어부(110)는 측정 결과가 미리 결정된 임계값 미만인 경우, 상기 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기를 상기 미리 결정된 임계값에 대응되는 세기보다 작게하여 출력할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린 상에 필기 궤적을 입력받고, 상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하고, 상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하고, 상기 피드백 신호를 상기 필기 궤적에 대응하여 출력할 수 있다. 제어부(110)는 적어도 하나의 지정된(specified) 단위 피드백 신호 중 각 좌표축에 대응하는 단위 피드백 신호를 호출할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력하거나 또는 합성하여 출력할 수 있다. 상기 피드백 신호는 진폭 및 주파수 중 적어도 하나가 조정되어 출력될 수 있다. 상기 각 좌표축에 대응하는 상기 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함할 수 있다. 상기 제1 단위 피드백 신호와 상기 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함할 수 있다. 상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하고, 상기 복수의 피드백 신호는 상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경할 수 있다. 또한, 제어부(110)는 상기 제2 좌표축에 대응하여 상기 피드백 신호의 주파수를 변경할 수 있다. 상기 피드백 신호는 미리 결정된 단위 시간 마다 측정된 성분 벡터의 길이에 따라 생성될 수 있다. 상기 피드백 신호는 상기 필기 궤적의 진행 방향, 속도 또는 압력 중 적어도 하나에 따라서 서로 다를 수 있다. 제어부(110)는 상기 입력의 진행 방향에 따라 상기 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하고, 상기 추출된 패턴을 합산할 수 있다. 상기 생성된 피드백 신호는 상기 필기 궤적의 입력에 대응하여 실시간으로 출력될 수 있다. 상기 피드백 신호는 상기 필기 궤적의 속도 및 압력 중 적어도 하나에 비례하거나 또는 반비례하여 출력될 수 있다. 제어부(110)는 상기 전자 장치에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신할 수 있다.
또한, 본 발명의 또 다른 실시예에 따른 제어부(110)는 스크린을 통하여 사용자로부터 입력을 획득하고, 상기 입력의 이동 방향, 속도 또는 압력 중 적어도 하나에 기반하여 상기 입력에 대응하는 적어도 하나의 입력 속성을 결정하고, 상기 적어도 하나의 입력 속성에 기반하여 결정된 피드백 신호를 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 출력할 수 있다. 상기 적어도 하나의 입력 속성이 제1 속성인 경우, 제어부(110)는 제1 피드백 신호를 제공하고, 상기 적어도 하나의 입력 속성이 제2 속성인 경우에는 제2 피드백 신호를 제공할 수 있다. 상기 적어도 하나의 입력 속성은 제1 입력 속성 및 제2 입력 속성을 포함할 수 있다. 제어부(110)는 상기 제1 입력 속성 및 상기 제2 입력 속성 각각에 대응하는 피드백 신호를 개별적으로 복수의 신호로서 출력하거나 또는 조합하여 하나의 신호로서 출력할 수 있다. 제어부(110)는 입력의 진행 방향에 따라 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하고, 상기 추출된 패턴을 합산할 수 있다.
그리고, 스크린(120)은 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 터치 가능한 입력 유닛(예, 스타일러스 펜, 전자 펜)을 통해 적어도 하나의 터치 또는 호버링을 입력받을 수 있다. 스크린(120)은 이러한 입력에 대응하여 시각적 피드백을 출력할 수 있다. 또한, 스크린(120)은 스타일러스 펜 또는 전자 펜과 같은 펜을 통해서 입력되면, 이를 인식하는 펜 인식 장치(121)와 터치를 인식하는 터치 인식 장치(122) 중 적어도 하나를 포함할 수 있다. 이러한 펜 인식 장치(121)는 펜과 스크린(120)간의 거리를 자기장 또는 초음파 또는 옵티컬 정보 또는 Surface acoustic wave를 통해 파악할 수 있으며, 터치 인식 장치(122)는 터치에 의해 이동되는 전하를 이용하여 터치된 위치를 감지할 수 있다. 그리고, 이러한 터치 인식 장치(122)는 정전기를 발생시킬 수 있는 모든 터치의 감지가 가능하며, 입력 유닛이나 손가락에 의한 터치도 감지할 수 있다. 또한, 스크린(120)은 적어도 하나의 터치 중에서, 입력 유닛이나 손가락을 이용하여 필기를 작성하거나 가상의 키패드를 통해 입력되는 하나 이상의 연속적인 터치 또는 호버링에 의한 움직임 또는 명령을 입력받을 수 있다. 스크린(120)은 가상의 키패드를 통해 입력되는 텍스트를 디스플레이하는 중에 손필기가 입력되는 경우에도 손필기에 의한 입력을 수신하여 디스플레이할 수 있다. 또한, 스크린(120)은 마이크(미도시)를 통해 입력되는 음성에 대응하여 텍스트를 디스플레이할 수 있다. 스크린(120)은 필기를 작성하는 터치의 연속적인 움직임에 대응되는 아날로그 신호를 스크린 컨트롤러(130)로 전송할 수 있다.
나아가, 본 발명의 다양한 실시예에서 터치는 스크린(120)과 사용자의 신체 또는 터치 가능한 입력 유닛과의 접촉에 한정되지 않고, 비접촉(예: 스크린(120)과 사용자의 신체 또는 터치 가능한 입력 유닛 접촉하지 않고 검출가능한 간격을 포함할 수 있다. 스크린(120)에서 검출가능한 간격은 전자 장치(100)의 성능 또는 구조에 따라 변경될 수 있다. 스크린(120)은 사용자의 신체 또는 터치 가능한 입력 유닛과의 접촉에 의한 터치 이벤트와, 비접촉 상태로의 입력(예컨대, 호버링(Hovering)) 이벤트를 구분하여 검출 가능하도록 구성될 수 있다. 또한, 스크린(120)은 상기 터치 이벤트와 호버링 이벤트에 의해 검출되는 값(예컨대, 아날로그 값으로 전압 값 또는 전류 값을 포함)이 다르게 출력될 수 있도록 구성된다. 더 나아가, 스크린(120)은 호버링 이벤트가 발생되는 공간과 스크린(120) 사이의 거리에 따라, 검출되는 값(예컨대, 전류값 등)을 다르게 출력할 수 있다.
이러한, 터치 인식 장치(122) 또는 펜 인식 장치(121)는 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식으로 구현될 수 있다.
또한, 스크린(120)은 사용자의 신체 및 터치 가능한 입력 유닛에 의한 입력 또는 명령을 순차적 또는 동시에 입력받을 수 있도록, 사용자의 신체 및 터치 가능한 입력 유닛의 터치나 근접을 각각 감지할 수 있는 적어도 두 개의 터치스크린 패널을 포함할 수 있다. 상기 적어도 두 개의 터치스크린 패널은 서로 다른 출력 값을 스크린 컨트롤러에 제공하고, 스크린 컨트롤러는 상기 적어도 두 개의 터치스크린 패널에서 입력되는 값을 서로 다르게 인식하여, 스크린(120)으로부터의 입력이 사용자의 신체에 의한 입력인지, 터치 가능한 입력 유닛에 의한 입력인지를 구분할 수 있다. 그리고, 스크린(120)은 적어도 하나 이상의 객체 또는 입력되는 문자열을 디스플레이할 수 있다.
보다 상세하게, 스크린(120)은 손가락 또는 입력 유닛을 통한 입력을 유도 기전력의 변화를 통해 감지하는 터치 패널과, 스크린(120)에 핑거 또는 입력 유닛을 통한 접촉을 감지하는 패널이 서로 밀착되거나 또는 일부 이격되어 차례로 적층된 구조로 형성될 수 있다. 이러한, 스크린(120)은 다수의 픽셀들을 구비하고, 상기 픽셀들을 통해 영상을 표시하거나 또는 입력 유닛 또는 손가락에 의해 입력되는 필기를 디스플레이할 수 있다. 이러한 스크린(120)은 액정 표시 장치(Liquid Crystal Display: LCD), 유기 발광 다이오드(Organic Light Emitting Diodes: OLED 및 LED등을 사용할 수 있다.
또한, 스크린(120)은 표면에 손가락 또는 입력 유닛이 닿거나, 스크린(120)의 일정 거리에 놓이게 되면, 놓인 위치를 파악하는 복수의 센서를 구성할 수 있다. 복수의 센서들 각각은 코일 구조로 형성될 수 있으며, 복수의 센서들로 형성되는 센서층은 각각의 센서들이 기 설정된 패턴들을 가질 수 있으며, 복수의 전극 라인을 형성할 수 있다. 이러한, 구조로 인해 터치 인식 장치(122)는 손가락 또는 입력 유닛을 통해 스크린(120)에 접촉 또는 호버링 입력이 발생되면, 센서층과 입력 수단 사이의 정전용량에 기인하여 파형이 변경된 감지 신호가 발생되는데, 스크린(120)은 발생된 감지 신호를 제어부(110)로 전송할 수 있다. 그리고, 입력 유닛과 펜 인식 장치(121)간의 일정 거리는 코일에 의해 형성된 자기장의 세기를 통해 파악될 수 있다.
스크린 컨트롤러(130)는 스크린(120) 상에서 입력되는 문자열에 의해 수신된 아날로그 신호를 디지털 신호(예, X좌표, Y좌표 및/또는 Z좌표)로 변환하여 제어부(110)로 전송한다. 제어부(110)는 스크린 컨트롤러(130)로부터 수신된 디지털 신호를 이용하여 스크린(120)을 제어할 수 있다. 예를 들어, 제어부(110)는 터치 이벤트 또는 호버링 이벤트에 응답하여 스크린(120)에 표시된 단축 아이콘(도시되지 아니함) 또는 객체가 선택되게 하거나 또는 실행할 수 있다. 또한, 스크린 컨트롤러(130)는 제어부(110)에 포함될 수도 있다.
또한, 스크린 컨트롤러(130)는 스크린(120)을 통해 출력되는 값(예컨대, 전류값 등)을 검출하여 호버링 이벤트가 발생되는 공간과 스크린(120) 사이의 거리를 확인할 수 있고, 확인된 거리 값을 디지털 신호(예컨대, Z좌표)로 변환하여 제어부(110)로 제공할 수 있다.
통신부(140)는 통신 방식, 전송 거리, 송수신되는 데이터의 종류에 따라 이동통신부(미도시), 서브통신부(미도시), 무선랜부(미도시) 및 근거리 통신부(미도시)를 포함할 수 있다. 이동통신부는 제어부(110)의 제어에 따라 적어도 하나-하나 또는 복수-의 안테나(도시되지 아니함)를 이용하여 이동 통신을 통해 전자 장치(100)가 외부 장치와 연결되도록 할 수 있다. 이동통신부는 전자 장치(100)에 입력되는 전화번호를 가지는 휴대폰(도시되지 아니함), 스마트폰(도시되지 아니함), 태블릿 PC 또는 다른 장치(도시되지 아니함)와 음성 통화, 화상 통화, 문자메시지(SMS) 또는 멀티미디어 메시지(MMS)를 위한 무선 신호를 송/수신할 수 있다. 서브통신부는 무선랜부(미도시)와 근거리 통신부(미도시) 중 적어도 하나를 포함할 수 있다. 예를 들어, 서브통신부는 무선랜 모듈만 포함하거나, 근거리 통신부만 포함하거나 또는 무선랜부와 근거리 통신부를 모두 포함할 수 있다. 또한, 서브통신부는 입력 유닛과 제어 신호를 송수신할 수 있다. 전자 장치(100)와 입력 유닛간에 송수신되는 제어 신호는 입력 유닛에 전원을 공급하기 위한 필드, 입력 유닛과의 스크린(120)간의 터치 또는 호버링을 감지한 필드, 입력 유닛에 구비된 버튼의 눌림 또는 입력을 감지하는 필드, 입력 유닛의 식별자, 입력 유닛이 위치한 좌표(예: X축 좌표, Y축 좌표 및/또는 Z축 좌표)를 나타내는 필드 중 적어도 하나를 포함할 수 있다. 또한, 통신부(140)는 제어부(110)에 생성되는 촉각적 피드백 및 청각적 피드백 중 적어도 하나에 대한 신호를 입력 유닛(153)으로 전송할 수 있다. 전자 장치(100)는 다른 전자 장치가 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 전송할 수 있다. 통신부(140)는 상기 피드백 신호를 상기 다른 전자 장치로 전송할 수 있다. 또한, 입력 유닛은 전자 장치(100)로부터 수신되는 제어 신호에 대한 피드백 신호를 전자 장치(100)로 전송할 수 있다. 그리고, 무선랜부는 제어부(110)의 제어에 따라 무선 액세스 포인트(AP, access point)(도시되지 아니함)가 설치된 장소에서 인터넷에 연결될 수 있다. 무선랜부는 미국전기전자학회(IEEE)의 무선랜 규격(IEEE802.11x)을 지원한다. 근거리 통신부는 제어부(110)의 제어에 따라 전자 장치(100)와 화상형성장치(도시되지 아니함)사이에 무선으로 근거리 통신을 할 수 있다. 근거리 통신방식은 블루투스(bluetooth), 적외선 통신(IrDA, infrared data association), 와이파이 다이렉트(WiFi-Direct) 통신, NFC(Near Field Communication) 등이 포함될 수 있다.
그리고, 전자 장치(100)는 성능에 따라 이동통신부, 무선랜부, 및 근거리통신부 중 적어도 하나를 포함할 수 있다. 또한, 전자 장치(100)는 성능에 따라 이동통신부, 무선랜부, 및 근거리 통신부의 조합을 포함할 수 있다. 본 발명의 다양한 실시예에서는 이러한, 이동통신부, 무선랜부, 스크린 및 근거리 통신부 중 적어도 하나 또는 이들의 조합을 송수신부라 칭할 수 있으며, 이는 본 발명의 범위를 한정하지 않는다.
입/출력부(150)는 스피커(151), 진동 모터(152) 및 입력 유닛(153) 중 적어도 하나를 포함할 수 있다. 또한, 입/출력부(150)는 도시되지 않았지만, 버튼, 카메라, 마이크, 커넥터, 키패드 및 이어폰 연결잭 중 적어도 하나를 포함할 수 있다. 이러한 입/출력 모듈은 이에 국한되지 않으며, 마우스, 트랙볼, 조이스틱 또는 커서 방향 키들과 같은 커서 컨트롤(cursor control)이 제어부(110)와의 통신 스크린(120) 상의 커서 움직임 제어를 위해 제공될 수 있다. 입/출력부(150)는 사용자로부터 입력되는 명령에 대응되는 소리 또는 진동을 각각 출력할 수 있다. 이러한 입/출력부(150)는 스피커(151), 진동 모터(152) 및 입력 유닛(153) 중 적어도 하나를 포함할 수 있을 뿐만 아니라 스크린(120)을 포함할 수 있다. 그리고, 본 발명의 다양한 실시예에서는 이러한 입/출력부(120)을 입력부 또는 출력부로 통칭될 수 있다. 상기 입/출력부는 제어부(110)에 의해 생성된 적어도 하나의 피드백 신호를 입력 유닛의 필기 궤적에 대응하여 출력할 수 있다. 상기 입력 유닛은 전자 장치와 기능적으로 연결되어 있으며, 상기 전자 장치로부터 피드백 신호를 수신하는 근거리 통신부와 피드백 신호를 제어하기 위한 제어부와 피드백 신호를 출력하기 위한 출력부를 포함할 수 있다.
스피커(151)는 제어부(110)의 제어에 따라 통신부(140)의 다양한 신호(예, 무선신호, 방송신호, 디지털 오디오 파일, 디지털 동영상 파일 또는 사진 촬영 등)에 대응되는 소리와 블루투스를 통해 입력 유닛으로 제공되는 제어 신호에 대응되는 소리를 전자 장치(100)의 외부로 출력할 수 있다. 상기 제어 신호에 대응되는 소리는 입력 유닛(153) 또는 손가락(미도시)에 의해 전자 장치에 입력되는 적어도 하나의 명령 또는 필기가 가능한 애플리케이션 상에 입력되는 필기에 대응하는 소리를 포함한다. 이러한 소리는 입력 유닛(153)의 진동 소자(230)의 진동 세기에 따라 볼륨이 제어되거나 또는 진동 소자(230)의 활성과 동시 또는 미리 정해진 시간(예: 10ms) 이전/이후의 간격으로 전자 장치(100)의 스피커(151) 및/또는 입력 유닛(153)에 구비될 수 있는 스피커(미도시)를 통해 출력될 수 있다. 또한, 상기 소리는 진동 소자(230)의 비활성과 동시 또는 미리 정해진 시간(예: 10ms) 이전/이후의 간격으로 종료될 수 있다. 그리고, 스피커(151)는 전자 장치(100)가 수행하는 기능에 대응되는 사운드(예, 전화 통화에 대응되는 버튼 조작음, 또는 통화 연결음)를 출력할 수 있다. 스피커(151)는 전자 장치(100)의 하우징의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다.
진동 모터(152)는 제어부(110)의 제어에 따라 전기적 신호를 기계적 진동으로 변환할 수 있다. 예를 들어, 진동 모드에 있는 전자 장치(100)는 다른 전자 장치(도시되지 아니함)로부터 음성통화가 수신되는 경우, 진동 모터(152)가 동작될 수 있다. 이러한 진동 모터(152)는 전자 장치(100)의 하우징 내에 하나 또는 복수로 형성될 수 있다. 그리고, 진동 모터(152)는 전자 장치(100)에 구비된 적어도 하나의 기능을 실행하기 위한 명령이 입력되거나 스크린(120) 상에 입력 유닛(153) 또는 손가락을 이용한 사용자의 터치 동작 및 스크린(120) 상에서의 터치의 연속적인 움직임 또는 필기가 입력되는 경우 입력되는 필기의 좌표축에 대한 단위 벡터에 응답하여 동일한 크기의 진동으로 동작하거나 또는 상기 명령 또는 터치의 입력 시구간에 대응하여 서로 다른 크기의 진동으로 동작될 수 있다. 또한, 진동 모터(152)는 전자 장치(100)가 놓여진 상태에 대응하여 서로 다른 진동을 출력할 수 있으며, 스크린(120) 상에 입력되는 필기의 속도 및 압력 중 적어도 하나에 대응하여 서로 다른 진동을 출력할 수 있다.
입력 유닛(153)은 전자 장치의 스크린(120)상의 접촉 또는 호버링과 같은 비접속 상태에서도 전자 장치에 명령 또는 입력을 제공할 수 있는 유닛이다. 입력 유닛은 전자 장치(100)의 스크린상의 접촉 또는 호버링과 같은 비접속 상태에서도 전자 장치에 명령 또는 입력을 제공할 수 있는 손가락, 전자펜, 디지털 타입의 펜, 집적 회로가 구비되지 않은 펜, 집적 회로가 구비된 펜, 집적 회로와 메모리가 구비된 펜, 근거리 통신이 가능한 펜, 조이스틱 및 스타일러스 펜 중 적어도 하나를 포함할 수 있다.
전원 공급부(160)는 제어부(110)의 제어에 따라 전자 장치(100)의 하우징에 배치되는 하나 또는 복수의 배터리(도시되지 아니함)에 전원을 공급할 수 있다. 하나 또는 복수의 배터리(도시되지 아니함)는 전자 장치(100)에 전원을 공급할 수 있다. 또한, 전원 공급부(160)는 커넥터(미도시)와 연결된 유선 케이블을 통해 외부의 전원소스(도시되지 아니함)에서부터 입력되는 전원을 전자 장치(100)로 공급할 수 있다. 또한, 전원 공급부(160)는 무선 충전 기술을 통해 외부의 전원소스로부터 무선으로 입력되는 전원을 전자 장치(100)로 공급할 수도 있다.
저장부(170)는 제어부(110)의 제어에 따라 통신부(140), 입/출력부(150), 스크린(120), 센서부(180)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 또한, 저장부(170)는 전자 장치(100) 또는 제어부(110)의 제어를 위한 제어 프로그램 및 애플리케이션들을 저장할 수 있으며, 전자 장치(100)에 입력되는 입력에 대응하여 미리 설정된 세기의 진동을 출력하고, 명령이 입력되는 시구간에 대응하여 진동의 세기를 미리 정해진 세기로 조절하기 위한 데이터를 저장할 수 있다. 저장부(170)는 스크린(120) 상에 입력되는 필기의 궤적에 대한 좌표축 상의 단위 벡터 및/또는 성분 벡터에 대응되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 패턴과 상기 패턴의 크기, 시간, 주기 등 속성 정보를 저장할 수 있다. 또한, 저장부(170)는 전자 장치(100)에 입력되는 필기의 진행 방향, 속도 및 압력 중 적어도 하나에 대응되는 패턴으로 진동 및 소리 중 적어도 하나를 조절하기 위해서 적어도 하나의 패턴을 저장할 수 있다. 이러한 패턴은 필기의 진행 방향, 속도 및 압력 중 적어도 하나에 따라서 서로 다른 다양한 크기 및 진동 주기를 갖는 다양한 패턴을 포함한다.
상기 저장부(170)는 비휘발성 메모리, 휘발성 메모리, 하드 디스크 드라이브(HDD)또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
또한, 상기 저장부(170)는 스크린(120)에 입력되는 문자, 단어 및 문자열 중 적어도 하나를 저장할 수 있으며, 사용자가 인터넷 망을 통해 수신되는 텍스트, 이미지, 이모티콘, 아이콘 등 다양한 데이터를 저장할 수 있다. 또한, 상기 저장부(170)는 네비게이션, 화상 통화, 게임, 사용자에게 시간을 기반으로 하는 알람 애플리케이션 등과 같은 다양한 기능들의 애플리케이션들과 이와 관련된 그래픽 사용자 인터페이스(graphical user interface: GUI)를 제공하기 위한 이미지들, 사용자 정보, 문서, 터치 입력을 처리하는 방법과 관련된 데이터베이스들 또는 데이터, 상기 전자 장치(100)를 구동하는데 필요한 배경 이미지들(메뉴 화면, 대기 화면 등) 또는 운영 프로그램들, 카메라(미도시)에 의해 촬영된 이미지들 등을 저장할 수 있다. 또한, 저장부(170)는 기계(예를 들어, 컴퓨터)로 읽을 수 있는 매체이며, 기계로 읽을 수 있는 매체라는 용어는 기계가 특정 기능을 수행할 수 있도록 상기 기계로 데이터를 제공하는 매체로 정의될 수 있다. 기계로 읽을 수 있는 매체는 저장 매체일 수 있다. 상기 저장부(170)는 비휘발성 매체(non-volatile media) 및 휘발성 매체를 포함할 수 있다. 이러한 모든 매체는 상기 매체에 의해 전달되는 명령들이 상기 명령들을 상기 기계로 읽어 들이는 물리적 기구에 의해 검출될 수 있도록 유형의 것이어야 한다.
도 2는 본 발명의 일 실시예에 따른 입력 유닛을 도시한 예시도이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 입력 유닛(153)(예: EMR 펜)은 펜대와, 펜대 끝에 배치된 펜촉(280), 펜촉(280)에 인접된 영역의 펜대 내부에 배치되는 코일 (270), 버튼(260), 진동 소자(230), 전자 장치(100)로부터 수신되는 제어 신호를 분석하고, 진동 소자(230)의 진동 세기, 진동 주기를 제어하고, 근거리 통신을 제어하고, 필압을 감지할 수 있는 제어부(220), 전자 장치(100)와 근거리 통신을 수행하는 근거리 통신부(210) 및 입력 유닛(153)에 필요한 전원을 공급하는 배터리(340) 중 적어도 하나를 포함할 수 있다. 또한, 상기 입력 유닛(153)은 전자 장치(100)와 통신을 수행하기 위한 RC 회로를 포함할 수 있는데, 이러한 RC 회로는 입력 유닛(153) 내에 구비되거나 또는 상기 제어부(220)에 구성되어 수행될 수 있다. 또한, 상기 입력 유닛(153)은 입력 유닛(153)의 진동 주기 및/또는 진동 세기에 대응하는 소리를 출력하는 스피커(250)를 포함할 수 있다. 상기 스피커(250)는 전자 장치(100)에 구비된 스피커(151)에서 출력되는 소리와 동시 또는 미리 정해진 시간(예: 10ms) 이전/이후에 출력할 수 있다.
그리고, 이러한 구성을 가지는 입력 유닛(153)은 전자기 유도 방식을 지원하는 구성일 수 있다. 그리고, 코일(270)에 의하여 펜 인식 장치(121)의 일정 지점에 있는 코일에 자기장이 형성되면, 펜 인식 장치(121)는 해당 자기장 위치를 검출하여 입력 유닛의 위치를 인식할 수 있도록 구성될 수 있다.
보다 상세하게, 상기 스피커(250)는 제어부(220)의 제어에 따라 전자 장치(100)에 구비된 통신부(140)로부터 다양한 신호(예: 무선신호, 방송신호, 디지털 오디오 파일, 또는 디지털 동영상 파일 등)에 대응되는 사운드를 출력할 수 있다. 또한, 스피커(250)는 전자 장치(100)가 수행하는 기능에 대응되는 사운드(예, 전화 통화에 대응되는 버튼 조작음, 또는 통화 연결음)를 출력할 수 있으며, 상기 입력 유닛(153)의 하우징의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다.
제어부(220)는 근거리 통신부(210)를 통해 전자 장치(100)로부터 수신된 적어도 하나의 제어 신호를 분석하고, 분석된 제어 신호에 따라 입력 유닛(153)에 구비된 진동 소자(230)의 진동 주기, 진동 세기 등을 제어할 수 있다. 이러한 제어 신호는 전자 장치에서 수행되는 시각적 피드백, 청각적 피드백 및 촉각적 피드백에 대응되는 패턴 정보를 포함한다. 그리고, 제어부(220)는 버튼(260)의 눌림을 감지하여 전자 장치(100)의 시각적 피드백, 청각적 피드백 및 촉각적 피드백 중 적어도 하나의 피드백에 대한 패턴의 속성을 변경하기 위한 제어 신호를 전자 장치(100)에 전송할 수 있다. 전자 장치(100)는 이러한 제어 신호를 수신하여 피드백에 대한 패턴의 속성을 변경할 수 있다. 또한, 제어부(220)는 수신된 제어 신호에 대응되는 피드백 신호 또는 입력 유닛 상태 정보(예를 들면 베터리 잔량, 통신 상태, 식별 정보)를 전자 장치(100)로 전송할 수 있다. 제어 신호는 전자 장치(100)와 입력 유닛(153)간에 송수신되는 신호이며, 미리 정해진 시간 동안 또는 터치나 호버링이 종료되는 시점까지 주기적으로 송수신될 수 있다. 또한, 제어 신호는 스크린(120)에 입력되는 필기의 진행 방향, 속도 및 압력 중 적어도 하나가 변경되는 경우 입력 유닛(153)으로 전송될 수 있다. 그리고, 제어부(220)를 동작하기 위한 전원 공급을 하는 배터리(240)는 전자 장치로부터 유도되는 전류를 이용하여 충전할 수도 있다.
도 3은 본 발명의 일 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 나타낸 순서도이다.
이하, 도 3을 참조하여 본 발명의 일 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린(120) 상에 입력되는 필기 궤적을 감지하고, 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할한다(310, 320). 제어부(110)는 입력되는 필기 궤적을 단위 시간 별로 감지할 수 있다. 제어부(110)는 단위 시간 별로 입력되는 필기 궤적의 길이 또는 거리를 통해서 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할할 수 있다. 이러한 각 좌표축 별로 피드백 신호가 미리 할당될 수 있다. 또한, 제어부(110)는 각 좌표축 별 성분 벡터의 길이 또는 거리를 통해서 상기 미리 할당된 피드백 신호의 진폭 및 주파수 중 적어도 하나를 제어할 수 있다.
그리고, 제어부(110)는 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성한다(330). 제어부(110)는 각 좌표축 별 성분 벡터에 대응하여 복수의 피드백 신호를 생성할 수 있다. 상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하며, 상기 복수의 피드백 신호는 상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경할 수 있다. 그리고, 제어부(110)는 상기 제2 좌표축에 대응하여 상기 피드백 신호의 주파수를 변경할 수 있다. 또한, 제어부(110)는 적어도 하나의 지정된(specified) 단위 피드백 신호 중 각 좌표축에 대응하는 단위 피드백 신호를 호출할 수 있다. 상기 각 좌표축에 대응하는 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함할 수 있다. 상기 제1 단위 피드백 신호와 상기 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 적어도 하나의 피드백 신호를 개별적으로 출력되도록 입/출력부(150)를 제어하거나 또는 각 좌표축 별로 생성된 적어도 하나의 피드백 신호를 합성할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 피드백 신호의 진폭 및 주파수 중 적어도 하나를 조정하여 피드백 신호를 생성할 수 있다. 제어부(110)는 스크린에 입력되는 필기의 진행 방향을 통해서 각 좌표축의 단위 벡터에 설정된 또는 각 좌표축에 대한 성분 벡터로부터 조절된 패턴을 합산하여 새로운 패턴의 사운드 및 진동 중 적어도 하나를 생성할 수 있다. 또한, 제어부(110)는 필기의 진행 방향이 감지되면, 진행 방향에서 일정 거리에 해당되는 각각의 좌표값(예: 일정 거리에서의 X축, Y축 또는 Z축 좌표 값)에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 각각의 좌표축에 미리 설정된 피드백 신호를 필기 궤적의 이동 거리에 대응하여 진폭 및 주파수 중 적어도 하나를 제어할 수 있다. 그리고, 제어부(110)는 이러한 제어에 의해 피드백 신호를 생성할 수 있다. 또한, 제어부(110)는 좌표축에 기 설정된 패턴을 개별적으로 출력하거나 합산하여 출력할 수 있다. 또한, 제어부(110)는 입력의 진행 방향에 따라 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하고, 추출된 패턴을 합산할 수 있다.
그리고, 제어부(110)는 생성된 피드백 신호를 출력한다(340). 제어부(110)는 피드백 신호를 필기 궤적에 대응하여 출력할 수 있다. 제어부(110)는 입력되는 필기 궤적에 대응하여 생성된 피드백 신호를 출력할 수 있다. 또한, 제어부(110)는 입력되는 필기 궤적에 실시간으로 대응하여 피드백 신호를 생성하여 출력할 수 있다. 상기 피드백 신호는 진동 및 사운드 중 적어도 하나를 포함할 수 있다. 또한, 제어부(110)는 전자 장치(100)에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신할 수 있다. 상기 다른 전자 장치는 본 발명의 다양한 실시예에 따른 전자 장치와 기능적으로 연결된 전자 장치일 수 있다. 상기 다른 전자 장치는 상기 전자 장치로부터 송신되는 피드백 신호를 수신하고, 수신된 피드백 신호에 대응하여 피드백을 출력할 수 있다. 상기 다른 전자 장치는 상기 전자 장치에 장착될 수 있는 입력 유닛을 포함할 수 있다. 또한, 상기 다른 전자 장치는 상기 전자 장치와 통신을 수행할 수 있는 전자 장치일 수 있다.
도 4는 본 발명의 다른 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 나타낸 순서도이다.
이하, 도 4를 참조하여 본 발명의 다른 실시예에 따른 입력되는 필기 궤적에 대응하여 피드백을 출력하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린(120) 상에 입력되는 필기 궤적을 감지한다(410). 제어부(110)는 스크린(120) 상에서 입력 유닛을 이용한 필기의 궤적을 단위 벡터 당 또는 단위 시간 당으로 감지할 수 있다. 제어부(110)는 스크린(120) 상에서 터치 및 호버링 중 적어도 하나를 이용하여 입력되는 필기 또는 필기 궤적을 감지할 수 있다. 상기 필기는 문자 또는 그림 등 입력 유닛 또는 손가락의 제스처에 의해 표현되는 다양한 형태의 필기를 포함할 수 있다. 또한, 제어부는 스크린(120)뿐만 아니라 전자 장치(100)의 외관에 구성된 홈 버튼(미도시), 메뉴 버튼(미도시) 및 뒤로 가기 버튼(미도시)에 입력되는 적어도 하나의 입력을 감지할 수 있다.
그리고, 제어부(110)는 감지된 필기의 속성을 파악한다 (420). 제어부(110)는 스크린(120)상에 감지된 필기의 방향, 속도, 압력 중 적어도 하나를 측정할 수 있다. 제어부(110)는 스크린(120) 상에 디스플레이된 필기 애플리케이션에 입력되는 필기의 방향, 속도 및 압력 중 적어도 하나를 측정할 수 있다. 제어부(110)는 스크린(120)에 감지된 필기의 진행 방향, 속도 및/또는 압력 중 적어도 하나에 대응하여 각 좌표축의 단위 벡터에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 이용하여 각 좌표축에 대한 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 조절할 수 있다. 제어부(110)는 조절된 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다. 각 좌표축의 단위 벡터 또는 성분 벡터는 사운드 패턴 및 진동 패턴 중 적어도 하나의 패턴이 미리 설정되어 있을 수 있다. 그리고, 각 좌표축의 성분 벡터는 상기 미리 설정된 사운드 패턴 및 진동 패턴 중 적어도 하나를 이용하여 생성될 수 있다. 예를 들어, 각 좌표축의 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴은 각 좌표축의 단위 벡터 또는 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴에서 각 좌표축의 성분 벡터의 비율을 통해서 생성된다. 그리고, 각각의 좌표축의 단위 벡터에 설정된 패턴의 길이 및 진폭 중 적어도 하나는 다른 좌표축의 단위 벡터의 패턴의 길이 및 진폭 중 적어도 하나와 서로 같거나 다를 수 있다.
또한, 제어부(110)는 필기의 속도 및 압력 중 적어도 하나에 따라서 미리 설정된 사운드 패턴 및 진동 패턴 중 적어도 하나의 패턴을 생성할 수 있다. 제어부(110)는 필기의 속도 값에 따라서 서로 다른 길이와 진폭을 가진 패턴을 추출하거나 필기의 압력 값에 따라서 서로 다른 길이와 진폭을 가진 패턴을 추출할 수 있다. 또한, 제어부(110)는 스크린(120) 상에서 감지된 필기의 속도 및 압력 중 적어도 하나를 측정하고, 측정 결과에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출할 수 있다. 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 측정 결과에 비례하거나 또는 반비례할 수 있다. 측정 결과가 미리 결정된 임계값 이상인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 미리 결정된 임계값에 대응되는 세기보다 이상이다. 그리고, 측정 결과가 미리 결정된 임계값 미만인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 미리 결정된 임계값에 대응되는 세기보다 미만이다.
제어부(110)는 파악된 결과에 대응하여 진동 및 사운드 중 적어도 하나를 생성한다(430). 제어부(110)는 스크린에 입력되는 필기의 진행 방향을 통해서 각 좌표축의 단위 벡터 또는 성분 벡터에 설정된 또는 각 좌표축에 대한 성분 벡터로부터 조절된 패턴을 합산하여 새로운 패턴의 사운드 및 진동 중 적어도 하나를 생성할 수 있다. 또한, 제어부(110)는 필기의 진행 방향이 감지되면, 진행 방향에서 일정 거리에 해당되는 각각의 좌표값(예: 일정 거리에서의 X축, Y축 또는 Z축 좌표 값)에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 각각의 좌표축의 단위 벡터에 기 설정된 패턴을 상기 각각의 좌표값에 대응되는 패턴으로 조절하고, 조절된 각 좌표값의 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴을 합산할 수 있다. 제어부(110)는 스크린(120)에 입력되는 필기를 좌표 공간에 매핑하고, 상기 좌표 공간에 매핑된 필기를 단위 벡터로 분할하고, 분할된 단위 벡터에 대한 각 좌표축의 성분 벡터에 대응하는 패턴을 합산하여 새로운 패턴을 생성할 수 있다.
제어부(110)는 상기 과정(430)에서 생성된 진동 및 사운드 중 적어도 하나를 출력한다(440). 제어부(110)는 생성된 진동 패턴 및 사운드 패턴 중 적어도 하나에 대응되게 입/출력부(150)를 제어할 수 있다. 제어부(110)는 입/출력부(150)를 제어하여 상기 과정(430)에서 생성된 진동 패턴 및 사운드 패턴 중 적어도 하나를 출력할 수 있다. 제어부(110)는 스크린(120)에 감지된 필기의 진행 방향에 대응하여 각 좌표축의 성분 벡터 또는 단위 벡터에 대응되는 사운드 패턴을 합산하여 생성되는 사운드 패턴을 스피커(151)를 통해 출력하거나 또는 스크린(120)에 감지된 필기의 진행 방향에 대응하여 각 좌표축의 단위 벡터 또는 성분 벡터에 대응되는 진동 패턴을 진동 모터(152)를 통해 출력할 수 있다. 또는 이러한, 사운드 패턴 및 진동 패턴을 동시에 스피커(151) 및 진동 모터(152)를 통해 출력할 수 있다. 그리고, 제어부(110)는 입력되는 필기에 대응하여 사운드를 출력하거나 진동을 출력할 수 있다. 또한, 제어부(110)는 입력되는 필기에 대응하여 사운드 및 진동을 함께 출력할 수 있다. 그리고, 제어부(110)는 출력되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 샘플링하여 저장부(170)에 저장할 수 있다. 이러한 샘플링된 사운드 패턴 및 진동 패턴 중 적어도 하나는 향후에 입력되는 필기에 이용될 수 있다.
도 5는 본 발명의 또 다른 실시예에 따른 스크린 상에 입력되는 필기에 대응하여 피드백을 출력하는 과정을 나타낸 순서도이다.
이하, 도 5를 참조하여 본 발명의 또 다른 실시예에 따른 스크린 상에 입력되는 필기에 대응하여 피드백을 출력하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린(120) 상에 입력되는 필기의 궤적을 감지한다(510). 제어부(110)는 스크린(120) 상에서 터치 및 호버링 중 적어도 하나를 이용하여 입력되는 필기의 궤적을 감지할 수 있다. 상기 필기는 문자 또는 그림 등 입력 유닛 또는 손가락의 제스처에 의해 표현되는 다양한 형태의 필기를 포함한다. 또한, 제어부는 스크린(120)뿐만 아니라 전자 장치(100)의 외관에 구성된 홈 버튼(미도시), 메뉴 버튼(미도시) 및 뒤로 가기 버튼(미도시)에 입력되는 적어도 하나의 입력을 감지할 수 있다.
제어부(110)는 입력되는 필기 궤적의 진행 방향을 파악하고, 진행 방향에 따른 각 좌표축의 단위 벡터에 대응되는 사운드 및 진동 패턴 중 적어도 하나를 추출한다(520, 530). 제어부(110)는 스크린(120)을 2차원의 좌표축(예: X축 및 Y축)으로 구성할 수 있거나 또는 3차원의 좌표축(예: X축, Y축 및 Z축)으로 구성할 수 있으며, 각각의 좌표축을 일정 크기 또는 일정 단위로 분할할 수 있다. 그리고, 일정 크기 또는 일정 단위로 분할된 각각의 좌표축의 단위 벡터에 입/출력부(150)를 통해 출력될 수 있는 사운드 패턴 및 진동 패턴 중 적어도 하나를 설정할 수 있고, 각각의 좌표축의 단위 벡터에 설정된 사운드 패턴 및 진동 패턴 중 적어도 하나를 이용하여 각각의 좌표축에 대한 성분 벡터에 대응되는 사운드 및 진동 중 적어도 하나를 생성할 수 있다. 상기 생성된 성분 벡터에 대응되는 사운드 및 진동 중 적어도 하나는 단위 벡터에 설정된 사운드 패턴 및 진동 패턴 중 적어도 하나의 세기 및 주기를 조절하여 생성될 수 있다. 이러한, 각각의 좌표축의 단위 벡터에 설정되는 사운드 패턴 및 진동 패턴 중 적어도 하나는 서로 다르거나 같을 수 있다. 그리고, 제어부(110)는 각 좌표축의 성분 벡터에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 합산할 수 있다. 예를 들어, 제어부(110)는 각 좌표축에 대한 성분 벡터의 사운드 패턴을 합산하거나 또는 각 좌표축에 대한 성분 벡터의 진동 패턴을 합산할 수 있다. 제어부(110)는 스크린(120)에 입력되는 필기를 좌표 공간에 매핑하고, 좌표 공간에 매핑된 필기의 단위 벡터를 각 좌표축의 성분 벡터 별로 분할하고, 분할된 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다.
제어부(110)는 각 좌표축의 패턴을 합산하고, 입력되는 필기에 대응하여 합산된 패턴을 출력한다(540, 550). 제어부(110)는 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 좌표 공간에 매핑된 필기를 단위 벡터로 분할하고, 분할된 단위 벡터에 대한 각 좌표축의 성분 벡터에 대응되는 패턴을 합산할 수 있다. 이러한 성분 벡터에 대응되는 패턴은 각 좌표축의 단위 벡터에 기 설정된 패턴을 이용하여 합산될 수 있다. 상기 기 설정된 패턴은 각 좌표축의 단위 벡터에 따라서 서로 다르거나 같을 수 있다. 그리고, 제어부(110)는 합산된 패턴을 청각적 피드백, 촉각적 피드백 및 시각적 피드백 중 적어도 하나를 스크린(120) 및 입/출력부(150) 중 적어도 하나를 통해 출력할 수 있다. 상기 청각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 사운드를 인지할 수 있는 피드백이며 스피커(151)를 통해 출력될 수 있고, 상기 촉각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 진동을 인지할 수 있는 피드백이며 진동 모터(152)를 통해 출력될 수 있고, 상기 시각적 피드백은 사용자로 하여금 필기의 입력에 대응하여 시각적으로 인지할 수 있는 피드백이며 스크린(120)를 통해 출력될 수 있다. 이러한 시각적 피드백은 사용자에 의해 기 설정되거나 또는 기 설정된 시각적 정보가 입력되는 필기의 진행 방향, 속도 및 압력 중 적어도 하나에 의해 조합된 피드백일 수 있다.
도 6은 본 발명의 다양한 실시예에 따른 패턴의 파형을 나타낸 예시도이다.
도 6을 참조하면, 각각의 패턴의 파형은 주기를 갖는 파형일 수 있고 비주기의 특성을 갖는 파형일 수 있다. 이러한 각 패턴(610, 620, 630 및 640)의 파형 세기, 시간 및 주기 중 적어도 하나는 사용자에 의해 지정되거나 변경될 수 있으며, 각 패턴에 따라 진동 세기가 서로 다를 수 있다. 도 6에서 가로축(예: X축)은 시간에 따른 주기를 나타내고, 세로축(예: Y축)은 패턴의 진동 세기를 나타낸다. 그리고, 도 6에서는 단지 4개의 패턴을 도시하고 있으나 이는 단지 실시 예일 뿐, 본 발명은 4개의 파형에 국한되지 않고 4개 보다 많은 파형을 포함할 수 있으며, 각각의 파형은 도시된 바와 같이 서로 다를 수 있거나 또는 같을 수도 있다. 보다 상세하게, 본 발명은 상술한 파형 이외에 실제생활에서 느낄 수 있는 다양한 피드백 파형을 포함한다. 이러한, 각각의 패턴은 필기의 진행 방향, 속도 및 압력 중 어느 하나에 설정될 수 있거나 또는 진행 방향의 각 좌표축 또는 각 좌표축의 단위 벡터 또는 성분 벡터에 설정될 수 있다. 그리고, 각각의 패턴은 미리 정해진 시간 단위로 반복적으로 수행되거나 또는 적어도 1회 이상으로 수행될 수 있다.
도 7은 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향에 좌표축의 성분 벡터를 나타낸 예시도이다.
보다 상세하게, 도 7a는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 단위 시간 당 단위 벡터로 분할한 예시도이고, 도 7b는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 X축의 단위 벡터로 분할한 예시도이고, 도 7c는 본 발명의 일 실시예에 따른 필기 궤적의 진행 방향을 Y축의 단위 벡터로 분할한 예시도이다.
그리고, 도 7a 내지 도 7c는 X축 및 Y축으로 구성된 단지 2차원의 진행 방향에 대해 예시하고 있으나, 이는 단지 실시예일 뿐이며, 본 발명은 X축, Y축 및 Z축으로 구성된 3차원의 진행 방향에서도 적용될 수 있다.
도 7a를 참조하면, 스크린(120)에 입력되는 필기의 궤적(710)을 도시하고 있으며, 본 발명의 일 실시예에 따른 필기의 진행 방향 즉, 궤적은 단위 시간 당 단위 벡터 또는 성분 벡터로 분해될 수 있으며, 분해된 각각의 단위 벡터에 대응되는 각 좌표축의 성분 벡터의 크기는 파악될 수 있으며 이러한 각 좌표축의 성분 벡터의 크기는 서로 다를 수 있다. 그리고, 단위 시간 당 좌표축의 성분 벡터의 크기는 서로 다를 수 있다. 필기의 궤적은 단위 시간 당 단위 벡터들(721, 724, 727, 730)로 분해될 수 있다. 그리고, 분해된 각각의 단위 벡터들(721, 724, 727, 730)에 대응되는 X축의 성분 벡터들(722, 725, 728, 731)과 Y축의 성분 벡터들(723, 726, 729, 732)은 파악될 수 있다. 필기의 궤적(710)에서 제1 단위 벡터(721)는 X축의 제1 성분 벡터(722)와 Y축의 제1 성분 벡터(723)를 가지며, 필기의 궤적(710)에서 제2 단위 벡터(724)는 X축의 제2 성분 벡터(725)와 Y축의 제2 성분 벡터(726)를 가지며, 필기의 궤적(710)에서 제3 단위 벡터(727)는 X축의 제3 성분 벡터(728)와 Y축의 제3 성분 벡터(728)를 가지며, 필기의 궤적(710)에서 제4 단위 벡터(730)는 X축의 제4 성분 벡터(731)와 Y축의 제4 성분 벡터(732)를 가진다.
도 7a는 필기의 궤적을 단위 시간 당 단위 벡터로 분해한 후, 필기의 진행 방향에 따라 X축의 성분 벡터 및 Y축의 성분 벡터를 분해하였으나 이는 단지 실시예일 뿐이며, 본 발명은 필기의 진행 방향에 따라 X축을 동일한 단위 벡터로 나눈 후, X축의 각 단위 벡터에 대응하여 Y축을 각 성분 벡터로 분해할 수 있다(도 7b 참조). 또한, 본 발명은 필기의 진행 방향에 따라 Y축을 동일한 단위 벡터로 나눈 후, X축의 각 단위 벡터에 대응하여 X축을 각 성분 벡터로 분해할 수 있다(도 7c 참조). 또한, 본 발명의 필기의 진행 방향을 단위 시간으로 구분하고, 단위 시간으로 구분된 지점을 통해서 X축의 성분 벡터와 Y축의 성분 벡터로 분해할 수 있다. 이와 같이, 궤적을 분해하려고 하는 경우, 기준이 되는 좌표축(예: X축 또는 Y축) 또는 단위 시간에 따라 기준이 아닌 좌표축의 벡터 값은 조절될 수 있다. 이러한 궤적(710)의 단위 벡터에 설정되는 패턴은 도 6에서 나타낸 복수의 패턴 중 어느 하나의 패턴일 수 있다. 그리고, 제어부(110)는 각 좌표축의 성분 벡터 값에 따라서 서로 다른 크기를 갖는 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 제어부(110)는 궤적(710)의 단위 벡터 별로 X축 성분 벡터값에 대응하는 패턴의 크기와 Y축 성분 벡터값에 대응하는 패턴의 크기를 합산하고, 합산된 크기에 대응되는 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 또한, 제어부(110)는 궤적(710)의 각 좌표축 별 성분 벡터 별로 미리 설정된 피드백 신호를 개별적으로 출력할 수 있다. 또한, 제어부(110)는 궤적(710)의 각 좌표축 별 성분 벡터 별로 미리 설정된 피드백 신호를 합산하여 출력할 수 있다.
도 7b를 참조하면, 스크린(120)에 입력되는 필기 궤적의 진행 방향(710)을 도시하고 있으며, 본 발명의 일 실시예에 따른 진행 방향에 대응한 궤적은 X축의 단위 벡터로 분해될 수 있으며 이에 따라 궤적(710)의 성분 벡터 및 Y축의 성분 벡터의 크기를 파악할 수 있다.
도 7b에서의 진행 방향(710)은 X축의 단위 벡터로 분해될 수 있다. 필기의 진행 방향이 시작되는 지점으로부터 제1 구간(741)은 X축의 단위 벡터(742)와 Y축의 성분 벡터(743)로 분해되고, 제1 구간으로부터 시작되는 제2 구간(744)은 X축의 단위 벡터(745)과 Y축의 성분 벡터(746)로 분해되고, 제2 구간으로부터 시작되는 제3 구간(747)은 X축의 단위 벡터(748)과 Y축의 성분 벡터(749)으로 분해되고, 제3 구간으로부터 시작되는 제4 구간(750)은 X축의 단위 벡터(751)과 Y축의 성분 벡터(752)로 분해될 수 있다. 도 7b는 X축을 동일한 크기의 단위 벡터로 분해한 후, 필기의 진행 방향에 따라 Y축을 X축의 단위 벡터에 대응되는 성분 벡터로 분해하였으나 이는 단지 실시예일 뿐이며, 본 발명은 Y축을 동일한 단위 벡터로 분해한 후, 필기의 진행 방향에 따라 X축을 Y축의 단위 벡터에 대응되는 성분 벡터로 분해할 수 있다. 또한, 본 발명의 일 실시예는 필기의 진행 방향을 단위 시간으로 구분하고, 단위 시간으로 구분된 지점을 통해서 X축의 성분 벡터와 Y축의 성분 벡터로 분해할 수 있다. 이와 같이, 궤적을 단위 벡터로 분해하려고 하는 경우, 기준이 되는 좌표축(예: X축 또는 Y축) 또는 시간 단위에 따라 기준이 아닌 좌표축의 벡터 값은 조절될 수 있다. 도 7b는 X축을 기준 축으로 했을 경우, 단위 벡터(742, 745, 748, 741)는 동일한 크기를 갖는 패턴을 가질 수 있으며, 이러한 X축의 단위 벡터에 대응하는 Y축의 성분 벡터(743, 746, 749, 742)는 X축의 단위 벡터 당 궤적(710)의 진행 방향 또는 크기에 따라 서로 다른 크기를 가진 패턴일 수 있다. 이러한 X축의 단위 벡터 또는 Y축을 기준축으로 했을 경우의 Y축의 단위 벡터는 도 6에서 나타낸 복수의 패턴 중 어느 하나의 패턴으로 설정될 수 있다. 그리고, X축의 단위 벡터에 대응하는 Y축의 성분 벡터(743, 746, 749, 742)의 크기는 Y축의 단위 벡터의 크기를 기준으로 조절된다. 예를 들어, Y축의 제1 성분 벡터(743)의 패턴은 Y축의 단위 벡터의 크기보다 큰 패턴일 수 있고, Y축의 제2 성분 벡터(746)는 Y축의 단위 벡터와 동일한 크기를 갖는 패턴일 수 있다. 그리고, Y축의 제3 및 제4 성분 벡터(749, 752)는 Y축의 단위 벡터보다 작은 크기를 갖는 패턴일 수 있다. 상술한 바와 같이, 제어부(110)는 각 좌표축의 단위 벡터에 대응되는 패턴 및 성분 벡터에 대응되는 패턴을 합산하고, 합산된 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 제어부(110)는 이러한 X축의 단위 벡터에 대응하는 패턴의 크기와 Y축의 성분 벡터에 대응하는 패턴의 크기를 합산하여 합산된 크기에 대응되는 사운드 및 진동 중 적어도 하나를 출력할 수 있다.
도 7c를 참조하면, 스크린(120)에 입력되는 필기 궤적의 진행 방향(710)을 도시하고 있으며, 본 발명의 일 실시예에 따른 진행 방향에 대응한 궤적은 Y축의 단위 벡터로 분해될 수 있으며 이에 따라 궤적(710)의 성분 벡터 및 X축의 성분 벡터의 크기를 파악할 수 있다.
도 7c에서의 진행 방향(710)은 Y축의 단위 벡터로 분해될 수 있다. 필기의 진행 방향이 시작되는 지점으로부터 제1 구간(760)은 X축의 성분 벡터(761)와 Y축의 단위 벡터(762)로 분해되고, 제1 구간으로부터 시작되는 제2 구간(763)은 X축의 성분 벡터(764)과 Y축의 단위 벡터(765)로 분해되고, 제2 구간으로부터 시작되는 제3 구간(766)은 X축의 성분 벡터(767)과 Y축의 단위 벡터(768)으로 분해되고, 제3 구간으로부터 시작되는 제4 구간(769)은 X축의 성분 벡터(770)과 Y축의 단위 벡터(771)로 분해될 수 있다. 도 7c는 Y축을 동일한 크기의 단위 벡터로 분해한 후, 필기의 진행 방향에 따라 X축을 Y축의 단위 벡터에 대응되는 성분 벡터로 분해하였으나 이는 단지 실시예일 뿐이며, 본 발명은 X축을 동일한 단위 벡터로 분해한 후, 필기의 진행 방향에 따라 Y축을 X축의 단위 벡터에 대응되는 성분 벡터로 분해할 수 있다. 또한, 본 발명의 일 실시예는 필기의 진행 방향을 단위 시간으로 구분하고, 단위 시간으로 구분된 지점을 통해서 X축의 성분 벡터와 Y축의 성분 벡터로 분해할 수 있다. 이와 같이, 궤적을 단위 벡터로 분해하려고 하는 경우, 기준이 되는 좌표축(예: X축 또는 Y축) 또는 시간 단위에 따라 기준이 아닌 좌표축의 벡터 값은 조절될 수 있다. 도 7c는 Y축을 기준 축으로 했을 경우, 단위 벡터(762, 765, 768, 771, 774, 777)는 동일한 크기를 갖는 패턴을 가질 수 있으며, 이러한 Y축의 단위 벡터에 대응하는 X축의 성분 벡터(761, 764, 767, 770, 773, 776)는 Y축의 단위 벡터 당 궤적(710)의 진행 방향 또는 크기에 따라 서로 다른 크기를 가진 패턴일 수 있다. 이러한 Y축의 단위 벡터 또는 X축을 기준축으로 했을 경우의 X축의 단위 벡터는 도 6에서 나타낸 복수의 패턴 중 어느 하나의 패턴으로 설정될 수 있다. 그리고, Y축의 단위 벡터에 대응하는 X축의 성분 벡터(761, 764, 767, 770, 773, 776)의 크기는 X축의 단위 벡터의 크기를 기준으로 조절된다. 예를 들어, X축의 제1 성분 벡터(761)의 패턴은 X축의 단위 벡터의 크기보다 작은 패턴일 수 있고, X축의 제3 성분 벡터(767)는 X축의 단위 벡터와 동일한 크기를 갖는 패턴일 수 있다. 그리고, X축의 제4 성분 벡터(770)는 X축의 단위 벡터보다 큰 크기를 갖는 패턴일 수 있다. 상술한 바와 같이, 제어부(110)는 각 좌표축의 단위 벡터에 대응되는 패턴과 성분 벡터에 대응되는 패턴을 합산하고, 합산된 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 제어부(110)는 이러한 Y축의 단위 벡터에 대응하는 패턴의 크기와 X축의 성분 벡터에 대응하는 패턴의 크기를 합산하여 합산된 크기에 대응되는 사운드 및 진동 중 적어도 하나를 출력할 수 있다.
도 8은 본 발명의 다양한 실시예에 따른 패턴을 합산하는 예시도이다.
보다 상세하게, 도 8a는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 설정된 파형을 나타낸 예시도이고, 도 8b는 본 발명의 다양한 실시 예에 따른 Y축의 단위 벡터에 설정된 파형을 나타낸 예시도이고, 도 8c는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산하는 과정을 나타낸 예시도이고, 도 8d는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산한 결과를 나타낸 예시도이다.
도 8a를 참조하면, 도 8a는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 설정된 파형을 나타낸 예시도로서, X축의 제1 단위 시간(t1)과 제2 단위 시간(t2)는 동일한 크기의 전압을 가지며, 제3 단위 시간(t3)은 제1 단위 시간 및 제2 단위 시간보다 작은 크기의 전압을 가짐을 알 수 있다. 이러한, 각각의 단위 시간과 전압은 가변적으로 조절될 수 있다. 도시된 바와 같이, X축의 단위 벡터에 설정된 파형은 제1 단위 시간 내지 제3 단위 시간에 대응하는 전압을 통해서 출력되는 사운드 또는 진동의 패턴을 가진다.
그리고, 도 8b를 참조하면, 도 8b는 본 발명의 다양한 실시 예에 따른 Y축의 단위 벡터에 설정된 파형을 나타낸 예시도로서, Y축의 제1 단위 시간(t1)과 제2 단위 시간(t2)과 제3 단위 시간(t3)의 전압의 크기는 서로 다름을 알 수 있다. 제1 단위 시간의 전압이 가장 크고, 제2 단위 시간의 전압은 제로이다. 그리고, 제3 단위 시간의 전압은 제1 단위 시간의 전압보다 작고 제2 단위 시간의 전압보다 크다. 이러한, 각각의 단위 시간과 전압은 가변적으로 조절될 수 있다. 도시된 바와 같이, Y축의 단위 벡터에 설정된 파형은 제1 단위 시간 내지 제3 단위 시간에 대응하는 전압을 통해서 출력되는 사운드 또는 진동의 패턴을 가진다.
그리고, 도 8c를 참조하면, 도 8c는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산하는 과정을 나타낸 예시도로서, 도 8a의 X축의 단위 벡터에 설정된 파형과, 도 8b의 Y축의 단위 벡터에 설정된 파형이 합산됨을 알 수 있다. 마찬가지로, 본 발명은 X축의 단위 벡터에 설정된 파형과 Y축의 성분 벡터에 대응되는 파형을 합산할 수 있고, Y축의 단위 벡터에 설정된 파형과 X축의 성분 벡터에 대응되는 파형을 합산할 수 있다. 이러한 각 좌표축의 성분 벡터는 다른 좌표축의 단위 벡터에 의해 조절될 수 있다.
그리고, 도 8d를 참조하면, 도 8d는 본 발명의 다양한 실시 예에 따른 X축의 단위 벡터에 대응하는 파형과 Y축의 단위 벡터에 대응하는 파형을 합산한 결과를 나타낸 예시도이다. 도 8d의 파형은 8c의 합산 과정을 통해서 새로운 패턴의 파형이 생성된다. 이러한, 도 8a 내지 도 8d는 단지 실시 예일 뿐이며 본 발명의 다양한 실시예는 각 좌표축의 단위 벡터에 설정된 파형에 따라 사운드 및 진동의 크기와 출력 시간을 다르게 할 수 있다.
도 9는 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 속도에 대응하여 피드백을 출력하는 과정을 나타낸 순서도이다.
이하, 도 9를 참조하여, 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 속도에 대응하여 피드백을 출력하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린 상에 입력되는 필기 궤적을 감지한다(910). 제어부(110)는 스크린(120) 상에서 터치를 이용하여 입력되는 필기를 감지할 수 있다. 상기 필기는 문자 또는 그림 등 입력 유닛 또는 손가락의 제스처에 의해 표현되는 다양한 형태의 필기를 포함한다. 또한, 제어부는 스크린(120)뿐만 아니라 전자 장치(100)의 외관에 구성된 홈 버튼(미도시), 메뉴 버튼(미도시) 및 뒤로 가기 버튼(미도시)에 입력되는 적어도 하나의 입력을 감지할 수 있다.
제어부(110)는 스크린(120) 상에 입력되는 필기의 속도를 측정하고, 측정된 속도에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출한다(920, 930). 제어부(110)는 필기의 속도를 단위 시간당 측정할 수 있다. 제어부(110)는 스크린 상에 입력되는 필기 궤적을 감지하고, 감지된 필기의 속도를 측정하고, 측정된 속도에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나의 패턴을 추출할 수 있다. 또한, 제어부(110)는 스크린 상에 입력되는 필기 궤적을 감지하고, 감지된 필기의 진행 방향에 대응하여 각 좌표축에 대응되는 패턴을 추출할 수 있다. 또한, 제어부(110)는 스크린 상에 입력되는 필기의 압력에 대응되는 패턴을 추출할 수 있다. 제어부(110)는 필기의 속도에 대응하여 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하거나 입력되는 필기의 진행 방향에 대응하여 각 좌표축의 단위 벡터 및/또는 성분 벡터에 대응되는 패턴을 추출할 수 있다. 제어부(110)는 필기의 압력에 대응하여 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출할 수 있고, 추출된 패턴을 합산할 수 있다. 이러한 필기 압력 및/또는 속도에 대응되는 패턴과 진행 방향에 대응되는 패턴을 각각 추출하여 합산할 수 있다. 또한, 본 발명은 입력되는 필기의 진행 방향, 속도 및 압력에 대응되는 패턴을 각각 추출할 수 있다. 통상적으로 필기는 진행방향, 속도 및 압력이 동시에 이루어질 수 있는데, 본 발명은 이와 같이, 진행방향, 속도 및 압력이 동시에 이루어져도 각각의 속성에 따른 패턴을 추출하여 합산함으로써, 진행 방향, 속도 및 압력이 동시에 이루어져도 합산된 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다.
제어부(110)는 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 출력한다(940). 제어부(110)는 단위 시간 당 측정되는 속도에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 출력할 수 있다. 또한, 제어부(110)는 단위 시간 당 측정되는 속도에 대응되는 패턴과 상기 단위 시간 당 필기의 속도에 대응되는 패턴을 합산하고, 합산된 패턴을 출력할 수 있다. 이러한, 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 측정 결과에 비례하거나 반비례할 수 있다. 예를 들어, 측정된 필기의 속도가 증가할수록 출력되는 패턴의 세기는 증가될 수도 있고 감소될 수도 있다. 그리고, 측정 결과가 미리 결정된 임계값 이상인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 상기 미리 결정된 임계값에 대응되는 세기보다 이상일 수 있다. 또한, 만일, 측정 결과가 미리 결정된 임계값 미만인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 상기 미리 결정된 임계값에 대응되는 세기보다 미만일 수 있다. 또한, 제어부(110)는 필기의 속도에 대응하여 사운드 패턴 및 진동 패턴 중 추출된 적어도 하나의 패턴을 이용하여 출력하거나 입력되는 필기의 진행 방향에 대응하여 각 좌표축에 따라 추출된 패턴을 이용하여 출력하거나 이러한 필기 속도에 대응되는 패턴과 진행 방향에 대응되는 패턴이 합산된 새로 생성된 패턴을 출력할 수 있다.
도 10은 본 발명의 일 실시예에 따른 스크린상에 입력되는 필기의 속도에 따라 출력되는 패턴을 나타낸 예시도이다.
도 10에 도시된 바와 같이, 본 발명은 스크린(120)에 입력되는 필기의 속도(Velocity)에 따라서 서로 다른 파형을 가진 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 필기의 속도가 미리 결정된 제1 임계값(V1)보다 작은 경우, 제어부(110)는 제1 파형(1010)을 이용하여 사운드 및 진동 중 적어도 하나를 출력하고, 필기의 속도가 미리 결정된 제2 임계값(V2)보다 작고 제1 임계값(V1) 이상인 경우 제2 파형(1020)으로 사운드 및 진동 중 적어도 하나를 출력하고, 필기의 속도가 미리 결정된 제2 임계값(V2)보다 이상인 경우 제3 파형(1030)을 이용하여 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 또한, 제어부(110)는 필기의 속도가 제2 임계값(V2)보다 이상인 경우 제3 파형(1030)을 출력할 수 있을 뿐만 아니라, 피드백 속성을 변경하여 사용자로 하여금 필기의 속도가 지나치게 빠르다는 것을 인지시킬 수 있는 촉각적 피드백, 시각적 피드백 청각적 피드백 중 적어도 하나를 출력할 수 있다. 이러한 속성이 변경된 피드백은 벽, 바닥 등을 긁었을 경우에 발생되는 긁히는 소리 또는 경고음을 포함한다. 그리고, 제1 파형 내지 제3 파형(1010, 1020, 1030) 각각은 서로 다른 파형이거나 동일한 파형일 수 있다. 제1 파형(1010)은 측정된 필기의 속도가 기준 속도보다 작기 때문에 기준 파형, 즉 제2 파형(1020)보다 작은 전압의 파형으로 출력하고, 제3 파형(1030)은 측정된 필기의 속도가 기준 파형 이상으로 크기 때문에 기준 파형, 즉 제2 파형(1020)보다 큰 전압의 파형으로 출력한다. 이와 같이, 본 발명은 측정되는 속도에 비례하여 전압이 큰 파형의 패턴을 출력한다. 또한, 본 발명은 측정되는 속도에 반비례하여 전압이 작은 파형의 패턴을 출력할 수도 있다.
도 11은 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 압력에 대응하여 피드백을 출력하는 과정을 나타낸 순서도이다.
이하, 도 11을 참조하여, 본 발명의 다른 실시예에 따른 스크린 상에 입력되는 필기의 압력에 대응하여 피드백을 출력하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린 상에 입력되는 필기의 궤적을 감지한다(1110). 제어부(110)는 스크린(120) 상에서 터치를 이용하여 입력되는 필기를 감지할 수 있다. 상기 필기는 문자 또는 그림 등 입력 유닛 또는 손가락의 제스처에 의해 표현되는 다양한 형태의 필기를 포함한다. 또한, 제어부는 스크린(120)뿐만 아니라 전자 장치(100)의 외관에 구성된 홈 버튼(미도시), 메뉴 버튼(미도시) 및 뒤로 가기 버튼(미도시)에 입력되는 적어도 하나의 입력을 감지할 수 있다.
제어부(110)는 스크린(120) 상에 입력되는 필기의 압력을 측정하고, 측정된 압력에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출한다(1120, 1130). 제어부(110)는 필기의 압력을 단위 시간당 측정할 수 있다. 제어부(110)는 스크린 상에 입력되는 필기를 감지하고, 감지된 필기의 압력을 측정하고, 측정된 압력에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나의 패턴을 추출할 수 있다. 또한, 제어부(110)는 스크린 상에 입력되는 필기를 감지하고, 감지된 필기의 진행 방향에 대응하여 각 좌표축에 대응되는 패턴을 추출할 수 있다. 또한, 제어부(110)는 스크린 상에 입력되는 필기의 속도에 대응되는 패턴을 추출할 수 있다. 제어부(110)는 필기의 압력에 대응하여 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하거나 입력되는 필기의 진행 방향에 대응하여 각 좌표축의 단위 벡터 및/또는 성분 벡터에 대응되는 패턴을 추출할 수 있다. 제어부(110)는 필기의 속도에 대응하여 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출할 수 있고, 추출된 패턴을 합산할 수 있다. 이러한 필기 압력 및/또는 속도에 대응되는 패턴과 진행 방향에 대응되는 패턴을 각각 추출하여 합산할 수 있다. 또한, 본 발명은 입력되는 필기의 진행 방향, 속도 및 압력에 대응되는 패턴을 각각 추출할 수 있다. 통상적으로 필기는 진행방향, 속도 및 압력이 동시에 이루어질 수 있는데, 본 발명은 이와 같이, 진행방향, 속도 및 압력이 동시에 이루어져도 각각의 속성에 따른 패턴을 추출하여 합산함으로써, 진행 방향, 속도 및 압력이 동시에 이루어져도 합산된 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다.
제어부(110)는 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 출력한다(1140). 제어부(110)는 단위 시간 당 측정되는 압력에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 입력되는 필기에 대응하여 출력할 수 있다. 또한, 제어부(110)는 단위 시간 당 측정되는 압력에 대응되는 패턴과 상기 단위 시간 당 필기의 압력에 대응되는 패턴을 합산하고, 합산된 패턴을 출력할 수 있다. 이러한, 추출된 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 측정 결과에 비례하거나 반비례할 수 있다. 예를 들어, 측정된 필기의 압력이 증가할수록 출력되는 패턴의 세기는 증가될 수도 있고 감소될 수도 있다. 그리고, 측정 결과가 미리 결정된 임계값 이상인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 상기 미리 결정된 임계값에 대응되는 세기보다 이상일 수 있다. 또한, 만일, 측정 결과가 미리 결정된 임계값 미만인 경우, 사운드 패턴 및 진동 패턴 중 적어도 하나의 출력 세기는 상기 미리 결정된 임계값에 대응되는 세기보다 미만일 수 있다. 또한, 제어부(110)는 필기의 압력에 대응하여 사운드 패턴 및 진동 패턴 중 추출된 적어도 하나의 패턴을 이용하여 출력하거나 입력되는 필기의 진행 방향에 대응하여 각 좌표축에 따라 추출된 패턴을 이용하여 출력하거나 이러한 필기 압력에 대응되는 패턴과 진행 방향에 대응되는 패턴이 합산된 새로 생성된 패턴을 출력할 수 있다.
도 12는 본 발명의 일 실시예에 따른 스크린상에 입력되는 필기의 압력에 따라 출력되는 패턴을 나타낸 예시도이다.
도 12에 도시된 바와 같이, 본 발명은 스크린(120)에 입력되는 필기의 압력(Pascal)에 따라서 서로 다른 파형을 가진 패턴으로 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 필기의 압력이 미리 결정된 제1 임계값(P1)보다 작은 경우 제1 파형(1210)을 이용하여 사운드 및 진동 중 적어도 하나를 출력하고, 필기의 압력이 미리 결정된 제2 임계값(P2)보다 작고 제1 임계값(P1) 이상인 경우 제2 파형(1220)으로 사운드 및 진동 중 적어도 하나를 출력하고, 필기의 압력이 미리 결정된 제2 임계값(P2)보다 이상인 경우 제3 파형(1230)을 이용하여 사운드 및 진동 중 적어도 하나를 출력할 수 있다. 또한, 제어부(110)는 필기의 압력이 제2 임계값(P2)보다 이상인 경우 제3 파형(1230)을 출력할 수 있을 뿐만 아니라, 피드백 속성을 변경하여 사용자로 하여금 필기의 압력이 지나치게 높다는 것을 인지시킬 수 있는 촉각적 피드백, 시각적 피드백 청각적 피드백 중 적어도 하나를 출력할 수 있다. 이러한 속성이 변경된 피드백은 입력 유닛이 필기 입력 방향에 따라 휘거나 부러지는 효과, 종이가 찢어지는 효과 또는 경고음을 포함한다. 그리고, 제1 파형 내지 제3 파형(1210, 1220, 1230) 각각은 서로 다른 파형이거나 동일한 파형일 수 있다. 제1 파형(1210)은 측정된 필기의 압력이 기준 압력보다 작기 때문에 기준 파형, 즉 제2 파형(1220)보다 작은 전압의 파형으로 출력하고, 제3 파형(1230)은 측정된 필기의 압력이 기준 파형 이상으로 크기 때문에 기준 파형, 즉 제2 파형(1220)보다 큰 전압의 파형으로 출력한다. 이와 같이, 본 발명은 측정되는 압력에 비례하여 전압이 큰 파형의 패턴을 출력한다. 또한, 본 발명은 측정되는 압력에 반비례하여 전압이 작은 파형의 패턴을 출력할 수도 있다.
도 13은 본 발명의 일 실시예에 따른 필기 궤적에 대응하여 피드백을 다른 장치로 송신하는 과정을 나타낸 순서도이다.
이하, 도 13을 참조하여, 본 발명의 일 실시예에 따른 필기 궤적에 대응하여 피드백을 다른 장치로 송신하는 과정을 상세히 설명하면 다음과 같다.
제어부(110)는 스크린(120) 상에 입력되는 필기 궤적을 감지하고, 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할한다(1310, 1320). 제어부(110)는 입력되는 필기 궤적을 단위 시간 별로 감지할 수 있다. 제어부(110)는 단위 시간 별로 입력되는 필기 궤적의 길이 또는 거리를 통해서 입력되는 필기 궤적을 각 좌표축 별 성분 벡터로 분할할 수 있다. 이러한 각 좌표축 별로 피드백 신호가 미리 할당될 수 있다. 또한, 제어부(110)는 각 좌표축 별 성분 벡터의 길이 또는 거리를 통해서 상기 미리 할당된 피드백 신호의 진폭 및 주파수 중 적어도 하나를 제어할 수 있다.
그리고, 제어부(110)는 각 성분 벡터에 대한 피드백 신호를 생성한다(1330). 제어부(110)는 각 좌표축 별 성분 벡터에 대응하는 복수의 피드백 신호를 생성할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력되도록 입/출력부(150)를 제어하거나 또는 각 좌표축 별로 생성된 피드백 신호를 합성할 수 있다. 제어부(110)는 각 좌표축 별로 생성된 피드백 신호의 진폭 및 주파수 중 적어도 하나를 조절하여 피드백 신호를 생성할 수 있다. 제어부(110)는 스크린에 입력되는 필기의 진행 방향을 통해서 각 좌표축의 단위 벡터에 설정된 또는 각 좌표축에 대한 성분 벡터로부터 조절된 패턴을 합산하여 새로운 패턴의 사운드 및 진동 중 적어도 하나를 생성할 수 있다. 또한, 제어부(110)는 필기의 진행 방향이 감지되면, 진행 방향에서 일정 거리에 해당되는 각각의 좌표값(예: 일정 거리에서의 X축, Y축 또는 Z축 좌표 값)에 대응되는 패턴을 합산할 수 있다. 제어부(110)는 각각의 좌표축에 미리 설정된 피드백 신호를 필기 궤적의 이동 거리에 대응하여 진폭 및 주파수 중 적어도 하나를 제어할 수 있다. 그리고, 제어부(110)는 이러한 제어에 의해 피드백 신호를 생성할 수 있다. 또한, 제어부(110)는 좌표축에 기 설정된 패턴을 개별적으로 출력하거나 합산하여 출력할 수 있다.
제어부(110)는 생성된 피드백 신호를 다른 전자 장치로 송신한다(1340). 상기 다른 전자 장치는 본 발명의 다양한 실시예에 따른 전자 장치와 기능적으로 연결된 전자 장치일 수 있다. 상기 다른 전자 장치는 상기 전자 장치로부터 송신되는 피드백 신호를 수신하고, 수신된 피드백 신호에 대응하여 피드백을 출력할 수 있다. 상기 다른 전자 장치는 상기 전자 장치에 장착될 수 있는 입력 유닛을 포함할 수 있다. 또한, 상기 다른 전자 장치는 상기 전자 장치와 통신을 수행할 수 있는 전자 장치일 수 있다.
제어부(110)는 생성된 피드백 신호를 출력한다(1350). 제어부(110)는 입력되는 필기 궤적에 대응하여 생성된 피드백 신호를 출력할 수 있다. 또한, 제어부(110)는 입력되는 필기 궤적에 실시간으로 대응하여 피드백 신호를 생성하여 출력할 수 있다. 상기 피드백 신호는 진동 및 사운드 중 적어도 하나를 포함할 수 있다.
본 발명의 다양한 실시예들은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 전자 장치 내에 포함될 수 있는 저장부는 본 발명의 다양한 실시예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
또한, 상기 전자 장치는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 상기 전자 장치가 입력되는 필기에 대응하여 피드백을 출력하는 방법을 수행하도록 하는 지시들을 포함하는 프로그램, 입력되는 필기에 대응하여 피드백을 출력하는 방법에 필요한 정보 등을 저장하기 위한 저장부와, 상기 전자 장치와의 유선 또는 무선 통신을 수행하기 위한 통신부와, 상기 전자 장치의 요청 또는 자동으로 해당 프로그램을 상기 휴대 장치로 전송하는 제어부를 포함할 수 있다.
한편, 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
110: 제어부 120: 스크린
130: 스크린 컨트롤러 140: 통신부
150: 입/출력부 160: 전원 공급부
170: 저장부

Claims (33)

  1. 필기 궤적에 따라 피드백을 출력하는 방법에 있어서,
    스크린 상에 필기 궤적을 입력받는 동작과,
    상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하는 동작과,
    상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하는 동작과,
    상기 피드백 신호를 상기 필기 궤적에 대응하여 출력하는 동작을 포함하는 방법.
  2. 제1 항에 있어서,
    상기 생성하는 동작은,
    적어도 하나의 지정된(specified) 단위 피드백 신호 중 각 좌표축에 대응하는 단위 피드백 신호를 호출하는 동작을 더 포함하는 방법.
  3. 제1 항에 있어서,
    상기 출력 과정은 상기 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력하거나 또는 합성하여 출력하는 것을 특징으로 하는 방법.
  4. 제1 항에 있어서,
    상기 피드백 신호는 진폭 및 주파수 중 적어도 하나가 조정되어 출력되는 방법.
  5. 제2 항에 있어서,
    상기 각 좌표축에 대응하는 상기 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함하는 방법.
  6. 제5 항에 있어서,
    상기 제1 단위 피드백 신호와 상기 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함하는 방법.
  7. 제1 항에 있어서,
    상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하되,
    상기 복수의 피드백 신호는,
    상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경하고, 상기 제2 좌표축에 대응하여 상기 피드백 신호의 주파수를 변경하는 동작을 포함하는 방법.
  8. 제1 항에 있어서,
    상기 피드백 신호는 미리 결정된 단위 시간 마다 측정된 성분 벡터의 길이에 따라 생성되는 것을 특징으로 하는 방법.
  9. 제1 항에 있어서,
    상기 피드백 신호는 상기 필기 궤적의 진행 방향, 속도 또는 압력 중 적어도 하나에 따라서 다른 것을 특징으로 하는 방법.
  10. 제1 항에 있어서,
    상기 피드백 신호를 생성하는 동작은,
    상기 입력의 진행 방향에 따라 상기 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하는 동작과,
    상기 추출된 패턴을 합산하는 동작을 포함하는 방법.
  11. 제1 항에 있어서,
    상기 생성된 피드백 신호는 상기 필기 궤적의 입력에 대응하여 실시간으로 출력되는 것을 특징으로 하는 방법.
  12. 제10 항에 있어서,
    상기 피드백 신호는 상기 필기 궤적의 속도 및 압력 중 적어도 하나에 비례하거나 또는 반비례하여 출력되는 것을 특징으로 하는 방법.
  13. 제1 항에 있어서,
    상기 전자 장치에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신하는 동작을 더 포함하는 방법.
  14. 필기 궤적을 입력받기 위한 스크린,
    상기 필기 궤적을 각 좌표축 별 성분 벡터로 분할하고, 상기 각 성분 벡터에 대응하는 복수의 피드백 신호를 생성하는 제어부,
    상기 피드백 신호를 다른 전자 장치로 송신하기 위한 통신부,
    상기 피드백 신호를 상기 필기 궤적에 대응하여 출력하는 출력부를 포함하는 전자 장치.
  15. 제14 항에 있어서,
    상기 필기 궤적의 진행 방향, 속도 및 압력 중 적어도 하나에 각각 대응하는 각 좌표축 별 지정된(specified) 단위 피드백 신호를 저장하기 위한 저장부를 더 포함하되,
    상기 제어부는 상기 단위 피드백 신호를 상기 필기 궤적에 대응하여 호출하도록 설정된 전자 장치.
  16. 제14 항에 있어서,
    상기 제어부는 상기 각 좌표축 별로 생성된 피드백 신호를 개별적으로 출력하거나 또는 상기 각 좌표축 별로 생성된 피드백 신호를 합성하여 출력하도록 설정된 전자 장치.
  17. 제14 항에 있어서,
    상기 제어부는 상기 피드백 신호의 진폭 및 주파수 중 적어도 하나를 조정하기 위한 전자 장치.
  18. 제14 항에 있어서,
    상기 좌표축은 제1 및 제2 좌표축을 포함하되,
    상기 제1 좌표축에 할당된 상기 단위 피드백 신호는 제1 신호 패턴으로 이루어지고,
    상기 제2 좌표축에 할당된 상기 단위 피드백 신호는 상기 제1 신호 패턴과 서로 다른 제2 신호 패턴으로 이루어지는 전자 장치.
  19. 제14 항에 있어서,
    상기 제어부는 상기 제1 좌표축에 대한 성분 벡터에 따라 상기 피드백 신호의 진폭을 변경하는 동작 및 상기 제2 좌표축에 대한 성분 벡터에 따라 상기 피드백 신호의 주파수 변경하는 동작 중 적어도 하나를 제어하기 위한 전자 장치.
  20. 제14 항에 있어서,
    상기 제어부는 상기 필기 궤적을 지정된 단위 시간마다 측정하고, 상기 단위 시간에 대응하는 상기 성분 벡터의 길이에 따라 상기 피드백 신호를 생성하기 위한 전자 장치.
  21. 제14 항에 있어서,
    상기 제어부는 상기 스크린 상에 입력되는 상기 필기 궤적의 진행 방향, 속도 및 압력 중 적어도 하나를 실시간으로 감지하기 위한 전자 장치.
  22. 제14 항에 있어서,
    상기 제어부는 상기 필기 궤적을 상기 스크린 상의 좌표 공간에 매핑하여 상기 각 좌표축에 대한 성분 벡터로 분할하고, 상기 분할된 각 좌표축의 성분 벡터에 대응하는 패턴을 합산하기 위한 전자 장치.
  23. 전자 장치와 기능적으로 연결되어 상기 전자 장치로부터 피드백 신호를 수신하기 위한 근거리 통신부,
    상기 피드백 신호를 제어하기 위한 제어부, 및
    상기 피드백 신호를 출력하기 위한 출력부를 포함하는 입력 유닛.
  24. 전자 장치를 이용하여 스크린을 제어하는 방법에 있어서,
    상기 스크린을 통하여 사용자로부터 입력을 획득하는 동작,
    상기 입력의 이동 방향, 속도 또는 압력 중 적어도 하나에 기반하여 상기 입력에 대응하는 적어도 하나의 입력 속성을 결정하는 동작, 및
    상기 적어도 하나의 입력 속성에 기반하여 결정된 피드백 신호를 상기 전자 장치와 기능적으로 연결된 출력 장치를 통하여 출력하는 동작을 포함하되,
    상기 적어도 하나의 입력 속성이 제1 속성인 경우에는 제1 피드백 신호를 제공하고, 상기 적어도 하나의 입력 속성이 제2 속성인 경우에는 제2 피드백 신호를 제공하는 동작을 포함하는 방법.
  25. 제24 항에 있어서,
    적어도 하나의 지정된(specified) 단위 피드백 신호 중 각 좌표축에 대응하는 단위 피드백 신호를 호출하는 동작을 더 포함하는 방법.
  26. 제24 항에 있어서,
    상기 적어도 하나의 입력 속성은, 제1 입력 속성 및 제2 입력 속성을 포함하고,
    상기 출력하는 동작은, 상기 제1 입력 속성 및 상기 제2 입력 속성 각각에 대응하는 피드백 신호를 개별적으로 복수의 신호로서 출력하거나 또는 조합하여 하나의 신호로서 출력하는 동작을 포함하는 방법.
  27. 제24 항에 있어서,
    상기 피드백 신호는 상기 적어도 하나의 입력 속성에 따라 진폭 또는 주파수 중 적어도 하나가 조정되어 출력되는 방법.
  28. 제25 항에 있어서,
    상기 각 좌표축에 대응하는 상기 단위 피드백 신호는 제1 좌표축에 대응하는 제1 단위 피드백 신호 및 제2 좌표축에 대응하는 제2 단위 피드백 신호를 포함하는 방법.
  29. 제28 항에 있어서,
    상기 제1 단위 피드백 신호와 상기 제2 단위 피드백 신호는 서로 다른 신호 패턴을 포함하는 방법.
  30. 제25 항에 있어서,
    상기 좌표축은 제1 좌표축 및 제2 좌표축을 포함하되,
    상기 피드백 신호는,
    상기 제1 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 진폭을 변경하고, 상기 제2 좌표축에 대한 성분 벡터에 대응하여 상기 피드백 신호의 주파수를 변경하는 방법을 포함하는 방법.
  31. 제27 항에 있어서,
    상기 피드백 신호의 진폭은,
    상기 입력의 속도 및 압력 중 적어도 하나에 비례하거나 또는 반비례하여 출력되는 동작을 포함하는 방법.
  32. 제24 항에 있어서,
    상기 입력의 진행 방향에 따라 각 좌표축의 벡터 성분에 대응되는 사운드 패턴 및 진동 패턴 중 적어도 하나를 추출하는 동작과,
    상기 추출된 패턴을 합산하는 동작을 포함하는 방법.
  33. 제24 항에 있어서,
    상기 전자 장치에 대한 외부 장치인 다른 전자 장치가 상기 피드백 신호를 출력할 수 있도록 상기 피드백 신호를 상기 다른 전자 장치로 송신하는 동작을 더 포함하는 방법.
KR1020140026603A 2014-03-06 2014-03-06 피드백을 출력하는 전자 장치 및 방법 KR20150104808A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020140026603A KR20150104808A (ko) 2014-03-06 2014-03-06 피드백을 출력하는 전자 장치 및 방법
US14/584,478 US20150253851A1 (en) 2014-03-06 2014-12-29 Electronic device and method for outputting feedback
CN201510101094.6A CN104898825A (zh) 2014-03-06 2015-03-06 用于输出反馈的电子设备和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140026603A KR20150104808A (ko) 2014-03-06 2014-03-06 피드백을 출력하는 전자 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20150104808A true KR20150104808A (ko) 2015-09-16

Family

ID=54017333

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140026603A KR20150104808A (ko) 2014-03-06 2014-03-06 피드백을 출력하는 전자 장치 및 방법

Country Status (3)

Country Link
US (1) US20150253851A1 (ko)
KR (1) KR20150104808A (ko)
CN (1) CN104898825A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190058111A (ko) * 2017-11-21 2019-05-29 삼성전자주식회사 진동을 제공하기 위한 장치 및 방법

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3163903B1 (en) * 2015-10-26 2019-06-19 Nxp B.V. Accoustic processor for a mobile device
CN105718173B (zh) * 2016-01-19 2019-12-10 宇龙计算机通信科技(深圳)有限公司 终端操控方法、终端操控装置和终端
US9684376B1 (en) * 2016-01-28 2017-06-20 Motorola Solutions, Inc. Method and apparatus for controlling a texture of a surface
EP3449338A4 (en) 2016-04-29 2020-01-08 Hewlett-Packard Development Company, L.P. MOVING AN INTERACTIVE WINDOW USING A TABLET-TYPE COMPUTING DEVICE
JP2018036841A (ja) * 2016-08-31 2018-03-08 ソニー株式会社 信号処理装置、信号処理方法、プログラム、および電子機器
DK201670728A1 (en) 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
US11482132B2 (en) * 2017-02-01 2022-10-25 Toyota Motor Engineering & Manufacturing North America, Inc. Devices and methods for providing tactile feedback
US11561619B2 (en) 2017-09-20 2023-01-24 Niki Mani Haptic feedback device and method for providing haptic sensation based on video
US11513627B2 (en) 2017-09-20 2022-11-29 Niki Mani Assistive device with a refreshable haptic feedback interface
US11726571B2 (en) 2017-09-20 2023-08-15 Niki Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10503310B2 (en) * 2017-09-20 2019-12-10 Alex Hamid Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10281983B2 (en) 2017-09-20 2019-05-07 Alex Hamid Mani Haptic feedback device and method for providing haptic sensation based on video
US10275083B2 (en) 2017-09-20 2019-04-30 Alex Hamid Mani Assistive device with a refreshable haptic feedback interface
KR102518400B1 (ko) * 2017-11-22 2023-04-06 삼성전자주식회사 진동을 제공하는 방법 및 이를 지원하는 전자 장치
JP7065367B2 (ja) * 2018-03-29 2022-05-12 パナソニックＩｐマネジメント株式会社 入力装置及び音声出力システム
JP7023903B2 (ja) * 2018-08-23 2022-02-22 タタ・コンサルタンシー・サーヴィシズ・リミテッド 手書き入力データのリアルタイムデジタル化のためのシステムおよび方法
JP7141927B2 (ja) * 2018-11-26 2022-09-26 ホシデン株式会社 振動付与装置及び振動制御方法
WO2020199170A1 (zh) * 2019-04-03 2020-10-08 深圳市柔宇科技有限公司 一种书写控制方法、书写板、手写输入装置和存储介质
WO2020258225A1 (zh) * 2019-06-28 2020-12-30 瑞声声学科技(深圳)有限公司 游戏手柄、游戏手柄的振动方法及装置
US11301674B2 (en) * 2020-01-16 2022-04-12 Microsoft Technology Licensing, Llc Stroke attribute matrices
US20210311551A1 (en) * 2020-04-01 2021-10-07 Wacom Co., Ltd. Handwritten data generation apparatus, handwritten data reproduction apparatus, and digital ink data structure
JP7501159B2 (ja) * 2020-07-01 2024-06-18 コニカミノルタ株式会社 情報処理装置、情報処理装置の制御方法及びプログラム
CN113849106B (zh) * 2021-08-27 2023-12-29 北京鸿合爱学教育科技有限公司 翻页笔迹处理方法、设备、电子设备及存储介质

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60136892A (ja) * 1983-12-26 1985-07-20 Hitachi Ltd オンライン手書き図形認識装置
US5491758A (en) * 1993-01-27 1996-02-13 International Business Machines Corporation Automatic handwriting recognition using both static and dynamic parameters
US5889889A (en) * 1996-12-13 1999-03-30 Lucent Technologies Inc. Method and apparatus for machine recognition of handwritten symbols from stroke-parameter data
GB9701793D0 (en) * 1997-01-29 1997-03-19 Gay Geoffrey N W Means for inputting characters or commands into a computer
GB2408337B (en) * 2003-11-21 2005-11-23 Marc Zuta Graphic input device and method
US7508382B2 (en) * 2004-04-28 2009-03-24 Fuji Xerox Co., Ltd. Force-feedback stylus and applications to freeform ink
JP4860625B2 (ja) * 2004-10-08 2012-01-25 イマージョン コーポレーション タッチ式入力装置におけるボタンおよびスクロール動作シミュレーション用の触覚フィードバック
US7619616B2 (en) * 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US20060158440A1 (en) * 2005-01-19 2006-07-20 Motion Computing Inc. Active dynamic tactile feedback stylus
US8253686B2 (en) * 2007-11-26 2012-08-28 Electronics And Telecommunications Research Institute Pointing apparatus capable of providing haptic feedback, and haptic interaction system and method using the same
JP5274187B2 (ja) * 2008-09-30 2013-08-28 任天堂株式会社 画像処理プログラム、情報処理装置、画像処理方法、および画像処理システム
US8378979B2 (en) * 2009-01-27 2013-02-19 Amazon Technologies, Inc. Electronic device with haptic feedback
CN101882228A (zh) * 2010-06-25 2010-11-10 宇龙计算机通信科技(深圳)有限公司 一种识别手写轨迹的方法、系统及移动终端
JP5827870B2 (ja) * 2011-10-28 2015-12-02 任天堂株式会社 座標処理プログラム、座標処理装置、座標処理システムおよび座標処理方法
US20130307829A1 (en) * 2012-05-16 2013-11-21 Evernote Corporation Haptic-acoustic pen
KR101958779B1 (ko) * 2012-09-28 2019-03-15 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190058111A (ko) * 2017-11-21 2019-05-29 삼성전자주식회사 진동을 제공하기 위한 장치 및 방법
US11262845B2 (en) 2017-11-21 2022-03-01 Samsung Electronics Co., Ltd. Device and method for providing vibration

Also Published As

Publication number Publication date
CN104898825A (zh) 2015-09-09
US20150253851A1 (en) 2015-09-10

Similar Documents

Publication Publication Date Title
KR20150104808A (ko) 피드백을 출력하는 전자 장치 및 방법
US10401964B2 (en) Mobile terminal and method for controlling haptic feedback
KR102104910B1 (ko) 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
KR102091077B1 (ko) 입력 유닛의 피드백을 제어하는 휴대 단말 및 방법과, 이를 제공하는 상기 입력 유닛 및 방법
RU2672134C2 (ru) Портативный терминал и способ обеспечения тактильного эффекта для блока ввода
KR102081817B1 (ko) 디지타이저 모드 전환 방법
AU2014200250B2 (en) Method for providing haptic effect in portable terminal, machine-readable storage medium, and portable terminal
KR102031142B1 (ko) 영상 디스플레이를 제어하는 전자 장치 및 방법
KR20140115836A (ko) 햅틱 효과를 제공하는 휴대 단말 및 방법
KR101815720B1 (ko) 진동 제어 방법 및 장치
KR20140097902A (ko) 햅틱 패턴을 생성하는 휴대 단말 및 방법
KR20140070150A (ko) 호버링 입력 효과를 제공하는 전자 장치 및 그 제어 방법
KR20140126129A (ko) 잠금 및 해제를 제어하는 장치 및 방법
KR20140105331A (ko) 터치 스크린 상에서 객체 디스플레이를 제어하는 휴대 단말 및 방법
KR20140134940A (ko) 터치 스크린을 제어하는 휴대 단말 및 방법 및 이를 위한 시스템
KR20150043109A (ko) 오브젝트 디스플레이를 제어하는 전자 장치 및 방법
KR20150007862A (ko) 데이터 제공을 제어하는 휴대 단말 및 방법
KR20140137629A (ko) 이어폰 연결을 감지하는 휴대 단말 및 방법
KR20150008963A (ko) 스크린을 제어하는 휴대 단말 및 방법
KR20150044757A (ko) 플로팅 입력에 따라 동작을 제어하는 전자 장치 및 그 방법
KR20150021243A (ko) 진동 및 소리 중 적어도 하나를 제어하는 전자 장치 및 방법
KR20140113757A (ko) 핑거프린트를 이용하여 미디어를 수신하는 휴대 단말 및 방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination