KR20160143428A - 펜 단말기 및 그 제어방법 - Google Patents

펜 단말기 및 그 제어방법 Download PDF

Info

Publication number
KR20160143428A
KR20160143428A KR1020150080142A KR20150080142A KR20160143428A KR 20160143428 A KR20160143428 A KR 20160143428A KR 1020150080142 A KR1020150080142 A KR 1020150080142A KR 20150080142 A KR20150080142 A KR 20150080142A KR 20160143428 A KR20160143428 A KR 20160143428A
Authority
KR
South Korea
Prior art keywords
motion
character
main body
movement
reference point
Prior art date
Application number
KR1020150080142A
Other languages
English (en)
Inventor
안예한
김치국
신만수
이영석
김호영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020150080142A priority Critical patent/KR20160143428A/ko
Priority to US14/978,517 priority patent/US20160357274A1/en
Priority to EP16803552.5A priority patent/EP3304259A4/en
Priority to PCT/KR2016/000155 priority patent/WO2016195197A1/en
Publication of KR20160143428A publication Critical patent/KR20160143428A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0383—Signal control means within the pointing device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 필기 입력이 가능한 펜을 활용하는 이동 단말기 및 그 제어방법에 관한 것으로, 본체와 상기 본체의 회전 움직임을 감지하는 제1감지부와 적어도 두 개의 센서를 포함하고, 상기 적어도 두 개의 센서가 서로 이격하여 배치되며, 상기 본체의 직선 움직임을 감지하는 제2감지부 및 상기 제1 및 제2 감지부로부터 감지된 직선 움직임 및 회전 움직임에 기초하여, 문자를 생성하는 제어부를 포함하고, 상기 제2감지부는 제1센서 및 제2센서를 포함하고, 상기 제어부는 상기 제1센서로부터 수신된 제1정보 및 상기 제2센서로부터 수신된 제2정보의 비율을 이용하여, 상기 회전 움직임을 보정한다.

Description

펜 단말기 및 그 제어방법{PEN TERMINAL AND METHOD FOR CONTROLLING THE SAME}
본 발명은 필기 입력이 가능한 펜 단말기 및 그 제어방법에 관한 것이다.
단말기는 이동 가능여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mounted terminal)로 나뉠 수 있다.
이동 단말기의 기능은 다양화 되고 있다. 예를 들면, 데이터와 음성통신, 카메라를 통한 사진촬영 및 비디오 촬영, 음성녹음, 스피커 시스템을 통한 음악파일 재생 그리고 디스플레이부에 이미지나 비디오를 출력하는 기능이 있다. 일부 단말기는 전자게임 플레이 기능이 추가되거나, 멀티미디어 플레이어 기능을 수행한다. 특히 최근의 이동 단말기는 방송과 비디오나 텔레비전 프로그램과 같은 시각적 컨텐츠를 제공하는 멀티캐스트 신호를 수신할 수 있다.
이와 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다.
이러한 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및/또는 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.
최근에는, 단말기와 연동되거나, 통신을 통하여, 단말기에 제어명령을 전달하거나, 터치하여 단말기의 화면정보를 조작 가능한 외부기기가 개발되고 있다. 예를 들어, 상기 외부기기는 단말기의 터치 스크린 상에 터치 입력을 가할 수 있는 터치 펜이 될 수 있다.
한편, 터치펜을 사용하는 경우, 단말기는 터치펜의 신호 및 터치를 감지하고, 이에 대하여 기능을 수행할 수 있는 별도의 소프트웨어 또는 하드웨어가 필요하다. 이에, 종래에는 각 단말기마다 사용 가능한 터치펜이 달라, 이용에 불편함이 있었다. 또한, 종래에는 터치펜을 사용하기 위해서는, 반드시 터치펜의 인식을 위한 외부기기가 필요하다는 문제점이 있었다.
단말기에 종속되지 않고, 독립적으로 사용될 수 있는 펜의 개발의 필요성이 대두되고 있다.
본 발명은 전술한 문제 및 다른 문제를 해결하는 것을 그 목적으로 한다.
또한, 본 발명은 단말기에 종속하지 않고, 독립적으로 사용 가능한 펜 유닛을 구현하는 것을 일 목적으로 한다.
또한, 본 발명은 종래의 필기구와 필기감이 동일한 펜 유닛을 구현하는 것을 또 다른 목적으로 한다.
본 발명은 필기 입력이 가능한 펜을 활용하는 이동 단말기 및 그 제어방법에 관한 것으로, 본체와 상기 본체의 회전 움직임을 감지하는 제1감지부와 적어도 두 개의 센서를 포함하고, 상기 적어도 두 개의 센서가 서로 이격하여 배치되며, 상기 본체의 직선 움직임을 감지하는 제2감지부 및 상기 제1 및 제2 감지부로부터 감지된 직선 움직임 및 회전 움직임에 기초하여, 문자를 생성하는 제어부를 포함하고, 상기 제2감지부는 제1센서 및 제2센서를 포함하고, 상기 제어부는 상기 제1센서로부터 수신된 제1정보 및 상기 제2센서로부터 수신된 제2정보의 비율을 이용하여, 상기 회전 움직임을 보정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 제1정보 및 상기 제2정보의 비율을 이용하여, 상기 회전 움직임의 선 속도를 보정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 제1 및 제2감지부를 통하여, 상기 본체의 제1움직임이 감지되면, 상기 제1움직임의 상대좌표를 이용하여, 제1움직임에 대응되는 제1문자를 생성하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 제1문자의 생성을 위한 가상의 기준점을 설정하고, 상기 기준점을 기준으로, 상기 제1움직임의 상대좌표를 절대좌표로 변환하여 상기 제1문자를 생성하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 기준점은 기 설정된 시간이 경과할 때마다 초기화되어, 새로운 기준점으로 다시 설정되는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 새로운 기준점이 다시 설정되면, 상기 설정된 새로운 기준점을 기준으로 상기 본체의 움직임에 대한 상대좌표를 절대좌표로 변환하여, 문자를 생성하는 것을 특징으로 한다.
일 실시 예에 있어서, 필기를 수행하는 팁부을 더 포함하고, 상기 팁부의 일단은 필기를 수행하기 위한 필기 수행부가 배치되고, 상기 팁부의 타단은 압력을 감지하도록 제3감지부가 배치되며, 상기 제어부는 상기 제3감지부에 가해지는 압력에 기초하여, 상기 기준점을 설정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 기준점은 상기 제3감지부에 압력이 감지된 시점에 대응되는 위치로 설정되는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 기준점은 상기 제3감지부에 압력이 감지되지 않은 상태에서, 압력이 감지되는 시점마다 재설정되는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 제3감지부에 압력의 감지가 시작되는 시작 시점에 대응되는 위치를 상기 기준점으로 설정하고, 상기 기준점을 기준으로, 상기 본체의 움직임에 대응되는 상대좌표를 절대좌표로 변환하여 문자를 생성하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 제3감지부에 가해지는 압력이 가해지는 시점부터 상기 문자 생성을 위한 상기 본체의 움직임을 감지하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 기 설정된 시간 동안 상기 제3감지부를 통하여 압력이 감지되지 않는 경우, 상기 본체의 움직임에 대응되는 문자가 생성되지 않도록 상기 본체의 움직임을 더 이상 감지하지 않는 것을 특징으로 한다.
일 실시 예에 있어서, 외부기기와 통신을 수행하는 통신부를 더 포함하고, 상기 제어부는 상기 생성된 문자가 상기 외부기기에 표시되도록 상기 생성된 문자를 나타내는 문자 정보를 상기 통신부를 통하여, 상기 외부기기에 전송하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 생성된 문자와 관련된 제어명령을 생성하고, 상기 제어명령이 나타내는 기능이 수행되도록 상기 제어명령을 상기 외부기기에 전송하는 것을 특징으로 한다.
일 실시 예에 있어서, 제2감지부는 제1센서 및 제2센서를 포함하고, 상기 제1센서 및 제2센서는 상기 본체의 회전 움직임을 보정하도록 상기 본체의 양 끝 단에 서로 이격하여 배치된 것을 특징으로 한다.
본체의 움직임을 감지하는 단계와 상기 본체의 움직임에 기초하여, 상기 본체의 움직임에 대응되는 절대좌표가 산출되도록 기준점을 설정하는 단계와 상기 본체의 움직임에 대응되는 상대좌표를 상기 기준점을 기준으로 절대좌표로 변환하는 단계 및 상기 절대좌표를 이용하여, 문자를 생성하는 단계를 포함하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 본체의 움직임은 회전 움직임 및 직선 움직임을 포함하고, 상기 문자를 생성하는 단계에서는 상기 본체의 움직임에 따른 문자가 생성되도록 상기 회전 움직임에 대응되는 상대좌표를 상기 직선 움직임에 대응되는 상대좌표를 이용하여 보정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 회전 움직임은 상기 직선 움직임과 관련된 가속도 비율을 통하여 보정되는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 기준점은 상기 본체의 일단에 기 설정된 값 이상의 압력의 감지가 시작되는 시작시점에 대응되는 위치인 것을 특징으로 한다.
일 실시 예에 있어서, 상기 기준점은 상기 기준점이 설정된 후, 상기 본체의 일단에 압력이 감지되지 않는 상태에서, 다시 상기 본체의 일단에 기 설정된 값 이상의 압력이 감지되면, 다시 압력이 감지된 시작 시점에 대응되는 위치를 상기 기준점으로 다시 설정하는 것을 특징으로 한다.
본 발명에 따른 이동 단말기 및 그 제어 방법의 효과에 대해 설명하면 다음과 같다.
본 발명은 모션펜이 외부 장치에 별도로 신호를 전송하지 않아도 되는 종이 등에 대한 필기 입력을 인식하고, 이를 다른 단말기에 제공할 수 있다. 이를 통하여, 본 발명은 모션펜의 인식이 가능한 별도의 단말기 없이도, 모션펜 자체만으로 다양한 기능의 수행이 가능하다.
또한, 본 발명은 펜의 움직임을 통하여 생성된 문자를 외부 장치에 전송하여, 외부 장치에서 표시할 수 있다. 이를 통하여, 본 발명은 펜의 움직임을 이용하여 문자를 생성한 후, 외부 장치에 이를 제공함으로써, 다양한 기기와의 호환이 가능한 펜을 제공할 수 있다.
또한, 본 발명에 따른 모션펜은 종래의 필기구와 동일한 구성을 포함함으로써, 종래 필기구의 필기 입력시 필기감과 동일한 필기감을 구현할 수 있다. 이를 통하여, 본 발명은, 종래 터치펜의 필기감에 의한 이용의 불편함을 감소시킬 수 있다.
또한, 본 발명은, 이동 단말기를 사용하기 어려운 사람들에게, 이동 단말기 자체에 대한 조작의 필요 없이, 필기를 통하여, 다양한 기능을 제공함으로써, 이동 단말기의 동작을 제어할 수 있다.
즉, 본 발명은 이동 단말기의 사용이 어려운 사람들에게 보다 쉬운 UX(User experience)를 제공할 수 있다.
본 발명의 적용 가능성의 추가적인 범위는 이하의 상세한 설명으로부터 명백해질 것이다. 그러나 본 발명의 사상 및 범위 내에서 다양한 변경 및 수정은 당업자에게 명확하게 이해될 수 있으므로, 상세한 설명 및 본 발명의 바람직한 실시 예와 같은 특정 실시 예는 단지 예시로 주어진 것으로 이해되어야 한다.
도 1a는 본 발명과 관련된 이동 단말기를 설명하기 위한 블록도이다.
도 1b및 1c는 본 발명과 관련된 이동 단말기의 일 예를 서로 다른 방향에서 바라본 개념도들이다.
도 2a는 본 발명에 따른 모션펜(200)의 구성을 나타낸 블록도이다.
도 2b는 본 발명에 따른 모션펜(200)의 측면을 바라본 개념도이다.
도 3a 및 도 3b는 본 발명에 따른 모션펜의 센서들의 위치를 나타낸 개념도들이다.
도 4는 모션펜의 움직임에 따라 문자를 생성하는 방법을 나타낸 흐름도이다.
도 5는 도 4의 제어방법을 나타낸 개념도이다.
도 6a, 도 6b 및 도 7은 모션펜의 움직임 형태를 나타낸 개념도들이다.
도 8은 본체의 움직임을 보정하는 방법을 나타낸 흐름도이다.
도 9a, 도 9b, 도 9c는 회전 움직임 및 직선 움직임을 나타낸 개념도들이다.
도 10a, 도 10b 및 도 10c는 본체의 움직임을 보정하여 문자를 생성하는 방법을 나타낸 개념도들이다.
도 11은 본체의 움직임에 따라 문자를 생성하는 방법을 나타낸 흐름도이다.
도 12a 및 도 12b는 도 11의 흐름도에 따라 문자를 생성하는 방법을 나타낸 개념도들이다.
도 13a, 도 13b 및 도 13c는 기준점을 설정하는 방법을 나타낸 개념도들이다.
도 14는 본 발명에 따른 모션펜을 이용하여 문자를 생성하여, 이를 출력하는 방법을 나타낸 흐름도이다.
도 15a 및 도 15b는 상기 도 14의 제어방법을 나타낸 개념도들이다.
도 16은 모션펜을 통하여 생성된 문자 정보와 연계된 기능을 실행하는 방법을 나타낸 흐름도이다.
도 17a, 도 17b, 도 17c, 도 17d, 도 17e, 도 17f, 도 17g 및 도 17h는 상기 도 16의 제어방법을 설명한 개념도들이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서 설명되는 이동 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(wearable device, 예를 들어, 워치형 단말기 (smartwatch), 글래스형 단말기 (smart glass), HMD(head mounted display)) 등이 포함될 수 있다.
그러나, 본 명세서에 기재된 실시 예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터, 디지털 사이니지 등과 같은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.
도 1a 내지 도 1c를 참조하면, 도 1a는 본 발명과 관련된 이동 단말기를 설명하기 위한 블록도이고, 도 1b 및 1c는 본 발명과 관련된 이동 단말기의 일 예를 서로 다른 방향에서 바라본 개념도이다.
상기 이동 단말기(100)는 무선 통신부(110), 입력부(120), 감지부(140), 출력부(150), 인터페이스부(160), 메모리(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1a에 도시된 구성요소들은 이동 단말기를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 이동 단말기는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
보다 구체적으로, 상기 구성요소들 중 무선 통신부(110)는, 이동 단말기(100)와 무선 통신 시스템 사이, 이동 단말기(100)와 다른 이동 단말기(100) 사이, 또는 이동 단말기(100)와 외부서버 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 또한, 상기 무선 통신부(110)는, 이동 단말기(100)를 하나 이상의 네트워크에 연결하는 하나 이상의 모듈을 포함할 수 있다.
이러한 무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114), 위치정보 모듈(115) 중 적어도 하나를 포함할 수 있다.
입력부(120)는, 영상 신호 입력을 위한 카메라(121) 또는 영상 입력부, 오디오 신호 입력을 위한 마이크로폰(microphone, 122), 또는 오디오 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부(123, 예를 들어, 터치키(touch key), 푸시키(mechanical key) 등)를 포함할 수 있다. 입력부(120)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.
센싱부(140)는 이동 단말기 내 정보, 이동 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(140)는 근접센서(141, proximity sensor), 조도 센서(142, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121 참조)), 마이크로폰(microphone, 122 참조), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 이동 단말기는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. 디스플레이부(151)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 이동 단말기(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(123)로써 기능함과 동시에, 이동 단말기(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
인터페이스부(160)는 이동 단말기(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(160)는, 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 중 적어도 하나를 포함할 수 있다. 이동 단말기(100)에서는, 상기 인터페이스부(160)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.
또한, 메모리(170)는 이동 단말기(100)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(170)는 이동 단말기(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 이동 단말기(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 이동 단말기(100)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 이동 단말기(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(170)에 저장되고, 이동 단말기(100) 상에 설치되어, 제어부(180)에 의하여 상기 이동 단말기의 동작(또는 기능)을 수행하도록 구동될 수 있다.
제어부(180)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 이동 단말기(100)의 전반적인 동작을 제어한다. 제어부(180)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(170)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다.
또한, 제어부(180)는 메모리(170)에 저장된 응용 프로그램을 구동하기 위하여, 도 1a와 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(180)는 상기 응용 프로그램의 구동을 위하여, 이동 단말기(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
전원공급부(190)는 제어부(180)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 이동 단말기(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(190)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
상기 각 구성요소들 중 적어도 일부는, 이하에서 설명되는 다양한 실시 예들에 따른 이동 단말기의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 이동 단말기의 동작, 제어, 또는 제어방법은 상기 메모리(170)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 이동 단말기 상에서 구현될 수 있다.
이하에서는 이와 같이 구성된 이동 단말기(예를 들어, 모션펜)에서 구현될 수 있는 제어 방법과 관련된 실시 예들에 대해 첨부된 도면을 참조하여 살펴보겠다. 이하의 구성요소의 도면 부호는, 앞서 설명한 구성 요소와 동일한 경우, 동일한 도면번호를 사용하여 설명한다. 본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다. 이하의 도면의 설명에서는 왼쪽 위에 그려진 도면을 기준으로, 시계 방향으로 순서를 붙이거나, 위쪽부터 아래쪽으로 순서를 붙여 설명한다.
도 2a는 본 발명에 따른 모션펜(200)의 구성을 나타낸 블록도이다. 도 2b는 본 발명에 따른 모션펜(200)의 측면을 바라본 개념도이다. 또한, 도 3a 및 도 3b는 본 발명에 따른 모션펜의 센서들의 위치를 나타낸 개념도들이다.
도 2a를 참조하면, 본 발명에 따른 모션펜(200)은 동작 감지부(230), 메모리부(170), 무선 통신부(110), 디스플레이부(151) 및 제어부(180)를 포함할 수 있다. 또한, 상기 모션펜(200)은 도 2a의 구성 이외에도, 필요에 따라 추가 또는 삭제 가능하다.
동작 감지부(230)는 제1감지부(231), 제2감지부(232) 및 제3감지부(233)을 통해, 동작을 인식할 수 있다. 상기 동작은, 물체의 움직임 및 물체의 위치를 의미할 수 있다.
제1감지부(231)는 상기 모션펜(200)의 회전 움직임을 감지할 수 있다. 회전 움직임은 기 설정된 축을 기준으로 각도를 형성하며 이동하는(또는 도는) 것을 의미할 수 있다.
상기 제1감지부(231)는 모션펜(200)의 회전을 감지하는 회전 센서를 포함할 수 있다. 상기 회전 센서는 발전식, 전자식, 발진식, 광전식, 홀 효과식, 자기저항식 등의 방식으로 회전 운동을 감지할 수 있다.
상기 제1감지부(231)는 복수의 기준축을 기준으로 회전 움직임을 감지할 수 있다. 예를 들어, 상기 제1감지부(231)는 3축(x축, y축, z축)을 기준으로, 각 축에 대한 회전 움직임을 감지할 수 있다. 이러한 회전 센서의 일 예로, 3축 자이로 센서가 있다.
제2감지부(232)는 모션펜(200)의 직선 움직임을 감지할 수 있다. 직선 움직임은, 일 지점에서 타 지점으로 평행으로 이동하는 움직임을 의미할 수 있다.
상기 제2감지부(240)는 모션펜(200)의 평행으로 이동하는 움직임을 감지하는 가속도 센서를 포함할 수 있다. 상기 가속도 센서는 직선 움직임에 대한 속도의 증감 비율을 감지할 수 있다. 또한, 상기 가속도 센서는, 하나 또는 그 이상의 축을 기준으로, 각 축에 대하여, 직선 움직임을 감지할 수 있다. 예를 들어, 상기 가속도 센서는, 3축(x축, y축, z축)을 기준으로, 각각의 직선 움직임을 감지할 수 있다.
제3감지부(233)는 모션펜(200)에 가해지는 압력을 감지할 수 있다. 보다 구체적으로, 상기 제3감지부(233)는 모션펜(200)의 특정 영역(예를 들어, 팁부(220))에 가해지는 압력을 감지할 수 있다. 상기 제3감지부(233)는 압전 소자, 온도 변화, 전류 및 전압 등을 이용하여, 압력을 감지할 수 있다.
상기 제3감지부(233)는 모션펜(200)에 포함된 팁부(220)의 일 단에 배치될 수 있다. 이때, 상기 팁부(220)의 타단은 필기 입력단 일 수 있다. 즉, 상기 제3감지부(233)는 상기 팁부(220)의 필기 입력단과 반대방향에 배치되어, 필기 입력을 방해하지 않으면서, 압력을 감지할 수 있다.
상기 무선 통신부(100)는 외부 기기 또는 외부 서버와 원거리 또는 근거리 통신을 수행할 수 있다. 상기 무선 통신부(100)는 모션펜과 단말기 사이, 모션펜과 서버 사이, 모션펜과 모션펜 사이의 통신을 수행할 수 있다.
상기 디스플레이부(151)는 제어부(180)에서 처리한 정보 및 그래픽 객체 등 전자적으로 표시 가능한 정보들을 표시(또는 출력)할 수 있다. 예를 들어, 상기 디스플레이부(151)는 모션펜(200)의 움직임에 대응되는 문자가 표시될 수 있다.
상기 메모리부(170)는 모션펜(200)의 동작과 관련된 각종 정보들을 저장할 수 있다. 예를 들어, 상기 메모리부(170)는 모션펜(200)의 구동을 위한 구동 정보, 모션펜(200)의 움직임에 대응되는 문자 정보, 연락처 정보, 모션펜(200) 상에서 기능 실행을 위한 실행 정보 등 각종 정보들이 저장될 수 있다.
상기 제어부(180)는 모션펜(200)의 각종 동작을 제어할 수 있다. 상기 모션펜(200)의 동작은 모션펜(200) 상에서 기능을 실행/종료하는 동작, 모션펜(200)의 전원을 온/오프(on/off)하는 동작 등 모션펜(200)의 구동과 관련된 모든 동작을 포함할 수 있다.
예를 들어, 상기 제어부(180)는 상기 동작 감지부(230)로부터 감지된 움직임에 기초하여, 문자를 생성하고, 이를 메모리부(170)에 저장할 수 있다. 또한, 상기 제어부(180)는 상기 생성된 문자를 디스플레이부(151)에 출력시킬 수 있다.
또 다른 예로, 상기 제어부(180)는 상기 동작 감지부(230)로부터 감지된 동작을 문자로 생성하지 않도록, 상기 동작 감지부(230)를 종료시킬 수 있다. 이 경우, 상기 동작 감지부(230)를 구성하는 센서들은 비활성화되어, 상기 본체(210)을 동작을 더 이상 감지하지 않을 수 있다. 여기에서, 상기 센서들이 비활성화되는 것은 상기 센서들에 전류를 공급하지 않아, 상기 센서들의 기능이 수행되지 않은 상태일 수 있다. 이와 달리, 상기 센서들이 활성화되는 것은 상기 센서들에 전류가 공급되어, 상기 센서들의 기능이 수행 중인 상태일 수 있다.
도 2b를 참조하면, 상기 모션펜 본체(210), 팁부(220) 및 버튼부(250)를 포함할 수 있다.
상기 본체(210)는 일방향으로 연장되고, 중공체로 형성될 수 있다. 상기 본체(210) 상에는 배터리(미도시됨)가 장착될 수 있다. 또한, 상기 본체(210)의 외주면에는 인출 가능한 버튼부(250)가 구비될 수 있다.
상기 버튼부(250)는 본체(210)의 외주면에 부착되어, 외력에 의하여 인입 또는 인출 가능하게 형성될 수 있다. 상기 버튼부(250)은 센서들과 연결되어, 상기 센서들의 동작을 시작 또는 종료(또는 센서들을 활성화 또는 비활성화)할 수 있다. 상기 동작의 시작(또는 활성화)은 상기 센서들에 전류를 공급하여, 센서 정보를 감지하도록 센서를 제어하는 것이고, 상기 동작의 종료(또는 비활성화)는 상기 센서들에 전류의 공급을 중단하여, 센서 정보를 감지하지않도록 센서를 제어하는 것일 수 있다.
예를 들어, 상기 제어부(180)는 상기 버튼부(250)가 외력에 의하여, 본체(210)에 인입되는 경우, 상기 버튼부(250)와 연결된 센서들을 활성화할 수 있다. 또한, 상기 제어부(180)는 상기 버튼부(250)가 본체(210)에 대하여 인출되는 경우, 상기 버튼부(250)와 연결된 센서들을 비활성화할 수 있다.
상기 팁부(220)는 상기 본체(210)의 일단에 배치될 수 있다. 상기 팁부(220)의 일단은 접촉 대상체(예를 들어, 종이, 벽 등 필기 입력이 가능한 단단한 물체)에 접촉되도록 외부에 돌출될 수 있다. 또한, 상기 팁부(220)의 타단은 상기 본체(210)의 내부 공간에 위치하며, 상기 제3감지부(233)와 될 수 있다.
상기 팁부(220)의 일단은 접촉 대상체에 펜의 팁부(220)가 닿는 영역 상에 문자가 그려지도록 잉크가 방출될 수 있다. 또한, 상기 팁부(220)는 잉크가 방출되는 대신, 터치 입력이 가능하도록 이루어질 수 있다. 이 경우, 상기 팁부(220)는 정전식 또는 정압식의 터치 센서에 의하여 감지되도록 전류가 흐르는 재질(즉, 도체)로 이루어질 수 있다. 즉, 상기 팁부(220)는 잉크가 방출되거나, 또는 터치가 감지되도록 형성될 수 있으며, 나아가, 잉크가 방출되는 부분과 터치가 감지되는 부분이 사용자에 의하여 스위칭될 수 있도록 이루어질 수 있다.
상기 팁부(220)의 타단은 상기 일단이 외력에 의하여 눌러지는 압력을 감지하도록 압력을 감지하는 제3감지부와 연결될 수 있다.
이상에서는 본 발명에 따른 모션펜의 구조에 대하여 살펴보았다. 이하에서는, 본 발명에 따른 모션펜의 감지부의 배치에 대하여 살펴본다.
본 발명에 따른 모션펜의 본체(210)의 움직임을 감지하도록 제1감지부(231) 및 제2감지부(232)를 포함할 수 있다. 상기 제1감지부(231)는 상기 본체(210)의 회전 움직임을 감지하고, 상기 제2감지부(232)는 상기 본체(210)의 직선 움직임을 감지할 수 있다.
상기 제1감지부(231)는 상기 본체(210)의 필기 영역에 대한 회전 움직임을 감지하기 위하여, 상기 본체(210)의 팁부(220)가 위치한 일단과 마주보는 타단에 배치될 수 있다. 즉, 상기 제1감지부(231)는 회전 움직임을 감지하기 위한 회전 반경의 길이를 상기 본체(210)의 길이로 사용하도록 상기 본체(210)의 타단에 배치시킬 수 있다. 한편, 상기 제1감지부(231)의 위치는 설계자의 설계에 의하여 임의로 변경될 수 있다.
상기 제2감지부(232)는 상기 제1감지부(231)에 의하여 감지된 움직임을 보정할 수 있다. 보다 구체적으로, 상기 제2감지부(232)는 상기 본체의 움직임이 정확하게 판단되도록 상기 제1감지부(231)에 의하여, 감지되지 않는 직선 움직임을 감지할 수 있다. 상기 제2감지부(232)에 의하여, 상기 본체의 움직임이 보정되는 구체적인 방법은 후술하기로 한다.
한편, 상기 제2감지부(232)은 상기 제1감지부(231)에 의하여 감지된 움직임을 보정하도록 적어도 두 개 이상의 센서로 구비될 수 있다. 또한, 상기 적어도 두 개 이상의 센서는 서로 다른 위치에 이격하여 배치될 수 있다. 즉, 상기 적어도 두 개 이상의 센서는 서로 다른 위치에 이격하여 배치됨으로써, 상기 본체의 회전 움직임을 보정하는데 사용되는 데이터를 획득할 수 있다.
예를 들어, 도 3a에 도시된 바와 같이, 상기 제2감지부(232)를 구성하는 적어도 두 개 이상의 센서(232a, 232b)는 상기 본체의 양 끝단에 각각 배치될 수 있다. 이 경우, 상기 제어부(180)는 상기 적어도 두 개 이상의 센서(232a, 232b)를 통하여, 상기 본체의 양 끝단의 움직임을 나타내는 데이터를 획득하고, 상기 양 끝단의 움직임을 나타내는 데이터를 이용하여, 제1감지부(231)의 움직임을 나타내는 데이터를 보정할 수 있다.
또 다른 예로, 도 3b에 도시된 바와 같이, 상기 제2감지부(232)를 구성하는 적어도 두 개 이상의 센서(232a, 232b)는 상기 본체(210)를 쥐는 사용자의 운지 영역(240)을 기준으로, 서로 마주보는 영역에 배치될 수 있다. 상기 사용자의 운지 영역(240)은 상기 모션펜을 이용하여 필기를 할 때, 본체(210)에 손가락이 닿는 영역이다. 상기 사용자의 운지 영역(240)은 미리 설정되거나, 사용자의 사용 태양(예를 들어, 본체에 대하여 손가락이 자주 감지되는 영역)에 따라 변경될 수 있다.
이상에서는 본 발명에 따른 모션펜의 움직임을 감지하기 위한 감지부의 배치에 대하여 설명하였다. 이하에서는 모션펜의 움직임에 따라 문자를 생성하는 방법에 대하여 도면과 함께 보다 구체적으로 살펴본다. 도 4는 모션펜의 움직임에 따라 문자를 생성하는 방법을 나타낸 흐름도이다. 도 5는 도 4의 제어방법을 나타낸 개념도이다. 도 6a, 도 6b 및 도 7은 모션펜의 움직임 형태를 나타낸 개념도들이다.
본 발명에 따른 모션펜에 있어서, 제어부(180)는 펜 본체의 움직임을 감지할 수 있다(S410).
상기 제어부(180)는 기 설정된 조건이 만족되면, 펜 본체(210)의 움직임을 감지할 수 있다. 상기 기 설정된 조건은 팁부(220)에 가해지는 압력이 기 설정된 압력 이상일 조건, 사용자로부터 문자 생성을 위한 입력을 수신할 조건일 수 있다.
상기 펜 본체(210)의 움직임은 회전 움직임 및 직선 움직임 중 적어도 하나로 이루어질 수 있다.
상기 펜 본체(210)의 움직임에 대하여 보다 구체적으로 살펴보면, 사용자는 상기 펜 본체(210)를 손에 쥐고, 손가락, 손목 및 팔뚝을 이용하여 펜에 외력을 가하여 문자를 필기할 수 있다.
보다 구체적으로, 도 6a를 참조하면, 사용자는 집게 손가락의 상하 움직임을 이용하여 펜 본체(210)를 특정 회전각도(α)를 갖도록 펜 본체(210)를 움직일 수 있다. 또한, 사용자는 손목을 회전 중심으로, 손목의 회전을 이용하여, 특정 회전각도(β)를 갖도록 본체(210)를 움직일 수 있다. 또한, 사용자는 팔뚝이 향하는 방향을 기준으로, 손목의 좌우 움직임을 이용하여, 특정 회전각도(γ)를 갖도록 본체(210)를 움직일 수 있다.
또한 도 6a의 움직임을 모션 펜의 관점에서 보면, 도 7과 같이 나타낼 수 있다. 즉, 펜 본체(210)는, x축을 회전축으로 회전 각도(β)를 갖도록 회전하거나, y축을 회전축으로 회전 각도(α)를 갖고 회전하거나, z축을 회전축으로 회전 각도(γ)를 갖으며 회전될 수 있다.
또한, 도 6b를 참조하면, 사용자는 x축 및 y축 중 적어도 하나의 축을 기준으로, 펜 본체(210)를 직선으로 움직일 수 있다. 상기 x축은, 팔꿈치와 어깨의 수평 운동에 의하여 움직이는 펜 본체(210)의 좌우 방향의 직선 움직임을 감지하는 기준 방향을 나타내며, y축은 팔꿈치와 어깨의 수직 운동에 의하여 움직이는 펜 본체(210)의 상하 방향의 직선 움직임을 감지하는 기준 방향이다.
예를 들어, 사용자는 x축 방향으로 제1거리를 갖도록 펜 본체(210)를 움직이거나, y축 방향으로 제2거리를 갖도록 펜 본체(210)를 움직일 수 있다. 또한, 사용자는 x축 방향으로 제1거리, y축 방향으로 제2거리를 갖도록 x축 및 y축에 대각선 방향으로 제3거리만큼 펜 본체(210)를 움직일 수 있다.
상기 제어부(180)는 상기 펜 본체의 움직임이 감지되면, 상기 감지된 움직임에 기초하여, 문자를 생성할 수 있다(S420).
상기 제어부(180)는 상기 본체(210)의 움직임이 감지되면, 상기 움직임과 관련된 문자를 생성할 수 있다.
상기 문자는 자음과 모음을 포함하는 음소(또는, 낱소리 글), 음절, 형태소, 단어, 어절, 구절 및 문장을 포함할 수 있다. 상기 음소는 더 이상 작게 나눌 수 없는 음운론상의 최소 단위를 의미할 수 있다. 상기 음절은 하나의 종합된 음의 느낌을 주는 말소리의 단위를 의미할 수 있다. 상기 형태소는 뜻을 가진 가장 작은 단위를 의미할 수 있다. 상기 단어는 분리하지 않고, 독립적인 의미를 가지는 말을 의미할 수 있다. 또한, 상기 어절은 문장을 구성하고 있는 마디로 문장 성분의 최소 단위이며, 띄어씌기의 단위가 될 수 있다. 또한, 상기 구절은 구와 절을 아우르는 단위로써, 구는 둘 이상의 단어로 이루어진 덩어리이고, 절은 주어와 서술어로 이루어진 덩어리일 수 있다. 또한, 상기 문장은 완결된 하나의 내용을 나타내는 최소 단위를 의미할 수 있다.
즉, 상기 제어부(180)는 상기 음소, 음절, 형태소, 단어, 어절, 구절 및 문장을 상기 펜의 움직임을 통하여, 생성할 수 있다.
예를 들어, 도 5에 도시된 바와 같이, 상기 제어부(180)는 팁부(220)가 접촉 대상체(500)에 접촉하여, 문자를 생성하기 위하여 움직이는 본체(210)의 움직임을 감지할 수 있다. 보다 구체적으로, 사용자는 팁부(220)를 접촉 대상체(500)에 접촉하여 문자를 필기할 수 있다. 이때, 상기 접촉 대상체(500)는 잉크로 필기가 가능한 물체일 수 있다.
이 경우, 상기 제어부(180)는 상기 팁부(220)가 접촉 대상체(500)에 접촉하여 "인"이라는 문자가 필기되면, 상기 "인"이라는 문자를 상기 본체(210)의 움직임에 근거하여 생성하고, 이를 메모리부(170)에 저장할 수 있다.
한편, 상기 제어부(180)는 상기 본체(210)가 움직이더라도, 더 이상 문자를 생성하지 않도록 상기 동작 감지부(230)를 제어할 수 있다. 즉, 상기 제어부(180)는 본체(210)가 움직이더라도, 문자를 생성하지 않을 수 있다.
보다 구체적으로, 상기 제어부(180)는 문자 생성을 종료하기 위한 사용자의 제어명령이 인가되거나, 기 설정된 시간 이상 팁부(220)의 일단에 압력이 감지되지 않거나, 기 설정된 시간 이상 본체(210)가 움직이지 않는 경우, 상기 동작 감지부(230)를 비활성화시킬 수 있다. 이때, 상기 동작 감지부(230)가 비활성화되면, 상기 모션펜(200)은 더 이상 본체(210)의 움직임을 감지하지 않을 수 있다.
이상에서는, 본 발명에 따른 모션펜에 있어서, 본체의 움직임 및 이를 이용하여 문자를 생성하는 방법에 대하여 설명하였다. 이하에서는, 본 발명에 따른 모션펜에 있어서, 문자의 생성을 위한 본체의 움직임을 보정하는 방법에 대하여 보다 구체적으로 살펴본다. 도 8은 본체의 움직임을 보정하는 방법을 나타낸 흐름도이다. 또한, 도 9a, 도 9b, 도 9c는 회전 움직임 및 직선 움직임을 나타낸 개념도들이고, 도 10a, 도 10b 및 도 10c는 본체의 움직임을 보정하여 문자를 생성하는 방법을 나타낸 개념도들이다.
본 발명에 따른 모션펜에 있어서, 제어부(180)는 본체의 움직임이 감지되면, 본체의 회전 움직임에 대응되는 데이터를 수신하고, 이를 벡터로 변환할 수 있다(S810).
상기 제어부(180)는 기 설정된 조건이 만족되는 것에 근거하여, 상기 제1감지부(231)를 통하여, 상기 본체(210)의 회전 움직임을 감지할 수 있다. 상기 기 설정된 조건은 상기 본체(210)의 움직임을 문자 생성 움직임으로 인식하기 위한 조건일 수 있다. 예를 들어, 상기 기 설정된 조건은 팁부(220)의 일단에 기 설정된 값 이상의 압력이 감지되는 조건일 수 있다.
상기 제1감지부는 기 설정된 복수의 축을 기준으로, 상기 본체(210)의 회전 각도를 감지할 수 있다. 그 후, 상기 제어부(180)는 각 축을 기준으로 감지된 회전 각도에 기 설정된 길이를 곱하여, 선 속도를 구할 수 있다. 또한, 상기 제어부(180)는 상기 선 속도를 통하여, 상기 본체(210)의 움직임에 대응되는 2차원 벡터를 산출할 수 있다. 상기 2차원 벡터는 크기 및 방향을 갖는 값일 수 있다. 이하에서는, 상기 2차원 벡터를 편의상 벡터라고 명명하며, 벡터 값은 벡터의 크기 및 방향을 포함하는 것으로 이해될 수 있다.
예를 들어, 상기 제어부(180)는 상기 제1감지부(231)를 통하여, x축을 기준으로 제1회전각도(β), y축을 기준으로 제2회전각도(α) 및 z축을 기준으로, 제3회전각도(γ)를 감지할 수 있다.
그 후, 상기 제어부(180)는 하기의 [수학식 1]과 같이, 상기 제1, 제2 및 제3회전 각속도(
Figure pat00001
) 각각에 대하여, 기 설정된 길이(Radius)를 곱하여, 각각의 선속도(
Figure pat00002
)를 산출할 수 있다. 상기 기 설정된 길이는 본체(210)의 길이 또는 일반적인 손의 크기를 기준으로, 펜과 손목 사이의 길이가 될 수 있다. 상기 일반적인 손의 크기는 성인의 평균적인 손의 크기를 의미할 수 있다.
[수학식 1]
Figure pat00003
(
Figure pat00004
: 선속도,
Figure pat00005
: 각속도, Raduis : 회전 반지름)
보다 구체적으로, 상기 제어부(180)는 제1 및 제2회전각도에 본체(210)의 길이를 곱하여, 제1선속도 및 제2선속도를 산출할 수 있다. 또한, 상기 제어부(180)는 제3회전각도에 펜과 손목 사이의 길이를 곱하여, 제3선속도를 산출할 수 있다.
그 후, 상기 제어부(180)는 하기의 [수학식 2]를 통하여, 상기 제1선속도와 제3선속도의 합의 값을 가로 성분으로, 제2선속도를 세로 성분으로, 제1벡터값을 산출할 수 있다.
[수학식 2]
Figure pat00006
(
Figure pat00007
: 제1벡터값,
Figure pat00008
: 제1선속도,
Figure pat00009
: 제2선속도,
Figure pat00010
: 제3선속도)
한편, 상기 제1감지부는 동일한 회전 반지름을 갖는다는 가정하에, 본체의 회전 움직임을 감지하기 때문에, 회전 각도가 동일한 움직임에 대하여, 동일한 길이(또는 크기)를 갖는 벡터로 인식할 수 있다. 즉, 상기 제1감지부(231)는 회전 각도가 동일한 경우, 서로 다른 회전 반지름을 가지는 서로 다른 움직임을 동일한 움직임으로 인식할 수 있다.
예를 들어, 도 8a에 도시된 바와 같이, 상기 제어부(180)는 회전 각도(θ)는 동일하나, 회전 반지름(r)이 3개의 서로 다른 움직임에 대하여, 모두 회전 각도가 동일한 동일한 움직임으로 간주(또는 인식)할 수 있다. 즉, 상기 제어부(180)는 서로 다른 길이를 갖는 벡터에 대응되는 움직임을 동일한 움직임으로 인식함으로써, 동일한 길이를 갖는 벡터로 잘못 인식하게 된다. 따라서, 상기 제어부(180)는 상기 제1감지부에서 감지된 회전 움직임만으로 잘못된 문자를 생성하게 된다.
이에 본 발명에 따른 모션펜은 본체(210)의 직선 움직임을 통하여, 상기 회전 움직임에 대응되는 벡터 값을 보정할 수 있다(S820).
상기 제어부(180)는 상기 본체(210)의 직선 움직임을 감지하는 제2감지부(232)를 더 구비할 수 있다. 상기 제2감지부(232)는 적어도 두 개의 센서(232a, 232b)를 구비하며, 상기 적어도 두 개의 센서(232a, 232b)는 서로 이격하여 배치될 수 있다.
예를 들어, 상기 제2감지부(232)는 제1센서(232a) 및 제2센서(232b)를 구비하고, 상기 제1센서(232a) 및 제2센서(232b)는 상기 본체(210)의 양 끝단에 서로 이격하여 배치될 수 있다.
상기 제어부(180)는 상기 제1감지부(231)로부터 감지된 움직임을 나타내는 제1벡터값을 생성한 후, 상기 제1센서(232a)로부터 수신된 제1데이터 및 상기 제2센서(232b)로부터 제2데이터를 이용하여, 상기 제1벡터값을 보정할 수 있다.
보다 구체적으로, 상기 제어부(180)는 상기 제1데이터 및 제2데이터의 비율을 이용하여, 상기 제1벡터의 선속도를 보정할 수 있다. 여기에서, 상기 제1데이터 및 제2데이터의 비율은 상기 각속도에 곱해지는 기 설정된 길이, 즉, 본체(210)의 길이를 보정하는 값일 수 있다.
상기 제1 및 제2 데이터의 비율은 하기의 [수학식 3]에 의하여 도출될 수 있다.
[수학식 3]
Figure pat00011
(
Figure pat00012
: 보정된 선속도 값,
Figure pat00013
: 보정전 선속도 값,
Figure pat00014
: 제1센서로부터 수신된 제1데이터값의 벡터값,
Figure pat00015
: 제2센서로부터 수신된 제2데이터값의 벡터값)
여기에서, 상기 F1 및 F2는 벡터값으로, 상기 F2의 방향을 기준으로, 상기 F1의 방향이 상기 F2의 방향과 동일한 경우 +, F2의 방향과 다른 경우, -을 가질 수 있다.
예를 들어, 도 8b에 도시된 바와 같이, 상기 제어부(180)는 상기 제1센서로부터 수신된 제1데이터값과 상기 제2센서로부터 수신된 제2데이터값의 방향이 서로 다를 수 있다. 이때, 상기 제어부(180)는 상기 제2데이터값의 벡터값(F2)에서, 상기 제1데이터값의 벡터값(F1)을 뺀 값에 대한 상기 제2데이터 값의 벡터값(F2)의 비율을 상기 기 설정된 본체(210)의 길이를 보정할 수 있다. 그 후, 상기 제어부(180)는 상기 보정된 본체(210)의 길이를 이용하여, 상기 제1 및 제2 선속도값을 보정할 수 있다.
또 다른 예로, 도 8c에 도시된 바와 같이, 상기 제어부(180)는 상기 제1센서로부터 수신된 제1데이터값과 상기 제2센서로부터 수신된 제2데이터값의 방향이 서로 동일할 수 있다. 이때, 상기 제어부(180)는 상기 제2데이터값의 벡터값(F2)과 상기 제1데이터값의 벡터값(F1)을 합한 값에 대한 상기 제2데이터값의 벡터값(F2)의 비율을 이용하여, 상기 기 설정된 본체(210)의 길이를 산출할 수 있다. 그 후, 상기 제어부(180)는 상기 보정된 본체(210)의 길이를 이용하여, 상기 제1 및 제2 선속도값을 보정할 수 있다.
이를 통하여, 상기 제어부(180)는 회전 움직임으로 감지하지 못하는 직선 움직임을 보정하여, 본체의 움직임에 따른 문자를 생성할 수 있다(S830).
또한, 또 다른 예를 살펴보면, 상기 제어부(180)는 상기 본체(210)의 움직임이 회전 움직임 및 직선 움직임으로 이루어진 경우, 각각의 움직임에 대응되는 형태의 문자를 조합하여, 문자를 생성할 수 있다.
보다 구체적으로, 도 10a에 도시된 바와 같이, 상기 제어부(180)는 상기 본체의 움직임을 감지할 수 있다. 이때, 상기 본체(210)의 움직임은 a부터 b까지는 회전 움직임이고, b부터 c까지는 직선 움직임일 수 있다.
이 경우, 상기 제어부(180)는 제1감지부(231)를 통하여, a부터 b까지의 회전 움직임을 감지하여, 상기 회전 움직임에 대한 제1벡터값을 산출하고, 제2감지부(232)를 통하여, 상기 b부터 c까지의 직선 움직임에 대한 제2벡터값을 산출할 수 있다.
그리고, 상기 제어부(180)는 상기 제1벡터값 및 제2벡터값을 합한 제3벡터값을 산출하여, 문자를 생성할 수 있다.
예를 들어, 도 10c에 도시된 바와 같이, 상기 제어부(180)는 상기 제1벡터값에 대응되는 제1부분(1010a) 및 제2벡터값에 대응되는 제2부분(1010b)의 조합을 통하여, "ㄱ"을 생성할 수 있다.
이와 달리, 도 10b에 도시된 바와 같이, 상기 제어부(180)는 제2감지부(232)가 구비되지 않아, 제2벡터값이 감지되지 않는 경우, 상기 제2벡터값에 대응되는 문자 부분(1010b)가 생성되지 않을 수 있다. 이 경우, 상기 제어부(180)는 에러가 발생하였다고 판단하고, 상기 본체(210)의 움직임을 다시 감지하거나, 사용자에게 문자가 생성되지 않았음을 나타내는 알림 정보를 전송할 수 있다.
이상에서는 본체의 회전 움직임 및 직선 움직임을 감지하고, 상기 회전 움직임을 직선 움직임으로 보정하는 방법에 대하여 설명하였다. 이하에서는 상기 보정된 움직임에 따라 문자를 생성하는 방법에 대하여 보다 구체적으로 살펴본다. 도 11은 본체의 움직임에 따라 문자를 생성하는 방법을 나타낸 흐름도이고, 도 12a 및 도 12b는 도 11의 흐름도에 따라 문자를 생성하는 방법을 나타낸 개념도들이다. 도 13a, 도 13b 및 도 13c는 기준점을 설정하는 방법을 나타낸 개념도들이다.
본 발명에 따른 모션펜은 본체의 움직임을 이용하여, 문자를 생성하여, 메모리부(170)에 저장할 수 있다.
이를 위하여, 상기 제어부(180)는 상기 본체의 움직임을 감지할 수 있다(S1110). 상기 본체의 움직임은 앞서 도 8에서 설명한 바와 같이 감지될 수 있다. 이에, 본 명세서에서는, 상기 본체의 움직임을 감지하는 것을 도 8의 설명으로 대체한다.
한편, 상기 본체(210)의 움직임은 접촉 대상체에 접촉하는 움직임 및 접촉 대상체에 접촉하지 않은 움직임을 모두 포함할 수 있다. 즉, 상기 제어부(180)는 제1감지부(231) 및 제2감지부(232)를 통하여, 상기 본체(210)의 접촉 대상체에 접촉하는 제1움직임 및 접촉 대상체에 접촉하지 않은 제2움직임을 모두 감지할 수 있다.
보다 구체적으로, 도 12a에 도시된 바와 같이, 상기 본체의 움직임은, 접촉 대상체에 접촉하는 제1움직임(1110) 및 접촉 대상체에 접촉하지 않는 제2움직임(1120)을 포함할 수 있다.
이때, 상기 제어부(180)는 상기 본체(210)의 팁부(220)에 가해지는 압력에 기초하여, 상기 본체의 움직임이 접촉 대상체에 접촉한 움직임인지 또는 접촉 대상체에 접촉하지 않은 움직임인지 여부를 판단할 수 있다. 이러한 정보를 통하여, 상기 제어부(180)는 상기 음소들의 상대적인 위치를 판단할 수 있다.
예를 들어, 도 12a에 도시된 바와 같이, 상기 제어부(180)는 상기 "ㅡ" 및 "ㅣ"를 생성하는 움직임(1110, 1120)에 대하여, 접촉 대상체에 가해지지 않은 제2움직임(1120)을 통하여, "ㅢ"를 생성할 수 있다. 또 다른 예로, 도 12b에 도시된 바와 같이, 상기 제어부(180)는 "ㅡ" 및 "ㅣ"를 생성하는 움직임(1130, 1140)에 대하여, 접촉 대상체에 가해지지 않은 제2움직임(1140)을 통하여, "ㅜ"를 생성할 수 있다.
즉, 상기 제어부(180)는 접촉 대상체에 가해지는 움직임뿐만 아니라, 접촉 대상체에 가해지지 않은 움직임에 대해서도 감지하여, 본체(210)의 움직임에 대한 음소들의 상대적인 위치를 판단하고, 이에 의하여, 문자를 생성할 수 있다.
한편, 상기 제어부(180)는 상기 본체의 움직임이 감지되면, 문자의 생성을 위한 기준점을 설정할 수 있다(S1120).
상기 제어부(180)는 상기 감지된 본체의 움직임에 대응되는 벡터값을 상대좌표로 변환시킬 수 있다. 또한, 상기 제어부(180)는 각 상대좌표 값을 이용하여, 문자를 생성할 수 있다.
한편, 상기 제어부(180)는 상기 상대좌표 값을 이용하여, 문자를 생성하기 위하여, 상기 상대좌표를 절대좌표로 변환하여 한다. 이에, 본 발명에 따른 모션펜은 상대좌표를 절대좌표로 변환하기 위한 기준점을 설정할 수 있다. 상기 기준점은 상기 모션펜에서 산출된 상대좌표를 절대좌표로 변환하기 위한 가상의 기준일 수 있다.
상기 기준점은 모션펜의 움직임이 문자 생성을 위한 움직임인 것이 감지될 때 설정될 수 있다. 예를 들어, 상기 제어부(180)는 상기 모션펜의 팁부(220)의 일단에 기 설정된 값 이상의 압력이 가해지는 것이 감지되면, 상기 기준점을 설정할 수 있다. 또 다른 예로, 상기 제어부(180)는 사용자의 문자 생성을 위한 제어 명령이 수신되면, 상기 기준점을 설정할 수 있다. 상기 사용자의 문자 생성을 위한 제어명령은 다양한 방식으로 수신될 수 있다. 예를 들어, 음성에 의한 제어명령, 터치에 의한 제어명령, 버튼부의 압력에 의한 제어명령 등이 될 수 있다.
상기 기준점은 기 설정된 설정된 조건에 근거하여, 설정될 수 있다. 상기 기 설정된 설정조건은 팁부(220)에 기 설정된 압력이 처음 가해진 시점과 관련된 조건, 기 설정된 시간과 관련된 조건, 팁부(220)에 압력이 가해지지 않는 시점과 관련된 조건, 기준점 설정을 위한 제어명령이 가해지는 조건 및 문자 생성을 위한 제어명령이 가해지는 조건 등이 될 수 있다.
예를 들어, 상기 제어부(180)는 팁부(220)에 압력이 가해지는 시작 시점에 대응되는 위치를 기준점으로 설정할 수 있다. 상기 팁부(220)에 압력이 가해지는 시점에 대응되는 위치는, 상기 팁부(220)가 접촉 대상체에 접촉한 위치이거나, 상기 접촉 대상체에 접촉한 위치로부터 일정 거리 이상 떨어진 위치일 수 있다.
예를 들어, 도 13a에 도시된 바와 같이, 상기 제어부(180)는 상기 접촉 대상체의 전체 영역 중 상기 팁부(220)에 압력이 가해진 시점에 상기 팁부(220)가 위치한 영역(a, b, c)을 기준점으로 설정할 수 있다.
또 다른 예로, 도 13b에 도시된 바와 같이, 상기 제어부(180)는 상기 접촉 대상체의 전체 영역 중 상기 팁부(220)에 압력이 가해진 시점으로부터 기 설정된 거리 이상 떨어진 위치(a, 제1기준점)로 설정할 수 있다.
또 다른 예로, 도 13c에 도시된 바와 같이, 상기 제어부(180)는 상기 접촉 대상체의 전체 영역 중 상기 기준점의 설정 후, 기 설정된 시간의 경과한 때, 상기 팁부가 위치한 영역(a 또는 b)을 기준점으로 설정할 수 있다.
상기 기준점이 설정되면, 상기 제어부(180)는 상기 펜 본체의 움직임을 이용하여, 문자를 생성할 수 있다(S1140).
상기 제어부(180)는 상기 기준점이 설정되면, 상기 기준점을 기준으로, 상기 펜 본체(210)의 움직임을 나타내는 상대 좌표를 절대좌표로 변환할 수 있다.
이때, 상기 제어부(180)는 기 설정된 조건이 만족되는 것에 근거하여, 상기 절대좌표에 기초하여, 문자를 생성할 수 있다.
상기 기 설정된 조건은 기준점의 설정 후, 기 설정된 시간이 경과할 조건, 팁부(220)에 압력이 감지되지 않을 조건 중 어느 하나일 수 있다.
상기 기 설정된 조건이 기준점의 설정 후, 기 설정된 시간이 경과할 조건인 경우, 상기 제어부(180)는 상기 펜 본체(210)의 움직임을 상기 기준점을 기준으로 상대 좌표에서 절대 좌표로 변환하는 중, 팁부(220)에 압력이 가해지지 않는 것을 감지할 수 있다.
이때, 상기 제어부(180)는 상기 팁부(220)에 압력이 가해지지 않는 것이 감지되면, 상기 기준점의 설정 시점부터 기 설정된 시간이 경과하였는지 여부를 판단할 수 있다.
상기 판단 결과, 상기 기준점의 설정 시점부터 기 설정된 시간이 경과하지 않은 경우, 상기 제어부(180)는 상기 상대 좌표, 절대 좌표 및 기준점을 초기화하지 않고, 상기 설정된 기준점을 기준으로 계속하여, 펜 본체(210)의 움직임을 상대 좌표 및 절대 좌표로 변환할 수 있다.
이와 달리, 상기 판단 결과, 상기 기준점의 설정 시점부터 기 설정된 시간이 경과한 경우, 상기 제어부(180)는, 상기 기준점의 설정 후, 기 설정된 시간 동안의 펜 본체(210)의 움직임을 나타내는 절대 좌표에 기초하여 문자를 생성할 수 있다. 이와 함께, 상기 제어부(180)는, 상기 본체의 움직임에 대응되는 상대 좌표, 절대 좌표 및 기준점을 초기화할 수 있다. 여기에서, 상기 상대 좌표 및 절대 좌표를 초기화하는 것은 상기 초기화 이전에 검출된 상대 좌표 및 절대 좌표를 메모리에서 삭제하는 것을 의미할 수 있다. 또한, 상기 기준점을 초기화하는 것은, 상기 초기화 이전에 설정된 기준점을 새로운 기준점으로 재설정하는 것을 의미할 수 있다.
예를 들어, 도 13c에 도시된 바와 같이, 상기 제어부(180)는 상기 팁부(220)에 처음 압력이 가해진 시점에 대응되는 위치(a, 제1기준점)를 기준점으로 설정하고, 상기 본체(210)의 움직임을 감지할 수 있다.
그리고, 상기 제어부(180)는 상기 기준점을 기준으로, 상기 본체(210)의 움직임(1210, 1220, 1230, 1240, 1250)이 나타내는 상대좌표를 절대좌표로 변환할 수 있다.
그 후, 상기 제어부(180)는 상기 팁부(220)에 압력이 가해지지 않는 것이 감지되면, 상기 기준점의 설정 시점부터 기 설정된 시간이 경과하였는지 여부를 판단할 수 있다.
상기 판단 결과, 상기 기준점의 설정 시점 이후부터, 기 설정된 시간이 경과한 경우, 상기 제어부(180)는 본체의 움직임(1210, 1220, 1230, 1240, 1250)을 나타내는 절대 좌표에 근거하여, "인"이라는 문자를 생성할 수 있다. 이와 함께, 상기 제어부(180)는, 상기 상대 좌표, 절대 좌표 및 기준점의 초기화를 수행할 수 있다.
그 후, 상기 제어부(180)는 상기 팁부(220)에 다시 압력이 가해지는 경우, 상기 처음 압력이 가해진 시점에 대응되는 위치(a, 제1기준점)에 대응되는 기준점을 초기화하고, 다시 압력이 가해진 시점에 대응되는 위치(b, 제2기준점)를 기준점으로 설정할 수 있다. 그리고, 상기 제어부(180)는 상기 다시 압력이 가해진 시점에 대응되는 위치(b, 제2기준점)를 기준으로, 본체의 움직임(1260, 1270, 1280, 1290, 1291, 1292, 1293, 1294)에 기초하여, "사"라는 문자를 생성할 수 있다.
상기 판단 결과, 상기 기준점의 설정 시점 이후부터, 기 설정된 시간이 경과하지 않은 경우, 상기 제어부(180)는 "인"을 생성하는 본체의 움직임이 아직 완성되지 않았다고 판단하여, 본체의 움직임을 나타내는 절대 좌표를 기준으로 문자를 생성하지 않을 수 있다. 이때, 상기 제어부(180)는, 상기 본체(210)의 움직임을 계속하여 감지하고, 이를 상대 좌표 및 절대 좌표로 변환하는 과정을 수행할 수 있다.
한편, 이상에서는 상기 기 설정된 시간은, 상기 기준점의 설정 시점 이후부터 측정되는 경우에 대하여 설명하였지만, 본 발명은 상기 팁부(220)에 압력이 가해지지 않는 시점 이후부터 기 설정된 시간을 측정하는 경우에도 앞선 제어 방식이 동일하게 적용될 수 있다.
상기 기 설정된 조건이 팁부(220)에 압력이 감지되지 않을 조건인 경우, 상기 제어부(180)는, 상기 팁부(220)에 압력이 가해지지 않을 때마다, 펜 본체(210)의 움직임을 나타내는 상대 좌표 및 절대 좌표를 이용하여 문자를 생성할 수 있다. 이와 함께, 상기 제어부(180)는 상대 좌표, 절대 좌표 및 기준점을 초기화할 수 있다.
예를 들어, 도 13a에 도시된 바와 같이, 상기 제어부(180)는 상기 팁부(220)에 처음 압력이 가해진 위치를 기준점(a, 제1기준점)으로 설정하고, 본체의 움직임(1210)을 이용하여, "o"을 나타내는 상대 좌표를 추출하고, 상기 기준점을 기준을 절대 좌표를 생성할 수 있다.
이때, 상기 제어부(180)는, 상기 팁부(220)에 압력이 가해지지 않는 것이 감지되면, 상기 본체의 움직임(1210)을 나타내는 상대 좌표 및 절대 좌표에 기초하여, 문자를 생성할 수 있다. 이와 함께, 상기 제어부(180)는 상대 좌표, 절대 좌표 및 기준점의 초기화를 수행할 수 있다.
상기 초기화의 수행 후, 상기 제어부(180)는 상기 팁부(220)에 압력이 감지되지 않은 상태에서, 상기 팁부(220)에 다시 압력이 가해는 것이 감지할 수 있다. 이때, 상기 본체의 움직임(1230)은 "ㅣ" 를 그리는 움직임일 수 있다.
이 경우, 상기 제어부(180)는 상기 다시 압력이 가해질 때의 위치(b, 제2기준점)를 기준점으로 설정할 수 있다. 즉, 상기 "o"를 생성하는데 사용된 기준점은 초기화되어, 상기 다시 압력이 가해질 때의 위치로 기준점이 변경될 수 있다. 상기 제어부(180)는 상기 다시 압력이 가해질 때의 위치(b, 제2기준점)를 기준점으로, "ㅣ"에 대응되는 상대 좌표 및 절대 좌표를 산출할 수 있다.
이때, 상기 제어부(180)는 상기 팁부(220)에 다시 압력이 감지되지 않는 경우, 상기 본체의 움직임(1230)을 나타내는 상대 좌표 및 절대 좌표를 기준으로 문자를 생성할 수 있다.
한편, 도 13c와 달리, 상기 기준점의 초기화 후, 상기 제어부(180)는 상기 다시 압력이 가해질 때의 위치를 기준점으로 설정하는 것이 아니라, 상기 팁부(220)에 처음 압력이 가해진 시점에 대응되는 위치(a)를 다시 기준점으로 설정할 수도 있다. 이 경우 상기 제어부(180)는 다시 설정된 기준점을 기준으로, 상기 본체의 움직임(1230)에 대응되는 상대 좌표 및 절대 좌표를 산출할 수 있다.
또한, 상기 제어부(180)는 상기 음소 단위 또는 형태소 단위로 문자를 인식하고, 상기 각 인식된 문자를 이용하여, 글자, 단어, 문장 및 문단을 생성할 수 있다. 이러한 글자, 단어, 문장 및 문단을 생성하는 알고리즘은 종래의 "한붓 그리기" 방식 및 다양한 문자 생성 알고리즘을 통하여 구현될 수 있다.
이상에서는, 가상의 기준점을 기준으로, 본체의 움직임을 나타내는 상대좌표를 절대좌표로 변환하는 방법에 대하여 설명하였다. 이를 통하여, 본 발명은 상대좌표를 절대좌표로 변환하기 위한, 별도의 장치 없이, 모션펜 자체적으로, 문자를 생성 및 저장할 수 있다. 즉, 사용자는 모션펜을 인식하기 위한 별도의 장치 없이도, 모션펜을 이용하여, 문자를 생성 및 저장할 수 있다.
이하에서는, 모션펜을 이용하여 문자를 생성하여, 이를 출력하는 방법에 대하여 설명한다. 도 14는 본 발명에 따른 모션펜을 이용하여 문자를 생성하여, 이를 출력하는 방법을 나타낸 흐름도이다. 또한, 도 15a 및 도 15b는 상기 도 14의 제어방법을 나타낸 개념도들이다.
본 발명에 따른 모션펜에 있어서, 제어부는 본체의 움직임에 기초하여, 생성된 문자를 메모리부에 저장할 수 있다(S1410).
상기 모션펜(200)은 데이터를 저장하는 메모리부(170)를 더 포함할 수 있다. 상기 메모리부(170)는 모션펜(200)의 동작과 관련된 정보 등 다양한 정보 등을 저장할 수 있다.
상기 모션펜(200)의 동작과 관련된 정보는 모션펜(200)의 구동 정보, 모션펜(200)에 저장된 기능들의 실행 정보, 및 상기 모션펜(200)에 구비된 각 구성요소들(예를 들어, 통신부 및 디스플레이부)의 구동 정보 등을 포함할 수 있다.
또한, 상기 메모리부(170)에는 이미지 정보, 문자 정보, 문서 정보 등 모션펜에서 제공될 수 있는 다양한 기능과 관련된 정보가 저장될 수 있다.
또한, 상기 제어부(180)는 사용자의 제어명령에 응답하여, 상기 저장된 문자를 모션펜에 구비된 디스플레이부 또는 외부 장치의 디스플레이부에 출력시킬 수 있다(S1420).
본 발명에 따른 모션펜(200)은 외부 장치와 통신을 수행할 수 있다. 상기 외부 장치는 통신부를 구비하여 모션펜과 통신이 가능한 이동 단말기, 태블릿, 커넥티드 카(connected car), 프로젝터, 스마트 냉장고, 스마트 보일러 등 다양한 단말기 등이 될 수 있다.
상기 사용자의 제어명령은 다양한 방식으로 수신될 수 있다. 예를 들어, 상기 사용자의 제어명령은 음성명령, 터치명령, 제스쳐명령, 버튼 입력, 패턴 입력에 의한 명령 등 다양한 방식으로 수신될 수 있다.
보다 구체적으로, 상기 제어부(180)는 모션펜(200)의 움직임에 의하여 생성된 문자를 사용자의 제어명령에 응답하여, 이동 단말기(1000)의 디스플레이부(1510)에 출력할 수 있다.
예를 들어, 도 15a의 왼쪽 아래 도면에 도시된 바와 같이, 상기 제어부(180)는 모션펜(200)을 이용하여 상기 이동 단말기(1000)를 탭(tap)하는 동작이 가해지면, 통신부를 통하여, 상기 이동 단말기(1000)에 문자 정보를 전송할 수 있다. 상기 탭(tap)이 가해진 이동 단말기(1000)는 팁부(220)로부터 상기 팁부(220)의 근접 또는 접촉을 통하여, 접촉 신호를 수신하고, 상기 접촉 신호에 대한 응답 신호를 전송함으로써, 상기 모션펜(200)과 통신을 수행할 수 있다.
그리고, 도 15a의 오른쪽 아래 도면에 도시된 바와 같이, 상기 문자 정보를 수신한 이동 단말기(1000)는 상기 이동 단말기(1000)에 구비된 디스플레이부(1510)를 통하여, 상기 문자 정보를 디스플레이부(1510) 상에 출력할 수 있다.
한편, 상기 사용자의 제어명령은 도면에 도시된 제어명령 이외에도 다양한 방식의 제어명령을 구현될 수 있다.
나아가, 상기 수신된 문자 정보가 복수인 경우, 상기 이동 단말기(1000)는 상기 복수의 문자 정보를 나타내는 항목이 포함된 리스트를 상기 디스플레이부(1510) 상에 출력할 수 있다.
예를 들어, 도 15b의 왼쪽 도면에 도시된 바와 같이, 상기 이동 단말기(1000)는 탭이 감지되면, 상기 탭을 가한 모션펜(200)으로부터 복수의 문자 정보를 수신할 수 있다.
그 후, 도 15b의 오른쪽 도면에 도시된 바와 같이, 상기 이동 단말기(1000)는 복수의 문자 정보를 나타내는 항목이 포함된 리스트를 상기 디스플레이부(1510) 상에 표시할 수 있다.
이 경우, 사용자는 상기 리스트를 통하여, 모션펜으로부터 수신된 문자 정보들을 알 수 있으며, 나아가, 문자 정보를 디스플레이부(1510)를 통하여 제공할 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는 상기 외부 장치에 문자 정보를 전송한 후, 문자 정보의 전송이 성공적으로 수행되었음을 나타내는 피드백 신호(또는 응답 신호)를 수신할 수 있다.
이때, 상기 제어부(180)는 상기 외부 장치에 문자 정보를 수신하였다는 피드백 신호가 수신되지 않은 경우, 상기 응답 신호가 수신될 때까지 계속하여 문자 정보를 전송하거나, 사용자에게 문자 정보가 전송되지 않음을 알리는 알림 정보를 출력할 수 있다.
한편, 상기 모션펜(200)은 외부 기기에 문자 정보를 출력시킬 수도 있고, 상기 모션펜(200) 자체에 구비된 디스플레이부에 문자 정보를 출력시킬 수도 있다. 이 경우, 상기 제어부(180)는 모션펜(200)에 구비된 디스플레이부를 통하여, 문자 정보를 제공할 수 있다.
이상에서는, 모션펜을 통하여 생성된 문자 정보를 제공하는 방법에 대하여 설명하였다. 이하에서는 모션펜을 통하여 생성된 문자 정보와 연계된 기능을 실행하는 방법을 설명한다. 도 16은 모션펜을 통하여 생성된 문자 정보와 연계된 기능을 실행하는 방법을 나타낸 흐름도이고, 도 17a, 도 17b, 도 17c, 도 17d, 도 17e, 도 17f, 도 17g 및 도 17h는 상기 도 16의 제어방법을 설명한 개념도들이다.
본 발명에 따른 모션펜에 있어서, 상기 제어부(180)는 본체의 움직임에 기초하여 생성된 문자의 내용을 분석할 수 있다(S1610).
상기 제어부(180)는 상기 본체의 움직임에 기초하여, 문자가 생성되면, 사용자의 제어 명령에 기초하여, 문자의 내용을 분석할 수 있다.
상기 문자의 내용 분석은 상기 문자가 기 저장된 제어 명령과 일치하는지 여부, 상기 문자에 특정 단어가 포함되어 있는지 여부, 상기 문자가 숫자인지 여부, 상기 문자가 특수한 기호를 포함하였는지 여부, 조사 및 띄어쓰기 등의 문장 구조 등 다양한 조건에 의하여 내용이 분석될 수 있다.
예를 들어, 상기 제어부(180)는 메모리부(170)에 미리 복수의 제어명령을 저장하고, 이를 문자와 비교하여, 일치하지 여부를 통하여, 문자 내용을 분석할 수 있다. 보다 구체적으로, 상기 메모리부(170)에 "yes"라는 문자를 호 신호 수신 기능과 연결시킨 경우, 상기 제어부(180)는 "yes" 라는 문자와 생성된 문자가 일치하는지 여부를 판단하고, 일치하는 경우, 호 신호 기능을 수신하도록 상기 모션펜을 제어할 수 있다.
또 다른 예로, 상기 문자가 숫자 및 기호로 이루어진 경우, 각 숫자 및 기호에 근거하여, 상기 문자가 전화번호, 날짜, 돈의 액수, 일반적인 숫자 데이터 등인지 여부를 판단할 수 있다. 보다 구체적으로, 상기 제어부(180)는 10자리 숫자 및 대쉬(dash) 기호, 즉, "-"기호가 인식되면, 상기 문자가 전화번호임을 인식할 수 있다. 또한, 상기 제어부(180)는 "@" 기호가 인식되면, 상기 문자가 이메일 주소를 나타내는 것임을 알 수 있다.
또 다른 예로, 상기 제어부(180)는 특정 단어를 인식하여, 문자의 내용을 분석할 수 있다. 보다 구체적으로, 상기 제어부(180)는 "보일러를 24도 올려줘"라는 문자에 대하여, "보일러", "24도", "올려줘"를 인식하여, 외부 기기를 제어하는 내용임을 분석할 수 있다.
본 발명은 상기 설명한 문자의 내용 분석 방법 이외에도 다양한 형태를 사용하여 문자의 내용을 분석할 수 있다.
상기 문자의 내용의 분석 후, 상기 제어부(180)는 상기 분석 결과에 기초하여, 상기 문자의 내용에 연계된 기능을 실행할 수 있다(S1620).
상기 제어부(180)는 상기 분석 결과, 상기 문자의 내용에 연계된 기능이 있는 경우, 상기 문자의 내용에 연계된 기능을 실행할 수 있다. 상기 문자의 내용에 연계된 기능은 상기 문자를 이용하여 실행되는 기능이거나, 상기 문자에 대응되는 제어명령과 관련된 기능일 수 있다.
상기 기능을 실행하는 것은, 상기 모션펜(200)을 구성하는 구성요소들을 이용하여, 상기 기능을 사용자에게 제공하는 것을 의미할 수 있다. 이에, 상기 "기능을 실행"하는 것은 "기능을 수행", "기능을 사용자에게 제공"하는 것으로 이해될 수 있다.
상기 제어부(180)는 상기 문자의 내용에 연계된 기능이 있는 경우, 이를 사용자에게 알리는 알림 정보를 출력할 수 있다. 상기 알림 정보는 시각적, 청각적 및 촉각적 방식 중 적어도 하나의 방식을 통하여 사용자에게 제공될 수 있다. 예를 들어, 상기 제어부(180)는 상기 문자의 내용에 연계된 기능이 있는 경우, "전화통화를 수행하시겠습니까?"라는 음성을 통하여, 상기 기능의 존재를 사용자에게 인지시킬 수 있다. 이와 달리, 상기 제어부(180)는 상기 문자의 내용에 연계된 기능이 없는 경우, 알림 정보를 출력하지 않을 수 있다. 한편, 상기 알림 정보는 반드시 출력되어야 하는 것이 아니라, 상기 문자의 내용에 연계된 기능이 있는 경우라도 출력되지 않을 수 있다. 이는 모션펜(200)의 공장 출고 시, 설정되거나, 사용자에 의하여 설정될 수 있다.
또한, 상기 제어부(180)는 상기 문자의 내용에 연계된 기능을 실행하기 위한 사용자의 제어명령에 근거하여, 상기 문자의 내용에 연계된 기능을 실행할 수 있다. 즉, 상기 제어부(180)는 상기 문자를 생성하여, 분석 후, 사용자의 추가적인 제어명령이 가해지는 것에 응답하여, 상기 문자의 내용에 연계된 기능을 실행할 수 있다. 만일, 사용자의 추가적인 제어명령이 가해지지 않는 경우, 상기 제어부(180)는 생성된 문자를 메모리부(170)에 저장하거나, 사용자에게 상기 문자와 연계된 기능을 나타내는 알림 정보를 제공할 수 있다.
상기 사용자의 제어명령은 제스쳐 명령, 터치 명령, 음성 명령, 근접 센서를 이용한 제어명령 등 다양한 형태로 이루어질 수 있다. 예를 들어, 상기 제스쳐 명령은, 상기 모션펜(200)의 본체(210)가 기 설정된 횟수 이상 좌우로 흔들리는 움직임에 의하여 생성될 수 있다.
또 다른 예로, 상기 터치 명령은 상기 모션펜(200)이 접촉 대상체(예를 들어, 종이)에 기 설정된 값 이상의 압력을 가하는 터치를 통하여 생성될 수 있다.
또 다른 예로, 상기 음성 명령은 상기 모션펜(200)이 문자의 생성 후, 스피커를 통하여, 외부(예를 들어, 사용자)로부터 "전화 걸어"라는 음성의 수신을 통하여 생성될 수 있다.
또 다른 예로, 상기 근접 센서를 이용한 제어명령은 상기 모션펜(200)의 본체(210)에 인접한 물체(예를 들어, 사용자의 얼굴)이 감지되는 것을 통하여 생성될 수 있다.
즉, 상기 제어부(180)는 상기 모션펜을 이용하여 문자를 생성할 뿐만 아니라, 상기 생성된 문자와 관련된 기능을 사용자에게 제공할 수 있다.
한편, 상기 제어부(180)는 동일하게 생성된 문자일지라도, 상기 추가적으로 가해지는 사용자의 제어명령에 따라 서로 다른 기능을 수행할 수 있다.
예를 들어, 도 17a의 왼쪽 위의 도면에 도시된 바와 같이, 상기 제어부(180)는 종이(1810)에 필기를 수행하는 본체(210)의 움직임을 통하여, 문자를 생성할 수 있다. 이때, 상기 제어부(180)는 상기 생성된 문자를 분석할 수 있으며, 분석 결과, 상기 생성된 문자가 전화번호 정보임을 판단할 수 있다.
그 후, 도 17a의 오른쪽 위 및 아래 도면에 도시된 바와 같이, 상기 제어부(180)는 상기 본체(210)의 기 설정된 영역 내에 사용자의 얼굴이 감지되는 경우, 상기 얼굴의 감지에 근거하여, 상기 전화번호가 나타내는 외부 단말기(1820)에 호 신호를 전송할 수 있다. 즉, 상기 모션펜(200)의 사용자는 상기 모션펜(200)을 이용하여 종이에 전화번호를 필기하는 것만으로, 상기 전화번호가 나타내는 외부 단말기(1820)에 호 신호를 전송할 수 있다.
따라서, 본 발명은, 이동 단말기를 사용하기 어려운 사람들에게, 이동 단말기 자체에 대한 조작의 필요 없이, 필기를 통하여, 이동 단말기의 동작을 제어할 수 있다.
또한, 상기 제어부(180)는 상기 문자의 생성 후, 상기 문자를 외부 장치로 출력하기 위한 사용자의 제어명령이 수신되면, 상기 문자가 외부 장치(1830)에 출력되도록, 상기 문자를 전송할 수 있다.
상기 외부 장치는 사용자에 의하여 식별 정보가 저장된 외부 장치이거나, 기 지정된 외부 장치일 수 있다. 예를 들어, 상기 외부 장치는 모션펜(200)과 근거리 통신의 수행이 가능한 외부 장치이거나, 모션펜(200)의 메모리부(170)에 식별정보가 저장돈 외부 장치이거나, 상기 문자 정보의 전송 전, 사용자에 의하여 승인된 외부 장치일 수 있다.
예를 들어, 도 17b의 위쪽 도시된 바와 같이, 상기 제어부(180)는 사용자가 모션펜(200)을 이용하여, 종이(1810)에 필기를 수행하면, 상기 모션펜(200)의 움직임을 통하여, 상기 수행된 필기에 대응되는 문자 정보를 생성할 수 있다.
그 후, 도 17b의 아래쪽 도시된 바와 같이, 상기 제어부(180)는 사용자가 상기 모션펜(200)을 이용하여, 상기 종이(1810)를 탭하는 움직임이 감지되면, 상기 생성된 문자 정보를 외부 장치(1830)에 전송할 수 있다. 여기에서, 상기 외부 장치(1830)는 문자 정보의 출력이 가능한 디스플레이부를 구비한 장치로써, 상기 모션펜(200)과 통신을 수행하는 통신부를 구비할 수 있다. 예를 들어, 상기 외부 장치(1830)는 통신부를 구비한 프로젝터일 수 있다. 즉, 사용자는 별도의 이동 단말기 없이도, 모션펜만으로, 회의실 내에서, 종이(1810)에 필기를 수행하고, 이를 프로젝터에 곧바로 출력시킬 수 있다. 이에, 사용자의 휴대 편의성이 증대될 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는 상기 프로젝터에 문자 정보를 전송한 후, 문자 정보의 전송이 성공적으로 수행되었음을 나타내는 피드백 신호(또는 응답 신호)를 수신할 수 있다.
이때, 상기 제어부(180)는 상기 외부 장치에 문자 정보를 수신하였다는 피드백 신호가 수신되지 않은 경우, 상기 응답 신호가 수신될 때까지 계속하여 문자 정보를 전송하거나, 사용자에게 문자 정보가 전송되지 않음을 알리는 알림 정보를 출력할 수 있다.
또한, 상기 제어부(180)는 상기 모션펜(200)에 의하여 생성된 문자의 내용 분석의 분석 결과에 따라 서로 다른 기능을 수행할 수 있다. 즉, 상기 제어부(180)는 문자의 생성 후, 동일한 사용자 제어명령이 수신되어도, 문자의 내용에 따라 서로 다른 기능을 수행할 수 있다.
예를 들어, 도 17c의 왼쪽 도면에 도시된 바와 같이, 상기 제어부(180)는 종이(1810)에 대한 필기 입력을 수행하는 상기 모션펜(200)의 움직임을 이용하여 문자를 생성할 수 있다.
이때, 상기 제어부(180)는 상기 생성된 문자의 내용을 분석할 수 있다. 예를 들어, 상기 생성된 문자의 내용은 식별정보일 수 있다. 예를 들어, 도 17c의 왼쪽에 도시된 바와 같이, 상기 문자의 내용은 전화번호 정보를 포함할 수 있다.
상기 문자의 내용이 분석되면, 상기 제어부(180)는 상기 문자의 내용에 연계된 기능을 수행할 수 있다. 예를 들어, 도 17c의 오른쪽에 도시된 바와 같이, 상기 문자의 내용에 연계된 기능은 상기 식별정보가 나타내는 외부 단말기로 메시지를 전송하는 기능일 수 있다.
이때, 상기 제어부(180)는 메시지를 전송하기 위한 사용자의 제어명령에 근거하여, 상기 전화번호가 나타내는 외부 단말기로, 상기 생성된 문자를 전송할 수 있다. 예를 들어, 도 17c의 오른쪽 도면에 도시된 바와 같이, 상기 제어부(180)는 종이(1810)에 대한 탭에 응답하여, 상기 전화번호 정보가 나타내는 외부 단말기로 "언제와?"라는 메시지를 전송할 수 있다.
또 다른 예로, 도 17d의 왼쪽 도면에 도시된 바와 같이, 상기 제어부(180)는 종이(1810)에 대한 필기 입력을 수행하는 상기 모션펜(200)의 움직임을 이용하여 문자를 생성할 수 있다.
이때, 상기 제어부(180)는 상기 생성된 문자의 내용을 분석할 수 있다. 예를 들어, 상기 생성된 문자의 내용은 식별정보일 수 있다. 예를 들어, 도 17d의 왼쪽에 도시된 바와 같이, 상기 문자의 내용은 이메일 주소 정보를 포함할 수 있다.
상기 문자의 내용이 분석되면, 상기 제어부(180)는 상기 문자의 내용에 연계된 기능을 수행할 수 있다. 예를 들어, 도 17d의 오른쪽에 도시된 바와 같이, 상기 문자의 내용에 연계된 기능은 상기 이메일 정보가 나타내는 외부 서버로 메일을 전송하는 기능일 수 있다.
이때, 상기 제어부(180)는 메일을 전송하기 위한 사용자의 제어명령에 근거하여, 상기 이메일 정보가 나타내는 외부 서버로, 상기 생성된 문자를 전송할 수 있다. 예를 들어, 도 17d의 오른쪽 도면에 도시된 바와 같이, 상기 제어부(180)는 종이(1810)에 대한 탭에 응답하여, 상기 전화번호 정보가 나타내는 외부 단말기로 "잘지내?"라는 메일을 전송할 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는 상기 생성된 문자와 연계된 기능이 수행되면, 상기 생성된 문자와 연계된 기능이 수행되었음을 알리는 알림 정보를 출력할 수 있다. 예를 들어, 상기 제어부(180)는 외부 단말기에 메시지 또는 메일을 전송한 후, 메시지 또는 메일이 전송되었음을 알리는 알림 정보를 디스플레이부에 출력하거나, 음성으로 출력할 수 있다.
이를 통하여, 본 발명은, 이동 단말기의 기능을 사용하기 위하여, 여러 단계를 거쳐야하는 불편함을 해소하여, 이동 단말기의 사용이 익숙치 않은 사용자에게 친근한 UX를 제공할 수 있다.
또한, 상기 제어부(180)는 모션펜(200)에 의하여, 생성된 문자를 기 지정된 외부 단말기에 전송하고, 상기 외부 단말기에 저장할 수 있다. 상기 기 지정된 외부 단말기는 상기 모션펜(200)과 통신의 수행이 가능한 단말기로, 이동 단말기, 태블릿 등이 될 수 있다. 상기 기 지정된 외부 단말기는 모션펜(200)의 사용자에 의하여 설정된 단말기로, 모션펜(200)의 사용자에 의하여 식별 정보가 저장된 외부 단말기, 사용자에 의하여 기 승인된 외부 단말기일 수 있다. 여기에서, 상기 사용자에 의하여 기 승인된 외부 단말기는 사용자에 의하여 인증 정보에 따라, 인증이 완료된 외부 단말기로, 문자 정보의 수신이 허가된 외부 단말기일 수 있다.
이때, 상기 생성된 문자를 수신한 기 지정된 외부 단말기는 상기 생성된 문자를 이용하여, 상기 생성된 문자와 연계된 기능을 수행할 수 있다. 여기에서, 상기 생성된 문자를 이용하여, 상기 생성된 문자와 연계된 기능을 수행하는 것은 상기 생성된 문자와 연계된 기능을 실행하고, 상기 생성된 문자를 상기 연계된 기능을 이용하여 처리하는 것을 의미할 수 있다.
여기에서, 상기 생성된 문자와 연계된 기능은, 상기 기 지정된 외부 단말기에서 실행 가능한 기능일 수 있다. 즉, 상기 기 지정된 외부 단말기에는 상기 생성된 문자와 연계된 기능이 미리 설치될 수 있다. 만일, 상기 기 지정된 외부 단말기에 상기 생성된 문자와 연계된 기능이 설치되어 있지 않다고 판단되면, 상기 기 지정된 외부 단말기는, 외부 서버(예를 들어, 구글 플레이어, 앱 스토어 등)로부터 상기 생성된 문자와 연계된 기능을 검색하고, 이를 자동으로 설치하거나, 사용자의 선택에 의하여 설치하도록 알림 정보를 제공할 수 있다.
상기 제어부(180)는 상기 외부 기기에 제어명령이 생성되면, 사용자의 요청에 의하여, 또는 자동적으로 상기 외부 기기에 제어명령을 전송할 수 있다.
예를 들어, 도 17e의 첫번째 도면에 도시된 바와 같이, 상기 생성된 문자가 일정 정보(날짜, 시간 및 장소를 나타내는 정보)를 포함하는 경우, 상기 외부 단말기는 상기 일정 정보를 이용하여, 일정 관리 기능을 실행할 수 있다. 상기 일정 관리 기능은 사용자의 일정을 관리하는 애플리케이션을 의미하는 것으로, 상기 외부 단말기에 기 설치된 기능일 수 있다. 만일, 상기 일정 관리 기능이 설치되지 않은 경우, 상기 외부 단말기는 외부 서버로부터 상기 일정 관리 기능을 검색하고, 이를 자동으로 설치하거나, 상기 일정 관리 기능을 설치하기 위한 알림 정보를 사용자에게 제공할 수 있다.
보다 구체적으로, 도 17e의 두번째 도면에 도시된 바와 같이, 상기 이동 단말기(1000)는 일정 관리 기능이 실행되면, 상기 생성된 문자 정보를 일정으로 추가하여, 이를 메모리부(170)에 저장할 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는 상기 이동 단말기(1000)에 문자 정보를 전송한 후, 문자 정보의 전송이 성공적으로 수행되었음을 나타내는 피드백 신호(또는 응답 신호)를 수신할 수 있다.
이때, 상기 제어부(180)는 상기 이동 단말기(1000)에 문자 정보를 수신하였다는 피드백 신호가 수신되지 않은 경우, 상기 응답 신호가 수신될 때까지 계속하여 문자 정보를 전송하거나, 사용자에게 문자 정보가 전송되지 않음을 알리는 알림 정보를 출력할 수 있다.
또한, 상기 제어부(180)는 상기 생성된 문자와 관련된 정보를 사용자에게 제공할할 수 있다. 상기 생성된 문자와 관련된 정보는 생성된 문자의 내용과 관련된 정보, 생성된 문자를 나타내는 정보 등이 될 수 있다. 보다 구체적으로, 상기 제어부(180)는 상기 생성된 문자의 내용 상에 포함된 특정 단어, 특정 명령어, 특정 기호 및 특정 패턴 중 적어도 하나에 기초하여, 상기 메모리부(170)에서 상기 생성된 문자와 관련된 정보를 검출할 수 있다. 한편, 상기 생성된 문자의 내용에 대한 분석은, 상기 설명한 기준 이외에도 다양한 기준에 의하여 설정될 수 있다.
예를 들어, 도 17f에 도시된 바와 같이, 상기 제어부(180)는 상기 모션펜(200)의 움직임에 의하여, 숫자(2, 3) 및 연산자(x)가 생성되는 경우, 상기 숫자 및 연산자를 이용한 결과값(6)을 출력할 수 있다. 이때, 상기 결과값은 시각적 또는 청각적으로 출력될 수 있다.
또한, 상기 제어부(180)는 상기 모션펜(220)의 움직임에 의하여 생성된 문자 정보의 내용에 기초하여, 외부 기기에 제어명령을 생성할 수 있다. 여기에서, 상기 외부 기기는 사용자에 의하여 미리 설정된 외부 기기이거나, 사용자에 의하여 인증이 수행된 외부 기기이거나, 메모리부(170)에 식별정보가 저장된 외부 기기일 수 있다.
또한, 상기 외부 기기는 상기 모션펜(220)과 통신이 가능한 기기로써, 통신부를 구비한 가전 제품(예를 들어, 스마트 냉장고, 스마트 티비, 스마트 보일러, 스마트 에어콘, 스마트 청소기, 스마트 가스레인지 등), 태블릿, 네비게이션, 커넥티드 카(connected car) 등이 될 수 있다.
상기 제어부(180)는 상기 외부 기기에 제어명령이 생성되면, 사용자의 요청에 의하여, 또는 자동적으로 상기 외부 기기에 제어명령을 전송할 수 있다.
예를 들어, 상기 제어부(180)는 "보일러를 24도 올려"라는 문자가 생성되면, 보일러의 온도를 올리기 위한 제어명령을 생성하고, 보일러의 온도가 올라가도록 상기 제어명령을 보일러로 전송할 수 있다. 즉, 사용자는 집이 아닌 외부 장소에서도, 외부 기기에 쉽게 제어명령을 전송할 수 있다.
이를 통하여, 본 발명은, 별도의 장치 없이도, 모션펜(200)만으로, 필기를 수행하고, 외부 장소에서, 외부기기에 대한 제어명령을 쉽게 전송할 수 있다.
또한, 상기 제어부(180)는 외부로부터 모션펜(200)에 이벤트가 발생한 경우, 모션펜의 움직임을 통하여 생성된 문자를 이용하여, 상기 이벤트와 관련된 기능을 수행할 수 있다. 예를 들어, 호 신호가 수신되면, 상기 모션펜(200)의 움직임에 기초한 문자를 생성하고, 이를 이용하여, 호 신호와 관련된 기능을 수행할 수 있다. 상기 호신호와 관련된 기능은 전화 받기 기능, 전화 걸기 기능, 전화 거부 기능 등이 될 수 있다.
예를 들어, 도 17h의 왼쪽에 도시된 바와 같이, 상기 모션펜(200)은 외부 장치로부터 호 신호를 수신할 수 있다. 이때, 사용자는 상기 모션펜(200)을 이용하여, "yes"라고 필기하고, 상기 제어부(180)는 상기 사용자의 필기 움직임에 대응되어, 전화 받기 기능을 수행할 수 있다. 이와 달리, 사용자는 상기 모션펜(200)을 이용하여, "no"라고 필기하고, 상기 제어부(180)는 상기 사용자의 필기 움직임에 대응되는 전화 거부 기능을 수행할 수 있다.
나아가, 비록 도시되지는 않았지만, 상기 제어부(180)는 상기 호 신호를 수신한 후, 상기 호 신호를 종료하기 위한 제어명령이 수신되면, 상기 호 신호를 종료할 수 있다.
이때, 상기 호 신호를 종료하기 위한 제어명령은 제스쳐 명령, 터치 명령 등이 될 수 있다. 예를 들어, 사용자가 상기 호 신호를 수신한 후, 모션펜(200)을 내려놓는 제스쳐를 가하면, 상기 제어부(180)는 상기 모션펜(200)이 내려놓아진 상태에서 기 설정된 시간이 경과하면, 자동으로 호 신호를 종료하거나, 종료해야한다는 알림 정보를 사용자에게 제공할 수 있다. 또 다른 예로, 상기 제어부(180)는 상기 모션펜(200)의 본체(210)와 근접한 영역 상에 물체가 기 설정된 시간 이상 감지되지 않는 경우, 상기 호 신호를 자동으로 종료하거나, 종료해야함을 알리는 알림 정보를 사용자에게 제공할 수 있다.
즉, 상기 제어부(180)는 이벤트와 관련된 기능을 필기를 통하여 생성된 문자를 이용하여 수행함으로써, 이동 단말기의 사용이 어려운 사람들에게 보다 쉬운 UX(User experience)를 제공할 수 있다.
본 발명은 모션펜이 외부 장치에 별도로 신호를 전송하지 않아도 되는 종이 등에 대한 필기 입력을 인식하고, 이를 다른 단말기에 제공할 수 있다. 이를 통하여, 본 발명은 모션펜의 인식이 가능한 별도의 단말기 없이도, 모션펜 자체만으로 다양한 기능의 수행이 가능하다.
또한, 본 발명은 펜의 움직임을 통하여 생성된 문자를 외부 장치에 전송하여, 외부 장치에서 표시할 수 있다. 이를 통하여, 본 발명은 펜의 움직임을 이용하여 문자를 생성한 후, 외부 장치에 이를 제공함으로써, 다양한 기기와의 호환이 가능한 펜을 제공할 수 있다.
또한, 본 발명에 따른 모션펜은 종래의 필기구와 동일한 구성을 포함함으로써, 종래 필기구의 필기 입력시 필기감과 동일한 필기감을 구현할 수 있다. 이를 통하여, 본 발명은, 종래 터치펜의 필기감에 의한 이용의 불편함을 감소시킬 수 있다.
또한, 본 발명은, 이동 단말기를 사용하기 어려운 사람들에게, 이동 단말기 자체에 대한 조작의 필요 없이, 필기를 통하여, 다양한 기능을 제공함으로써, 이동 단말기의 동작을 제어할 수 있다.
즉, 본 발명은 이동 단말기의 사용이 어려운 사람들에게 보다 쉬운 UX(User experience)를 제공할 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 본체;
    상기 본체의 회전 움직임을 감지하는 제1감지부;
    적어도 두 개의 센서를 포함하고, 상기 적어도 두 개의 센서가 서로 이격하여 배치되며, 상기 본체의 직선 움직임을 감지하는 제2감지부; 및
    상기 제1 및 제2 감지부로부터 감지된 직선 움직임 및 회전 움직임에 기초하여, 문자를 생성하는 제어부를 포함하고,
    상기 제2감지부는 제1센서 및 제2센서를 포함하고,
    상기 제어부는
    상기 제1센서로부터 수신된 제1정보 및 상기 제2센서로부터 수신된 제2정보의 비율을 이용하여, 상기 회전 움직임을 보정하는 것을 특징으로 하는 모션펜.
  2. 제1항에 있어서,
    상기 제어부는
    상기 제1정보 및 상기 제2정보의 비율을 이용하여, 상기 회전 움직임의 선 속도를 보정하는 것을 특징으로 하는 모션펜.
  3. 제1항에 있어서,
    상기 제어부는
    상기 제1 및 제2감지부를 통하여, 상기 본체의 제1움직임이 감지되면, 상기 제1움직임의 상대좌표를 이용하여, 제1움직임에 대응되는 제1문자를 생성하는 것을 특징으로 하는 모션펜.
  4. 제3항에 있어서,
    상기 제어부는
    상기 제1문자의 생성을 위한 가상의 기준점을 설정하고, 상기 기준점을 기준으로,
    상기 제1움직임의 상대좌표를 절대좌표로 변환하여 상기 제1문자를 생성하는 것을 특징으로 하는 모션펜.
  5. 제3항에 있어서,
    상기 기준점은 기 설정된 시간이 경과할 때마다 초기화되어, 새로운 기준점으로 다시 설정되는 것을 특징으로 하는 모션펜.
  6. 제5항에 있어서,
    상기 제어부는
    상기 새로운 기준점이 다시 설정되면, 상기 설정된 새로운 기준점을 기준으로 상기 본체의 움직임에 대한 상대좌표를 절대좌표로 변환하여, 문자를 생성하는 것을 특징으로 하는 모션펜.
  7. 제4항에 있어서,
    필기를 수행하는 팁부을 더 포함하고,
    상기 팁부의 일단은 필기를 수행하기 위한 필기 수행부가 배치되고,
    상기 팁부의 타단은 압력을 감지하도록 제3감지부가 배치되며,
    상기 제어부는
    상기 제3감지부에 가해지는 압력에 기초하여, 상기 기준점을 설정하는 것을 특징으로 하는 모션펜.
  8. 제7항에 있어서,
    상기 기준점은
    상기 제3감지부에 압력이 감지된 시점에 대응되는 위치로 설정되는 것을 특징으로 하는 모션펜.
  9. 제7항에 있어서,
    상기 기준점은
    상기 제3감지부에 압력이 감지되지 않은 상태에서, 압력이 감지되는 시점마다 재설정되는 것을 특징으로 하는 모션펜.
  10. 제7항에 있어서,
    상기 제어부는
    상기 제3감지부에 압력의 감지가 시작되는 시작 시점에 대응되는 위치를 상기 기준점으로 설정하고, 상기 기준점을 기준으로, 상기 본체의 움직임에 대응되는 상대좌표를 절대좌표로 변환하여 문자를 생성하는 것을 특징으로 하는 모션펜.
  11. 제7항에 있어서,
    상기 제어부는
    상기 제3감지부에 가해지는 압력이 가해지는 시점부터 상기 문자 생성을 위한 상기 본체의 움직임을 감지하는 것을 특징으로 하는 모션펜.
  12. 제11항에 있어서,
    상기 제어부는
    기 설정된 시간 동안 상기 제3감지부를 통하여 압력이 감지되지 않는 경우, 상기 본체의 움직임에 대응되는 문자가 생성되지 않도록 상기 본체의 움직임을 더 이상 감지하지 않는 것을 특징으로 하는 모션펜.
  13. 제1항에 있어서,
    외부기기와 통신을 수행하는 통신부를 더 포함하고,
    상기 제어부는
    상기 생성된 문자가 상기 외부기기에 표시되도록 상기 생성된 문자를 나타내는 문자 정보를 상기 통신부를 통하여, 상기 외부기기에 전송하는 것을 특징으로 하는 모션펜.
  14. 제13항에 있어서,
    상기 제어부는
    상기 생성된 문자와 관련된 제어명령을 생성하고, 상기 제어명령이 나타내는 기능이 수행되도록 상기 제어명령을 상기 외부기기에 전송하는 것을 특징으로 하는 모션펜.
  15. 제1항에 있어서,
    제2감지부는 제1센서 및 제2센서를 포함하고,
    상기 제1센서 및 제2센서는 상기 본체의 회전 움직임을 보정하도록 상기 본체의 양 끝 단에 서로 이격하여 배치된 것을 특징으로 하는 모션펜.
  16. 본체의 움직임을 감지하는 단계;
    상기 본체의 움직임에 기초하여, 상기 본체의 움직임에 대응되는 절대좌표가 산출되도록 기준점을 설정하는 단계;
    상기 본체의 움직임에 대응되는 상대좌표를 상기 기준점을 기준으로 절대좌표로 변환하는 단계; 및
    상기 절대좌표를 이용하여, 문자를 생성하는 단계를 포함하는 모션펜의 제어방법.
  17. 제16항에 있어서,
    상기 본체의 움직임은 회전 움직임 및 직선 움직임을 포함하고,
    상기 문자를 생성하는 단계에서는
    상기 본체의 움직임에 따른 문자가 생성되도록 상기 회전 움직임에 대응되는 상대좌표를 상기 직선 움직임에 대응되는 상대좌표를 이용하여 보정하는 것을 특징으로 하는 모션펜의 제어방법.
  18. 제17항에 있어서,
    상기 회전 움직임은 상기 직선 움직임과 관련된 가속도 비율을 통하여 보정되는 것을 특징으로 하는 모션펜의 제어방법.
  19. 제16항에 있어서,
    상기 기준점은 상기 본체의 일단에 기 설정된 값 이상의 압력의 감지가 시작되는 시작시점에 대응되는 위치인 것을 특징으로 하는 모션펜의 제어방법.
  20. 제19항에 있어서,
    상기 기준점은
    상기 기준점이 설정된 후, 상기 본체의 일단에 압력이 감지되지 않는 상태에서, 다시 상기 본체의 일단에 기 설정된 값 이상의 압력이 감지되면, 다시 압력이 감지된 시작 시점에 대응되는 위치를 상기 기준점으로 다시 설정하는 것을 특징으로 하는 모션펜의 제어방법.





KR1020150080142A 2015-06-05 2015-06-05 펜 단말기 및 그 제어방법 KR20160143428A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020150080142A KR20160143428A (ko) 2015-06-05 2015-06-05 펜 단말기 및 그 제어방법
US14/978,517 US20160357274A1 (en) 2015-06-05 2015-12-22 Pen terminal and method for controlling the same
EP16803552.5A EP3304259A4 (en) 2015-06-05 2016-01-08 Pen terminal and method for controlling the same
PCT/KR2016/000155 WO2016195197A1 (en) 2015-06-05 2016-01-08 Pen terminal and method for controlling the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150080142A KR20160143428A (ko) 2015-06-05 2015-06-05 펜 단말기 및 그 제어방법

Publications (1)

Publication Number Publication Date
KR20160143428A true KR20160143428A (ko) 2016-12-14

Family

ID=57441483

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150080142A KR20160143428A (ko) 2015-06-05 2015-06-05 펜 단말기 및 그 제어방법

Country Status (4)

Country Link
US (1) US20160357274A1 (ko)
EP (1) EP3304259A4 (ko)
KR (1) KR20160143428A (ko)
WO (1) WO2016195197A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108875729B (zh) * 2018-06-01 2022-03-25 广东小天才科技有限公司 一种智能笔
US10649713B1 (en) * 2019-01-11 2020-05-12 Dell Products L.P. Calibrating multiple displays of a computing device to have a similar perceived appearance
KR20210014401A (ko) * 2019-07-30 2021-02-09 삼성전자주식회사 스타일러스 펜에 의한 제스처를 확인하는 전자 장치 및 그 동작 방법
US12019805B2 (en) * 2019-09-06 2024-06-25 Dot Incorporation Input feedback based smart pen and protruding feedback based smart tablet
US11042230B2 (en) * 2019-11-06 2021-06-22 International Business Machines Corporation Cognitive stylus with sensors

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1995027935A1 (fr) * 1994-04-07 1995-10-19 Japan Nesamac Corporation Appareil d'introduction de donnees du type a prehension de crayon et appareil d'introduction de donnees
US7268774B2 (en) * 1998-08-18 2007-09-11 Candledragon, Inc. Tracking motion of a writing instrument
US20040140962A1 (en) * 2003-01-21 2004-07-22 Microsoft Corporation Inertial sensors integration
KR100928271B1 (ko) * 2007-01-27 2009-11-24 (주) 아이.에스.브이. 파지 각도 보정 광학 펜형 마우스
WO2014066660A2 (en) * 2012-10-26 2014-05-01 Livescribe Inc. Multiple-user collaboration with a smart pen system
KR20140058006A (ko) * 2012-11-05 2014-05-14 삼성전기주식회사 전자 펜 입력 시스템 및 그를 이용한 전자 펜 입력 방법
DE102013214020A1 (de) * 2013-07-17 2015-02-19 Stabilo International Gmbh Digitaler Stift

Also Published As

Publication number Publication date
US20160357274A1 (en) 2016-12-08
EP3304259A4 (en) 2018-12-12
EP3304259A1 (en) 2018-04-11
WO2016195197A1 (en) 2016-12-08

Similar Documents

Publication Publication Date Title
Grussenmeyer et al. Accessible touchscreen technology for people with visual impairments: a survey
JP5451599B2 (ja) マルチモーダルスマートペンのコンピューティングシステム
KR102120930B1 (ko) 포터블 디바이스의 사용자 입력 방법 및 상기 사용자 입력 방법이 수행되는 포터블 디바이스
US20070130547A1 (en) Method and system for touchless user interface control
KR20160143428A (ko) 펜 단말기 및 그 제어방법
US20130197916A1 (en) Terminal device, speech recognition processing method of terminal device, and related program
US20180188830A1 (en) Electronic device
US10496225B2 (en) Electronic device and operating method therof
JP2017521692A (ja) 音声制御映像表示装置及び映像表示装置の音声制御方法
KR20140111790A (ko) 가상 키보드에서 난수를 이용한 키 입력 방법 및 장치
KR102051585B1 (ko) 멀티 터치를 이용한 핸드 라이팅 기능을 갖는 전자 장치 및 제어 방법
Liang et al. DRG-Keyboard: Enabling subtle gesture typing on the fingertip with dual IMU rings
KR20170108662A (ko) 터치 패널을 포함하는 전자 장치 및 그 제어 방법
KR101053411B1 (ko) 문자 입력 방법 및 그 단말기
KR20180103547A (ko) 휴대 장치 및 휴대 장치의 화면 제어방법
KR102227290B1 (ko) 이동단말기 및 그 제어방법
CN108780383B (zh) 基于第二输入选择第一数字输入行为
KR20170004102A (ko) 전자 디바이스
TW201342134A (zh) 具有手寫輸入功能的電子設備
KR102032196B1 (ko) 점자 인식이 가능한 하이브리드 워치
US10908705B2 (en) Electronic device and controlling method therefor
KR102258313B1 (ko) 이동단말 및 그 제어방법
US11893164B2 (en) Methods and systems for eyes-free text entry
KR102289368B1 (ko) 단말기 및 그를 이용한 오브젝트 제어 방법
KR20160149749A (ko) 전자디바이스