KR20140085942A - 터치 기반의 도형의 조작 방법 및 장치 - Google Patents

터치 기반의 도형의 조작 방법 및 장치 Download PDF

Info

Publication number
KR20140085942A
KR20140085942A KR1020120155838A KR20120155838A KR20140085942A KR 20140085942 A KR20140085942 A KR 20140085942A KR 1020120155838 A KR1020120155838 A KR 1020120155838A KR 20120155838 A KR20120155838 A KR 20120155838A KR 20140085942 A KR20140085942 A KR 20140085942A
Authority
KR
South Korea
Prior art keywords
touch
function
gesture
recognized
touch gesture
Prior art date
Application number
KR1020120155838A
Other languages
English (en)
Inventor
이상희
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120155838A priority Critical patent/KR20140085942A/ko
Priority to US14/142,645 priority patent/US9383920B2/en
Publication of KR20140085942A publication Critical patent/KR20140085942A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 터치스크린 상에 수기 입력(handwriting)된 도형을 인식하는 단계; 상기 인식된 도형의 궤적 위에 하나 이상의 가변포인트를 표시하는 단계; 상기 가변 포인트 중 하나를 선택하는 터치 입력을 검출하는 단계; 상기 검출된 터치 입력에 대한 압력 정보 및 터치 제스처 정보 중 적어도 하나를 기반으로 상기 인식된 도형의 조작 기능 실행 요청이 검출되는지 여부를 결정하는 단계; 및 상기 조작 기능 실행 요청이 검출되면, 상기 선택된 가변포인트에 대응된 도형의 조작 기능을 실행하는 단계를 포함하는 도형의 조작 방법을 제공한다.

Description

터치 기반의 도형의 조작 방법 및 장치{Method for controlling two or three dimensional figure based on touch and device thereof}
본 발명은 휴대 단말기 화면에 표시된 도형의 조작 방법 및 장치에 관한 것으로, 특히 터치의 감압을 인식하고, 다양한 터치 동작을 이용하여 화면에 표시되는 도형을 조작하는 방법 및 장치에 관한 것이다.
통신 기술이 발달됨에 따라, 휴대 단말기 예컨대, 스마트폰, 태블릿 PC 등이 널리 보급되고 있다. 휴대단말기는 음성 통화, 문자 통화, 영상 통화 서비스 이외에 다양한 기능들을 새롭게 부가하여 사용자 기능을 통합적으로 제공하고 있다. 최근에는 터치스크린을 구비하는 휴대 단말기가 지속적으로 개발되고 있다. 터치스크린을 구비하는 휴대 단말기는 정보의 입력과 표시를 하나의 스크린에서 수행하는 입력 장치 겸 표시 장치이다.
최근의 휴대 단말기는 사용자의 손가락(finger) 등을 이용한 터치 이외에 스타일러스 펜과 같은 펜(pen)을 입력 수단으로 제공하고 있다. 휴대 단말기를 운용함에 있어서 사용자는 펜 입력 수단을 이용하여 보다 세밀한 터치 등을 이용할 수 있다. 터치 펜의 경우, 손가락보다 날카로운 펜 팁(pen tip)을 구비하고 있어 터치 기능을 지원하는 표시부의 일정 영역을 보다 섬세하게 선택 및 운용하도록 지원한다. 따라서, 최근에는 터치 펜을 이용하여 보다 다양한 기능을 제공하여 사용자 편의성을 증대시키는 방법이 개발되고 있다.
본 발명은 화면 상에 그려진 도형을 인식하고, 인식된 도형을 다양한 터치 펜 동작으로 조작함으로써 사용자에게 재미와 편의성을 증대시키는 한편 단말기 운용성을 높일 수 있는 도형의 조작 방법 및 장치를 제공하는 것을 그 목적으로 한다.
본 발명에 따른 도형의 조작 방법은, 터치스크린 상에 수기 입력(handwriting)된 도형을 인식하는 단계; 상기 인식된 도형의 궤적 위에 하나 이상의 가변포인트를 표시하는 단계; 상기 가변 포인트 중 하나를 선택하는 터치 입력을 검출하는 단계; 상기 검출된 터치 입력에 대한 압력 정보 및 터치 제스처 정보 중 적어도 하나를 기반으로 상기 인식된 도형의 조작 기능 실행 요청이 검출되는지 여부를 결정하는 단계; 및 상기 조작 기능 실행 요청이 검출되면, 상기 선택된 가변포인트에 대응된 도형의 조작 기능을 실행하는 단계를 포함한다.
본 발명에 따른 도형의 조작 장치는, 터치입력에 다른 수기 입력(handwriting)을 감지하고, 수기 입력에 대응하는 입력 효과를 표시하는 터치스크린; 및 상기 터치스크린 상에 수기 입력된 도형을 인식하고, 인식된 도형의 궤적 위에 하나 이상의 가변포인트를 표시하고, 상기 가변 포인트 중 하나를 선택하는 터치 입력이 검출되면, 터치 입력에 대한 압력 정보 및 터치 제스처 정보 중 적어도 하나를 기반으로 상기 인식된 도형의 조작 기능 실행 요청을 검출하고, 상기 기능 실행 요청에 응답하여 선택된 가변 포인트에 대응하는 도형의 조작 기능을 실행하도록 제어하는 제어부를 포함하는 도형의 조작 방법.
본 발명에 따르면, 터치스크린에 수기 입력된 도형을 인식한 후, 도형의 궤적 위에 도형의 조작 기능이 맵핑된 가변 포인트를 하나 이상 표시하고, 그 중 하나의 가변 포인트를 선택하는 터치의 압력 및 터치 동작을 기반으로 선택된 가변 포인트에 맵핑된 도형의 조작 기능을 실행할 수 있다. 본 발명은 휴대 단말기를 사용하는 사용자에게 실제 펜을 이용하는 것과 같은 도형 조작 인터페이스를 제공함으로써, 도형을 조작하는데 있어서 편의성과 재미를 줄 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 휴대 단말기의 구성을 설명하기 위해 나타내 보인 블록도이다.
도 2는 본 발명의 실시예에 따른 도형의 조작 방법을 설명하기 위해 나타내 보인 흐름도이다.
도 3은 본 발명의 실시예에 따른 핸드라이팅 도형을 인식하여 표시하는 화면 예시도이다.
도 4는 본 발명의 실시예에 따라 도형의 추가 조작 기능을 표시하는 화면 예시도이다.
도 5는 본 발명의 실시예에 따른 도형의 삭제 기능을 표시하는 화면 인터페이스이다.
도 6은 본 발명의 실시예에 따른 도형의 모양 변경 기능을 표시하는 화면 인터페이스이다.
도 7은 본 발명의 실시예에 따른 도형의 스타일 변경 기능을 표시하는 화면 인터페이스이다.
도 8은 본 발명의 실시예에 따른 도형의 효과 변경 기능을 표시하는 화면 인터페이스이다.
도 9는 본 발명의 실시예에 도형의 자르기 기능을 표시하는 화면 인터페이스이다.
이하에는 첨부한 도면을 참조하여 본 발명의 바람직한 실시예에 따라 도형의 조작 방법 및 장치에 대해서 상세하게 설명한다. 본 발명의 상세한 설명에 앞서, 이하에서 사용되는 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 한다. 따라서, 본 명세서와 도면은 본 발명의 바람직한 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원 시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다. 또한, 첨부 도면에 있어서 일부 구성요소는 과장되거나 생략되거나 또는 개략적으로 도시되었으며, 각 구성요소의 크기는 실제 크기를 전적으로 반영하는 것이 아니다. 따라서 본 발명은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되어지지 않는다.
본 발명에 따른 도형의 조작 방법 및 장치는 휴대 단말기에 적용될 수 있다. 이러한 휴대 단말기는 휴대폰, 스마트폰, 태블릿 PC, 핸드헬드(hand-held) PC, PMP(Portable Multimedia Player), PDA(Personal Digital Assistant) 등이 될 수 있음은 자명하다. 이하 설명에서는 본 발명에 따른 도형의 조작 방법 및 장치가 휴대 단말기에 적용되는 것으로 가정하여 설명한다.
도 1은 본 발명의 실시예에 따른 휴대 단말기의 구성을 설명하기 위해 나타내 보인 흐름도이다.
도 1을 참조하면, 본 발명에 따른 휴대 단말기(100)는 터치 패널(111) 및 표시부(112)을 포함하여 구성된 터치스크린(110), 펜 인식 패널(120), 키 입력부(130), 무선통신부(140), 오디오 처리부(150), 저장부(160) 및 제어부(170)를 포함하여 이루어질 수 있다.
터치스크린(110)은 터치 패널(111) 및 표시부(112)을 포함한다. 터치스크린(110)은 사용자 기능 실행에 따른 화면을 표시하고, 사용자 기능 제어 관련 터치 이벤트를 감지한다. 터치 패널(111)은 표시부(112)에 안착(place on)된다. 구체적으로, 터치 패널(111)은 표시부(112) 전면에 위치하는 애드 온 타입(add-on type)이나 표시부(112) 내에 삽입되는 온 셀 타입(on-cell type) 또는 인 셀 타입(in-cell type)으로 구현될 수 있다. 터치스크린(110)의 크기는 터치 패널의 크기로 결정될 수 있다. 터치 패널(111)은 터치 패널(111)에 대한 사용자 입력정보(예컨대, 사용자제스처)에 응답하여 아날로그 신호(예, 터치 이벤트)를 발생하고, 아날로그 신호를 A/D 변환하여 제어부(170)로 전달한다. 여기서, 터치 이벤트는 터치 좌표(X, Y) 정보를 포함한다. 제어부(170)는 터치스크린(110)으로부터 터치 이벤트가 수신될 경우, 터치 기구(예, 손가락이나 펜)가 터치스크린(110)에 터치된 것으로 결정하고 , 터치스크린(110)으로부터 터치이벤트가 수신되지 않을 경우 터치 해제된 것으로 결정한다. 또한, 제어부(170)는 터치 좌표가 변화된 경우, 터치가 이동한 것으로 결정하고, 터치의 이동에 응답하여 터치의 위치 변화량 및 터치의 이동 속도 등을 산출한다. 제어부(170)는 터치 좌표, 터치의 해제 여부, 터치의 이동 여부, 터치의 위치 변화량 및 터치의 이동 속도 등을 기반으로 사용자 제스처를 구분한다. 사용자 제스처는 터치(touch), 멀티 터치(multi touch), 탭(Tap), 더블 탭(Double Tap), 롱 탭(Long tap), 탭 앤 터치(Tap & touch), 드래그(Drag), 플릭(Flick), 프레스(Press), 롱 프레스(long press), 핀치인(pinch in) 및 핀치아웃(pinch out) 등을 포함할 수 있다.
또한, 터치스크린(110)은 압력 센서를 구비하여 터치된 지점의 압력을 감지할 수 있다. 감지된 압력 정보는 제어부(170)로 전달되어 터치와 프레스를 구분한다. 터치 패널(111)은 저항막 방식(resistive type), 정전용량 방식(capacitive type) 및 전자유도 방식(electromagnetic induction type) 등이 적용될 수 있다.
표시부(112)은 제어부(180)의 제어 하에, 제어부(180)로부터 입력받은 영상 데이터를 아날로그 신호로 변환하여 표시한다. 즉, 표시부(112)은 휴대 단말기의 이용에 따른 다양한 화면 예를 들면, 잠금 화면, 홈 화면, 어플리케이션(이하 줄여 "앱(App)"이라 한다) 실행 화면, 메뉴 화면, 키패드 화면, 메시지 작성 화면, 인터넷 화면 등을 제공할 수 있다. 표시부(112)은 액정 표시 장치(Liquid Crystal Display : LCD), OLED(Organic Light Emitted Diode), AMOLED(Active Matrix Organic Light Emitted Diode) 등의 평판 표시부의 형태로 형성될 수 있다.
본 발명에서 표시부(112)은 도형, 글씨 등을 핸드라이팅(handwriting)할 수 있는 에디터 모드 진입에 따른 화면을 표시할 수 있다. 본 발명에 따른 휴대 단말기(100)는 에디터 모드로 운용 시 화면 상에 그려진 도형을 인식하는 도형 인식 기능을 지원한다. 특히, 표시부(112)는 인식된 도형의 궤적에 특정 기능 루틴에 대응되는 가변 포인트를 하나 이상 표시할 수 있다. 표시부(112)는 제어부(170)의 제어 하에, 특정 가변 포인트에 대한 기능 실행 요청 시 기능 실행에 따른 인식된 도형의 크기, 모양 , 스타일, 색상, 효과, 길이, 이동, 추가, 삭제 중 하나를 변경하여 표시할 수 있다.
펜 인식 패널(120)은 터치 펜의 접근 또는 터치 펜의 조작에 따른 펜 상태 정보를 수신하고, 이를 제어부(170)로 전달한다. 또한, 펜 인식 패널(120)은 터치 펜의 제스처 동작에 따른 제스처 인식 정보를 수신하고, 이를 제어부(170)로 전달한다. 펜 인식 패널(120)은 휴대 단말기(100)의 일정 위치에 배치되어 특정 이벤트 발생에 따라 또는 디폴트(default)로 활성화 상태를 가질 수 있다. 펜 인식 패널(120)의 크기는 표시부(112)의 표시 영역의 크기로 결정될 수 있다. 펜 인식 패널(120)은 터치 펜의 접근 또는 조작에 따른 터치 펜의 위치 값을 수신하여 제어부(170)로 전달한다. 예를 들어, 터치 펜이 전자기 유도 방식으로 구성된 경우, 펜 인식 패널(120)은 터치 펜의 접근 간격에 따라 각각 해당 간격에 해당하는 전자기 유도 값을 수집하고, 이를 제어부(170)로 전달한다. 이때, 전달되는 전자기 유도 값은 펜 상태 정보 즉, 터치 펜이 펜 인식 패널(120)로부터 또는 표시부(112)이나 터치 패널(111)로부터 일정 간격 이격된 호버링(hovering) 상태인지 또는 표시부(112)이나 터치 패널(111)에 접촉된 상태인지 여부를 결정하기 위한 정보일 수 있다. 한편, 본 발명에 있어서 터치 펜은 전자기 유도 방식 이외에 다른 설계 방식으로 구성된 경우, 해당 터치 펜의 정보를 수신하는 구조로 설계될 수 있으며, 이에 한정하는 것은 아니다.
특히, 본 발명에 있어서 펜 인식 패널(120)은 터치 펜에 가해지는 압력에 따른 감압 또는 가압 정보를 수신하고, 이를 제어부(170)로 전달할 수 있다. 예를 들어, 사용자는 터치 펜을 이용하여 다양한 압력을 가하면서 수기 입력(handwirting)하여 도형, 글씨 등을 작성할 수 있다. 터치 펜은 터치 펜에 가해지는 압력 정보를 제어부로 전달한다. 제어부(170)는 터치 펜으로부터 수신되는 압력 정보에 따라 터치 펜에 의해 기입되는 글자의 폰트나 굵기 또는 색 등이 변환되는 형태로 출력되도록 표시부(112)를 제어한다. 즉, 사용자는 터치 펜의 가압 크기를 조절함으로써 다양한 굵기 또는 다양한 폰트의 글자나 문자 쓰기, 이미지 그리기 등의 전환을 자동으로 수행할 수 있다.
키 입력부(130)는 숫자 또는 문자 정보를 입력받고, 각종 기능들을 설정하기 위한 다수의 입력키 및 기능키들을 포함한다. 상기 기능키들은 특정 기능을 수행하도록 설정된 방향키, 사이드 키 및 단축키 등을 포함할 수 있다. 또한 키 입력부(130)는 사용자 설정 및 휴대 단말기(100)의 기능 제어와 관련한 키 신호를 생성하여 제어부(170)로 전달한다. 키 신호는 전원 온/오프 신호, 볼륨 조절 신호, 화면 온/오프 신호 등으로 구분될 수 있다. 제어부(170)는 이러한 키 신호에 응답하여 상기한 구성들을 제어할 수 있다. 또한, 또한 키 입력부(130)는 다수 개의 키들을 포함하는 쿼티 키패드, 3*4 키패드, 4*3 키패드 등을 포함할 수 있다. 그리고 키 입력부(130)는 휴대 단말기(100)의 터치 패널(111)이 풀 터치스크린 형태로 지원된 경우, 휴대 단말기(100)의 케이스 측면에 형성되는, 화면 온/오프 및 휴대 단말기 온/오프 등을 위한 적어도 하나의 사이드 키만을 포함할 수도 있다.
무선 통신부(140)는 휴대 단말기(100)의 통신을 수행한다. 무선 통신부(140)은 지원 가능한 이동 통신 네트워크가 설정된 통신 채널을 형성하여 음성 통신, 화상 통신 및 데이터 통신 등과 같은 통신을 수행하다. 무선통신부(140)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 무선주파수 송신부와, 수신되는 신호의 주파수를 저잡음 증폭 및 하강 변환하는 무선주파수 수신부 등을 포함할 수 있다. 또한 무선 통신부(140)는 이동 통신 모듈(예컨대, 3세대(3-Generation) 이동통신모듈, 3.5 세대(3.5-Generation) 이동통신모듈 또는 4세대(4-Generation) 이동통신모듈 등), 및 디지털 방송 모듈(예컨대, DMB 모듈)을 포함할 수 있다.
오디오 처리부(150)는 제어부(170)로부터 입력받은 음성 등의 오디오 데이터를 DA(Digital to Analog) 변환하여 스피커(SPK)로 전송하고, 마이크(MIC)로부터 입력받은 음성 등의 오디오 데이터를 AD(Analog to Digital) 변환하여 제어부(170)로 전달한다. 오디오 처리부(150)는 코덱(codec; coder/decoder)으로 구성될 수 있으며, 코덱은 패킷 데이터 등을 처리하는 데이터 코덱과 음성 등의 오디오 신호를 처리하는 오디오 코덱을 구비할 수 있다. 오디오 처리부(150)는 수신되는 디지털 오디오신호를 오디오 코덱을 통해 아날로그 신호로 변환하여 스피커를 통해 재생한다. 오디오 처리부(150)는 마이크로부터 입력되는 아날로그 오디오 신호를 오디오 코덱을 통해 디지털 오디오신호로 변환하여 제어부(170)로 전달한다.
저장부(160)는 휴대 단말기(100)의 운영체제(OS;Operating System) 및 다양한 어플리케이션(이하, 앱)을 비롯하여, 휴대 단말에서 생성되는 다양한 데이터 등을 저장한다. 데이터는 휴대 단말기의 어플리케이션 (이하, 앱) 실행에 발생하는 데이터 및 휴대단말을 이용하여 생성하거나 외부(예컨대, 외부 서버, 다른 휴대 단말, 개인용 컴퓨터)로부터 수신하여 저장 가능한 모든 형태의 데이터들을 포함할 수 있다. 저장부(160)는 휴대 단말기에서 제공되는 사용자 인터페이스 및 휴대 단말기 기능 처리에 대한 다양한 설정 정보를 저장할 수 있다.
특히, 본 발명에 따른 저장부(160)는 도형 인식 프로그램을 저장할 수 있으나, 이에 한정하지 않으며, 수식 인식 프로그램 및 텍스트 인식 프로그램 등을 저장할 수도 있다. 도형 인식 프로그램은 터치 입력 조작에 따른 궤적을 분석하여 도형을 판독하고, 이를 보정하기 위해 사용된다. 이를 위해 저장부(160)는 도형 인식 프로그램과 연계하여 도형 인식을 위한 각종 통계 모형 및, 도형 인식 결과, 도형 보정 조건 등을 저장할 수 있다.
또한, 저장부(160)는 도형을 조작하기 위해, 도형의 궤적 위에 출력되는 하나 이상의 가변 포인트에 맵핑된 도형의 조작 기능 정보 및 기능 실행 명령에 대응하는 터치 제스처 테이블 등을 저장할 수 있다.
제어부(170)는 휴대 단말기(100)의 전반적인 동작 및 휴대 단말기(100)의 내부 구성들 간의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 제어부(170)는 배터리에서 내부 구성들로의 전원 공급을 제어한다. 제어부(170)는 전원이 공급되면, 휴대 단말기(100)의 부팅 과정을 제어하고, 사용자의 설정에 따라 휴대 단말기(100)의 기능 실행을 위해 프로그램 영역에 저장된 각종 응용 프로그램을 실행한다.
이하, 제어부의 구체적인 기능에 대한 상세한 설명은 첨부된 도면과 함께 설명하고자 한다.
도 2 는 본 발명의 실시예에 따른 도형의 조작 방법을 설명하기 위해 나타내 보인 흐름도이다.
본 발명을 설명하기에 앞서 본 발명의 실시예에 따른 휴대 단말기(100)는 감압 또는 가압 감지가 가능한 펜을 구비하며, 터치 펜과 연동되어 일정 터치 기능을 제공할 수 있다. 즉, 본 발명에 따른 휴대 단말기(100)는 터치 펜에 의해 가해지는 압력(예, 필압) 및 터치 펜 제스처에 따른 다양한 명령어를 생성하고, 생성된 명령어에 따른 사용자 기능을 지원할 수 있다.
도 2를 참조하면, 단계 210에서 제어부(170)는 운영 모드를 에디터(editor) 모드로 운용할 수 있다. 제어부(170)는 에디터 모드가 활성화되면 핸드라이팅 입력 화면을 표시부(112)에 표시한다. 에디터 모드는 터치 입력 수단(예, 터치 펜 또는 손가락)을 이용하여 노트에 필기를 하는 것처럼 직접 메시지를 입력할 수 있는 핸드라이팅(handwriting) 입력 모드를 의미한다. 에디터 모드에서 제어부(170)는 터치 펜 기능 운용을 위해 펜 인식 패널을 활성화하도록 제어할 수 있다.
본 발명에 따른 휴대 단말기(100)는 에디터 모드에서 텍스트 인식, 도형 인식, 수식 인식, 그래프 인식 중 하나 이상의 기능을 지원한다. 특히, 본 발명에 따른 에디터 모드는 메모, 문자 메시지 작성, 스케쥴러와 같이 문자 등의 텍스트를 입력할 수 있는 모든 상황에서 활성화될 수 있다.
에디터 모드에서 터치 입력 수단은 터치 펜 또는 손가락 중 어느 하나일 수 있다. 이하, 본 발명의 실시예에서 사용자의 터치 입력 수단은 터치 펜인 경우를 가정하여 설명하지만, 이에 한정하지 않는다.
단계 220에서 에디터 모드에서 제어부(170)는 제1 터치 입력을 검출한다. 예컨대, 터치스크린(110)은 사용자의 제1 터치 입력에 응답하여 터치 이벤트를 발생하고, 이를 제어부(170)로 전달한다. 여기서, 터치 이벤트는 터치 좌표(x1, y1)를 포함한다.
단계 225에서 제어부(170)는 제1 터치 입력에 대응되는 터치 좌표를 추출하고, 제1 터치 입력의 시작점을 표시부(112)에 표시한다. 단계 230에서 제어부(170)는 제1 터치 입력이 움직이는지 여부를 결정한다. 예컨대, 제어부(170)는 터치 좌표가 (x1, y1)에서 (x2, y2)로 변화된 경우, 사용자의 제1 터치가 이동한 것으로 결정한다.
단계 240에서 제어부(170)는 제1 터치가 움직인 경우, 터치 움직임에 응답하여 터치의 시작점을 기준으로 이동에 따른 궤적을 표시부(112)에 표시한다. 제어부(170)는 제1 터치 입력의 움직임에 따라 변화되는 터치의 입력 데이터를 저장할 수 있다. 제어부(170)는 터치의 이동에 응답하여 터치의 위치 변화량 및 터치의 이동 속도 등을 산출할 수 있다.
단계 250에서 제어부(170)는 표시된 궤적을 기반으로 도형이 인식되는지 여부를 결정한다. 여기서, 도형의 인식 기능은 사용자에 의해 별도의 도형 인식 기능 메뉴를 선택하여 도형 인식 기능을 실행시키거나, 제1 터치의 움직임이 종료된 경우, 도형 인식 기능이 실행될 수 있으나, 이에 한정하는 것은 아니다. 예를 들어, 제어부(170)는 에디터 모드에서 터치 입력 신호 검출 후, 도형 인식 기능 실행 메뉴의 선택 입력이 검출되면, 터치 입력 데이터를 도형 인식 엔진으로 전달한다. 또한, 제어부(170)는 터치 움직임에 따른 궤적을 표시하는 중에, 제1 터치의 해제가 검출된 경우 또는 제1 터치 입력의 위치 변화가 기 설정된 시간 동안 유지된 경우가 발생되면, 터치의 입력 데이터를 도형 인식 엔진으로 전달할 수도 있다.
한편, 도형 인식 엔진은 터치 입력 데이터를 통해 표시부(112) 상에 표시된 궤적을 이미지로 판독한다. 도형 인식 엔진은 판독된 이미지와 유사한 도형 패턴이 존재하는 경우, 터치의 입력 데이터의 좌표값을 유사한 도형 패턴의 벡터 정보로 변환함으로써 도형을 인식하고, 이를 제어부(170)로 전달한다. 즉, 사용자가 터치 펜을 이용하여 사각 모양과 엇비슷하게 그린 경우, 제어부(170)는 사각형과 엇비슷하게 그려진 사각 모양을 사각형으로 인식할 수 있다. 이는 하나의 예시일 뿐이며, 도형 인식 엔진은 상술한 방법 이외에 다양한 방법으로 화면 상에 그려진 도형을 인식할 수 있다. 제어부(170)는 도형 인식 엔진의 판단을 바탕으로 도형이 인식되는지 여부를 결정할 수 있다.
단계 255에서 제어부(170)는 도형이 인식된 경우, 인식된 도형의 궤적 위에 하나 이상의 가변포인트를 표시한다. 이때, 제어부(170)는 인식된 도형의 좌표값에 오차가 있을 경우, 표준 값을 기준으로 도형을 보정하여 표시부(112)에 표시한다. 제어부(170)는 도형의 접점 또는 도형의 외곽선 위에 가변 포인트가 표시되도록 제어할 수 있다. 여기서, 가변 포인트 사이의 간격은 균등할 수 있으나, 이에 한정하는 것은 아니다.
본 발명의 실시예에 따라 도형의 궤적 위에 표시된 가변 포인트는 각각의 가변 포인트에 대응하여 도형을 조작하기 위한 기능이 맵핑될 수 있다. 예를 들어, 제어부(170)는 핸드라이팅 모드에서 사각형의 도형이 인식되면, 사각형의 접점들, 접점 사이의 중점들 등 적어도 8개의 가변 포인트를 출력할 수 있다. 이 경우, 8 개의 가변 포인트들은 도형의 조작 기능 예컨대, 도형의 추가, 모양 변경, 스타일 변경, 효과 변경, 색상 변경, 도형의 회전, 3차원 변경, 길이 변경, 텍스트 입력 추가 기능, 이동, 삭제 들 중 적어도 하나의 기능이 맵핑될 수 있다. 본 발명의 실실시예에서 도형의 조작 기능은 상술한 기능들에 한정되지 않으며, 도형을 조작하거나 변경하기 위한 모든 기능이 해당될 수 있다.
단계 260에서 제어부(170)는 도형의 가변 포인트 중 하나를 선택하는 제2 터치 입력을 검출한다. 여기서, 제2 터치의 입력 수단은 터치 펜일 수 있으나, 이에 한정하지 않는다.
단계 270에서 제어부(170)는 제2 터치에 의해 선택된 가변 포인트에 대응되는 도형 조작 기능 실행 요청이 검출되는지 여부를 결정한다. 제어부(170)는 하나의 가변 포인트를 선택하는 제2 터치의 압력 정보 및 터치 제스처 정보 중 하나 이상의 정보를 기반으로 도형 조작 기능 실행 요청이 검출되는 지 여부를 결정할 수 있다.
구체적으로, 도형 조작 기능 실행 루틴은 가변 포인트를 선택하는 제2 터치에 가압 후 일정 시간 유지된 경우, 제2 터치에 대한 특정 제스처가 검출된 경우, 제2 터치에 가합 후, 특정 제스처가 검출된 경우 중 하나가 될 수 있다.
일 예를 들어, 특정 가변 포인트에 대응되어 도형의 모양 변경 기능이 맵핑되고, 기능 실행 명령은 터치에 대해 가압 후, 상하 이동 제스처가 매핑될 수 있다. 이 경우, 제어부(170)는 특정 가변 포인트를 선택하는 제2 터치를 검출하고, 제2 터치에 가압 정보가 수신되고, 상하 이동 제스처 입력이 검출되면, 인식된 도형의 모양 변경 기능 실행 요청이 검출됐다고 결정한다. 또한, 특정 가변 포인트에 대해 기능 실행 명령으로 터치 가압 후, 돼지 꼬리표 제스처가 맵핑된 경우, 제어부(170)는 특정 가변 포인트에 대한 제2 터치를 검출하고, 제2 터치의 제스처가 돼지 꼬리표 문양으로 판단되면, 도형의 삭제 기능 실행 요청이 검출됐다고 결정한다.
즉, 본 발명에 따른 휴대 단말기(100)는 에디터 모드에서 인식된 도형의 궤적 위에 특정 기능과 맵핑되는 하나 이상의 가변 포인트를 표시하고, 터치 펜의 압력 정보 및 제스처 인식 정보를 기반으로 맵핑된 도형의 조작 기능 실행을 명령하여 특정 기능을 보다 편리하고 용이하게 수행하도록 지원할 수 있다.
단계 280에서 제어부(170)는 도형의 조작 기능 실행 요청에 응답하여 선택된 가변 포인트에 대응된 도형의 조작 기능을 실행한다. 제어부(170)는 도형의 조작 기능이 실행에 따른 화면을 출력하도록 표시부(112)를 제어한다. 예컨대, 제어부(170)는 도형 조작 기능 실행 요청에 응답하여 인식된 도형의 크기, 모양, 스타일, 생상, 효과, 길이, 이동, 추가 , 삭제 중 적어도 하나를 변경하여 표시할 수 있다. 상기 도형의 조작 기능 실행 화면은 도 4 이하의 도면을 참조하여 후술하기로 하다.
이후, 제어부는 인식된 도형의 외곽 영역에 제3 터치 입력이 검출된 경우, 도형의 궤적 위에 표시된 가변 포인트의 출력을 해제할 수 있다.
디지털 기기의 컨버전스(convergence) 추세에 따라 변형이 매우 다양하여 모두 열거할 수는 없으나, 본 발명에 따른 휴대 단말기(100)는 휴대 단말기의 위치 변화와 관련된 정보를 감지하기 위한 센서 모듈과, 휴대 단말기(100)의 위치를 측정하기 위한 GPS 모듈과, 카메라 모듈 등과 같이 상기에서 언급되지 않은 구성들을 더 포함할 수 있다. 또한 본 발명의 휴대 단말기(100)는 그 제공 형태에 따라 상기한 구성에서 특정 구성들이 제외되거나 다른 구성으로 대체될 수도 있음은 물론이다. 또한 본 발명에서 입력부는 상술한 터치스크린(110) 및 키입력부(130) 이외에, 터치패드, 트랙볼 등이 될 수 있음은 물론이다.
도 3은 본 발명의 실시예에 따른 핸드라이팅 도형을 인식하여 표시하는 화면 예시도이다.
도 3을 참조하면, 본 발명의 실시예에 따른 휴대 단말기(100)는 에디터 모드로 운용될 수 있다. 에디터 모드로 운용 시 표시부(112)는 제어부(170)의 제어 하에, 화면 <301>에 도시된 바와 같이, 핸드라이팅 입력 화면(310)을 표시한다. 에디터 모드에서 제어부(170)는 펜 터치 패널을 활성화상태로 제어할 수 있다.
그러한 상태에서 사용자는 터치 펜(320)을 이용하여 표시 패널에 접촉된 상태 또는 호버링 상태 중 어느 하나의 상태에서 터치 입력 동작을 수행하여 특정 도형(예, 사각 모양)을 수기 입력(handwriting)할 수 있다. 보다 상세하게는, 제어부(170)는 터치 펜에 의한 터치 입력의 시작점(330)을 표시부(112)에 표시하고, 시작점(330)을 기준으로 화면 <302>에 도시된 바와 같이, 터치 입력 동작을 따라 사각 모양의 궤적(331)을 표시한다.
사용자가 사각 모양을 수기 입력한 후, 도형 인식 기능이 실행되면, 제어부(110)는 사각 모양을 사각형으로 인식한다. 표시부(112)는 제어부(170)의 제어 하에, 인식된 도형의 궤적 위에 하나 이상의 가변 포인트를 출력한다.
예를 들어, 표시부(112)는 제어부(170)의 제어 하에, 화면 <303>에 도시된 바와 같이 사각형(340)의 궤적 위에 8개의 가변 포인트(350)를 출력 할 수 있다. 이때, 8 개의 가변 포인트에는 도형의 조작 기능 예컨대, 도형의 모양 변경 기능, 색상 변경 기능, 스타일 변경 기능, 효과 변경 기능, 도형 추가 기능, 도형 삭제 기능, 크기 변경 기능, 이동 기능, 길이 변경 기능 들 중 하나 이상의 기능이 매핑될 수 있다.
본 발명의 실시예에 따른 휴대단말기(100)는 도형의 궤적에 따라 표시되는 가변 포인트의 개수 변경이 가능하며, 사용자 편의를 위해 가변 포인트에 대응된 기능들을 안내하는 안내창을 출력할 수 있으나, 이에 한정하는 것은 아니다.
도 4는 본 발명의 실시예에 따라 도형의 추가 조작 기능을 표시하는 화면 예시도이다.
도 4를 참조하면, 표시부(112)는 제어부(170)의 제어 하에, 화면<401>에 도시된 바와 같이, 핸드라이팅 입력 화면(410)에서 인식된 도형의 궤적 위에 하나 이상의 가변 포인트(440)를 출력할 수 있다. 예컨대, 제어부(170)는 터치 펜(420)에 의한 수기 입력 데이터를 기반으로 사각형(430)을 인식할 수 있다.
그러한 상태에서 사용자는 터치 펜(420)으로 출력된 가변 포인트 중 제1 가변 포인트(445)를 선택하고, 제1 가변 포인트(445)를 선택하는 터치 입력에 압력을 가할 수 있다. 그러면, 제어부(170)는 터치 펜(420)에 가해지는 압력 정보를 수신한다. 제어부(170)는 터치 펜으로부터 수신된 압력 정보를 기반으로 사용자의 가압 동작을 인지할 수 있다. 한편, 제어부(170)는 터치 펜으로부터 압력 정보를 수신할 수 있으나, 정전 용량의 정보, 압력 센서 정보로부터 사용자의 가압 동작을 인지할 수도 있다.
사용자는 터치 펜(420)에 압력을 가하면서, 제1 가변 포인트(445)를 기준으로 상하 방향 중 하나의 방향으로 터치 펜(420)을 움직일 수 있다. 그러면, 제어부(170)는 제1 가변 포인트(445)에 대응하여 맵핑된 도형의 조작 기능(예, 도형 추가 기능)을 실행한다.
구체적으로, 화면 <402>에 도시된 바와 같이, 제어부(170)는 제1 가변포인트(445)를 선택하는 터치의 가압 및 상 하측으로 움직이는 터치 제스처가 검출되면, 도형의 추가 기능을 실행한다. 이때, 제어부(170)는 인식된 사각형(430) 위에 추가 도형을 표시하도록 표시부(112)를 제어하다. 예를 들어, 제어부(170)는 표시부(112)에 인식된 도형과 다른 타입으로 추가 도형을 출력한다. 이 경우, 인식된 도형의 궤적은 점선으로 출력되고, 추가 도형의 궤적은 실선으로 출력할 수 있으나, 이는 발명을 설명하기 위한 예시일 뿐이며, 이에 한정하지 않는다. 즉, 화면 <403>에 도시된 바와 같이, 제어부(170)는 사각형의 궤적은 점선(435)으로 출력하고, 추가 도형 예컨대, 원의 궤적은 실선(450)으로 출력하도록 표시부(112)를 제어한다. 이때, 제어부(170)는 원의 궤적 위에 하나 이상의 가변 포인트가 출력되도록 제어하며, 도형의 모양에 따라 가변 포인트의 개수를 변경하여 출력할 수 있다.
계속하여, 사용자가 제1 가변 포인트(445)에 압력을 가하고, 상측 방향으로 움직인 경우, 제어부(112)는 추가 도형을 다른 타입의 도형으로 출력하도록 표시부(112)를 제어한다. 표시부(112)는 화면<404>에 도시된 바와 같이, 제어부(170)의 제어 하에, 상측 방향으로 움직인 터치 제스처에 응답하여 원 도형을 삼각형으로 변경하여 출력한다. 이 경우, 사각형(430)의 궤적은 점선으로 출력하고, 삼각형의 궤적은 실선(460)으로 출력된다. 이때, 제어부(170)는 삼각형의 궤적 위에 하나 이상의 가변 포인트가 출력되도록 제어한다.
본 발명에 따른 표시부(112)는 도형 타입에 따라 출력된 가변 포인트에 대응하는 도형의 조작 기능을 안내하는 안내창을 출력할 수도 있으나, 이에 한정하는 것은 아니다.
한편, 본 발명의 실시예에 따르면, 제1 가변 포인트(445)에는 도형의 추가 기능 및 도형의 삭제 기능 등 하나 이상의 기능이 맵핑될 수 있다. 이 경우, 도형의 추가 기능 실행 명령은 터치에 압력이 가해진 뒤, 제1 가변 포인트(445)를 기준으로 상 하 방향의 터치 제스처가 입력된 경우, 도형의 추가 기능이 실행될 수 있다. 반면에, 도형의 삭제 기능 실행 명령은 터치에 압력이 가해진 뒤, 제1 가변 포인트(445)를 기준으로 돼지 꼬리 모양의 터치 제스처가 입력된 경우, 도형의 삭제 기능이 실행될 수 있다.
본 발명의 실시예에서 도형 추가 기능 실행은 제1 가변 포인트를 터치 펜으로 터치한 뒤, 제1 가변 포인트를 기준으로 상하 방향으로 터치 펜을 움직인 경우에도 적용될 수 있으며, 이에 한정하는 것은 아니다.
도 5는 본 발명의 실시예에 따른 도형의 삭제 기능을 표시하는 화면 인터페이스이다.
도 5를 참조하면, 표시부(112)는 화면 <501>에 도시된 바와 같이, 핸드라이팅 입력 화면(510)에서 인식된 사각 형의 도형 위에 하나 이상의 가변 포인트(540)를 출력한다. 제어부(170)는 터치 펜에 의한 수기 입력 데이터를 기반으로 사각형(530)을 인식할 수 있다.
그러한 상태에서 사용자가 사각형의 상단 선분 중 중앙에 출력된 제1 가변 포인트(550)를 터치 펜(520)으로 선택하고, 압력을 가한 뒤, 제1 가변 포인트(550)를 기준으로 돼지 꼬리 모양으로 터치 펜(520)을 움직일 수 있다. 그러면 제어부(170)는 화면 <502>에 도시된 바와 같이, 인식된 사각형의 도형을 삭제하는 기능을 실행한다.
본 발명의 실시예에서 도형의 삭제 기능 실행은 제1 가변 포인트를 터치 펜으로 터치한 뒤, 제1 가변 포인트를 기준으로 돼지 꼬리 모양으로 터치 펜을 움직인 경우에도 적용될 수도 있으며, 이에 한정하는 것은 아니다.
도 6은 본 발명의 실시예에 따른 도형의 모양 변경 기능을 표시하는 화면 인터페이스이다.
도 6을 참조하면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <601>에 도시된 바와 같이, 핸드라이팅 입력 화면(610)에서 인식된 사각형(630)의 궤적 위에 하나 이상의 가변 포인트(640)를 출력한다.
그러한 상태에서 사용자가 사각형의 하방 왼쪽의 제2 가변 포인트(650)를 터치 펜(620)으로 터치하고, 압력을 가한 뒤, 제2 가변 포인트를 기준으로 상하 방향 중 하나의 방향(예, 하측 방향)으로 움직일 수 있다. 이 경우, 사각형의 제2 가변 포인트(650)에는 도형의 모양을 변경하는 기능이 맵핑될 수 있다. 그러면, 제어부(170)는 인식된 사각형(630)의 모양을 다른 타입으로 변경하여 출력한다. 즉, 화면 <602>에 도시된 바와 같이, 제어부(170)는 사각형(630)을 원(631)으로 변경하여 출력하고, 변경된 원의 궤적 위에 하나 이상의 가변 포인트를 출력한다.
계속해서, 사용자는 원의 궤적에서 제2 가변 포인트(650) 해당되는 포인트에 대한 가압 동작을 유지하고, 제2 가변 포인트(650)를 기준으로 상측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <603>에 도시된 바와 같이, 원(631)을 삼각형(632)으로 변경하여 출력하고, 변경된 삼각형의 궤적 위에 하나 이상의 가변 포인트를 출력한다.
계속해서, 사용자는 삼각형(632)의 궤적에서 제2 가변 포인트(650)에 해당되는 포인트에 대한 터치 압력을 유지하고, 제2 가변 포인트(650)를 기준으로 하측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <604>에 도시된 바와 같이, 삼각형(632)을 직사각형(633)으로 변경하여 출력하고, 변경된 직사각형(633)의 궤적 위에 하나 이상의 가변 포인트를 출력한다.
여기서, 표시부(112)는 제어부(170)의 제어 하에, 도형의 모양 변경에 따라 출력되는 가변 포인트의 개수가 변경되어 출력될 수 있으나, 선택된 가변 포인트는 도형의 모양 변경에 따라 위치가 달라질 뿐이며, 도형의 모양 변경 기능이 맵핑된 가변 포인트가 삭제되는 것은 아니다.
본 발명의 실시예에서 도형의 모양 변경 실행 명령은 제2 가변 포인트에 기 설정된 시간 동압 가해진 압력이 유지되거나, 가변 포인트를 선택한 후, 상하 방향으로의 터치 제스처가 입력된 경우에도 적용될 수 있다. 예를 들어, 제2 가변 포인트에 대한 선택 입력이 검출되고, 제2 터치에 대한 압력이 "2초 " 유지된 경우, 사각형을 원으로 변경하여 표시하고, 터치 압력이 다시"2초 " 유지되면, 원을 삼각형으로 변경하여 표시할 수 도 있다.
도 7은 본 발명의 실시예에 따른 도형의 스타일 변경 기능을 표시하는 화면 인터페이스이다.
도 7을 참조하면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <701>에 도시된 바와 같이, 핸드라이팅 입력 화면(710)에서 인식된 사각형(730)의 궤적 위에 하나 이상의 가변 포인트(740)를 출력한다.
그러한 상태에서 사용자가 사각형의 상방 왼쪽의 제3 가변 포인트(750)를 터치 펜(720)으로 터치하고, 터치 펜(720)으로 압력을 가한 뒤, 제3 가변 포인트(750)를 기준으로 상하 방향 중 하나의 방향(예, 상측 방향)으로 움직일 수 있다. 이 경우, 사각형의 제3 가변 포인트(750)에는 도형의 스타일을 변경하는 기능이 맵핑될 수 있다.
그러면, 제어부(170)는 스타일 변경 기능 실행 요청에 응답하여 사각형(730)의 스타일을 제1 스타일로 변경하여 출력한다. 즉, 화면 <702>에 도시된 바와 같이, 표시부(112)는 제어부(170)의 제어 하에, 사각형(730) 내부에 특정 색상이 출력되는 제1 스타일(731)로 표시하고, 제1 스타일로 변경된 사각형의 궤적 위에 하나 이상의 가변 포인트를 출력한다. 한편, 제어부(170)는 제1 스타일로 표시된 사각형의 가변 포인트 중 색상 변경 기능이 맵핑된 다른 가변 포인트에 대한 기능 실행 요청이 검출된 경우, 사각형의 색상을 변경하여 출력할 수도 있다.
계속해서, 사용자는 제1 스타일로 변경된 사각형의 궤적에서 제3 가변 포인트에 대한 가압 동작을 유지하고, 제3 가변 포인트를 기준으로 하측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(170)의 제어 하에, 화면<703>에 도시된 바와 같이, 제1 스타일로 표시된 사각형을 제2 스타일로 변경하여 출력한다.
계속해서, 사용자는 사각형의 궤적에서 제3 가변 포인트에 대한 가압 동작을 유지하고, 제3 가변 포인트를 기준으로 상측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <704>에 도시된 바와 같이, 제2 스타일로 변경된 사각형을 제3 스타일로 변경하여 출력한다.
본 발명에서 표시부(112)는 제어부(170)의 제어 하에, 도형의 스타일 변경에 따라 사각형의 궤적 위에 하나 이상의 가변 포인트를 출력한다. 여기서, 도형의 스타일은 도형의 선 변경, 도형 내적 변경을 의미한다. 즉, 본 발명의 실시예에 따른 표시부(112)는 제어부(170)의 제어 하에, 제3 가변 포인트에 대해 도형 스타일 변경 실행 요청 신호가 검출되면, 선의 굵기, 선의 모양, 도형의 내적 변경 중 적어도 하나를 변경할 수 있다.
본 발명의 실시예에서 도형의 스타일 변경 실행 명령은 제3 가변 포인트에 기 설정된 시간 동압 가해진 압력이 유지되거나, 제3 가변 포인트를 선택한 후, 상하 방향으로의 터치 제스처가 입력된 경우에도 적용될 수 있다. 예를 들어, 제3 가변 포인트에 대한 선택 입력이 검출되고, 제2 터치에 가압 동작이 "2초 " 유지된 경우, 제1 스타일의 사각형을 제2 스타일의 사각형으로 변경하여 표시하고, 가압 동작이 다시"2초 " 유지되면, 제2 스타일의 사각형을 제3 스타일의 사각형으로 변경하여 표시할 수 도 있다. 사용자는 원하는 도형의 스타일이 출력되면, 가압 동작을 중단할 수 있다.
도 8은 본 발명의 실시예에 따른 도형의 효과 변경 기능을 표시하는 화면 인터페이스이다.
도 8을 참조하면, 표시부(112)는 제어부(170)의 제어 하에, 화면 <801>에 도시된 바와 같이, 핸드라이팅 입력 화면(810)에서 인식된 사각형(830)의 궤적 위에 하나 이상의 가변 포인트(840)를 출력한다.
그러한 상태에서 사용자가 사각형의 왼쪽 선분 중 중앙에 출력된 제4 가변 포인트(850)를 터치 펜(820)으로 터치하고, 터치 펜(820)으로 압력을 가한 뒤, 제4 가변 포인트(850)를 기준으로 상하 방향 중 하나의 방향(예, 상측 방향)으로 움직일 수 있다. 이 경우, 사각형의 제4 가변 포인트(850)에는 도형의 효과를 변경하는 기능이 매핑될 수 있다.
그러면, 제어부(170)는 효과 변경 기능 실행 요청에 응답하여 인식된 사각형(830)을 제1 효과의 사각형(831)로 변경하여 출력한다. 즉, 화면 <802>에 도시된 바와 같이, 표시부(112)는 제어부(170)의 제어 하에, 사각형(830)에 그림자 효과가 출력되는 제1 효과의 사각형(831)으로 변경하여 표시하고, 변경된 사각형의 궤적 위에 하나 이상의 가변 포인트를 출력한다.
계속해서, 사용자는 제1 효과로 변경된 사각형(831)의 궤적에서 제4 가변 포인트(850)에 대한 가압 동작을 유지하고, 제4 가변 포인트(850)를 기준으로 하측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(170)의 제어 하에, 화면<803>에 도시된 바와 같이, 미러 효과가 출력되는 제2 효과의 사각형(732)으로 변경하여 표시한다.
계속해서, 사용자는 사각형의 궤적에서 제4 가변 포인트(850)에 대한 가압 동작을 유지하고, 제4 가변 포인트(850)를 기준으로 상측 방향으로 움직일 수 있다. 그러면, 표시부(112)는 제어부(17)의 제어 하에, 화면 <804>에 도시된 바와 같이, 입체 효과가 출력되는 제3 효과의 사각형(833)으로 변경하여 출력한다. 여기서, 도형의 효과는 도형의 외적 변경을 의미한다.
본 발명의 실시예에서 도형의 효과 변경 실행 명령은 제4 가변 포인트에 기 설정된 시간 동압 가해진 압력이 유지되거나, 제4 가변 포인트를 선택한 후, 상하 방향으로의 터치 제스처가 입력된 경우에도 적용될 수 있다. 예를 들어, 제4 가변 포인트에 대한 선택 입력이 검출되고, 가압 동작이 "2초 " 유지된 경우, 제1 효과의 사각형을 제2 효과의 사각형으로 변경하여 표시하고, 가압 동작이 다시"2초 " 유지되면, 제2 효과의 사각형을 제3 효과의 사각형으로 변경하여 표시할 수 도 있다. 사용자는 원하는 도형의 효과가 출력되면, 가압 동작을 중단할 수 있다.
도 9는 본 발명의 실시예에 도형의 자르기 기능을 표시하는 화면 인터페이스이다.
도 9를 참조하면, 표시부(112)는 제어부(170)의 제어 하에, 핸드라이팅 입력 화면(910)에서 터치 펜에 의한 수기 입력 데이터를 기반으로 인식된 원(930) 도형을 출력할 수 있다. 이때, 원의 궤적 위에 하나 이상의 가변 포인트가 출력될 수도 있다. 한편, 제어부(170)는 도형을 인식하여 가변 포인트를 출력한 후, 인식된 도형의 외부 영역에서 터치가 검출되면, 가변 포인트의 표시를 해제할 수 있다.
이때, 사용자가 원의 모양을 임의 대로 출력하기 위해, 화면 <901>에 도시된 바와 같이, 터치 펜(920)으로 원의 외부 영역 중 한 지점을 터치하고, 원의 일부를 통과하도록 터치 펜을 움직일 수 있다. 그러면, 제어부(170)는 원의 일부를 통과하는 터치 움직임에 응답하여 터치 움직임의 궤적(940)을 표시부에 출력한다.
제어부(170)는 터치 동작이 완료됐다고 검출되면, 화면 <902>에 도시된 바와 같이, 상기 인식된 도형 일부를 통과하는 궤적을 기준으로 제1 영역(941) 및 제2 영역(942)으로 원을 분할하여 표시하도록 표시부(112)를 제어한다.
계속해서 사용자가 도형의 분할된 영역 중 제1 영역(941)을 터치 펜(920)으로 터치하고, 돼지 꼬리 모양(941)으로 터치 펜(920)을 움직일 수 있다. 그러면, 제어부(170)는 제1 영역을 삭제하는 기능을 실행하여, 화면 <903>에 도시된 바와 같이, 원의 제2 영역(932)만 출력되도록 표시부(112)를 제어한다.
이상에서와 같이, 본 발명에 따른 도형의 조작 방법 및 장치에 대하여 본 명세서 및 도면을 통해 바람직한 실시예를 들어 설명하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고, 발명의 이해를 돕기 위해 일반적인 의미에서 사용된 것일 뿐, 본 발명이 전술한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 기술적 사상에 바탕을 둔 다양한 실시 예가 가능함은 본 발명이 속하는 기술 분야에서 통산의 지식을 가진 자에게 자명한 것이다.
100: 휴대 단말기
110: 터치스크린 120: 터치 펜 패널
130: 키 입력부 140: 무선 통신부
150: 오디오 처리부 160: 저장부
170: 제어부

Claims (15)

  1. 터치스크린 상에 수기 입력(handwriting)된 도형을 인식하는 단계;
    상기 인식된 도형의 궤적 위에 도형의 조작 기능이 맵핑된 하나 이상의 가변포인트를 표시하는 단계;
    상기 가변 포인트 중 하나를 선택하는 터치 입력을 검출하는 단계;
    상기 검출된 터치 입력에 대한 압력 정보 및 터치 제스처 정보 중 적어도 하나를 기반으로 상기 인식된 도형의 조작 기능 실행 요청이 검출되는지 여부를 결정하는 단계; 및
    상기 조작 기능 실행 요청이 검출되면, 상기 선택된 가변포인트에 대응된 도형의 조작 기능을 실행하는 단계를 포함하는 도형의 조작 방법 및 장치.
  2. 제1항에 있어서,
    상기 도형의 조작 기능을 실행하는 단계는,
    상기 선택된 가변 포인트에 맵핑된 도형의 조작 기능 명령을 실행하는 단계; 및
    상기 실행에 따라 상기 인식된 도형의 추가, 삭제, 모양 변경, 스타일 변경, 효과 변경, 색상 변경, 크기 변경, 길이 변경 기능 중 적어도 하나를 실행하는 것을 특징으로 하는 도형의 조작 방법.
  3. 제1항에 있어서,
    상기 조작 기능 실행 요청이 검출되는지 여부를 결정하는 단계는,
    상기 터치 입력에 대한 터치 제스처를 검출하는 단계; 및
    상기 터치 제스처가 기 설정된 기능 실행 제스처에 해당하는 경우, 상기 조작 기능 실행 요청을 검출하는 단계로 이루어지는 것을 특징으로 하는 도형의 조작 방법.
  4. 제1항에 있어서,
    상기 조작 기능 실행 요청이 검출되는지 여부를 결정하는 단계는,
    상기 터치 입력에 대한 터치 압력 정보를 검출하는 단계;
    상기 터치 압력 검출 후, 일정 시간 이내에 터치 제스처 입력 동작이 발생하면, 상기 터치 제스처를 검출하는 단계; 및
    상기 터치 제스처가 기 설정된 기능 실행 제스처에 해당하는 경우, 상기 조작 기능 실행 요청을 검출하는 단계로 이루어지는 것을 특징으로 하는 도형의 조작 방법.
  5. 제1항에 있어서,
    상기 도형의 조작 기능 실행하는 단계는,
    상기 조작 기능이 실행된 도형의 모양에 따라 상기 가변 포인트의 개수를 변경하여 출력하는 것을 특징으로 하는 도형의 조작 방법.
  6. 제1항에 있어서,
    상기 도형의 조작 기능을 실행하는 단계는,
    상기 터치 제스처가 제1 터치 제스처인 경우, 상기 제1 터치 제스처에 응답하여 상기 조작 기능의 제1 옵션으로 변경된 도형을 출력하는 단계;
    상기 터치의 제2 터치 제스처가 입력되면, 제2 터치 제스처에 응답하여 상기 조작 기능의 제2 옵션으로 변경된 도형을 출력하는 단계; 및
    상기 터치의 제3 터치 제스처가 입력되면, 제3 터치 제스처에 응답하여 상기 조작 기능의 제3 옵션으로 변경된 도형을 출력하는 단계로 이루지는 것을 특징으로 하는 도형의 조작 방법.
  7. 제1항에 있어서,
    상기 인식된 도형 외부의 영역에서 터치 발생 시 상기 가변 포인트의 표시를 해제하는 단계를 더 포함하는 도형의 조작 방법.
  8. 제1항에 있어서,
    상기 인식된 도형 외부의 영역에서 상기 인식된 도형의 일부를 통과하는 터치 제스처를 검출하는 단계;
    상기 검출된 터치 제스처에 응답하여 상기 인식된 도형을 터치 제스처에 따라 분할하여 표시하는 단계; 및
    상기 도형의 분할된 영역 중 하나의 영역을 선택하는 터치에 대해 삭제 기능 실행 요청 제스처가 검출되면, 상기 선택된 영역을 삭제하는 기능을 실행하는 것을 특징으로 하는 도형의 조작 방법.
  9. 에디터 모드로 운용 시 수기 입력(handwriting)을 감지하고, 수기 입력에 대응하는 입력 효과를 표시하는 터치스크린; 및
    상기 터치스크린 상에 수기 입력된 도형을 인식하고, 인식된 도형의 궤적 위에 도형의 조작 기능이 맵핑된 하나 이상의 가변포인트를 표시하고, 상기 가변 포인트 중 하나를 선택하는 터치 입력이 검출되면, 터치 입력에 대한 압력 정보 및 터치 제스처 정보 중 적어도 하나를 기반으로 상기 인식된 도형의 조작 기능 실행 요청을 검출하고, 상기 기능 실행 요청에 응답하여 선택된 가변 포인트에 대응하는 도형의 조작 기능을 실행하도록 제어하는 제어부를 포함하는 도형의 조작 방법.
  10. 제9항에 있어서,
    상기 터치스크린은,
    상기 수기 입력을 감지하는 터치 펜 패널 및 터치 패널; 및
    상기 수기 입력에 따른 궤적을 표시하고, 상기 도형의 조작 기능이 실행된 도형을 표시하는 표시부를 더 포함하는 것을 특징으로 하는 도형의 조작 방법.
  11. 제9항에 있어서,
    상기 표시부는,
    상기 에디터 모드 시 제어부의 제어 하에, 상기 기능 실행 명령에 따라 인식된 도형의 추가, 삭제, 모양 변경, 스타일 변경, 효과 변경, 색상 변경, 크기 변경, 길이 변경, 도형의 이동 중 적어도 하나의 기능 실행 효과를 표시하는 것을 특징으로 하는 휴대 단말기.
  12. 제9항에 있어서,
    상기 제어부는,
    상기 터치스크린에 출력된 도형의 모양에 따라 가변 포인트의 개수를 변경하여 출력하도록 제어하는 것을 특징으로 하는 도형의 조작 방법.
  13. 제9항에 있어서,
    상기 제어부는
    상기 터치 제스처가 제1 터치 제스처인 경우, 제1 터치 제스처에 응답하여 상기 조작 기능의 제1 옵션으로 변경된 도형을 출력하고, 상기 터치에 대한 제2 터치 제스처 검출되면, 제2 터치 제스처에 응답하여 제2 옵션으로 변경된 도형을 출력하고, 상기 터치에 대한 제3 터치 제스처가 검출되면, 제3 터치 제스처에 응답하여 제3 옵션으로 변경된 도형을 출력하는 것을 특징으로 하는 도형의 조작 방법.
  14. 제9항에 있어서,
    상기 제어부는,
    상기 인식된 도형의 외부 영역에서 터치 발생 시 상기 가변 포인트의 표시를 해제하도록 제어하는 것을 특징으로 하는 도형의 조작 방법.
  15. 제9항에 있어서,
    상기 제어부는,
    상기 인식된 도형의 외부 영역에서부터 상기 인식된 도형의 일부를 통과하는 터치 제스처 검출되면, 상기 검출된 터치 제스처에 응답하여 상기 인식된 도형을 분할하여 표시하고, 그리고 상기 분할된 영역 중 하나의 영역을 선택하는 터치에 대해 삭제기능 실행 요청 제스처가 검출되면, 상기 선택된 영역을 삭제하도록 제어하는 것을 특징으로 하는 도형의 조작 방법.
KR1020120155838A 2012-12-28 2012-12-28 터치 기반의 도형의 조작 방법 및 장치 KR20140085942A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120155838A KR20140085942A (ko) 2012-12-28 2012-12-28 터치 기반의 도형의 조작 방법 및 장치
US14/142,645 US9383920B2 (en) 2012-12-28 2013-12-27 Method for controlling two or three dimensional figure based on touch and apparatus thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120155838A KR20140085942A (ko) 2012-12-28 2012-12-28 터치 기반의 도형의 조작 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20140085942A true KR20140085942A (ko) 2014-07-08

Family

ID=51018853

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120155838A KR20140085942A (ko) 2012-12-28 2012-12-28 터치 기반의 도형의 조작 방법 및 장치

Country Status (2)

Country Link
US (1) US9383920B2 (ko)
KR (1) KR20140085942A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016064137A1 (en) * 2014-10-20 2016-04-28 Samsung Electronics Co., Ltd. Apparatus and method of drawing and solving figure content
CN112083865A (zh) * 2020-09-24 2020-12-15 Oppo广东移动通信有限公司 图像生成方法和装置、终端和可读存储介质
WO2022164200A1 (ko) * 2021-01-28 2022-08-04 삼성전자 주식회사 전자 장치 및 전자 장치에서 스트로크 분석 기반 도형 인식 방법
WO2024034812A1 (ko) * 2022-08-08 2024-02-15 삼성전자주식회사 획을 입력하기 위한 제스쳐를 이용하여 획에 대응하는 라인을 식별하기 위한 전자 장치 및 그 방법

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101577277B1 (ko) 2015-02-04 2015-12-28 주식회사 하이딥 터치종류 판별방법 및 이를 수행하는 터치 입력 장치
US20170091967A1 (en) * 2015-09-25 2017-03-30 Sap Se Animating transitions to circular data visualizations
CN113986035A (zh) * 2021-10-08 2022-01-28 湖南美创数字科技有限公司 一种新型互动控制检测系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5396590A (en) * 1992-09-17 1995-03-07 Apple Computer, Inc. Non-modal method and apparatus for manipulating graphical objects
US5513309A (en) * 1993-01-05 1996-04-30 Apple Computer, Inc. Graphic editor user interface for a pointer-based computer system
US5861886A (en) * 1996-06-26 1999-01-19 Xerox Corporation Method and apparatus for grouping graphic objects on a computer based system having a graphical user interface
US6401237B1 (en) * 1997-01-24 2002-06-04 Sony Corporation Method and apparatus for editing data used in creating a three-dimensional virtual reality environment
US7503015B2 (en) * 2004-09-21 2009-03-10 Microsoft Corporation System and method for editing ink objects
WO2006137078A1 (en) * 2005-06-20 2006-12-28 Hewlett-Packard Development Company, L.P. Method, article, apparatus and computer system for inputting a graphical object
US8169421B2 (en) * 2006-06-19 2012-05-01 Cypress Semiconductor Corporation Apparatus and method for detecting a touch-sensor pad gesture
US8416205B2 (en) * 2009-09-25 2013-04-09 Apple Inc. Device, method, and graphical user interface for manipulation of user interface objects with activation regions
US9619104B2 (en) * 2010-10-01 2017-04-11 Smart Technologies Ulc Interactive input system having a 3D input space

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016064137A1 (en) * 2014-10-20 2016-04-28 Samsung Electronics Co., Ltd. Apparatus and method of drawing and solving figure content
CN112083865A (zh) * 2020-09-24 2020-12-15 Oppo广东移动通信有限公司 图像生成方法和装置、终端和可读存储介质
WO2022164200A1 (ko) * 2021-01-28 2022-08-04 삼성전자 주식회사 전자 장치 및 전자 장치에서 스트로크 분석 기반 도형 인식 방법
WO2024034812A1 (ko) * 2022-08-08 2024-02-15 삼성전자주식회사 획을 입력하기 위한 제스쳐를 이용하여 획에 대응하는 라인을 식별하기 위한 전자 장치 및 그 방법

Also Published As

Publication number Publication date
US20140189609A1 (en) 2014-07-03
US9383920B2 (en) 2016-07-05

Similar Documents

Publication Publication Date Title
JP6965319B2 (ja) 文字入力インターフェース提供方法及び装置
US10331313B2 (en) Method and apparatus for text selection
US9354805B2 (en) Method and apparatus for text selection
AU2014208041B2 (en) Portable terminal and method for providing haptic effect to input unit
US9035883B2 (en) Systems and methods for modifying virtual keyboards on a user interface
US10025487B2 (en) Method and apparatus for text selection
US20140354553A1 (en) Automatically switching touch input modes
KR102264444B1 (ko) 전자 장치에서 기능 실행 방법 및 장치
KR20140085942A (ko) 터치 기반의 도형의 조작 방법 및 장치
CA2821814C (en) Method and apparatus for text selection
EP2660697B1 (en) Method and apparatus for text selection
EP2660727B1 (en) Method and apparatus for text selection
EP2660696A1 (en) Method and apparatus for text selection
KR20140115731A (ko) 휴대 단말기의 오브젝트 변환 방법 및 그 장치
KR20140033839A (ko) 터치스크린을 구비한 단말에서 한 손을 이용한 사용자 인터페이스 방법 및 장치
KR20130133980A (ko) 터치스크린을 가진 단말에서 오브젝트 이동 방법 및 장치
US20170255284A1 (en) Method and apparatus for operating mobile terminal
EP2770443A2 (en) Method and apparatus for making contents through writing input on touch screen
KR102087896B1 (ko) 터치스크린을 가지는 전자 장치에서 텍스트 입력하는 방법 및 장치
KR20140019530A (ko) 멀티 터치 핑거 제스처를 이용하는 사용자 인터렉션 제공 방법 및 장치
KR20140106801A (ko) 시각 장애인들을 위한 휴대 단말기의 음성 서비스 지원 방법 및 장치
KR20130102670A (ko) 터치스크린 단말기의 세밀한 조작을 위한 사용자별 손가락 및 터치 펜 접촉 위치 포인트 설정을 위한 방법 및 시스템
CA2821772C (en) Method and apparatus for text selection
CN108008875B (zh) 一种控制光标移动的方法及终端设备
CA2821784C (en) Method and apparatus for text selection

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid