KR20150017977A - 지능적 정보 제공 방법 및 장치 - Google Patents

지능적 정보 제공 방법 및 장치 Download PDF

Info

Publication number
KR20150017977A
KR20150017977A KR1020130094304A KR20130094304A KR20150017977A KR 20150017977 A KR20150017977 A KR 20150017977A KR 1020130094304 A KR1020130094304 A KR 1020130094304A KR 20130094304 A KR20130094304 A KR 20130094304A KR 20150017977 A KR20150017977 A KR 20150017977A
Authority
KR
South Korea
Prior art keywords
touch input
input
pen touch
information
pen
Prior art date
Application number
KR1020130094304A
Other languages
English (en)
Inventor
정호영
장원석
김무림
김지훈
안희범
이기복
이동창
이재웅
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130094304A priority Critical patent/KR20150017977A/ko
Priority to US14/455,330 priority patent/US20150042587A1/en
Priority to EP14180376.7A priority patent/EP2835723A1/en
Publication of KR20150017977A publication Critical patent/KR20150017977A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language

Abstract

본 발명에 따른 지능적 정보 제공 방법은, 펜 터치 입력을 검출하는 과정과, 상기 펜 터치 입력이 발생되는 환경을 확인하는 과정과, 상기 펜 터치 입력에 대응하는 정보를 수집하는 과정과, 상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보에 대한 상황 모델을 설정하는 과정과, 상기 상황 모델에 대응되는 추론 정보를 제공하는 과정을 포함한다.

Description

지능적 정보 제공 방법 및 장치{METHOD FOR PROVIDING INTELLIGENCE INFORMATION AND APPARATUS FOR THE SAME}
본 발명은 휴대용 단말을 사용한 지능적 정보 제공 방법에 관한 것으로써, 특히 지능적 정보를 제공하기 위한 데이터를 수집하는 방법에 관한 것이다.
최근 단말 장치(특히 모바일(mobile) 단말 장치)에서 제공하는 다양한 서비스 및 부가 기능들이 점차 확대되고 있다. 이러한 단말 장치의 효용 가치를 높이고 사용자들의 다양한 욕구를 만족시키기 위해서 단말 장치에서 실행 가능한 다양한 어플리케이션들이 개발되고 있다.
단말 장치에는 해당 장치의 제조사에 의해 제작되어 해당 장치에 설치되는 기본 어플리케이션들과, 인터넷을 통하여 어플리케이션 판매 웹사이트로부터 다운로드 되는 추가 어플리케이션들 등이 저장되고 실행될 수 있다. 상기 추가 어플리케이션들은 일반 개발자들에 의해 개발되고, 상기 판매 웹사이트에 등록될 수 있다. 따라서, 누구든지 자신이 개발한 어플리케이션들을 상기 어플리케이션 판매 웹사이트를 통하여 자유롭게 상기 단말 장치의 사용자에게 판매할 수 있다. 이에 따라 현재 단말 장치에는 그 제품에 따라 수만에서 수십 만개의 어플리케이션들이 무료 또는 유료로 제공되고 있다.
한편, 모바일 단말 장치는 사용자가 개인적으로 항상 휴대하고 다니는 경향이 있다. 이를 고려하여, 모바일 단말 장치의 사용 패턴을 확인하여 사용자가 필요로 하는 다양한 정보를 지능적으로 제공할 수 있으며, 다양한 방법으로 사용자에게 지능적 정보를 제공하기 위한 시도가 이루어지고 있다.
전술한 종래기술에 다른 지능적 정보 제공 방법은 사용자가 입력한 검색 키워드, 쇼핑 기록, 웹 페이지 사용 기록, 위치정보 검색 기록 등과 같이 사용자의 구체적인 입력 동작을 기반으로 정보를 수집하였다. 이로 인해, 사용자의 평소 생각이나, 관심 사항을 분석하기에는 한계가 있다.
본 발명은 전술한 점을 고려하여 안출된 것으로써, 사용자의 평소 생각이나, 관심사항을 수집하여 보다 감성적인 정보를 지능적으로 제공할 수 있는 방법 및 장치를 제공하는데 그 목적이 있다.
본 발명의 일 측면에 따른 지능적 정보 제공 방법은, 펜 터치 입력을 검출하는 과정과, 상기 펜 터치 입력이 발생되는 환경을 확인하는 과정과, 상기 펜 터치 입력에 대응하는 정보를 수집하는 과정과, 상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보에 대한 상황 모델을 설정하는 과정과, 상기 상황 모델에 대응되는 추론 정보를 제공하는 과정을 포함한다.
본 발명의 다른 측면에 따른 단말 장치는 정보를 디스플레이하고, 사용자에 의해 입력되는 터치 입력 이벤트를 검출하는 터치스크린, 적어도 하나의 제어부, 및 적어도 하나의 입력 이미지를 저장하고, 적어도 하나의 프로그램을 저장하는 메모리부를 포함하며, 상기 적어도 하나의 프로그램은, 상기 제어부에 의해 실행되도록 구성되며, 펜 터치 입력을 검출하고, 상기 펜 터치 입력이 발생되는 환경을 확인하고, 상기 펜 터치 입력에 대응하는 정보를 수집하고, 상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보에 대한 상황 모델을 설정하고, 상기 상황 모델에 대응되는 추론 정보를 제공하는 명령어를 포함한다.
도 1은 본 발명의 일 실시예에 따른 지능적 정보 제공 방법이 적용되는 단말 장치의 구성을 개략적으로 나타내는 블록도,
도 2a 및 2b는 본 발명의 일 실시예에 따른 지능적 정보 제공 방법이 적용되는 단말 장치의 전면 사시도,
도 3은 본 발명의 일 실시예에 따른 지능적 정보 제공 방법의 동작 순서를 도시하는 흐름도,
도 4a 내지 도 4c는 본 발명의 일 실시예에 따른 지능적 정보 제공 방법에 의해 수집되는 정보의 일 예시도,
도 5는 도 3의 304 단계에서 구성되는 상황 모델 일 예시도,
도 6a 내지 6d는 본 발명의 일 실시예에 따른 지능적 정보 제공 방법에 의해 지능적으로 제공되는 추천 정보의 일 예시도.
이하, 첨부된 도면들에 기재된 내용들을 참조하여 본 발명에 따른 예시적 실시예를 상세하게 설명한다. 다만, 본 발명이 예시적 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조부호는 실질적으로 동일한 기능을 수행하는 부재를 나타낸다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
도 1은 본 발명의 일 실시예에 따른 지능적 정보 제공 방법이 적용되는 단말 장치의 구성을 개략적으로 나타내는 블록도이다.
도 1을 참조하면, 단말 장치(100)는 제어부(110), 통신모듈(120), 입/출력 모듈(130), 저장부(150), 전원공급부(160), 터치스크린(171), 및 터치스크린 컨트롤러(172)를 포함한다.
우선, 제어부(110)는 CPU(111), 단말 장치(100)의 제어를 위한 제어프로그램이 저장된 롬(ROM, 112) 및 단말 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 단말 장치(100)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(RAM, 113)을 포함할 수 있다. CPU(111), 롬(112), 및 램(113)은 내부버스(bus)를 통해 상호 연결될 수 있다. 또한, 제어부(110)는 통신모듈(120), 입/출력 모듈(130), 저장부(150), 전원공급부(160), 터치스크린(171), 및 터치스크린 컨트롤러(172)를 제어할 수 있다. 나아가, 제어부(110)는 싱글코어로 이루어지거나, 듀얼 코어, 트리플 코어, 또는 쿼드 코어 등과 같이 복수의 코어로 이루어질 수도 있다. 상기 코어의 수는 단말의 특성에 따라 본 발명의 기술분야에서 통상의 지식을 가진자에 의해 다양하게 구성될 수 있음은 물론이다.
통신모듈(120)은 셀룰러 모듈, 무선랜 모듈 및 근거리통신 모듈 중 적어도 하나를 포함할 수 있다.
셀룰러 모듈은 제어부(110)의 제어에 따라 적어도 하나-하나 또는 복수-의 안테나(도시되지 아니함)를 이용하여 이동 통신을 통해 단말 장치(100)가 외부 장치와 연결되도록 한다. 셀룰러 모듈은 단말 장치(100)에 입력되는 전화번호를 가지는 휴대폰(도시되지 아니함), 스마트 폰(도시되지 아니함), 태블릿PC 또는 다른 장치(도시되지 아니함)와 음성 통화, 화상 통화, 문자메시지(SMS) 또는 멀티미디어 메시지(MMS)를 위한 무선 신호를 송/수신한다.
무선랜 모듈은 제어부(110)의 제어에 따라 무선 액세스 포인트(AP, access point)(도시되지 아니함)가 설치된 장소에서 인터넷에 연결될 수 있다. 무선랜 모듈은 미국전기전자학회(IEEE)의 무선랜 규격(IEEE802.11x)을 지원한다. 무선랜 모듈은 무선으로 연결되는 무선 액세스 포인트(AP, access point)에서 제공하는 위치 정보를 사용하여 무선랜 모듈을 구비하고 있는 단말의 위치정보를 확인하는 WPS(Wi-Fi Positioning System)를 구동할 수 있다.
근거리통신 모듈은 제어부(110)의 제어에 따라 단말 장치(100)와 무선으로 근거리 통신을 처리하는 모듈로써, 블루투스(bluetooth), 적외선 통신(IrDA, infrared data association), 와이파이 다이렉트(WiFi-Direct) 통신, NFC(Near Field Communication) 등의 근거리 통신방식에 기초하여 통신을 처리할 수 있다.
입/출력 모듈(130)은 버튼(131), 스피커(132), 진동모터(133), 키패드(134), 및 스타일러스 펜(135) 중, 적어도 하나를 포함할 수 있다.
버튼(131)은 상기 단말 장치(100)의 하우징의 전면, 측면 또는 후면에 형성될 수 있으며, 전원/잠금 버튼(도시되지 아니함), 볼륨버튼(도시되지 아니함), 메뉴 버튼, 홈 버튼, 돌아가기 버튼(back button) 및 검색 버튼 중 적어도 하나를 포함할 수 있다.
스피커(132)는 제어부(110)의 제어에 따라 셀룰러 모듈, 무선랜 모듈 및 근거리통신 모듈의 다양한 신호(예, 무선신호, 방송신호 등)에 대응되는 사운드를 단말 장치(100) 외부로 출력할 수 있다. 스피커(132)는 상기 단말 장치(100)의 하우징의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다.
진동모터(133)는 제어부(110)의 제어에 따라 전기적 신호를 기계적 진동으로 변환할 수 있다. 상기 단말 장치(100)의 하우징 내에 하나 또는 복수로 형성될 수 있다.
이와 같은, 스피커(132) 및 진동모터(133)는 단말 장치(100)의 볼륨운영모드의 설정 상태에 따라, 동작할 수 있다. 예컨대, 단말 장치(100)의 볼륨운영모드는 소리모드, 진동모드, 소리&진동모드, 무음모드로 운영될 수 있으며, 이들 모드 중 하나의 모드로 설정될 수 있다. 제어부(110)는 상기 볼륨운영모드가 설정된 모드에 기초하여, 단말 장치(100)가 수행하는 기능에 따라 상기 스피커(132) 또는 진동모터(133)의 동작을 지시하는 신호를 출력할 수 있다.
키패드(134)는 단말 장치(100)의 제어를 위해 사용자로부터 키 입력을 수신할 수 있다. 키패드(134)는 단말 장치(100)에 형성되는 물리적인 키패드(도시되지 아니함) 또는 터치스크린(171)에 표시되는 가상의 키패드(도시되지 아니함)를 포함한다. 장치(100)에 형성되는 물리적인 키패드(도시되지 아니함)는 단말 장치(100)의 성능 또는 구조에 따라 제외될 수 있다.
스타일러스 펜(135)은 터치스크린(171)이 터치 입력을 감지할 수 있는 신호를 제공하도록 구성되어, 상기 스타일러스 펜(135)이 터치스크린(171)에 근접 또는 접촉함에 따라, 터치스크린(171)이 상기 스타일러스 펜(135)에 의해 제공되는 신호를 감지할 수 있다.
저장부(150)는 제어부(110)의 제어에 따라 통신모듈(120), 입/출력 모듈(130), 터치스크린(171)의 동작에 대응되게 입/출력되는 신호 또는 데이터를 저장할 수 있다. 저장부(150)는 단말 장치(100) 또는 제어부(110)의 제어를 위한 제어 프로그램 및 어플리케이션들을 저장할 수 있다.
“저장부”라는 용어는 저장부(150), 제어부(110)내 롬(112), 램(113) 또는 단말 장치(100)에 장착되는 메모리 카드(도시되지 아니함)(예, SD 카드, 메모리 스틱)를 포함한다. 저장부는 비 휘발성 메모리, 휘발성메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
전원공급부(160)는 제어부(110)의 제어에 따라 단말 장치(100)의 하우징에 배치되는 하나 또는 복수의 배터리(도시되지 아니함)에 전원을 공급할 수 있다. 하나 또는 복수의 배터리(도시되지 아니함)는 단말 장치(100)에 전원을 공급한다. 또한, 전원공급부(160)는 장치에 구비된 커넥터와 연결된 유선 케이블을 통해 외부의 전원소스(도시되지 아니함)에서부터 입력되는 전원을 단말 장치(100)로 공급할 수 있다. 또한, 전원공급부(160)는 무선 충전 기술을 통해 외부의 전원소스로부터 무선으로 입력되는 전원을 단말 장치(100)로 공급할 수도 있다.
터치스크린(171)은 단말의 운영체제(OS; Operation System)에 기초하여, 사용자에게 다양한 서비스(예, 통화, 데이터 전송 등)에 대응되는 유저 인터페이스를 디스플레이 할 수 있다. 터치스크린(171)은 유저 인터페이스에 입력되는 적어도 하나의 터치에 대응되는 아날로그 신호를 터치스크린 컨트롤러(172)로 전송할 수 있다. 터치스크린(171)은 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 터치 가능한 입력 수단(예, 스타일러스 펜)을 통해 적어도 하나의 터치를 입력받을 수 있다.
터치스크린(171)은 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식으로 구현될 수 있다.
한편, 터치스크린 컨트롤러(172)는 제어부(110)에서 제공되는 디스플레이 데이터가 터치스크린(171)에 표시될 수 있도록, 터치스크린(171)의 출력값을 제어한다. 그리고, 터치스크린 컨트롤러(172)는 터치스크린(171)에서부터 수신된 아날로그 신호를 디지털 신호(예, X와 Y좌표)로 변환하여 제어부(110)로 전송한다. 제어부(110)는 터치스크린 컨트롤러(172)로부터 수신된 디지털 신호를 이용하여 터치스크린(171)을 제어할 수 있다. 예를 들어, 제어부(110)는 터치 이벤트 또는 호버링 이벤트에 응답하여 터치스크린(171)에 표시된 단축 아이콘(도시되지 아니함)이 선택되게 하거나 또는 단축 아이콘(도시되지 아니함)을 실행할 수 있다. 또한, 터치스크린 컨트롤러(172)는 제어부(110)에 포함될 수도 있다.
도 2a 및 2b는 본 발명의 일 실시예에 따른 지능적 정보 제공 방법이 적용되는 단말 장치의 전면 사시도이다.
도 2a 및 2b를 참조하면, 단말 장치(100)의 전면(100a) 중앙에는 터치스크린(171)이 배치된다. 상기 터치스크린(171)은 단말 장치(100)의 전면(100a)의 대부분을 차지하도록 크게 형성된다. 도 2b는 상기 터치스크린(171)에 락 스크린(170a)이 표시된 예를 나타낸다. 락 스크린(170a)은 단말 장치(100)의 전원을 켰을 때 상기 터치스크린(171) 상에 표시되는 첫 화면으로써, 사용자에 의해 설정된 보안정보(예컨대, 비밀번호, 보안패턴 등)를 입력하여, 단말 장치(100)에 접근할 수 있는 환경을 제공하는 화면이다. 따라서, 제어부(110)는 사용자에 의해 입력되는 보안정보(예컨대, 비밀번호, 보안패턴 등)의 유효성을 확인한 후, 락 스크린의 해제를 진행하여 홈 스크린(도 2b, 170b)으로 전환하는 동작을 진행한다.
또한, 락 스크린(170a)은 비밀번호를 입력받거나, 보안 패턴을 입력받을 수 있도록 구성될 수도 있으며, 사용자가 별도의 보안정보를 설정하지 않는 경우에는, 상기와 같은 비밀번호 또는 보안 패턴을 입력받지 않고 사용자의 터치입력 또는 드레그 입력에 의해 홈 스크린 화면으로 전환하도록 구성될 수도 있다.
그리고, 홈 스크린(170b)은 여러 페이지의 서로 다른 홈 스크린들을 포함할 수 있는데, 상기 여러 페이지의 홈 스크린들 중 첫 번째 홈 스크린은 메인 홈 스크린일 수 있다. 홈 스크린(170b)에는 자주 사용되는 어플리케이션들을 실행하기 위한 단축 아이콘들(171a, 171b, 171c), 메인 메뉴 전환키(171d), 시간, 날씨 등이 표시될 수 있다. 상기 메인 메뉴 전환키(171d)는 상기 터치스크린(171) 상에 메뉴 화면을 표시한다. 또한, 상기 터치스크린(171)의 상단에는 배터리 충전상태, 수신신호의 세기, 현재 시각, 볼륨운영모드와 같은 단말 장치(100)의 상태를 표시하는 상태바(Status Bar, 172)가 형성될 수도 있다.
상기 터치스크린(171)의 하부에는 홈 버튼(131a), 메뉴 버튼(131b), 및 뒤로 가기 버튼(131c)이 형성될 수 있다.
기본적으로, 홈 버튼(131a)은 터치스크린(171)에 메인 홈 스크린(main Home screen)을 표시한다. 예를 들어, 터치스크린(171)에 상기 메인 홈 스크린과 다른 홈 스크린(any Home screen) 또는 메뉴화면이 표시된 상태에서, 상기 홈 키(131a)가 터치되면, 터치스크린(171)에 메인 홈 스크린이 디스플레이 될 수 있다. 또한, 터치스크린(171) 상에서 어플리케이션들이 실행되는 도중 홈 버튼(171a)이 터치되면, 상기 터치스크린(171)상에는 도 2b에 도시된 메인 홈 스크린이 디스플레이 될 수 있다. 또한 홈 버튼(131a)은 상기 터치스크린(171) 상에 최근에(recently) 사용된 어플리케이션들을 디스플레이 하도록 하거나, 태스크 매니저(Task Manager)를 디스플레이 하기 위하여 사용될 수도 있다.
메뉴 버튼(131b)은 터치스크린(171) 상에서 사용될 수 있는 연결 메뉴를 제공한다. 상기 연결 메뉴에는 위젯 추가 메뉴, 배경화면 변경 메뉴, 검색 메뉴, 편집 메뉴, 환경 설정 메뉴 등이 포함될 수 있다.
뒤로 가기 버튼(131c)은 현재 실행되고 있는 화면의 바로 이전에 실행되었던 화면을 디스플레이 하거나, 가장 최근에 사용된 어플리케이션을 종료시킬 수 있다.
장치(100)의 전면(100a) 상부 중앙부분에는 스피커(132)가 배치될 수 있다. 그리고, 단말 장치(100)의 측면(100b)에는 예를 들어 전원/리셋 버튼(131d), 볼륨버튼(131e) 등이 배치될 수 있다.
이하, 본 발명의 예시적 실시예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야에서 통상의 지식을 가진 자에게 공지되어 사용 가능한 것일 수도 있다.
또한, 본 발명의 예시적 실시예에 따른 방법들은 전술한 단말 장치(100)의 저장부(150)에 프로그램 명령 형태로 구현되어 저장될 수 있으며, 상기 프로그램 명령은, 본 발명의 예시적 실시예에 따른 방법들의 실행을 위해 제어부(110) 내에 포함된 램(RAM, 113)에 일시적으로 저장될 수 있다. 이에 따라, 제어부(110)는, 본 발명의 예시적 실시예에 따른 방법들에 따른 상기 프로그램 명령에 대응하여, 단말 장치(100)에 포함된 하드웨어 구성요소들의 제어를 수행하고, 본 발명의 예시적 실시예에 따른 방법들을 실행하면서 발생되는 데이터를 일시 또는 지속적으로 저장부(150)에 저장하고, 본 발명의 예시적 실시예에 따른 방법들의 실행에 필요한 UI를 터치스크린 컨트롤러(172)에 제공할 수 있다.
본 발명의 일 실시예에 따른 지능적 정보 제공 방법은 전술한 단말 장치(100)에 마련 되어 그 동작이 실행되는 것을 예시한다. 그러나, 본 발명이 이를 한정하는 것은 아니며, 본 발명의 일 실시예에 따른 지능적 정보 제공 방법은 펜 터치 입력의 검출을 지원하는 단말, 예컨대, 개인용 컴퓨터(PC; Personal Computer), 랩탑 컴퓨터, 태블릿 PC 등에 다양하게 마련될 수 있음은 물론이다.
도 3은 본 발명의 일 실시예에 따른 지능적 정보 제공 방법의 동작 순서를 도시하는 흐름도이다. 도 3을 참조하면, 본 발명의 실시예에 따른 지능적 정보 제공 방법은 펜 터치 입력의 검출에 의해 그 동작이 개시될 수 있다. 즉, 제어부(110)는 터치스크린(171) 상에 펜 터치 입력이 발생 됨에 따라, 지능적 정보 제공 방법의 동작을 개시한다(301).
예컨대, 제어부(110)는 터치스크린(171)으로부터 입력되는 전자기 유도 값 또는 정전용량 값의 변화를 기준으로 상기 펜 입력을 검출할 수 있으며, 이를 기반으로 스타일러스 펜이 호버링 상태인지, 접촉 상태인지, 버튼 눌림 상태인지, 눌림 해제 상태인지 등을 고려하여 검출될 수 있다.
사용자는, 캘린터 어플리케이션이나, 일기장 어플리케이션, 메모장 등을 사용하여 사용자가 원하는 상품에 대한 정보, 기억하고 싶은 정보, 관심이 있는 정보 등을 저장할 수 있다. 또한, 사용자는 웹 페이지 어플리케이션이나, 문서 어플리케이션을 통해 표시되는 데이터에서, 사용자가 관심이 있는 정보나 중요하다고 판단되는 정보가 존재하는 영역에, 밑줄 또는 원과 같은 표시를 할 수 있다. 또한, 사용자는 단말 장치에서 표시되는 다양한 데이터를 이미지 형식으로 잘라내어 스크랩할 수 있다. 이와 같은 다양한 사용자의 사용환경을 고려하여, 사용자에 의해 입력되는 정보가 같는 의미 또는 컨텍스트를 분석할 필요가 있다. 따라서, 제어부(110)는 302단계에서, 상기 펜 터치 입력이 발생되는 환경을 검출한다. 상기 펜 터치 입력이 발생되는 환경은 사용자의 평소 생각이나, 관심 사항을 보다 감성적인 측면에서 수집하기 위해 검출하는 것이다. 따라서, 상기 펜 터치 입력이 발생되는 환경은 상기 펜 터치 입력시 실행되고 있는 어플리케이션(이하, '실행 어플리케이션'이라함)이 어느 어플리케이션인지에 대한 정보를 포함할 수 있다. 본 발명의 일 실시예에서, 단말 장치(100)는 복수의 어플리케이션을 동시에 실행할 수 있으며, 적어도 하나의 어플리케이션은 단말 장치(100)의 디스플레이 화면 상에 표시되고, 나머지 적어도 하나의 어플리케이션은 디스플레이 화면에 표시되지 않은 채 백그라운드에서 실행될 수 있다. 본 발명의 일 실시예에서 상기 펜 터치 입력이 발생되는 환경은 이후 진행되는 단계(340 단계)에서 펜 터치 입력에 의해 발생되는 데이터의 컨텍스트를 구성하는데 사용하기 위한 것으로써, 디스플레이 화면 상에 표시되는 어플리케이션을 확인하는 것이 바람직하다. 따라서, 본 발명의 일 실시예에서 상기 실행 어플리케이션은, 단말 장치(100)에서 실행되는 적어도 하나의 어플리케이션 중에서, 디스플레이 화면 상에 표시되는 어플리케이션을 포함하는 것이 바람직하다.
또한, 상기 펜 터치 입력이 발생되는 환경은 상기 펜 터치 입력이 발생되는 시간에 대한 정보, 상기 펜 터치 입력이 발생되는 장소에 대한 정보 등을 포함할 수 있으며, 이를 위해 제어부(110)는 단말 장치(100)에 구비된 적어도 하나의 센서를 통해 전술한 정보를 검출할 수 있다.
한편, 303단계에서, 제어부(110)는 상기 펜 터치 입력에 의해 발생되는 데이터(이하, '펜 입력 데이터'라 함)를 확인한다. 예컨대, 상기 제어부(110)는 상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 펜 입력 데이터를 확인할 수 있다.
이러한 펜 입력 데이터는 필기(Handwriting) 이미지(Image), 동작 (Object) 등에 의한 정보를 포함할 수 있으며, 문자 외에도 선, 기호, 패턴 및 이들이 조합된 형태로 입력될 수 있다. 따라서, 펜 입력 데이터는 상기 입력된 문자, 선, 기호, 패턴, 도형, 이들의 조합 등으로부터 현재 표시된 메모 내용이나, 상기 입력된 선, 기호, 패턴, 도형, 이들의 조합이 표시하는 영역에 존재하는 메모 내용이나, 상기 입력된 선, 기호, 패턴, 도형, 이들의 조합이 지시하는 이미지를 포함할 수 있다.
예컨대, 도 4a에 예시되는 바와 같이, 상기 캘린터 어플리케이션이나, 일기장 어플리케이션, 메모장 어플리케이션 등(401)을 통해 입력되는 필기 이미지(402-1, 402-2, 40-3, 402-4, 402-5)를, 필기 인식 알고리즘을 통해, 사용자가 입력하는 문자 또는 데이터를 검출할 수 있다. 즉, 상기 캘린터 어플리케이션이나, 일기장 어플리케이션, 메모장 어플리케이션 등(401)이 디스플레이되는 상태에서, 제어부(110)는 터치스크린(171) 상에 터치되는 포인트들의 좌표값을 입력받아, 상기 터치된 포인트들의 좌표값을 스트로크로 저장하고, 상기 스트로크를 이용하여 스트로크 어레이를 생성한다. 그리고 제어부(110)는 미리 저장된 필기 라이브러리와 상기 생성된 스트로크 어레이 리스트를 이용하여 필기된 내용을 인식한다.
또한 다른 예로써, 터치스크린(171) 상에 상기 웹 페이지 어플리케이션이나, 문서 어플리케이션 등을 통해 소정의 데이터가 디스플레이되는 상태(411)에서, 사용자가 터치스크린(171) 상에 밑줄 또는 원 등과 같은 펜 터치 입력(412)을 발생시킴에 따라, 상기 제어부(110)는 상기 밑줄 또는 원 등과 같은 펜 터치 입력(412)이 발생된 영역의 대응되는 문자(413)를 검출한다. 예컨대, 상기 제어부(110)는 OCR 알고리즘 등을 통해 상기 펜 터치 입력(412)이 발생된 영역의 대응되는 문자(413)를 검출할 수 있다.
또한, 이와 다른 예로써, 제어부(110)는 상기 펜 터치 입력이 발생된 영역에 표시되는 정보를 스크랩할 수 있다. 예컨대, 도 4c를 참조하면, 터치스크린(171) 상에 소정의 데이터를 디스플레이하는 상태(421)에서, 사용자가 단말 장치(100)를 사용하면서 터치스크린(171) 상의 일 영역에 스크랩 기능으로 정의된 펜 터치 입력을 발생시킴에 따라, 예컨대, 상기 펜 터치 입력을 통해 폐쇄형 도형을 생성함에 따라(422), 제어부(110)는 상기 폐쇄형 도형의 내 측에 표시되는 정보를 이미지(423)화하여 저장할 수 있다. 따라서, 제어부(110)는 상기 펜 입력 데이터로써 상기 저장된 이미지(423)를 저장할 수 있다. 다음으로, 304단계에서, 제어부(110)는 상기 펜 입력 데이터와, 상기 펜 터치 입력이 발생되는 환경(예컨대, 실행 어플리케이션 등)을 확인하여, 상기 펜 터치 입력에 대응되는 상황이나 의도를 파악한다(304a). 즉 상기 제어부(110)는 상기 펜 터치 입력이 발생되는 환경(예컨대, 실행 어플리케이션 등)을 고려하고, 상기 펜 입력 데이터에 대해, 자연어 처리(NLI: Natural Language Interaction) 기술을 적용하여, 단어, 문장, 키워드 등의 의미 단위로 분류한다. 그리고, 이렇게 분류된 단어, 문장, 키워드 등이 지시하는 상황 또는 의도를 인지한다. 상기 단어, 문장, 키워드 등이 지시하는 상황 또는 의도를 인지하는 방법은, 상황 또는 의도와 관련하여 미리 구성된 데이터베이스를 검색(Search)하거나, 소정의 알고리즘을 통해 미리 정해진 논리적 추론(Logical Inference)을 수행하거나, 상기 단어, 문장, 키워드 등의 입력 패턴에 기반한 패턴인식(Pattern Recognition)을 수행하는 방법 등이 사용될 수 있다.
그리고, 제어부(110)는 상기 인지된 상황 또는 의도와 상기 펜 터치 입력에 의해 발생되는 데이터(대상 객체)를 서로 연결하여 컨텍스트를 구성(304b)한 후, 상기 컨텍스트가 구성된 대상 객체를 소정의 상황 모델에 매칭하여 저장(304c)할 수 있다.예컨대, 제어부(110)는 상기 펜 입력 데이터, 예컨대, 필기 입력, 밑줄 입력에 대응되는 글자 등을 의미 단위로 분류한 단어 또는 문장으로 구성하거나, 스크랩되는 이미지가 지시하는 키 워드를 구성한다. 그리고, 상기 의미 단위로 분류된 단어, 문장, 키워드 등을, 미리 정해진 상황, 또는 의도를 인지하고, 상기 펜 입력 데이터를 상기 인지된 상황 또는 의도와 연결한 컨텍스트를 구성한다. 그리고, 이렇게 컨텍스트가 구성된 상기 펜 입력 데이터를 소정의 상황 모델에 매칭할 수 있다.
일 예(501)로, 다이어리 어플리케이션이 디스플레이되는 상태에서, 제어부(110)는 상기 펜 입력 데이터가, 고민거리 등과 관련된 상황 또는 의도를 포함하는 단어 또는 문장이 입력되는 것을 인지하고, 상기 인지된 상황 또는 의도("고민거리")를 상기 펜 입력 데이터(예, "기름값이 너무 비싸")와 연결한 컨텍스트를 구성하여 저장할 수 있다. 이후, 제어부(110)는 상기 펜 입력 데이터(예, “기름값이 너무 비싸”)를 소정의 상황모델(예, “저렴한 주유소 확인시 알림”)에 매칭시켜 저장할 수 있다.
다른 예(502)로써, 메모 노트 어플리케이션이 디스플레이되는 상태에서, 제어부(110)는 상기 펜 입력 데이터가, 잊지 말아야 할 이벤트와 관련된 상황 또는 의도를 포함하는 단어 또는 문장을 포함하는 것을 인지하고, 상기 인지된 상황 또는 의도(“잊지 말아야 할 이벤트”)를 상기 펜 입력 데이터(예, “토요일 7시 강남 약속”)와 연결한 컨텍스트를 구성하여 저장할 수 있다. 이후, 제어부(110)는 상기 펜 입력 데이터(예, “토요일 7시 강남 약속”)를 소정의 상황모델(예, “시간 및 장소에 맞추어 약속 알림”)에 매칭시켜 저장한다.
또 다른 예(503)로써, 강의 노트 어플리케이션이 디스플레이되는 상태에서, 제어부(110)는 상기 펜 입력 데이터가, 배워야 할 지식 등과 관련된 상황 또는 의도를 포함하는 단어 또는 문장을 포함함을 확인하고, 상기 인지된 상황(“배워야 할 지식”)을 상기 펜 입력 데이터(예, “이진탐색, 순차 검색”)와 연결한 컨텍스트를 구성하여 저장할 수 있다. 이후, 제어부(110)는 상기 펜 입력 데이터(“이진탐색, 순차 검색”)를 소정의 상황모델(“전문 지식을 더 상세히 얻을 수 있는 상황 알림”)에 매칭시켜 저장한다.
또 다른 예(504)로써, 웹 브라우저 어플리케이션이 디스플레이되는 상태에서, 제어부(110)는 상기 펜 입력 데이터가, 관심 정보, 관심 상품을 포함하는 상황 또는 의도를 포함함을 인지하고, 상기 상황 또는 의도(“관심 정보, 관심 상품”)를 상기 펜 입력 데이터(“상품 브랜드”, “상품 스크랩” 등)와 연결한 컨텍스트를 구성하여 저장할 수 있다. 이후, 제어부(110)는 상기 펜 입력 데이터(“상품 브랜드”, “상품 스크랩” 등)를 소정의 상황모델(“성품 정보에 대한 상세 정보를 얻을 수 있는 상황”)에 매칭시켜 저장할 수 있다.
비록 본 발명의 일 실시예에서, 상기 303단계에서, 펜 입력 데이터를 검출하는 것을 예시하였으나, 이에 대한 대안으로써, 펜이 아닌 사용자 신체를 이용한 터치 입력에 의해 발생되는 데이터를 검출하는 것도 가능하다. 다만, 본 발명이 펜 터치 입력을 기반으로 하여, 상황모델을 구성하는 것이 주요한 구성임을 고려하면, 304단계에서는 펜이 아닌 사용자 신체를 이용한 터치 입력에 의해 발생되는 데이터와 펜 입력 데이터를 구분하고, 컨텍스트의 구성이나, 상황 모델의 구성시, 펜이 아닌 사용자 신체를 이용한 터치 입력에 의한 데이터인지, 펜 터치 입력에 의한 데이터인지를 고려할 필요가 있다. 따라서, 제어부(110)는 입력된 데이터가 펜 터치 입력에 의한 데이터인지 여부를 고려하여, 컨텍스트 및 상황 모델을 구성할 수 있다.
또한, 본 발명의 일 실시예에서, 상기 펜 입력 데이터에 대해, 자연어 처리 기술을 적용하여, 단어, 문장, 키워드 등의 의미 단위로 분류하고, 단어, 문장, 키워드 등을 중심으로 미리 정해진 상황, 또는 의도를 인지하는 것을 예시하였으나, 본 발명이 이를 한정하는 것은 아니다. 상기 펜 입력 데이터는 단어, 문장, 키워드뿐 아니라, 다양한 형태의 기호, 이미지를 포함할 수 있으며, 이러한 다양한 형태의 기호, 이미지 등은 기호의 기능과 분석, 의미 작용과 표현, 의사 소통과 관련된 다양한 체계를 연구하는 인문학 분야의 기호학(semiotics), 기계/전기/컴퓨터 분야에 사용되는 순서도와 설계도의 기호 인식 분석, 화학 분야에서 사용되는 복잡한 화학 구조 기호의 인식 분석 등을 고려하여, 상황, 또는 의도를 인지할 수도 있음은 물론이다.
한편, 305단계에서, 제어부(110)는, 상기 상황 모델에 상황 추론 기법을 적용하고, 그 결과를 음성 또는 디스플레이 테이터를 사용하여 단말 장치(100)에 제공할 수 있다.
상기 상황 추론 기법은, 상기 학습된 상황 모델에 기초하여, 단말 장치(100)로부터 수집 또는 센싱 데이터를 사용하여 단말 장치(100)의 현재 상황을 추론하고 그와 연관된 추천 정보를 제공하는 기법이다. 구체적으로, 제어부(110)는 미리 저장된 상기 상황 모델과 관련되는 데이터를 모니터링 한다. 그리고, 제어부(110)는 상기 상황 모델과 관련되는 데이터 검출됨에 대응하여, 단말 장치(100)의 현재 상황을 추론한다. 그리고, 제어부(110)는 상기 추론된 현재 상황과 상기 상황 모델을 고려하여 추천 정보를 생성하고, 상기 추천 정보를 시각 또는 청각적인 효과를 통해 사용자에게 제공할 수 있다.
도 6a 내지 6d는 본 발명의 일 실시예에 따른 지능적 정보 제공 방법에 의해 지능적으로 제공되는 추천 정보를 예시하는 도면이다.
도 6a를 참조하면, 제어부(110)는 단말 장치(501)로부터 수집 또는 센싱된 데이터(위치 정보, 검색 가능한 인터넷 망 정보 등)를 모니터링 하던 중, 제1상황 모델(예, 운전 중 저렴한 주유소 확인시 알림)과 관련된 데이터(예, 정해진 값(30Km) 이상의 이동 속도, 최저가(또는 이에 근접한 가격)의 주유소 등)가 수집됨에 따라, 단말 장치(100)의 현재 상황, 예컨대, 사용자가 운전 중인지 여부, 최저가(또는 이에 근접한 가격)의 주유소와 단말 장치(100) 사이의 거리 등을 확인한다. 그리고, 제어부(110)는 상기 현재 상황이 제1상황 모델(예, 운전 중 저렴한 주유소 확인시 알림)에 대응되는 것을 확인하고, 제1상황 모델(예, 운전 중 저렴한 주유소 확인시 알림)에 대응되는 추천정보, 예컨대, 유가(휘발유 값)를 평균보다 낮게 제공하는 주유소 명, 주유소 위치, 주유소와 단말 장치(100) 사이의 거리, 주유소에서 제공하는 유가 정보 등을 포함하는 추천 정보를 생성한다. 그리고, 제어부(110)는 상기 추천 정보를 단말 장치(100)에 구비된 디스플레이 또는 스피커를 통해 출력하도록 제어한다(602-1).
또한 다른 예로써, 도 6b를 참조하면, 제어부(110)는 단말 장치(501)로부터 수집 또는 센싱 데이터를 모니터링 하던 중, 제2상황 모델(예, 시간 또는 장소에 맞는 알림)과 관련된 데이터(예, 시간 정보, 현재 위치 정보 등)가 수집됨에 따라, 단말 장치(100)의 현재 상황, 예컨대, 약속 장소와 현재 장소 사이의 거리 등을 확인한다. 그리고, 제어부(110)는 상기 현재 상황이 제2상황 모델(예, 시간 또는 장소에 맞는 알림)에 대응되는 것을 확인하고, 제2상황 모델(예, 시간 또는 장소에 맞는 알림)에 대응되는 추천정보, 예컨대, 현재 장소에서 약속 장소로 이동하기 위한 교통 수단과 소요 시간, 약속 장소로 출발할 시간 등을 포함하는 추천 정보를 생성한다. 그리고, 제어부(110)는 상기 추천 정보를 단말 장치(100)에 구비된 디스플레이 또는 스피커를 통해 출력하도록 제어한다(602-2).또 다른 예로써, 도 6c를 참조하면, 제어부(110)는 단말 장치(501)로부터 수집 또는 센싱 데이터를 모니터링 하던 중, 제3상황 모델(예, 전문지식을 더 상세히 얻을 수 있는 상황에 알림)과 관련된 데이터(예, 시간 정보, 현재 위치 정보 등)가 수집됨에 따라, 단말 장치(100)의 현재 상황, 예컨대, 위치, 서점, 사용자가 관심있는 전문분야 서적의 가격 정보, 사용자가 관심있는 전문분야 강의의 개설 정보 등을 확인한다. 그리고, 제어부(110)는 상기 현재 상황이 제3상황 모델(예, 전문지식을 더 상세히 얻을 수 있는 상황에 알림)에 대응되는 것을 확인하고, 제3상황 모델(예, 전문지식을 더 상세히 얻을 수 있는 상황에 알림)에 대응되는 추천정보, 예컨대, 관심있는 전문분야 서적을 저렴하게 판매하는 서점의 위치정보, 관심있는 전문분야 서적의 가격 정보, 현재 위치에서 서점까지의 이동 시간, 서점의 운영시간, 사용자가 관심있는 전문분야 강의의 온라인 강의 개설 등을 포함하는 추천 정보를 생성한다. 그리고, 제어부(110)는 상기 추천 정보를 단말 장치(100)에 구비된 디스플레이 또는 스피커를 통해 출력하도록 제어한다(602-3, 602-4).
또 다른 예로써, 도 6d를 참조하면, 제어부(110)는 단말 장치(501)로부터 수집 또는 센싱 데이터를 모니터링 하던 중, 제4상황 모델(예, 관심 상품에 대한 정보를 더 상세히 얻을 수 있는 상황에 알림)과 관련된 데이터(예, 시간 정보, 현재 위치 정보, 삼품의 가격 정보, 상품의 할인 정보 등)가 수집됨에 따라, 단말 장치(100)의 현재 상황, 예컨대, 상품의 판매처 명, 판매처의 위치, 상품의 가격 정보, 상품의 할인 정보 등을 확인한다. 그리고, 제어부(110)는 상기 현재 상황이 제4상황 모델(예, 관심 상품에 대한 정보를 더 상세히 얻을 수 있는 상황에 알림)에 대응되는 것을 확인하고, 제4상황 모델(예, 관심 상품에 대한 정보를 더 상세히 얻을 수 있는 상황에 알림)에 대응되는 추천정보, 예컨대, 관심 상품의 신규 등록 여부, 상품의 판매처 위치정보, 상품의 가격 정보, 현재 위치에서 판매처까지의 이동 시간, 운영시간 등을 포함하는 추천 정보를 생성한다. 그리고, 제어부(110)는 상기 추천 정보를 단말 장치(100)에 구비된 디스플레이 또는 스피커를 통해 출력하도록 제어한다(602-5, 602-6).
전술한 본 발명의 실시예에 따르면, 사용자의 펜을 사용한 필기 입력 검출하여 사용자의 평소 생각이나, 관심사항을 수집하여 보다 감성적인 정보를 수집할 수 있다. 그리고, 상기와 같이 수집된 감성적인 정보를 기반으로 보다 정확하게 사용자가 필요로 하는 정보를 제공할 수 있고, 단말 장치에서 지능적으로 제공되는 정보의 신뢰성을 높일 수 있는 효과가 있다.
본 발명의 실시예들은 하드웨어, 소프트웨어 또는 하드웨어 및 소프트웨어의 조합의 형태로 실현 가능하다는 것을 알 수 있을 것이다. 이러한 임의의 소프트웨어는 예를 들어, 삭제 가능 또는 재기록 가능 여부와 상관없이, ROM 등의 저장 장치와 같은 휘발성 또는 비휘발성 저장 장치, 또는 예를 들어, RAM, 메모리 칩, 장치 또는 집적 회로와 같은 메모리, 또는 예를 들어 CD, DVD, 자기 디스크 또는 자기 테이프 등과 같은 광학 또는 자기적으로 기록 가능함과 동시에 기계(예를 들어, 컴퓨터)로 읽을 수 있는 저장 매체에 저장될 수 있다. 본 발명의 방법은 제어부 및 메모리를 포함하는 컴퓨터 또는 휴대용 단말 장치에 의해 구현될 수 있고, 상기 메모리는 본 발명의 실시 예들을 구현하는 지시들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적합한 기계로 읽을 수 있는 저장 매체의 한 예임을 알 수 있을 것이다. 따라서, 본 발명의 방법은 본 명세서의 임의의 청구항에 기재된 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램 및 이러한 프로그램을 저장하는 기계(컴퓨터 등)로 읽을 수 있는 저장 매체를 포함한다. 또한, 이러한 프로그램은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 임의의 매체를 통해 전자적으로 이송될 수 있고, 본 발명은 이와 균등한 것을 적절하게 포함한다.
또한, 상기 컴퓨터 또는 휴대용 단말 장치는 유선 또는 무선으로 연결되는 프로그램 제공 장치로부터 상기 프로그램을 수신하여 저장할 수 있다. 상기 프로그램 제공 장치는 기 설정된 컨텐츠 보호 방법을 수행하도록 하는 지시들을 포함하는 프로그램, 컨텐츠 보호 방법에 필요한 정보 등을 저장하기 위한 메모리와, 유선 또는 무선 통신을 수행하기 위한 통신부와, 프로그램의 전송을 제어하는 제어부를 포함할 수 있다. 상기 프로그램 제공 장치는 상기 컴퓨터 또는 휴대용 단말 장치로부터 상기 프로그램의 제공 요청을 수신할 경우, 상기 컴퓨터 또는 휴대용 단말 장치에 상기 프로그램을 유선 또는 무선으로 제공할 수 있다. 또한, 상기 프로그램 제공 장치는 상기 컴퓨터 또는 휴대용 단말 장치로부터 상기 프로그램의 제공 요청이 없는 경우에도, 예를 들어 상기 컴퓨터 또는 휴대용 단말 장치이 특정 장소 내에 위치할 경우, 상기 컴퓨터 또는 휴대용 단말 장치에 상기 프로그램을 유선 또는 무선으로 제공하도록 형성될 수도 있다.

Claims (14)

  1. 지능적 정보 제공 방법에 있어서,
    펜 터치 입력을 검출하는 과정과,
    상기 펜 터치 입력이 발생되는 환경을 확인하는 과정과,
    상기 펜 터치 입력에 대응하는 정보를 수집하는 과정과,
    상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보에 대한 상황 모델을 설정하는 과정과,
    상기 상황 모델에 대응되는 추론 정보를 제공하는 과정을 포함함을 특징으로 하는 지능적 정보 제공 방법.
  2. 제1항에 있어서,
    상기 펜 터치 입력이 발생되는 환경은 상기 펜 터치 입력이 발생 시, 구동되는 어플리케이션인 것을 특징으로 하는 지능적 정보 제공 방법.
  3. 제1항에 있어서,
    상기 펜 터치 입력에 대응하는 정보를 수집하는 과정은,
    상기 펜 터치 입력에 의한 필기 입력을 검출하는 과정과,
    상기 필기 입력에 의해 입력되는 문자를 확인하는 과정을 포함함을 특징으로 하는 지능적 정보 제공 방법.
  4. 제1항에 있어서,
    상기 펜 터치 입력에 대응하는 정보를 수집하는 과정은,
    상기 펜 터치 입력에 의한 라인 입력을 검출하는 과정과,
    상기 라인 입력에 대응되는 영역에 포함된 문자를 확인하는 과정을 포함함을 특징으로 하는 지능적 정보 제공 방법.
  5. 제1항에 있어서, 상기 상황 모델을 설정하는 과정은,
    상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보의 상황 또는 의도를 인지하는 과정을 포함하는 지능적 정보 제공 방법.
  6. 제5항에 있어서, 상기 상황 모델을 설정하는 과정은,
    상기 인지된 상황 또는 의도를 상기 수집된 정보와 연결하여 컨텍스트를 구성하는 과정을 더 포함하는 지능적 정보 제공 방법.
  7. 제6항에 있어서, 상기 상황 모델을 설정하는 과정은,
    상기 컨텍스트에 대응되는 상황모델을 생성하는 과정을 더 포함하는 지능적 정보 제공 방법.
  8. 단말 장치에 있어서,
    정보를 디스플레이하고, 사용자에 의해 입력되는 터치 입력 이벤트를 검출하는 터치스크린,
    적어도 하나의 제어부, 및
    적어도 하나의 입력 이미지를 저장하고, 적어도 하나의 프로그램을 저장하는 메모리부를 포함하며,
    상기 적어도 하나의 프로그램은, 상기 제어부에 의해 실행되도록 구성되며,
    펜 터치 입력을 검출하고,
    상기 펜 터치 입력이 발생되는 환경을 확인하고,
    상기 펜 터치 입력에 대응하는 정보를 수집하고,
    상기 펜 터치 입력이 발생되는 환경을 고려하여, 상기 수집된 정보에 대한 상황 모델을 설정하고,상기 상황 모델에 대응되는 추론 정보를 제공하는 명령어를 포함함을 특징으로 하는 단말 장치.
  9. 제8항에 있어서,
    상기 펜 터치 입력이 발생되는 환경은 상기 펜 터치 입력이 발생 시, 구동되는 어플리케이션인 것을 특징으로 하는 단말 장치.
  10. 제8항에 있어서, 상기 적어도 하나의 프로그램은,
    상기 펜 터치 입력에 대응하는 정보를 수집하고,
    상기 펜 터치 입력에 의한 필기 입력을 검출하고,
    상기 필기 입력에 의해 입력되는 문자를 확인하는 명령어를 포함함을 특징으로 하는 단말 장치.
  11. 제8항에 있어서, 상기 적어도 하나의 프로그램은,
    상기 펜 터치 입력에 의한 라인 입력을 검출하고,
    상기 라인 입력에 대응되는 영역에 포함된 문자를 확인하는 명령어를 포함함을 특징으로 하는 단말 장치.
  12. 제8항에 있어서, 상기 적어도 하나의 프로그램은,
    상기 수집된 정보를 상기 펜 터치 입력이 발생되는 환경과 연동하여 상기 수집된 정보의 컨텍스트를 분석하고 저장하는 것을 특징으로 하는 단말 장치.
  13. 제8항에 있어서, 상기 적어도 하나의 프로그램은,
    상기 인지된 상황 또는 의도를 상기 수집된 정보와 연결하여 컨텍스트를 구성하는 명령어를 더 포함하는 단말 장치.
  14. 제8항에 있어서, 상기 적어도 하나의 프로그램은,
    상기 컨텍스트에 대응되는 상황모델을 생성하는 명령어를 더 포함하는 단말 장치.
KR1020130094304A 2013-08-08 2013-08-08 지능적 정보 제공 방법 및 장치 KR20150017977A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130094304A KR20150017977A (ko) 2013-08-08 2013-08-08 지능적 정보 제공 방법 및 장치
US14/455,330 US20150042587A1 (en) 2013-08-08 2014-08-08 Method and apparatus for providing intelligent information
EP14180376.7A EP2835723A1 (en) 2013-08-08 2014-08-08 Method and apparatus for providing intelligent information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130094304A KR20150017977A (ko) 2013-08-08 2013-08-08 지능적 정보 제공 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20150017977A true KR20150017977A (ko) 2015-02-23

Family

ID=51300595

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130094304A KR20150017977A (ko) 2013-08-08 2013-08-08 지능적 정보 제공 방법 및 장치

Country Status (3)

Country Link
US (1) US20150042587A1 (ko)
EP (1) EP2835723A1 (ko)
KR (1) KR20150017977A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017112251A1 (en) * 2015-12-21 2017-06-29 Google Inc. Dynamic intent registry

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10276162B2 (en) 2016-02-12 2019-04-30 Samsung Electronics Co., Ltd. Method and electronic device for performing voice based actions
RU2740785C2 (ru) * 2016-10-19 2021-01-21 Хуавэй Текнолоджиз Ко., Лтд. Способ и оборудование обработки изображений, электронное устройство и графический пользовательский интерфейс
CN111638807A (zh) * 2020-04-29 2020-09-08 上海元趣信息技术有限公司 一种基于智能手写笔的学习辅助系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5063600A (en) * 1990-05-14 1991-11-05 Norwood Donald D Hybrid information management system for handwriting and text
US7821503B2 (en) * 2003-04-09 2010-10-26 Tegic Communications, Inc. Touch screen and graphical user interface
US6968334B2 (en) * 2001-05-15 2005-11-22 Nokia Corporation Method and business process to maintain privacy in distributed recommendation systems
TW200912795A (en) * 2007-09-04 2009-03-16 Ind Tech Res Inst Context inference system and method thereof
US8285499B2 (en) * 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8094941B1 (en) * 2011-06-13 2012-01-10 Google Inc. Character recognition for overlapping textual user input
US20130086056A1 (en) * 2011-09-30 2013-04-04 Matthew G. Dyor Gesture based context menus
US9229543B2 (en) * 2013-06-28 2016-01-05 Lenovo (Singapore) Pte. Ltd. Modifying stylus input or response using inferred emotion

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017112251A1 (en) * 2015-12-21 2017-06-29 Google Inc. Dynamic intent registry
CN108475506A (zh) * 2015-12-21 2018-08-31 谷歌有限责任公司 动态意图注册

Also Published As

Publication number Publication date
EP2835723A1 (en) 2015-02-11
US20150042587A1 (en) 2015-02-12

Similar Documents

Publication Publication Date Title
KR102447385B1 (ko) 트랜스퍼 계정들을 위한 사용자 인터페이스들
RU2650029C2 (ru) Способ и устройство для управления приложением посредством распознавания нарисованного от руки изображения
JP6263177B2 (ja) ユーザー端末のユーザーインターフェース装置及び方法
US20180364895A1 (en) User interface apparatus in a user terminal and method for supporting the same
EP2891041B1 (en) User interface apparatus in a user terminal and method for supporting the same
KR20140091633A (ko) 모바일 장치에서의 상황 인지에 따른 추천 항목을 제공하기 위한 방법 및 이를 위한 모바일 장치
CN106775334A (zh) 移动终端上的文件调用方法、装置及移动终端
CN104281317A (zh) 用于切换数字化器模式的方法
CN103870535A (zh) 信息搜索方法和装置
CN107657953A (zh) 语音控制方法及系统
CN107102746A (zh) 候选词生成方法、装置以及用于候选词生成的装置
CN103713843A (zh) 用于在移动装置中产生任务推荐图标的方法和设备
CN104737101A (zh) 具有力触发的非视觉响应的计算设备
KR102594951B1 (ko) 전자 장치 및 그의 동작 방법
US20140015780A1 (en) User interface apparatus and method for user terminal
US10528619B2 (en) Image display method and device
KR20140134018A (ko) 화면상에서 사용자 입력과 관련된 기능을 실행하기 위한 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
CN106651338A (zh) 一种支付处理的方法及终端
US20220291813A1 (en) User input interfaces
CN103870133A (zh) 用于滚动显示装置的屏幕的方法和设备
CN105677697A (zh) 提供兴趣点的方法及其电子装置
KR20150017977A (ko) 지능적 정보 제공 방법 및 장치
CN103631434A (zh) 具有使用多点触摸的手写功能的移动设备及其控制方法
CN111612178A (zh) 一种模型的诊断方法及相关设备
CN105339946A (zh) 用于提供安全环境的设备和方法

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid