KR20120019376A - 정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품 - Google Patents

정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품 Download PDF

Info

Publication number
KR20120019376A
KR20120019376A KR1020110081804A KR20110081804A KR20120019376A KR 20120019376 A KR20120019376 A KR 20120019376A KR 1020110081804 A KR1020110081804 A KR 1020110081804A KR 20110081804 A KR20110081804 A KR 20110081804A KR 20120019376 A KR20120019376 A KR 20120019376A
Authority
KR
South Korea
Prior art keywords
display
interest
objects
area
information processing
Prior art date
Application number
KR1020110081804A
Other languages
English (en)
Inventor
유스케 미야자와
이쿠오 야마노
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20120019376A publication Critical patent/KR20120019376A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G06F3/04855—Interaction with scrollbars
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Abstract

정보 처리 장치는 조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출한다. 주목 대상 추출부는 인터랙션 에리어에 기초하여 복수의 주목 대상의 적어도 일부를 추출한다. 선택 후보 추출부는 복수의 주목 대상으로부터 선택 후보를 추출하고, 디스플레이는 복수의 주목 대상 중 적어도 일부를 표시하며 선택 후보를 강조한다. 또한, 대응하는 프로세스를 제공하기 위해 방법 및 비일시적 컴퓨터 판독가능한 기억 장치가 협력한다.

Description

정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품 {INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND COMPUTER PROGRAM PRODUCT}
본 발명은 정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품에 관한 것이다.
근년에, 터치 패널을 갖는 장치가 널리 보급되었다. 사용자가 터치 패널을 갖는 장치를 사용할 때, 사용자는 화면을 터치함으로써 직감적 조작을 즐길 수 있다. 그러므로, 그러한 장치들이 광범위하게 사용되는 이유는 표시 영역의 크기가 장치의 크기에 비해 커질 수 있었기 때문인 것으로 생각된다. 또한, 액정 표시 화면 등과 같은 화면의 해상도가 커져서 장치가 제한된 표시 영역에서 가능한 한 많은 정보를 표시할 수 있다.
그러나, 화면의 해상도가 커질지라도 사용자가 터치 조작을 수행하게 하기 위해 표시 영역은 어느 정도의 크기를 가질 필요가 있다. 그러므로, 표시 영역의 크기가 커지면, 비용 등에 비추어 고해상도 화면이 충분히 활용되지 못할 수도 있을 것이다. 같은 이유로, 터치 조작이 요구되는 장치는 어느 정도의 물리적 크기를 가질 필요가 있고, 그러므로, 그러한 장치를 소형 모바일 장치에 통합하기가 어렵다.
그러한 상황을 개선하기 위해, 예를 들어, 일본 특허출원 공개 2004-54854호는 터치 패널 상의 위치를 지정하는 펜에 대한 근접으로 선택 대상들을 분류(sort)하는 기술을 제안한다. 이 기술을 이용하면, 선택 대상들은 그것들 중 하나가 펜에 의해 선택될 수 있는 위치로 이동한다. 그러므로, 표시된 선택 대상들이 소형 표시 영역에 밀집되어 있을지라도, 선택 대상들 중 하나가 선택될 수 있다.
예를 들어, 일본 특허출원 공개 2009-116583호는 근접해가는 손가락의 위치에 가장 가까운 위치에 있는 선택 대상을 확대 표시하거나 또는 포커스(focus) 표시하는 기술을 제안한다. 이 기술을 이용하면, 손가락에 의해 지정되는 미소 변화 좌표에 의해 포커스가 전환될 수 있다.
그러나, 예를 들어, 앞서 설명한 일본 특허출원 공개 2004-54854호에서 제안된 기술에서는, 선택 대상들을 재배치할 것이 요구된다. 그러므로, 사용자가 분류하기 전후의 관계를 이해하기 위해 많은 시간이 걸리는 문제가 있다. 예를 들어, 앞서 설명한 일본 특허출원 공개 2009-116583호에서 제안된 기술에서는, 손가락이 표시부로부터 떨어진 상태에서 선택 대상들 중 하나를 선택할 것이 요구된다. 그러므로, 표시 영역의 대부분이 손가락에 의해 가려지고, 표시 영역에서의 제한된 에리어가 효율적으로 활용되지 못할 수 있는 문제가 있다.
앞서 설명한 것을 감안하면, 제한된 표시 영역을 효율적으로 이용하게 하는 상태에서 사용자가 표시 영역에 있는 복수의 선택 대상들 중에서 원하는 선택 대상을 선택하게 할 수 있는 신규하고 개선된 기술을 제공할 것이 요구된다.
한 실시예에서, 정보 처리 장치는 조작체(manipulation object)에 의해 지정된 위치 검출면(position detection surface)의 인터랙션 에리어(interaction area)를 검출하는 지정 영역 검출부(specified region detection unit), 인터랙션 에리어에 기초하여 복수의 주목 대상(focused target)의 적어도 일부를 추출하는 주목 대상 추출부(focused target extraction unit), 복수의 주목 대상으로부터 선택 후보(selection candidate)를 추출하는 선택 후보 추출부(selection candidate extraction unit), 및 복수의 주목 대상 중 적어도 일부를 표시하고 복수의 주목 대상 중 다른 것들에 비해 선택 후보를 강조하는 디스플레이(display)를 포함한다.
장치의 한 양태는 디스플레이가 무선 모바일 단말 장치(wireless mobile terminal)에 통합되어 있고, 복수의 주목 대상이 소프트웨어 키보드(software keyboard)의 키(key)를 포함하는 것이다.
다른 양태는 복수의 주목 대상이 인터랙션 에리어의 풋프린트(footprint) 내에 있는 소프트웨어 키보드의 키인 것이다.
또 다른 양태는 디스플레이가 무선 키보드의 키와 중첩되지 않는 표시 에리어(display area)에 복수의 주목 대상을 표시하는 것이다.
또한, 디스플레이는 복수의 주목 후보 중 다른 것에 비해 선택 후보를 강조된 영숫자(alphanumeric character)로서 표시한다.
다른 양태에서는, 인터랙션 에리어에 대한 조작체의 위치 변화를 검출하여 선택 후보 추출부에 응답하여 선택 후보에 대한 강조가 다른 영숫자로 변한다.
또한, 다른 영숫자에 대한 선택 후보의 근접은 인터랙션 에리어에 대한 조작체의 이동량에 관련된다.
디스플레이는 위치 검출면을 포함할 수 있을 것이며, 지정 영역 검출부는 조작체에 의해 접촉될 때 조작체로부터의 압력을 검출한다.
다른 양태로서, 지정 영역 검출부는 커패시턴스 변화에 응답한다.
선택적으로, 선택 후보 추출부는 위치 검출면에 대해 조작체에 의해 발생되는 중심 좌표 무게 중심점(central coordinate barycentric point)에 대한 상대적 근접도(relative proximity)에 의해 선택 후보를 선택한다.
선택 후보는 삽입점 커서(insertion-point cursor)와 굵은 텍스트(bold text) 중 적어도 하나에 의해 선택적으로 강조된다.
선택적으로, 디스플레이는 전자 지도 장치(electronic map device)에 통합되어 있고, 복수의 주목 대상은 표시된 지리적 에리어(geographic area) 내의 지리적 특징(geographic feature)을 포함한다.
선택 후보는 색상, 축척, 핀(pin) 및 기하학적 표시(geometric marker) 중 적어도 하나에 의해 강조될 수 있을 것이다.
한 양태는 조작체가 소프트웨어 키보드의 하나 이상의 키를 시야에서 가리면, 디스플레이는 조작체에 의해 가려지지 않은 디스플레이의 표시 영역에 복수의 주목 대상 중 적어도 일부를 표시하는 것이다.
예시적 방법은 조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출하는 단계, 컴퓨터 프로세서에 의해 인터랙션 에리어에 기초하여 복수의 주목 대상 중 적어도 일부를 추출하는 단계, 복수의 주목 대상으로부터 선택 후보를 추출하는 단계, 및 복수의 주목 대상 중 적어도 일부를 디스플레이 상에 표시하고 복수의 주목 대상 중 다른 것에 비해 디스플레이 상의 선택 후보를 강조하는 단계를 포함한다.
선택적 특징은 디스플레이가 무선 모바일 단말 장치에 통합되어 있고, 복수의 주목 대상은 소프트웨어 키보드의 키를 포함하는 것이다.
선택적으로, 디스플레이는 전자 지도 장치에 통합되어 있고, 복수의 주목 대상은 소정의 지리적 에리어 내의 지리적 특징을 포함한다.
컴퓨터 판독가능한 명령어를 기억하고 있는 비일시적 컴퓨터 판독가능한 기억 장치(non-transitory computer readable storage device) 실시예에서는, 컴퓨터 프로세서에 의한 명령어의 실행이, 조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출하고, 컴퓨터 프로세서에 의해 인터랙션 에리어에 기초하여 복수의 주목 대상 중 적어도 일부를 추출하며, 복수의 주목 대상으로부터 선택 후보를 추출하고, 복수의 주목 대상 중 적어도 일부를 디스플레이 상에 표시하며, 복수의 주목 대상 중 다른 것에 비해 디스플레이 상의 선택 후보를 강조하는 것을 포함하는 프로세스를 수행한다.
한 양태는 디스플레이가 무선 모바일 단말 장치에 통합되어 있고, 복수의 주목 대상은 소프트웨어 키보드의 키를 포함하는 것이다.
위에서 설명했듯이, 본 발명에 따르면, 제한된 표시 영역을 효율적으로 이용하게 하는 상태에서 사용자는 표시 영역에 있는 복수의 선택 대상들 중에서 원하는 선택 대상을 선택할 수 있다.
도 1은 본 발명의 제1 실시예에 따른 정보 처리 장치가 지정 영역 및 지정 영역의 중심 좌표를 추출하는 원리를 설명하는 도면이고,
도 2는 실시예에 따른 정보 처리 장치가 소프트웨어 키보드에 의한 키 입력 조작에 적용되는 예를 설명하는 도면이며,
도 3은 실시예에 따른 정보 처리 장치의 기능 구성을 설명하는 도면이고,
도 4는 실시예에 따른 정보 처리 장치를 설명하는 하드웨어 구성도이며,
도 5는 도 2에 도시된 예에서 조작체가 이동된 후의 표시의 한 예를 설명하는 도면이고,
도 6은 도 2에 도시된 예에서 키 입력 조작 동안의 표시의 한 예를 설명하는 도면이며,
도 7은 소프트웨어 키보드에 의한 키 입력 조작에 적용되는 실시예에 따른 정보 처리 장치에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이고,
도 8은 실시예에 따른 정보 처리 장치가 지도 상의 핀 선택 조작에 적용되는 한 예를 설명하는 도면이며,
도 9는 도 8에 도시된 예에서 조작체의 위치에 따라 변하는 표시의 한 예를 설명하는 도면이고,
도 10은 지도 상의 핀 선택 조작에 적용되는 실시예에 따라 정보 처리 장치에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이며,
도 11은 본 발명의 제2 실시예에 따른 정보 처리 장치의 기초로서 작용하는 일반적으로 이용 가능한 정보 처리 장치의 기능을 설명하는 도면이고,
도 12는 실시예에 따른 정보 처리 장치의 기능을 설명하는 도면이며,
도 13은 실시예에 따른 정보 처리 장치의 기능 구성을 설명하는 도면이고,
도 14는 실시예에 따른 정보 처리 장치에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이다.
이하, 본 발명의 양호한 실시예들에 대해 첨부되는 도면을 참조하여 상세하게 설명하겠다. 주목할 것은 이 명세서와 첨부되는 도면에서 실질적으로 동일한 기능 및 구조를 갖는 구성요소들은 동일한 인용부호에 의해 지칭되고 이러한 구성요소들에 대한 반복적인 설명은 생략된다는 것이다.
이하에서 실시예들에 대한 상세한 설명을 아래의 순서에 따라 기재하겠다.
1. 제1 실시예
1-1. 지정 영역 및 지정 영역의 중심 좌표를 추출하는 원리
1-2. 소프트웨어 키보드에 의한 키 입력 조작
1-3. 정보 처리 장치의 기능 구성
1-4. 정보 처리 장치를 설명하는 하드웨어 구성도
1-5. 조작체가 이동된 후의 표시의 예
1-6. 키 입력 조작 동안의 표시의 예
1-7. 정보 처리 장치에 의해 수행되는 조작의 흐름(키 입력 조작이 수행될 때)
1-8. 지도 상의 핀 선택 조작
1-9. 조작체의 위치에 따라 변하는 표시의 예
1-10. 정보 처리 장치에 의해 수행되는 조작의 흐름(지도 상에서 핀이 선택될 때)
2. 제2 실시예
2-1. 기초로서 작용하는 일반적으로 이용 가능한 정보 처리 장치의 기능
2-2. 정보 처리 장치의 기능
2-3. 정보 처리 장치의 기능 구성
2-4. 정보 처리 장치에 의해 수행되는 조작의 흐름(기능 불량을 방지하는)
3. 변형례
4. 결론
<1. 제1 실시예>
[1-1. 지정 영역 및 지정 영역의 중심 좌표를 추출하는 원리]
도 1은 본 발명의 제1 실시예에 따른 정보 처리 장치가 복수의 선택 대상들로부터 주목 대상 및 선택 후보를 추출하는 원리를 설명하는 도면이다. 도 1에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)는 조작체(OP)의 위치를 검출하기 위한 위치 검출면(211A)을 갖는다. 예를 들어, 위치 검출면(211A)이 정전기적 터치 패널로 이루어지면, 위치 검출면(211A)에 대한 조작체(OP)의 근접도가 위치 검출면(211A)의 표면 상의 커패시턴스의 변화로서 계측된다. 위치 검출면(211B)은 위치 검출면(211B)과 접촉하거나 근접해 오는 조작체(OP)에 의해 위치 검출면(211B)의 커패시턴스가 변하는 것을 나타낸다. 아래의 설명에서, 커패시턴스의 변화는, 예를 들어, 조작체(OP)가 위치 검출면(211)에 근접해 있지 않은 상태에 대한 값의 변화를 의미한다.
이 경우에, 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)는 각각의 계측점에서의 커패시턴스의 변화가 위치 검출면(211D)으로부터의 임계치(예를 들어, 접촉임계치)보다 더 큰 영역을 접촉 영역(214)으로서 추출한다. 접촉 영역(214)은 다음에 설명할 지정 영역의 한 예이다. 그러므로, 아래의 설명에서, 지정 영역은 접촉 영역(214)으로 치환될 수도 있을 것이다. 이 경우에, 임계치는 조작체(OP)가 위치 검출면(211)과 접촉해 있을 때의 커패시턴스의 변화로서 정의되며, 조작체(OP)가 위치 검출면(211)과 접촉하고 있는 영역이 접촉 영역(214)으로서 추출된다. 선택적으로, 임계치는 조작체(OP)가 위치 검출면(211)에 근접해 있을 때의 커패시턴스의 변화로서 정의될 수도 있을 것이다. 이 경우에, 정보 처리 장치(100A)는 조작체(OP)가 위치 검출면(211)에 근접해 있는 영역을 지정 영역으로서 추출할 수 있다. 예를 들어, 접촉 영역(214)은 다음에 설명할 주목 대상들을 추출하기 위해 이용된다.
이 경우에, 정보 처리 장치(100A)는 위치 검출면(211)에 대한 조작체(OP)의 근접도(the degree of proximity)를 계측하기 위해 정전기적 터치 패널을 이용한다. 그러나, 이용되는 터치 패널은 정전기적 터치 패널로 제한되는 것이 아니다. 예를 들어, 광학식 터치 패널 등이 근접도를 계측하기 위해 이용될 수도 있을 것이다. 이 경우에, 정보 처리 장치(100A)는 근접도가 임계치보다 더 큰 영역을 지정 영역으로서 추출한다. 그러나, 위치 검출면(211)에 대한 근접도는 계측되지 않아도 된다. 예를 들어, 정보 처리 장치(100A)가 위치 검출면(211)과 접촉해 있는 조작체(OP)를 검출하면, 정보 처리 장치(100A)는 조작체(OP)와 접촉해 있는 것으로 검출되는 지정 영역을 추출할 수 있다.
정보 처리 장치(100A)는 예를 들어 접촉 영역(214)으로부터 중심 좌표(212)를 산출할 수 있다. 예를 들어, 정보 처리 장치(100A)는 위치 검출면(211C) 상의 계측점들 중에서 커패시턴스(213)의 무게 중심점을 중심 좌표(212)로서 산출할 수 있다. 그러나, 정보 처리 장치(100A)는 다른 방법을 이용하여 중심 좌표(212)를 산출할 수도 있다. 예를 들어, 커패시턴스(213)가 최대로 변하는 좌표가 중심 좌표(212)로서 산출될 수도 있을 것이다. 선택적으로, 접촉 영역(214)의 무게 중심점의 좌표는 커패시턴스(213) 등과 같은 근접도를 고려함이 없이 중심 좌표(212)로서 산출될 수도 있을 것이다. 중심 좌표(212)는 예를 들어 다음에 설명할 선택 후보를 추출하기 위해 이용된다.
위와 같은 제어에 따라, 정보 처리 장치(100A)는 접촉 영역(214) 및 중심 좌표(212)를 추출할 수 있다.
[1-2. 소프트웨어 키보드에 의한 키 입력 조작 ]
도 2는 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)가 무선 모바일 단말 장치 등과 같은 모바일 전자 장치 상에서 소프트웨어 키보드에 의한 키 입력 조작에 적용되는 한 예를 설명하는 도면이다. 도 2에 도시된 바와 같이, 사용자는 정보 처리 장치(100A)의 표시 영역(241A)에 표시된 소프트웨어 키보드를 이용하여 조작체(OP)에 의해 키 입력 조작을 수행하려고 시도하고 있다. 사용자가 조작체(OP)를 위치 검출면(211E)에 접촉 또는 근접시켜 가면, 정보 처리 장치(100A)는 접촉 영역(214) 및 중심 좌표(212)를 추출한다. 위치 검출면(211)과 표시 영역(241)은 정보 처리 장치(100A) 상에 중첩되어 있는 방식으로 제공된다. 위치 검출면(211)과 표시 영역(241)의 중첩되어 있는 위치들 사이의 대응은 정보 처리 장치(100A)에서 관리된다. 그러므로, 위치 검출면(211)과 표시 영역(241)에서 중첩되어 있는 각각의 위치는 정보 처리 장치(100A)에 의해 대응 위치로서 인식된다.
정보 처리 장치(100A)는 예를 들어 접촉 영역(214)에 포함된 키 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C"(영숫자들의 예)를 주목 대상으로서 추출할 수 있다. 접촉 영역은 표시와 인터랙트(interact)하는 사용자의 손가락 또는 다른 조작체의 일부의 풋프린트 내에서 키를 가리는 가려진 영역이라고 해석될 수도 있을 것이다. 또한, 정보 처리 장치(100A)는 예를 들어 중심 좌표(212)의 위치에 있는 키 "S"를 선택 후보로서 추출할 수 있다. 정보 처리 장치(100A)는 예를 들어 추출된 키들을 사용자에 의해 눌려진 키들로부터 별도로 표시하는 방식으로 그러한 키들을 주목 대상으로서 표시할 수 있다. 표시 영역(241B)에서, 주목 대상으로서 추출된 키 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C"는 정보 처리 장치(100A)에 의해 윈도우(WI)에 표시된다.
표시 영역(241B)에 도시된 바와 같이, 정보 처리 장치(100A)는 예를 들어 추출된 키 "S"를 주목 대상으로서 추출된 다른 키 "Q", "W", "E", "R", "A", "D", "F", "Z", "X", "C"보다 더 눈에 띄게 하는(또는 예를 들어 색상, 축척, 커서, 또는 기하학적 표시에 의해 강조되게 하는) 방식으로 그러한 키 "S"를 선택 후보로서 표시할 수 있다. 표시 영역(241B)에는 입력란(IN)이 배치되어 있다. 조작체(OP)에 의해 선택 조작이 수행되면, 선택 후보로서 추출된 키 "S"가 커서(CU)의 위치에 입력된다. 커서(CU)는 입력란(IN)에서 입력 부분을 나타낸다. 예를 들어, 표시 영역(241)에는 압력 센서가 중첩되어 있고, 정보 처리 장치(100A)는 조작체(OP)에 의해 가해지고 압력 센서에 의해 검출된 누르는 힘에 따라 선택 조작이 수행되는 것인지 여부를 판단할 수 있을 것이다.
[1-3. 정보 처리 장치의 기능 구성]
도 3은 본 발명의 제1 실시예에 따른 정보 처리 장치의 기능 구성을 설명하는 도면이다. 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)는 적어도 지정 영역 검출부(110), 주목 대상 추출부(120), 선택 후보 추출부(130), 및 표시 제어부(140)를 포함한다.
지정 영역 검출부(110)는 위치 검출 장치(210)를 포함하고, 표시 영역(241)에서 조작체(OP)에 의해 지정된 영역을 지정 영역(예를 들어, 접촉 영역(214))으로서 검출하는 기능을 갖는다. 위에서 설명했듯이, 지정 영역 검출부(110)는 예를 들어 위치 검출면(211A)에 대한 조작체(OP)의 근접도에 따라 변하는 소정의 파라미터에 기초하여 조작체(OP)에 의해 지정된 영역을 검출한다.
주목 대상 추출부(120)는 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에 기초하여 표시 영역(241)에서 선택 대상의 일부 또는 전부를 복수의 주목 대상으로서 추출하는 기능을 갖는다. 앞서 설명한 바와 같은 소프트웨어 키보드의 예에서는, 선택 대상들이 키보드 상에 도시된 키에 대응한다. 앞서 설명한 바와 같은 소프트웨어 키보드의 예에서는, 주목 대상들이 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C" 등과 같은 키에 대응한다.
도 2를 참조하여 앞서 설명한 바와 같이, 주목 대상 추출부(120)는 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에서 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C" 등과 같은 키, 즉 복수의 선택 대상을 복수의 주목 대상으로서 추출할 수 있다. 그러나, 주목 대상을 추출하는 방법은 위의 예로 제한되는 것이 아니다. 예를 들어, 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에서 복수의 선택 대상으로부터 소정의 개수의 선택 대상이 복수의 주목 대상으로서 추출될 수도 있을 것이다.
예를 들어, 선택 대상의 개수가 미리 5개로 정의되면, 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에서 복수의 선택 대상, 즉, 키 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C"로부터 5개 선택 대상(예를 들어, "W", "A", "S", "D", "Z")이 복수의 주목 대상으로서 추출될 수도 있을 것이다. 소정의 개수의 선택 대상이 선택될 때까지 예를 들어 중심 좌표(212)에 대한 거리의 오름차순으로 선택 대상을 선택함으로써 소정의 개수의 선택 대상이 추출된다.
주목 대상 추출부(120)는 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에 기초하여 판단 영역을 산출하고, 판단 영역에서 복수의 선택 대상을 복수의 주목 대상으로서 추출할 수도 있을 것이다. 주목 대상 추출부(120)는 예를 들어 지정 영역에 포함된 소정의 형상의 영역 또는 지정 영역을 포함하는 소정의 형상의 영역을 판단 영역으로서 산출할 수도 있을 것이다. 소정의 형상은 사각형, 원형, 또는 타원형일 수 있을 것이다. 소정의 형상은 특정하게 제한된 것이 아니다. 주목 대상 추출부(120)는 예를 들어 지정 영역에 포함된 소정의 형상의 영역들 중에서 최대의 영역 또는 지정 영역을 포함하는 소정의 형상의 영역들 중에서 최대의 영역을 판단 영역으로서 산출할 수도 있을 것이다.
선택 후보 추출부(130)는 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상으로부터 선택 후보를 추출하는 기능을 갖는다. 복수의 주목 대상으로부터 선택 후보를 추출하는 각종 방법들이 있다. 선택 후보를 추출하는 방법은 특정하게 제한된 것이 아니다. 예를 들어, 선택 후보 추출부(130)는 위치 검출면(211)에 대한 조작체(OP)의 근접도에 따라 변하는 소정의 파라미터에 기초하여 무게 중심점의 좌표를 중심 좌표(212)로서 산출하고, 그렇게 산출된 중심 좌표(212)에 기초하여 선택 후보를 추출할 수 있다.
주목할 것은 선택 후보 추출부(130)는 소정의 파라미터가 가장 크게 변하는 좌표를 중심 좌표(212)로서 산출하고, 산출된 중심 좌표(212)에 기초하여 선택 후보를 추출할 수도 있다는 것이다. 선택적으로, 선택 후보 추출부(130)는 근접도를 고려함이 없이 접촉 영역(214)의 무게 중심점의 좌표를 중심 좌표(212)로서 산출하고, 산출된 중심 좌표(212)에 기초하여 선택 후보를 추출할 수 있을 것이다. 예를 들어, 선택 후보 추출부(130)는 산출된 중심 좌표(212)에 가장 가까운 위치에 있는 주목 대상을 선택 후보로서 추출할 수 있다.
표시 제어부(140)는 표시 영역(241)에서 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상을 표시하도록 제어를 수행하는 기능을 가지며, 표시 영역(241)에서 선택 후보 추출부(130)에 의해 추출된 선택 후보를 강조하여 표시한다. 도 2에서 표시 영역(241B)을 참조하여 설명한 바와 같이, 표시 제어부(140)는 선택 후보로서 추출된 키 "S"가 주목 대상으로서 추출된 다른 키 "Q", "W", "E", "R", "A", "D", "F", "Z", "X", "C"보다 더 눈에 띄게 하는 방식으로 그러한 키 "S"를 표시하도록 제어를 수행하므로, 선택 후보가 표시 영역(241)에서의 표시에서 강조되는 방식으로 제어가 수행될 수 있다.
그러나, 선택 후보를 강조하는 방법은 특정하게 제한된 것이 아니다. 예를 들어, 키 "S"는 도 2의 표시 영역(241B)에서 선택 후보로서 도시된 것과 같이 굵은 글씨로 강조될 수도 있을 것이다. 선택적으로는, 강조되도록 점멸할 수도 있을 것이다. 또 다른 선택적으로는, 주목 대상으로서 추출된 다른 키의 색상과 다른 색상으로 표시되어 강조될 수도 있을 것이다.
또한, 표시 제어부(140)가 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상을 표시 영역(241)에 표시하도록 제어를 수행할 때, 표시 제어부(140)는 복수의 주목 대상을 표시 영역(241)에 어떤 배치로든 배치할 수 있을 것이다. 예를 들어, 도 2에 도시된 바와 같이, 복수의 주목 대상이 지정 영역(예를 들어, 접촉 영역(214))에 배치된 채로 추출되고, 그러한 복수의 주목 대상들의 각각 사이의 배치는 여전히 유지된 상태에서, 복수의 주목 대상은 그러한 복수의 주목 대상들의 각각 사이의 거리가 확대/감소된 후 또는 거리를 변화시킴이 없이 표시 영역(241)에 배치될 수도 있을 것이다. 주목 대상 추출부(120)에 의해 단 하나의 주목 대상만 추출되면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 주목 대상을 표시 영역(241)에 표시하지 않도록 제어를 수행할 수도 있을 것이다. 지정 영역 검출부(110)가 지정 영역을 검출한 후 소정의 시간이 경과하기 전에 선택 조작 검출부(110)가 조작체(OP)에 의해 수행된 선택 조작을 검출하면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상을 표시 영역(241)에 표시하지 않도록 제어를 수행할 수 있을 것이다.
정보 처리 장치(100A)는 또한 표시부(150)를 더 포함할 수 있을 것이다. 표시부(150)는 예를 들어 표시 장치로 이루어진다. 표시부(150)는 표시 영역(241)을 가지며, 표시 제어부(140)에 의해 수행된 제어에 따라 표시 영역(241)에 표시하는 기능을 갖는다. 또한, 표시부(150)는 실행부(180)가 소정의 처리를 실행할 때 각종 정보가 표시되는 경우에 이용된다. 도 2를 참조하여 설명된 예에서는, 표시부(150)가 표시 제어부(140)에 의해 수행된 제어에 따라 입력 키, 커서(CU), 윈도우(WI), 입력란(IN)을 표시 영역(241)에 표시할 수 있다.
정보 처리 장치(100A)는 또한 도시되지 않은 기억부를 더 포함할 수 있을 것이다. 도시되지 않은 기억부는 예를 들어 비휘발성 메모리 등과 같은 기억 장치로 이루어진다. 기억부는 주목 대상 추출부(120), 선택 후보 추출부(130), 표시 제어부(140), 선택부(170), 실행부(180) 등을 실현하기 위한 프로그램을 기억하는 기능을 가지며, 프로그램이 실행될 때 이용되는 각종 데이터 등을 기억하는 기능을 갖는다. 또한, 기억부는 각종 임계치를 기억할 수도 있다.
주목 대상 추출부(120), 선택 후보 추출부(130), 표시 제어부(140), 선택부(170), 실행부(180) 등은 예를 들어 CPU(Central Processing Unit) 및 RAM(Random Access Memory)으로 이루어지며, CPU가 도시되지 않은 기억부에 기억된 프로그램을 RAM에 추출하여 프로그램을 실행하게 함으로써 그 기능이 실현된다. 그러나, 구성이 위의 예로 제한된 것은 아니다. 주목 대상 추출부(120), 선택 후보 추출부(130), 표시 제어부(140), 선택부(170) 및 실행부(180)의 일부는 전용 하드웨어로 이루어질 수도 있을 것이다.
또한, 정보 처리 장치(100A)는 선택 조작 검출부(160), 선택부(170), 실행부(180) 등을 더 포함할 수도 있을 것이다. 선택 조작 검출부(160), 선택부(170) 및 실행부(180)에 대해 다음에서 상세하게 설명하겠다.
[1-4. 정보 처리 장치의 하드웨어 구성]
도 4는 본 발명의 제1 실시예에 따른 정보 처리 장치를 설명하는 하드웨어 구성도이다. 도 4에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)는 위치 검출 장치(210), CPU(220), RAM(230), 표시 장치(240), 비휘발성 메모리(250), 압력 센서(260) 등을 포함한다.
위치 검출 장치(210)는 위치 검출면(211)을 가지며, 위치 검출면(211)에 대한 조작체(OP)의 근접 좌표 또는 접촉 좌표를 검출하는 기능을 갖는다. 위치 검출 장치(210)가 위치 검출면(211)과 조작체(OP) 사이의 거리에 따라 변하는 소정의 파라미터를 검출할 수 있으면, 검출된 소정의 파라미터가 임계치보다 더 큰 영역이 지정 영역으로서 검출된다. 조작체(OP)가 위치 검출면(211)과 접촉해 있는 영역을 위치 검출 장치(210)가 검출할 수 있으면, 검출된 영역은 지정 영역으로서 이용될 수 있을 것이다.
예를 들어, 정전기적 터치 패널이 위치 검출 장치(210)로서 이용될 수 있다. 정전기적 터치 패널에 따르면, 커패시턴스의 변화가 위치 검출면(211)과 조작체(OP) 사이의 거리에 따라 변하는 소정의 파라미터로서 검출될 수 있다. 또한, 예를 들어, 광학식 터치 패널이 위치 검출 장치(210)로서 이용될 수 있다. 광학식 터치 패널에 따르면, 입사광의 강도의 변화가 위치 검출면(211)과 조작체(OP) 사이의 거리에 따라 변하는 소정의 파라미터로서 검출될 수 있다.
또한, 예를 들어, USB(Universal Serial Bus) 카메라가 위치 검출 장치(210)로서 이용될 수 있다. USB 카메라가 위치 검출 장치(210)로서 이용되면, 위치 검출 장치(210)가 아닌 다른 장치가 예를 들어 조작체(OP)가 위치 검출 장치(210)에 접촉 또는 근접해 있는지를 판단하기 위해 이용되는 소정의 파라미터를 검출할 수 있을 것이다.
CPU(220)는 연산 처리 장치 및 제어 장치로서 기능하며, 정보 처리 장치(100A)에서의 전반적인 조작 또는 그 일부를 비휘발성 메모리(250) 및 RAM(230)에 기억된 각종 프로그램에 따라 제어한다.
RAM(230)은 예를 들어 CPU(220)에 의해 이용되는 프로그램 및 실행중에 필요에 따라 변화하는 파라미터를 기억한다.
표시 장치(240)는 LCD(Liquid Crystal Display) 및 유기 EL(Electroluminescence) 표시 장치 등과 같이 사용자에게 정보를 시각적으로 통지할 수 있는 장치로 이루어진다. 표시 장치(240)는 예를 들어 정보 처리 장치(100A)에 의해 수행되는 각종 처리로부터 얻어지는 결과를 출력한다. 더 자세하게는, 표시 장치(240)는 정보 처리 장치(100A)에 의해 수행된 각종 처리로부터 얻어지는 결과를 표시 영역(241)에 텍스트 또는 이미지로서 표시한다. 또한, 표시 장치(240)는 정보 처리 장치(100A) 내에 제공되거나, 또는 정보 처리 장치(100A)의 외부에 존재될 수도 있을 것이다.
비휘발성 메모리(250)는 데이터 기억 장치이며, 예를 들어 HDD(Hard Disk Drive) 등과 같은 자기 기억 장치, 반도체 기억 장치, 광학식 기억 장치, 또는 자기광학식 기억 장치로 이루어진다. 비휘발성 메모리(250)는 각종 데이터 및 CPU(220)에 의해 실행되는 프로그램을 기억한다.
압력 센서(260)는 조작체(OP)에 의해 가해진 누르는 힘을 검출하는 기능을 갖는다. 압력 센서(260)에 의해 검출되는 조작체(OP)에 의해 가해진 누르는 힘은 예를 들어 조작체(OP)에 의해 가해지는 단위 면적 당 누르는 힘이다. 조작체(OP)에 의해 가해진 누르는 힘이 임계치보다 더 크면, 압력 센서(260)는 그 효과를 나타내는 신호를 출력할 수 있을 것이다. 이 신호를 검출함으로써, 정보 처리 장치(100A)는 조작체(OP)에 의해 가해진 누르는 힘이 임계치보다 더 크다고 판단할 수 있고, 예를 들어 조작체(OP)에 의해 선택 조작이 수행된다고 판단할 수 있다.
본 발명의 실시예에 따른 정보 처리 장치(100A)의 기능을 실현할 수 있는 하드웨어 구성의 예는 위에서 설명하였다. 위 구성요소들의 각각은 일반적으로 사용되는 부재로 이루어질 수 있거나, 또는 각각의 구성요소의 기능을 위한 전용 하드웨어로 이루질 수 있다. 그러므로, 이용되는 하드웨어 구성은 본 발명의 실시예가 시행될 때의 기술 상태에 따른 필요에 따라 변할 수 있을 것이다.
다른 실시예에 따른 정보 처리 장치(100A)가 유사한 하드웨어 구성에 의해 실현될 수 있을 것이다.
[1-5. 조작체가 이동된 후의 표시의 예]
도 5는 도 2에 도시된 예에서 조작체가 이동된 후 표시의 한 예를 설명하는 도면이다. 도 5에 도시된 바와 같이, 사용자가 조작체(OP)를 이동시키면, 정보 처리 장치(100A)는 조작체(OP)의 위치에 따라 표시 영역(241)의 윈도우(WI)에 주목 대상 및 선택 후보를 표시한다. 도 5에 도시된 예에서는, 사용자가 조작체(OP)를 이동시키기 전에, 표시 제어부(140)는 주목 대상으로서 추출된 키 "Q", "W", "E", "R", "A", "S", "D", "F", "Z", "X", "C"가 표시 영역(241C)의 윈도우(WI)에 표시되도록 제어를 수행하고, 표시 제어부(140)는 선택 후보로서 추출된 키 "S"가 강조된 방식으로 표시되도록 제어를 수행한다. 조작체(OP)에 의해 이루어진 접촉 면적의 감지된 촉감 중심에 대해 가장 가까운 키의 다른 키에 대한 근접은 인터랙션 에리어에 대한 조작체의 이동량에 관련되어 있다.
한편, 사용자가 조작체(OP)를 이동시킨 후, 지정 영역 검출부(110)는 새로운 지정 영역을 검출한다. 주목 대상 추출부(120)는 지정 영역에 기초하여 키 "T", "Y", "U", "I", "G", "H", "J", "K", "B", "N", "M"을 주목 대상으로서 추출하고, 선택 후보 추출부(130)는 키 "J"를 선택 후보로서 추출한다. 그리고, 표시 제어부(140)는 주목 대상으로서 추출된 키 "T", "Y", "U", "I", "G", "H", "J", "K", "B", "N", "M"이 표시 영역(241D)의 윈도우(WI)에 표시되도록 제어를 수행하고, 표시 제어부(140)는 선택 후보로서 추출된 키 "J"가 강조된 방식으로 표시되도록 제어를 수행한다.
[1-6. 키 입력 조작 동안의 표시의 예]
도 6은 도 2에 도시된 예에서 키 입력 조작 동안의 표시의 한 예를 설명하는 도면이다. 이 경우에, 사용자는 선택 조작을 수행함으로써 입력란(IN)에 문자 또는 기호를 입력한다. 다시 말해서, 정보 처리 장치(100A)는 선택 조작 검출부(160) 및 선택부를 더 포함할 수 있을 것이다.
선택 조작 검출부(160)는 조작체(OP)에 의해 수행된 선택 조작을 검출하는 기능을 갖는다. 선택 조작 검출부(160)는 예를 들어 압력 센서(260)를 포함하고, 압력 센서(260)에 의해 검출되는 조작체(OP)에 의해 가해진 누르는 힘에 따라 조작체(OP)에 의해 수행된 선택 조작을 검출한다. 예를 들어, 압력 센서(260)에 의해 검출되는 조작체(OP)에 의해 가해진 누르는 힘이 임계치보다 더 크다고 판단되면, 선택 조작 검출부(160)는 조작체(OP)에 의해 수행된 선택 조작을 검출할 수 있다.
선택부(170)는 선택 조작 검출부(160)가 선택 조작을 검출할 때 선택 후보 추출부(130)에 의해 추출된 선택 후보를 선택 결과로서 선택하는 기능을 갖는다.
정보 처리 장치(100A)가 소프트웨어 키보드에 적용되면, 복수의 선택 대상은 문자 및 기호로 이루어진다. 예를 들어, 이 경우에, 실행부(180)는 선택부(170)에 의해 선택된 문자 또는 기호를 표시 영역(241E)의 입력란(IN)에 설정함으로써 소정의 처리를 실행할 수 있다. 실행부(180)는 선택부(170)에 의해 선택된 "ABCD"를 표시 영역(241E)의 입력란(IN)에 입력한다.
주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상이 표시되는 위치는 특정하게 제한된 것이 아니다. 예를 들어, 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상은 고정된 위치에 표시될 수 있을 것이다. 예를 들어, 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상은 커서(CU)(또는 삽입점 커서)의 위치에 따른 위치에 표시될 수 있을 것이다. 다시 말해서, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상이 커서(CU)의 위치에 따른 위치에 표시되도록 제어를 수행할 수 있다. 도 6에 도시된 예에서는, 표시 영역(241F)의 윈도우(WI)가 커서(CU)의 위치를 추종하도록 이동하고, 복수의 주목 대상이 윈도우(WI)에 표시된다.
[1-7. 정보 처리 장치에 의해 수행되는 조작의 흐름(키 입력 조작이 수행될 때)]
도 7은 소프트웨어 키보드에 의한 키 입력 조작에 적용되는 본 발명의 제1 실시예에 따른 정보 처리 장치에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이다. 도 7에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)의 선택 조작 검출부(160)는 조작체(OP)에 의해 가해진 누르는 힘을 검출한다. 누르는 힘이 임계치 이상인 것으로 판단되면(스텝 S101에서 “예”), 선택부(170)는 조작체(OP)에 의해 선택 조작이 수행되었다고 판단하고 키 누르기 명령어를 실행하며(스텝 S102), 그 후 스텝 S101이 수행된다.
누르는 힘이 임계치 미만이라고 판단되면(스텝 S101에서 “아니오”), 지정 영역 검출부(110)는 조작체(OP)에 의해 발생된 위치 검출면(211) 상에서의 커패시턴스의 변화에 기초하여 접촉 영역(214)을 추출하고(스텝 S103), 접촉 영역(214)으로부터 중심 좌표(212)를 추출한다(스텝 S104). 주목 대상 추출부(120)는 접촉 영역(214)으로부터 판단 영역에 있는 키를 주목 대상 키로서 산출하며(스텝 S105), 선택 후보 추출부(130)는 중심 좌표(212)에 기초하여 주목 대상 키로부터 선택 후보 키를 추출한다(스텝 S106).
표시 제어부(140)는 주목 대상 키 및 선택 후보 키에 기초하여 팝업 표시 및 하이라이트 표시를 갱신하고(스텝 S107), 그 후 스텝 S101이 수행된다. 위의 예에서, 팝업 표시는 윈도우(WI)에서의 주목 대상 키의 표시에 대응하고, 하이라이트(또는 굵은) 표시는 윈도우(WI)에서의 선택 후보 키의 강조 표시에 대응한다.
[1-8. 지도 상의 핀 선택 조작 ]
도 8은 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)가 지도 상의 핀 선택(또는 지리적 특징) 조작에 적용되는 예를 설명하는 도면이다. 도 8에 도시된 바와 같이, 사용자는 정보 처리 장치(100A)의 표시 영역(241G)에 표시된 지도 상의 핀을 조작체(OP)에 의해 선택하려고 시도하고 있다. 사용자가 조작체(OP)를 위치 검출면(211E)에 접촉 또는 근접시켜 가면, 지정 영역 검출부(110)는 접촉 영역(214) 및 중심 좌표(212)를 추출한다.
예를 들어, 주목 대상 추출부(120)는 표시 영역(241H)의 접촉 영역(214)에 있는 핀을 주목 대상으로서 추출할 수 있다. 예를 들어, 도 8에 도시된 바와 같이, 선택 후보 추출부(130)는 중심 좌표(212)의 위치에 가장 가깝게 배치된 핀을 선택 후보로서 추출할 수 있다. 예를 들어, 표시 제어부(140)는 주목 대상으로서 추출된 핀이 이미 표시된 핀으로부터 별도로 표시되게 하는 방식으로 표시할 수 있다. 표시 영역(241I)에서, 주목 대상으로서 추출된 핀이 윈도우(WI)에 표시되도록 표시 제어부(140)에 의해 제어된다. 핀 외에, 지리적 특징이 색상, 축척(크기), 또는 기하학적 표시에 의해 강조될 수 있을 것이다.
표시 영역(241H)에 도시된 바와 같이, 예를 들어, 표시 제어부(140)는 선택 후보로서 추출된 핀에 대해 하이라이트 표시(HI)를 적용하도록 제어를 수행할 수 있다. 선택 조작 검출부(160)가 조작체(OP)에 의해 수행된 선택 조작을 검출할 때, 실행부(180)는 선택 후보로서 추출된 핀에 따른 처리를 실행한다. 예를 들어, 실행부(180)는 선택 후보 추출부(130)에 의해 선택 후보로서 추출된 핀에 관한 정보를 표시하도록 제어를 수행한다.
이 경우에, 주목 대상 추출부(120)는 표시 영역(241H)의 접촉 영역(214)에 있는 핀을 주목 대상으로서 추출하지만, 주목 대상을 추출하는 방법은 위의 예로 제한된 것이 아니다. 예를 들어, 주목 대상 추출부(120)는 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에 있는 복수의 선택 대상의 밀도에 기초하여 판단 영역을 산출할 수 있을 것이다. 이 경우에, 주목 대상 추출부(120)는 판단 영역에 있는 복수의 선택 대상을 복수의 주목 대상으로서 추출할 수 있다. 예를 들어, 주목 대상 추출부(120)는 지정 영역 검출부(110)에 의해 검출된 지정 영역(예를 들어, 접촉 영역(214))에 있는 복수의 선택 대상의 고밀도를 갖는 영역을 판단 영역으로서 산출한다.
위에서 설명했듯이, 표시 제어부(140)가 표시 영역(241)에서 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상을 표시하도록 제어를 수행할 때, 표시 제어부(140)는 표시 영역(241)에서 복수의 주목 대상을 어떠한 배치로든 배치할 수 있을 것이다. 예를 들어, 도 8에 도시된 바와 같이, 표시부분으로서의 지정 영역(예를 들어, 접촉 영역(214))을 클립(clip) 함으로써 복수의 주목 대상이 추출되며, 클립한 표시부분이 확대/감소된 후, 또는 어떤 변화도 없이 복수의 주목 대상이 표시 영역(241)의 윈도우(WI)에 배치될 수 있을 것이다.
[1-9. 조작체의 위치에 따라 변하는 표시의 예]
도 9는 도 8에 도시된 바와 같은 예에서 조작체의 위치에 따라 변하는 표시의 한 예를 설명하는 도면이다. 도 9에 도시된 바와 같이, 사용자는 정보 처리 장치(100A)의 표시 영역(241)에 표시된 지도 상의 핀을 조작체(OP)에 의해 선택하려고 시도하고 있다. 사용자가 조작체(OP)를 표시 영역(241J)의 좌하측에 접촉 또는 근접시켜 가면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 윈도우(WI)가 좌하측에 있는 조작체(OP)와 중첩되지 않는 위치에 표시되도록 제어를 수행한다.
마찬가지로, 사용자가 조작체(OP)를 표시 영역(241K)의 우하측에 접촉 또는 근접시켜 가면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 윈도우(WI)가 우하측에 있는 조작체(OP)와 중첩되지 않는 위치에 표시되도록 제어를 수행한다. 사용자가 조작체(OP)를 표시 영역(241L)의 좌상측에 접촉 또는 근접시켜 가면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 윈도우(WI)가 좌상측에 있는 조작체(OP)와 중첩되지 않는 위치에 표시되도록 제어를 수행한다. 사용자가 조작체(OP)를 표시 영역(241M)의 우상측에 접촉 또는 근접시켜 가면, 표시 제어부(140)는 주목 대상 추출부(120)에 의해 추출된 윈도우(WI)가 우상측에 있는 조작체(OP)와 중첩되지 않는 위치에 표시되도록 제어를 수행한다.
위에서 설명했듯이, 표시 제어부(140)는 지정 영역 검출부(110)에 의해 검출된 지정 영역과 중첩되지 않지만 표시 영역(241) 내에 있는 영역을 표시 영역(241)으로부터 산출하고, 주목 대상 추출부(120)에 의해 추출된 복수의 주목 대상이 산출된 영역에 표시되도록 제어를 수행할 수 있다. 위에서 설명했듯이, 이것은 복수의 주목 대상이 조작체(OP)에 의해 가려져 사용자에게 보이지 않게 되는 것을 방지한다.
[1-10. 정보 처리 장치에 의해 수행되는 조작의 흐름(지도 상에서 핀이 선택될 때)]
도 10은 지도 상의 핀 선택 조작에 적용되는 실시예에 따른 정보 처리 장치에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이다. 도 10에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)의 선택 조작 검출부(160)는 조작체(OP)에 의해 가해진 누르는 힘을 검출한다. 누르는 힘이 임계치 이상인 것으로 판단되면(스텝 S201에서 “예”), 선택부(170)는 조작체(OP)에 의해 선택 조작이 수행된다고 판단하고 키 누르기 명령어를 실행하고(스텝 S202), 그 후 스텝 S201이 수행된다.
누르는 힘이 임계치 미만이라고 판단되면(스텝 S201에서 “아니오”), 지정 영역 검출부(110)는 조작체(OP)에 의해 발생된 위치 검출면(211) 상의 커패시턴스의 변화에 기초하여 접촉 영역(214)을 추출하고(스텝 S203), 접촉 영역(214)으로부터 중심 좌표(212)를 추출한다(스텝 S204). 주목 대상 추출부(120)가 접촉 영역(214)에서 복수의 주목 대상을 발견하지 못하면(스텝 S205에서 “아니오”), 주목 대상 추출부(120)는 스텝 S201로 복귀한다. 주목 대상 추출부(120)가 접촉 영역(214)에서 복수의 주목 대상을 발견하면(스텝 S205에서 “예”), 주목 대상 추출부(120)는 접촉 영역(214)에 대응하는 표시부분을 추출한다(스텝 S206).
표시 제어부(140)는 표시부분이 접촉 영역(214)과 중첩되지 않지만 표시 영역(241) 내에 들어 있게 하는 표시 가능 영역을 추출하고(스텝 S207), 표시 제어부(140)는 표시 가능 영역에 표시부분을 표시함으로써 팝업 표시를 갱신하도록 제어를 수행한다(스텝 S208). 그 후 스텝 S201이 수행된다. 위의 예에서, 팝업 표시는 윈도우(WI)에 있는 주목 대상 키의 표시에 대응한다.
<2. 제2 실시예>
[2-1. 기초로서 작용하는 일반적으로 이용 가능한 정보 처리 장치의 기능 ]
도 11은 본 발명의 제2 실시예에 따른 정보 처리 장치의 기초로서 작용하는 일반적으로 이용 가능한 정보 처리 장치의 기능을 설명하는 도면이다. 도 11에 도시된 바와 같이, 사용자는 정보 처리 장치(100B)의 표시 영역(241N)에 표시된 동화상 재생 화면의 재생 위치를 조작체(OP)에 의해 조절하려고 시도하고 있다. 사용자는 재생 위치를 변화시키기 위해 표시 영역(241O)에 표시된 그랩(GB)을 잡고 이동시키려고 시도하지만, 이 경우에, 사용자가 자신이 그랩(GB)을 잡았다고 생각하는 지정 위치가 그랩(GB)의 위치로부터 변위될 가능성이 크다.
그러한 경우에, 사용자가 그랩(GB)을 이동시키기를 더 이상 원하지 않으면, 재생 위치가 그 변위에 상당하는 거리만큼 변위되는 문제가 있다. 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)는 사용자가 의도하지 않은 그러한 그랩(GB)의 이동을 방지할 수 있다.
[2-2. 정보 처리 장치의 기능 ]
도 12는 본 발명의 제2 실시예에 따른 정보 처리 장치의 기능을 설명하는 도면이다. 도 12에 도시된 바와 같이, 조작체(OP)가 표시 영역(241P)에 접촉 또는 근접되어 가면, 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)는 그랩(GB)이 접촉 영역(214) 내에 들어 있는지 여부를 판단한다. 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)가 그랩(GB)이 접촉 영역(214) 내에 들어 있다고 판단하면, 정보 처리 장치(100B)는 사용자가 조작체(OP)에 의해 그랩(GB)을 이동시키려고 시도하고 있다고 판단하고, 그에 따라 그랩(GB)을 중심 좌표(212A)로 이동시키지 않는다.
그 후, 정보 처리 장치(100B)가 사용자가도 12에 도시된 바와 같이 그랩(GB)을 실제로 이동시키기 위해 조작체(OP)에 의해 조작을 수행한다고 판단하면, 정보 처리 장치(100B)는 중심 좌표(212A), 즉, 이동 조작의 시작점의 좌표로부터 중심 좌표(212B), 즉, 이동 조작의 종료점의 좌표로 그랩을 이동시킬 수 있을 것이다.
[2-3. 정보 처리 장치의 기능 구성]
도 13은 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)의 기능 구성을 설명하는 도면이다. 도 13에 도시된 바와 같이, 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)는 적어도 지정 영역 검출부(110), 판단부(191), 및 표시 제어부(140)를 포함한다. 지정 영역 검출부(110)의 기능은 본 발명의 제1 실시예에 따른 지정 영역 검출부(110)의 기능과 특별하게 다르지 않으며, 그러므로 그에 관한 설명은 생략된다.
판단부(191)는 지정 영역 검출부(110)에 의해 검출된 지정 영역에 기초하여 소정의 범위에 어떠한 이동 대상이든 있는지를 판단하는 기능을 갖는다. 지정 영역 검출부(110)에 의해 검출된 지정 영역에 기초한 소정의 범위는 지정 영역 검출부(110)에 의해 검출된 지정 영역 자체일 수 있거나, 또는 지정 영역 검출부(110)에 의해 검출된 지정 영역에 기초하여 산출된 판단 영역일 수 있을 것이다. 이동 대상은 조작체(OP)에 의해 수행된 이동 조작에 기초하여 이동되며, 근접 조작 또는 접촉 조작에 의해 지정된 위치로 이동된다.
표시 제어부(140)는 다음의 기능을 갖는다. 판단부(191)가 소정의 범위에 아무런 이동 대상도 없다고 판단하면 표시 제어부(140)는 이동 대상을 이동시키도록 제어를 수행하고, 판단부(191)가 소정의 범위에 이동 대상이 존재한다고 판단하면 표시 제어부(140)는 이동 대상의 이동을 제한하도록 제어를 수행한다. 이동 대상의 이동을 제한한다는 것은 예를 들어 이동 대상의 이동을 정지시키는 것을 의미한다.
정보 처리 장치(100B)는 중심 좌표 추출부(192)를 더 포함할 수 있을 것이다. 중심 좌표 추출부(192)는 본 발명의 제1 실시예에 따른 정보 처리 장치(100A)가 중심 좌표(212)를 추출하는 원리에 따라 중심 좌표(212)를 추출하는 기능을 갖는다. 판단부(191)가 예를 들어 소정의 범위에 아무런 이동 대상도 없다고 판단하면, 표시 제어부(140)는 중심 좌표 추출부(192)에 의해 추출된 중심 좌표(212)로 이동 대상을 이동시키도록 제어를 수행할 수 있을 것이다.
정보 처리 장치(100B)는 이동 조작 검출부(193)를 더 포함할 수 있을 것이다. 이동 조작 검출부(193)는 위치 검출면(211) 상의 조작체(OP)에 의해 수행되는 이동 조작을 검출하는 기능을 갖는다. 조작체(OP)를 위치 검출면(211)에 근접시켜 감으로써 또는 조작체(OP)를 위치 검출면(211)과 접촉시켜 감으로써 조작체(OP)에 의한 이동 조작이 수행될 수도 있을 것이다. 이동 조작은 예를 들어 이동 대상의 한 예인 그랩(GB)을 잡고 이동시키기 위한 조작에 대응한다.
정보 처리 장치(100A)는 표시부(150)를 더 포함할 수 있을 것이다. 표시부(150)는 예를 들어 표시 장치로 이루어진다. 표시부(150)는 표시 영역(241)을 가지며, 표시 제어부(140)에 의해 수행되는 제어에 따라 표시 영역(241)에 표시하는 기능을 갖는다. 도 12를 참조하여 설명한 예에서는, 표시부(150)가 표시 제어부(140)에 의해 수행되는 제어에 따라 표시 영역(241)에 동화상 재생 화면, 그랩(GB) 등을 표시할 수 있다.
정보 처리 장치(100B)는 도시되지 않은 기억부를 더 포함할 수도 있을 것이다. 도시되지 않은 기억부는 예를 들어 비휘발성 메모리 등과 같은 기억 장치로 이루어진다. 기억부는 판단부(191), 중심 좌표 추출부(192), 표시 제어부(140) 등을 실현하기 위한 프로그램을 기억하는 기능을 갖고, 프로그램이 실행될 때 이용되는 각종 데이터 등을 기억하는 기능을 갖는다. 또한, 기억부는 각종 임계치를 기억할 수도 있다.
[2-4. 정보 처리 장치에 의해 수행되는 조작의 흐름(기능 불량을 방지하는)]
도 14는 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)에 의해 수행되는 조작의 흐름을 설명하는 플로우차트이다. 도 14에 도시된 바와 같이, 본 발명의 제2 실시예에 따른 정보 처리 장치(100B)의 지정 영역 검출부(110)는 조작체(OP)에 의해 발생된 위치 검출면(211) 상의 커패시턴스의 변화에 기초하여 접촉 영역(214)을 추출하고(스텝 S301), 중심 좌표 추출부(192)는 접촉 영역(214)(스텝 S302)으로부터 중심 좌표(212)를 추출한다.
판단부(191)는 접촉 영역(214) 내에 어떠한 그랩(GB)이든지 있는지를 판단한다(스텝 S303). 판단부(191)가 접촉 영역(214)에 아무런 그랩(GB)도 없다고 판단하면(스텝 S303에서 “아니오”), 표시 제어부(140)는 그랩(GB)을 중심 좌표(212)로 이동시키고(스텝 S304), 그 후 스텝 S306이 수행된다.
판단부(191)가 접촉 영역(214) 내에 그랩(GB)이 있다고 판단하면(스텝 S303에서 “예”), 표시 제어부(140)는 그랩(GB)을 중심 좌표(212)로 이동시키지 않으며(스텝 S305), 그 후 스텝 S306이 수행된다. 그 후, 조작체(OP)에 의해 이동 조작이 수행되면(스텝 S306에서 “예”), 표시 제어부(140)는 중심 좌표(212)의 이동에 기초하여 그랩(GB)을 이동시키고(스텝 S307), 그 후 스텝 S301이 수행된다. 조작체(OP)에 의해 이동 조작이 수행되면(스텝 S306에서 “아니오”), 표시 제어부(140)는 스텝 S301로 복귀한다.
<3. 변형례>
당 기술분야에서 숙련된 자들은 설계 요구 및 다른 요소들에 따라 첨부된 특허청구의 범위 또는 그 동등물의 범위 내에 있는 각종 변형례, 컴비네이션, 서브컴비네이션 및 수정례가 일어날 수 있음을 알 것이다.
<4. 결론>
본 발명의 제1 실시예에 따르면, 제한된 표시 영역을 효율적으로 이용하는 상태에서 표시 영역에 있는 복수의 선택 대상으로부터 원하는 선택 대상이 선택될 수 있다. 더 자세하게는, 본 발명의 제1 실시예에 따르면, 사용자가 소형 대상을 선택하여 결정할 때, 사용자는 쉽게 조작할 수 있다.
또한, 본 발명의 제1 실시예에 따르면, 조작 대상의 접촉 면적 및 조작 판단 영역에 기초하여 선택된 대상이 표시되고, 사용자에게 피드백이 제공되므로, 사용자가 오조작할 가능성이 작아지고 사용자는 쉽게 조작할 수 있다. 또한, 본 발명의 제1 실시예에 따르면, 접촉 면적에 따른 피드백이 표시되고, 사용자는 사용자가 화면을 터치하는 방식에 따라 접촉 면적이 어떻게 달라지는지를 이해하며, 학습을 통해 조작의 정확도를 개선할 것으로 기대된다.
본 발명의 제2 실시예에 따르면, 사용자가 의도하지 않은 이동 대상의 이동을 방지할 수 있다.
본 발명은 2010년 8월 25일에 일본 특허청에 제출되고, 그 전체 내용이 여기에 참고로 통합되는 일본 우선권 특허출원 2010-188126호에 개시된 것과 관련된 요지를 포함한다.

Claims (20)

  1. 정보 처리 장치로서,
    조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출하는 지정 영역 검출부,
    상기 인터랙션 에리어에 기초하여 복수의 주목 대상의 적어도 일부를 추출하는 주목 대상 추출부,
    상기 복수의 주목 대상으로부터 선택 후보를 추출하는 선택 후보 추출부, 및
    상기 복수의 주목 대상 중 적어도 일부를 표시하고 상기 복수의 주목 대상 중 다른 것들에 비해 상기 선택 후보를 강조하는 디스플레이를 포함하는, 정보 처리 장치.
  2. 제1항에 있어서,
    상기 디스플레이는 무선 모바일 단말 장치에 통합되어 있고,
    상기 복수의 주목 대상은 소프트웨어 키보드의 키를 포함하는, 정보 처리 장치.
  3. 제2항에 있어서,
    상기 복수의 주목 대상은 상기 인터랙션 에리어의 풋프린트(footprint) 내에 있는 상기 소프트웨어 키보드의 키인, 정보 처리 장치.
  4. 제2항에 있어서,
    상기 디스플레이는 무선 키보드의 키와 중첩되지 않는 표시 에리어에 상기 복수의 주목 대상을 표시하는, 정보 처리 장치.
  5. 제2항에 있어서,
    상기 디스플레이는 복수의 주목 후보 중 다른 것에 비해 상기 선택 후보를 강조된 영숫자로서 표시하는, 정보 처리 장치.
  6. 제5항에 있어서,
    상기 선택 후보에 대한 강조는 상기 인터랙션 에리어에 대한 상기 조작체의 위치 변화를 검출하여 상기 선택 후보 추출부에 응답하여 다른 영숫자로 변하는, 정보 처리 장치.
  7. 제6항에 있어서,
    상기 다른 영숫자로의 상기 선택 후보의 근접은 상기 인터랙션 에리어에 대한 상기 조작체의 이동량에 관련되는, 정보 처리 장치.
  8. 제1항에 있어서,
    상기 디스플레이는 상기 위치 검출면을 포함하는, 정보 처리 장치.
  9. 제8항에 있어서,
    상기 지정 영역 검출부는 상기 조작체에 의해 접촉될 때 상기 조작체로부터의 압력을 검출하는, 정보 처리 장치.
  10. 제8항에 있어서,
    상기 지정 영역 검출부는 커패시턴스 변화에 응답하는, 정보 처리 장치.
  11. 제1항에 있어서,
    상기 선택 후보 추출부는 상기 위치 검출면에 대해 상기 조작체에 의해 발생되는 중심 좌표 무게 중심점에 대한 상대적 근접도에 의해 상기 선택 후보를 선택하는, 정보 처리 장치.
  12. 제1항에 있어서,
    상기 선택 후보는 삽입점 커서와 굵은 텍스트 중 적어도 하나에 의해 강조되는, 정보 처리 장치.
  13. 제1항에 있어서,
    상기 디스플레이는 전자 지도 장치에 통합되어 있고,
    상기 복수의 주목 대상은 표시된 지리적 에리어 내의 지리적 특징을 포함하는, 정보 처리 장치.
  14. 제13항에 있어서,
    상기 선택 후보는 색상, 축척, 핀 및 기하학적 표시(geometric marker) 중 적어도 하나에 의해 강조되는, 정보 처리 장치.
  15. 제2항에 있어서,
    상기 조작체가 상기 소프트웨어 키보드의 하나 이상의 키를 시야에서 가리면, 상기 디스플레이는 상기 조작체에 의해 가려지지 않은 상기 디스플레이의 표시 영역에 상기 복수의 주목 대상 중 적어도 일부를 표시하는, 정보 처리 장치.
  16. 정보 처리 방법으로서,
    조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출하는 단계,
    컴퓨터 프로세서에 의해 상기 인터랙션 에리어에 기초하여 복수의 주목 대상 중 적어도 일부를 추출하는 단계,
    상기 복수의 주목 대상으로부터 선택 후보를 추출하는 단계, 및
    상기 복수의 주목 대상 중 적어도 일부를 디스플레이 상에 표시하고 상기 디스플레이 상의 상기 선택 후보를 상기 복수의 주목 대상 중 다른 것에 비해 강조하는 단계를 포함하는, 정보 처리 방법.
  17. 제16항에 있어서,
    상기 디스플레이는 무선 모바일 단말 장치에 통합되어 있고,
    상기 복수의 주목 대상은 소프트웨어 키보드의 키를 포함하는, 정보 처리 방법.
  18. 제16항에 있어서,
    상기 디스플레이는 전자 지도 장치에 통합되어 있고,
    상기 복수의 주목 대상은 소정의 지리적 에리어 내의 지리적 특징을 포함하는, 정보 처리 방법.
  19. 비일시적 컴퓨터 판독가능한 기억 장치로서,
    컴퓨터 프로세서에 의해 실행되면,
    조작체에 의해 지정된 위치 검출면의 인터랙션 에리어를 검출하는 단계,
    상기 컴퓨터 프로세서에 의해 상기 인터랙션 에리어에 기초하여 복수의 주목 대상 중 적어도 일부를 추출하는 단계,
    상기 복수의 주목 대상으로부터 선택 후보를 추출하는 단계,
    상기 복수의 주목 대상 중 적어도 일부를 디스플레이 상에 표시하고, 상기 디스플레이 상의 상기 선택 후보를 상기 복수의 주목 대상 중 다른 것에 비해 강조하는 단계를 포함하는 프로세스를 수행하는 컴퓨터 판독가능한 명령어를 기억하고 있는, 비일시적 컴퓨터 판독가능한 기억 장치.
  20. 제19항에 있어서,
    상기 디스플레이는 무선 모바일 단말 장치에 통합되어 있고,
    상기 복수의 주목 대상은 소프트웨어 키보드의 키를 포함하는, 비일시적 컴퓨터 판독가능한 기억 장치.
KR1020110081804A 2010-08-25 2011-08-17 정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품 KR20120019376A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010188126A JP5614173B2 (ja) 2010-08-25 2010-08-25 情報処理装置、情報処理方法およびプログラム
JPJP-P-2010-188126 2010-08-25

Publications (1)

Publication Number Publication Date
KR20120019376A true KR20120019376A (ko) 2012-03-06

Family

ID=44582394

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110081804A KR20120019376A (ko) 2010-08-25 2011-08-17 정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품

Country Status (7)

Country Link
US (2) US9710159B2 (ko)
EP (1) EP2423797A1 (ko)
JP (1) JP5614173B2 (ko)
KR (1) KR20120019376A (ko)
CN (2) CN102591557A (ko)
RU (1) RU2011134672A (ko)
TW (1) TW201229871A (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5614173B2 (ja) * 2010-08-25 2014-10-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP2013041348A (ja) * 2011-08-12 2013-02-28 Kyocera Corp 携帯端末、補助情報表示プログラムおよび補助情報表示方法
JP5647968B2 (ja) * 2011-11-22 2015-01-07 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
WO2013176230A1 (ja) * 2012-05-24 2013-11-28 京セラ株式会社 タッチパネル式入力装置
US10001897B2 (en) * 2012-08-20 2018-06-19 Microsoft Technology Licensing, Llc User interface tools for exploring data visualizations
JP6107489B2 (ja) * 2013-07-11 2017-04-05 富士通株式会社 通信装置及びプログラム
JP6233040B2 (ja) * 2014-01-17 2017-11-22 富士通株式会社 入力装置，表示制御方法，プログラム及び集積回路装置
US10416871B2 (en) 2014-03-07 2019-09-17 Microsoft Technology Licensing, Llc Direct manipulation interface for data analysis
USD888755S1 (en) * 2018-05-07 2020-06-30 Google Llc Display screen or portion thereof with transitional graphical user interface

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7030863B2 (en) * 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
ES2885435T3 (es) 2001-04-30 2021-12-13 Activemap Llc Mapa interactivo presentado electrónicamente
JP4773671B2 (ja) 2002-07-24 2011-09-14 富士通セミコンダクター株式会社 ポインティングデバイスによる入力方法
AU2003264948A1 (en) * 2002-09-30 2004-04-23 Sanyo Electric Co., Ltd. Mobile digital devices
JP2004139321A (ja) * 2002-10-17 2004-05-13 Fujitsu Ten Ltd スクロールバー操作装置
EP1567927B1 (en) 2002-11-29 2013-07-10 Koninklijke Philips Electronics N.V. System and method for user interface with displaced representation of touch area
US7884804B2 (en) 2003-04-30 2011-02-08 Microsoft Corporation Keyboard with input-sensitive display device
CN103398718B (zh) 2004-03-23 2017-04-12 咕果公司 数字地图描绘系统
JP2005301669A (ja) * 2004-04-12 2005-10-27 Seiko Epson Corp 情報処理装置および情報処理プログラム
US8194002B2 (en) * 2004-09-14 2012-06-05 The Boeing Company Situational awareness components of an enhanced vision system
JP4341627B2 (ja) * 2006-01-25 2009-10-07 セイコーエプソン株式会社 キーボードを有さない装置における文字入力
US7777728B2 (en) * 2006-03-17 2010-08-17 Nokia Corporation Mobile communication terminal
CN200950090Y (zh) 2006-07-07 2007-09-19 汉王科技股份有限公司 利用电容变化进行矢量压力测量的装置
US20080141149A1 (en) 2006-12-07 2008-06-12 Microsoft Corporation Finger-based user interface for handheld devices
US7692629B2 (en) * 2006-12-07 2010-04-06 Microsoft Corporation Operating touch screen interfaces
US7936341B2 (en) * 2007-05-30 2011-05-03 Microsoft Corporation Recognizing selection regions from multiple simultaneous inputs
US20090058823A1 (en) * 2007-09-04 2009-03-05 Apple Inc. Virtual Keyboards in Multi-Language Environment
JP2009116583A (ja) 2007-11-06 2009-05-28 Ricoh Co Ltd 入力制御装置および入力制御方法
US8232973B2 (en) * 2008-01-09 2012-07-31 Apple Inc. Method, device, and graphical user interface providing word recommendations for text input
US20090193361A1 (en) * 2008-01-30 2009-07-30 Research In Motion Limited Electronic device and method of controlling same
TWI365397B (en) * 2008-03-17 2012-06-01 Acer Inc Multi-object direction touch selection method and device, electronic device, computer accessible recording media and computer program product
TW200941293A (en) 2008-03-20 2009-10-01 E Ten Information Sys Co Ltd Virtual key input method and its applications
JP2009252083A (ja) * 2008-04-09 2009-10-29 Nec Corp 情報処理装置、ウィンドウ表示方法および表示制御プログラム
US8014943B2 (en) * 2008-05-08 2011-09-06 Gabriel Jakobson Method and system for displaying social networking navigation information
TW201005598A (en) * 2008-07-18 2010-02-01 Asustek Comp Inc Touch-type mobile computing device and display method thereof
JP2010092086A (ja) * 2008-10-03 2010-04-22 Just Syst Corp ユーザ入力装置、デジタルカメラ、入力制御方法、および入力制御プログラム
CN101430632A (zh) * 2008-12-19 2009-05-13 深圳华为通信技术有限公司 触摸屏输入方法、装置和通信终端
JP5174704B2 (ja) * 2009-02-03 2013-04-03 株式会社ゼンリンデータコム 画像処理装置および画像処理方法
KR101062161B1 (ko) 2009-02-16 2011-09-05 삼성메디슨 주식회사 프로브 홀더
US8261206B2 (en) * 2009-02-27 2012-09-04 International Business Machines Corporation Digital map having user-defined zoom areas
US20100235784A1 (en) * 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US8300023B2 (en) * 2009-04-10 2012-10-30 Qualcomm Incorporated Virtual keypad generator with learning capabilities
US8914462B2 (en) * 2009-04-14 2014-12-16 Lg Electronics Inc. Terminal and controlling method thereof
US10705692B2 (en) * 2009-05-21 2020-07-07 Sony Interactive Entertainment Inc. Continuous and dynamic scene decomposition for user interface
US9009612B2 (en) * 2009-06-07 2015-04-14 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
CN101719022A (zh) * 2010-01-05 2010-06-02 汉王科技股份有限公司 用于全功能键盘的字符输入方法及其处理装置
JP2011170834A (ja) 2010-01-19 2011-09-01 Sony Corp 情報処理装置、操作予測方法及び操作予測プログラム
US10268320B2 (en) * 2010-08-06 2019-04-23 Apple Inc. Method for disambiguating multiple touches on a projection-scan touch sensor panel
JP5573487B2 (ja) 2010-08-20 2014-08-20 ソニー株式会社 情報処理装置、プログラム及び操作制御方法
JP5614173B2 (ja) * 2010-08-25 2014-10-29 ソニー株式会社 情報処理装置、情報処理方法およびプログラム

Also Published As

Publication number Publication date
JP2012048359A (ja) 2012-03-08
JP5614173B2 (ja) 2014-10-29
US9710159B2 (en) 2017-07-18
CN102591557A (zh) 2012-07-18
US20120054654A1 (en) 2012-03-01
CN202854754U (zh) 2013-04-03
US10613723B2 (en) 2020-04-07
TW201229871A (en) 2012-07-16
RU2011134672A (ru) 2013-02-27
US20170131882A1 (en) 2017-05-11
EP2423797A1 (en) 2012-02-29

Similar Documents

Publication Publication Date Title
KR20120019376A (ko) 정보 처리 장치, 정보 처리 방법, 및 컴퓨터 프로그램 제품
JP5158014B2 (ja) 表示制御装置、表示制御方法およびコンピュータプログラム
JP4734435B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP5630160B2 (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
KR101150321B1 (ko) 정보 처리 장치 및 정보 처리 장치의 표시 정보 편집 방법
US20160210008A1 (en) Electronic device, method for controlling electronic device, and storage medium
JP2011014044A (ja) 操作制御装置、操作制御方法およびコンピュータプログラム
KR20110109551A (ko) 터치스크린 장치 및 터치스크린 장치의 입력 처리 방법
EP2733593A2 (en) Method and electronic device for providing virtual keyboard
US20130009880A1 (en) Apparatus and method for inputting character on touch screen
JP2011134273A (ja) 情報処理装置、情報処理方法およびプログラム
KR101436585B1 (ko) 원 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
JP2013200792A (ja) 端末装置、および、制御方法
JP5769841B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
JP2015153197A (ja) ポインティング位置決定システム
JP2018023792A (ja) ゲーム装置及びプログラム
KR101359456B1 (ko) 터치 디스플레이 상의 드레그에 기반하여 입력 문자를 결정하는 방법 및 장치
JP6126639B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置及びゲームプログラム。
KR20140070264A (ko) 터치 스크린 디스플레이 입력을 통한 객체 스크롤 방법 및 장치
JP5523381B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
KR20110064337A (ko) 전자기기에서 터치 위치 디스플레이 방법 및 장치
JP5769765B2 (ja) タッチパネル式ディスプレイを持った携帯型ゲーム装置
KR101436586B1 (ko) 원 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
JP6204414B2 (ja) ゲーム装置及びプログラム

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination