KR20120056211A - 정보처리장치 및 그 동작 방법 - Google Patents

정보처리장치 및 그 동작 방법 Download PDF

Info

Publication number
KR20120056211A
KR20120056211A KR1020110121335A KR20110121335A KR20120056211A KR 20120056211 A KR20120056211 A KR 20120056211A KR 1020110121335 A KR1020110121335 A KR 1020110121335A KR 20110121335 A KR20110121335 A KR 20110121335A KR 20120056211 A KR20120056211 A KR 20120056211A
Authority
KR
South Korea
Prior art keywords
pointer
movement
speed
unit
processing apparatus
Prior art date
Application number
KR1020110121335A
Other languages
English (en)
Other versions
KR101466240B1 (ko
Inventor
케이이치 야마모토
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20120056211A publication Critical patent/KR20120056211A/ko
Application granted granted Critical
Publication of KR101466240B1 publication Critical patent/KR101466240B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

유저에 있어서 편리성이 높은 인터페이스를 갖는 정보처리장치를 제공한다. 스타일러스나 손가락의 포인터의 이동량 혹은 이동 시간에 따라 기준속도를 설정한다. 상기 포인터의 이동 속도와 상기 기준속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생한 것을 판정한다.

Description

정보처리장치 및 그 동작 방법{INFORMATION PROCESSING APPARATUS AND OPERATION METHOD THEREOF}
본 발명은, 유저에 의한 입력 조작을 판정하는 기술에 관한 것이다.
일반적으로, 마우스 버튼을 계속해서 누른 채, 마우스 커서의 위치를 이동하는 것을, "드래그(drag)"라고 한다. 또한, 그 후에 계속해서 누르고 있는 마우스 버튼을 떼어 놓는 것을 "드롭(drop)"이라고 한다.
마찬가지로, 스타일러스나 손가락등의 포인터로 터치패널의 임의의 위치를 접촉한 채, 터치 위치를 이동하는 것을, "드래그"라고도 한다. 또한, 그 후에 접촉한 손가락을 터치패널로부터 떨어지게 하는 것을 "드롭"이라고도 한다.
또한, 상기 포인터로 터치패널의 임의의 위치를 접촉하고나서, 스위핑형(sweeping-like) 동작을 행한 후 떨어지게 하는 것을, "플릭(flick)"이라고 한다. 예를 들면, 미국특허번호 7,761,814에는, 손가락으로 접촉하고 있는 터치패널상의 위치의 이동 속도가 소정의 기준값을 충족시킬 경우에, 플릭이 일어난다고 판정하는 기술이 개시되어 있다.
더욱이, 플릭으로 손가락과 터치패널이 떨어진 후에, 스위핑형 방향에 의거하여 화면 위에 표시된 오브젝트(object)를 관성적으로 이동시키는 기술이 잘 알려져 있다.
그러나, 드래그와 플릭을 동시에 접수하는 것이 가능한 터치패널에 있어서는, 이하와 같은 문제가 생기는 경우가 있다.
예를 들면, 표시된 오브젝트를 드래그에 의해 원하는 위치에 이동시키고, 드롭 위치에 그 오브젝트를 표시시킨다고 가정한다. 그렇지만, 드롭시에, 스위핑형 동작으로 손가락을 이동시켜 떨어지게 하기 때문에 상기 드래그를 플릭으로서 판정하고, 스위핑형 동작의 검지된 방향으로 화면상에 오브젝트가 이동될 수 있다.
본 발명은, 유저에 있어서 편리성이 높은 인터페이스를 대상으로 삼는다.
본 발명의 일 국면에 의하면, 포인터에 의한 플릭 조작을 판정하는 정보처리장치는, 상기 포인터의 이동량에 따른 기준 포인터 속도를 설정하는 설정부와, 상기 포인터의 이동 속도와 상기 설정된 포인터 기준속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생하였는지를 판정하는 판정부를 구비한다.
본 발명의 또 다른 특징들 및 국면들은, 첨부도면을 참조하여 아래의 예시적 실시예들의 상세한 설명으로부터 명백해질 것이다.
본 명세서에 포함되고 그 일부를 구성하는 첨부도면들은, 본 발명의 예시적인 실시예들, 특징들 및 국면들을 나타내고, 이 설명과 함께, 본 발명의 원리를 설명하는 역할을 한다.
도 1a 내지 1c는 정보처리장치의 하드웨어 구성 및 기능 블록의 예들을 도시한 도면이다.
도 2a 및 2b는 디지털 카메라의 외관도의 일례와 터치패널의 외관도의 일례를 도시한 도면이다.
도 3a 내지 3j는, 터치패널과 손가락 사이의 터치 위치가 이동하고 있는 상태의 예들을 도시한 도면이다.
도 4a 및 4b는 유저의 조작을 판정하는 처리의 예들을 도시하는 흐름도다.
도 5a 및 5b는 터치패널과 손가락 사이의 터치 위치가 이동하고 있는 상태의 예들을 도시한 도면이다.
도 6a 내지 6e는 오브젝트의 표시 위치가 이동하고 있는 상태의 예들을 도시한 도면이다.
도 7a 및 7b는 유저의 조작을 판정하는 처리의 예들을 도시하는 흐름도다.
도 8은 유저의 조작을 판정하는 처리의 일례를 도시하는 흐름도다.
도 9는 유저의 조작을 판정하는 처리의 일례를 도시하는 흐름도다.
도 10은 유저의 조작을 판정하는 처리의 일례를 도시하는 흐름도다.
도 11은 스위핑 동작이 검지된 방향과 오브젝트의 이동 방향의 관계를 도시한 도면이다.
도 12a 내지 12f는 오브젝트의 표시 위치가 이동하고 있는 상태의 예들을 도시한 도면이다.
도 13a 및 13b는 정보처리장치의 기능 블록의 예들을 도시한 도면이다.
도 14a 및 14b는 유저의 조작을 판정하는 처리의 예들을 도시하는 흐름도다.
도 15a 및 15b는 터치패널과 손가락 사이의 각 터치 위치가 이동하고 있는 상태의 예들을 도시한 도면이다.
도 16a 및 16b는 유저의 조작을 판정하는 처리의 예들을 도시하는 흐름도다.
도 17은 유저의 조작을 판정하는 처리의 일례를 도시하는 흐름도다.
도 18은 유저의 조작을 판정하는 처리의 일례를 도시하는 흐름도다.
이하, 도면들을 참조하여 본 발명의 여러 가지 예시적 실시예들, 특징들 및 국면들을 설명한다.
도 1a는, 본 발명의 제1 예시적 실시예에 따른 정보처리장치(100)의 하드웨어 구성의 일례를 도시한 도면이다.
정보처리장치(100)는, 중앙연산장치(ＣＰＵ)(101), 판독전용 메모리(ＲＯＭ)(102), 랜덤 액세스 메모리(ＲＡＭ)(103), 입출력 인터페이스(I/F)(104), 입력 인터페이스(I/F)(105), 및 출력 인터페이스(I/F)(106)를 구비한다.
상기의 부들은, 시스템 버스(110)를 거쳐서 서로 접속되어 있다. 정보처리장치(100)에는, 기억부(107), 입력부(108) 및 출력부(109)가 접속되어 있다. 이하, 상기의 부들에 관하여 설명한다.
ＣＰＵ(101)는, ＲＯＭ(102)에 격납된 프로그램을 ＲＡＭ(103)에 로딩하여(loading) 실행함으로써, 후술하는 기능 블록들을 실현한다. ＲＯＭ(102)은, ＣＰＵ(101)에 의해 실행되는 프로그램이나 그 프로그램을 실행하기 위한 각종 데이터를 격납한다. ＲＡＭ(103)은, ＲＯＭ(102)에 격납된 프로그램을 로딩하기 위한 작업 영역을 제공한다.
입출력I/F(104)는, 기억부(107)에 대하여, 후술하는 각종의 처리를 실행한 결과로서 출력된 데이터를 기억부(107)에 출력하고, 기억부(107)에 기억된 데이터를 취득한다.
입력I/F(105)는, 입력부(108)로부터 출력된 신호를 취득한다. 출력I/F(106)는, 출력부(109)에 대하여, 후술하는 각종의 처리의 실행 결과나 화상의 출력을 제어하는 신호를 출력한다.
기억부(107)는, 예를 들면, 하드디스크 드라이브이며, 각종의 처리의 실행 결과로서 출력된 데이터를 기억한다.
입력부(108)는, 예를 들면 마우스, 트랙볼, 터치패널, 키보드 또는 버튼이며, 유저에 의한 입력 조작을 검지하고, 검지한 조작에 대응하는 신호를 정보처리장치(100)에 출력한다.
출력부(109)는, 예를 들면, 액정 디스플레이(ＬＣＤ)이며, 각종의 처리의 실행결과나 화상의 출력을 제어하는 신호에 대응한 화상을 제시한다. 입력부(108)가 액정 패널일 경우에는, 입력부(108)는 출력부(109)의 기능도 갖는다.
도 1b는, 본 발명의 제1 예시적 실시예에 따른 정보처리장치(100)의 구성을 나타내는 기능 블록도다.
정보처리장치(100)는, 취득부(121), 특정부(122), 설정부(123), 판정부(124) 및 제어부(125)를 가진다. 정보처리장치(100)에는, 입력부(108) 및 출력부(109)가 접속되어 있다.
ＣＰＵ(101)는, ＲＯＭ(102)에 격납된 프로그램을 ＲＡＭ(103)에 로딩하여 실행함으로써, 취득부(121), 특정부(122), 설정부(123), 판정부(124) 및 제어부(125)를 실현한다.
이 경우에, ＣＰＵ(101)는, 기억부(107)로부터 데이터를 판독하는 처리나, 기억부(107)에 데이터를 기록하는 처리를 실행해도 좋다. 또한, 상기ＲＯＭ(102)이나 ＲＡＭ(103)에 해당하는 장치 내부의 기억부는, 필요에 따라 복수 있어도 된다.
이하, 요소들에 관하여 설명한다. 도 1a와 같은 요소에 관해서는 같은 참조번호를 부착하고, 그 설명을 생략한다.
취득부(121)는, 입력I/F(105), ＣＰＵ(101), ＲＯＭ(102) 및 ＲＡＭ(103)으로 구성된다. 또한, 취득부(121)는, 입력부(108)로부터 출력된 신호를 취득하고, 특정부(122)에 상기 취득한 신호에 대응한 정보를 출력한다.
특정부(122)에 출력하는 정보는, 예를 들면 유저 조작(스타일러스나 손가락을 사용한 포인터에 의한 포인팅 조작)을 검지하는 위치(유저에 의해 지정된 위치)를 나타내는 정보와 상기 유저 조작을 검지하는 타이밍을 나타내는 정보의 세트 등이다.
특정부(122)는, ＣＰＵ(101), ＲＯＭ(102) 및 ＲＡＭ(103)으로 구성된다. 또한, 특정부(122)는, 취득부(121)로부터 출력된 정보에 의거하여 주목 위치의 이동량을 특정한다. 주목 위치는, 입력부(108)가 액정 터치패널이었을 경우, 터치패널상의 포인터에 의한 접촉이 검지된 위치다.
즉, 상기 주목 위치는, 조작 영역에 상기 포인터가 존재하고 있는 위치다. 또한, 주목 위치의 이동량은, 손가락등의 포인터로 터치패널에 접촉한 채, 터치 위치를 이동시킨 후, 접촉 포인터를 터치패널로부터 떼어놓았을 때의 이동 거리를 의미한다. 다시 말해, 주목 위치의 이동량은, 포인터의 이동량을 의미한다.
특정부(122)가 특정하는 이동량의 예로서는, 터치패널상의 포인터가 이동한 궤적의 길이이어도 된다.
이와는 달리, 특정부(122)가 특정하는 이동량은, 터치패널상의 포인터가 접촉한 위치부터 포인터가 떨어진 위치까지의 직선거리이어도 된다. 또한, 특정부(122)가 특정하는 이동량은, 취득부(121)로부터 보내진 "포인터 위치의 이동의 통지 신호"의 통지 회수로부터 결정되어도 된다.
설정부(123)는, ＣＰＵ(101)로 구성되어, 주목 위치의 이동량에 따라, 유저의 조작을 플릭으로서 판정하는 기준값(기준속도)을 설정한다. 그 이동량은, 유저가 플릭 조작을 하는 것을 가정해서 주목 위치를 뒤이어 이동시키고 있는 것인가 아닌가를 판정하는 지표다.
본 예시적 실시예에서는, 상기 이동량이 상기 지표로서 효과적이기 때문에 대표 예로서 설명한다. 그러나, 이와는 달리, 상기 지표로서, 이동기간 등의 또 다른 지표를 사용할 수 있다.
판정부(124)는, ＣＰＵ(101)로 구성되어, 단위시간당의 주목 위치의 이동량(이동 속도)과 설정부(123)에 의해 설정된 기준값에 의거하여 유저의 조작을 플릭이라고 판정한다. 이 단위시간은, 접촉한 손가락을 터치패널로부터 떨어지게 했을 때에 최후에 검지된 시간과, 그 시간보다도 소정간격(예를 들면, 20msec)전의 시간에 의해 결정된다.
제어부(125)는, ＣＰＵ(101)와 출력I/F(106)로 구성되어, 판정부(124)에 의한 판정 결과에 의거하여 출력부(109)에 출력하는 신호를 제어한다.
도 2a는, 정보처리장치(100)의 일례인 디지털 카메라(200)의 외관도를 도시한 도면이다.
디지털 카메라(200)는, 전원 버튼(201), 셔터 버튼(202), 렌즈(203) 및 터치패널(204)을 구비한다. 손가락(210)은, 터치패널(204)에 대하여 조작을 행하고 있는 유저의 손가락이다. 터치패널(204)은, 입력부(108)와 출력부(109)에 해당한다.
도 2b는, 터치패널(204)의 조작 영역(입력 영역)의 외관도를 도시한 도면이다. 조작 영역은, 터치패널(204) 전체, 또는, 터치패널(204)상의 접촉을 인식하는 부분 영역에 해당한다.
본 예시적 실시예에 의하면, 조작 영역은, 높이 500픽셀, 폭 900픽셀이다. 그 조작 영역상에서는, 위치 211에 있어서, 손가락(210)과 터치패널(204)이 접촉하기 시작하고, 접촉을 유지한 채, 위치 212까지 이동하고, 위치 212 부근에 있어서, 손가락(210)이 터치패널(204)로부터 스위핑형 방식으로 떨어진다.
도 3a 내지 3j는, 손가락(210)이, 터치패널(204)에 접촉하고, 터치패널(204) 위를 접촉한 채 이동하고, 터치패널(204)로부터 떨어지는 일련의 조작의 상태를 도시한 도면이다.
본 예시적 실시예에 있어서는, 전원 버튼(201)이 조작되어, 전원이 투입된다. 그 후, ＣＰＵ(101)에 의해, 소정의 시간간격(예를 들면, 20msec)으로 터치패널(204)에 접촉하고 있는 것이 있는지를 검지하는 신호가 출력된다.
터치패널(204)에 접촉하고 있는 것이 있는 경우에, ＣＰＵ(101)에 의해, 접촉의 위치(주목 위치)를 검지하는 신호도 출력된다. 본 예시적 실시예에 있어서는, 전원이 투입된 시간을 0초라고 한다.
전원이 투입된 시간부터 10msec후에 손가락(210)이 터치패널(204)에 접촉하고, 손가락(210)이 터치패널(204)에 접촉한 채 이동하기 시작한다. 그 후, 20msec후에 손가락(210)이 터치패널(204)에 접촉하는 위치는, 주목 위치로서 검지된다. ＲＡＭ(103)에는, 20msec후에 검지된 주목 위치(좌표)와, 검지 시간을 나타내는 정보의 세트가 기억된다.
계속해서, ＲＡＭ(103)에는, 마찬가지로 20msec 시간간격으로 검지된 주목 위치와 상기 정보가 기억된다. 130msec후에, 손가락(210)이 터치패널(204)위를 떨어졌다고 하면, 140msec후에, 터치패널(204)에 접촉하고 있는 것이 없다고 판정된다.
즉, 손가락(210)과 터치패널(204)과의 접촉은, 10msec로부터 130msec까지에서 계속된다. 디지털 카메라(200)에 있어서는, 손가락(210)과 터치패널(204)과의 접촉이 20msec로부터 120msec까지에서 계속된다고 판정된다.
이 상황에 따라서, 이동량의 검지 정밀도에는 어느 정도 변화될 수도 있다. 따라서, 주목 위치의 이동량으로서, 접촉이 검지된 위치의 이동에 대응한 값을 대용 가능하게 한다.
본 예시적 실시예에서는, 상기 이동량은, 손가락(210)과 터치패널(204)과의 접촉을 시작한 위치와, 손가락(210)과 터치패널(204)과의 접촉을 종료한 위치와의 사이의 거리다. 그렇지만, 본 발명은 이에 한정되지 않는다.
도 4a는, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다.
우선, 단계S401에 있어서, 취득부(121)는, 포인터에 의한 포인팅의 릴리즈(release)를 나타내는 신호를 취득한다. 상기 릴리즈를 나타내는 신호란, 그 상태가, "손가락(210)등이 터치패널(204)에 접촉하는 상태로부터 접촉하는 것이 중단되는 상태로 변화되었다고 판정된 것"을 나타내는 신호다.
단계S402에 있어서, 특정부(122)는, 터치패널(204)에 대한 접촉의 시작으로부터 종료(릴리즈)까지의 기간동안 접촉이 검지된 주목 위치(포인터의 위치)가 이동되었는가 아닌가를 판단한다. 접촉이 검지된 주목 위치의 이동(포인터의 이동)이 미소한 경우에는, 주목 위치가 이동되지 않았다고 판단해도 된다. 상기 이동량이 10픽셀이하인 경우에, 그 주목 위치가 이동되지 않았다고 판단해도 된다.
특정부(122)는 접촉이 검지된 주목 위치가 이동되었다고 판단되었을 경우(단계S402에서 YES), 단계S403의 처리를 실행한다. 한편, 특정부(122)는 접촉이 검지된 주목 위치가 이동되지 않았다고 판단되었을 경우(단계S402에서 NO), 일련의 처리를 종료한다.
단계S403에 있어서, 특정부(122)는, 접촉이 검지된 주목 위치의 이동을 나타내는 이동량(포인터의 이동량)을 특정한다. 단계S404에 있어서, 설정부(123)는, 그 이동량이 소정의 임계치(예를 들면, 300픽셀)보다 큰 것인가 아닌가를 판단한다.
이동량이 소정의 임계치보다 크다고 설정부(123)가 판단한 경우(단계S404에서 YES), 단계S405의 처리를 실행한다. 이동량이 소정의 임계치보다 크지 않다고 설정부(123)가 판단한 경우(단계S404에서 NO), 단계S406의 처리를 실행한다.
단계S405에 있어서, 설정부(123)는, 유저의 조작(포인터의 이동)을 플릭 조작이라고 판정하는 기준값을 변경한다. 본 예시적 실시예에 있어서는, 제1 기준속도로서, 상기 기준값이 0.5픽셀/msec로 미리 설정되어 있다.
단계S405에서는, 이 기준값이 0.5픽셀/msec보다 큰 제2 기준속도, 즉 2.7픽셀/msec로 변경된다. 단계S406에 있어서, 판정부(124)는, 단위시간당의 이동량(부분 이동량)을 판정한다.
단위시간당 이동량은, 릴리즈전에 최후에 접촉이 검지된 위치와, 릴리즈전에 최후에 검지된 시간보다 앞의 다른 시간에 있어서 접촉이 검지된 위치로부터 얻어진다.
단위시간당 이동량은, 도 3a 내지 3j에 나타낸 것과 같은 120msec후에 접촉이 검지된 위치와, 100msec후에 접촉이 검지된 위치로부터 얻어져도 된다.
단계S407에 있어서, 판정부(124)는, 상기 이동량(포인터의 이동 속도)이 상기 기준값을 충족시키고 있는지(즉, 그 이동량이 상기 기준값보다 큰지) 아닌지를 판단한다.
판정부(124)는, 상기 이동량이 상기 기준값을 충족시키고 있다고 판정하는 경우(단계S407에서 YES), 단계S408의 처리를 실행한다. 판정부(124)는, 상기 이동량이 상기 기준값을 충족시키지 않고 있다고 판정하는 경우(단계S407에서 NO), 일련의 처리를 종료한다. 단계S408에 있어서, 판정부(124)는, 제어부(125)에 플릭을 나타내는 신호를 출력한다.
도 5a 및 5b는, 손가락(210)과 터치패널(204) 사이의 접촉이 검지된 위치가 이동하고 있는 상태를 도시한 도면이다.
도 5a는, 플릭 조작 직전의 상기 이동량이 비교적 크기 때문에, 플릭 조작이 발생하지 않는 일례를 나타낸다. 도 5a를 참조하면, 손가락(210)과 터치패널(204)간의 접촉이 위치501에서 시작하고 나서, 위치502에서 접촉이 종료한다. 위치501로부터 위치502까지의 이동량은, 400픽셀이다.
릴리즈전에 최후에 접촉이 검지된 위치와, 그 20msec전에 접촉이 검지된 위치에 의거하여, 단위시간당의 이동량이 2.5픽셀/msec로서 산출된다. 이 때, 판정부(124)는, 제어부(125)에 플릭 조작을 나타내는 신호를 출력하지 않는다. 이 경우에, 도 5a에 나타내는 일련의 조작은, 플릭 조작이라고는 판단되지 않고, 드래그 및 드롭이라고 판단된다.
도 5b는, 플릭 조작 직전의 상기 이동량이 비교적 작기 때문에, 플릭 조작이 발생하는 일례를 도시한 도면이다. 도 5b를 참조하면, 손가락(210)이 터치패널(204)과 위치511에서 접촉하기 시작하고, 위치512에서 그 접촉이 종료한다.
위치511로부터 위치512까지의 이동량은, 200픽셀이다. 그 이동량은, 릴리즈전에 최후에 접촉이 검지된 위치와, 그 20msec전에 접촉이 검지된 위치에 의거하여 산출된 단위시간당의 0.7픽셀/msec이다.
이 때, 판정부(124)는, 제어부(125)에 플릭 조작을 나타내는 신호를 출력한다. 다시 말해, 도 5b에 나타내는 일련의 조작은, 플릭 조작이라고 판단된다.
도 6a 내지 6e는, 본 예시적 실시예에 따른 제어부(125)가 실행하는 처리의 예들을 도시한 도면이다.
화상(600)은, 터치패널(204)에 표시되고, 꽃(601)을 포함한다. 터치패널(204)에, 화상(600)을 확대하고, 그 일부를 표시하는 경우를 생각한다.
도 6c는, 터치패널(204) 위에 표시된 화상(600)의 일부를 도시한 도면이다. 도 6c의 화상(600)의 표시 일부는, 도 6b의 영역(610)에 해당한다.
다음에, 꽃(601)을 터치패널(204)의 중앙부근에 이동시키기 위해서 드래그를 행한다. 이 드래그에 의해, 유저에 있어서 의미가 있는 이동량만큼, 접촉중의 손가락(210)을 이동시킨다.
종래의 여러 가지의 장치에 있어서는, 도 6d를 참조하면, 손가락(210)을 터치패널(204)로부터 스위핑형 방식으로 떼어놓아서, 플릭 조작이라고 판단한다. 즉, 단순하게 드래그 조작과 플릭 조작이 연속적으로 발생했다고 판단하는 경우가 많다.
이 경우에는, 스위핑 동작이 검지된 방향으로 상기 표시 영역이 관성적으로 이동된다. 즉, 유저가 소망하고 있는 영역 620이 아니고, 영역 630에 해당하는 화상을 터치패널(204)이 표시하는 경우가 많다. 그렇지만, 본 예시적 실시예에 의하면, 손가락(210)을 터치패널(204)로부터 스위핑형 방식으로 떼어 놓을 때에도, 그 동작이전의 이동량이 비교적 크면, 플릭 조작이라고는 판단되기 어려워진다. 도 6e를 참조하면, 영역(620)에 해당하는 화상은, 터치패널(204) 위에 표시된다.
본 예시적 실시예에서는 어느 정도의 이동량을 수반하는 드래그 조작에 연속해서 플릭 조작이 발생하는 것은, 드래그 조작이 거의 없는 상태에 있어서 플릭 조작이 발생하는 것보다도 어렵다.
도 12a 내지 12f는, 본 예시적 실시예에 따른 제어부(125)가 실행하는 처리의 다른 예들을 도시한 도면이다. 터치패널(204)에는, 도 12a에 나타나 있는 바와 같이, 오브젝트A?G가 표시되어 있다. 그 오브젝트A?G는 임의의 위치에 배치될 수 있다.
오브젝트D를 오브젝트A?C의 주변으로 이동시킬 경우에는, 오브젝트D의 표시 위치에 손가락(210)을 접촉시킨다.
이어서, 도 12b에 나타나 있는 바와 같이, 상기 임계치보다 이동량이 크지 않도록 손가락(210)을 이동시켜도 된다. 또한, 이동 속도가 제1 기준속도보다도 빨라지도록 손가락(210)을 터치패널(204)로부터 떨어지게 하면 좋다. 이에 따라 플릭 조작이 된다. 오브젝트D는, 손가락(210)이 오브젝트D로부터 떨어져 있는 동안에 화면상을 슬라이드 하여, 오브젝트A?C의 주변 으로 이동된다.
도 12c에 나타나 있는 바와 같이, 상기의 임계치를 이동량이 초과하도록 손가락(210)을 이동시킨다. 또한, 이동 속도가 제1 기준속도보다도 빠른 제2 기준속도를 초과하지 않도록 손가락(210)을 터치패널(204)로부터 떨어지게 해도 된다. 이 경우에는, 드래그 조작만으로, 오브젝트D는, 드래그 조작동안에 상기 화면상을 슬라이드 하고, 오브젝트A?C의 주변으로 이동한다.
도 12b 및 12c에서, 오브젝트D는 동일 위치로 이동된다. 본 예시적 실시예를 따라 상술한 바와 같이, 플릭 조작이라고 판정되는 기준값의 적절한 설정에 의해, 유저가 편리하게 그 조작을 별개로 이용할 수 있다.
오브젝트D를 오브젝트A?C의 둘레에 배치시키지 않는 경우에는, 이하와 같은 조작을 행하면 좋다. 도 12d에 나타나 있는 바와 같이, 전술한 임계치를 이동량이 초과하도록 손가락(210)을 이동시킨 뒤에, 이동 속도가 제1 기준속도보다도 빠른 제2 기준속도보다도 빠르도록 손가락(210)을 터치패널(204)로부터 떨어지게 한다.
이에 따라, 드래그 조작과 플릭 조작이 연속적으로 실행되어서, 상기 도 12b 및 12c보다도 큰 이동량으로 오브젝트D를 이동한다.
또한, 본 예시적 실시예에서는 이하의 기능을 실행해도 된다. 예를 들면, 도 12e 및 도 12f에 나타나 있는 바와 같이, 오브젝트D를 관성 이동(슬라이드)시킨 때, 이동전의 근방에 있는 것 외의 오브젝트(E?G등)의 방향을 나타내는 정보를 취득하고, 그것들의 방향에 맞도록, 오브젝트D를 회전시켜도 된다.
도 4b는, 상기 제1 예시적 실시예의 변형 예에 따른 전술한 유저 조작의 처리 흐름의 변형 예를 도시하는 흐름도다. 도 4b를 참조하면, 상기 단계S404의 처리 대신에, 단계S414의 처리를 실행한다. 단계S405의 처리 대신에, 단계S415의 처리를 실행한다. 같은 처리는, 같은 참조번호로 나타내고, 그에 대한 설명을 생략한다.
단계S414에 있어서, 설정부(123)는, 이동량이 소정의 임계치(예를 들면, 300픽셀)보다 큰 것인가 아닌가를 판단한다. 이동량이 소정의 임계치보다 크지 않다고 설정부(123)가 판단한 경우(단계S414에서 NO), 설정부(123)는, 단계S415의 처리를 실행한다. 설정부(123)는 이동량이 소정의 임계치보다 크다고 판단되었을 경우(단계S414에서 YES), 설정부(123)는 단계S406의 처리를 실행한다.
단계S415에 있어서, 설정부(123)는, 유저의 조작을 플릭 조작이라고 판정하는 기준값을 변경한다. 본 예시적 실시예에 있어서는, 상기 기준값이 2.7픽셀/msec로서 미리 설정된다. 단계S415에 있어서, 이 기준값이, 예를 들면 2.7픽셀/msec보다 작은 0.5픽셀/msec로 변경된다.
이상의 예시적 실시예에 의하면, 주목 위치의 이동량은, 손가락(210)과 터치패널(204)을 접촉한 채, 터치 위치를 이동하는 것을 시작할 때와, 손가락(210)을 터치패널(204)로부터 떨어지게 할 때와의 사이의 이동 거리다.
본 발명은 이에 한정하지 않는다. 주목 위치의 이동량은, 손가락(210)으로 터치패널(204)을 접촉한 채, 터치 위치를 이동했을 때의 궤적의 길이일 수 있다.
또한, 터치패널(204) 위에 복수의 사이즈가 같은 부분 영역을 설치한다. 그리고, 주목 위치의 이동량은, 손가락(210)으로 터치패널(204)을 접촉한 채, 터치 위치를 이동했을 때에 손가락(210)이 통과하는 부분 영역의 수이어도 된다.
또한, 터치패널(204)에 격자를 설정한다. 그리고, 주목 위치의 이동량은, 손가락(210)으로 터치패널(204)을 접촉한 채, 터치 위치를 이동했을 때에 손가락(210)이 통과하는 격자의 수이어도 된다. 주목 위치의 이동량의 종류에 따라, 임계치의 종류는 변경된다.
또한, 터치 위치를 이동시켜 도중에 방향을 바꾼다. 그 후, 주목 위치의 이동량은, 그 변경된 방향으로의 이동량의 가산이어도 된다.
본 예시적 실시예에 있어서의 임계치는, 고정되지 않아도 된다. 이와는 달리, 특정된 이동량이 커질수록, 기준값이 높게 설정되어도 된다.
본 발명의 제2 예시적 실시예에서는, 유저 조작을 판정하는 처리의 다른 예에 대해 설명한다. 본 예시적 실시예에 따른 정보처리장치의 구성은, 상기 제1 예시적 실시예와 같다. 이 때문에, 그에 대한 설명을 생략한다.
도 7a는, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다.
단계S701에 있어서, 취득부(121)는, 터치패널(204)에 대한 접촉을 나타내는 신호를 취득한다. 단계S702에 있어서, 취득부(121)는, 상기 릴리즈를 나타내는 신호가 취득되었는가를 판정한다.
한편, 단계S702에 있어서, 취득부(121)는, 상기 릴리즈를 나타내는 신호가 취득되었다고 판정된 경우(단계S702에서 YES), 단계S707의 처리를 실행한다. 취득부(121)는, 상기 릴리즈를 나타내는 신호가 취득되지 않았다고 판정된 경우(단계S702에서 NO), 단계S703의 처리를 실행한다.
단계S703에 있어서, 특정부(122)는, 주목 위치(접촉이 검지된 위치)의 이동량을 특정한다. 그 주목 위치의 이동량은, 손가락(210)으로 터치패널(204)을 접촉한 채, 손가락(210)의 터치 위치를 이동했을 때의 이동 거리에 해당한다.
단계S704에 있어서, 설정부(123)는, 이동량이 임계치(예를 들면, 300픽셀)보다 큰 것인가 아닌가를 판단한다. 설정부(123)는, 그 이동량이 임계치보다 크다고 판단했을 경우(단계S704에서 YES), 단계S705의 처리를 실행한다. 설정부(123)는, 그 이동량이 임계치보다 크지 않다고 판단했을 경우(단계S704에서 NO), 단계S702의 처리를 실행한다.
단계S705에 있어서, 설정부(123)는, 유저 조작을 플릭 조작이라고 판정하는 기준값을 변경하는 처리를 실행한다. 단계S705에 있어서, 제1 예시적 실시예와 마찬가지로, 상기 기준값은 0.5픽셀/msec로서 미리 설정된다. 단계S705에 있어서, 이 기준값은, 0.5픽셀/msec보다 큰 2.7픽셀/msec로 변경된다.
단계S706에 있어서, 제어부(125)는, 유저의 조작을 플릭 조작이라고 판정하는 기준값의 변경을 통지하는 처리를 실행한다. 터치패널(204)은, 유저의 조작을 플릭 조작이라고 판정하는 기준값의 변경을 나타내는 통지를 표시한다.
출력부(109)가 스피커나 모터를 갖는 경우, 음성이나 진동에 의해, 유저의 조작을 플릭 조작이라고 판정하는 기준값의 변경을 나타내는 통지를 하여도 된다.
단계S707로부터 단계S709까지의 처리는, 단계S406으로부터 단계S408까지의 처리와 같으므로, 그 설명을 생략한다.
도 7b는, 상기 예시적 실시예에 따른 유저의 조작을 판정하는 처리의 다른 예를 도시하는 흐름도다.
도 7b를 참조하면, 단계S707의 처리 대신에 단계S717의 처리를 실행하고, 단계S708의 처리 대신에 단계S718의 처리를 실행한다. 같은 처리에 대해서는, 같은 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S717에 있어서, 판정부(124)는, 소정거리(예를 들면, 80픽셀)에 필요한 이동의 시간량을 판정한다. 이 소정거리는, 릴리즈전에 최후에 접촉이 검지된 제1 시각과 이 제1 시각에 있어서 접촉이 검지된 위치를 나타내는 정보의 세트와, 제1 시각과 다른 제2 시각과 이 제2 시각에 있어서 접촉이 검지된 위치를 나타내는 정보의 세트로부터 얻어진다.
단계S718에 있어서, 판정부(124)는, 소정거리의 이동에 필요한 이동의 시간량이 소정의 기준값을 충족시키고 있는지(예를 들면, 그 시간량이 40msec보다도 짧은지) 아닌지를 판정한다. 판정부(124)는, 상기 시간량이 소정의 기준값을 충족시키고 있다고 판단되었을 경우(단계S718에서 YES), 단계S709의 처리를 실행한다. 판정부(124)는, 상기 시간량이 소정의 기준값을 충족시키지 않고 있다고 판단되었을 경우(단계S718에서 NO), 일련의 처리를 종료한다.
단계S717의 처리에 따라, 미리 설정된 기준값과 단계S705에서 변경된 기준값은, 시간을 나타내는 정보로서 설정된다.
본 발명의 제3 예시적 실시예에 있어서는, 유저의 조작을 판정하는 처리의 다른 예들에 대해 설명한다. 본 예시적 실시예에 따른 정보처리장치의 구성은, 제1 예시적 실시예와 같다. 이 때문에, 그에 대한 설명을 생략한다.
도 8은, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 4a 및 4b와 같은 처리에 대해서는, 같은 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S804에 있어서, 설정부(123)는, 특정된 이동량이, (1) 제1 임계치Ｔｈ1이상인지의 여부, (2) 제1 임계치Ｔｈ1이상 제2 임계치Ｔｈ2미만인지의 여부, 및 (3) 제2 임계치Ｔｈ2(Ｔｈ1 <Ｔｈ2)이상인지의 여부를 판단한다. 제1 임계치Ｔｈ1은, 예를 들면 300픽셀이고, 제2 임계치Ｔｈ2는, 예를 들면 600픽셀이다.
(1), 즉 이동량이 임계치Ｔｈ1미만일 경우, 단계S805의 처리를 실행한다. (2), 즉 이동량이 제1 임계치Ｔｈ1이상, 제2 임계치Ｔｈ2미만일 경우, 단계S806의 처리를 실행한다. (3), 즉 이동량이 제2 임계치Ｔｈ2이상일 경우, 단계S807의 처리를 실행한다.
단계S805에 있어서, 설정부(123)는, 플릭 조작을 판정하는 기준값을 기준A(예를 들면, 0.5픽셀/msec)라고 한다. 단계S806에 있어서, 설정부(123)는, 플릭 조작을 판정하는 기준값을 기준B(예를 들면, 1.5픽셀/msec)라고 한다.
단계S807에 있어서, 설정부(123)는, 플릭 조작을 판정하는 기준값을 기준C(예를 들면, 2.5픽셀/msec)라고 한다. 단계S808, 818, 828에 있어서, 판정부(124)는, 단위시간당의 이동량을 판정한다. 단계S809에 있어서, 판정부(124)는, 단위시간당의 이동량이 기준A를 충족시키는 것인가 아닌가를 판정한다.
판정부(124)는 단위시간당의 이동량이 기준A를 충족시킨다고 판정되었을 경우(단계S809에서 YES), 단계S810의 처리를 실행한다. 판정부(124)는 단위시간당의 이동량이 기준A를 충족시키지 않는다고 판정되었을 경우(단계S809에서 NO), 단계S811의 처리를 실행한다.
단계S819에 있어서, 판정부(124)는, 단위시간당의 이동량이 기준B를 충족시키는 것인가 아닌가를 판정한다. 판정부(124)는, 단위시간당의 이동량이 기준B를 충족시킨다고 판정되었을 경우(단계S819에서 YES), 단계S820의 처리를 실행한다. 판정부(124)는, 단위시간당의 이동량이 기준B를 충족시키지 않는다고 판정되었을 경우(단계S819에서 NO), 단계S821의 처리를 실행한다.
단계S829에 있어서, 판정부(124)는, 단위시간당의 이동량이 기준C를 충족시키는 것인가 아닌가를 판정한다. 판정부(124)는, 단위시간당의 이동량이 기준C를 충족시킨다고 판정되었을 경우(단계S829에서 YES), 단계S830의 처리를 실행한다. 판정부(124)는, 단위시간당의 이동량이 기준C를 충족시키지 않는다고 판정되었을 경우(단계S829에서 NO), 단계S831의 처리를 실행한다.
단계S810, S811, S820, S821, S830, S831에 있어서, 제어부(125)는, 각각의 제어 조작을 실행한다. 각각의 제어 조작에서는, 예를 들면 단계S810, 단계S820에 있어서, 제어부(125)가 플릭에 대응하는 제어 조작을 실행한다.
단계S811 및 S830에 있어서, 제어부(125)가 드래그 및 드롭에 대응하는 제어 조작을 실행한다. 또한, 단계S821 및 S831에 있어서, 제어부(125)가 손으로 쓴 인식에 대응하는 제어 조작을 실행한다.
만약에 상기 예시적 실시예들을 터치패널(204)(조작 영역)의 사이즈가 작은 기기에 적용하면, 손가락의 이동 가능한 범위가 좁다. 이 때문에, 화면 사이즈는, 플릭 조작에서 손가락(210)의 움직임에 영향을 준다.
본 발명의 제4 예시적 실시예에서는, 이러한 영향을 방지하기 위해서 추가로 고안되었다. 본 예시적 실시예에 있어서는, 터치패널(204)(조작 영역)의 높이와 폭에 대응하게, 높이 방향의 임계치와 폭방향의 임계치를 설정한다. 한편, 본 예시적 실시예에 따른 정보처리장치의 하드웨어 구성은, 도 1a와 같기 때문에, 그에 대한 설명을 생략한다.
도 1c는, 본 예시적 실시예에 따른 정보처리장치(140)의 구성을 나타내는 기능 블록도다.
정보처리장치(140)는, 취득부(121), 특정부(122), 설정부(143), 판정부(124), 제어부(125) 및 유지부(holding unit)(146)를 구비한다. 도 1b와 같은 구성요소에 대해서는, 같은 참조번호를 부착하고, 그에 대한 설명을 생략한다.
유지부(146)는, ＣＰＵ로 구성되어, 조작 영역의 사이즈를 나타내는 정보를 유지한다. 정보처리장치(140)가, 도 2a의 디지털 카메라(200)일 경우, 조작 영역은 터치패널(204) 전체, 또는, 터치패널(204) 상에서 접촉이 인식되는 부분 영역에 해당한다.
조작 영역의 사이즈를 나타내는 정보는, 높이가 500픽셀, 폭이 900픽셀이다. 설정부(143)는, ＣＰＵ로 구성되어, 조작 영역의 사이즈를 나타내는 정보에 의거하여 높이방향의 임계치와 폭방향의 임계치를 각각 설정한다.
도 9는, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 4a와 같은 처리에 대해서는, 같은 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S902에 있어서, 특정부(122)는, 접촉이 검지된 위치가 이동되었는가를 판단한다. 특정부(122)는, 접촉이 검지된 위치가 이동되었다고 판정되는 경우(단계S902에서 YES), 단계S903의 처리를 실행한다. 특정부(122)는, 접촉이 검지된 위치가 이동되지 않았다고 판정되는 경우(단계S902에서 NO), 일련의 처리를 종료한다.
단계S903에 있어서, 특정부(122)는, 접촉이 검지된 위치의 이동을 나타내는 이동량 중, 높이방향의 이동량과 폭방향의 이동량을 특정한다. 단계S904에 있어서, 설정부(123)는, 유지부(146)에 유지된 정보에 의거하여 조작 영역의 사이즈를 특정한다.
단계S905에 있어서, 설정부(123)는, 특정된 조작 영역의 사이즈에 따라, 높이방향의 임계치와 폭방향의 임계치를 결정한다. 특정된 조작 영역의 사이즈가 높이 500픽셀, 폭 900픽셀일 경우, 도 2b에 나타나 있는 바와 같이, 설정부(123)는, 높이방향의 임계치를 170픽셀, 폭방향의 임계치를 300픽셀로 설정한다.
그 높이가 상기 폭보다도 짧을 경우, 높이방향의 임계치가 폭방향의 임계치보다도 작은 값이면 좋다. 단계S906에 있어서, 설정부(123)는, 높이방향의 이동량이 높이방향의 이동에 대응하는 임계치보다 큰가의 여부 및/또는 폭방향의 이동량이 폭방향의 이동에 대응하는 임계치보다 큰가의 여부를 판단한다.
설정부(123)는, 높이방향의 이동량이 높이방향의 이동에 대응하는 임계치보다 크다고 판단되었을 경우, 및/또는 폭방향의 이동량이 폭방향의 이동에 대응하는 임계치보다 크다고 판단되었을 경우(단계S906에서 YES), 단계S405의 처리를 실행한다.
한편, 단계S906에 있어서, 설정부(123)는, 높이방향의 이동량이 높이방향의 이동에 대응하는 임계치보다 크지 않다고 판단되었을 경우, 및 폭방향의 이동량이 폭방향의 이동에 대응하는 임계치보다 크지 않다고 판단되었을 경우(단계S906에서 NO), 단계S406의 처리를 실행한다.
단계S405에 있어서도, 설정부(143)는, 단계S904에서 결정된 조작 영역의 사이즈에 의거하여 플릭 조작이라고 판정하는 기준값으로 높이방향과 폭방향의 개개의 값을 설정해도 된다.
터치패널(204)(조작 영역)의 높이와 폭 길이에 대응한 유저의 조작을 플릭 조작이라고 판정하는 처리를 행하는 것이 가능하다. 복수의 모드에 따라 조작 영역의 사이즈가 바뀌는 경우에, 개개의 모드에서 상기 높이와 폭에 대응하게 유저 조작을 플릭 조작이라고도 판정할 수 있다. 이에 따라, 유저의 조작성이 향상한다.
제5 예시적 실시예에서는, 유저의 조작을 판정하는 처리의 다른 예를 설명한다. 본 예시적 실시예에 따른 정보처리장치의 구성은, 제4 예시적 실시예와 같기 때문에, 그에 대한 설명을 생략한다. 설정부(143)는, 조작 영역의 폭과 높이에 의거하여, 추가로 사선 방향의 임계치를 설정한다.
도 10은, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 4a 및 도 9와 같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S1005에 있어서, 설정부(143)는, 높이방향의 임계치, 폭방향의 임계치 및 사선 방향의 임계치를 결정한다. 단계S1006에 있어서, 판정부(124)는, 높이방향, 폭방향 및 사선 방향 중 어느 한 방향에서 이동방향을 검출한다.
이동 방향의 검출 방법으로서는, 릴리즈전에 최후에 접촉이 검지된 위치와, 릴리즈전에 최후에 검지된 시간보다 앞의 다른 시간에 있어서 접촉이 검지된 위치를 잇는 선분으로 형성된 각도에 의거하여 상기 이동방향이 결정된다.
다른 이동 방향의 검출 방법으로서는, 최초에 접촉이 검지된 위치와, 접촉 중지전에 최후에 접촉이 검지된 위치를 잇는 선분으로 형성된 각도에 의거하여 상기 이동방향이 결정된다. 도 11에 도시된 것처럼, 상기 이동방향은, 그 결정된 각도에 대응하게 결정해두면 좋다.
도 11의 예에서는, 그 각도가 "0도이상 22.5도미만", "337.5도이상 360도미만" 및 "157.5도이상 202.5도미만"중 어느 하나일 경우에, 판정부(124)는, 폭방향으로의 이동이라고 판단한다. 그 각도가 "22.5도이상 67.5도미만", "112.5도이상 157.5도미만", "202.5도이상 247.5도미만" 및 "292.5도이상 337.5도미만" 중 어느 하나일 경우에는, 판정부(124)는, 사선 방향 이동이라고 판단한다. 상기 각도가 "67.5도이상 112.5도미만" 및 "247.5도이상 292.5도미만"일 경우에는, 판정부(124)는, 높이방향의 이동이라고 판단한다.
단계S1007에 있어서, 판정부(124)는, 검출된 방향에 대응하는 이동량이, 해당 방향에 대응하는 임계치보다 큰지를 판단한다. 판정부(124)는, 그 이동량이 임계치보다 크다고 판단된 경우(단계S1007에서 YES), 단계S405의 처리를 실행한다. 판정부(124)는, 그 이동량이 임계치보다 크지 않다고 판단된 경우(단계S1007에서 NO), 단계S406의 처리를 실행한다.
단계S405에 있어서도, 설정부(143)는, 단계S904에서 특정된 조작 영역의 사이즈에 의거하여 플릭 조작이라고 판정하는 기준값으로, 높이방향, 폭방향 및 사선 방향으로의 개개의 값을 설정해도 된다.
본 예시적 실시예에 의하면, 개개의 높이방향의 이동, 폭방향의 이동 및 사선 방향의 이동을 구별할 수 있다. 그러므로, 주목 위치의 이동 방향에 따라 처리가 바뀔 경우에 효과적이다.
본 발명의 제6 예시적 실시예에 있어서는, 유저의 조작을 판정하는 처리의 또 다른 예를 설명한다. 본 예시적 실시예에 따른 정보처리장치의 하드웨어 구성은, 상기 제1 예시적 실시예와 같다. 따라서, 그에 대한 설명을 생략한다.
도 13a는, 본 예시적 실시예에 따른 정보처리장치(100)의 구성을 나타내는 기능 블록도다. 도 1b와 같은 블록에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
특정부(1301)는, ＣＰＵ(101)로 구성되어, 취득부(121)로부터 출력된 정보에 의거하여 주목 위치의 이동 시간을 특정한다. 그 주목 위치의 이동 시간은, 손가락(210)으로 터치패널(204)에 접촉한 채, 터치 위치를 이동하고, 그 후에 접촉한 손가락(210)을 터치패널(204)로부터 떨어지게 할 때 써버린 기간이다.
다시 말해, 이 이동 시간은, 포인터의 이동 시간에 해당한다. 주목 위치의 이동 시간의 산출 방법의 예로서는, 손가락(210)으로 터치패널(204)에 접촉했을 때부터, 그 손가락(210)을 떨어지게 할 때까지의 시간량을 산출하여도 된다.
이 경우에, 손가락(210)을 이동시키지 않고 있는 시간도 이동 시간으로 환산된다. 그 밖의 주목 위치의 이동 시간의 산출 방법의 다른 예로서는, 일정한 간격(예를 들면, 20msec)으로 터치패널(204) 상의 이벤트를 감시하고, 손가락(210)이 이동한 취지를 통지하는 이벤트가 발생하지 않고 있는 시간은 제외하도록 산출해도 된다.
도 14a 및 14b는, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 4a 및 4b와 같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
도 14a를 참조하면, 단계S1401에 있어서, 특정부(1301)는, 손가락(210)의 접촉이 검지된 위치가 이동하고 있는 동안에 상기 이동 시간을 특정한다.
단계S1402에 있어서, 설정부(123)는, 그 이동 시간이 소정의 임계치(예를 들면, 200msec)보다 긴가를 판단한다. 설정부(123)는, 그 이동 시간이 소정의 임계치보다 길다고 판단되었을 경우(단계S1402에서 YES), 단계S405의 처리를 실행한다. 설정부(123)는, 그 이동 시간이 소정의 임계치보다 길지 않다고 판단되었을 경우(단계S1402에서 NO), 단계S406의 처리를 실행한다.
본 예시적 실시예에서는, 기준값을 0.5픽셀/msec로 미리 설정한다. 단계S405에 있어서, 이 기준값은 0.5픽셀/msec보다 큰 2.7픽셀/msec로 변경된다.
도 14b를 참조하면, 도 14a의 단계S1402의 처리 대신에, 단계S1403의 처리를 실행한다. 또한, 단계S405의 처리 대신에, 단계S415의 처리를 실행한다.
같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다. 단계S1403에 있어서, 설정부(123)는, 이동 시간이 소정의 임계치(예를 들면, 200msec)보다 긴지를 판단한다.
설정부(123)는, 이동 시간이 소정의 임계치보다 길다고 판단되었을 경우(단계S1403에서 YES), 단계S406의 처리를 실행한다. 설정부(123)는, 이동 시간이 소정의 임계치보다 길지 않다고 판단되었을 경우(단계S1403에서 NO), 단계S415의 처리를 실행한다.
본 예시적 실시예에 있어서는, 2.7픽셀/msec로 기준값이 설정되어 있다. 단계S415에 있어서, 이 기준값은, 2.7픽셀/msec보다 작은 0.5픽셀/msec로 변경된다.
도 15a는 손가락(210)과 터치패널(204)과의 접촉이 검지된 위치가 이동하고 있는 상태를 도시한 도면이다. 도 15a 및 15b는, 도 5a 및 5b의 이동 거리에 의한 특정을 이동 시간에 의한 특정으로 바꿔서 얻어진다. 도 15a 및 15b에서는, 도 14a의 예에서의 임계치가 설정되어 있는 것으로 하여서 설명한다.
도 15a를 참조하면, 위치501로부터 위치502까지의 이동 시간이, 300msec다. 릴리즈전에 최후에 접촉이 검지된 위치와, 그 20msec전에 접촉이 검지된 위치에 의거하여, 단위시간당의 이동량이 산출된다. 또한, 그 단위시간당의 이동량이 2.5픽셀/msec다.
이 때, 판정부(124)는, 제어부(125)에 플릭 조작인 것을 나타내는 신호를 출력하지 않는다. 즉, 판정부(124)는, 도 15a에 나타내는 일련의 조작이 플릭 조작이라고 판단하지 않고, 드래그 및 드롭의 조작이라고 판단한다.
도 15b를 참조하면, 위치511로부터 위치512까지의 이동 시간이, 100msec다. 상기 단위시간당의 이동량은, 릴리즈전에 최후에 접촉이 검지된 위치와, 그 20msec전에 접촉이 검지된 위치에 의거하여 산출된다. 또한, 그산출된 단위시간당의 이동량은 0.7픽셀/msec다.
이 때, 판정부(124)는, 제어부(125)에 플릭 조작인 것을 나타내는 신호를 출력한다. 즉, 판정부(124)는, 도 15b의 일련의 조작이 플릭 조작이라고 판단한다.
도 16a 및 16b는, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 7a 및 7b와 같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
도 16a를 참조하면, 단계S1601에 있어서, 특정부(1301)는, 접촉이 검지된 위치의 이동에 필요한 이동 시간을 특정한다. 단계S1602에 있어서, 설정부(123)는, 이동 시간이 소정의 임계치(예를 들면, 200msec)보다 긴지를 판단한다.
설정부(123)는, 이동 시간이 소정의 임계치보다 길다고 판단되었을 경우(단계S1602에서 YES), 단계S705의 처리를 실행한다. 설정부(123)는, 이동 시간이 소정의 임계치보다 길지 않다고 판단되었을 경우(단계S1602에서 NO), 단계S702의 처리를 실행한다.
달리 말해서, 본 흐름도에서는, 터치패널(204)로부터 손가락(210)이 이동한 취지를 나타내는 이벤트가 통지될 때마다 상기 이동 시간을 측정하고, 플릭 조작을 판정하는 기준값이 변경된 것인가 아닌가를 판정한다. 도 16b의 처리 흐름은, 도 7b와 동일하여, 그에 대한 설명을 생략한다.
도 17은, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 8과 같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S1401의 처리는, 도 14의 단계S1401과 같은 처리이므로, 그에 대한 설명을 생략한다. 단계S1701에 있어서, 설정부(123)는, 단계S1401에서 특정된 이동 시간의 양(T)이, (1) 제1 임계치Ｔｈ1미만, (2) 그 제1 임계치Ｔｈ1이상 제2 임계치Ｔｈ2미만, 및 (3) 제2 임계치Ｔｈ2이상(Ｔｈ1 <Ｔｈ2) 중 어느 하나인지의 여부를 판단한다.
제1 임계치Ｔｈ1은, 예를 들면 200msec, 제2 임계치Ｔｈ2는, 예를 들면 300msec다. (1), 즉 이동 시간이 제1 임계치Ｔｈ1미만일 경우, 단계S805의 처리를 실행한다. (2), 즉 이동 시간이 제1 임계치Ｔｈ1이상 제2 임계치Ｔｈ2미만일 경우, 단계S806의 처리를 실행한다. (3), 즉 이동 시간이 제2 임계치Ｔｈ2이상일 경우, 단계S807의 처리를 실행한다.
본 예시적 실시예에 의하면, 주목 위치의 이동 시간의 길이에 따라, 플릭 조작인 것을 판정하는 기준값을 변경한다.
주목 위치가 이동하지 않고 있는 동안도, 이동 시간이 카운트될 수 있다. 이 때문에, 예를 들면, 터치패널(204)에 손가락(210)이 접촉하고, 그 접촉이 일정시간동안 계속되고, 그 후 터치패널(204)로부터 손가락(210)을 떨어지게 하는 가압 유지(press-and-hold) 조작을 행한 시간을 카운트하는 것이 가능하다.
그 때문에, 유저가 터치 조작을 행하는 것을 결정할 수 없기 때문에 상기 가압 유지 조작을 행할 때, 그 후에 손가락(210)을 약간 이동한 후에 손가락을 터치패널(204)로부터 떼어 놓은 경우에도, 그이동은, 플릭 조작으로서 판단되지 않는다.
도 13b는, 제7 예시적 실시예에 따른 정보처리장치(140)의 구성을 나타내는 기능 블록도다. 이 도 13b에서는, 도 13a의 구성에 유지부(146)를 더 구비하여, 조작 영역의 사이즈를 나타내는 정보를 유지한다.
설정부(143)는, 조작 영역의 사이즈를 나타내는 정보에 의거하여 이동 시간의 임계치나 플릭 조작인 것을 판정하는 기준값을 설정한다. 기능 블록들은 이미 설명되었기 때문에, 그 상세한 설명은 생략한다.
도 18은, 유저의 조작을 판정하는 처리의 흐름을 나타내는 흐름도다. 도 10과 같은 처리에 대해서는, 동일한 참조번호를 부착하고, 그에 대한 설명을 생략한다.
단계S1801에 있어서, 설정부(143)는, 단계S1401에서 특정된 이동 시간이, 단계S1006에서 검출된 이동 방향에 대응하는 임계치보다 긴지를 판단한다.
설정부(143)는, 단계S1401에서 특정된 이동 시간이 임계치보다 길다고 판단되었을 경우(단계S1801에서 YES), 단계S405의 처리를 실행한다. 설정부(143)는, 단계S1401에서 특정된 이동 시간이 임계치보다 길지 않다고 판단되었을 경우(단계S1801에서 NO), 단계S406의 처리를 실행한다.
단계S405에서도, 설정부(143)는, 단계S904에서 특정된 조작 영역의 사이즈에 의거하여 플릭 조작인 것을 판정하는 기준값으로 높이방향, 폭방향 및 사선 방향의 개개의 값을 설정해도 된다.
본 예시적 실시예에 의하면, 높이방향의 이동, 폭방향의 이동, 사선 방향의 이동을 판정한다. 또한, 이동 시간의 판정 처리를 방향마다 행한다. 이렇게 해서, 그 때문에, 주목 위치의 이동 방향에 따라 처리가 바뀔 경우에 효과적이다.
본 발명은, 이하의 처리를 실행함으로써 실현된다. 즉, 상기 예시적 실시예들에 따른 기능을 실현하는 소프트웨어(프로그램)는, 네트워크 또는 각종 기억매체를 거쳐서 시스템 또는 장치에 공급된다. 또한, 그 시스템 또는 장치의 컴퓨터(또는 중앙연산장치(ＣＰＵ)나 마이크로 연산장치(ＭＰＵ)가 그 프로그램을 판독해서 실행한다.
본 발명을 예시적 실시예들을 참조하여 기재하였지만, 본 발명은 상기 개시된 예시적 실시예들에 한정되지 않는다는 것을 알 것이다. 아래의 청구항의 범위는, 모든 변형, 동등한 구조 및 기능을 포함하도록 아주 넓게 해석해야 한다.

Claims (15)

  1. 포인터에 의한 플릭 조작을 판정하는 정보처리장치로서,
    상기 포인터의 이동량에 따른 기준 포인터 속도를 설정하는 설정부; 및
    상기 포인터의 이동 속도와 상기 설정된 포인터 기준속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생하였는지를 판정하는 판정부를 구비한, 정보처리장치.
  2. 제 1 항에 있어서,
    상기 설정부는, 상기 포인터의 이동량이 소정의 임계치보다 크지 않은 경우에 제1 기준속도를 설정하고, 상기 이동량이 상기 임계치보다 큰 경우에 상기 제1 기준속도보다 큰 제2 기준속도를 설정하는, 정보처리장치.
  3. 제 2 항에 있어서,
    상기 포인터에 의한 조작이 가능한 조작 영역의 사이즈에 의거하여 상기 소정의 임계치를 결정하는 결정부를 더 구비한, 정보처리장치.
  4. 제 1 항에 있어서,
    상기 판정부는, 상기 이동 속도가 상기 기준속도보다 큰 경우, 상기 포인터에 의한 플릭 조작이 발생하였다고 판정하고, 상기 이동 속도가 상기 기준속도보다 크지 않은 경우, 상기 포인터에 의한 플릭 조작이 발생하지 않았다고 판정하는, 정보처리장치.
  5. 제 1 항에 있어서,
    포인터에 의한 유저의 조작을 검출하는 취득부를 더 구비한, 정보처리장치.
  6. 제 5 항에 있어서,
    상기 취득부로터의 출력에 의거하여 상기 포인터의 이동량을 특정하는 특정부를 더 구비한, 정보처리장치.
  7. 제 6 항에 있어서,
    상기 특정부는, 이동을 통지하는 이벤트의 통지 회수에 의해 상기 이동량을 특정하는, 정보처리장치.
  8. 포인터에 의한 플릭 조작을 판정하는 정보처리장치의 동작 방법으로서,
    상기 포인터의 이동량에 따라 기준 포인터 속도를 설정하는 단계; 및
    상기 포인터의 이동 속도와 상기 설정된 기준 포인터 속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생하였는지를 판정하는 단계를 포함하는, 정보처리장치의 동작 방법.
  9. 포인터에 의한 플릭 조작을 판정하는 정보처리장치로서,
    상기 포인터의 이동 시간에 따라 기준 포인터 속도를 설정하는 설정부; 및
    상기 포인터의 이동 속도와 상기 설정된 기준 포인터 속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생하였는지를 판정하는 판정부를 구비한, 정보처리장치.
  10. 제 9 항에 있어서,
    상기 설정부는, 상기 이동 시간이 소정의 임계치를 초과하지 않는 경우, 제1 기준속도를 설정하고, 상기 이동 시간이 상기 소정의 임계치를 초과한 경우, 상기 제1 기준속도보다 큰 제2 기준속도를 설정하는, 정보처리장치.
  11. 제 10 항에 있어서,
    상기 포인터에 의한 조작이 가능한 조작 영역의 사이즈에 의거하여 상기 소정의 임계치를 결정하는 결정부를 더 구비한, 정보처리장치.
  12. 제 9 항에 있어서,
    상기 판정부는, 상기 이동 속도가 상기 기준 포인터 속도보다 큰 경우, 상기 포인터에 의한 플릭 조작이 발생하였다고 판정하고, 상기 이동 속도가 상기 기준 포인터 속도보다 크지 않은 경우, 상기 포인터에 의한 플릭 조작이 발생하지 않았다고 판정하는, 정보처리장치.
  13. 포인터에 의한 플릭 조작을 판정하는 정보처리장치의 동작 방법으로서,
    상기 포인터의 이동 시간에 따라 기준 포인터 속도를 설정하는 단계; 및
    상기 포인터의 이동 속도와 상기 설정된 기준 포인터 속도에 의거하여 상기 포인터에 의한 플릭 조작이 발생하였는지를 판정하는 단계를 포함하는, 정보처리장치의 동작 방법.
  14. 청구항 8에 기재된 동작 방법을 컴퓨터에게 실행시키기 위한 프로그램을 격납한, 컴퓨터 판독 가능한 비일시적 기억매체.
  15. 청구항 13에 기재된 동작 방법을 컴퓨터에게 실행시키기 위한 프로그램을 격납한, 컴퓨터 판독 가능한 비일시적 기억매체.
KR1020110121335A 2010-11-24 2011-11-21 정보처리장치 및 그 동작 방법 KR101466240B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2010261607 2010-11-24
JPJP-P-2010-261607 2010-11-24
JPJP-P-2011-164009 2011-07-27
JP2011164009A JP5479414B2 (ja) 2010-11-24 2011-07-27 情報処理装置およびその制御方法

Publications (2)

Publication Number Publication Date
KR20120056211A true KR20120056211A (ko) 2012-06-01
KR101466240B1 KR101466240B1 (ko) 2014-11-27

Family

ID=45318824

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110121335A KR101466240B1 (ko) 2010-11-24 2011-11-21 정보처리장치 및 그 동작 방법

Country Status (5)

Country Link
US (1) US9459789B2 (ko)
EP (1) EP2458490B1 (ko)
JP (1) JP5479414B2 (ko)
KR (1) KR101466240B1 (ko)
CN (1) CN102591450B (ko)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9524093B2 (en) * 2012-06-29 2016-12-20 Google Inc. Systems and methods for handling scrolling actions for scrolling through content displayed on an electronic device
WO2014076803A1 (ja) * 2012-11-15 2014-05-22 パイオニア株式会社 情報処理装置、制御方法、プログラム、及び記憶媒体
JP5862587B2 (ja) 2013-03-25 2016-02-16 コニカミノルタ株式会社 ジェスチャ判別装置、ジェスチャ判別方法、およびコンピュータプログラム
JP6253284B2 (ja) * 2013-07-09 2017-12-27 キヤノン株式会社 情報処理装置およびその制御方法、プログラム、記録媒体
JP6368462B2 (ja) * 2013-08-01 2018-08-01 シャープ株式会社 情報処理装置、情報処理方法及びそのプログラム
JP6171712B2 (ja) * 2013-08-09 2017-08-02 富士ゼロックス株式会社 情報処理装置及びプログラム
WO2015052961A1 (ja) * 2013-10-08 2015-04-16 株式会社ソニー・コンピュータエンタテインメント 情報処理装置
JP6221622B2 (ja) * 2013-10-23 2017-11-01 富士ゼロックス株式会社 タッチパネル装置および画像形成装置
JP6357787B2 (ja) * 2014-02-07 2018-07-18 日本電気株式会社 データ処理装置
JP6305147B2 (ja) * 2014-03-25 2018-04-04 キヤノン株式会社 入力装置、操作判定方法、コンピュータプログラム、及び記録媒体
JP6399834B2 (ja) * 2014-07-10 2018-10-03 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、及びプログラム
JP6410537B2 (ja) * 2014-09-16 2018-10-24 キヤノン株式会社 情報処理装置、その制御方法、プログラム、及び記憶媒体
JP6452456B2 (ja) * 2015-01-09 2019-01-16 キヤノン株式会社 情報処理装置とその制御方法、プログラム、記憶媒体
CN104660911B (zh) * 2015-03-16 2018-01-26 广东欧珀移动通信有限公司 一种快速拍照方法和装置
JP6676913B2 (ja) 2015-09-30 2020-04-08 ブラザー工業株式会社 情報処理装置、および制御プログラム

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5880411A (en) * 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
JPH07114621A (ja) * 1993-10-15 1995-05-02 Hitachi Ltd ジェスチャ認識方法およびそれを用いたジェスチャ認識装置
US20070177804A1 (en) * 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US20020015064A1 (en) * 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
JP4723799B2 (ja) * 2003-07-08 2011-07-13 株式会社ソニー・コンピュータエンタテインメント 制御システムおよび制御方法
US8131026B2 (en) * 2004-04-16 2012-03-06 Validity Sensors, Inc. Method and apparatus for fingerprint image reconstruction
JP4763695B2 (ja) * 2004-07-30 2011-08-31 アップル インコーポレイテッド タッチ・センシティブ入力デバイスのためのモード・ベースのグラフィカル・ユーザ・インタフェース
US7761814B2 (en) * 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
US8147248B2 (en) * 2005-03-21 2012-04-03 Microsoft Corporation Gesture training
JP4485991B2 (ja) * 2005-05-13 2010-06-23 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、画像処理方法及びプログラム
JP4882319B2 (ja) * 2005-09-08 2012-02-22 パナソニック株式会社 情報表示装置
US20070064004A1 (en) * 2005-09-21 2007-03-22 Hewlett-Packard Development Company, L.P. Moving a graphic element
JP4613142B2 (ja) * 2006-03-31 2011-01-12 日本システムウエア株式会社 ジェスチャ認識装置、これを用いたオンライン動作システム、ジェスチャ認識方法及びコンピュータ可読媒体
JP2007334691A (ja) * 2006-06-15 2007-12-27 Canon Inc 情報処理装置及び表示方法
TWM325544U (en) * 2007-05-15 2008-01-11 High Tech Comp Corp Electronic device with switchable user interface and electronic device with accessable touch operation
US20090107737A1 (en) * 2007-10-28 2009-04-30 Joesph K Reynolds Multiple-sensor-electrode capacitive button
JP4670860B2 (ja) * 2007-11-22 2011-04-13 ソニー株式会社 記録再生装置
KR100900295B1 (ko) 2008-04-17 2009-05-29 엘지전자 주식회사 이동 디바이스와 이동 통신 시스템의 사용자 인터페이스방법
US8526767B2 (en) 2008-05-01 2013-09-03 Atmel Corporation Gesture recognition
US8462125B2 (en) * 2008-07-15 2013-06-11 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US8212794B2 (en) * 2008-09-30 2012-07-03 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Optical finger navigation utilizing quantized movement information
JP4666053B2 (ja) 2008-10-28 2011-04-06 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP4752897B2 (ja) * 2008-10-31 2011-08-17 ソニー株式会社 画像処理装置、画像表示方法および画像表示プログラム
JP4752900B2 (ja) * 2008-11-19 2011-08-17 ソニー株式会社 画像処理装置、画像表示方法および画像表示プログラム
JP2010134755A (ja) * 2008-12-05 2010-06-17 Toshiba Corp 通信機器
JP2010176332A (ja) * 2009-01-28 2010-08-12 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP5282617B2 (ja) * 2009-03-23 2013-09-04 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP5487679B2 (ja) * 2009-03-31 2014-05-07 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP5418187B2 (ja) * 2009-12-02 2014-02-19 ソニー株式会社 接触操作判定装置、接触操作判定方法およびプログラム

Also Published As

Publication number Publication date
JP2012128830A (ja) 2012-07-05
CN102591450B (zh) 2015-02-25
CN102591450A (zh) 2012-07-18
KR101466240B1 (ko) 2014-11-27
JP5479414B2 (ja) 2014-04-23
EP2458490A2 (en) 2012-05-30
EP2458490B1 (en) 2016-09-28
EP2458490A3 (en) 2013-05-29
US9459789B2 (en) 2016-10-04
US20120131517A1 (en) 2012-05-24

Similar Documents

Publication Publication Date Title
KR101466240B1 (ko) 정보처리장치 및 그 동작 방법
JP6297599B2 (ja) ３ｄ物体検出によるシステムのエンゲージメントのための方法
US9529527B2 (en) Information processing apparatus and control method, and recording medium
US9880673B2 (en) Multi-touch input information processing apparatus, method, and storage medium
US9269331B2 (en) Information processing apparatus which cooperates with other apparatus, and information processing system in which a plurality of information processing apparatuses cooperates
JP5506375B2 (ja) 情報処理装置及びその制御方法
US20140340204A1 (en) Interactive multi-touch remote control
EP2687973A2 (en) Information processing apparatus and control method thereof
EP2637084A2 (en) Touch screen folder control
JP5783828B2 (ja) 情報処理装置およびその制御方法
WO2014024396A1 (en) Information processing apparatus, information processing method, and computer program
JP6410537B2 (ja) 情報処理装置、その制御方法、プログラム、及び記憶媒体
CN103929603A (zh) 图像投影设备、图像投影系统及控制方法
JPWO2015025345A1 (ja) 情報表示装置、情報表示方法および情報表示プログラム
US20150199020A1 (en) Gesture ui device, gesture ui method, and computer-readable recording medium
WO2013031134A1 (en) Information processing apparatus, information processing method, and program
US9891713B2 (en) User input processing method and apparatus using vision sensor
JP6176907B2 (ja) 情報処理装置およびその制御方法、プログラム
JP2012068495A (ja) 情報処理装置、情報処理端末、情報処理方法およびコンピュータプログラム
US9367169B2 (en) Method, circuit, and system for hover and gesture detection with a touch screen
JP6630164B2 (ja) 電子機器及びその制御方法、プログラム、並びに記憶媒体
KR102240546B1 (ko) 애플리케이션 프로그램 데이터 처리 방법 및 디바이스
KR102438823B1 (ko) 리스트 상의 복수의 아이템에 대한 기능 실행 방법 및 그 장치
US11009991B2 (en) Display control apparatus and control method for the display control apparatus
JP6008904B2 (ja) 表示制御装置、表示制御方法、及び、プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171025

Year of fee payment: 4