KR101960906B1 - 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체 - Google Patents

정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체 Download PDF

Info

Publication number
KR101960906B1
KR101960906B1 KR1020177030316A KR20177030316A KR101960906B1 KR 101960906 B1 KR101960906 B1 KR 101960906B1 KR 1020177030316 A KR1020177030316 A KR 1020177030316A KR 20177030316 A KR20177030316 A KR 20177030316A KR 101960906 B1 KR101960906 B1 KR 101960906B1
Authority
KR
South Korea
Prior art keywords
display
size
area
displayed
input
Prior art date
Application number
KR1020177030316A
Other languages
English (en)
Other versions
KR20170122838A (ko
Inventor
다이스케 히로
료 다카오카
아카네 야노
도모야 나리타
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20170122838A publication Critical patent/KR20170122838A/ko
Application granted granted Critical
Publication of KR101960906B1 publication Critical patent/KR101960906B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • H04M1/72522—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • H04M1/72583—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Abstract

조작 대상물을 표시하도록 디스플레이를 제어하고; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하고; 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 정보 처리 장치.

Description

정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체{INFORMATION PROCESSING APPARATUS, METHOD, AND NON-TRANSITORY COMPUTER-READABLE MEDIUM}
본 기술은 표시 제어 장치에 관한 것으로, 구체적으로는, 화상을 표시하는 표시 제어 장치, 그 제어 방법, 및 이 방법을 컴퓨터에 실행시키는 프로그램에 관한 것이다.
종래 기술에서, 복수의 기능을 구비하는, 휴대 전화기, 디지털 스틸 카메라 등의 전자 기기가 보급되고 있다. 또한, 원하는 기능을 실행하기 위한 각 조작을 유저가 행하게 하기 위한 메뉴 화면을 터치 패널에 표시하고, 이 터치 패널의 조작 입력에 따른 기능을 실행하는 전자 기기가 존재한다.
예를 들어, 기점으로부터의 거리가 커짐에 따라 아이콘을 큰 사이즈로 표시하는 표시 조작 장치가 제안되어 있다(예를 들어, 특허 문헌 1 참조).
일본 특허 출원 공개 제2009-265793호
상술한 종래 기술에서, 표시면에의 손끝의 접촉 면적에 대응하는 사이즈로 아이콘이 표시되기 때문에, 오조작을 감소시킬 수 있다.
여기서, 복수의 기능을 구비하는 전자 기기를 조작하는 경우에, 표시 화면에서의 조작 대상으로서의 항목의 수가 많아지는 경우도 상정된다. 이로 인해, 표시 화면에서의 조작 대상으로서의 항목의 수가 많은 경우에도, 오조작을 방지하는 것이 중요하다.
본 기술은 이러한 상황을 감안해서 만들어진 것이며, 표시 화면에서의 조작 대상물의 오조작을 방지하는 것을 그 목적으로 한다.
조작 대상물을 표시하도록 디스플레이를 제어하고; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하고; 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 정보 처리 장치.
상기 처리 회로는 상기 접촉 사이즈와 임계값을 비교하도록 구성될 수 있다.
상기 처리 회로는 상기 조작 대상물의 사이즈에 기초하여 상기 임계값을 결정하도록 구성될 수 있다.
상기 처리 회로는 상기 비교에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하도록 구성될 수 있다.
상기 회로는 상기 접촉 사이즈가 상기 임계값보다 작은 경우에 상기 조작 대상물에 대한 조작 입력을 가능하게 하도록 구성될 수 있다.
상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 조작 대상물에 대한 조작 입력을 불가능하게 하도록 구성될 수 있다.
상기 회로는 적어도 제1 조작 대상물 및 제2 조작 대상물을 표시하도록 구성될 수 있고, 상기 제1 조작 대상물의 표시 사이즈는 상기 제2 조작 대상물의 표시 사이즈보다 크다.
정보 처리 장치에 의해 실행될 때, 조작 대상물을 표시하도록 디스플레이를 제어하는 단계; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하는 단계; 및 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 단계를 포함하는 처리를 상기 정보 처리 장치에 실행시키는 컴퓨터 프로그램 명령어를 포함하는 비일시적 컴퓨터 판독가능 매체.
정보 처리 장치에 의해 행해지는 방법으로서, 조작 대상물을 표시하도록 디스플레이를 제어하는 단계; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하는 단계; 및 상기 정보 처리 장치의 회로에 의해, 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 단계를 포함하는 방법.
본 기술에 따르면, 표시면에서의 조작 대상물의 오조작을 방지할 수 있다는 우수한 효과를 발휘할 수 있다.
도 1은 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)의 외관 구성예를 도시하는 사시도.
도 2는 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)의 기능 구성예를 도시하는 블록도.
도 3은 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예(메뉴 화면(300))를 도시하는 도면.
도 4는 본 기술의 제1 실시 형태에 따른, 입출력부(150)에 표시되는 조작 대상물과 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈 간의 관계를 도시하는 도면.
도 5는 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면.
도 6은 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면.
도 7은 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면.
도 8은 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면.
도 9는 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면.
도 10은 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)에 의한 표시 제어 처리의 처리 수순의 일례를 도시하는 흐름도.
도 11은 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)에 의한 표시 제어 처리의 처리 수순의 일례를 도시하는 흐름도.
도 12는 본 기술의 제2 실시 형태에 따른 표시 제어 장치(100)에 의한 표시 제어 처리의 처리 수순의 일례를 도시하는 흐름도.
도 13은 본 기술의 실시 형태에 따른, 입출력부(150)에 표시되는 표시 화면의 예(검출 사이즈 측정 화면(500)), 및 그 측정 결과를 도시하는 도면.
이하, 본 기술의 실시 형태들(이하, 실시 형태들이라고 칭한다)에 대해서 설명한다. 그 설명은 이하의 순서로 행한다.
1. 제1 실시 형태(표시 제어: 기준 사이즈 및 검출 사이즈(접촉 사이즈)에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정하는 예)
2. 제2 실시 형태(표시 제어: 검출 사이즈(접촉 사이즈)에 기초하여 조작 대상물의 표시 배율을 변경하는 예)
3. 변형예
<1. 제1 실시 형태>
"표시 제어 장치의 외관의 구성예"
도 1은 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)의 외관의 구성예를 도시하는 사시도이다. 도 1의 "a"는 표시 제어 장치(100)의 한 면(즉, 입출력부(150)가 설치되어 있는 면) 측의 외관을 도시한다. 또한, 도 1의 "b"는 표시 제어 장치(100)의 다른 면(즉, 렌즈(121)가 설치되어 있는 면) 측의 외관을 도시한다.
표시 제어 장치(100)는 제1 버튼(111) 내지 제5 버튼(115), 스피커(101 및 102), 렌즈(121), 및 입출력부(150)를 포함한다. 예를 들어, 표시 제어 장치(100)는 각종 화상을 표시하는 것이 가능한 무선 통신 장치(예를 들어, 통화 및 데이터 통신 기능을 포함하는 휴대 전화기, 또는 스마트폰)에 의해 실현된다. 또한, 표시 제어 장치(100)에는 다른 조작 부재를 설치하는 것도 가능하지만, 이들의 도시 및 설명은 생략한다.
제1 버튼(111) 내지 제5 버튼(115)은 표시 제어 장치(100)에서의 각 조작을 행하기 위한 조작 부재이다.
스피커(101 및 102)는 각종 음성 정보를 출력하는 스피커이다. 예를 들어, 스피커(101)는 통화시에 사용되는 스피커이며, 스피커(102)는 콘텐츠 재생시 등에 사용되는 스피커이다.
렌즈(121)는 피사체로부터의 광을 집광하는 렌즈이다.
입출력부(150)는 각종 화상을 표시하고, 표시면에 근접 또는 접촉하는 물체의 검출 상태에 기초하여 유저로부터의 조작 입력을 접수하는 부이다. 또한, 입출력부(150)는 터치 스크린 또는 터치 패널이라고도 칭해진다.
"표시 제어 장치의 기능 구성예"
도 2는 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)의 기능 구성예를 도시하는 블록도이다.
표시 제어 장치(100)는 조작 접수부(110), 촬상부(120), 기록 매체 제어부(130), 기록 매체(140), 입출력부(150), 입력 제어부(160), 제어부(170), 사이즈 정보 유지부(171), 및 표시 제어부(180)를 포함한다. 또한, 표시 제어 장치(100)에서의 무선 통신에 관한 각 구성에 대해서는, 그 도시 및 설명을 생략한다.
조작 접수부(110)는 유저에 의해 행해진 조작을 접수하는 조작 접수부이며, 접수된 조작 내용에 대응하는 제어 신호(조작 신호)를 제어부(170)에 출력한다. 조작 접수부(110)는 도 1의 제1 버튼(111) 내지 제5 버튼(115)에 대응한다.
촬상부(120)는 렌즈(도 1의 "b"에 도시된 렌즈(121))를 통하여 입사된 피사체의 광을 변환하는 촬상 소자, 및 이 촬상 소자의 출력 신호(촬상 신호)를 처리해서 촬상 화상(화상 데이터)을 생성하는 화상 신호 처리부를 포함한다. 즉, 촬상부(120)에서, 렌즈를 통하여 입사된 피사체의 광학 상이 촬상 소자의 촬상면에 결상되어, 이 상태에서 촬상 소자가 촬상 동작을 행하고, 화상 신호 처리부가 촬상 신호에 대하여 신호 처리를 행함으로써 촬상 화상이 생성된다. 이 촬상 화상의 생성은 조작 접수부(110), 또는 접수부(151)로부터 출력되는 촬상 동작의 개시 지시 정보에 기초하여 행해진다. 그리고, 생성된 촬상 화상이 기록 매체 제어부(130) 및 표시 제어부(180)에 공급된다.
기록 매체 제어부(130)는 제어부(170)의 제어에 기초하여, 기록 매체(140)에의 기록, 또는 기록 매체(140)로부터의 판독의 제어를 행하는 부이다. 예를 들어, 기록 매체 제어부(130)는 촬상부(120)로부터 출력된 촬상 화상(화상 데이터)을 정지 화상 콘텐츠(정지 화상 파일)로서 기록 매체(140)에 기록시킨다. 또한, 예를 들어, 기록 매체 제어부(130)는 촬상부(120)로부터 출력된 촬상 화상(화상 데이터)과 음성 신호 처리부(도시하지 않음)로부터 출력된 음성 데이터를 서로 상관시킨 애니메이션 콘텐츠(애니메이션 파일)를 기록 매체(140)에 기록시킨다. 또한, 예를 들어, 기록 매체 제어부(130)는 기록 매체(140)에 기억되어 있는 애니메이션 콘텐츠를 판독하고, 그 애니메이션 콘텐츠에 포함되는 화상 데이터를 표시 제어부(180)에 출력한다. 또한, 그 애니메이션 콘텐츠에 포함되는 음성 데이터는 (도 1의 "b"에 도시된) 스피커(102)로부터 출력된다.
기록 매체(140)는 기록 매체 제어부(130)의 제어에 기초하여 각종 정보(정지 화상 콘텐츠, 또는 애니메이션 콘텐츠)를 기억하는 매체이다. 또한, 기록 매체(140)는 기억되어 있는 각종 정보를 기록 매체 제어부(130)에 공급한다.
입출력부(150)는 접수부(151) 및 표시부(152)를 포함한다. 예를 들어, 접수부(151)로서 도전성 물체(예를 들어, 사람의 손가락)의 접촉 또는 근접을 정전 용량의 변화에 기초하여 검출하는 정전식(정전 용량 방식) 터치 패널을 사용할 수 있다. 또한, 예를 들어, 표시부(152)로서 LCD(Liquid Crystal Display), 유기 EL(Electro Luminescence) 패널 등의 표시 패널을 사용할 수 있다. 그리고, 입출력부(150)는, 예를 들어, 표시 패널의 표시면 상에 투명한 터치 패널들을 서로 중첩함으로써 구성된다.
입출력부(150)는 표시 제어부(180)의 제어에 기초하여 각종 화상을 표시부(152)에 표시하고, 입출력부(150)의 표시면(표시부(152)의 표시면)에 근접 또는 접촉하는 물체의 검출 상태에 기초하여 유저로부터의 조작 입력을 접수부(151)에 의해 접수한다. 또한, 접수부(151)는 접수된 조작 입력에 대응하는 제어 신호를 입력 제어부(160)에 출력한다.
접수부(151)는 입출력부(150)의 표시면에 근접 또는 접촉하는 물체(예를 들어, 유저의 손가락)의 검출 상태에 기초하여, 그 물체의 조작 입력을 접수하는 부이다. 예를 들어, 접수부(151)는 격자 형상으로 배치된 복수의 정전 센서를 포함한다. 이 정전 센서는 입출력부(150)의 표시면에 물체(도전성 물체(예를 들어, 사람의 손, 또는 손가락))가 근접 또는 접촉하면 정전 용량을 증가시키는 센서이다. 그리고, 접수부(151)는 정전 센서의 정전 용량이 변화하면 그 정전 센서의 정전 용량의 값과, 그 정전 센서의 접수부(151)의 조작면에서의 위치를 포함하는 정보(정전 센서의 정보)를 입력 제어부(160)에 출력한다. 또한, 이하에서, 입출력부(150)의 표시면에 접촉하는 물체의 검출 예만을 설명하지만, 입출력부(150)의 표시면에 근접하는 물체의 검출에 대해서도 마찬가지로 적용할 수 있다. 또한, 접수부(151)는 조작 입력을 행하기 위한 조작 대상물이 표시되는 표시면에 접촉하는 물체를 검출하는 검출부이다. 즉, 접수부(151)는 검출부의 일례이다. 또한, 조작 대상물은, 예를 들어, 도 3에 도시된 설정 조작 화상(331 내지 334)과 같이 입출력부(150)에 표시된다. 예를 들어, 조작 대상물은 조작 입력을 행하기 위한 데이터, 또는 물체(예를 들어, GUI(Graphical User Interface) 부분)이다.
표시부(152)는 표시 제어부(180)의 제어에 기초하여 각 화상을 표시하는 표시 패널이다. 또한, 표시부(152)에서의 표시예는 도 3 내지 도 9 등에 도시한다.
입력 제어부(160)는 접수부(151)에 의해 접수되는 유저에 의한 조작 입력(예를 들어, 터치 조작(탭 조작))에 관한 제어를 행하는 부이다. 예를 들어, 입력 제어부(160)는 접수부(151)로부터 출력된 정전 센서의 정보에 기초하여 입출력부(150)의 표시면에서 유저의 손가락이 접촉한 범위(접촉 범위)를 검출하고, 그 표시면에 대응하는 좌표축에 기초하여 그 접촉 범위를 좌표로 변환한다. 그리고, 입력 제어부(160)는 변환된 좌표에 기초하여 그 접촉 범위의 형상을 산출하고, 그 형상에서의 무게 중심의 좌표를 산출한다. 또한, 입력 제어부(160)는 그 산출된 무게 중심의 좌표를 유저의 손가락이 접촉한 위치(접촉 위치)의 좌표로서 산출한다. 그리고, 입력 제어부(160)는 산출된 접촉 범위의 형상, 및 접촉 위치의 좌표에 관한 조작 정보를 제어부(170)에 출력한다. 제어부(170)는 입력 제어부(160)로부터 출력되는 조작 정보(접촉 범위의 형상, 접촉 위치의 좌표 등)에 기초하여 입출력부(150)의 표시면에서의 유저의 조작 입력을 인식한다.
제어부(170)는 조작 접수부(110)로부터의 조작 신호와, 입력 제어부(160)로부터의 조작 정보(접촉 범위의 형상, 접촉 위치의 좌표 등)에 기초하여 표시 제어 장치(100)의 각 부를 제어하는 부이다. 또한, 제어부(170)는 입출력부(150)의 표시면에서 검출된 유저에 의한 접촉 조작의 접촉 사이즈(검출 사이즈)를 사이즈 정보 유지부(171)에 유지시킨다.
또한, 예를 들어, 제어부(170)는 입출력부(150)의 표시면에서의 물체(예를 들어, 유저의 손가락)의 접촉 사이즈(검출 사이즈)에 기초하여 조작 대상물의 조작 내용을 변경하는 제어를 행한다. 즉, 제어부(170)는 입출력부(150)의 표시면에서의 물체의 접촉 사이즈(검출 사이즈)에 기초하여 복수의 조작 대상물 중 적어도 일부의 조작 내용을 변경한다. 예를 들어, 제어부(170)는 입출력부(150)의 표시면에서의 물체의 접촉 사이즈(검출 사이즈)에 기초하여 조작 대상물의 조작 입력을 불가능하게 함으로써 조작 대상물의 조작 내용을 변경한다.
또한, 예를 들어, 제어부(170)는 입출력부(150)의 표시면에서의 물체의 접촉 사이즈(검출 사이즈)와 입출력부(150)의 표시면에서의 조작 대상물의 사이즈 간의 비교 결과에 기초하여 조작 내용을 변경한다. 구체적으로, 제어부(170)는 입출력부(150)의 표시면에서의 물체의 접촉 사이즈(검출 사이즈)에 기초하여, 입출력부(150)의 표시면에서의 조작 대상물의 사이즈가 큰 경우에, 그 조작 대상물의 조작 입력을 가능하게 한다. 한편, 제어부(170)는 입출력부(150)의 표시면에서의 조작 대상물의 사이즈가 작은 경우에, 그 조작 대상물의 조작 입력을 불가능하게 한다. 또한, 본 기술의 제1 실시 형태에 따르면, 조작 입력이 불가능하게 된 조작 대상물을 간이 조작 대상물이라고 칭하고, 조작 입력이 가능하게 된 조작 대상물을 상세 조작 대상물이라고 칭한다.
사이즈 정보 유지부(171)는 상세 조작 대상물 및 간이 조작 대상물을 결정 할 때 사용되는 기준 사이즈 및 접촉 사이즈(검출 사이즈)를 유지하는 부이며, 유지되어 있는 각 사이즈 정보를 제어부(170)에 공급한다.
여기서, 기준 사이즈는 조작을 행할 때 사용되는 스타일러스, 또는 표준적인 유저의 손가락의 크기를 나타내는 값(규정값)이며, 미리 설정되어 있다. 또한, 접촉 사이즈(검출 사이즈)는 접수부(151)에서 검출된 값(유저가 조작을 행할 때 사용되는 스타일러스의 크기, 또는 유저의 손가락의 크기를 나타내는 값)에 기초하는 값이다.
예를 들어, 제어부(170)는 접수부(151)에서 검출된 값(예를 들어, 유저의 손가락이 접촉한 면적(접촉 면적))을 사이즈 정보 유지부(171)에 순차 유지시킨다. 그리고, 제어부(170)는 사이즈 정보 유지부(171)에 유지되어 있는 접촉 면적의 평균값을 산출하고, 이 평균값을 접촉 사이즈(검출 사이즈)로서 사이즈 정보 유지부(171)에 유지시킨다. 즉, 접촉 사이즈(검출 사이즈)는, 실제로 입력된 입력값의 평균값이다. 그러나, 어른이 사용한 후의 장치를 어린이가 사용할 수 있다는 것도 고려되기 때문에, 단위 시간당의 평균값을 접촉 사이즈(검출 사이즈)로서 사용하는 것이 바람직하다.
표시 제어부(180)는 제어부(170)의 제어에 기초하여 각 화상을 표시부(152)에 출력시키는 부이다. 예를 들어, 표시 제어부(180)는 촬상 동작을 행할 때 각종 설정을 행하기 위한 설정 화면(예를 들어, 도 3에 도시된 메뉴 화면(300)), 또는 촬상부(120)로부터 출력된 촬상 화상(소위, 스루 화상)을 표시부(152)에 표시시킨다. 또한, 예를 들어, 표시 제어부(180)는 기록 매체(140)에 기억되어 있는 콘텐츠(예를 들어, 정지 화상 콘텐츠 또는 애니메이션 콘텐츠)를 표시부(152)에 표시시킨다.
"메뉴 화면의 표시예"
도 3은 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예(메뉴 화면(300))를 도시하는 도면이다. 또한, 도 3 내지 도 9 등에서, 제1 버튼(111) 내지 제5 버튼(115), 스피커(101) 등의 표시는 생략된다.
메뉴 화면(300)은 메뉴 전체를 바라보기 위해서 조작 대상물이 그 종류에 따라 그룹화된 화면이다. 즉, 그룹화된 조작 대상물이 축소 표시된 상태(오버룩 상태)로 9개의 영역으로 그룹 단위로 분류되어, 1개의 화면(메뉴 화면(300))에 표시된다. 또한, 각 그룹에는 비슷하게 보이는 조작 대상물(예를 들어, 동일한 기능에 관한 항목)이 속한다. 또한, 9개의 영역으로 분류되는 메뉴 화면(300)은 일례이며, 표시 대상으로 되는 각 조작 대상물 등에 따라서 영역의 수를 적절히 변경하는 것도 바람직하다.
구체적으로, 메뉴 화면(300)에는 촬상 모드 설정 영역(310), 플래시계 설정 영역(320), 화이트 밸런스계 설정 영역(330), 재생 설정 영역(340), 및 조리개 조정 영역(350)이 표시된다. 또한, 메뉴 화면(300)에는 얼굴 검출계 설정 영역(360), 가이드 표시계 설정 영역(370), 촬상 화상 사이즈계 설정 영역(380), 및 애니메이션계 설정 영역(390)이 표시된다.
촬상 모드 설정 영역(310)은 촬상 모드(예를 들어, 정지 화상 촬상 모드, 및 애니메이션 촬상 모드)를 설정할 때 사용되는 조작 대상물이 표시되는 영역이다.
플래시계 설정 영역(320)은 플래시에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다.
화이트 밸런스계 설정 영역(330)은 화이트 밸런스에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다.
재생 설정 영역(340)은 재생 모드를 설정하기 위한 조작 대상물과, 화상 콘텐츠를 재생할 때 사용되는 조작 대상물이 표시되는 영역이다.
조리개 조정 영역(350)은 조리개를 조정할 때 사용되는 조작 대상물이 표시되는 영역이다.
얼굴 검출계 설정 영역(360)은 얼굴 검출에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다.
가이드 표시계 설정 영역(370)은 가이드 기능(도움말 기능)에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다.
촬상 화상 사이즈계 설정 영역(380)은 기록 대상으로 되는 촬상 화상의 사이즈에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다. 예를 들어, 기록 대상으로 되는 촬상 화상(정지 화상)의 애스펙트비(예를 들어, 4:3, 또는 16:9), 또는 기록 대상으로 되는 촬상 화상(정지 화상)의 화상 크기(STD, 또는 WIDE)를 설정할 수 있다.
애니메이션계 설정 영역(390)은 애니메이션에 관한 각종 설정을 행할 때 사용되는 조작 대상물이 표시되는 영역이다.
또한, 메뉴 화면(300)에 표시되는 조작 대상물이나 영역 등은 일례이며, 설정 모드나 촬상 동작 상태 등에 따라서 적절히 변경하는 것도 바람직하다.
또한, 메뉴 화면(300)에서의 조작 대상물(항목) 등은 유저가 조작 입력을 행할 때 사용되는 조작 영역 화상(조작 표식)이며, 예를 들어, 유저에 의한 접촉 조작(예를 들어, 터치 조작, 및 트레이싱 조작(드래그 조작))을 사용하여 조작 대상물이 조작될 수 있다. 그러나, 메뉴 화면(300)에서, 유저에 의한 접촉 조작의 접촉 사이즈(검출 사이즈)에 대응하는 조작 대상물(상세 조작 대상물)만을 조작 가능하게 하고, 다른 조작 대상물(간이 조작 대상물)은 조작 불가능하게 한다. 이로 인해, 조작 불가능하게 된 조작 대상물(간이 조작 대상물)을 조작하기 위해서, 그 조작 대상물이 표시되어 있는 영역(310, …, 390)을 선택하는 선택 조작(터치 조작)을 행하고, 그 영역을 확대 표시한 표시 화면(줌 상태)을 표시하는 것이 필요하다. 이 표시예는 도 6, 도 8, 및 도 9에 도시한다.
예를 들어, 메뉴 화면(300)이 입출력부(150)에 표시되어 있는 상태에서 입출력부(150)에서 유저의 손가락(10)을 사용하여 터치 조작이 행해진 경우를 상정한다. 이 경우에, 제어부(170)는 그 터치 조작이 메뉴 화면(300)의 어느 위치에서 행해졌는지를 특정한다. 즉, 제어부(170)는 입력 제어부(160)로부터 출력된 조작 정보에 기초하여 입출력부(150)의 표시면에서 유저의 손가락이 접촉한 위치(접촉 위치)를 특정한다. 그리고, 제어부(170)는 그 접촉 위치가 상세 조작 대상물에 포함되는 경우에 그 상세 조작 대상물에 대응하는 처리를 행한다. 한편, 제어부(170)는 그 접촉 위치가 상세 조작 대상물에 포함되지 않은 경우(그 접촉 위치가 간이 조작 대상물에 포함되는 경우를 포함함)에 그 접촉 위치가 포함되는 영역(310, …, 390)을 확대해서, 입출력부(150)에 표시시키기 위한 제어를 행한다. 예를 들어, 화이트 밸런스계 설정 영역(330)에서 유저의 손가락(10)을 사용한 터치 조작이 행해진 경우에서의 확대 표시의 예를 도 6에 도시한다.
여기서, 가상 공간을 표시하는 시점 위치로 전환하거나 확대 또는 축소 표시함으로써 데이터 항목 간의 이동, 또는 파악을 원활하게 행할 수 있다. 또한, 확대 표시함으로써 유저가 의도하는 조작 대상물에 유저가 주시할 수 있기 때문에 유저는 조작을 하기가 쉬워진다.
그러나, 예를 들어, 메뉴 화면(300)이 표시되어 있는 경우에 각각의 조작 대상물이 축소 표시되어 있기 때문에 유저가 의도하는 조작 대상물과 다른 조작 대상물에 접촉하는 경우, 또는 2개 이상의 조작 대상물에 접촉하는 경우도 상정된다. 또한, 유저의 의도에 반하여 2개 이상의 조작 대상물에 접촉하는 경우를 충돌이라고 칭한다.
따라서, 조작을 행하는 측의 스타일러스, 또는 유저의 손가락의 크기(기준 사이즈)를 일률적으로 미리 규정해 두고, 표시 상태에 따라 조작이 불가능하게 된 표시 상태, 또는 조작이 불가능한 영역을 정적으로 규정해 두도록 조작이 행해진다. 이에 의해, 축소 표시되어 있는 조작 대상물을 조작할 때 충돌, 또는 조작 오류의 발생을 방지할 수 있다. 그러나, 규정된 값(기준 사이즈)과 스타일러스, 또는 유저의 손가락의 크기 간의 차이가 커지면, 조작 대상물을 오조작하는 것도 상정된다.
특히, 표시 배율을 단계 없이 확대 또는 축소가능한 가상 공간에서, 규정값(기준 사이즈)의 크기와 상이한 경우에, 실제로 조작 가능한 조작 대상물로서 보이는 조작 대상물은, 비교적 큰 규정값(기준 사이즈)에 따라서 제한되고, 조작이 곤란해진다. 한편, 비교적 작은 규정값(기준 사이즈)에 따라서 조작 대상물이 충돌, 또는 조작 오류가 되는 것도 상정된다.
따라서, 본 기술의 제1 실시 형태에 따르면, 기준 사이즈와 함께 검출 사이즈를 사용하여 상세 조작 대상물 및 간이 조작 대상물을 결정한다.
"상세 조작 대상물 및 간이 조작 대상물의 판정의 예"
도 4는 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 조작 대상물과 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈 간의 관계를 도시하는 도면이다.
도 4의 "a"는 기준 사이즈(200)와 확대 표시되어 있는 조작 대상물 간의 관계의 예를 도시한다. 또한, 도 4의 "b"는 기준 사이즈(200)와 축소 표시되어 있는 조작 대상물 간의 관계의 예를 도시한다. 또한, 도 4의 "a" 및 "b"에서, 도 3의 화이트 밸런스계 설정 영역(330)에서의 설정 조작 화상(조작 대상물)(331 내지 334)을 예로 든다.
또한, 상술한 바와 같이, 메뉴 화면(300)에 포함되는 각 영역에서, 유저 조작에 의해 확대 및 축소를 행하는 것이 가능하고, 도 4의 "a" 및 "b"에서, 다른 표시 배율을 갖는 화이트 밸런스계 설정 영역(330)을 상정해서 설명한다.
화이트 밸런스계 설정 영역(330)에는 설정 조작 화상(331 내지 334)이 표시된다. 설정 조작 화상(331 내지 334)은 촬상 모드의 설정 시에 화이트 밸런스를 조정할 때 사용되는 조작 화상이다. 예를 들어, 설정 조작 화상(331 내지 334)의 접촉 조작에 의해 화이트 밸런스를 조정할 수 있다.
또한, 본 기술의 실시 형태에 따라 비교 대상으로서 사용되는 사이즈(기준 사이즈, 검출 사이즈(접촉 사이즈), 및 조작 대상물의 사이즈)는 입출력부(150)의 표시면에서의 면적을 의미한다. 그러나, 그 형상 등에 의해 특정되는 값(예를 들어, 조작 대상물을 둘러싸는 직사각형에 의해 특정되는 면적)을 사용하는 것도 바람직하다.
여기서, 도 4의 "a"에 도시한 바와 같이, 설정 조작 화상(331 내지 334)의 사이즈보다 기준 사이즈(200)가 작은 경우를 상정한다. 이 경우에, 유저가 의도하는 조작 대상물(설정 조작 화상(331 내지 334))을 세밀하게 조작할 수 있는 가능성이 높아진다. 이로 인해, 제어부(170)는 기준 사이즈(200)보다 큰 조작 대상물을 상세 조작 대상물로서 결정한다. 이와 같이, 상세 조작 대상물로서 결정된 조작 대상물은 입출력부(150)의 표시면에서의 유저의 접촉 조작을 사용하여 조작 가능하게 된다.
또한, 도 4의 "b"에 도시한 바와 같이, 설정 조작 화상(331 내지 334)의 사이즈보다 기준 사이즈(200)가 큰 경우를 상정한다. 이 경우에, 유저가 의도하는 조작 대상물(예를 들어, 설정 조작 화상(331))과 다른 조작 대상물(예를 들어, 설정 조작 화상(333))의 조작을 잘못 행하는 조작 오류, 또는 충돌이 발생할 우려가 있다. 이로 인해, 제어부(170)는 기준 사이즈(200)보다 사이즈가 작은 조작 대상물을 간이 조작 대상물로서 결정한다. 이와 같이, 간이 조작 대상물로서 결정된 조작 대상물은 입출력부(150)의 표시면에서의 유저의 접촉 조작을 사용하여 조작 불가능하게 된다.
여기서, 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈와 검출 사이즈(접촉 사이즈) 간의 관계에 대해서 설명한다.
예를 들어, 검출 사이즈가 기준 사이즈보다 비교적 작은 경우를 상정한다. 이 경우에, 비교적 작은 사이즈의 조작 대상물일지라도, 조작 대상물이 조작 물체(예를 들어, 손가락)를 사용하여 조작될 수 있는 경우가 많아지는 것이 상정된다. 즉, 기준 사이즈에 기초하여 결정된 간이 조작 대상물일지라도, 유저의 의도에 따라서 세밀하게 조작될 수 있는 가능성이 있다. 이로 인해, 제어부(170)는 검출 사이즈보다 사이즈가 큰 간이 조작 대상물을 상세 조작 대상물로서 새롭게 결정한다. 이와 같이, 상세 조작 대상물로서 새롭게 결정된 조작 대상물에 대해서는 입출력부(150)의 표시면에서의 유저의 접촉 조작을 사용하는 조작이 가능하게 된다.
한편, 예를 들어, 검출 사이즈가 기준 사이즈보다 비교적 큰 경우를 상정한다. 이 경우에, 비교적 큰 사이즈의 조작 대상물일지라도, 조작 물체(예를 들어, 손가락)를 사용하여 조작될 수 없는 경우가 많아지는 것이 상정된다. 즉, 유저가 의도하는 조작 대상물(예를 들어, 설정 조작 화상(331))과 다른 조작 대상물(예를 들어, 설정 조작 화상(333))의 조작을 잘못 행하는 조작 오류, 또는 충돌이 발생할 우려가 있다. 이로 인해, 제어부(170)는 검출 사이즈보다 사이즈가 작은 상세 조작 대상물(기준 사이즈에 기초하여 결정된 상세 조작 대상물)을 간이 조작 대상물로서 새롭게 결정한다. 이와 같이, 간이 조작 대상물로서 새롭게 결정된 조작 대상물에 대해서는 입출력부(150)의 표시면에서의 유저의 접촉 조작을 사용하는 조작은 불가능하게 된다.
이와 같이, 기준 사이즈에 기초하여 결정된 상세 조작 대상물 및 간이 조작 대상물에 대해서 검출 사이즈에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 새롭게 결정한다. 즉, 실제로 조작되고 있는 조작 물체(예를 들어, 손가락)의 사이즈(검출 사이즈)에 따른 적절한 결정(상세 조작 대상물 및 간이 조작 대상물의 결정)을 행할 수 있다. 이에 의해, 조작 오류와 충돌의 발생을 방지할 수 있다.
"조작 대상물의 표시예"
도 5 내지 도 9는 본 기술의 제1 실시 형태에 따른 입출력부(150)에 표시되는 표시 화면의 예를 도시하는 도면이다. 도 5 내지 도 9에서, 조작 물체(예를 들어, 손가락(10), 손(20))의 사이즈와 상세 조작 대상물 및 간이 조작 대상물 간의 관계의 예를 간략화해서 도시한다.
도 5는 조작 물체로서 손가락(10)을 사용하여 접촉 조작을 행하는 경우의 메뉴 화면(300)을 도시한다. 또한, 도 5에 도시된 메뉴 화면(300)은 도 3과 동일하다. 그러나, 메뉴 화면(300)에 표시되어 있는 조작 대상물(예를 들어, 설정 조작 화상(331 내지 334)) 중에서, 점선의 직사각형(401 및 402)으로 둘러싸여 있는 조작 대상물만이 상세 조작 대상물로 설정된다. 이로 인해, 메뉴 화면(300)에서, 9개의 영역(310, …, 390)의 선택 조작과, 점선의 직사각형(401 및 402)으로 둘러싸여 있는 상세 조작 대상물의 조작의 접촉 조작만을 행할 수 있다.
또한, 상세 조작 대상물 및 간이 조작 대상물을, 유저가 용이하게 서로 구별할 수 있도록 다른 표시 형태를 사용하여 표시하는 것도 바람직하다. 예를 들어, 상세 조작 대상물을 하이라이트(간이 조작 대상물보다 상세 조작 대상물을 밝게 표시함)로 할 수 있다. 또한, 메뉴 화면(300)이 백색을 기초로 하는 표시 화면인 경우에 상세 조작 대상물을 청색으로 표시하는 것도 바람직하다. 또한, 상세 조작 대상물이 미소(minute)해서, 확대 또는 축소하여 반복 표시되도록 상세 조작 대상물을 표시하는 것도 바람직하다(예를 들어, 상세 조작 대상물을 가볍게 움직이는 느낌으로 표시함).
여기서, 점선의 직사각형(401 및 402)으로 둘러싸여 있는 상세 조작 대상물 이외의 조작 대상물(간이 조작 대상물(예를 들어, 설정 조작 화상(331 내지 334)))은, 각 영역을 확대 표시시킴으로써 조작될 수 있다.
예를 들어, 화이트 밸런스계 설정 영역(330)에 표시되어 있는 설정 조작 화상(간이 조작 대상물)(331 내지 334)이 조작되기 때문에, 화이트 밸런스계 설정 영역(330)이 확대 표시되어 있는 예를 도 6에 도시한다.
도 6에는 도 5에 도시된 메뉴 화면(300)에서 화이트 밸런스계 설정 영역(330)에의 터치 조작이 유저에 의해 행해진 경우에 표시되는 메뉴 화면(410)이 도시된다. 즉, 메뉴 화면(410)은 화이트 밸런스계 설정 영역(330)을 확대한 화면이다. 이와 같이, 그룹화된 조작 대상물이 확대 표시된 상태(줌 상태)에서 그룹 단위로 1개의 화면(메뉴 화면(410))이 표시된다.
메뉴 화면(410)에는, 설정 조작 화상(상세 조작 대상물)(331 내지 334)이 표시된다. 또한, 설정 조작 화상(상세 조작 대상물)(331 내지 334)은 도 4와 동일하다.
도 5 및 도 6에 도시한 바와 같이, 표시 제어 장치(100)에는 조작 대상물이 축소 표시된 축소 표시 상태(오버룩 상태)의 메뉴 화면과, 조작 대상물이 확대 표시된 확대 표시 상태(줌 상태)의 메뉴 화면이 표시된다. 또한, 이들 메뉴 화면의 표시는 유저 조작(예를 들어, 입출력부(150)의 표시면에서의 접촉 조작, 또는 제1 버튼(111) 내지 제3 버튼(113)의 누름 조작)에 의해 전환된다.
여기서, 메뉴 화면(410)에 표시되어 있는 설정 조작 화상(331 내지 334) 모두가 상세 조작 대상물(점선의 직사각형(411 내지 414)으로 둘러싸여 나타냄)인 것으로 상정한다. 이로 인해, 메뉴 화면(410)에서, 설정 조작 화상(331 내지 334) 모두에 대한 접촉 조작을 행할 수 있다.
여기서, 예를 들어, 메뉴 화면(410)에서의 설정 조작 화상(331 내지 334)의 사이즈보다 검출 사이즈가 큰 조작 물체에 의해 접촉 조작이 행해지는 것이 상정된다. 예를 들어, 도 7에 도시한 바와 같이, 조작 물체로서 주먹 쥔 상태의 손(20)을 사용하여 접촉 조작을 행하는 것도 상정된다. 따라서, 도 7 내지 도 9에서, 검출 사이즈가 비교적 큰 조작 물체에 의해 접촉 조작이 행해지는 경우의 상세 조작 대상물과 간이 조작 대상물 간의 관계 예를 도시한다.
도 7은 조작 물체로서 주먹 쥔 상태의 손(20)의 등을 사용하여 접촉 조작을 행하는 경우에 표시되는 메뉴 화면(300)을 도시한다. 예를 들어, 손(20)으로 무엇인가를 쥐고 있는 상태에서 접촉 조작을 행하는 경우가 상정된다. 또한, 도 7에 도시하는 메뉴 화면(300)은 도 3과 동일하다.
그러나, 메뉴 화면(300)에 표시되어 있는 조작 대상물(예를 들어, 설정 조작 화상(331 내지 334)) 모두가 간이 조작 대상물인 것으로 상정한다. 이로 인해, 메뉴 화면(300)에서, 9개의 영역(310, …, 390)의 선택 조작만을 접촉 조작을 사용하여 행할 수 있다.
이로 인해, 각 조작 대상물(간이 조작 대상물(예를 들어, 설정 조작 화상(331 내지 334))에 대해서 접촉 조작을 행하기 위해서 각 영역을 확대 표시하는 것이 필요하다. 예를 들어, 화이트 밸런스계 설정 영역(330)에 표시되어 있는 설정 조작 화상(간이 조작 대상물)(331 내지 334)을 조작하기 위해서, 화이트 밸런스계 설정 영역(330)을 확대 표시하는 예를 도 8에 도시한다.
도 8은 도 7에 도시된 메뉴 화면(300)에서 화이트 밸런스계 설정 영역(330)에의 터치 조작이 유저에 의해 행해진 경우에 표시되는 메뉴 화면(410)을 도시한다. 또한, 도 8에 도시하는 메뉴 화면(410)은 도 6과 동일하다.
그러나, 메뉴 화면(410)에 표시되어 있는 조작 대상물(설정 조작 화상(331 내지 334)) 모두가 간이 조작 대상물이라는 점이 상이하다.
이로 인해, 각 조작 대상물(설정 조작 화상(331 내지 334))에 대해서 접촉 조작을 행하기 위해서 각 영역을 추가 확대 표시하는 것이 필요하다. 예를 들어, 설정 조작 화상(간이 조작 대상물)(331)을 조작하기 위해서, 설정 조작 화상(간이 조작 대상물)(331)을 확대 표시하는 예를 도 9에 도시한다.
도 9에는, 도 8에 도시하는 메뉴 화면(410)에서 설정 조작 화상(331)을 확대시키는 조작(예를 들어, 설정 조작 화상(331)의 부근의 터치 조작)이 유저에 의해 행해진 경우에 표시되는 메뉴 화면(420)을 도시한다. 즉, 메뉴 화면(420)은 설정 조작 화상(331)을 확대한 화면이다.
여기서, 메뉴 화면(420)에 표시되어 있는 설정 조작 화상(331)이 상세 조작 대상물(점선의 직사각형(421)으로 둘러싸여 나타냄)인 것으로 상정한다. 이로 인해, 메뉴 화면(420)에서 설정 조작 화상(331)의 접촉 조작을 행할 수 있다.
이와 같이, 검출 사이즈가 비교적 큰 조작 물체에 의해 접촉 조작이 행해지는 경우에 그 검출 사이즈의 사이즈로 조작 대상물을 확대 표시하는 것이 필요하다.
"표시 제어 장치의 동작예"
도 10 및 도 11은 본 기술의 제1 실시 형태에 따른 표시 제어 장치(100)에 의한 표시 제어 처리의 처리 수순의 일례를 도시하는 흐름도이다.
최초에, 제어부(170)는 메뉴 화면의 표시 지시 조작이 행해졌는지의 여부를 판단하고(스텝 S901), 메뉴 화면의 표시 지시 조작이 행해지지 않은 경우에 감시를 계속해서 행한다. 메뉴 화면의 표시 지시 조작이 행해진 경우에(스텝 S901), 제어부(170)는 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정한다(스텝 S902). 즉, 표시 대상으로 되는, 메뉴 화면에 포함되는 각 조작 대상물이 상세 조작 대상물 및 간이 조작 대상물 중 어느 하나로 결정된다(스텝 S902).
계속해서, 표시 제어부(180)는 제어부(170)의 지시에 기초하여 메뉴 화면을 표시부(152)에 표시시킨다(스텝 S903). 예를 들어, 도 3에 도시된 메뉴 화면(300)이 표시된다. 여기서, 메뉴 화면에 표시되는 조작 대상물 중에서, 상세 조작 대상물은 조작 가능하지만, 이에 반해, 간이 조작 대상물은 조작 불가능하다.
계속해서, 제어부(170)는 유저에 의한 조작이 행해졌는지의 여부를 판단하고(스텝 S904), 유저에 의한 조작이 행해지지 않은 경우에 감시를 계속해서 행한다. 한편, 유저에 의한 조작이 행해진 경우에(스텝 S904), 제어부(170)는 그 조작이 메뉴 화면의 표시 종료 조작인지의 여부를 판단한다(스텝 S905). 그리고, 그 조작이 메뉴 화면의 표시 종료 조작인 경우에(스텝 S905), 표시 제어 처리의 동작을 종료한다.
그 조작이 메뉴 화면의 표시 종료 조작이 아닌 경우에(스텝 S905), 제어부(170)는 입출력부(150)의 표시면에의 접촉 조작이 행해졌는지의 여부를 판단하고(스텝 S906), 접촉 조작이 행해지지 않은 경우에 처리는 스텝 S908로 진행된다. 입출력부(150)의 표시면에의 접촉 조작이 행해진 경우에(스텝 S906), 제어부(170)는 그 접촉 조작에 기초하여 조작 물체(예를 들어, 손가락)의 사이즈(예를 들어, 접촉 면적)를 취득하고, 그 사이즈 정보를 사이즈 정보 유지부(171)에 유지시킨다(스텝 S907). 이 경우에, 과거의 사이즈(예를 들어, 접촉 면적)의 평균값이 산출되고, 이 평균값이 검출 사이즈(접촉 사이즈)로서 사이즈 정보 유지부(171)에 유지된다. 또한, 스텝 S906은 검출 수순의 일례이다.
계속해서, 제어부(170)는 그 조작이 표시 배율의 변경 조작인지의 여부를 판단한다(스텝 S908). 그리고, 그 조작이 표시 배율의 변경 조작인 경우에(스텝 S908), 제어부(170)는 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈에 기초하여 변경 후의 표시 배율에 관한 상세 조작 대상물 및 간이 조작 대상물을 결정한다(스텝 S909). 즉, 변경 후의 표시 배율을 갖는 메뉴 화면에 포함되는 각 조작 대상물에 대해서 상세 조작 대상물 및 간이 조작 대상물이 새롭게 결정된다(스텝 S909). 계속해서, 표시 제어부(180)는 제어부(170)의 지시에 기초하여 변경된 표시 배율을 이용하여 메뉴 화면을 표시부(152)에 표시시키고(스텝 S910), 처리는 스텝 S904로 복귀된다.
또한, 그 조작이 표시 배율의 변경 조작이 아닌 경우에(스텝 S908), 제어부(170)는 그 조작에 따른 처리를 행한다(스텝 S911). 계속해서, 제어부(170)는 사이즈 정보 유지부(171)에 검출 사이즈가 유지되어 있는지 여부를 판단하고(스텝 S912), 사이즈 정보 유지부(171)에 검출 사이즈가 유지되어 있지 않은 경우에, 처리는 스텝 S904로 복귀된다.
사이즈 정보 유지부(171)에 검출 사이즈가 유지되어 있는 경우에(스텝 S913), 제어부(170)는 사이즈 정보 유지부(171)에 유지되어 있는 기준 사이즈와 검출 사이즈를 서로 비교한다(스텝 S913). 그리고, 검출 사이즈가 기준 사이즈보다 일정 값 이상 작은 경우에(스텝 S913), 제어부(170)는 메뉴 화면에 포함되는 간이 조작 대상물 중에서, 검출 사이즈에 의해 조작 가능하게 설정된 조작 대상물을 상세 조작 대상물로서 결정한다(스텝 S914). 즉, 표시부(152)에 표시되어 있는 메뉴 화면에 포함되는 간이 조작 대상물 중 검출 사이즈에 의해 조작 가능하게 설정된 조작 대상물은 간이 조작 대상물로부터 상세 조작 대상물로 변경된다(스텝 S914).
또한, 검출 사이즈가 기준 사이즈보다 일정 값 이상 작지 않은 경우에(스텝 S913), 제어부(170)는 검출 사이즈가 기준 사이즈보다 일정 값 이상 큰지의 여부를 판단한다(스텝 S915). 검출 사이즈가 기준 사이즈보다 일정 값 이상 큰 경우에(스텝 S915), 제어부(170)는 메뉴 화면에 포함되는 상세 조작 대상물 중에서, 검출 사이즈에 의해 조작이 곤란(조작 불가능)한 조작 대상물을 간이 조작 대상물로서 결정한다(스텝 S916). 즉, 표시부(152)에 표시되어 있는 메뉴 화면에 포함되는 상세 조작 대상물 중에서, 검출 사이즈에 의해 조작이 곤란한 조작 대상물은 상세 조작 대상물로부터 간이 조작 대상물로 변경된다(스텝 S916).
또한, 검출 사이즈가 기준 사이즈보다 일정 값 이상 크지 않은 경우에(예를 들어, 검출 사이즈와 기준 사이즈가 대략 동일)(스텝 S915), 처리는 스텝 S904로 진행된다. 또한, 스텝 S913 내지 S916은 제어 수순의 일례이다.
이와 같이, 본 기술의 제1 실시 형태에 따르면, 조작을 행할 때 사용되는 스타일러스, 또는 손가락의 크기를 계측하고, 표시 상태에 따라 조작 곤란으로 예측되는 조작 대상물을 상세 조작 대상물로부터 간이 조작 대상물로 동적으로 제한한다. 또한, 조작할 조작 대상물의 크기가 미리 상정해서 규정한 크기(기준 사이즈)와 상이한 경우에도, 또는 가상 공간 내의 확대 및 축소 표시가 어떠한 표시 배율로 변경된 경우에도, 충돌, 또는 조작 오류의 발생을 방지할 수 있다. 즉, 조작을 행할 때 사용되는 스타일러스, 또는 손가락의 크기를 계측하고, 그것을 표시 상태에 따라 조작 대상물의 결정 처리에 동적으로 반영함으로써, 시점 위치가 전환되거나 확대 및 축소 표시된 가상 공간에서의 충돌, 또는 조작 오류의 발생을 방지할 수 있다.
또한, 본 기술의 제1 실시 형태에 따르면, 기준 사이즈에 기초하여 결정된 상세 조작 대상물 및 간이 조작 대상물에 대해서 검출 사이즈를 사용하여 새로운 결정 처리를 행하는 예를 설명한다. 그러나, 검출 사이즈에만 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정하는 것도 바람직하다.
"다른 판정예"
이상에서, 표시 화면에서의 조작 대상물의 사이즈, 및 기준 사이즈와 검출 사이즈 간의 비교 결과에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정하는 예를 설명했다. 그러나, 예를 들어, 표시 화면에서의 조작 대상물의 사이즈가 비교적 작을지라도, 그 주위에 다른 조작 대상물이 존재하지 않는 경우 등에 조작 대상물은 조작 가능한 것으로 생각된다.
따라서, 표시 화면에서의 조작 대상물의 사이즈 이외의 다른 요소를 판정에 사용하는 예를 설명한다.
최초에, 표시 화면 내(또는, 소정 범위의 영역 내)에서의 조작 대상물의 수를 판정 요소로 설정하는 판정 예에 대해서 설명한다. 예를 들어, 표시 화면에서의 조작 대상물의 사이즈가 검출 사이즈보다 현저하게 작은 경우에도, 표시 화면 내(또는, 소정 범위의 영역 내)에 존재하는 1개의 조작 대상물이 있는 경우에, 조작 대상물은 조작 가능한 것으로 생각된다. 이로 인해, 표시 화면 내(또는, 소정 범위의 영역 내)에 존재하는 1개의 조작 대상물이 있는 경우에, 그 조작 대상물을 상세 조작 대상물로서 결정한다. 즉, 조작 대상물이 검출 사이즈보다 현저하게 작은 경우에도, 그 주위에 아무것도 없으면 그 조작 대상물을 상세 조작 대상물로 결정한다.
이와 같이, 제어부(170)는 표시면에서의 물체의 접촉 사이즈에 기초하여 조작 입력이 불가능한 것으로 판단되는 조작 대상물일지라도, 소정 조건을 만족시키는 경우에 그 조작 대상물의 조작 입력을 가능하게 한다. 또한, 소정 조건을 만족시키는 경우는, 예를 들어, 표시면에서의 소정 영역 내에 존재하는 그 조작 대상물 및 다른 조작 대상물의 수가 소정수(예를 들어, 1) 이내로 되는 경우이다.
이어서, 표시 화면에서의 조작 대상물 간의 거리를 판정 요소로 설정하는 판정 예에 대해서 설명한다. 예를 들어, 표시 화면 내(또는, 소정 범위의 영역 내)에 복수의 조작 대상물이 존재하는 경우를 상정한다. 이 경우에, 표시 화면에서의 각 조작 대상물의 사이즈(예를 들어, 2개의 조작 대상물을 연결하는 방향에서의 길이)가 2개의 조작 대상물 간의 거리보다 일정 값 이상 큰 경우에, 이들 2개의 조작 대상물은 조작 곤란(조작 불가능)한 것으로 생각된다. 이로 인해, 표시 화면에서의 각 조작 대상물의 사이즈가 2개의 조작 대상물 간의 거리보다 일정 값 이상 큰 경우에, 그 조작 대상물은 간이 조작 대상물로서 결정된다.
이와 같이, 제어부(170)는 표시면에서의 물체의 접촉 사이즈에 의해 특정되는 값에 기초하여 복수의 조작 대상물 중 2개의 조작 대상물 간의 표시면에서의 거리가 작은 경우에, 2개의 조작 대상물의 조작 입력을 불가능하게 한다.
즉, 유저가 의도하는 조작 대상물과 다른 조작 대상물의 조작을 행하는 조작 오류, 또는 충돌의 발생을 방지하기 때문에, 조작 대상물의 간격, 그 위치 관계, 그 수에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정할 수 있다.
<2. 제2 실시 형태>
본 기술의 제1 실시 형태에 따르면, 기준 사이즈 및 검출 사이즈에 기초하여 상세 조작 대상물 및 간이 조작 대상물을 결정하는 예를 설명했다. 여기서, 표시 화면에 대한 조작이 곤란한 조작 대상물이 존재하는 경우에, 그 표시 배율을 변경하고,그 조작 대상물의 조작을 가능하게 하는 것도 생각된다.
따라서, 본 기술의 제2 실시 형태에 따르면, 표시 화면에 대한 조작이 곤란한 조작 대상물이 존재하는 경우에, 표시 배율을 변경(예를 들어, 확대)하고, 그 조작 대상물의 조작을 가능하게 하는 예를 설명한다. 또한, 본 기술의 제2 실시 형태에 따른 표시 제어 장치의 구성은 도 1 및 도 2 등에 도시하는 예와 대략 동일하다. 이로 인해, 본 기술의 제1 실시 형태와 공통되는 부분에 대해서는, 그 설명의 일부를 생략한다.
"표시 제어 장치의 동작예"
도 12는 본 기술의 제2 실시 형태에 따른 표시 제어 장치(100)에 의한 표시 제어 처리의 처리 수순의 일례를 도시하는 흐름도이다. 또한, 사이즈 정보 유지부(171)에는 이력 정보로서 검출 사이즈가 순차 유지되어 있다. 또한, 스텝 S921 및 S922에 대해서는, 도 10에 도시된 스텝 S906 및 S907의 처리 수순과 동일하기 때문에, 그 설명을 생략한다.
제어부(170)는 이번에 취득된 검출 사이즈와 사이즈 정보 유지부(171)에 유지되어 있는 과거의 검출 사이즈를 비교하고, 이들이 일정 값 이상 서로 다른지의 여부를 판단한다(스텝 S923). 그리고, 2개의 검출 사이즈가 일정 값의 범위 내인 경우에(스텝 S923), 표시 제어 처리의 동작을 종료한다.
2개의 검출 사이즈가 일정 값 이상인 경우에(스텝 S923), 제어부(170)는 메뉴 화면에 포함되는 조작 대상물 중 이번의 검출 사이즈에 의해 조작이 곤란(조작 불가능)하게 된 조작 대상물이 존재하는지의 여부를 판단한다(스텝 S924). 그리고, 이번의 검출 사이즈에 의해 조작이 곤란(조작 불가능)하게 된 조작 대상물이 존재하지 않는 경우에(스텝 S924), 표시 제어 처리의 동작을 종료한다.
또한, 이번의 검출 사이즈에 의해 조작이 곤란(조작 불가능)하게 된 조작 대상물이 존재하는 경우에(스텝 S924), 제어부(170)는 그 조작이 곤란(조작 불가능)하게 된 조작 대상물이 이번의 검출 사이즈를 사용하여 조작 가능하게 되는 표시 배율을 산출한다(스텝 S925). 즉, 메뉴 화면에 포함되는 모든 조작 대상물이 상세 조작 대상물이 되는 표시 배율이 산출된다. 계속해서, 표시 제어부(180)는 제어부(170)의 지시에 기초하여, 산출된 표시 배율로 메뉴 화면을 표시부(152)에 표시시킨다(스텝 S926). 예를 들어, 최신의 접촉 조작이 행해진 위치를 중심 위치로 해서 메뉴 화면이 확대 표시된다.
또한, 표시부(152)에 표시되어 있는 간이 조작 대상물에 대해서 유저에 의한 접촉 조작이 행해진 경우에만, 그 접촉 조작이 행해진 간이 조작 대상물, 및 그 주변을 확대 표시하는 것도 바람직하다.
이와 같이, 제어부(170)는 표시면에서의 물체의 접촉 사이즈에 기초하여 조작 대상물의 표시 내용을 변경하기 위한 제어를 행한다. 구체적으로, 표시면에서의 물체의 접촉 사이즈에 기초하여 조작 입력이 불가능한 것으로 판단되는 조작 대상물이 존재하는 경우에, 제어부(170)는 그 조작 대상물의 조작 입력을 가능하게 하는 사이즈까지 그 조작 대상물을 확대해서 표시시키기 위한 제어를 행한다.
<3. 변형예>
본 기술의 제1 및 제2 실시 형태에 따르면, 표시 제어 장치(100)를 조작하는 중에 조작 입력(입출력부(150)의 표시면에서의 접촉 조작)을 사용하여 검출 사이즈를 취득하는 예를 설명했다. 여기서, 검출 사이즈를 측정하기 위한 측정 화면에서 검출 사이즈를 취득하는 것도 생각된다. 따라서, 이하에서, 측정 화면에서 검출 사이즈를 취득하는 예를 설명한다.
"검출 사이즈의 측정예"
도 13은 본 기술의 실시 형태들에 따른 입출력부(150)에 표시되는 표시 화면의 예(검출 사이즈 측정 화면(500)), 및 그 측정 결과를 도시하는 도면이다. 또한, 도 13에 도시하는 측정 방법은, 예를 들어, 일반적인 터치 패널의 정밀도 조정 화면에서 행해지는 캘리브레이션 수순에 내장되는 방법에 의해 실현할 수 있다.
도 13의 "a"는 검출 사이즈를 측정하기 위한 검출 사이즈 측정 화면(500)을 도시한다. 검출 사이즈 측정 화면(500)에는 접촉 위치 화상(501) 및 트레이싱 방향 화상(502)이 표시된다. 검출 사이즈 측정 화면(500)에서 검출 사이즈의 측정을 행하는 경우에, 유저는 입출력부(150)의 표시면에서의 조작 입력을 행할 때 사용되는 물체(예를 들어, 유저의 손가락(50))를 접촉 위치 화상(501)에 터치한다. 계속해서, 유저는 입출력부(150)의 표시면에 손가락(50)이 접촉하고 있는 상태에서 트레이싱 방향 화상(502)의 화살표에 따라 손가락(50)을 이동시킨다.
이와 같이, 검출 사이즈 측정 화면(500)에서 유저가 손가락(50)의 접촉 조작 및 트레이싱 조작을 행할 때 손가락(50)의 접촉 사이즈(검출 사이즈)를 측정할 수 있다. 또한, 이 예에서, 접촉 조작 및 트레이싱 조작을 행함으로써 손가락(50)의 접촉 사이즈(검출 사이즈)를 측정하는 예를 나타내지만, 어느 한쪽의 조작을 행함으로써 손가락(50)의 접촉 사이즈(검출 사이즈)을 측정하는 것도 바람직하다.
도 13의 "b"는 검출 사이즈 측정 화면(500)에서의 접촉 조작 및 트레이싱 조작에 의해 측정된 검출 사이즈(511 및 512)를 간략화해서 도시한다.
예를 들어, 조작을 행할 때 사용되는 유저의 손가락 크기, 또는 표시면에의 접촉의 강도에 따라 검출 사이즈가 커지거나 작아진다. 또한, 손가락 이외의 물체(예를 들어, 스타일러스 등의 디바이스)가 조작을 행할 때 사용되는 것도 상정되기 때문에, 조작에 사용되는 물체에 따라 검출 사이즈가 커지거나 작아진다.
예를 들어, 검출 사이즈(511)는 비교적 작은 물체를 사용하는 경우에서의 측정예를 나타내고, 검출 사이즈(512)는 조작에 사용되는 유저의 손가락 사이즈가 비교적 큰 경우에서의 측정예를 나타낸다. 또한, 도 13의 "b" 등에 도시하는 손가락 사이즈는 설명의 용이를 위하여 이해하기 쉬운 크기로 도시한다.
이와 같이, 제어부(170)는 입력 제어부(160)로부터 출력된 조작 정보에 기초하여 검출 사이즈를 산출한다. 그리고, 제어부(170)는 산출된 검출 사이즈를 사이즈 정보 유지부(171)에 유지시킨다.
또한, 본 기술의 실시 형태에 따르면, 정전식(정전 용량 방식) 터치 패널을 사용하는 예를 설명했지만, 감압식(저항막 방식) 터치 패널, 또는 광학식 터치 패널을 사용하는 것도 가능하다.
또한, 본 기술의 실시 형태들에 따르면, 무선 통신 장치 등의 표시 제어 장치를 예로서 설명했다. 그러나, 가상 공간의 시점 위치가 전환될 수 있고, 또는 확대 및 축소 표시하는 것이 가능한 다른 표시 제어 장치(전자 기기)에 본 기술의 실시 형태를 적용할 수 있다. 예를 들어, 디지털 스틸 카메라, 디지털 비디오 카메라(예를 들어, 카메라 일체형 레코더), 디지털 포토 프레임, 스마트폰, 태블릿, 디지털 사이니지(signage) 단말기, 자동 판매기 및 카 내비게이션 시스템 등의 기기에 본 기술의 실시 형태를 적용할 수 있다.
또한, 상술한 실시 형태들은 본 기술을 구현화하기 위한 예이며, 실시 형태에 따른 사항과, 특허 청구 범위에서의 발명의 특정 사항은 각각 서로 상관 관계를 갖는다. 마찬가지로, 특허 청구 범위에서의 발명의 특정 사항과, 이 발명의 특정 사항과 동일한 명칭을 갖는 본 기술의 실시 형태에 따른 사항은 각각 서로 상관 관계를 갖는다. 그러나, 본 기술은 이들 실시 형태에 한정되는 것이 아니고, 발명의 범위를 벗어나지 않고 실시 형태들에 다양한 변형을 실시함으로써 실현될 수 있다.
또한, 상술한 실시 형태에서 설명한 처리 수순은 이들 일련의 수순을 포함하는 방법으로서 파악될 수 있고, 또한, 이들 일련의 수순을 컴퓨터에 실행시키기 위한 프로그램, 및 그 프로그램을 기억하는 기록 매체로서 파악될 수 있다. 이 기록 매체로서, 예를 들어, CD(Compact Disc), MD(MiniDisc), DVD(Digital Versatile Disk), 메모리 카드, 블루레이 디스크(Blu-ray Disc(등록 상표)) 등을 사용할 수 있다.
또한, 본 기술은 이하와 같은 구성도 취할 수 있다.
(1) 조작 대상물을 표시하도록 디스플레이를 제어하고; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하고; 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하도록 구성된 회로를 포함하는 정보 처리 장치.
(2) (1)에 있어서, 상기 처리 회로는 상기 접촉 사이즈와 임계값을 비교하도록 구성된 정보 처리 장치.
(3) (2)에 있어서, 상기 처리 회로는 상기 조작 대상물의 사이즈에 기초하여 상기 임계값을 결정하도록 구성된 정보 처리 장치.
(4) (2) 또는 (3)에 있어서, 상기 처리 회로는 상기 비교에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하도록 구성된 정보 처리 장치.
(5) (2) 내지 (4) 중 어느 하나에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 작은 경우에 상기 조작 대상물에 대한 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(6) (2) 내지 (5) 중 어느 하나에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 조작 대상물에 대한 조작 입력을 불가능하게 하도록 구성된 정보 처리 장치.
(7) (2) 내지 (6) 중 어느 하나에 있어서, 상기 회로는 적어도 제1 조작 대상물 및 제2 조작 대상물을 표시하도록 구성되고, 상기 제1 조작 대상물의 표시 사이즈는 상기 제2 조작 대상물의 표시 사이즈보다 큰 정보 처리 장치.
(8) (7)에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제1 조작 대상물에 대한 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(9) (7)에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제2 조작 대상물에 대한 조작 입력을 불가능하게 하도록 구성된 정보 처리 장치.
(10) (7)에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제2 조작 대상물의 확대된 버젼을 표시하도록 상기 디스플레이를 제어하도록 구성된 정보 처리 장치.
(11) (10)에 있어서, 상기 회로는 소정의 임계값보다 큰 접촉 사이즈를 갖는 후속하는 조작 입력이 접수되는 경우에 상기 제2 조작 대상물의 확대된 버젼에 대한 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(12) (7)에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제1 조작 대상물 및 상기 제2 조작 대상물에 대한 조작 입력을 불가능하게 하도록 구성된 정보 처리 장치.
(13) (12)에 있어서, 상기 회로는 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 디스플레이에서의 상기 물체의 접촉 위치를 결정하고, 상기 접촉 위치에 기초하여 상기 제1 조작 대상물 및 상기 제2 조작 대상물 중 하나의 확대된 버젼을 표시하도록 구성된 정보 처리 장치.
(14) (13)에 있어서, 상기 회로는 소정의 임계값보다 큰 접촉 사이즈를 갖는 후속하는 조작 입력이 접수되는 경우에 상기 제1 조작 대상물 및 상기 제2 조작 대상물 중 하나의 확대된 버젼에 대한 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(15) (2)에 있어서, 상기 회로는 적어도 제1 조작 대상물 및 제2 조작 대상물을 표시하도록 상기 디스플레이를 제어하고 상기 제1 조작 대상물과 상기 제2 조작 대상물 간의 상기 디스플레이에서의 거리를 식별하도록 구성된 정보 처리 장치.
(16) (15)에 있어서, 상기 회로는 상기 거리가 소정의 임계값보다 작고 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제1 조작 대상물 및 상기 제2 조작 대상물에 대한 조작 입력을 불가능하게 하도록 구성된 정보 처리 장치.
(17) (15)에 있어서, 상기 회로는 상기 거리가 소정의 임계값보다 크고 상기 접촉 사이즈가 상기 임계값보다 큰 경우에 상기 제1 조작 대상물 및 상기 제2 조작 대상물에 대한 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(18) (1) 내지 (17) 중 어느 하나에 있어서, 상기 회로는 상기 디스플레이에 표시된 조작 대상물의 수를 확인하도록 구성된 정보 처리 장치.
(19) (18)에 있어서, 상기 회로는 상기 디스플레이에 표시된 조작 대상물의 수가 임계값을 초과하는 경우에 상기 조작 입력을 불가능하게 하도록 구성된 정보 처리 장치.
(20) (18) 또는 (19)에 있어서, 상기 회로는 상기 디스플레이에 표시된 조작 대상물의 수가 임계값보다 작은 경우에 상기 조작 입력을 가능하게 하도록 구성된 정보 처리 장치.
(21) 정보 처리 장치에 의해 실행될 때,
조작 대상물을 표시하도록 디스플레이를 제어하는 단계; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하는 단계; 및 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 단계를 포함하는 처리를 상기 정보 처리 장치에 실행시키는 컴퓨터 프로그램 명령어를 포함하는 비일시적 컴퓨터 판독가능 매체.
(22) 정보 처리 장치에 의해 행해지는 방법으로서,
조작 대상물을 표시하도록 디스플레이를 제어하는 단계; 상기 디스플레이에서의 물체의 접촉 사이즈를 결정하는 단계; 및 상기 정보 처리 장치의 회로에 의해, 상기 접촉 사이즈에 기초하여 상기 조작 대상물에 대한 조작 입력을 가능 또는 불가능하게 하는 단계를 포함하는 방법.
(23) 조작 입력을 행하기 위한 조작 대상물이 표시되는 표시면에 접촉하는 물체를 검출하는 검출부; 및
상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 조작 대상물의 조작 내용을 변경하기 위한 제어를 행하는 제어부
를 포함하는 표시 제어 장치.
(24) (23)에 있어서,
상기 표시면에는 복수의 상기 조작 대상물이 표시되고,
상기 제어부는 상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 복수의 조작 대상물 중 적어도 일부의 조작 내용을 변경하는 표시 제어 장치.
(25) (24)에 있어서, 상기 표시면에서의 물체의 접촉 사이즈에 의해 특정되는 값에 기초하여 상기 복수의 조작 대상물 중 2개의 조작 대상물 간의 상기 표시면에서의 거리가 작은 경우에, 상기 제어부는 상기 2개의 조작 대상물의 조작 입력을 불가능하게 하는 표시 제어 장치.
(26) (23) 내지 (25) 중 어느 하나에 있어서, 상기 제어부는 상기 표시면에서의 물체의 접촉 사이즈와 상기 표시면에서의 상기 조작 대상물의 사이즈 간의 비교 결과에 기초하여 상기 조작 내용을 변경하는 표시 제어 장치.
(27) (26)에 있어서,
상기 제어부는, 상기 표시면에서의 물체의 접촉 사이즈에 기초하여, 상기 표시면에서의 상기 조작 대상물의 사이즈가 큰 경우에 상기 조작 대상물의 조작 입력을 가능하게 하고, 상기 표시면에서의 상기 조작 대상물의 사이즈가 작은 경우에 상기 조작 대상물의 조작 입력을 불가능하게 하는 표시 제어 장치.
(28) (23)에 있어서,
상기 제어부는 상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 조작 대상물의 조작 입력을 불가능하게 함으로써 상기 조작 대상물의 조작 내용을 변경하는 표시 제어 장치.
(29) (23)에 있어서,
상기 제어부는, 상기 표시면에서의 물체의 접촉 사이즈에 기초하여, 조작 입력이 불가능한 것으로 판단되는 조작 대상물일지라도 상기 표시면에서의 소정 영역 내에 존재하는 상기 조작 대상물 및 다른 조작 대상물의 수가 소정수 이내인 경우에 상기 조작 대상물의 조작 입력을 가능하게 하는 표시 제어 장치.
(30) (23)에 있어서,
상기 제어부는, 상기 표시면에서의 물체의 접촉 사이즈에 기초하여, 조작 입력을 불가능한 것으로 판단되는 조작 대상물이 존재하는 경우에 상기 조작 대상물의 조작 입력을 가능하게 하는 사이즈까지 상기 조작 대상물을 확대해서 상기 조작 대상물을 표시시키기 위한 제어를 행하는 표시 제어 장치.
(31) 조작 입력을 행하기 위한 조작 대상물이 표시되는 표시면에 접촉하는 물체를 검출하는 검출부; 및
상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 조작 대상물의 표시 내용을 변경하기 위한 제어를 행하는 제어부
를 포함하는 표시 제어 장치.
(32) 조작 입력을 행하기 위한 조작 대상물이 표시되는 표시면에 접촉하는 물체를 검출하는 검출 수순; 및
상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 조작 대상물의 조작 내용을 변경하는 제어 수순
을 포함하는 표시 제어 장치의 제어 방법.
(33) 조작 입력을 행하기 위한 조작 대상물이 표시되는 표시면에 접촉하는 물체를 검출하는 검출 수순; 및
상기 표시면에서의 물체의 접촉 사이즈에 기초하여 상기 조작 대상물의 조작 내용을 변경하는 제어 수순
을 컴퓨터에 실행시키는 프로그램.
100: 표시 제어 장치
101, 102: 스피커
110: 조작 접수부
111: 제1 버튼
112: 제2 버튼
113: 제3 버튼
114: 제4 버튼
115: 제5 버튼
120: 촬상부
121: 렌즈
130: 기록 매체 제어부
140: 기록 매체
150: 입출력부
151: 접수부
152: 표시부
160: 입력 제어부
170: 제어부
171: 사이즈 정보 유지부
180: 표시 제어부

Claims (15)

  1. 정보 처리 장치로서,
    디스플레이 및 회로를 포함하고,
    상기 회로는,
    적어도 제1 조작 대상물 및 복수의 제2 조작 대상물을 상기 디스플레이 상에 표시하고 - 상기 제1 조작 대상물은 제1 사이즈이며 상기 디스플레이 상의 제1 면적 내에 표시되고, 상기 복수의 제2 조작 대상물 각각은 상기 제1 사이즈보다 작은 제2 사이즈이며 상기 디스플레이 상의 제2 면적 내에 그룹 단위로 표시되며, 상기 제1 조작 대상물과 복수의 제2 조작 대상물은 상기 디스플레이 상에 동시에 표시됨 -,
    상기 디스플레이 상의 터치 조작 입력에 응답하여 상기 디스플레이 상의 물체의 접촉 위치를 결정하고,
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제1 면적 내인 것으로 결정되는 경우, 상기 제1 조작 대상물에 대응하는 제1 처리를 실행하고,
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제2 면적 내인 것으로 결정되는 경우, 상기 제2 면적을 선택하고 확대된 상기 복수의 제2 조작 대상물을 표시하는 것에 대응하는 제2 처리를 실행하고,
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되는 경우, 상기 디스플레이 상에 표시된 화상의 적어도 일부분의 표시 배율을 축소하는 것에 대응하는 제3 처리를 실행하도록 구성되는, 정보 처리 장치.
  2. 제1항에 있어서,
    상기 디스플레이에 대해 상기 사람의 손가락이 접촉하는 면적은, 상기 디스플레이에 대해 상기 사람의 손이 접촉하는 면적보다 큰, 정보 처리 장치.
  3. 제1항에 있어서,
    상기 제1 처리는 화상 콘텐츠를 재생하는 것에 대응하는, 정보 처리 장치.
  4. 컴퓨터 판독가능 명령어들이 인코딩되어 있는 비일시적 컴퓨터 판독가능 매체로서, 상기 컴퓨터 판독가능 명령어들은 컴퓨터에 의해 실행될 때, 상기 컴퓨터로 하여금,
    적어도 제1 조작 대상물 및 복수의 제2 조작 대상물을 디스플레이 상에 표시하는 단계 - 상기 제1 조작 대상물은 제1 사이즈이며 상기 디스플레이 상의 제1 면적 내에 표시되고, 상기 복수의 제2 조작 대상물 각각은 상기 제1 사이즈보다 작은 제2 사이즈이며 상기 디스플레이 상의 제2 면적 내에 그룹 단위로 표시되며, 상기 제1 조작 대상물과 복수의 제2 조작 대상물은 상기 디스플레이 상에 동시에 표시됨 -,
    상기 디스플레이 상의 터치 조작 입력에 응답하여 상기 디스플레이 상의 물체의 접촉 위치를 결정하는 단계,
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제1 면적 내인 것으로 결정되는 경우, 상기 제1 조작 대상물에 대응하는 제1 처리를 실행하는 단계,
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제2 면적 내인 것으로 결정되는 경우, 상기 제2 면적을 선택하고 확대된 상기 복수의 제2 조작 대상물을 표시하는 것에 대응하는 제2 처리를 실행하는 단계, 및
    상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되는 경우, 상기 디스플레이 상에 표시된 화상의 적어도 일부분의 표시 배율을 축소하는 것에 대응하는 제3 처리를 실행하는 단계
    를 포함하는 방법을 실행하게 하는, 비일시적 컴퓨터 판독가능 매체.
  5. 제4항에 있어서,
    상기 디스플레이에 대해 상기 사람의 손가락이 접촉하는 면적은, 상기 디스플레이에 대해 상기 사람의 손이 접촉하는 면적보다 큰, 비일시적 컴퓨터 판독가능 매체.
  6. 제4항에 있어서,
    상기 제1 처리는 화상 콘텐츠를 재생하는 것에 대응하는, 비일시적 컴퓨터 판독가능 매체.
  7. 정보 처리 장치에 의해 실행되는 방법으로서,
    회로에 의해, 적어도 제1 조작 대상물 및 복수의 제2 조작 대상물을 디스플레이 상에 표시하는 단계 - 상기 제1 조작 대상물은 제1 사이즈이며 상기 디스플레이 상의 제1 면적 내에 표시되고, 상기 복수의 제2 조작 대상물 각각은 상기 제1 사이즈보다 작은 제2 사이즈이며 상기 디스플레이 상의 제2 면적 내에 그룹 단위로 표시되며, 상기 제1 조작 대상물과 복수의 제2 조작 대상물은 상기 디스플레이 상에 동시에 표시됨 -,
    상기 회로에 의해, 상기 디스플레이 상의 터치 조작 입력에 응답하여 상기 디스플레이 상의 물체의 접촉 위치를 결정하는 단계,
    상기 회로에 의해, 상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제1 면적 내인 것으로 결정되는 경우, 상기 제1 조작 대상물에 대응하는 제1 처리를 실행하는 단계,
    상기 회로에 의해, 상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되고 상기 접촉 위치가 상기 제2 면적 내인 것으로 결정되는 경우, 상기 제2 면적을 선택하고 확대된 상기 복수의 제2 조작 대상물을 표시하는 것에 대응하는 제2 처리를 실행하는 단계, 및
    상기 회로에 의해, 상기 터치 조작 입력이 사람의 손가락에 의한 조작인 것으로 결정되는 경우, 상기 디스플레이 상에 표시된 화상의 적어도 일부분의 표시 배율을 축소하는 것에 대응하는 제3 처리를 실행하는 단계
    를 포함하는, 방법.
  8. 제7항에 있어서,
    상기 디스플레이에 대해 상기 사람의 손가락이 접촉하는 면적은, 상기 디스플레이에 대해 상기 사람의 손이 접촉하는 면적보다 큰, 방법.
  9. 제7항에 있어서,
    상기 제1 처리는 화상 콘텐츠를 재생하는 것에 대응하는, 방법.
  10. 제1항에 있어서,
    상기 제1 면적은 상기 제2 면적과 사이즈가 동일한, 정보 처리 장치.
  11. 제4항에 있어서,
    상기 제1 면적은 상기 제2 면적과 사이즈가 동일한, 비일시적 컴퓨터 판독가능 매체.
  12. 제7항에 있어서,
    상기 제1 면적은 상기 제2 면적과 사이즈가 동일한, 방법.
  13. 삭제
  14. 삭제
  15. 삭제
KR1020177030316A 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체 KR101960906B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012058063A JP5962085B2 (ja) 2012-03-15 2012-03-15 表示制御装置、その制御方法およびプログラム
JPJP-P-2012-058063 2012-03-15
PCT/JP2013/001276 WO2013136707A1 (en) 2012-03-15 2013-03-01 Information processing apparatus, method, and non-transitory computer-readable medium

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020147024837A Division KR101790838B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020197007493A Division KR20190030778A (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체

Publications (2)

Publication Number Publication Date
KR20170122838A KR20170122838A (ko) 2017-11-06
KR101960906B1 true KR101960906B1 (ko) 2019-03-25

Family

ID=47901254

Family Applications (6)

Application Number Title Priority Date Filing Date
KR1020197030078A KR102158439B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020197007493A KR20190030778A (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020147024837A KR101790838B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020177030316A KR101960906B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020207026299A KR102216482B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020217004012A KR102278817B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체

Family Applications Before (3)

Application Number Title Priority Date Filing Date
KR1020197030078A KR102158439B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020197007493A KR20190030778A (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020147024837A KR101790838B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020207026299A KR102216482B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
KR1020217004012A KR102278817B1 (ko) 2012-03-15 2013-03-01 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체

Country Status (9)

Country Link
US (4) US20150033162A1 (ko)
EP (1) EP2826230A1 (ko)
JP (1) JP5962085B2 (ko)
KR (6) KR102158439B1 (ko)
CN (1) CN104185979B (ko)
IN (1) IN2014MN01752A (ko)
RU (1) RU2014136528A (ko)
TW (1) TW201351262A (ko)
WO (1) WO2013136707A1 (ko)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5962085B2 (ja) * 2012-03-15 2016-08-03 ソニー株式会社 表示制御装置、その制御方法およびプログラム
USD747339S1 (en) * 2013-03-13 2016-01-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD751112S1 (en) * 2013-06-13 2016-03-08 Zya, Inc. Display screen or portion thereof with icon
USD749628S1 (en) * 2013-06-13 2016-02-16 Zya, Inc. Display screen or portion thereof with icon
JP2015007949A (ja) 2013-06-26 2015-01-15 ソニー株式会社 表示装置、表示制御方法及びコンピュータプログラム
USD742413S1 (en) * 2013-11-21 2015-11-03 Microsoft Corporation Display screen with icon
USD749132S1 (en) * 2013-11-22 2016-02-09 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
WO2015119997A1 (en) * 2014-02-04 2015-08-13 Cirque Corporation Using dynamically scaled linear correction to improve finger tracking linearity on touch sensors
USD798900S1 (en) * 2014-06-01 2017-10-03 Apple Inc. Display screen or portion thereof with icon
CN105630314A (zh) * 2014-10-28 2016-06-01 富泰华工业（深圳）有限公司 一种操作模式切换系统及方法
JP2016170613A (ja) * 2015-03-12 2016-09-23 コニカミノルタ株式会社 会議支援装置、会議支援システム、会議支援プログラム、及び会議支援方法
JP6525753B2 (ja) * 2015-06-12 2019-06-05 キヤノン株式会社 表示制御装置、その制御方法、およびプログラム
JP6536350B2 (ja) * 2015-10-26 2019-07-03 船井電機株式会社 入力装置
USD827661S1 (en) * 2015-12-04 2018-09-04 Airbus Operations Gmbh Display screen or portion thereof with graphical user interface
USD811433S1 (en) * 2016-06-10 2018-02-27 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN108253634A (zh) * 2018-01-12 2018-07-06 广东顺德圣堡莱热能科技有限公司 一种用于壁挂炉的触控装置及具有其的壁挂炉
USD877170S1 (en) 2018-01-22 2020-03-03 Apple Inc. Electronic device with graphical user interface
KR102656447B1 (ko) * 2018-02-27 2024-04-12 삼성전자주식회사 컨트롤러와 접촉된 신체 부위에 따라 그래픽 객체를 다르게 표시하는 방법 및 전자 장치
USD995557S1 (en) * 2021-07-22 2023-08-15 Intuit Inc. Display screen with an animated graphical user interface showing a payment slider

Family Cites Families (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5757358A (en) * 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
JPH08234909A (ja) * 1995-02-23 1996-09-13 Casio Comput Co Ltd 入力装置
US6243091B1 (en) * 1997-11-21 2001-06-05 International Business Machines Corporation Global history view
US6211856B1 (en) * 1998-04-17 2001-04-03 Sung M. Choi Graphical user interface touch screen with an auto zoom feature
US6169538B1 (en) * 1998-08-13 2001-01-02 Motorola, Inc. Method and apparatus for implementing a graphical user interface keyboard and a text buffer on electronic devices
US6259436B1 (en) * 1998-12-22 2001-07-10 Ericsson Inc. Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch
WO2004070604A2 (en) * 2003-02-05 2004-08-19 Philips Intellectual Property & Standards Gmbh Method of selecting objects of a user interface on a display screen
KR101113234B1 (ko) * 2004-12-27 2012-02-20 삼성전자주식회사 이미지 처리장치의 이미지 표시방법
KR100672539B1 (ko) * 2005-08-12 2007-01-24 엘지전자 주식회사 터치스크린을 구비하는 이동통신단말기에서의 터치 입력인식 방법 및 이를 구현할 수 있는 이동통신단말기
US7843427B2 (en) * 2006-09-06 2010-11-30 Apple Inc. Methods for determining a cursor position from a finger contact with a touch screen display
CN101675410A (zh) * 2007-02-23 2010-03-17 Tp-I股份有限公司 使用数字装置中的指点设备的虚拟键盘输入系统
TWI460647B (zh) * 2007-05-15 2014-11-11 Htc Corp 電子裝置與其軟體之使用者介面多重選擇方法
US8432372B2 (en) * 2007-11-30 2013-04-30 Microsoft Corporation User input using proximity sensing
JP2009162691A (ja) * 2008-01-09 2009-07-23 Toyota Motor Corp 車載情報端末
US20090204925A1 (en) * 2008-02-08 2009-08-13 Sony Ericsson Mobile Communications Ab Active Desktop with Changeable Desktop Panels
JP2009193423A (ja) * 2008-02-15 2009-08-27 Panasonic Corp 電子機器の入力装置
JP2009265793A (ja) 2008-04-23 2009-11-12 Sony Ericsson Mobilecommunications Japan Inc 表示操作装置、操作装置およびプログラム
US8279241B2 (en) * 2008-09-09 2012-10-02 Microsoft Corporation Zooming graphical user interface
WO2010029415A2 (en) * 2008-09-10 2010-03-18 Opera Software Asa Method and apparatus for providing finger touch layers in a user agent
US8704775B2 (en) * 2008-11-11 2014-04-22 Adobe Systems Incorporated Biometric adjustments for touchscreens
US9325823B2 (en) * 2008-12-19 2016-04-26 Verizon Patent And Licensing Inc. Visual address book and dialer
JP5058187B2 (ja) * 2009-02-05 2012-10-24 シャープ株式会社 携帯情報端末
JP2010186442A (ja) * 2009-02-13 2010-08-26 Sharp Corp 入力装置、及び入力制御方法
US20100265185A1 (en) * 2009-04-17 2010-10-21 Nokia Corporation Method and Apparatus for Performing Operations Based on Touch Inputs
US8169418B2 (en) * 2009-05-12 2012-05-01 Sony Ericsson Mobile Communications Ab Displays for electronic devices that detect and respond to the size and/or angular orientation of user input objects
US20100295799A1 (en) * 2009-05-21 2010-11-25 Sony Computer Entertainment America Inc. Touch screen disambiguation based on prior ancillary touch input
US20100302212A1 (en) * 2009-06-02 2010-12-02 Microsoft Corporation Touch personalization for a display device
KR20100134948A (ko) * 2009-06-16 2010-12-24 삼성전자주식회사 터치스크린을 구비하는 장치의 메뉴 표시 방법
US20110057886A1 (en) * 2009-09-10 2011-03-10 Oliver Ng Dynamic sizing of identifier on a touch-sensitive display
KR101701492B1 (ko) * 2009-10-16 2017-02-14 삼성전자주식회사 데이터 표시 방법 및 그를 수행하는 단말기
US20120235967A1 (en) * 2009-11-30 2012-09-20 Sharp Kabushiki Kaisha Display device
BR112012019484A2 (pt) * 2010-02-04 2016-04-19 Nokia Corp entrada de usuário
US8982160B2 (en) * 2010-04-16 2015-03-17 Qualcomm, Incorporated Apparatus and methods for dynamically correlating virtual keyboard dimensions to user finger size
US20110316888A1 (en) * 2010-06-28 2011-12-29 Invensense, Inc. Mobile device user interface combining input from motion sensors and other controls
JP5615642B2 (ja) * 2010-09-22 2014-10-29 京セラ株式会社 携帯端末、入力制御プログラム及び入力制御方法
JP2012113666A (ja) * 2010-11-29 2012-06-14 Canon Inc 表示サイズ切換タッチパネル
US8405627B2 (en) * 2010-12-07 2013-03-26 Sony Mobile Communications Ab Touch input disambiguation
US20120216117A1 (en) * 2011-02-18 2012-08-23 Sony Corporation Method and apparatus for navigating a hierarchical menu based user interface
CN103492981A (zh) * 2011-04-19 2014-01-01 惠普发展公司，有限责任合伙企业 触摸屏选择
US20130019201A1 (en) * 2011-07-11 2013-01-17 Microsoft Corporation Menu Configuration
US20130152002A1 (en) * 2011-12-11 2013-06-13 Memphis Technologies Inc. Data collection and analysis for adaptive user interfaces
US8436828B1 (en) * 2012-01-27 2013-05-07 Google Inc. Smart touchscreen key activation detection
JP5962085B2 (ja) 2012-03-15 2016-08-03 ソニー株式会社 表示制御装置、その制御方法およびプログラム

Also Published As

Publication number Publication date
CN104185979A (zh) 2014-12-03
US20210004130A1 (en) 2021-01-07
IN2014MN01752A (ko) 2015-07-03
EP2826230A1 (en) 2015-01-21
KR20190030778A (ko) 2019-03-22
KR20170122838A (ko) 2017-11-06
KR101790838B1 (ko) 2017-10-26
US11747958B2 (en) 2023-09-05
KR102158439B1 (ko) 2020-09-22
KR20190119186A (ko) 2019-10-21
US20160202856A1 (en) 2016-07-14
KR102216482B1 (ko) 2021-02-17
KR20210018556A (ko) 2021-02-17
JP5962085B2 (ja) 2016-08-03
RU2014136528A (ru) 2016-03-27
JP2013191112A (ja) 2013-09-26
US10007401B2 (en) 2018-06-26
TW201351262A (zh) 2013-12-16
CN104185979B (zh) 2017-09-26
KR102278817B1 (ko) 2021-07-20
WO2013136707A1 (en) 2013-09-19
US20230367455A1 (en) 2023-11-16
KR20140146061A (ko) 2014-12-24
US20150033162A1 (en) 2015-01-29
KR20200108507A (ko) 2020-09-18

Similar Documents

Publication Publication Date Title
KR101960906B1 (ko) 정보 처리 장치, 방법, 및 비일시적 컴퓨터 판독가능 매체
JP5428436B2 (ja) 電子機器、表示制御方法およびプログラム
WO2013136708A1 (en) Information processing apparatus for controlling an image based on duration and distance of a touch input, method, and non - transitory computer - readable medium
US9535604B2 (en) Display device, method for controlling display, and recording medium
KR20160096030A (ko) 전자기기 및 그 제어방법
JP5966665B2 (ja) 情報処理装置、情報処理方法および記録媒体
US9632613B2 (en) Display control apparatus and control method of display control apparatus for reducing a number of touch times in a case where a guidance is not displayed as compared with a case where the guidance is displayed
US11009991B2 (en) Display control apparatus and control method for the display control apparatus
US11010045B2 (en) Control apparatus, control method, and non-transitory computer readable medium
JP6269738B2 (ja) 情報処理装置、情報処理方法および記録媒体
US10725571B2 (en) Electronic apparatus, control method, and storage medium
CN113242467A (zh) 视频剪辑方法、装置、终端及存储介质

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right