CN104736969A - 信息显示装置及显示信息操作方法 - Google Patents

信息显示装置及显示信息操作方法 Download PDF

Info

Publication number
CN104736969A
CN104736969A CN201280076449.5A CN201280076449A CN104736969A CN 104736969 A CN104736969 A CN 104736969A CN 201280076449 A CN201280076449 A CN 201280076449A CN 104736969 A CN104736969 A CN 104736969A
Authority
CN
China
Prior art keywords
icon
display
gesture
information
lasting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280076449.5A
Other languages
English (en)
Other versions
CN104736969B (zh
Inventor
有田英一
下谷光生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN104736969A publication Critical patent/CN104736969A/zh
Application granted granted Critical
Publication of CN104736969B publication Critical patent/CN104736969B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3664Details of the user input interface, e.g. buttons, knobs or sliders, including those provided on a touch screen; remote controllers; input using gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003Maps
    • G09B29/006Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes
    • G09B29/007Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes using computer methods
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/10Map spot or coordinate position indicators; Map reading aids

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Hardware Design (AREA)
  • Automation & Control Theory (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Ecology (AREA)
  • Mathematical Physics (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的信息显示装置包括具有显示面的显示部、接受用户操作的输入部、以及控制部。控制部在用户操作是与画面移动变形型功能相关联的手势操作的情况下,在显示面上显示用于执行画面移动变形型功能的持续图标,其中,该画面移动变形型功能将显示面上的显示信息向根据手势方向设定的控制方向进行控制。控制部在用户操作是对持续图标的执行指示操作的情况下,以和持续图标的出现所对应的手势操作时相同的控制方向执行画面移动变形型功能。由此提供了高便利性。

Description

信息显示装置及显示信息操作方法
技术领域
本发明涉及信息显示装置及显示信息操作方法。
背景技术
下述专利文献1、2公开了利用触摸面板的设备。
专利文献1的移动信息设备中,若使手指在显示地图图像的画面上移动,则地图图像根据手指的移动距离在手指的移动方向上相应地移动来进行显示。由此,根据手指的动作历史,同时输入滚动操作的执行指示以及滚动量。此外,若使两根手指分开,则根据该动作历史输入地图图像的放大指示以及放大量。此外,若使两根手指靠近,则根据该动作历史输入地图图像的缩小指示以及缩小量。此外,若以一根手指为轴使另一根手指旋转,则根据该动作历史输入地图图像的旋转指示以及旋转量。
在专利文献2的导航装置中,显示了用于进行地图图像的连续平滑滚动处理的平滑滚动操作用图标。具体而言,该图标根据驾驶座的位置显示在地图图像上的右下部分或左下部分。若用手指触摸该图标的表示规定方向的箭头部分,则导航地图图像在持续触摸的时间内向该箭头方向高速移动。
此外,在专利文献2的导航装置中,若触摸上述平滑滚动操作用图标以外的区域,则执行使该地点移动到画面中心的触摸滚动处理。此外,若触摸上述平滑滚动操作用图标以外的区域并使触摸的手指在画面上移动,则执行使地图根据手指轨迹依次移动的拖动滚动处理。
由此,在专利文献2的导航装置中,对用于执行平滑滚动处理的区域(即,平滑滚动操作用图标)、以及用于执行触摸滚动处理和拖动滚动处理的区域(即,平滑滚动操作用图标以外的区域)进行区分。由此,与平滑滚动操作和触摸滚动操作非常相似的情况(例如,两个操作的不同仅在于持续触摸画面的时间的差的情况)相比,能准确地指示用户所要进行的种类的滚动处理。
现有技术文献
专利文献
专利文献1:日本专利特开2000-163031号公报
专利文献2:日本专利特开2010-32546号公报
发明内容
发明所要解决的技术问题
在专利文献1的移动信息设备中,在例如进行长距离滚动的情况下,必须重复多次进行同样的手指移动。对于滚动以外的操作也一样。
提出专利文献2的导航装置的目的在于消除平滑滚动操作与触摸滚动操作非常相似的情况(例如两个操作的不同仅在于持续触摸画面的时间的差的情况)下的操作性变差的问题。由于进行滚动操作的时刻取决于用户的意图,因此平滑滚动操作用图标需要始终显示,从而能随时供用户使用。
此外,平滑滚动操作用图标上表示地图移动方向的各箭头标记部分需要具有能用手指触摸的程度的大小。若如专利文献2所记载的那样在图标中设置8个方向的箭头标记部分,则平滑滚动操作用图标会变大。
可以想象,若始终显示大图标,则这会对地图的辨认造成影响。这种情况下,平滑滚动操作用图标的采用反而可能降低便利性。
本发明的目的在于提供一种具有高便利性等的信息显示装置及显示信息操作方法。
解决技术问题所采用的技术手段
本发明的一个方式的信息显示装置包括具有显示面的显示部、接受用户操作的输入部、以及控制部。控制部在用户操作是与画面移动变形型功能相关联的手势操作的情况下,在显示面上显示用于执行画面移动变形型功能的持续图标,其中,所述画面移动变形型功能将显示面上的显示信息向根据手势方向设定的控制方向进行控制。控制部在用户操作是对持续图标的执行指示操作的情况下,以和持续图标的出现所对应的手势操作时相同的控制方向执行画面移动变形型功能。
发明效果
根据上述一个实施方式,能通过手势操作在显示面上调出持续图标,并使用该持续图标,从而能执行与上述手势操作相关联的画面移动变形型功能。因此,若使用持续图标,则能减少手势操作的重复次数,从而能减轻操作负担。由此能提供高便利性。
此外,仅通过进行与想要执行的功能相关联的手势操作就可显示持续图标。即,与用户想要实现的功能相对应的持续图标可自动地进行显示。因此能提供高便利性。
此外,例如在用户不进行操作而持续观看显示信息的状况下,由于不调出持续图标,因此显示信息不会被持续图标遮挡。
本发明的目的、特征、以及优点通过以下详细的说明和附图会变得更为明了。
附图说明
图1是举例示出信息显示装置的框图。
图2是举例示出输入兼显示部的立体图。
图3是单点触摸操作的示意图。
图4是两点触摸操作的示意图。
图5是拖动操作的示意图。
图6是轻弹操作的示意图。
图7是捏合放大(pinch out)操作(两点移动型)的示意图。
图8是捏合放大操作(单点移动型)的示意图。
图9是捏合缩小(pinch in)操作(两点移动型)的示意图。
图10是捏合缩小操作(单点移动型)的示意图。
图11是滑动操作的示意图。
图12是显示尺寸变更操作(放大操作和缩小操作)的示意图。
图13是旋转操作的示意图。
图14是滑动持续图标的示意图。
图15是举例示出放大持续图标的图。
图16是举例示出缩小持续图标的图。
图17是举例示出右转持续图标的图。
图18是举例示出左转持续图标的图。
图19是举例示出控制部的框图。
图20是举例示出到显示持续图标为止的处理的流程图。
图21是终点条件的示意图。
图22是持续图标调出操作的示意图。
图23是对持续图标的显示位置的第一例进行说明的图。
图24是对持续图标的显示位置的第二例进行说明的图。
图25是对持续图标的显示位置的第三例进行说明的图。
图26是对持续图标的显示位置的第四例进行说明的图。
图27是对手势轨迹的延长线的求取方法的第一例进行说明的图。
图28是对手势轨迹的延长线的求取方法的第二例进行说明的图。
图29是对手势轨迹的延长线的求取方法的第三例进行说明的图。
图30是对持续图标的显示位置的第五例进行说明的图。
图31是举例示出带状的持续图标的图。
图32是举例示出显示持续图标后的处理的流程图。
图33是对滑动方向的设定方法的第一例进行说明的图。
图34是对滑动方向的设定方法的第二例进行说明的图。
图35是表示手势量或手势速度、与显示信息的控制量或控制速度之间的关系的示意图。
图36是举例示出显示信息的控制量的图。
图37是举例示出显示信息的控制速度的图。
图38是举例示出与持续图标的消除有关的处理的流程图。
图39是对同时执行滑动和显示尺寸变更的操作的第一例进行说明的图。
图40是对同时执行滑动和显示尺寸变更的操作的第二例进行说明的图。
图41是对取消操作进行说明的图。
图42是要素连结显示形式的示意图。
具体实施方式
<整体结构的概要>
图1是举例表示实施方式的信息显示装置10的框图。根据图1的示例,信息显示装置10包含显示部12、输入部14、控制部16、以及存储部18。
显示部12显示各种信息。显示部12包括:例如通过将多个像素配置成矩阵状来构成的显示面;以及基于从控制部16获取到的图像数据来驱动各像素(换言之,对各像素的显示状态进行控制)的驱动装置。另外,显示部12所显示的图像有时为静态图像,有时为动态图像,有时则是静态图像与动态图像相结合。
显示部12例如能利用液晶显示装置构成。根据该例,显示面板(这里为液晶面板)的显示区域对应于上述显示面,显示面板的外接驱动电路对应于上述驱动装置。另外,驱动电路的一部分也可能内置在显示面板中。除了液晶显示装置以外,也可以利用电致发光(EL)显示装置,等离子体显示器装置等来构成显示部12。
输入部14从用户接受各种信息。输入部14例如包括:对用户为了输入而使用的指示物进行检测的检测部;以及将由检测部检测到的结果作为检测信号输出到控制部16的检测信号输出部。
这里,举例示出了输入部14由所谓的接触型触摸面板构成的情况,下面有时也将输入部14称为“触摸面板14”。另外,有时也将触摸面板称为“触摸平板”等。另外,举例示出了用于输入的上述指示物为用户的手指(更具体而言为指尖)的情况。
触摸面板14的上述检测部提供供用户放置指尖的输入面,利用设置于该输入面的传感器组来检测输入面上手指的存在。换言之,能通过传感器组检测出手指的区域对应于可接受用户输入的输入区域,而在接触型触摸面板的情况下,输入区域对应于二维区域的输入面。
传感器组既可以是电学式、光学式、机械式等的任一种,或者也可以是它们的组合。此外,开发了各种位置检测方式,可以将它们中的任一种应用到触摸面板14中。此外,也可以采用不仅可以检测手指的位置,也可以检测手指对输入面的按压力的结构。
可以根据各传感器的输出信号的组合来确定指尖在输入面上的位置。所确定的位置例如由设定在输入面上的坐标上的坐标数据来表现。该情况下,若使手指在输入面上移动,则表示手指位置的坐标数据会变化,因此能利用连续获得的一连串坐标数据来检测手指的移动。
另外,也可以利用坐标以外的方法来表现手指位置。即,坐标数据是用于表现手指位置的手指位置数据的一个示例。
这里,举出如下例子:触摸面板14的上述检测信号输出部根据各传感器的输出信号生成表示手指位置的坐标数据,并将该坐标数据作为检测信号发送给控制部16。但例如也可以在控制部16进行向坐标数据的变换。在上述示例中,检测信号输出部将各传感器的输出信号变换为可由控制部16获取的格式的信号,并将所获得的信号作为检测信号发送给控制部16。
此外,举例示出如图2的立体图所示那样触摸面板14(参照图1)的输入面34与显示部12(参照图1)的显示面32重叠的结构、换言之是输入面34与显示面32一体化的结构。利用这种一体结构来提供输入兼显示部20(参照图1),更具体而言,提供触摸屏20。
若采用输入面34与显示面32的一体结构,则对用户而言,输入面34与显示面32视为同一个,从而给用户造成像是在对显示面32进行输入操作的感觉。因此,提供了直观的操作环境。另外,鉴于这一点,有时也使用例如“用户操作显示面32”这样的表述。
控制部16进行信息显示装置10中的各种处理和控制。例如,控制部16对从触摸面板14输入的信息进行解析,生成与该解析结果相对应的图像数据,并将该图像数据输出到显示部12。
这里,举例示出控制部16由中央运算处理部(例如由一个或多个微处理器构成)以及主存储部(例如由ROM、RAM、闪存等一个或多个存储装置构成)构成的情况。根据该例,通过由中央运算处理部(换言之,利用软件)执行储存在主存储部中的各种程序,从而实现各种功能。各种功能也能并行地实现。
各种程序可以预先储存在控制部16的主存储部中,或者也可以在执行时从存储部18读取并储存到主存储部中。主存储部不仅用于程序的储存,也用于各种数据的储存。此外,主存储部还提供中央运算处理部执行程序时的作业区域。此外,主存储部还提供用于写入在显示部12中进行显示的图像的图像保存部。图像保存部有时也称为“显存”、“图形存储器”等。
另外,也可以以硬件(例如为进行特定运算而构成的运算电路等)构成由控制部16进行的处理及控制的全部或一部分。
存储部18储存各种信息。这里,存储部18作为控制部16所利用的辅助存储部来设置。存储部18例如可以利用硬盘装置、光盘、可重写且非易失性的半导体存储器等存储装置中的一个以上来构成。
<用户操作及其功能>
在对信息显示装置10的更具体的结构和处理进行说明之前,说明针对触摸面板14的用户操作。
用户操作根据手指的动作大致分为触摸操作和手势操作。另外,下面有时也将触摸操作和手势操作分别称为“触摸”及“手势”。触摸操作是如下那样的操作:使至少一根指尖与触摸面板的输入面接触,并使所接触的手指离开输入面而不在输入面上移动。与此相对,手势操作是如下那样的操作:使至少一根指尖与输入面接触,在使接触的手指在输入面上移动(换言之,滑动)后,使其离开输入面。
因触摸操作而检测到的坐标数据(换言之,手指位置数据)基本上没有变化,是静态的。与此相对,因手势操作而检测到的坐标数据会随时间发生变化,是动态的。根据这种变化的一连串坐标数据,能获取输入面上手指开始移动的地点以及结束的地点、从移动开始点到移动终结点的轨迹、移动方向、移动量、移动速度、移动加速度等信息。
图3中,作为触摸操作的第一例,示出说明单点触摸操作(也简称为“单点触摸”)的示意图。另外,在图3以及后述的图4~图10中,在上部示出输入面34的俯视图,并在下部示出输入面34的侧视图或剖视图。
如图3所示,在单点触摸中,用户使一根手指与输入面34进行点接触。图3中用涂黑的圆圈标记示意性地表示触摸位置(换言之,检测出手指的位置)。在后述的图中也使用这一图示方法。另外,也可以实际在显示面上显示涂黑圆圈标记。
单点触摸例如可分类成单击、多次点击以及长按的各操作。单击是用指尖在输入面34上轻轻敲击一次的操作。单击有时也简称为“点击”。多次点击是重复多次进行点击的操作。代表性的多次点击有双击。长按是维持指尖的点接触的操作。上述操作例如能通过手指的接触(换言之,检测到手指)的持续时间以及次数来识别。
图4中,作为触摸操作的第二例,示出说明两点触摸操作(也简称为“两点触摸”)的示意图。两点触摸除了使用两根手指以外,基本与单点触摸相同。因此,利用两点触摸也能进行例如点击、多次点击以及长按的各个操作。两点触摸可以使用一只手上的两根手指,或者也可以使用右手的一根手指和左手的一根手指。另外,两根手指的位置关系不限于图4的示例。
另外,也能利用三根以上的手指进行触摸操作。
图5中,作为手势操作的第一例,示出说明拖动操作(也简称为“拖动”)的示意图。拖动是在指尖放置于输入面34上的状态下进行移动的操作。另外,手指的移动方向和移动距离不限于图5的示例。
图5中,用涂黑圆圈标记示意性表示手指的移动开始点,用涂黑三角形示意性表示手指的移动终结点,用该三角形的朝向表现手指的移动方向,并利用连结涂黑圆圈标记和涂黑三角形的线来表现轨迹。在后述的图中也使用这一图示方法。另外,也可以实际在显示面上显示涂黑圆圈标记和涂黑三角形。
图6中,作为手势操作的第二例,示出说明轻弹操作(也简称为“轻弹”)的示意图。轻弹是使指尖在输入面34上快速拂过的操作。另外,手指的移动方向和移动距离不限于图6的示例。
轻弹与拖动不同,手指在移动途中离开输入面34。这里,由于触摸面板14是接触型,因此原理上不会对离开输入面34后的手指移动进行检测。然而,可以根据例如手指在输入面34上移动期间得到的一连串坐标数据的变化来计算手指在检测出的最终位置上的移动速度。若该移动速度在预先决定的阈值(称为“拖动/轻弹识别阈值”)以上,则可识别为轻弹。
此外,能根据例如手指在所检测到的最终位置上的移动方向、移动速度以及移动加速度来推算手指离开输入面34后最终到达的位置(更具体而言,是将该位置投影在输入面34上的位置)。另外,上述推定处理能解释为将轻弹转换为假想的拖动的处理。
因此,在信息显示装置10中,将如上述那样推定出的位置作为手指移动的终点来进行处理。该例中,可以利用触摸面板14来执行上述推定处理,或者也可以利用控制部16来执行。
然而,也可以不进行这种推定,而将信息显示装置10变形为将离开输入面34的位置作为手指移动的终点来进行处理。
图7中,作为手势操作的第三例,示出了用于说明捏合放大(pinch out)操作(也简称为“捏合放大”)的示意图。捏合放大是在输入面34上使两根指尖相远离的操作。捏合放大也称为“捏合打开(pinch open)”。
图7中,举例示出了使两根手指均进行拖动的情况。与此相对,也可以如图8中作为手势操作的第四例所示出的那样,将一个指尖固定于输入面34上(换言之,一个指尖维持触摸状态),仅使另一个指尖进行拖动,从而也能进行捏合放大。另外,若对图7和图8的操作方法进行区别,则将图7的操作方法称为“两点移动型”,而将图8的操作方法称为“单点移动型”。
图9中,作为手势操作的第五例,示出了用于说明捏合缩小(pinch in)操作(也简称为“捏合缩小”)的示意图。捏合缩小是在输入面34上使两根指尖相靠近的操作。捏合缩小也称为“捏合闭合(pinch close)”。图9举例示出了两点移动型的捏合缩小,图10中,作为手势操作的第六例,举例示出了单点移动型的捏合缩小。
这里,将捏合放大和捏合缩小统称为“捏合操作”或“捏合”,将手指的移动方向称为“捏合方向”。该情况下,若捏合方向是手指的间隔扩大的方向,则特别将该捏合操作称为捏合放大。相反,若捏合方向是手指的间隔缩小的方向,则特别将该捏合操作称为捏合缩小。
另外,捏合放大和捏合缩小可以使用一只手上的两根手指,或者也可以使用右手的一根手指和左手的一根手指。两根手指的位置关系、移动方向以及移动距离不限于图7~图10的示例。此外,在单点移动型的捏合放大和捏合缩小中,进行拖动的手指不限于图8和图10的示例。此外,也可以使用轻弹代替拖动来进行捏合放大和捏合缩小。
各用户操作与特定的功能相关联。具体而言,若检测到用户操作,则由控制部16执行与该用户操作相关联的处理,从而实现对应的功能。鉴于这一点,用户操作也能根据所实现的功能进行分类。
例如,对显示面32上的图标进行的双击与执行该图标所对应的程序或命令的功能相关联。该情况下,双击起到执行指示操作的功能。
此外,如图11所例示的那样,对显示信息(图11中举例示出了地图图像)进行的拖动与使该显示信息滑动的滑动功能相关联。该情况下,拖动操作起到滑动操作的作用。另外,也能利用轻弹代替拖动来进行滑动。
此外,如图12所例示的那样,对显示信息(图12中举例示出了地图图像)进行的捏合放大和捏合缩小与变更该显示信息的尺寸(换言之,比例尺)的功能相关联。该情况下,捏合放大和捏合缩小起到显示尺寸变更操作(也可以称为“显示比例尺变更操作”)的作用。更具体而言,在图12的示例中,捏合放大对应于放大操作,捏合缩小对应于缩小操作。
此外,如图13所例示的那样,在对显示信息(图13中举例示出了地图图像)进行拖动并使得两根手指在保持距离的状态下画圆的情况下,该拖动与使该信息显示旋转的功能相关联。该情况的两点移动型的旋转拖动起到旋转操作的作用。另外,也可以采用利用三个以上的手指进行的旋转拖动。此外,也可以根据进行旋转拖动的手指的根数来区别所关联的功能。
这里,也能对一个用户操作分配多个种类的功能。例如,除了将双击分配给上述执行指示操作以外,还可以分配给打开与图标相关联的文件夹的文件夹打开操作。此外,也可以将拖动分配给滑动功能和绘制功能。在对一个用户操作分配了多种功能的情况下,根据操作对象、使用状况(换言之,使用模式)等来切换各功能。
此外,也能对一个功能分配多种用户操作。例如,可以使图标的执行指示功能与双击、长按和轻弹相关联。该情况下,通过双击、长按和轻弹中的任一个都能执行与图标相关联的程序等。此外,例如可以使滑动功能同时与拖动和轻弹均相关联。此外,例如还可以使旋转功能与两点移动型的旋转拖动和单点移动型的旋转拖动均相关联。
这里,出于画面移动以及变形的观点,将与用户操作相关联的功能大致分为画面移动变形型和非移动变形型。另外,以下,有时也将例如与画面移动变形型功能相关联的手势操作表述为“画面移动变形型功能的手势操作”。
与手势操作相关联的画面移动变形型功能是在根据手势方向设定的控制方向上对显示面上的显示信息进行控制(换言之,操作)的功能。画面移动变形型功能例如包括滑动功能、显示尺寸变更功能、旋转功能、以及鸟瞰图显示功能(更具体而言,仰角及俯角的变更功能)。另外,滑动功能可以分类成画面移动功能。此外,若从角度移动的观点来看旋转功能,则能将旋转功能分类为画面移动功能。此外,可以将显示尺寸变更功能和鸟瞰图显示功能分类为画面变形功能。
更具体而言,在滑动功能中,根据手势方向(例如拖动方向或轻弹方向)来设定滑动方向(即,控制方向),并使显示信息沿该滑动方向进行滑动。
此外,在显示尺寸变更功能中,在手势方向(例如捏合方向)为放大方向的情况下将控制方向设定为放大方向,而在手势方向为缩小方向的情况下将控制方向设定为缩小方向,并沿该设定的控制方向对显示信息的尺寸进行变更。
此外,在旋转功能中,在手势方向(例如旋转拖动中的旋转方向)为右转方向的情况下将控制方向设定为右转方向,而在手势方向为左转方向的情况下将控制方向设定为左转方向,并使显示信息沿该设定的控制方向旋转。
另外,画面移动变形型功能不仅可以利用手势方向,还可以利用手势量(例如手势轨迹的长度)来控制显示信息。具体而言,可以设定成手势量越大,显示信息的控制量(例如滑动量、显示尺寸变更量以及旋转量)越大。
此外,画面移动变形型功能也可以在手势量的基础上还利用手势速度来控制显示信息,或取而代之地利用手势速度来控制显示信息。具体而言,可以设定成手势速度越大,显示信息的控制速度(例如滑动速度、显示尺寸变更速度以及旋转速度)越大。
另一方面,虽然非移动变形型功能与手势操作相关联,但对于功能的实现并不利用手势方向。例如,虽然对图标的轻弹与特定程序的执行指示功能相关联,但该功能属于非移动变形型。此外,在例如在绘制功能以及手写文字输入功能中利用拖动的情况下,也仅仅显示与该拖动相对应的轨迹,而并不根据拖动方向控制显示信息。
另外,用户操作以及通过该用户操作实现的功能不限于上述各种例示。
<持续图标>
在信息显示装置10中采用了被称为持续图标的特征性操作方法。持续图标在进行了画面移动变形型功能的手势操作的情况下,显示在显示面上。并且,若对持续图标进行执行指示操作,则执行与该持续图标的出现所对应的(换言之,成为使该持续图标显示的契机的)手势操作相关联的画面移动变形型功能。换言之,持续图标与如下的画面移动变形型功能相关联,所述画面移动变形型功能是与该持续图标的出现所对应的手势操作相关联的画面移动变形型功能。通过持续图标来执行画面移动变形型功能时的显示信息的控制方向被设定为与该持续图标的出现所对应的手势操作时的控制方向相同。
作为对持续图标进行的执行指示操作,举例示出单点触摸操作。例如可以在对持续图标进行触摸的状态持续期间,持续执行与持续图标相关联的画面移动变形型功能。该情况下,通过比点击按下时间更长的长按操作,画面移动变形型功能的控制量(例如滑动量)变大。但是,并不限于该例。例如,可以在连续进行点击的期间持续执行画面移动变形型功能。
图14示出与滑动功能相关联的滑动持续图标的示意图,以作为持续图标的一个示例。这里,作为手势操作的一个示例的拖动70与作为画面移动变形型功能的一个示例的滑动功能相关联。通过进行拖动70来显示滑动持续图标72。该滑动持续图标72接受滑动功能的执行指示。滑动持续图标72的滑动方向设定为与该持续图标72的出现所对应的拖动70的滑动方向相同。
这里,在图14的示例中,通过向右方向进行拖动,使得地图图像向右方向滑动,并从显示面的左侧出现连续的地图图像。该情况下,滑动方向是与拖动方向相同的右方向。鉴于这一点,在图14的示例中,用类似向右箭头的头部的设计来描绘滑动持续图标72。然而,滑动持续图标72的设计不限于图示的示例。另外,在图14的示例中,地图图像的滚动方向通常表现为左方向。即,在滚动功能和滑动功能中,作为控制方向的滚动方向及滑动方向相差180°。然而,无论是滚动功能还是滑动功能,均是根据手势方向(图14的示例中为拖动方向)来设定控制方向的,这一点是共通的。
另外,将接受作为画面移动变形型功能的其它示例的显示尺寸变更功能及旋转功能的持续图标分别称为“显示尺寸变更持续图标”及“旋转持续图标”。更具体而言,显示尺寸变更持续图标如图15和图16所例示那样,根据显示尺寸变更方向而具有放大持续图标80和缩小持续图标82这两种。此外,旋转持续图标如图17和图18所例示那样,根据旋转方向而具有右转持续图标84和左转持续图标86这两种。然而,上述持续图标80、82、84、86的设计不限于图示的示例。
若采用信息显示装置10,则能通过手势操作在显示面上调出持续图标,并使用该持续图标,从而能执行与上述手势操作相关联的画面移动变形型功能。因此,若使用持续图标,则能减少手势操作的重复次数,从而能减轻操作负担。
此外,可通过仅进行与想要执行的功能相关联的手势操作来显示持续图标。即,与用户想要实现的功能相对应的持续图标可自动地进行显示。
此外,例如在用户不进行操作而持续观看显示信息的状况下,由于不调出持续图标,因此显示信息不会被持续图标遮挡。
<控制部16的构成例>
图19举例示出控制部16的框图。另外,图19中为了说明,还记载了显示部12、输入部14、以及存储部18。根据图19的示例,控制部16包括输入解析部40、整体控制部42、第一图像形成部44、第一图像保存部46、第二图像形成部48、第二图像保存部50、图像合成部52、合成图像保存部54、以及持续图标管理部56。
输入解析部40对输入部14所检测到的用户操作进行解析,并识别用户操作。具体而言,输入解析部40从输入部14获取伴随着用户操作而检测到的坐标数据,并根据该坐标数据获取用户操作信息。用户操作信息例如是用户操作的种类、手指移动的起点和终点、从起点到终点的轨迹、移动方向、移动量、移动速度、移动加速度等信息。
关于用户操作种类的识别,可通过将例如起点与终点的差和预先决定的阈值(称为“触摸/手势识别阈值”)进行比较,来识别触摸操作和手势操作。此外,也能如上述那样根据轨迹最后的手指移动速度来识别拖动和轻弹。
此外,在例如同时识别到两个拖动的情况下,能根据移动方向来识别捏合放大和捏合缩小。此外,在两个拖动保持距离并画圆的情况下,能识别为进行了旋转拖动。此外,在同时识别出拖动和单点触摸的情况下,能识别出捏合放大、捏合缩小及旋转拖动为单点移动型。
整体控制部42进行控制部16中的各种处理。例如,整体控制部42进行输入部14的输入面上的位置与显示部12的显示面上的位置的对应。由此,触摸操作的触摸位置、手势操作的手势轨迹等在显示面上对应起来。通过这种对应,能识别出用户操作意图在显示面的哪个位置上进行。上述对应能通过所谓的图形用户界面(GUI)技术来实现。
此外,整体控制部42基于例如用户操作信息和功能识别信息来识别用户所期望的功能、即用户指示。功能识别信息例如是通过操作状况信息来对用户操作与所执行的功能之间的关联进行了规定的信息。操作状况信息例如是信息显示装置10的使用状况(换言之,使用模式)、进行了用户操作的操作对象、根据使用状况和操作对象所能接受的用户操作的种类等信息。
更具体而言,例如,在使用了地图浏览软件的状况下将该地图图像作为操作对象进行了拖动的情况下,该拖动被识别为指示执行滑动功能。此外,例如在将地图图像上的放大图标作为操作对象进行点击的情况下,该点击被识别为指示执行显示尺寸放大功能。此外,例如在对放大图标进行的轻弹未关联任何功能的情况下,将该轻弹判断为无效的操作。
整体控制部42通过对第一图像形成部44、第二图像形成部48、以及图像合成部52进行控制,从而控制显示面上的显示信息。另外,显示信息的变更有时基于用户指示的识别结果,或者,有时也与用户指示的识别结果无关,而是基于程序执行方面的指示。
整体控制部42还进行针对其它功能部40、44、46、48、50、52、54、56的整体控制,例如进行执行时刻的调整。
第一图像形成部44从存储部18中读取与整体控制部42的指示相对应的第一信息60,根据第一信息60生成第一图像,并将第一图像储存在第一图像保存部46中。同样,第二图像形成部48从存储部18中读取与整体控制部42的指示相对应的第二信息62,根据第二信息62生成第二图像,并将第二图像储存在第二图像保存部50中。
图像合成部52在整体控制部42的指示下从第一图像保存部46中读取第一图像,从第二图像保存部50中读取第二图像,然后将第一图像与第二图像合成,并将合成后的图像储存到合成图像保存部54中。
图像的合成以使第一图像与第二图像重叠显示的方式进行。这里,举例示出第一图像为下方的图像(换言之,下层)、第二图像为上方的图像(换言之,上层)的情况。另外,这里所说的“上下”是显示面的法线方向上的上下,与观察显示面的用户距离较近的一侧表现为“上”。实际上基于这种概念来重叠图像数据。
在合成图像、即显示画面上,在上方图像的透明部分显示下方图像。换言之,上方图像中的绘图部分将下方图像遮住。然而,通过对上方图像的绘图部分设定透明度,从而也能形成透出下方图像的状态的合成图像。
将第一图像和第二图像中的哪一个作为上方图像的设定可以是不可变更的,或者,也可以是可变更的。
这里,举出了对第一图像和第二图像的两个层进行合成的示例,但也可以采用合成更多层的结构。此外,也可以采用其它合成方法。
储存在合成图像保存部54中的合成图像被传输给显示部12,并显示在显示部12中。通过对合成图像进行更新,即对第一图像和第二图像的至少一方进行更新,使得显示画面发生变化。
持续图标管理部56在整体控制部42的控制下对持续图标的显示进行管理。具体而言,持续图标管理部56对显示位置、大小、方向、显示属性等信息进行管理,并基于该管理信息对第二图像形成部48和图像合成部52进行控制,从而对持续图标的显示进行管理。
例如,持续图标管理部56向第二图像形成部48发出指示:从存储部18读取持续图标的图像数据、以和显示面的大小等相对应的大小形成持续图标的图像、以及根据显示位置和方向在透明平面上绘制所形成的持续图标图像并将其储存到第二图像保存部50中。此外,关于持续图标的消除,持续图标管理部56例如使第二图像形成部48将不具有持续图标图像的图像储存到第二图像保存部50中。此外,持续图标管理部56向图像合成部52指示进行图像保存部46、50内的图像的合成。
<信息显示装置10的处理例>
下面,举例示出与持续图标相关联的、信息显示装置10所进行的处理(换言之,显示信息操作方法)。
<持续图标的显示>
图20举例示出到显示持续图标为止的处理流程S10。根据图20的示例,在步骤S11中由输入部14接受用户操作,在步骤S12中,控制部16对所输入的用户操作进行识别。然后,在步骤S13中,控制部16基于步骤S12的识别结果,执行与用户操作相关联的功能。
之后,在步骤S14中,控制部16对于步骤S11中接受到的用户操作判断是否满足为了显示持续图标而预先决定的条件(称为“持续图标显示开始条件”或“显示开始条件”)。在判断为不满足显示开始条件的情况下,信息显示装置10的处理返回到上述步骤S11。另一方面,在判断为满足显示开始条件的情况下,控制部16在步骤S15中进行显示持续图标的处理。在显示持续图标后,结束图20的处理流程S10。
<持续图标显示开始条件>
关于上述步骤S14,能采用如下条件(称为“一次操作条件”)作为持续图标显示开始条件:在进行了一次画面移动变形型功能的手势操作(换言之,成为显示持续图标的契机的手势操作)的情况下,显示持续图标。若采用一次操作条件,则能立即使用持续图标。因此,能减轻多次重复相同的手势操作这样的操作负担。
这里,可以对一次操作条件附加如下条件(称为“操作时间条件”):在画面移动变形型功能的一次手势操作的操作时间的长度达到预先确定的阈值(称为“操作时间阈值”)的情况下,显示持续图标。关于一次手势操作持续一定程度时间的情况,例如设想用户一边注视显示信息一边进行该手势操作的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用操作时间条件,则能在更准确地识别用户意图的基础上,显示持续图标。
此外,可以对一次操作条件附加如下条件(称为“操作速度条件”):在画面移动变形型功能的一次手势操作的的操作速度达到预先确定的阈值(称为“操作速度阈值”)以上的情况下,显示持续图标。关于迅速进行手势操作的情况,例如设想用户想要快速看到操作后的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用操作速度条件,则能在更准确地识别用户意图的基础上,显示持续图标。
另外,也可以在操作速度条件中规定显示时刻。即,可以将操作速度条件变形成如下条件:在画面移动变形型功能的一次手势操作的操作速度在操作速度阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻显示持续图标。由此,能迅速提供持续图标。
此外,可以对一次操作条件附加如下条件(称为“手势量条件”):在画面移动变形型功能的一次手势操作的手势量(例如,拖动距离)在预先确定的阈值(称为“手势量阈值”)以上的情况下,显示持续图标。关于进行大幅度手势操作的情况,例如设想用户希望对显示信息以较大控制量进行控制的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用手势量条件,则能在更准确地识别用户意图的基础上,显示持续图标。
此外,也可以对一次操作条件附加如下条件(称为“终点条件”):在画面移动变形型功能的手势操作的终点对应于显示面上预先确定的区域内的地点时,显示持续图标。上述显示面上预先确定的区域例如是图21所示那样的显示面32的周边区域32b。根据图21的示例,显示面32的周边区域32b对应于输入面34的周边区域34b,该周边区域32b、34b内存在拖动70的终点70b。通过形成上述状况,从而显示持续图标(例如滑动持续图标)。例如设想用户想要进行更长的拖动、但已到达周边区域32b、34b的状况。此外,例如用户能为了显示持续图标,而有意识地使用该终点条件。因此,若采用终点条件,则能在更准确地识别用户意图的基础上,显示持续图标。另外,上述预先确定的区域不限于周边区域32b、34b。此外,图21所例示的拖动也可以是例如两点移动型捏合放大中的一个拖动。
此外,也可以对一次操作条件附加如下条件(称为“调出操作条件”):在接着画面移动变形型功能的手势操作而进行持续图标调出操作的情况下,显示持续图标。另外,“接着”这样的条件包括:以预先确定的操作时间间隔以下的时间间隔进行手势操作与持续图标调出操作的条件;以及在其中途不进行其它操作的条件。
持续图标调出操作例如是触摸操作。
更具体而言,如图22所例示那样,可以将进行上述手势操作即拖动的手指不离开终点、而用其它手指触摸输入面的任意其它位置的操作用作持续图标调出操作。可以采用单击作为上述触摸操作,或者也可以采用双击或长按。另外,在上述手势操作是使用多根手指的捏合放大等的情况下,也能进行上述触摸操作。
或者,如图22所例示那样,也可以将对作为上述手势操作进行的拖动的终点或其附近进行触摸的操作用作持续图标调出操作。可以采用单击作为上述触摸操作,或者也可以采用双击。另外,在上述手势操作是轻弹、以及上述手势操作是使用多根手指的捏合放大等的情况下,也能进行上述触摸操作。也可以采用长按作为拖动后的触摸操作。该情况下,用于拖动的手指不离开输入面,而直接转变为长按。在上述手势操作是使用多根手指的捏合放大等的情况下,也能进行上述利用长按的持续图标调出操作。
此外,作为持续图标调出操作,也可以采用轻弹操作来代替触摸操作。具体而言,如图22所例示那样,以描绘拖动轨迹的方式进行轻弹。
若采用持续图标调出操作,则能抑制持续图标的偶发性显示。
此外,也可以对一次操作条件附加如下条件(称为“无操作经过条件”):在画面移动变形型功能的手势操作后无操作状态持续预先确定的时间(时间长度)以上的情况下,显示持续图标。若采用无操作经过条件,则不会立即显示持续图标。因此,有助于防止操作失误。
也可以将操作时间条件等上述条件进行各种组合。
另一方面,可以采用如下条件(称为“重复操作条件”)来作为持续图标显示开始条件:在画面移动变形型功能的手势操作在相同的手势方向上连续重复预先确定的次数的情况下,显示持续图标。这里,“相同手势方向”不仅包括各次的手势方向完全相同的情况,还包括各次的手势方向实质上相同的情况(例如各次手势方向的偏差在预先确定的允许范围内的情况)。此外,“连续”这一条件包括:以预先确定的操作时间间隔以下的时间间隔重复手势操作的条件;以及在重复过程中不进行其它操作的条件。
另外,也可以对重复操作条件附加将类似的手势操作(例如拖动和轻弹)作为相同手势操作进行处理的条件。
关于重复操作条件,通过例如在步骤S14(参照图20)中通过对手势操作的种类、手势方向、步骤S11~S14的循环处理的重复次数等进行监视,从而能检测出相同手势操作的重复。
对于用户重复进行手势操作的情况,认为继续重复该手势操作的可能性较高。因此,若采用重复条件,则能在更准确地识别用户意图的基础上,显示持续图标。
这里,也可以对重复操作条件附加如下条件(称为“重复总时间条件”):在手势操作的重复时间的长度达到预先确定的阈值(称为“重复总时间阈值”)的情况下,显示持续图标。对于手势操作的重复达到一定程度时间的情况,例如设想用户想要快速看到接下来的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用重复总时间条件,则能在更准确地识别用户意图的基础上,显示持续图标。
这里,也可以对重复操作条件附加如下条件(称为“重复速度条件”):在画面移动变形型功能的手势操作的重复速度达到预先确定的阈值(称为“重复速度阈值”)以上的情况下,显示持续图标。重复速度例如定义为单位时间内手势操作的次数。关于迅速重复手势操作的情况,例如设想用户想要快速看到接下来的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用重复速度条件,则能在更准确地识别用户意图的基础上,显示持续图标。
另外,也可以在重复速度条件中规定显示时刻。即,可以将重复速度条件变形成如下条件:在画面移动变形型功能的手势操作的重复速度在重复速度阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻显示持续图标。由此,能迅速提供持续图标。
此外,可以对重复操作条件附加如下条件(称为“手势总量条件”):随着画面移动变形型功能的手势操作的重复对手势量(例如,拖动距离)进行累计,在其累计值达到预先确定的阈值(称为“手势总量阈值”)的情况下,显示持续图标。关于手势量的累计值变大的情况,例如设想用户希望对显示信息以较大控制量进行控制的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用手势总量条件,则能在更准确地识别用户意图的基础上,显示持续图标。
也可以将重复总时间条件等上述条件进行各种组合。
此外,也可以对重复操作条件附加与一次操作条件相关联地进行例示的操作时间条件等上述条件中的一个以上的条件。具体而言,是指将各次的手势操作作为对象,并应用操作时间条件等上述条件中的一个以上的条件。或者,也可以将预先确定次数的手势操作(例如最后的手势操作)作为对象,并应用操作时间条件等上述条件中的一个以上的条件。若采用这种附加条件,则能提高用户意图的识别精度。
<持续图标的显示位置>
关于上述步骤S15(参照图20),持续图标的显示位置基本上是任意的。与此相对,若如图23所例示,在拖动70的终点70b附近存在滑动持续图标72,则能以较少的移动量使用于拖动70的手指在滑动持续图标72上移动。
这里,图23的示例中,持续图标72设置在拖动终点70b的右侧。也可以与此相对,将持续图标72设置在终点70b的另一侧或终点70b的正上方。鉴于这一点,若如图23所示那样在包含终点70b而确定的区域(称为“终点区域”)70c内存在持续图标72,则能获得上述效果。
终点区域70c的大小和形状可以是与操作状况(所检测出的手指的大小、手指的移动速度等)相对应的可变值,或者也可以是与操作状况无关的固定值。此外,终点区域70c的中心也不一定要与终点70b一致。
另外,也可以在将拖动70的终点70b对应到显示面上之后,在显示面的坐标系中求出终点区域70c。或者,也可以在将拖动70的终点70b对应到显示面上之前,在输入面的坐标系中求出终点区域70c,并将得到的终点区域70c对应到显示面的坐标系中。
此外,在应用上述重复操作条件的情况下,可以对例如成为重复操作条件的判定对象的所有手势操作、或者其中的一部分手势操作求出平均终点位置,并根据该得到的终点位置来设定终点区域70c。或者,也可以针对预先确定次数的手势操作(例如最后的手势操作)设定终点区域70c。
或者,也可以如图24所例示那样,在拖动70的轨迹的延长线70d上设置持续图标72。由此,若继续向相同的方向移动用于拖动70的手指,则能到达持续图标72,因此手指的移动较为顺畅。
或者,也可以如图25所例示那样,在上述终点区域70c内延长线70d所通过的位置显示持续图标72。
或者,也可以如图26所例示那样,在显示面32的周边区域32b内上述延长线70d所通过的位置显示持续图标72。由此,能避免被认为是用户的关注度较高的显示面中央的显示信息被持续图标72挡住的情况。另外,这里举例示出了周边区域32b的设定范围与上述图21(涉及持续图标显示开始条件中的终点条件)相同的情况,但并不限于该例。
这里,参照图27~图29说明上述延长线70d的求取方法的示例。图27~图29举例示出了弯曲的拖动轨迹,但下面的说明也适用于直线状的拖动轨迹。
根据图27的示例,决定延长线70d作为连接拖动轨迹中的两点的直线。图27中举例示出轨迹中的两点为拖动70的起点70a和终点70b的情况,但并不限于该例。例如,也可以如图28所示那样利用拖动70的终点70b和该终点70b以外的位置。
另一方面,根据图29的示例,决定延长线70d作为与拖动轨迹中的一点相切的直线。图29中举例示出轨迹中的一点为拖动70的终点70b的情况,但并不限于该例。
若采用上述方法,则能简便地求得延长线70d。
这里,优选如图28和图29的示例那样,使用拖动轨迹的终点侧部分70f,换言之,排除拖动轨迹的起点侧部分70e来设定延长线70d。在图28和图29的示例中,拖动轨迹被分割成包含轨迹起点70a的起点侧部分70e、以及包含轨迹终点70f的终点侧部分70f这两部分。
认为与起点侧部分70e相比,用户的意图在终点侧部分70f更为明确。例如设想图28和图29的轨迹在拖动途中发生方向转换的情况。因此,通过利用终点侧部分70f,能在反映了用户意图的位置显示持续图标72。
也能利用终点侧部分70f中、除终点70b以外的部分。然而,鉴于用户意图的明确性,更优选将通过终点70b和终点侧部分中的另一点的直线(参照图28)、或者终点70b处的切线(参照图29)设定为延长线70d。
此外,认为终点侧部分70f与起点侧部分70e相比越小,则越能更强地反应出用户意图。
另外,能够在将拖动70的轨迹对应到显示面上之后,在显示面的坐标系中求出延长线70d。或者,也可以在将拖动70的轨迹对应到显示面上之前,在输入面的坐标系中求出延长线70d,并将得到的延长线70d对应到显示面的坐标系中。
此外,在应用上述重复操作条件的情况下,可以对例如成为重复操作条件的判定对象的所有手势操作、或者其中的一部分手势操作求出平均延长线,并将该得到的延长线用作上述延长线70d。或者,也可以利用针对预先确定次数的手势操作(例如最后的手势操作)的延长线70d。
有关持续图标的显示位置的上述各种事项也能应用于轻弹。此外,由于捏合放大等也包含拖动,因此也能应用上述各种事项。
另外,也可以如图30所例示那样,在两点移动型的手势操作(图30中举例示出了捏合放大)中,分别对各个拖动设定持续图标(图30中举例示出了放大持续图标80)。该例的情况下,用户选择性地对两个持续图标80中的某一个进行操作即可。
<持续图标的形状>
持续图标越大,越容易操作,有助于防止操作失误。与此相对,由于持续图标会将显示信息挡住,因此优选持续图标的面积较小。这些要求可以通过如图31所例示那样将持续图标72显示为带状来兼顾。另外,图31中举例示出了滑动持续图标72,但对于其它持续图标也同样。
通过预先准备例如含有带状的多个形状的持续图标,从而能利用带状的持续图标。或者,也可以仅预先准备一种形状,在写入第二图像保存部50时由第二图像形成部48(参照图19)将其加工成带状。
带状的持续图标的显示位置基本上是任意的与此相对,通过如图31所例示那样使带状的持续图标72沿着显示面32的周边的一部分显示,从而能避免被认为是用户的关注度较高的显示面中央的显示信息被持续图标72遮挡。
<持续图标的显示属性>
持续图标可以利用与其它图标不同的显示属性(换言之,显示方法)来显示。例如,可以利用闪烁、立体显示、动态显示、半透明等显示属性,或通过多个显示属性的组合来显示持续图标。由此,提高了持续图标的可视性,有助于防止操作失误。
<持续图标的利用>
图32举例示出显示持续图标过程中的处理流程S30。图32的示例中,步骤S31、S32与图20的步骤S11、S12同样。即,在步骤S31中由输入部14接受用户操作,在步骤S32中,控制部16对所输入的用户操作进行识别。
然后,在步骤S33中,控制部16判断步骤S31中接受到的用户操作是否是对持续图标进行的执行指示。具体而言,判断用户操作的输入位置是否对应于持续图标的显示位置,并判断用户操作是否是预先确定为持续图标所对应的执行指示操作的操作(这里如上述那样举例示出单点触摸)。
若在步骤S33中判断为用户操作是对持续图标进行的执行指示,则控制部16在步骤S34中执行与持续图标相关联的画面移动变形型功能,即,与该持续图标的出现相对应的手势操作所关联的画面移动变形型功能。之后,信息显示装置10的处理返回到上述步骤S31。
另一方面,若在步骤S33中判断为用户操作不是对持续图标进行的执行指示,则控制部16在步骤S35中执行与步骤S31中接受到的用户操作相关联的功能。之后,信息显示装置10的处理返回到上述步骤S31。
另外,例如即使在显示滑动持续图标期间,与滑动功能相关联的拖动也在上述步骤S31中被接受,并在上述步骤S33中执行滑动。由此,即使在显示滑动持续图标的状态下,也能利用拖动对显示信息进行微调、或向其它方向滑动等。对于滑动持续图标以外的持续图标也同样。
<滑动方向>
关于上述步骤S34,通过持续图标执行画面移动变形型功能时的显示信息的控制方向被设定为与该持续图标的出现所对应的手势操作时的控制方向相同。
这里,在显示尺寸放大功能中,显示信息的控制方向为放大方向。同样,在显示尺寸缩小功能、右转功能和左转功能中,根据手势方向来唯一地确定显示信息的控制方向。与此相对,在滑动功能中,控制方向即滑动方向的设定存在自由度。为此,参照图33和图34来举例示出滑动方向的设定方法。
在图33的示例中,在拖动70的轨迹的延长线70d的方向上设定滑动方向90。若采用该方法,则能将滑动方向90设定为遵循用户意图的方向。
在图34的示例中,从以拖动轨迹的终点70b为起点设定的多个方向中提取与延长线70d最为接近的方向作为滑动方向90。上述多个方向例如设定为以等角度进行辐射,图34中举例示出相隔45°的8个方向。若采用该方法,则能吸收用户手抖的影响。此外,还能减轻滑动处理的处理负担。
图33和图34的示例中,与在涉及持续图标的显示位置的说明中使用的图29同样,采用拖动轨迹终点70b处的切线作为延长线70d。但并不限于此,在持续图标的显示位置的说明中所阐述的关于延长线70d的各种事项也适用于滑动方向90的设定。
<控制量及控制速度>
关于上述步骤S34(参照图32),例如若点击持续图标,则以预先确定的控制量和预先确定的控制速度执行与持续图标相关联的画面移动变形型功能。此外,例如在对持续图标进行长按的期间,连续地执行与持续图标相关联的画面移动变形型功能。该情况下,根据长按的时间来决定显示信息的控制量。此外,显示信息的控制速度可以是预先确定的固定值,也可以逐渐增加。
与此相对,也可以将与持续图标的出现相对应的手势操作的手势量或手势速度反应到对持续图标进行执行指示操作时的显示信息的控制量中。同样,也可以将手势量或手势速度反映到对持续图标进行执行指示操作时的显示信息的控制速度中。
图35的示例中,手势量或手势速度越大,则显示信息的控制量或控制速度被设定得越大。更具体而言,拖动距离越长,滑动量被设定得越大。或者,拖动距离越长,滑动速度被设定得越大。或者,拖动速度越大,滑动量被设定得越大。或者,拖动速度越大,滑动速度被设定得越大。另外,也可以将例如平均速度或最高速度用作拖动速度。但并不限于图35所示的线性关系。
或者,也可以将与持续图标的出现相对应的手势操作的手势量设定为显示信息的控制量的一个单位,在对持续图标进行执行指示操作的情况下,按该一个单位来间断地控制显示信息。例如如图36所示,在点击一次滑动持续图标的情况下,使显示信息滑动上述一个单位的量,而在长按滑动持续图标的情况下,间断地进行上述一个单位量的滑动。由此,容易确认显示信息的变化。
或者,也可以将手势操作的手势速度的变化(换言之,手势操作的加速度)反应到对持续图标进行执行指示操作时的显示信息的控制速度中。例如,如图37所示,在点击一次滑动持续图标的情况下,再现一次手势操作的速度历史,而在长按滑动持续图标的情况下,在长按期间重复显示手势操作的速度历史。通常,手势操作的起始和结束时的手势速度较小,因此提供了与上述间断的滑动相同的状况。因此容易确认显示信息的变化。
另外,关于控制量和控制速度,上述所有示例都能应用于拖动以外的手势操作及滑动功能以外的画面移动变形型功能。
此外,在触摸面板14采用能检测手指对输入面的按压力的情况下,也可以设定成对持续图标的按压力越大,显示信息的控制量和控制速度的至少一方越大。
<持续图标的消除>
图38举例示出与持续图标的消除(即,显示的结束)有关的处理流程S50。根据图38的示例,在步骤S51中,控制部16判断是否满足用于消除持续图标而预先确定的条件(称为“持续图标消除条件”或“消除条件”)。
在判断为满足消除条件的情况下,控制部16在步骤S52中进行将持续图标从显示面消除的处理。之后,信息显示装置10的处理返回到显示持续图标为止的上述处理流程S10(参照图20)。另一方面,在判断为不满足消除条件的情况下,信息显示装置10的处理返回到上述步骤S51。
该处理流程S50与显示持续图标过程中的处理流程S30并行地执行。具体而言,在持续图标消除条件成立之前,重复步骤S51,在持续图标消除条件成立时,以中断处理的形式执行步骤S52。
<持续图标消除条件>
可以采用如下条件(称为“操作等待条件”)作为持续图标消除条件,即,在不对持续图标输入执行指示操作的状态持续的情况下,将持续图标从显示面消除。对于在一定程度的时间内未使用持续图标的情况,认为用户暂时不使用持续图标的可能性较高。因此,若采用消除等待时间条件,则能在更准确地识别用户意图的基础上消除持续图标,就这一点而言,能提供较高的便利性。
作为在消除持续图标之前的等待时间的长度,例如可以采用预先确定的固定值。或者,也可以基于与持续图标的出现相对应的手势操作的手势速度等来设定等待时间的长度。例如,对于迅速进行手势操作的情况,认为如上述那样继续重复该手势操作的可能性较高。即,认为持续图标被使用的可能性较高。因此,优选在手势速度较大的情况下,将消除等待时间设定得较长。
或者,也可以采用如下条件(称为“消除指示条件”)作为持续图标消除条件:在用户操作是预先确定的持续图标消除操作的情况下,将持续图标从显示面消除。对持续图标消除操作分配了与对持续图标进行的执行指示操作不同的操作(例如对持续图标进行的轻弹)。若采用消除指示条件,则用户能在其喜好的时刻消除持续图标。
或者,也可以同时采用操作等待条件和消除指示条件,由此能进一步提高便利性。
<持续图标的个数>
也能同时显示多个持续图标。例如可以显示滑动方向不同的多个滑动持续图标,或者也可以显示滑动持续图标、放大持续图标和右转持续图标。该情况下,由上述处理流程S10、S30、S50对各个持续图标进行并行管理。此外,也可以对同时显示的持续图标的个数设置限制。
<滑动与显示尺寸变更的组合>
图39举例示出同时执行滑动与显示尺寸变更的操作。在图39的示例中,将对滑动持续图标72的执行指示操作与指示显示尺寸的放大的捏合放大操作相组合。
更具体而言,控制部16在滑动持续图标72被触摸、并且滑动持续图标72以外的位置被触摸的情况下,判断为输入了组合操作。并且,控制部16对利用保持滑动持续图标72被触摸的状态、并触摸了滑动持续图标72以外的位置的手指进行拖动或轻弹的操作(即、单点移动型的捏合操作)进行识别。此时,根据捏合操作的方向识别为捏合放大或捏合缩小。
上述识别的结果是,控制部16判断为与滑动指示相组合的指示是显示尺寸放大的指示,因而同时执行滑动和显示尺寸放大。
另外,通过进行捏合缩小来代替捏合放大,从而能同时执行滑动和显示尺寸缩小。
或者也可以如图40所例示那样,显示尺寸放大操作是对显示在滑动持续图标72以外的位置的放大图标100(显示尺寸变更图标的一个示例)进行触摸的操作。该情况下,对滑动持续图标72和放大图标100进行两点触摸操作。
这里,作为放大图标100可以利用放大持续图标80(参照图15)。即,在同时显示滑动持续图标72和放大持续图标80的情况下,对上述图标72、80进行两点触摸即可。
或者,也可以不显示放大持续图标80,而将通常的放大图标作为放大图标100与滑动持续图标72一起显示。即,将两个图标72、100设为一套来显示。
图40的示例中,还设置了显示尺寸变更图标的另一例、即缩小图标102。缩小图标102可以是缩小持续图标82(参照图16),也可以是通常的缩小图标。
另外,也存在与图40的示例不同、仅显示放大图标100与缩小图标102中的某一个的情况。另外,上述图标100、102的设计不限于图40的示例。
<取消操作>
图41示出对取消操作进行说明的图。根据图41的示例,取消图标104在步骤S15(参照图20)中与滑动持续图标72一同显示。取消图标104是用于将对滑动持续图标72进行的执行指示操作取消的图标。
由此,在图32的步骤S31中,在进行例如点击或长按来作为对取消图标104的执行操作(称为取消执行操作)的情况下,控制部16通过步骤S32、S33、S35使显示面的显示信息恢复到使用滑动持续图标72执行滑动前的状态。例如,通过将对用于滑动持续图标72而设定的滑动方向(即控制方向)设定为相反方向来执行滑动功能,从而能使显示信息恢复到之前的状态。
此外,对于使用取消图标104时的滑动量及滑动速度的设定,可以应用对滑动持续图标72说明的上述各种事项。因此,例如在使用取消图标104时也能执行间断的滑动。此外,也可以采用不同的设定,使得例如利用滑动持续图标72执行间断的滑动,而利用取消图标104执行连续的滑动。
通过如上述那样将取消图标104与滑动持续图标72设为一套来提供,从而提高了滑动持续图标72的便利性。
另外,取消图标104也能与其它持续图标进行组合。此外,取消图标104的设计不限于图41的示例。
<效果>
若采用信息显示装置10,则能获得上述各种效果,从而能提供较高的便利性。另外,以上主要举例示出了手势操作为拖动、且与拖动相关联的画面移动变形型功能为滑动功能的情况,对于其它手势操作和其它画面移动变形型功能也能获得同样的效果。
<变形例>
以下主要举例示出了显示在显示部12中的显示信息是地图图像的情况。然而,持续图标的利用并不限于地图图像。例如,也能将持续图标用于对书籍、音乐等的标题的列表、以及网页检索结果的列表的滚动等。此外,也能将持续图标用于例如电子书等的翻页、以及电子相册等的内容选择。
此外,作为手势操作以及持续图标的控制对象的显示信息可以显示在整个显示面中,也可以显示于显示面的一部分。显示于显示面的一部分的显示信息例如是设置于该一部分的窗口内的显示信息。此外,显示面的一部分可以如图42所例示那样是一维的。即,在图42的示例中,形成显示信息的要素A,B,C,D,E,F,G,H,I可以在蛇行的路径上成列状地(换言之,相连结地)移动,其移动可由拖动或轻弹来控制。
此外,以上举例示出了将接触型的触摸面板作为输入部14。与此相对,也可以采用非接触型(也称为三维(3D)型)触摸面板作为输入部14。
若采用非接触型的触摸面板,则在输入面上以三维空间形式提供传感器组的可检测区域(换言之,可接受用户输入的输入区域),并对将该三维空间内的手指投影在输入面上的位置进行检测。此外,非接触型的触摸面板中还包括能对手指到输入面的距离进行检测的方式。根据该方式,能以三维位置的形式检测手指位置,还能检测手指的靠近及后退。作为非接触型触摸面板,开发了各种方式,已知有例如作为静电容方式的一种的投影电容方式。
另外,以上举例示出了将手指作为供用户进行输入的指示物,但例如也能利用手指以外的部位作为指示物。此外,还可以利用例如触摸笔(也称为手写笔)等工具作为指示物。
此外,输入部14也可以利用所谓的运动传感技术。作为运动传感技术,开发了各种方式。例如,已知通过由用户握持或穿戴搭载了加速度传感器等的控制器从而检测用户的动作的方式。此外,例如还已知从摄像机的拍摄图像中提取手指等的特征点、并根据该提取结果来检测用户的动作的方式。利用采用了运动传感技术的输入部14也能提供直观的操作环境。
此外,以上举例示出了输入兼显示部20,但显示部12和输入部14也可以分别设置。该情况下,由于输入部14由触摸面板等构成,因此也能提供直观的操作环境。
此外,信息显示装置10还可以进一步包括上述要素12、14、16、18以外的要素。例如,可以添加如下要素中的以上以上:即、输出音频信息的音频输出部、与各种设备之间进行有线通信或无线通信的通信部、以例如GPS(Global Positioning System:全球定位系统)方式为基准对信息显示装置10的当前位置进行检测的当前位置检测部。
若采用音频输出部,则能输出例如操作音、效果音、引导音频等。例如能在持续图标的出现、利用以及消除的各个时刻输出通知音。此外,通信部例如能用于对储存在存储部18中的信息进行的新获取以及更新。此外,当前位置检测部能用于例如导航功能。
信息显示装置10的用途不作特别限定。例如信息显示装置10可以是便携式或台式的信息设备。或者,也可以在搭载在汽车等移动体中的导航装置或音频、视频装置中应用信息显示装置10。
另外,本发明可以在该发明的范围内对实施方式进行适当地变形、省略。
标号说明
10  信息显示装置
12  显示部
14  输入部
16  控制部
18  存储部
20  输入兼显示部
32  显示面
32b 周边区域
34  输入面(输入区域)
34b 周边区域
70  拖动
70a  起点
70b  终点
70c  终点区域
70d  延长线
70e  起点侧部分
70f  终点侧部分
72   滑动持续图标
80   放大持续图标(显示尺寸变更持续图标)
82   缩小持续图标(显示尺寸变更持续图标)
84   右转持续图标
86   左转持续图标
90   滑动方向
100  放大图标(显示尺寸变更图标)
102  缩小图标(显示尺寸变更图标)
104  取消图标
S10、S30、S50  处理流程。

Claims (36)

1.一种信息显示装置,其特征在于,包括:
显示部,该显示部具有显示面;
输入部,该输入部接受用户操作;以及
控制部,该控制部在所述用户操作是与画面移动变形型功能相关联的手势操作的情况下,使所述显示面显示用于执行所述画面移动变形型功能的持续图标,而在所述用户操作是对所述持续图标的执行指示操作的情况下,以和所述持续图标的出现所对应的所述手势操作时相同的所述控制方向执行所述画面移动变形型功能,其中,所述画面移动变形型功能将所述显示面上的显示信息向根据手势方向设定的控制方向进行控制。
2.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作在相同的手势方向上连续重复了预先确定的次数的情况下,使所述持续图标显示。
3.如权利要求2所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的重复时间的长度达到预先确定的阈值的情况下,使所述持续图标显示。
4.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次的操作时间的长度达到预先确定的阈值的情况下,使所述持续图标显示。
5.如权利要求2所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的重复速度在预先确定的阈值以上的情况下,使所述持续图标显示。
6.如权利要求5所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的所述重复速度在所述预先确定的阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻,使所述持续图标显示。
7.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次的操作速度在预先确定的阈值以上的情况下,使所述持续图标显示。
8.如权利要求7所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的所述一次的操作速度在所述预先确定的阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻,使所述持续图标显示。
9.如权利要求2所述的信息显示装置,其特征在于,
所述控制部随着所述手势操作的重复对手势量进行累计,在其累计值达到预先确定的阈值的情况下,使所述持续图标显示。
10.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次的手势量达到预先确定的阈值的情况下,使所述持续图标显示。
11.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的终点对应于所述显示面上预先确定的区域内的位置的情况下,使所述持续图标显示。
12.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在接着所述手势操作进行了持续图标调出操作的情况下,使所述持续图标显示。
13.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作之后、无操作状态持续了预先确定的时间的情况下,使所述持续图标显示。
14.如权利要求1所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的手势量或手势速度反映到对所述持续图标进行了所述执行指示操作时的所述显示信息的控制量或控制速度中。
15.如权利要求14所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的手势量设定为所述显示信息的控制量的一个单位,在对所述持续图标进行了所述执行指示操作的情况下,按所述一个单位来间断地控制所述显示信息。
16.如权利要求14所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的手势速度的变化反映到对所述持续图标进行了所述执行指示操作时的所述显示信息的控制速度的变化中。
17.如权利要求1所述的信息显示装置,其特征在于,
所述控制部使所述显示面显示所述持续图标,并使所述显示面显示用于将已对所述持续图标进行的所述执行指示操作取消的取消图标,在所述用户操作是对所述取消图标的取消执行操作的情况下,使所述显示面的所述显示信息恢复到利用所述持续图标执行所述画面移动变形型功能前的状态。
18.如权利要求1所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的终点或包含所述终点而确定的终点区域对应到所述显示面上,并在所述显示面上使所述持续图标显示在所述终点区域内。
19.如权利要求1所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的手势轨迹或所述手势轨迹的延长线对应到所述显示面上,并在所述显示面上使所述持续图标显示在所述延长线上。
20.如权利要求19所述的信息显示装置,其特征在于,
所述控制部使所述持续图标显示在所述显示面的周边区域内所述延长线通过的位置。
21.如权利要求19所述的信息显示装置,其特征在于,
所述控制部利用作为所述手势轨迹的一部分且包含所述手势轨迹的终点的终点侧部分设定所述延长线。
22.如权利要求21所述的信息显示装置,其特征在于,
所述延长线是所述手势轨迹的所述终点处的切线、或是通过所述手势轨迹的所述终点与所述终点侧部分中的另一点的直线。
23.如权利要求1所述的信息显示装置,其特征在于,
所述持续图标为带状的图标。
24.如权利要求23所述的信息显示装置,其特征在于,
所述带状图标沿着所述显示面的周边的一部分进行显示。
25.如权利要求1所述的信息显示装置,其特征在于,
所述持续图标以不同于其它图标的显示属性进行显示。
26.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在不对所述持续图标输入所述执行指示操作的状态持续的情况下,将所述持续图标从所述显示面消除。
27.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述用户操作是持续图标消除操作的情况下,将所述持续图标从所述显示面消除。
28.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是使所述显示信息向所述控制方向滑动的滑动功能,
所述控制方向是所述显示信息的滑动方向,
所述持续图标是用于持续所述滑动功能的滑动持续图标,
所述控制部将所述手势操作的手势轨迹或所述手势轨迹的延长线对应到所述显示面上,并将所述显示面上的所述延长线的方向设定为所述滑动方向。
29.如权利要求28所述的信息显示装置,其特征在于,
所述控制部利用作为所述手势轨迹的一部分且包含所述手势轨迹的终点的终点侧部分设定所述延长线。
30.如权利要求28所述的信息显示装置,其特征在于,
所述延长线是所述手势轨迹的所述终点处的切线、或是通过所述手势轨迹的所述终点与所述终点侧部分中的另一点的直线。
31.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是使所述显示信息向所述控制方向滑动的滑动功能,
所述控制方向是所述显示信息的滑动方向,
所述持续图标是用于持续所述滑动功能的滑动持续图标,
所述控制部将所述手势操作的手势轨迹或所述手势轨迹的延长线对应到所述显示面上,并从所述显示面上的以所述手势轨迹的终点为起点而设定的多个方向中,提取出与所述延长线最为接近的方向以作为所述滑动方向。
32.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是使所述显示信息向所述控制方向滑动的滑动功能,
所述持续图标是用于持续所述滑动功能的滑动持续图标,
所述控制部在所述用户操作是对所述滑动持续图标的所述执行指示操作、与用于变更所述显示信息的显示尺寸的显示尺寸变更操作的组合操作的情况下,同时对所述显示信息进行滑动和显示尺寸变更。
33.如权利要求32所述的信息显示装置,其特征在于,
所述控制部在所述滑动持续图标被触摸并且所述滑动持续图标以外的位置被触摸的情况下,判断为所述用户操作为所述组合操作。
34.如权利要求33所述的信息显示装置,其特征在于,
所述组合操作中的所述显示尺寸变更操作是在保持对所述滑动持续图标进行触摸的状态的同时、从所述滑动持续图标以外的所述位置进行拖动或轻弹的操作。
35.如权利要求33所述的信息显示装置,其特征在于,
所述组合操作中的所述显示尺寸变更操作是对所述滑动持续图标以外的所述位置上显示的显示尺寸变更图标进行触摸的操作。
36.一种显示信息操作方法,其特征在于,包括以下步骤:
(a)接受用户操作;
(b)识别所述用户操作;
(c)在所述用户操作是与画面移动变形型功能相关联的手势操作的情况下,使所述显示面显示用于执行所述画面移动变形型功能的持续图标,其中,所述画面移动变形型功能将显示面上的显示信息向根据手势方向设定的控制方向进行控制;以及
(d)在所述用户操作是对所述持续图标的执行指示操作的情况下,以和所述持续图标的出现所对应的所述手势操作时相同的所述控制方向执行所述画面移动变形型功能。
CN201280076449.5A 2012-10-16 2012-10-16 信息显示装置及显示信息操作方法 Active CN104736969B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2012/076679 WO2014061097A1 (ja) 2012-10-16 2012-10-16 情報表示装置および表示情報操作方法

Publications (2)

Publication Number Publication Date
CN104736969A true CN104736969A (zh) 2015-06-24
CN104736969B CN104736969B (zh) 2016-11-02

Family

ID=50487686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280076449.5A Active CN104736969B (zh) 2012-10-16 2012-10-16 信息显示装置及显示信息操作方法

Country Status (5)

Country Link
US (1) US20150212683A1 (zh)
JP (1) JP5738494B2 (zh)
CN (1) CN104736969B (zh)
DE (1) DE112012007203T5 (zh)
WO (1) WO2014061097A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107102772A (zh) * 2017-04-25 2017-08-29 北京小米移动软件有限公司 触控方法及装置
CN110322775A (zh) * 2019-05-30 2019-10-11 广东民航机场建设有限公司 机场信息的展示方法、装置、计算机设备和存储介质
CN112470187A (zh) * 2017-12-12 2021-03-09 肯耐克科技股份有限公司 信息处理系统
CN113778310A (zh) * 2021-08-05 2021-12-10 阿里巴巴新加坡控股有限公司 跨设备控制方法及计算机程序产品

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013183722A1 (ja) * 2012-06-08 2013-12-12 Necカシオモバイルコミュニケーションズ株式会社 電子機器、その制御方法及びプログラム
JP5923395B2 (ja) * 2012-06-26 2016-05-24 京セラ株式会社 電子機器
US9612740B2 (en) * 2013-05-06 2017-04-04 Barnes & Noble College Booksellers, Inc. Swipe-based delete confirmation for touch sensitive devices
EP3025218B1 (en) * 2013-07-22 2019-06-19 Hewlett-Packard Development Company, L.P. Multi-region touchpad
JP6071866B2 (ja) * 2013-12-18 2017-02-01 キヤノン株式会社 表示制御装置、表示装置、撮像システム、表示制御方法、及びプログラム
US10628027B2 (en) 2014-02-21 2020-04-21 Groupon, Inc. Method and system for a predefined suite of consumer interactions for initiating execution of commands
US10534502B1 (en) * 2015-02-18 2020-01-14 David Graham Boyers Methods and graphical user interfaces for positioning the cursor and selecting text on computing devices with touch-sensitive displays
JP6433347B2 (ja) * 2015-03-16 2018-12-05 三菱電機株式会社 地図表示制御装置および地図の自動スクロール方法
JP6601201B2 (ja) * 2015-03-19 2019-11-06 株式会社デンソーウェーブ ロボット操作装置、及びロボット操作プログラム
KR102508833B1 (ko) * 2015-08-05 2023-03-10 삼성전자주식회사 전자 장치, 전자 장치의 문자 입력 방법
JP2018190268A (ja) * 2017-05-10 2018-11-29 富士フイルム株式会社 タッチ式操作装置とその作動方法および作動プログラム
USD907653S1 (en) 2017-09-05 2021-01-12 Byton Limited Display screen or portion thereof with a graphical user interface
US10746560B2 (en) * 2017-09-05 2020-08-18 Byton Limited Interactive mapping
USD889492S1 (en) 2017-09-05 2020-07-07 Byton Limited Display screen or portion thereof with a graphical user interface
USD890195S1 (en) 2017-09-05 2020-07-14 Byton Limited Display screen or portion thereof with a graphical user interface
JP7078845B2 (ja) * 2018-04-03 2022-06-01 株式会社ミクシィ 情報処理装置、機能表示方法及び機能表示プログラム
US11320983B1 (en) * 2018-04-25 2022-05-03 David Graham Boyers Methods and graphical user interfaces for positioning a selection, selecting, and editing, on a computing device running applications under a touch-based operating system
CN109269522A (zh) * 2018-08-28 2019-01-25 广东卡仕达电子科技有限公司 一种车载导航仪的操作方法
JP2020042417A (ja) * 2018-09-07 2020-03-19 アイシン精機株式会社 表示制御装置
JP7259581B2 (ja) * 2019-06-18 2023-04-18 京セラドキュメントソリューションズ株式会社 情報処理装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101319908A (zh) * 2007-06-07 2008-12-10 索尼株式会社 导航装置和地图滚动处理方法
CN101582006A (zh) * 2008-05-13 2009-11-18 明基电通有限公司 交互式电子装置及其交互方法
CN101714056A (zh) * 2008-09-30 2010-05-26 索尼株式会社 信息处理设备、信息处理方法和程序
CN102023788A (zh) * 2009-09-15 2011-04-20 宏碁股份有限公司 触控屏幕显示画面控制方法
CN102132229A (zh) * 2008-08-29 2011-07-20 微软公司 内置滚动激活和光标装饰
JP2011242820A (ja) * 2010-05-13 2011-12-01 Panasonic Corp 電子機器、表示方法、及びプログラム
CN102713812A (zh) * 2009-12-22 2012-10-03 伊斯曼柯达公司 图像集合的可变速度浏览

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070132789A1 (en) * 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
JP5228755B2 (ja) * 2008-09-29 2013-07-03 富士通株式会社 携帯端末装置、表示制御方法および表示制御プログラム
JP2011028635A (ja) * 2009-07-28 2011-02-10 Sony Corp 表示制御装置、表示制御方法およびコンピュータプログラム
JP5494337B2 (ja) * 2010-07-30 2014-05-14 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101319908A (zh) * 2007-06-07 2008-12-10 索尼株式会社 导航装置和地图滚动处理方法
CN102323870A (zh) * 2007-06-07 2012-01-18 索尼株式会社 信息处理装置、信息处理方法和计算机可读介质
CN101582006A (zh) * 2008-05-13 2009-11-18 明基电通有限公司 交互式电子装置及其交互方法
CN102132229A (zh) * 2008-08-29 2011-07-20 微软公司 内置滚动激活和光标装饰
CN101714056A (zh) * 2008-09-30 2010-05-26 索尼株式会社 信息处理设备、信息处理方法和程序
CN102023788A (zh) * 2009-09-15 2011-04-20 宏碁股份有限公司 触控屏幕显示画面控制方法
CN102713812A (zh) * 2009-12-22 2012-10-03 伊斯曼柯达公司 图像集合的可变速度浏览
JP2011242820A (ja) * 2010-05-13 2011-12-01 Panasonic Corp 電子機器、表示方法、及びプログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107102772A (zh) * 2017-04-25 2017-08-29 北京小米移动软件有限公司 触控方法及装置
CN107102772B (zh) * 2017-04-25 2020-06-19 北京小米移动软件有限公司 触控方法及装置
CN112470187A (zh) * 2017-12-12 2021-03-09 肯耐克科技股份有限公司 信息处理系统
CN110322775A (zh) * 2019-05-30 2019-10-11 广东民航机场建设有限公司 机场信息的展示方法、装置、计算机设备和存储介质
CN110322775B (zh) * 2019-05-30 2021-06-29 广东省机场管理集团有限公司工程建设指挥部 机场信息的展示方法、装置、计算机设备和存储介质
CN113778310A (zh) * 2021-08-05 2021-12-10 阿里巴巴新加坡控股有限公司 跨设备控制方法及计算机程序产品

Also Published As

Publication number Publication date
US20150212683A1 (en) 2015-07-30
WO2014061097A1 (ja) 2014-04-24
CN104736969B (zh) 2016-11-02
JP5738494B2 (ja) 2015-06-24
JPWO2014061097A1 (ja) 2016-09-05
DE112012007203T5 (de) 2015-08-20

Similar Documents

Publication Publication Date Title
CN104736969A (zh) 信息显示装置及显示信息操作方法
CN104737221A (zh) 信息显示装置及显示信息操作方法
US11003304B2 (en) Information display terminal, information display method and program
US9250729B2 (en) Method for manipulating a plurality of non-selected graphical user elements
JP4557058B2 (ja) 情報表示端末、情報表示方法、およびプログラム
US20100295806A1 (en) Display control apparatus, display control method, and computer program
EP3736675B1 (en) Method for performing operation on touchscreen and terminal
US20080134078A1 (en) Scrolling method and apparatus
US9721365B2 (en) Low latency modification of display frames
TWI490771B (zh) 可編程顯示器及其畫面操作處理程式
US20130169563A1 (en) Storage medium storing information processing program, information processing apparatus, information processing method, and information processing system
US20120056831A1 (en) Information processing apparatus, information processing method, and program
WO2010032268A2 (en) System and method for controlling graphical objects
US9557907B2 (en) Display device capturing digital content and method of controlling therefor
US20140347276A1 (en) Electronic apparatus including touch panel, position designation method, and storage medium
KR20080066416A (ko) 터치 스크린을 갖는 이동 단말기의 사용자 인터페이스 방법
US20140285461A1 (en) Input Mode Based on Location of Hand Gesture
US20150199073A1 (en) Ordering of objects displayed by a computing device
US20140078082A1 (en) Operating method of electronic device
JP5921703B2 (ja) 情報表示装置および情報表示装置における操作制御方法
JP2013012063A (ja) 表示制御装置
JP6945345B2 (ja) 表示装置、表示方法及びプログラム
KR101436588B1 (ko) 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
KR20030058990A (ko) 펜마우스의 동작방법 개선
US20160162144A1 (en) Display device, display method and computer readable non-volatile recording medium storing program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant