CN102707830B - 显示控制设备、显示控制方法和程序 - Google Patents
显示控制设备、显示控制方法和程序 Download PDFInfo
- Publication number
- CN102707830B CN102707830B CN201210055064.2A CN201210055064A CN102707830B CN 102707830 B CN102707830 B CN 102707830B CN 201210055064 A CN201210055064 A CN 201210055064A CN 102707830 B CN102707830 B CN 102707830B
- Authority
- CN
- China
- Prior art keywords
- display
- display control
- control apparatus
- display screen
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
提供了一种显示控制设备,包括:操作显示单元,用于根据在显示屏幕上的用户操作,检测显示屏幕上的操作位置;状态确定单元,用于基于操作位置的检测结果,确定检测到两个操作位置的第一操作状态;处理确定单元,用于基于在第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及显示控制单元,用于基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示。显示控制单元根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示。
Description
技术领域
本公开涉及显示控制设备、显示控制方法和程序。
背景技术
近年来,提供有触摸面板的设备(例如,诸如智能电话的通信设备)正变得流行,触摸面板允许显示屏幕的显示以及在该显示屏幕上的用户操作。这些设备中的一些能够检测显示屏幕上的一个或多个用户操作(下文中,有时称为“多点触控手势”)。实现多点触控手势的多点触控用户界面(下文中,有时称为“多点触控UI”)从为用户提供更直观的操作的观点来说是重要的技术。
发明内容
通过使用采用多点触控UI的设备,使得用户能够执行更直观的操作,并且因此可以例如通过扩大在显示屏幕上显示的显示内容的显示尺寸或减小显示尺寸,改变在显示屏幕上的显示。因此,采用多点触控UI的设备可能增加用户的便利性。
这里,如果采用多点触控UI的设备是例如诸如智能电话的移动设备,那么用户在其上执行操作的显示屏幕可能不足够大用于用户执行操作。在这样的情况下,用户可能不得不重复执行例如诸如缩进(pinch-in)手势或扩大(pinch-out)手势,以使得在显示屏幕上的显示为合意的显示。此外,即使用户在其上执行操作的显示屏足够大,也可能出现如上所述其中用户不得不重复执行预定多点触控手势若干次的情况。因此,即使使用采用多点触控UI的设备,用户的便利性也不必定增加。
本公开提出了一种显示控制设备、显示控制方法和程序,其是新颖的和改进的,并且能够增加用户的便利性。
根据本公开的实施例,提供了一种显示控制设备,包括:操作显示单元,用于显示显示屏幕,并且根据在显示屏幕上的用户操作,检测显示屏幕上一个或多个操作位置;状态确定单元,用于基于操作位置的检测结果,确定检测到两个操作位置的第一操作状态;处理确定单元,用于基于在第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及显示控制单元,用于基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示。显示控制单元根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示。
根据该配置,可以增加用户的便利性。
在已经确定的处理是通过扩大或缩小时间轴改变显示的处理的情况下,其中显示其上显示在时间轴上安排的图像的列表的显示屏幕,显示控制单元可以通过根据确定的持续时间扩大或缩小时间轴改变显示。
其上显示在时间轴上安排的图像的列表的显示屏幕可以是其上以螺旋方式示出时间轴的显示屏幕。
在已经确定的处理是增大或缩小在显示屏幕上显示的显示内容的显示尺寸的处理的情况下,显示控制单元可以根据确定的持续时间增大或缩小显示内容的显示尺寸。
处理确定单元可以计算区域改变速度和指示显示中的改变量的区域改变量,所述区域改变速度基于检测到的两个操作位置之间的距离,所述区域改变量基于所述区域改变速度,并且可以基于已经计算的区域改变速度确定要执行的处理的类型,以及基于已经计算的区域改变量决定显示中的改变量。
处理确定单元还可以计算之前计算的区域改变速度和当前计算的区域改变速度的乘积,并且在已经计算的乘积的值是负值的情况下,可以确定已经执行重复操作,并且可以确定对应于重复操作的处理为要执行的处理。
处理确定单元还可以基于当前计算的区域改变速度,确定对应于重复操作的处理的类型。
状态确定单元还可以基于操作位置的检测结果,确定从第一操作状态到没有检测到操作位置的第二操作状态的改变。处理确定单元可以计算计算的区域改变量的积分值。在处理确定单元计算积分值的情况下,显示控制单元不必执行已经确定要执行的处理,直到状态确定单元确定已经发生到第二操作状态的改变,可以使得显示屏幕显示处理结果候选,所述处理结果候选指示当根据积分值执行处理时将获得的处理结果,并且当确定到第二操作状态的改变已经发生时,可以使得显示屏幕执行对应于处理结果候选的显示。
显示控制单元可以使得处理结果候选在弹出窗口中显示。
显示控制单元可以使得当根据积分值执行处理时将获得的显示内容显示为处理结果候选。
显示控制单元可以使得对应于当根据积分值执行处理时将获得的显示内容的文本信息显示为处理结果候选。
状态确定单元还可以基于操作位置的确定结果,确定从第一操作状态到检测到一个或三个或更多操作位置的第三操作状态的改变。当到第三操作状态的改变确定为已经发生时,显示控制单元可以临时暂停正在执行的处理的执行,或者可以使得在正在执行的处理执行之前的显示内容为显示屏幕的显示内容。
状态确定单元还可以基于操作位置的确定结果,确定从第三操作状态到第一操作状态的改变。当到第一操作状态的改变确定为已经发生时,显示控制单元可以重启临时停止的处理的执行。
根据本公开的另一实施例,提供了一种显示控制方法,包括:基于操作位置的检测结果,在操作显示单元确定检测到两个操作位置的第一操作状态,所述操作显示单元用于显示显示屏幕,并且根据在显示屏幕上的用户操作,检测显示屏幕上一个或多个操作位置;基于第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示。在使得显示屏幕执行显示的步骤中,根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示。
通过使用该方法,可以增加用户的便利性。
根据本公开的另一实施例,提供了一种用于使得计算机执行以下步骤的程序:基于操作位置的检测结果,在操作显示单元确定检测到两个操作位置的第一操作状态,所述操作显示单元用于显示显示屏幕,并且根据在显示屏幕上的用户操作,检测显示屏幕上一个或多个操作位置;基于第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示。在使得显示屏幕执行显示的步骤中,根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示。
通过使用该程序,可以增加用户的便利性。
根据本公开,可以增加用户的便利性。
附图说明
图1是示出多点触控手势的示例的说明图;
图2是示出现有技术的显示控制设备可能出现的问题的示例的说明图;
图3是示出基于显示屏幕上的操作位置执行的根据实施例的显示控制设备的处理的确定方法的示例的说明图;
图4是示出由根据实施例的显示控制方法实现的显示控制的第一示例的说明图;
图5是示出由根据实施例的显示控制方法实现的显示控制的第二示例的说明图;
图6是示出由根据实施例的显示控制方法实现的显示控制的第三示例的说明图;
图7是示出由根据实施例的显示控制方法实现的显示控制的第四示例的说明图;
图8是示出由根据实施例的显示控制方法实现的显示控制的第五示例的说明图;
图9是示出由根据实施例的显示控制方法实现的显示控制的第六示例的说明图;
图10是示出其上显示在时间轴上排列的图像的列表的、根据实施例的显示屏幕的示例的说明图;
图11是用于描述根据本实施例的显示控制设备的、取决于对应于重复操作的处理的显示改变速度的决定方法的示例的说明图;
图12是用于描述根据本实施例的显示控制设备的、取决于对应于重复操作的处理的显示改变速度的决定方法的示例的说明图;
图13是示出由根据实施例的显示控制方法实现的显示控制的第七示例的说明图;
图14是示出由根据实施例的显示控制方法实现的显示控制的第八示例的说明图;
图15是示出由根据实施例的显示控制方法实现的显示控制的第八示例的说明图;
图16是用于描述根据本实施例的显示控制设备的时间轴上的处理的切换方法的示例的说明图;
图17是用于描述根据本实施例的显示控制设备的时间轴上的处理的切换方法的示例的说明图;
图18是用于描述根据本实施例的显示控制设备的时间轴上的处理的切换方法的示例的说明图;
图19是示出由根据实施例的显示控制方法实现的显示控制的第九示例的说明图;
图20是示出与根据实施例的显示控制方法相关的处理的第一示例的流程图;
图21是示出根据实施例的、用于计算区域改变速度和区域改变量的计算处理的示例的流程图;
图22是示出根据实施例的显示更新处理的示例的流程图;
图23是示出根据实施例的继续改变处理的示例的流程图;
图24是示出根据实施例的处理结果候选决定处理的示例的流程图;
图25是示出根据实施例的继续确定处理的示例的流程图;
图26是示出与根据实施例的显示控制方法相关的处理的第二示例的流程图;
图27是示出根据实施例的目标区域决定处理的示例的流程图;
图28是示出根据实施例的、计算区域改变速度和区域改变量的计算处理的另一示例的流程图;
图29是示出根据实施例的继续改变处理的另一示例的流程图;
图30是示出根据实施例的显示控制设备的配置的示例的框图;以及
图31是示出根据实施例的显示控制设备的硬件配置的示例的说明图。
具体实施方式
下文中,将参照附图详细描述本公开的优选实施例。注意到,在该说明书和附图中,具有基本相同功能和配置的结构元件用相同的参考标号表示,并且省略这些结构元件的重复说明。
此外,下面将按以下顺序给出说明。
1.根据本实施例的显示控制方法
2.根据本实施例的显示控制设备
3.根据本实施例的程序
(根据本实施例的显示控制方法)
在给出根据本实施例的显示控制设备(下文中,有时称为“显示控制设备100”)的配置的说明之前,将描述根据本实施例的显示控制方法。在以下,将假设显示控制设备100执行与根据本实施例的显示控制方法有关的处理给出说明。
此外,在以下,将描述这样的示例,其中显示控制设备100包括操作显示单元,其显示显示屏幕,并且基于在显示屏幕上的用户操作检测在显示屏幕上的一个或多个操作位置(也就是说,能够检测多点触控手势的操作位置的操作显示单元),并且控制在操作显示单元上显示的显示屏幕上的显示。此外,在本实施例中,操作显示单元和用于控制显示的结构元件(例如,执行与下面描述的根据本实施例的显示控制方法有关的处理的结构元件)可以是分离体。在此情况下,根据本实施例的显示控制设备100将起作用为显示控制系统,根据其与用于控制显示的结构元件有关的设备通过有线通信/无线通信控制在用作操作显示单元的设备的显示。
图1是示出多点触控的示例的说明图。图1所示的A示出了缩进手势的示例,并且图1所示的B示出了扩大手势的示例。缩进手势在此是对于两个操作位置(下文中,有时称为“(多个)触控点”)减小其间的间隔(或者两个操作位置之间的距离)的操作。此外,扩大手势是增加两个操作位置(或者两个操作位置之间的距离)的操作。
在由显示控制设备采用的多点触控UI的情况下,例如如果在用户执行缩进手势时显示控制设备执行减小在显示屏幕上显示的显示内容的显示尺寸(下文中,有时称为“显示面积”)的减小处理,那么可以使得用户的操作和执行的处理的结果相互概念上一致。此外,在上面的情况下,例如如果在用户执行扩大手势时显示控制设备执行增加在显示屏幕上显示的显示内容的显示尺寸的扩大处理,那么可以使得用户的操作和执行的处理的结果相互概念上一致。因此,例如通过如上所述使得用户的操作和执行的处理的结果相互概念上一致,那么使得用户能够执行更直观的操作,并且可能增加用户的便利性。
以下,将以如图1的B所示的扩大手势为例描述根据本实施例的显示控制方法。此外,在执行如图1的A所示的缩进手势的情况下执行的与根据本实施例的显示控制方法相关的处理基本与在执行如图1的B所示的扩大手势的情况下执行的与根据本实施例的显示控制方法相关的处理相同(然而,处理将在它们的结果上不同)。因此,以下将主要描述执行如图1的B所示的扩大手势的情况作为示例,并且将对于在执行如图1的A所示的缩进手势的情况下执行的与根据本实施例的显示控制方法相关的处理省略说明。
[现有技术的多点触控UI的问题]
如上所述,通过使用采用多点触控UI的设备,使得用户能够执行更直观的操作,并且因此采用多点触控UI的设备可能增加用户的便利性。然而,如上所述,使用采用多点触控UI的设备不必定增加用户的便利性。在描述根据本实施例的显示控制方法之前,将描述可能伴随采用多点触控UI的现有技术的设备(下文中,有时称为“现有技术的显示控制设备”)出现的问题的示例。此外,在以下,采用执行如图1的B所示的扩大手势的情况作为示例,将描述可能伴随现有技术的显示控制设备出现的问题的示例。
图2是示出可能伴随现有技术的显示控制设备出现的问题的示例的说明图。这里,图2示出通过扩大手势扩大在显示屏幕上显示的地图(显示内容的示例)的情况。
用户在现有技术的显示控制设备的显示屏幕上执行扩大手势(图2所示的A),并且在显示屏幕上显示的地图从而扩大(图2中的B)。然而,如果当显示屏幕的尺寸小或者当难以比当前进一步增加操作位置之间的间隔(或者两个操作位置之间的距离;下面相同)时,用户希望以进一步扩大的方式显示地图,那么使用现有技术的显示控制设备的用户不得不进一步执行扩大手势。也就是说,使用现有技术的显示控制设备,用户不得不执行扩大手势若干次,或者不能使得在显示屏幕上的显示是希望的显示。
这里,作为减少扩大手势的数目的方式,例如可以构思使用惯性动作。然而,因为惯性动作例如取决于执行扩大手势时的操作速度,所以惯性动作可能导致不是用户想要的地图扩大。在此情况下,用户不得不进一步执行缩进手势以将显示的地图调整为希望的大小。因此,当使用惯性动作时,可能没有获得用户希望的处理结果,并且此外可能没有减少用户操作的数目。
因此,使用现有技术的显示控制设备不必然增加用户的便利性。
[根据本实施例的显示控制方法的概述]
如已经描述的,在用户操作不得不使用多点触控UI执行若干次以使得在显示屏幕上的显示为希望的显示的情况下,没有增加用户的便利性。因此,在根据本实施例的显示控制设备100的情况下,基于在显示屏幕上的操作位置确定操作状态,并且基于已经确定的操作状态确定要执行的处理。然后,显示控制设备100执行已经确定的处理,并且根据正在执行的处理的持续时间继续对应于该处理的显示。例如,在要执行的处理是根据缩进手势的缩小处理或根据扩大手势的扩大处理的情况下,显示控制设备100根据处理的持续时间继续扩大或缩小显示内容的显示尺寸。也就是说,在此情况下,显示控制设备100根据该处理的持续时间改变显示尺寸的扩大速率或缩小速率。要执行的处理的持续时间在此例如对应于关于确定要执行的处理的确定的持续时间。
在此,作为由根据本实施例的显示控制设备100确定的操作状态,例如存在其中检测到两个操作位置的第一操作状态、其中没有检测到操作位置的第二操作状态、以及其中检测到一个或三个或更多操作位置的第三操作状态。此外,由显示控制设备100确定的操作状态不限于上述第一操作状态、第二操作状态或者第三操作状态。例如,显示控制设备100还可以确定操作的转变(改变),诸如从第一操作状态到第二操作状态的改变、从第一操作状态到第三操作状态的改变、或者从第三操作状态到第一操作状态的改变。
图3是示出根据本实施例的显示控制设备100的、要基于在显示屏幕上操作位置执行的处理的确定方法的示例的说明图。图3在此示出显示控制设备100根据两个操作位置之间的间隔确定已经执行缩进手势或扩大手势的情况的示例。
例如,显示控制设备100去首先检测到的操作位置之间的间隔(图3的A所示的间隔P;下文中,有时称为“基准间隔”)作为阈值,然后确定执行缩进手势或扩大手势。例如,如图3的B所示,如果间隔Q大于基准间隔P(或者如果间隔Q等于或大于基准间隔P),那么显示控制设备100确定执行扩大手势,并且确定执行对应于扩大手势的扩大处理。此外,如图3的C所示,如果间隔R大于基准间隔P(或者如果间隔R等于或小于基准间隔P),那么显示控制设备100确定执行缩进手势,并且确定执行对应于缩进手势的缩小处理。
如图3所示,例如,通过基于两个操作位置之间的间隔确定要执行的处理,显示控制设备100可以实现显示的扩大和缩小之间的容易切换。此外,不用说根据本实施例的显示控制设备100的、要基于在显示屏幕上的操作位置执行的处理的确定方法不限于以上。
在显示控制设备100根据处理的持续时间(确定的持续时间;以下相同)继续对应于该处理的显示的情况下,例如使得用户能够使得显示控制设备100执行希望的显示,而不增加操作的数目并且不管显示屏幕的尺寸。因此,显示控制设备100可以避免由操作数目的增加导致的用户的便利性对减少,并且因此可以增加用户的便利性。
[根据本实施例的显示控制的示例]
接下来,将描述通过使用根据本实施例的显示控制方法实现的显示控制的示例。
(1)第一示例
图4是示出由根据本实施例的显示控制方法实现的显示控制的第一示例的说明图。在此,类似于图2,图4示出其中通过扩大手势扩大在显示屏幕上显示的地图(显示内容的示例)的情况。
当在显示屏幕上执行扩大手势时(图4所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势,并且根据扩大手势扩大地图(图4所示的B)。此外,在用户继续扩大手势的情况下,显示控制设备100根据确定执行扩大手势的确定结果的持续时间增加地图的扩大率(图4所示的C、D)。
此外,根据本实施例的显示控制设备100例如基于用户操作决定显示改变速度,诸如扩大率的增加速度或缩小率的增加速度。作为改变速度的决定方法,例如可以列举根据使得改变速度根据用户执行诸如扩大手势时的操作速度的方法,或者如图3所示的根据操作位置之间的间隔决定改变速度的方法。
此外,根据本实施例的显示改变速度的决定方法不限于上述。例如,显示控制设备100还可以例如基于两个操作位置之间的当前间隔和基准间隔之间的差别(例如,图3所示的(B-A);下文中,有时称为“挤压间隔(pinchgap)”)、通过公式1决定显示改变速度(区域改变速度)。在此,公式1中的V(t)指示在时间t的区域改变速度,并且公式1中的α例如是与挤压间隔成比例的比例常数。例如,显示控制设备100通过使用预先存储的函数指定根据挤压间隔的比例常数,以便根据挤压间隔唯一地决定比例常数α
V(t)=α×(挤压间隔)...(公式1)
当用户停止在显示屏幕上的操作时,显示控制设备100基于操作位置的检测结果确定从第一操作状态到第二操作状态的改变。然后,在确定已经发生到第二操作状态的改变之后,显示控制设备100暂停地图的放大(图4所示的E)。
如图4所示,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
(2)第二示例
图5是示出由根据本实施例的显示控制方法实现的显示控制的第二示例的说明图。在此,类似于图2,图5示出了通过扩大手势放大在显示屏幕上显示的地图(显示内容的示例)的情况。图5还示出显示控制设备100基于用户操作停止放大显示的情况。
当在显示屏幕上执行扩大手势时(图5所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势,并且根据扩大手势放大地图(图5所示的B)。此外,在用户继续扩大手势的情况下,显示控制设备100根据确定执行扩大手势的确定结果的持续时间,增加地图的放大率(图5所示的C、D)。此外,如果用户从显示屏幕移除执行扩大手势的手指之一,那么显示控制设备100基于操作位置的检测结果,确定从第一操作状态到第三操作状态的改变。然后,在确定到第三操作状态的改变已经发生之后,显示控制设备100使得正在执行的处理执行之前的显示内容为显示屏幕上的显示内容。也就是说,以放大方式显示的地图改变为放大之前的地图(图5所示的E)。
如图5所示,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。此外,在图5中,示出了这样的示例,在用户从显示屏幕移除执行扩大手势的手指之一的情况下,显示控制设备100使得正在执行的处理执行之前的显示内容为显示屏幕上的显示内容,但是根据本实施例的显示控制设备100的处理不限于以上。例如,显示控制设备100可以使得正在执行的处理执行之前的显示内容为检测到三个或更多操作位置的情况下显示屏幕上的显示内容。
(3)第三示例
图6是示出由根据本实施例的显示控制方法实现的显示控制的第三示例的说明图。在此,类似于图2,图6示出了通过扩大手势放大在显示屏幕上显示的地图(显示内容的示例)的情况。图6还示出显示控制设备100基于用户操作临时停止(临时暂停)放大显示的情况。
当在显示屏幕上执行扩大手势时(图6所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势,并且根据扩大手势放大地图(图6所示的B)。此外,在用户继续扩大手势的情况下,显示控制设备100根据确定执行扩大手势的确定结果的持续时间,增加地图的放大率(图6所示的C)。此外,如果除了扩大手势外用户进一步在显示屏幕上执行操作(如果操作位置增加到3或更多),显示控制设备100基于操作位置的确定结果确定从第一操作状态到第三操作状态的改变。然后,在确定已经发生到第三操作状态的改变之后,显示控制设备100临时暂停地图的放大率的增加,并且临时停止放大显示(正在执行的处理的示例)(图6所示的D)。
此外,当用户停止他/她已经进一步在显示屏幕上执行的操作时,显示控制设备100基于操作位置的检测结果确定从第三操作状态到第一操作状态的改变。然后,在确定已经发生到第一状态的改变之后,显示控制设备100重启临时停止的处理(即,地图的放大)的执行(图6所示的E、F)。
如图6所示,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。此外,在图6中,给出了这样的示例,在用户除了扩大手势外在显示屏幕上进一步执行操作的情况下,显示控制设备100临时停止正在执行的处理,但是根据本实施例的显示控制设备100的处理不限于以上。例如,在用户从显示屏幕移除执行扩大手势的手指之一的情况下,即,在检测到一个操作位置的情况下,显示控制设备100可以临时停止正在执行的处理。
上述根据本实施例的显示控制的第一到第三示例是这样的示例,其中显示控制设备100根据(多个)操作位置的改变确定要执行的处理,并且执行已经确定的处理。然而,根据本实施例的显示控制不限于紧接在确定要执行的处理之后由显示控制设备100执行已经确定的处理。例如,根据本实施例的显示控制设备100可以在保持当前显示的显示内容的同时,为用户呈现指示如果执行确定的处理则将获得的处理结果的处理结果候选,并且可以在由用户选择处理结果候选的情况下,将当前显示的显示内容切换为对应于选择的处理结果候选的显示。
在此,作为根据本实施例的处理结果候选的呈现方法,例如可以引用在显示屏幕内显示的弹出窗口中显示处理结果候选的视觉呈现方法。此外,作为根据本实施例的处理结果候选,可以引用当执行确定的处理时将获得的处理结果(例如,以放大或缩小方式显示显示内容),以及指示处理结果的内容的文本信息。此外,根据本实施例的处理结果候选的呈现方法不限于视觉呈现方法。例如,根据本实施例的显示控制设备100还能够例如通过由声音执行关于处理结果候选的内容的通知,听觉地呈现处理结果候选。
(4)第四实施例
图7是示出由根据本实施例的显示控制方法实现的显示控制的第四示例的说明图。在此,类似于图2,图7示出了通过扩大手势放大在显示屏幕上显示的地图(显示内容的示例)的情况。图7还示出了显示控制设备100在弹出窗口中显示处理结果候选的情况。
当在显示屏幕上执行扩大手势时(图7所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势。然后,显示控制设备100根据扩大手势放大地图(图7所示的B)。此外,在用户继续扩大手势的情况下,显示控制设备100在显示屏幕内显示弹出窗口,并且在弹出窗口中显示放大的地图作为处理结果候选,所述放大的地图是通过根据确定执行扩大手势的确定结果的持续时间增加放大率将获得的结果(图7所示的C)。
此外,图7示出根据扩大手势放大地图的示例,如图7的B,但是根据本实施例的显示控制设备100的处理不限于以上。例如,在确定执行扩大手势的情况下,替代如图7的B所示放大地图,显示控制设备100可以如图7的C所示显示弹出窗口。
此外,在用户继续扩大手势的情况下,显示控制设备100根据确定执行扩大手势的确定结果的持续时间,增加在弹出窗口中显示的地图(处理结果候选的示例)的放大率(图7所示的D)。此外,当用户停止在显示屏幕上的操作时,显示控制设备100基于操作位置的检测结果确定从第一操作状态到第二操作状态的改变。然后,在确定已经出现到第二操作状态的改变之后,显示控制设备100使得在弹出窗口中显示的地图(处理结果候选的示例)为显示屏幕的显示内容(图7所示的E)。
同样在如图7所示的呈现处理结果候选的情况下,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
此外,如图7所示,例如,通过在弹出窗口中显示处理结果候选的内容,显示控制设备100可以在保持当前显示内容的同时,允许用户查看执行处理的结果。根据现有技术的显示控制设备,在保持当前显示内容的同时允许用户查看执行处理的结果的一个方式是使得它为与例如通过缩进手势或扩大手势执行处理的功能分离的功能。然而,在如上所述使得它为分离的功能的情况下,例如如图7所示的“在执行临时放大/缩小之后改变显示内容并且允许用户查看显示屏幕”变得难以实现。因此,与使用现有技术的显示控制设备时相比,例如如图7所示的在弹出窗口中显示处理结果候选的内容可以增加用户的便利性。
(5)第五示例
图8是示出由根据本实施例的显示控制方法实现的显示控制的第五示例的说明图。在此,类似于图2,图8示出了通过扩大手势放大在显示屏幕上显示的地图(显示内容的示例)的情况。此外,类似于图7,图8示出了显示控制设备100在弹出窗口中显示处理结果候选的情况。
当在显示屏幕上执行扩大手势时(图8所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势。然后,显示控制设备100根据扩大手势放大地图(图8所示的B)。此外,如图8的B所示,图8示出了根据扩大手势放大地图的示例,但是根据本实施例的显示控制设备100的处理不限于以上。例如,在确定执行扩大手势的情况下,显示控制设备100可以如图8的C所示显示弹出窗口,而不如图8的B所示放大地图。
此外,在用户继续扩大手势的情况下,显示控制设备100在显示屏幕中显示弹出窗口,并且在弹出窗口中显示处理结果候选(图8所示的C、D、E)。图8示出了这样的示例,其中替代如图7的C所示根据确定的持续时间放大的地图,例如对应于放大的地图的文本信息实现为处理结果候选。
在此,显示控制设备100例如对于在显示屏幕上显示的每条显示内容,通过使用查询表在弹出窗口中显示文本信息,所述文本信息与在显示屏幕上显示的显示内容和对应于基于扩大手势的确定的持续时间的放大率有关,在所述查询表中作为处理结果候选的文本信息与放大率相关联。此外,不用说在弹出窗口中文本信息的显示方法不限于以上。
此外,当用户停止在显示屏幕上的操作时,显示控制设备100基于操作位置的检测结果确定从第一操作状态到第二操作状态的改变。在确定已经发生到第二操作状态的改变之后,显示控制设备100使得对应于在弹出窗口中显示的文本信息“甲信越”的甲信越地区的地图为显示屏幕的显示内容(图8所示的F)。
在此,显示控制设备100例如通过使用查询表,在显示屏幕上显示对应于在弹出窗口中显示的文本信息(处理结果候选)的显示内容,在所述查询表中作为处理结果候选的文本信息与显示内容相关联。例如,如上所述,通过预先将作为处理结果候选的文本信息与显示内容相关联,显示控制设备100可以在显示屏幕上以更高可见度显示显示内容。在此可以通过在显示屏幕的中心显示对应于已经选择的“甲信越”地区(文本信息的示例)的地图,实现具有更高可见度的显示内容,如图8的F所示。以此方式,显示控制设备100可以通过如上所述例如预先将作为处理结果候选的文本信息与显示内容相关联,进一步增加用户的便利度。此外,不用说根据本实施例的显示控制设备100的、对应于在弹出窗口中显示的文本信息(处理结果候选)的显示内容的显示方法不限于以上。
同样在如图8所示的呈现处理结果候选的情况下,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
此外,如图8所示,例如,通过显示对应于在弹出窗口中的处理结果的文本信息作为处理结果候选,显示控制设备100可以在保持当前显示内容的同时允许用户查看执行处理的结果,如在上述第四示例的情况下。因此,例如,与使用现有技术的显示控制设备时相比,如图8所示显示对应于在弹出窗口中的处理结果的文本信息作为处理结果候选,可以增加用户的便利性。
此外,例如当显示屏幕的尺寸小时,即使在弹出窗口中显示如图7的C或D所示的地图(处理结果的内容),用户也可能不能充分识别处理结果候选。如在上面的情况下,即使显示屏幕的尺寸小,例如通过显示对应于在弹出窗口中的处理结果的文本信息作为处理结果候选,如图8所示,也可以实现处理结果候选的更容易识别。
(6)第六示例
图9是示出由根据本实施例的显示控制方法实现的显示控制的第六示例的说明图。在此,类似于图2,图9示出了通过扩大手势放大在显示屏幕上显示的地图(显示内容的示例)的情况。此外,类似于图8,图9示出了在弹出窗口中显示由文本信息代表的处理结果候选的情况。
当在显示屏幕上执行扩大手势时(图9所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势。然后,显示控制设备100根据扩大手势放大地图(图9所示的B)。此外,如图9的B所示,图9示出了根据扩大手势放大地图的示例,但是根据本实施例的显示控制设备100的处理不限于以上。例如,在确定执行扩大手势的情况下,替代如图9的B所示放大地图,显示控制设备100可以如图9的C所示显示弹出窗口。
此外,在用户继续扩大手势的情况下,显示控制设备100在显示屏幕中显示弹出窗口,并且在弹出窗口中显示文本信息(处理结果候选的示例)(图9所示的C、D)。
当用户停止在显示屏幕上的操作时,显示控制设备100基于操作位置的检测结果确定从第一操作状态到第二操作状态的改变。然后,在确定已经发生到第二操作状态的改变之后,显示控制设备100在弹出窗口中菜单显示对应于确定的时间点的放大率的处理结果候选。
在此,例如显示控制设备100对于在显示屏幕上显示的每条显示内容,通过使用查询表实现如图9的E所示的菜单显示,在所述查询表中作为处理结果候选的文本信息与放大率相关联。显示控制设备100例如还可以在菜单中包括用于停止处理的执行的选项,诸如图9的E中的“取消”。此外,不用说根据本实施例的显示控制设备100的、在弹出窗口中显示菜单的方法不限于以上。
当由用户选择弹出窗口中的选项时(图9所示的F),显示控制设备100使得对应于已经选择的选项“关东”的关东地区的地图为显示屏幕的显示内容(图9所示的G).
同样在如图9所示的呈现处理结果候选的情况下,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
此外,如图9所示,例如通过在弹出窗口中显示菜单显示,在所述弹出窗口中对应于(多个)处理结果的一条或多条文本信息显示为(多个)处理结果候选,如上所述的第四示例的情况,显示控制设备100可以在保持当前显示内容的同时,允许用户查看执行处理的结果。因此,如图9所示,例如在弹出窗口中显示菜单显示,在所述弹出窗口中对应于(多个)处理结果的一条或多条文本信息显示为(多个)处理结果候选,与使用现有技术的显示控制设备时相比,可以增加用户的便利性。
此外,当显示屏幕的尺寸小时,例如,通过在其中对应于(多个)处理结果的一条或多条文本信息显示为(多个)处理结果候选的弹出窗口中显示菜单显示,如图9所示,实现处理结果候选的更容易识别,如在上述第五示例的情况下。
此外,如图9所示,例如,通过在其中对应于(多个)处理结果的一条或多条文本信息显示为(多个)处理结果候选的弹出窗口中显示菜单显示,使得用户能够更灵活地切换显示。因此,如图9所示,例如,通过在其中对应于(多个)处理结果的一条或多条文本信息显示为(多个)处理结果候选的弹出窗口中显示菜单显示,显示控制设备100可以进一步增加用户的便利性。
上述根据本实施例的显示控制的第一到第六示例示出了根据(多个)操作位置的改变来改变在显示屏幕上显示的显示内容的尺寸的示例。然而,根据本实施例的显示控制不限于通过显示控制设备100根据(多个)操作位置的改变来改变在显示屏幕上显示的显示内容的尺寸。例如,在显示其上显示在时间轴上安排的图像的列表的显示屏幕的情况下,根据本实施例的显示控制设备100可以根据操作位置的改变放大或缩小时间轴。
图10是示出其上显示在时间轴上安排的图像的列表的根据本实施例的显示屏幕的示例的说明图。图10示出了缩略图屏幕,在所述缩略图屏幕上由诸如相机的成像设备以特定间隔捕获的静态图像根据拍摄的时间在时间轴上排列。在此,图10示出这样的示例,其中对于水平安排的静态图像拍摄时间的间隔是30秒钟,并且对于垂直安排的静态图像拍摄时间的间隔是10分钟,但是其中显示在时间轴上安排的图像的列表的根据本实施例的缩略图屏幕不限于以上。此外,例如如图10所示的要在缩略图屏幕中显示的图像不限于由成像设备在特定间隔捕获的静态图像。例如,图10所示的缩略图屏幕可以具有在时间轴上安排的以特定间隔从视频提取的帧。
此外,图10示出以螺旋方式显示时间轴的显示屏幕。在此,例如通过显示其中以螺旋方式显示时间轴的显示屏幕,可以实现以下效果。
-用户例如可以比以线性方式显示时间轴时更直观地掌握显示的图像(内容)之间的时间关系。
-要在显示屏幕中安排的图像数目例如可以比以线性方式显示时间轴时增加。
-周期性可以表示为显示的图像之间的时间关系。
-使用时间周期性,例如可以为用户提供基于关于时间(缩略图的行(水平))相互邻近的图像的搜索方法和基于关于周期性(缩略图的列(垂直))相互邻近的图像的搜索方法两者。
-通过使用如上所述的效果,例如对于图像(静态图像/视频图像)的搜索应用的应用变为可能。
-在执行对应于重复操作(稍后描述)的显示控制设备100的情况下,例如可以给用户提供直观的可操作性。
以下,将取如图10所示的其上以螺旋方式显示时间轴的显示屏幕作为其上显示在时间轴上安排的图像的列表的显示屏幕的示例,给出说明。此外,根据本实施例的其上显示在时间轴上安排的图像的列表的显示屏幕不限于其上以螺旋方式显示时间轴的显示屏幕。例如,作为根据本实施例的其上显示在时间轴上安排的图像的列表的显示屏幕,可以引用诸如其上以线性方式、曲线方式或锯齿方式显示时间轴的显示屏幕的许多显示屏幕。
此外,以下,将主要取显示控制设备100根据用户的扩大手势执行放大时间轴的处理的情况作为示例来给出说明。此外,以下,尽管将省略其说明,显示控制设备100还可以例如以与根据下面描述的用户的扩大手势放大时间轴的处理相同的方式,执行根据用户的缩进手势缩小时间轴的处理。此外,显示控制设备100不限于根据扩大手势或缩进手势执行处理。例如,显示控制设备100还可以确定用户的重复操作,并且执行根据检测到的重复操作的处理。
例如,显示控制设备100基于在时间t的区域改变速度(当前计算的区域改变速度)和在时间t-1的区域改变速度(之前计算的区域改变速度)的乘积的值是否是负值,确定重复操作。更具体地,显示控制设备100在乘积的值是负值时确定执行重复操作。
显示控制设备100还可以例如基于基准间隔和挤压间隔,决定依赖于对应于重复操作的处理的显示改变速度。图11和12是用于描述依赖于对应于重复操作的处理的显示改变速度的决定方法的示例的说明图。
显示控制设备100基于图11和图12的A所示的基准间隔P和图11和图12的B所示的挤压间隔Q,决定依赖于对应于重复操作的处理的显示改变速度(下文中,“重复率”)。更具体地,例如如果基准间隔P小于(或等于或小于)挤压间隔Q,则显示控制设备100取放大率为重复率。此外,例如如果基准间隔P大于(或等于或大于)挤压间隔Q,则显示控制设备100取缩小率为重复率。
(第七示例)
图13是示出由根据本实施例的显示控制方法实现的显示控制的第七示例的说明图。
当在显示屏幕上执行扩大手势时(图13所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势,并且根据扩大手势放大时间轴(图13所示的B).此外,在用户继续扩大手势的情况下,显示控制设备100根据确定执行扩大手势的确定结果的持续时间增加时间轴的放大率(图13所示的C)。
当用户停止在显示屏幕上的操作时,显示控制设备100基于(多个)操作位置的检测结果确定从第一操作状态到第二操作状态的改变。然后,在确定已经发生到第二操作状态的改变之后,显示控制设备100暂停时间轴的放大(图13所示的D)。
如图13所示,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
(8)第八示例
图14和15是示出由根据本实施例的显示控制方法实现的显示控制的第八示例的说明图。在此,图14和15示出在弹出窗口中显示处理结果候选的情况,如在上面的第五示例。此外,尽管图14和15中示出了显示文本信息作为处理结果候选的示例,但是不用说显示控制设备100也可以显示显示内容自身作为处理结果候选,如在上面的第四示例。此外,图14和15示出了显示控制设备100在对于关于时间(缩略图的行)相互邻近的图像的时间轴的放大和对于关于周期性(缩略图的列)相互邻近的图像的时间轴的放大之间切换。具体地,图14示出对于关于周期性(缩略图的列)相互邻近的图像的时间轴的放大处理的示例,并且图15示出对于关于时间(缩略图的行)相互邻近的图像的时间轴的放大处理的示例。
在此,将描述根据本实施例的显示控制设备100的时间轴上处理的切换方法的示例。图16到图18是用于描述根据本实施例的显示控制设备100的时间轴上处理的切换方法的示例的说明图。
显示控制设备100比较x轴方向上两个操作位置之间差的绝对值和y轴方向上差的绝对值,从而确定处理是图16的A所示的对于关于周期性(缩略图的列)相互邻近的图像的时间轴上的处理还是图16的B所示的对于关于时间(缩略图的行)相互邻近的图像的时间轴上的处理。例如,在扩大手势之后x轴方向上的差的绝对值小于(或等于或小于)扩大手势之后y轴方向上的差的绝对值的情况下,如图17的B所示,则显示控制设备100确定是对于关于周期性(缩略图的列)相互邻近的图像的时间轴上的处理。此外,例如,在扩大手势之后x轴方向上的差的绝对值大于(或等于或大于)扩大手势之后y轴方向上的差的绝对值的情况下,如图18的B所示,则显示控制设备100确定是对于关于时间(缩略图的行)相互邻近的图像的时间轴上的处理。
例如,显示控制设备100基于确定的结果切换时间轴上的处理。此外,根据本实施例的显示控制设备100的时间轴上的处理的切换方法不限于以上。例如,显示控制设备100还可以计算通过两个操作位置的直线和x轴(显示屏幕中的水平轴)之间的角度,并且基于计算的角度所属的范围切换在时间轴上的处理。
返回参照图14和15,将描述根据本实施例的显示控制的第八示例。当在显示屏幕上执行扩大手势时(图14和图15所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势。此外,显示控制设备100例如通过比较x轴方向上两个操作位置之间差的绝对值和y轴方向上差的绝对值,基于扩大手势之后的操作位置确定在时间轴上的处理。
此外,在用户继续扩大手势的情况下,显示控制设备100在显示屏幕上显示弹出窗口,并且在弹出窗口中显示处理结果候选(图14和图15所示的B、C)。图14和15示出文本信息显示为处理结果候选的示例,如图8。在此,显示控制设备100例如通过使用其中作为处理结果候选的文本信息和放大率相关联的查询表,在弹出窗口中显示对应于根据对于扩大手势的确定的持续时间的放大率的文本信息。此外,不用说根据本实施例的显示控制设备100的弹出窗口中文本信息的显示方法不限于以上。
当用户停止在显示屏幕上操作时,显示控制设备100基于操作位置的检测位置确定从第一操作状态到第二操作状态的改变。在确定已经发生到第二操作状态的改变之后,显示控制设备100将显示屏幕的显示内容改变为对应于与弹出窗口中显示的文本信息“3分钟间隔”或“9秒钟间隔”对应的时间轴。在此,显示控制设备100例如通过使用其中作为处理结果候选的文本信息和显示内容相关联的查询表,在显示屏幕上显示与弹出窗口中显示的文本信息(处理结果候选)对应的显示内容。此外,不用说根据本实施例的显示控制设备100的与弹出窗口中显示的文本信息(处理结果候选)对应的显示内容的显示方法不限于以上。
同样在如图14和15所示的呈现处理结果候选的情况下,用户可以使得显示控制设备100执行希望的显示而不执行扩大手势若干次。
此外,如图14和15所示,例如通过在弹出窗口中显示对应于处理结果的文本信息作为处理结果候选,如在上面的第五示例,与使用现有技术的显示控制设备时相比,显示控制设备100可以增加用户的便利性,并且实现处理结果候选的更容易识别。
(9)第九示例
图19是示出由根据本实施例的显示控制方法实现的显示控制的第九示例的说明图。在此,图19示出显示控制设备100能够确定重复操作并且执行对应于重复操作的处理的情况的示例。此外,如在上面的第八示例,图19示出在弹出窗口中显示文本信息(处理结果候选)的情况。
当在显示屏幕上执行扩大手势时(图19所示的A),显示控制设备100基于检测到的操作位置的改变确定执行扩大手势。此外,显示控制设备100例如通过比较x轴方向上两个操作位置之间差的绝对值和y轴方向上差的绝对值,基于扩大手势之后的操作位置确定在时间轴上的处理。
此外,在用户继续扩大手势的情况下,显示控制设备100在显示屏幕上显示弹出窗口,并且在弹出窗口中显示处理结果候选(图19所示的B、C)。在图19所示的B和C,示出在弹出窗口中显示作为对于对应于缩进手势的缩小处理的处理结果候选的“20分钟间隔”和作为对于对应于重复操作的放大处理的处理结果候选的“3分钟间隔”的示例。也就是说,例如在存在基于(多个)操作位置的改变执行的处理的若干候选的情况下,显示控制设备100为用户呈现每个对应于处理的处理结果候选,如图19的B和C所示。
当用户在图19的C所示的状态下执行扩大手势时,显示控制设备100基于操作位置的检测结果确定执行重复操作。然后,显示控制设备100改变显示屏幕的显示内容为对应于与弹出窗口中显示的文本信息“3分钟间隔”对应的时间轴,如在上面的第八示例中(图19所示的D1)。
此外,当用户在图19的C所示的状态下停止在显示屏幕上的操作时,显示控制设备100基于操作位置的检测结果确定从第一操作状态到第二操作状态的改变。然后,在确定已经发生到第二操作状态的改变时,如在上面的第八示例中,显示控制设备100改变显示屏幕的显示内容为对应于与弹出窗口中显示的文本信息“30分钟间隔”对应的时间轴(图19所示的D2)。
同样在如图19所示的呈现处理结果候选的情况下,用户可以使得显示控制设备100执行希望的显示而不执行缩进手势或重复操作若干次。
此外,如图19所示,例如通过在弹出窗口中显示与作为处理结果候选的处理结果对应的文本信息,如在上面的第五示例中,与使用现有技术的显示控制设备时相比,显示控制设备100可以增加用户的便利性,并且实现处理结果候选的更容易识别。
此外,如图19所示,例如通过执行对应于重复操作的处理,显示控制设备100可以为用户提供直观的可操作性。
根据本实施例的显示控制设备100例如通过使用根据本实施例的显示控制方法,实现了上面第一到第九示例中所示的显示控制。此外,已经示出了基于用户操作是“显示内容的物理大小”或“时间轴”的放大/缩小的目标的上面第一到第九示例中所示的情况,但是不用说根据本实施例的显示控制的目标不限于“显示内容的物理大小”或“时间轴”。
[与本实施例的显示控制方法有关的处理的示例]
接下来,将给出关于与上述根据本实施例的显示控制方法相关的处理的示例的说明。显示控制设备100例如通过执行下面(I)到(III)的处理基于用户操作控制显示屏幕的显示。
(I)状态确定处理
显示控制设备100基于显示屏幕上(多个)操作位置的检测结果确定用户的操作的状态。在此,作为由显示控制设备100确定的操作状态例如可以是第一操作状态、第二操作状态、第三操作状态或者各操作状态之间的转变。
(II)处理确定处理
显示控制设备100基于上面(I)的处理(状态确定处理)的确定结果,确定与要执行的显示有关的处理。例如,在已经确定第一操作状态的情况下,显示控制设备100通过基于如图3所示的两个操作位置之间的间隔执行确定,确定要执行的处理,诸如放大处理或缩小处理。
(III)显示控制处理
显示控制设备100执行通过上面(II)的处理(处理确定处理)已经确定为要执行的处理,并且使得对应于已经确定的处理的显示在显示屏幕上显示。此外,显示控制设备100根据已经确定要执行的处理的确定的持续时间,继续对应于已经确定的处理的显示。此外,显示控制设备100例如可以在显示屏幕上显示处理结果候选,如图7和图8所示。
此外,显示控制设备100基于上面(I)的处理(状态确定处理)的确定结果,诸如指示已经确定操作状态的转变的确定结果,例如通过停止处理、临时停止(临时暂停)处理、或者显示对应于已经选择的处理结果候选的显示内容,控制显示屏幕的显示。
以下,将更具体地描述与根据本实施例的显示控制方法有关的处理的示例。以下,将描述如在上述显示控制的第一到第六示例中描述的用于控制显示内容的物理大小的情况的处理的示例,以及如在上述显示控制的第七到第九示例中描述的用于控制时间轴的情况的处理的示例。此外,以下,将取显示控制设备100执行与根据本实施例的显示控制方法有关的处理的情况作为示例,描述示例。
(i)与显示控制方法有关的处理的第一示例
图20是示出与根据本实施例的显示控制方法有关的处理的第一示例的流程图。图20在此示出显示控制设备100控制显示内容的物理大小的情况的处理示例。
显示控制设备100确定是否检测到多点触控的状态(S100)。在此,显示控制设备100例如在操作显示单元(稍后描述)检测到多个操作位置的情况下确定多点触控的状态。
在步骤S100中确定没有检测到多点触控的状态的情况下,显示控制设备100结束处理。此外,图20所示的处理不是一旦已经结束就不再执行的处理的类型,而是以规律或无规律的间隔重复执行的处理的类型。此外,尽管图20中未示出,但是在检测到一个操作位置的情况下,显示控制设备100可以执行对应于检测到的操作位置的处理。
此外,在步骤S100中确定检测到多点触控的状态的情况下,显示控制设备100计算区域改变速度和区域改变量(S102:计算处理)。本实施例的区域改变量在此是指示显示中的改变量的值,并且基于区域改变速度计算。
[计算处理的示例]
图21是示出根据本实施例的用于计算区域改变速度和区域改变量的计算处理的示例的流程图。
显示控制设备100设置要用于计算的各种值(S200)。在此,步骤S200的处理对应于从例如RAM(随机存取存储器)、存储单元(稍后描述)等读取各种值的处理。此外,在没有读取值的情况下,显示控制设备100可以例如设置诸如“0”的初始值。
当执行步骤S200的处理时,显示控制设备100确定多点触控触点的数目(也就是说,已经检测到的操作位置的数目;下面相同)是否是“2”(S202)。
在步骤S202中确定的多点触控触点的数目是“2”的情况下,显示控制设备100确定基准间隔W(0)是否是“0”(S204)。
在步骤S204中确定基准间隔W(0)是“0”的情况下,显示控制设备100将基准间隔记录为区域改变速度的初始值(S206)。此外,显示控制设备100复位区域改变量和区域改变量的积分值(S208)。然后,显示控制设备100结束计算处理。
此外,在步骤S204中确定基准间隔W(0)不是“0”的情况下,显示控制设备100更新区域改变速度(S210)。显示控制设备100还更新区域改变量和区域改变量的积分值(S212)。然后,显示控制设备100结束计算处理。
在步骤S202中确定的多点触控触点的数目不是“2”的情况下,显示控制设备100确定多点触控触点的数目是否大于“2”(S214)。
在步骤S214中确定多点触控触点的数目大于“2”的情况下,显示控制设备100将区域改变量的值更新为“0”(S216),并且执行步骤S212的处理。步骤S216的处理在此对应于临时停止正在执行的处理的处理,也就是说,临时停止显示区域的改变的处理。
此外,在步骤S214中确定多点触控触点的数目不大于“2”的情况下,显示控制设备100将基准间隔的值和区域改变量的值更新为“0”(S218),并且执行步骤S212的处理。步骤S218的处理在此对应于停止正在执行的处理的处理,也就是说,停止显示区域的改变的处理。
显示控制设备100例如通过执行图21所示的处理,计算区域改变速度和区域改变量。此外,根据本实施例的计算处理不限于图21所示的处理。例如,区域改变量的积分值是用于决定在弹出窗口中显示的处理结果候选的值,并且因此,如果处理结果候选不呈现给用户,则显示控制设备100不必计算区域改变量的积分值。
返回参照图20,将描述与根据本实施例的显示控制方法有关的处理的第一势力。当在步骤S102中执行计算处理时,显示控制设备100更新显示屏幕(S104:显示更新处理)。
[显示更新处理的示例]
图22是示出根据本实施例的显示更新处理的示例的流程图。
显示控制设备100确定是否停止显示区域的改变(S300)。在此,例如如果基准间隔的值和区域改变量的值是“0”(例如,如果在步骤S218中执行处理以停止显示区域的改变),则显示控制设备100确定停止显示区域的改变。
在步骤S300中确定显示区域的改变停止的情况下,显示控制设备100更新为对应于停止显示区域的改变的显示屏幕(例如,图5所示的E)(S302)。然后,显示控制设备100结束显示更新处理。
此外,在步骤S300中确定显示区域的改变不停止的情况下,显示控制设备100确定是否结束显示区域的改变(S304)。在此,例如在确定已经发生从第一操作状态到第二操作状态的改变的情况下,显示控制设备100确定结束显示区域的改变。
在步骤S304中确定结束显示区域的改变的情况下,显示控制设备100例如基于区域改变量,更新到对应于改变结束的显示屏幕(例如,图4所示的E)(S306)。然后,显示控制设备100结束显示更新处理。
此外,在步骤S304中确定显示区域的改变没有结束的情况下,显示控制设备100确定是否显示处理结果候选(S308)。在此,例如如果设置用于显示处理结果候选的显示模式,则显示控制设备100确定显示处理结果候选。上面的显示模式例如可以预先设置,或者用户可以在开和关之间切换。此外,在显示控制设备100不具有显示处理结果候选的功能的情况下,显示控制设备100不必执行稍后描述的步骤S308的处理和步骤S312的处理。
在步骤S308中确定不显示处理结果候选的情况下,显示控制设备100继续改变显示区域(S310:继续改变处理)。
<继续改变处理的示例>
图23是示出根据本实施例的继续改变处理的示例的流程图。
显示控制设备100设置区域改变量(S400)。步骤S400的处理在此对应于例如从RAM、存储单元(稍后描述)等读取区域改变量的值的处理。
在执行步骤S400的处理之后,显示控制设备100确定区域改变量的值是否是“0”(S402)。在步骤S402中确定区域改变量的值是“0”的情况下,显示控制设备100结束继续改变处理。
此外,在步骤S402中确定区域改变量的值不是“0”的情况下,显示控制设备100确定区域改变量的值是否大于“0”(S404)。
在步骤S404中确定区域改变量的值大于“0”的情况下,显示控制设备100缩小显示区域(S406)。然后,显示控制设备100结束继续改变处理。
此外,在步骤S404中确定区域改变量的值不大于“0”的情况下,显示控制设备100放大显示区域(S408)。然后,显示控制设备100结束继续改变处理。
显示控制设备100例如执行图23所示的处理作为继续改变处理。此外,不用说继续改变处理不限于图23所示的处理。
返回参照图22,将描述根据本实施例的显示更新处理的示例。当执行步骤S310的处理时,显示控制设备100更新为对应于继续改变的显示屏幕(例如,图4所示的B、C、D)(S314)。然后,显示控制设备100结束显示更新处理。
在步骤S308中确定显示处理结果候选的情况下,显示控制设备100决定处理结果候选(S312:处理结果候选决定处理)。
<处理结果候选决定处理的示例>
图24是示出根据本实施例的处理结果候选决定处理的示例的流程图。
显示控制设备100设置区域改变量的积分值(S500)。步骤S500的处理在此对应于从例如RAM、存储单元(稍后描述)等读取区域改变量的积分值的处理。
当执行S500的处理时,显示控制设备100确定区域改变量的积分值是否是“0”(S502)。在步骤S502中确定区域改变量的积分值是“0”的情况下,显示控制设备100结束处理结果候选决定处理。
此外,在步骤S502中确定区域改变量的积分值不是“0”的情况下,显示控制设备100确定区域改变量的积分值是否大于“0”(S504)。
在步骤S504中确定区域改变量的积分值不大于“0”的情况下,显示控制设备100决定与放大有关的处理结果候选(S508)。显示控制设备100通过使用其中区域改变量的积分值和与放大有关的处理结果候选相关联的查询表,决定处理结果候选,但是决定方法不限于以上。显示控制设备100然后结束显示更新处理。
此外,在步骤S504中确定区域改变量的积分值大于“0”的情况下,显示控制设备100决定与显示区域缩小有关的处理结果候选(S506)。在此,显示控制设备100通过使用其中区域改变量的积分值和与缩小有关的处理结果候选相关联的查询表,决定处理结果候选,但是决定方法不限于以上。显示控制设备100然后结束显示更新处理。
显示控制设备100例如执行图24所示的处理作为处理结果候选决定处理。此外,不用说根据本实施例的处理结果候选决定处理不限于图24所示的处理。
返回参照图22,将描述根据本实施例的显示更新处理的示例。当执行步骤S312的处理时,显示控制设备100更新为对应于继续改变的显示屏幕(例如,图7所示的C、D,或者图8所示的B、C、D)(S314)。然后,显示控制设备100结束显示更新处理。
显示控制设备100例如执行图22所示的处理作为显示更新处理。此外,不用说根据本实施例的显示更新处理不限于图22所示的处理。
返回参照图20,将描述与根据本实施例的显示控制方法有关的处理的第一示例。当在步骤S104中执行显示更新处理时,显示控制设备100确定是否继续处理(S106:继续确定处理)。
[继续确定处理的示例]
图25是示出根据本实施例的继续确定处理的示例的流程图。
显示控制设备100确定多点触控触点的数目是否大于“0”(S600)。步骤S600的处理例如对应于是否第一操作状态或第三操作状态转变(改变)为第二操作状态的确定。
在步骤S600中确定多点触控触点的数目大于“0”的情况下,显示控制设备100确定结束处理(S602),并且结束继续确定处理。此外,在步骤S600中确定多点触控触点的数目不是“0”的情况下,显示控制设备100确定继续处理(S604),并且结束继续确定处理。
显示控制设备100例如执行图25所示的处理作为继续确定处理。此外,不用说根据本实施例的继续确定处理不限于图25所示的处理。
返回参照图20,将描述与根据本实施例的显示控制方法有关的处理的第一示例。当在步骤S106中执行继续确定处理时,显示控制设备100基于继续确定处理的结果确定是否继续处理。
当在步骤S106确定继续处理时,显示控制设备100从步骤S100起重复处理。此外,在步骤S106中确定不继续处理的情况下,显示控制设备100结束与显示控制方法有关的处理。
显示控制设备100例如通过执行图20所示的处理,实现如在上述显示控制的第一到第六示例所示的显示内容的物理大小的控制。此外,不用说用于控制显示内容的物理大小的情况的、与根据本实施例的显示控制方法有关的处理不限于图20所示的处理。
(ii)与显示控制方法有关的处理的第二示例
图26是示出与根据实施例的显示控制方法有关的处理的第二示例的流程图。在此,图26示出对于显示控制设备100控制时间轴的情况的处理的示例。
如在图20所示的步骤S100中,显示控制设备100确定是否检测多点触控的状态(S700)。在步骤S700中确定没有检测到多点触控的状态的情况下,显示控制设备100结束处理。此外,图26所示的处理不是一旦已经结束就不再执行的处理的类型,而是以规则或不规则间隔重复执行的处理的类型。此外,尽管图26中未示出,显示控制设备100在检测到一个操作位置的情况下,可以执行对应于检测到的操作位置的处理。
此外,在步骤S700中确定检测到多点触控的状态的情况下,显示控制设备100决定目标区域(S702:目标区域决定处理)。在此,根据本实施例的目标区域决定处理例如对应于如图16所示的决定处理,其中决定是取对于关于时间(缩略图的行)相互邻近的图像的时间轴为处理目标,还是取对于关于周期性(缩略图的列)相互邻近的图的像时间轴为处理目标。
[目标区域决定处理的示例]
图27是示出根据本实施例的目标区域决定处理的示例的流程图。
显示控制设备100设置操作位置(S800)。步骤S800的处理对应于例如从RAM、存储单元(稍后描述)等读取操作位置(操作显示单元的检测位置(稍后描述))的坐标数据的处理。
当执行步骤S800的处理时,显示控制设备100确定多点触控触点的数目是否是“2”(S802)。
在步骤S802中确定多点触控触点的数目不是“2”的情况下,显示控制设备100使得该区域设为目标区域(S810)。在此,设置的区域例如是之前设置的区域或最初设置的区域。显示控制设备100然后结束目标区域决定处理。
此外,在步骤S802中确定多点触控触点的数目是“2”的情况下,显示控制设备100确定x轴方向上两个操作位置之间差的绝对值是否大于y轴方向上两个操作位置之间差的绝对值(S804)。此外,步骤S804的处理不限于以上,并且显示控制设备100例如可以确定x轴方向上两个操作位置之间差的绝对值是否等于或大于y轴方向上两个操作位置之间差的绝对值。
在x轴方向上两个操作位置之间差的绝对值确定为大于y轴方向上差的绝对值的情况下,显示控制设备100决定关于时间(缩略图的行)相互邻近的图像作为目标区域(S806)。然后,显示控制设备100结束目标区域决定处理。
此外,在x轴方向上两个操作位置之间差的绝对值确定为不大于y轴方向上差的绝对值的情况下,显示控制设备100决定关于周期性(缩略图的列)相互邻近的图像作为目标区域(S808)。然后,显示控制设备100结束目标区域决定处理。
显示控制设备100例如执行图27所示的处理作为目标区域决定处理。此外,不用说根据本实施例的目标区域决定处理不限于图27所示的处理。
返回参照图26,将描述与根据本实施例的显示控制方法有关的处理的第二示例。当在步骤S702中执行目标区域决定处理时,显示控制设备100计算区域改变速度和区域改变量(S704:计算处理)。
[计算处理的示例]
图28是示出根据本实施例的、用于计算区域改变速度和区域改变量的计算处理的另一示例的流程图。图28在此示出用于显示控制设备100控制时间轴的情况的计算处理的示例。
如在图21所示的步骤S200中,显示控制设备100设置要用户计算的各种值(S900)。
当执行步骤S900的处理时,如图21所示的步骤S202中,显示控制设备100确定多点触控触点的数目(也就是说,已经检测到的操作位置的数目;以下相同)是否是“2”(S902)。
在多点触控触点的数目在步骤S902中确定为“2”的情况下,如图21所示的步骤S204,显示控制设备100确定基准间隔W(0)是否是“0”(S904)。
在基准间隔W(0)在步骤S904中确定为“0”的情况下,如图21所示的步骤S206,显示控制设备100记录基准间隔作为区域改变速度的初始值(S906)。此外,如图21所示的步骤S208,显示控制设备100复位区域改变量和区域改变量的积分值(S908)。然后,显示控制设备100结束计算处理。
此外,在步骤S904中确定基准间隔W(0)不是“0”的情况下,显示控制设备100更新区域改变速度(S910),如在图21所示的步骤S210。
当执行步骤S910的处理时,显示控制设备100确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值是否是负值(S912)。在步骤S912中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值不是负值的情况下,显示控制设备100执行稍后描述的步骤S916。
此外,在步骤S912中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值是负值的情况下,显示控制设备100复位区域改变量的积分值(S914)。此外,在图28中示出这样的示例,其中在当前计算的区域改变速度和之前计算的区域改变速度的乘积的值确定为负值的情况下,显示控制设备100执行步骤S914的处理,但是根据本实施例的计算处理不限于以上。例如,在当前计算的区域改变速度和之前计算的区域改变速度的乘积的值确定为负值的情况下,显示控制设备100可以不必执行步骤S914的处理。
在步骤S912中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值不是负值的情况下,或者在执行步骤S914的处理的情况下,显示控制设备100更新区域改变量和区域改变量的积分值(S916),如图21所示的步骤S212。然后,显示控制设备100结束计算处理。
在步骤S902中确定多点触控触点的数目不是“2”的情况下,显示控制设备100确定多点触控触点的数目是否大于“2”,如图21所示的步骤S214。
在步骤S918中确定多点触控触点的数目大于“2”的情况下,显示控制设备100将区域改变量的值更新为“0”(S920),如图21所示的步骤S216,并且执行步骤S912的处理。
此外,在步骤S918中确定多点触控触点的数目不大于“2”的情况下,显示控制设备100将基准间隔的值和区域改变量的值更新为“0”(S922),如图21所示的步骤S218,并且执行步骤S912的处理。
显示控制设备100例如通过执行图28所示的处理计算区域改变速度和区域改变量。此外,根据本实施例的计算处理不限于图28所示的处理。例如,区域改变量的积分值是用于要在弹出窗口中显示的处理结果候选的决定的值,并且因此如果处理结果候选不呈现给用户,则显示控制设备100不必计算区域改变量的积分值。此外,在不在执行对应于重复操作的处理的情况下,显示控制设备100不必执行图28所示的步骤S912和S914的处理。
返回参照图26,将描述与根据本实施例的显示控制方法有关的处理的第二示例。当在步骤S704中执行计算处理时,显示控制设备100更新显示屏幕(S706:显示更新处理)。在与显示控制方法有关的处理的第二示例中,显示控制设备100执行与显示控制方法有关的处理的第一示例的处理作为显示更新处理,该处理基本与图20所示的步骤S104相同。此外,例如在显示控制设备100执行对应于重复操作的处理的情况下,继续改变处理不同于图23所示的处理。
<继续改变处理的示例>
图29是示出根据本实施例的继续改变处理的另一示例的流程图。图29在此示出显示控制设备100执行对应于重复操作的处理的情况的处理示例。此外,图29所示的处理也可以应用于与上述显示控制方法有关的处理的第一示例。
显示控制设备100设置区域改变速度和区域改变量(S1000)。步骤S1000的处理在此对应于例如从RAM、存储单元(稍后描述)等读取区域改变速度的值和区域改变量的值的处理。
当执行步骤S1000的处理时,显示控制设备100确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值是否是负值(S1002)。在步骤S1002中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值不是负值的情况下,显示控制设备100执行稍后描述的步骤S1006的处理。
此外,在步骤S1002中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值是负值的情况下,显示控制设备100恢复目标区域(S1004)。目标区域的恢复处理在此是将显示内容临时返回到执行处理之前的状态的处理。此外,图29示出了这样的示例,其中显示控制设备100在当前计算的区域改变速度和之前计算的区域改变速度的乘积的值确定为负值的情况下,执行步骤S1004的处理,但是根据本实施例的计算处理不限于以上。例如,显示控制设备100在当前计算的区域改变速度和之前计算的区域改变速度的乘积的值确定为负值的情况下,可能不必执行步骤S1004的处理。
在步骤S1002中确定当前计算的区域改变速度和之前计算的区域改变速度的乘积的值不是负值的情况下,或者在执行S1004的处理的情况下,显示控制设备100确定区域改变量的值是否是“0”,如图23所示的步骤S402。在步骤S1006中确定区域改变量的值是“0”的情况下,显示控制设备100结束继续改变处理。
此外,在步骤S1006中确定区域改变量的值不是“0”的情况下,显示控制设备100确定区域改变量的值是否大于“0”(S1008),如图23所示的步骤S404。
在步骤S1008中确定区域改变量的值的值大于“0”的情况下,显示控制设备100缩小显示区域(S1010),如图23所示的步骤S406。然后显示控制设备100结束显示更新处理。
此外,在步骤S1008中确定区域改变量的值的值不大于“0”的情况下,显示控制设备100放大显示区域(S1012)。然后显示控制设备100结束显示更新处理。
显示控制设备100例如执行图29所示的处理作为继续改变处理。此外,不用说根据本实施例的继续改变处理不限于图29所示的处理。
返回参照图26,将描述与根据本实施例的显示控制方法有关的处理的第二示例。当在步骤S706中执行显示更新处理时,显示控制设备100确定是否继续处理(S708:继续确定处理),如图20所示的步骤S106。
当在步骤S708中执行继续确定处理时,显示控制设备100基于继续确定处理的结果确定是否继续处理(S710),如图20所示的步骤S108。
在步骤S710中确定继续处理的情况下,显示控制设备100从步骤S700起重复处理。此外,在步骤S710中确定不继续处理的情况下,显示控制设备100结束与显示控制方法有关的处理。
显示控制设备100例如通过执行图26所示的处理,实现如上述显示控制的第七到第九示例所示的时间轴的控制。此外,不用说对于控制时间轴的情况,与根据本实施例的显示控制方法有关的处理不限于图26所示的处理。
(根据本实施例的显示控制设备)
接下来,将描述能够执行与上述根据本实施例的显示控制方法有关的处理的、根据本实施例的显示控制设备100的配置的示例。
图30是示出根据本实施例的显示控制设备100的配置示例的框图。显示控制设备100例如包括操作显示单元102和控制单元104。
此外,显示控制设备100还可以包括例如ROM(只读存储器;未示出)、RAM(未示出)、存储单元(未示出)、可以由用户操作的操作单元(未示出)、用于与外部设备通信的通信单元(未示出)等。显示控制设备100例如通过用作数据传输信道的总线连接上述结构组件。
ROM(未示出)例如存储诸如要由控制单元104使用的程序和操作参数的控制数据。RAM(未示出)临时存储由控制单元104执行的程序、在与上述根据本实施例的显示控制方法有关的处理中使用的各种值(操作参数)等。
存储单元(未示出)是显示控制设备100中提供的存储部件。在此,存储单元(未示出)例如可以是诸如硬盘的磁记录截止、诸如闪速存储器的非失意性存储器、MRAM(磁阻随机存取存储器)或FeRAM(铁电随机存储器)等。
作为操作单元(未示出),例如可以引用稍后描述的操作输入设备。此外,作为通信单元(未示出),例如可以引用稍后描述的通信接口。
[显示控制设备100的示例硬件配置]
图31是示出根据本实施例的显示控制设备100的硬件配置示例的说明图。显示控制设备100例如包括MPU 150、ROM 152、RAM 154、记录介质156、输入/输出接口158、操作输入设备160、显示设备162、触摸面板164和通信接口166。此外,显示控制设备100例如通过用作数据传输信道的总线168连接结构组件。
MPU 150包括其中集成MPU(未处理单元)和用于实现控制功能的各种电路的集成电路,并且用作用于控制整个显示控制设备100的控制单元104。此外,MPU 150还可以在显示控制设备100中用作稍后描述的状态确定单元110、处理确定单元112和显示控制单元114。
ROM 152例如存储诸如由MPU 150使用的程序和操作参数的控制数据,并且RAM 154例如临时存储要由MPU 150执行的程序。
记录介质156是显示控制设备100的存储部件,并且用作存储单元(未示出)。记录介质156例如存储在与上述根据本实施例的显示控制方法、应用等相关的处理中使用的各种值。记录介质156在此例如可以是诸如硬盘的磁记录介质、诸如闪速存储器的非易失性存储器等。此外,记录介质156可以从显示控制设备100移除。
输入/输出接口158例如连接操作输入设备160和显示设备162。在此,输入/输出接口158例如可以使USB(通用串行总线)端子、DVI(数字视频接口)端子、HDMI(高分辨率多媒体接口)端子、各种类型的处理电路等。此外,不用说输入/输出接口158能够连接到作为显示控制设备100的外部设备的操作输入设备(例如,键盘、鼠标等)和显示设备(例如,外部显示器等)。
操作输入设备160用作操作单元(未示出)。此外,操作输入单元160例如提供在显示控制设备100上,并且连接到显示控制设备100中的输入/输出接口158。操作输入设备160例如可以是按钮、光标键、诸如拨号盘的旋转选择器或其组合。
显示设备162与触摸面板164一起用作操作显示单元102。显示设备162例如提供在显示控制设备100上,并且连接到显示控制设备100内的输入/输出接口158。显示设备162例如可以使液晶显示器(LCD)、有机EL显示器(有机电致发光显示器;也称为OLED显示器(有机发光二极管显示器))等。
此外,能够检测一个或多个操作位置的触摸面板164提供在显示设备162上。触摸面板164在此可以是例如电容性触摸面板,但是根据本实施例的触摸面板164不限于以上。例如,根据本实施例的显示控制设备100可以提供有能够检测一个或多个操作位置的任何类型的触摸面板。
通信接口166是显示控制设备100中提供的通信部件,并且用作用于经由网络(或者直接)与外部设备执行有线/无线通信的通信单元(未示出)。通信接口166在此例如可以是通信天线和RF(射频)电路(无线通信)、LAN(局域网)端子和发射/接收电路(有线通信)等。此外,根据本实施例的通信接口166不限于以上,并且例如可以具有与网络兼容的配置。根据本实施例的网络例如是诸如LAN或WAN(广域网)的有线网络、诸如经由基站的无线WAN(WWAN;无线广域网)或无线MAN(WMAN;无线城域网)的无线网络、或者使用诸如TCP/IP(传输控制协议/因特网协议)的通信协议的因特网。
显示控制设备100例如通过图31所示的配置执行与上述根据本实施例的显示控制方法有关的处理。此外,根据本实施例的显示控制设备100的配置不限于图31所示的配置。例如,显示控制设备100可以实现用于通过IC(集成电路)芯片等执行与根据本实施例的显示控制方法有关的处理的功能(例如,稍后描述的状态确定单元110、处理确定单元112和显示控制单元114的功能)。此外,这样的配置是可能的,根据该配置的显示控制设备100不包括图31所示的显示设备162和触摸面板164,但是控制在外部显示设备和外部触摸面板的显示。此外,显示控制设备100还可以包括例如从DSP(数字信号处理器)、放大器和扬声器配置的音频输出设备。通过包括音频输出设备,显示控制设备100例如可以使用音频听觉地给用户呈现处理结果候选。
返回参照图30,将描述显示控制设备100的配置示例。操作显示单元102显示显示屏幕,并且基于在显示屏幕上的用户操作检测显示屏幕上一个或多个操作位置。然后,操作显示单元102例如将关于指示操作位置的坐标的信息发送到控制单元104作为检测结果。在此,关于坐标的信息是在显示屏幕上的任意位置(诸如显示屏幕上的左上角)作为原点的情况下,表示的显示屏幕上的坐标数据。
控制单元104例如从MPU配置,并且用作控制整个显示控制设备100。此外,控制单元104包括状态确定单元110、处理确定单元112和显示控制单元114,并且在执行与根据本实施例的显示控制方法有关的处理时起主要作用。
状态确定单元110在执行上述(I)的处理(状态确定处理)时起主要作用。具体地,状态确定单元110例如基于从操作显示单元102发送的操作位置的检测结果,确定诸如第一操作状态、第二操作状态和第三操作状态的各种操作状态,以及各操作状态之间的转变(改变)。此外,状态确定单元110例如将确定结果发送到处理确定单元112和显示控制单元114。
处理确定单元112在执行上述(II)的处理(处理确定处理)时起主要作用。具体地,例如在通过状态确定单元110确定第一操作状态的情况下,处理确定单元112例如通过基于如图3所示的两个操作位置之间的间隔执行确定,确定要执行的处理,诸如放大处理或缩小处理。
此外,处理确定单元112例如计算区域改变速度和区域改变量。然后,处理确定单元112基于计算的区域改变速度确定要执行的处理的类型,并且基于计算的区域改变量决定显示的改变量。
处理确定单元112例如还计算区域改变量的积分值。此外,例如在显示控制设备100配置为不执行呈现处理结果候选的处理的情况下,处理确定单元112不必计算区域改变量的积分值。
此外,处理确定单元112还可以计算之前计算的区域改变速度和当前计算的区域改变速度的乘积,并且基于计算的乘积的值确定已经执行重复操作,并且可以确定对应于重复操作的处理作为要执行的处理。具体地,处理确定单元112例如在计算的乘积的值是负值的情况下,确定已经执行重复操作。此外,例如,在显示控制设备100配置为不执行对应于重复操作的处理的情况下,处理确定单元112不必计算上述乘积。
此外,处理确定单元112还能够基于区域改变速度确定重复操作的类型。具体地,处理确定单元112例如基于当前计算的区域改变速度的值是正还是负,确定重复操作的类型。例如,在当前计算的区域改变速度的值是正值的情况下,处理确定单元112确定执行放大处理,在当前计算的区域改变速度的值是负值的情况下,处理确定单元112确定执行缩小处理。此外,基于区域改变速度由处理确定单元112的重复操作的类型的确定不限于以上。例如,处理确定单元112还能够使用上述重复率确定重复操作的类型。
此外,处理确定单元112例如将确定结果发送到显示控制单元114。
显示控制单元114在执行上述(III)的处理(显示控制处理)时起主要作用。具体地,显示控制单元114执行由处理确定单元112确定要执行的处理,并且使得显示屏幕执行与已经确定的处理对应的显示。此外,显示控制单元114根据处理的确定的持续时间,继续与已经确定要执行的处理对应的显示。
此外,显示控制单元114例如可以在显示屏幕上显示处理结果候选,如图7和8所示。
例如,在显示处理结果候选的情况下,显示控制单元114在显示屏幕上显示处理结果,而不执行已经由处理确定单元112确定要执行的处理,直到由状态确定单元110确定从第一操作状态到第二操作状态的转变。显示控制单元114在此例如使得处理结果候选在弹出窗口中显示,如图7和8所示,但是处理结果候选的呈现方法不限于使用弹出窗口的显示。例如,显示控制单元114还能够通过声音通知处理结果候选的内容。此外,显示控制单元114例如根据由处理确定单元112计算的区域改变量的积分值,显示如果执行处理则将获得的显示内容(例如,显示内容本身或对应于显示内容的文本信息),如图7和8所示。
此外,在显示处理结果候选的情况下,显示控制单元114例如显示对应于状态确定单元110确定从第一操作状态到第二操作状态的转变的情况下的处理结果候选的显示。
此外,显示控制单元114基于通过状态确定单元110的确定结果,例如诸如指示已经确定操作状态之间的转变的确定结果,通过停止处理、临时停止(临时暂停)处理或显示对应于选择的处理结果候选的显示内容,控制在显示屏幕上的显示。例如,在已经通过状态确定单元110确定从第一操作状态到第三操作状态的转变的情况下,显示控制单元114临时暂停正在执行的处理的执行,或者将显示屏幕的显示内容改变为正在执行的处理执行之前的显示内容。此外,例如在临时暂停处理的同时,在状态确定单元110确定从第三操作状态到第一操作状态的转变的情况下,显示控制单元114可以重启临时暂停的处理的执行。
控制单元104例如通过包括状态确定单元110、处理确定单元112和显示控制单元114,在执行与根据本实施例的显示控制方法有关的处理时起主要作用。此外,用于在执行与根据本实施例的显示控制方法有关的处理时起主要作用的控制单元104的配置不限于图30所示的配置。例如,根据本实施例的显示控制设备100可以具有能够实现与上述根据本实施例的显示控制方法有关的处理的任何配置。
显示控制设备100例如通过图30所示的配置,执行与上述根据本实施例的显示控制方法有关的处理。显示控制设备100因此可以增加用户的便利性。此外,不用说根据本实施例的显示控制设备100的配置不限于图30所示的配置。
如上所述,根据本实施例的显示控制设备100基于显示屏幕上的操作位置确定操作状态,并且基于确定的操作状态确定要执行的处理。然后,显示控制设备100执行确定的处理,并且根据执行的处理的持续时间继续对应于该处理的显示。例如,在显示控制设备100根据处理的持续时间(确定持续时间)继续对应于该处理的显示的情况下,使得用户能够使得显示控制设备100执行希望的显示,而不增加操作的数目并且不管显示屏幕的尺寸。因此,显示控制设备100可以避免由于操作数目的增加导致的用户便利性的减少,并且因此可以增加用户的便利性。
此外,例如通过控制上述显示控制的第一到第九示例中示出的显示,显示控制设备100可以根据显示控制更加用户的便利性,如每个示例所示。
此外,例如通过执行根据重复操作的处理,显示控制设备100可以提供直观的可操作性。
上面已经取显示控制设备100作为本实施例的示例给出了说明,但是本实施例不限于这样的模式。本实施例例如可以应用于各种装置,诸如如移动电话或智能电话的通信设备、视频/音乐回放设备(或者视频/音乐记录/回放设备)、游戏控制器、诸如PC(个人计算机)的计算机、诸如TV接收机的显示设备等。
(根据本实施例的程序)
可以通过用于使得计算机用作本实施例的显示控制设备的程序(例如,用于实现与根据本实施例的显示控制方法有关的处理的程序,诸如上述(I)的处理(状态确定处理)到(III)的处理(显示控制处理)),增加用户的便利性。
本领域技术人员应当理解,依赖于设计需求和其他因素可以出现各种修改、组合、子组合和更改,只要它们在权利要求或其等效物的范围内。
例如,根据本实施例的显示控制设备可以分开地包括图30所示的状态确定单元110、处理确定单元112和显示控制单元114(例如,每个可以由个别的处理电路实现)。
此外,以上,提供用于使得计算机用作根据本实施例的显示控制设备的程序(计算机程序),但是本实施例还可以提供存储这样程序的存储介质。
上述配置仅示出本实施例的示例,并且自然落入本公开的技术范围。
本公开包含涉及于2011年3月4日向日本专利局提交的日本优先级专利申请JP 2011-047890中公开的主题,在此通过引用并入其全部内容。
Claims (13)
1.一种显示控制设备,包括:
操作显示单元,用于显示显示屏幕,并且根据在显示屏幕上的用户操作,检测显示屏幕上一个或多个操作位置;
状态确定单元,用于基于操作位置的检测结果,确定检测到两个操作位置的第一操作状态;
处理确定单元,用于基于在第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及
显示控制单元,用于基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示,
其中,显示控制单元根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示,
其中,在已经确定的处理是通过扩大或缩小时间轴改变显示的处理的情况下,其中显示其上显示在时间轴上安排的图像的列表的显示屏幕,显示控制单元通过根据确定的持续时间扩大或缩小时间轴改变显示。
2.如权利要求1所述的显示控制设备,其中其上显示在时间轴上安排的图像的列表的显示屏幕是其上以螺旋方式示出时间轴的显示屏幕。
3.如权利要求1所述的显示控制设备,其中,在已经确定的处理是增大或缩小在显示屏幕上显示的显示内容的显示尺寸的处理的情况下,显示控制单元根据确定的持续时间增大或缩小显示内容的显示尺寸。
4.如权利要求1所述的显示控制设备,
其中处理确定单元
计算区域改变速度和指示显示中的改变量的区域改变量,所述区域改变速度基于检测到的两个操作位置之间的距离,所述区域改变量基于所述区域改变速度,
基于已经计算的区域改变速度确定要执行的处理的类型,以及
基于已经计算的区域改变量决定显示中的改变量。
5.如权利要求4所述的显示控制设备,
其中处理确定单元
还计算之前计算的区域改变速度和当前计算的区域改变速度的乘积,并且
在已经计算的乘积的值是负值的情况下,确定已经执行重复操作,并且确定对应于重复操作的处理为要执行的处理。
6.如权利要求5所述的显示控制设备,其中处理确定单元还基于当前计算的区域改变速度,确定对应于重复操作的处理的类型。
7.如权利要求4所述的显示控制设备,
其中状态确定单元还基于操作位置的检测结果,确定从第一操作状态到没有检测到操作位置的第二操作状态的改变,
其中处理确定单元计算计算的区域改变量的积分值,
其中,在处理确定单元计算积分值的情况下,显示控制单元
不执行已经确定要执行的处理,直到状态确定单元确定已经发生到第二操作状态的改变,
使得显示屏幕显示处理结果候选,所述处理结果候选指示当根据积分值执行处理时将获得的处理结果,并且
当确定到第二操作状态的改变已经发生时,使得显示屏幕执行对应于处理结果候选的显示。
8.如权利要求7所述的显示控制设备,其中显示控制单元使得处理结果候选在弹出窗口中显示。
9.如权利要求8所述的显示控制设备,其中显示控制单元使得当根据积分值执行处理时将获得的显示内容显示为处理结果候选。
10.如权利要求8所述的显示控制设备,其中显示控制单元使得对应于当根据积分值执行处理时将获得的显示内容的文本信息显示为处理结果候选。
11.如权利要求1所述的显示控制设备,
其中状态确定单元还基于操作位置的确定结果,确定从第一操作状态到检测到一个或三个或更多操作位置的第三操作状态的改变,并且
其中,当到第三操作状态的改变确定为已经发生时,显示控制单元临时暂停正在执行的处理的执行,或者使得在正在执行的处理执行之前的显示内容为显示屏幕的显示内容。
12.如权利要求11所述的显示控制设备,
其中状态确定单元还基于操作位置的确定结果,确定从第三操作状态到第一操作状态的改变,并且
其中,当到第一操作状态的改变确定为已经发生时,显示控制单元重启临时停止的处理的执行。
13.一种显示控制方法,包括:
基于操作位置的检测结果,在操作显示单元确定检测到两个操作位置的第一操作状态,所述操作显示单元用于显示显示屏幕,并且根据在显示屏幕上的用户操作,检测显示屏幕上一个或多个操作位置;
基于第一操作状态下操作位置的改变,确定与要执行的显示有关的处理;以及
基于处理的确定结果,执行已经确定要执行的处理,并且使得显示屏幕执行对应于所述处理的显示,
其中,在使得显示屏幕执行显示的步骤中,根据对于已经确定的处理的确定的持续时间,继续对应于已经确定要执行的处理的显示,
其中,在已经确定的处理是通过扩大或缩小时间轴改变显示的处理的情况下,其中显示其上显示在时间轴上安排的图像的列表的显示屏幕,通过根据确定的持续时间扩大或缩小时间轴改变显示。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011-047890 | 2011-03-04 | ||
JP2011047890A JP2012185647A (ja) | 2011-03-04 | 2011-03-04 | 表示制御装置、表示制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102707830A CN102707830A (zh) | 2012-10-03 |
CN102707830B true CN102707830B (zh) | 2016-12-14 |
Family
ID=46752999
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210055064.2A Expired - Fee Related CN102707830B (zh) | 2011-03-04 | 2012-03-05 | 显示控制设备、显示控制方法和程序 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9170722B2 (zh) |
JP (1) | JP2012185647A (zh) |
CN (1) | CN102707830B (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB201120783D0 (en) * | 2011-12-02 | 2012-01-11 | Bluepod Media Worldwide Ltd | A communication system |
JP5990011B2 (ja) | 2012-02-28 | 2016-09-07 | キヤノン株式会社 | 情報処理装置及びその制御方法 |
US20130227472A1 (en) * | 2012-02-29 | 2013-08-29 | Joseph W. Sosinski | Device, Method, and Graphical User Interface for Managing Windows |
JP5832339B2 (ja) * | 2012-03-04 | 2015-12-16 | アルパイン株式会社 | 拡大縮小操作縮尺表示方法及び装置 |
JP5979916B2 (ja) * | 2012-03-07 | 2016-08-31 | キヤノン株式会社 | 情報処理装置およびその制御方法 |
US10389779B2 (en) | 2012-04-27 | 2019-08-20 | Arris Enterprises Llc | Information processing |
US10198444B2 (en) * | 2012-04-27 | 2019-02-05 | Arris Enterprises Llc | Display of presentation elements |
US20140046922A1 (en) * | 2012-08-08 | 2014-02-13 | Microsoft Corporation | Search user interface using outward physical expressions |
JP2014038560A (ja) * | 2012-08-20 | 2014-02-27 | Canon Inc | 情報処理装置、情報処理方法及びプログラム |
CN102968273B (zh) * | 2012-11-20 | 2015-08-05 | 鸿富锦精密工业(深圳)有限公司 | 电子设备及其页面缩放方法 |
US9158766B2 (en) * | 2012-11-29 | 2015-10-13 | Oracle International Corporation | Multi-touch interface for visual analytics |
WO2014112029A1 (ja) * | 2013-01-15 | 2014-07-24 | 日立マクセル株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
JP6252061B2 (ja) * | 2013-09-17 | 2017-12-27 | 日本電気株式会社 | 情報表示装置、制御方法、及びプログラム |
JP6176853B2 (ja) * | 2014-02-24 | 2017-08-09 | 株式会社ゼンリンデータコム | 画像表示処理装置、画像表示処理方法および画像表示処理プログラム |
JP6305326B2 (ja) * | 2014-12-01 | 2018-04-04 | 三菱電機株式会社 | 監視制御装置 |
EP3096216B1 (en) * | 2015-05-12 | 2018-08-29 | Konica Minolta, Inc. | Information processing device, information processing program, and information processing method |
DK201670595A1 (en) | 2016-06-11 | 2018-01-22 | Apple Inc | Configuring context-specific user interfaces |
US11301124B2 (en) | 2017-08-18 | 2022-04-12 | Microsoft Technology Licensing, Llc | User interface modification using preview panel |
US11237699B2 (en) | 2017-08-18 | 2022-02-01 | Microsoft Technology Licensing, Llc | Proximal menu generation |
US10417991B2 (en) | 2017-08-18 | 2019-09-17 | Microsoft Technology Licensing, Llc | Multi-display device user interface modification |
US20190056857A1 (en) * | 2017-08-18 | 2019-02-21 | Microsoft Technology Licensing, Llc | Resizing an active region of a user interface |
US10754523B2 (en) * | 2017-11-27 | 2020-08-25 | International Business Machines Corporation | Resizing of images with respect to a single point of convergence or divergence during zooming operations in a user interface |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101893956A (zh) * | 2009-05-21 | 2010-11-24 | 索尼公司 | 显示控制设备、显示控制方法和计算机程序 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8479122B2 (en) * | 2004-07-30 | 2013-07-02 | Apple Inc. | Gestures for touch sensitive input devices |
US6819344B2 (en) * | 2001-03-12 | 2004-11-16 | Microsoft Corporation | Visualization of multi-dimensional data having an unbounded dimension |
US7743348B2 (en) * | 2004-06-30 | 2010-06-22 | Microsoft Corporation | Using physical objects to adjust attributes of an interactive display application |
JP2009282606A (ja) * | 2008-05-20 | 2009-12-03 | Ricoh Co Ltd | 画像閲覧装置およびプログラム |
JP5066055B2 (ja) * | 2008-10-28 | 2012-11-07 | 富士フイルム株式会社 | 画像表示装置、画像表示方法およびプログラム |
JP4811452B2 (ja) * | 2008-11-19 | 2011-11-09 | ソニー株式会社 | 画像処理装置、画像表示方法および画像表示プログラム |
US9041660B2 (en) * | 2008-12-09 | 2015-05-26 | Microsoft Technology Licensing, Llc | Soft keyboard control |
US8669945B2 (en) * | 2009-05-07 | 2014-03-11 | Microsoft Corporation | Changing of list views on mobile device |
KR101857564B1 (ko) * | 2009-05-15 | 2018-05-15 | 삼성전자 주식회사 | 휴대 단말기의 이미지 처리 방법 |
-
2011
- 2011-03-04 JP JP2011047890A patent/JP2012185647A/ja active Pending
-
2012
- 2012-02-21 US US13/400,847 patent/US9170722B2/en not_active Expired - Fee Related
- 2012-03-05 CN CN201210055064.2A patent/CN102707830B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101893956A (zh) * | 2009-05-21 | 2010-11-24 | 索尼公司 | 显示控制设备、显示控制方法和计算机程序 |
Also Published As
Publication number | Publication date |
---|---|
US9170722B2 (en) | 2015-10-27 |
CN102707830A (zh) | 2012-10-03 |
US20120223898A1 (en) | 2012-09-06 |
JP2012185647A (ja) | 2012-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102707830B (zh) | 显示控制设备、显示控制方法和程序 | |
US9977586B2 (en) | Display control device, display control method, and program | |
CN106488090B (zh) | 移动终端及其控制方法 | |
US8527876B2 (en) | System and methods for adjusting graphical representations of media files based on previous usage | |
US8780138B2 (en) | Information presentation based on display screen orientation | |
JP5398719B2 (ja) | ユーザ命令の入力方法及びこれを適用した映像機器と入力機器 | |
JP7393541B2 (ja) | ビデオ表示方法、電子機器及び媒体 | |
KR101954794B1 (ko) | 영상 표시 장치에서 멀티미디어 컨텐츠의 재생구간을 탐색하기 위한 장치 및 방법 | |
US20090313564A1 (en) | Systems and methods for adjusting playback of media files based on previous usage | |
US20120032988A1 (en) | Display control apparatus that displays list of images onto display unit, display control method, and storage medium storing control program therefor | |
US20140029915A1 (en) | Video-previewing methods and systems for providing preview of a video and machine-readable storage mediums thereof | |
CN105657546A (zh) | 多媒体文件播放方法、装置及终端 | |
JP6149862B2 (ja) | 表示制御装置、表示制御システムおよび表示制御方法 | |
CN107105342A (zh) | 一种视频播放控制方法及移动终端 | |
CN108200477B (zh) | 视频文件生成及播放的方法、装置及设备 | |
JP2013038453A (ja) | 情報処理装置及び表示方法 | |
CN103809841B (zh) | 数据处理方法及电子设备 | |
EP2793462B1 (en) | Method and apparatus for video call in communication system | |
KR20150043063A (ko) | 전자 장치 및 이의 정보 제공 방법 | |
KR20090043060A (ko) | 휴대 단말기 및 그의 동영상 관리 방법 | |
EP2942949A1 (en) | System for providing complex-dimensional content service using complex 2d-3d content file, method for providing said service, and complex-dimensional content file therefor | |
CN108156512B (zh) | 一种视频播放控制方法及装置 | |
US12075000B2 (en) | Application extension program, information processing apparatus, and method | |
JP5853802B2 (ja) | 電子機器、電子機器の制御方法、電子機器の制御プログラム | |
US20240176649A1 (en) | Information processing device, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20161214 Termination date: 20170305 |
|
CF01 | Termination of patent right due to non-payment of annual fee |