CN105518600A - 信息处理装置、信息处理装置的控制方法、程序和记录介质 - Google Patents
信息处理装置、信息处理装置的控制方法、程序和记录介质 Download PDFInfo
- Publication number
- CN105518600A CN105518600A CN201480048485.XA CN201480048485A CN105518600A CN 105518600 A CN105518600 A CN 105518600A CN 201480048485 A CN201480048485 A CN 201480048485A CN 105518600 A CN105518600 A CN 105518600A
- Authority
- CN
- China
- Prior art keywords
- overlapping
- display
- overlapping target
- layer
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
- G06F7/06—Arrangements for sorting, selecting, merging, or comparing data on individual record carriers
- G06F7/08—Sorting, i.e. grouping record carriers in numerical or other ordered sequence according to the classification of at least some of the information they carry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
信息处理装置具备:重叠显示处理部,其将重叠目标(C)重叠于内容来进行显示;以及背景关联部,其在使重叠目标暂时不显示的状态下,在上述内容上显示通知信息(E、D),上述显示通知信息(E、D)表示为了显示该重叠目标而指定的范围的位置。
Description
技术领域
本发明涉及用于阅览内容的信息处理装置。
背景技术
以往,为了方便阅览网页而进行了很多用户界面的开发。例如,开发了能用标签切换多个网页来进行显示的浏览器,得到了广泛使用。
另外,为了更方便地使用信息处理装置,也进行了用户界面的开发。例如,在下述专利文献1的技术中,在具备触摸面板的信息处理装置中,将进行了触摸操作的位置的图像放大,重叠显示于该操作位置,由此能方便地进行触摸操作。另外,在下述的专利文献2的技术中,能将指定为复制或者移动的对象的区域的图像显示为选择目标,使该选择目标移动到所希望的页面,由此对上述区域的图像进行复制或者移动。
专利文献1:日本国公开专利公报“特开2012-043452号公报”(2012年3月1日公开)
专利文献2:日本国公开专利公报“特开2012-088807号公报”(2012年5月10日公开)
发明内容
发明要解决的问题
在此,通常在1个网页中包含各种信息,因此,用户关注的信息大多是在1个网页上分散配置的状态。并且,在用上述现有的浏览器显示网页的情况,用户为了阅览关注的各信息,需要使视线移动到显示画面上的远离的位置,另外在各信息未显示在一个画面中的情况下,需要反复进行滚动显示。
作为解决这种问题的方法,想到了包括在显示画面上所显示的内容中指定的范围的图像,将能在上述显示画面上移动的重叠目标重叠于内容来进行显示。另外,用该方法会让重叠目标遮住内容的一部分,因此为了确保内容的阅览性,优选能使重叠目标暂时不显示。
然而,在使重叠目标不显示的情况下,该重叠目标为暂时性不显示,但是用户无法判断是能进行再显示还是不能进行再显示。另外,有时也会在使其不显示后忘记了显示的是与内容的哪一位置对应的重叠目标。由此,即使用户能使重叠目标再显示,也有可能会进行再次指定范围来重新显示重叠目标的不必要的处理。
本发明是鉴于上述问题而完成的,其目的在于提供信息处理装置等,在使重叠于内容而显示的重叠目标暂时不显示的状态下,使用户能识别存在与内容的哪一位置对应的重叠目标。
用于解决问题的方案
为了解决上述问题,本发明的一个方式的信息处理装置是一种显示内容的信息处理装置,具备:重叠显示单元,其将包含从所显示的上述内容指定的范围的图像的重叠目标重叠于该内容来进行显示;以及信息显示单元,其在使上述重叠目标暂时不显示的状态下,显示表示上述内容上的上述范围的位置的通知信息。
发明效果
根据本发明的一个方式,能实现如下效果:在使重叠目标暂时不显示的状态下,能使用户识别存在与内容的哪一位置对应的重叠目标。
附图说明
图1是示出本发明的一个实施方式的信息处理装置的主要部位构成的一个例子的框图。
图2是示出上述信息处理装置的重叠显示的方式的图,该图的(a)是示出指定了范围的状态下的画面示例的图,该图的(b)示出将该图的(a)中指定的范围的图像进行了重叠显示的状态下的画面示例。
图3是示出在上述信息处理装置中使重叠目标不显示时的显示方式的图,该图的(a)示出作为将重叠目标拖曳到显示画面外的操作的画面外拖曳的方式,该图的(b)示出重叠目标处于不显示状态从而显示关联带(日文为“紐”)图像时的画面示例。
图4是示出在重叠目标间进行了关联(日文为“紐付け”)的状态的画面示例的图。
图5(a)(b)是输出用于在重叠目标间进行关联的用户操作的例子的图。
图6是与已关联的重叠目标的画面捕捉相关的图,该图的(a)示出执行画面捕捉的操作的例子,该图的(b)示出捕捉到的图像的例子。
图7是与已关联的重叠目标的复制相关的图,该图的(a)示出执行复制的操作的例子,该图的(b)示出所复制的文本的例子,该图的(c)示出利用关联复制的文本的例子。
图8是与已关联的重叠目标的优先级设定有关的图,该图的(a)示出执行优先级设定的操作的例子,该图的(b)示出设定了优先级后的画面示例。
图9是示出已关联的重叠目标的排序的例子的图,该图的(a)示出执行排序的操作的例子,该图的(b)示出排序后的画面示例。
图10是与重叠目标的关键字显示有关的图,该图的(a)示出执行详细显示和关键字显示的切换的操作的例子,该图的(b)示出关键字显示状态下的重叠目标的例子。
图11是示出切换到重叠目标的关键字显示的一个例子的图,该图的(a)示出执行详细显示和关键字显示的切换的操作的例子,该图的(b)示出切换到关键字显示后的画面示例。
图12是示出背景图层管理表的具体例的图。
图13是示出重叠图层管理表的具体例的图。
图14是示出优先级清单表的具体例的图。
图15是说明映射的图,该图的(a)示出映射的设定例,该图的(b)示出基于该图的(a)的映射的图层显示的例子。
图16是示出从基准坐标确定重叠图层上的触摸位置的方法的一个例子的图。
图17是示出目标显示处理的一个例子的流程图。
图18是示出重叠设定处理的一个例子的流程图。
图19是示出显示更新处理的一个例子的流程图。
图20是示出触摸操作对应处理的一个例子的流程图。
图21是示出两指触摸操作对应处理的一个例子的前半部分的流程图。
图22是示出两指触摸操作对应处理的一个例子的后半部分的流程图。
图23是示出画面外拖曳处理的一个例子的流程图。
图24是示出属性变更处理的一个例子的流程图。
图25是示出图层间关联处理的一个例子的流程图。
图26是示出关联带图像设定、解除处理的一个例子的流程图。
图27是示出关键字显示处理的一个例子的流程图。
图28是示出关键字取得处理的一个例子的流程图。
图29是示出详细显示处理的一个例子的流程图。
图30是示出优先级设定处理的一个例子的流程图。
图31是示出排序处理的一个例子的流程图。
图32是示出关联图层消除处理的一个例子的流程图。
具体实施方式
〔实施方式1〕
本实施方式的信息处理装置1是具有显示网页的浏览器功能的装置,将所显示的网页中指定范围的图像重叠于该网页而进行放大显示。此外,网页是指网络上的内容,是利用浏览器一次显示的数据的总和。
基于图2说明信息处理装置1的显示。图2是示出重叠显示的方式的图,该图的(a)是示出指定了范围的状态下的画面示例的图,该图的(b)示出将该图的(a)中指定的范围的图像重叠显示的状态下的画面示例。
在该图的(a)中,示出了使光标A在所显示的网页上移动,由此指定了用线B包围的范围的状态。当范围被指定时,如该图的(b)所示,信息处理装置1将所指定的范围的图像重叠于原网页而进行显示。以下,将重叠显示的该图像称为重叠目标。图示的重叠目标C包括将指定范围的图像放大后的图像。也就是说,重叠目标C是包括从所显示的网页(内容)指定的范围(用线B包围的范围)的图像的目标。
重叠目标C独立于原网页而动作。另外,重叠目标C能移动到显示画面上的任意位置。此外,在对重叠目标C进行双击操作(短时间连续两次触摸显示画面的操作)的情况下,信息处理装置1对与重叠目标C对应的网页(在该例子中为原网页)进行全画面显示。
接着,基于图3说明使重叠目标暂时为不显示状态的操作。该图的(a)是进行画面外拖曳的图,上述画面外拖曳是将重叠目标C拖曳到显示画面外的操作,该图的(b)是示出使重叠目标C为不显示状态从而显示关联带图像E的画面示例的图。
如该图的(a)所示,在使光标A对准重叠目标C而触摸光标A的状态下,进行将重叠目标C拖曳到显示画面外的操作时,如该图的(b)所示,信息处理装置1显示关联带图像E来代替显示重叠目标C。由此,视觉上示出成为不显示状态的重叠目标C的存在。另外,在使光标A对准关联带图像E而触摸光标A的状态下拖曳光标A时,再次显示重叠目标C来代替显示关联带图像E。
另外,关联带图像E的端点D显示为位于重叠目标C被生成时的指定范围内的位置。由此,在该图的(b)的显示状态下,能使用户在视觉上识别出:能通过拖曳关联带图像E来显示将端点D的位置的图像放大显示后的图像即重叠目标C。
而且,关联带图像E的另一端显示在为了使重叠目标C不显示而使该重叠目标移动到的位置(显示画面的端部)。也就是说,关联带图像E是能使用户想起将在端点D的位置显示的重叠目标移动到显示画面的端部而使其不显示的图像。由此,用户能一边从关联带的端部追寻到端部一边追寻自身的记忆,容易想起显示了何种重叠目标。
如上所述,根据信息处理装置1,用户实际上对重叠目标关联,能在不需要时以擦除的感觉将其从内容上驱除,在需要时以拽着关联带拖出重叠目标的感觉来使其再显示。也就是说,用户能以直观的操作来切换重叠目标的显示/不显示。
基于图4说明将重叠目标与其它重叠目标已关联的状态下的画面显示。在该图中将重叠目标C1与重叠目标C2关联,显示了将重叠目标C1与重叠目标C2联接的关联带图像F。详细内容在后面说明,通过将重叠目标彼此关联,能对多个重叠目标进行集中处理。另外,在该图的例子中,也显示了表示暂时不显示的其它重叠目标的存在的关联带图像E(在其指定范围内具有端点C)。
图5示出重叠目标彼此的关联和解除的操作的例子。该图的(a)示出使用了两点触摸的操作,该图的(b)示出使重叠目标彼此重叠的操作。如该图的(a)所示,在使光标A1贴合于重叠目标C1而触摸光标A1并且使光标A2贴合于重叠目标C2而触摸光标A2的状态下,进行所谓捏合(pinchin)操作的情况下,显示将各重叠目标联接的关联带图像F。另外,使该各重叠目标在信息处理装置1的内部对应。另外,在对已关联的重叠目标分别进行触摸的状态下进行所谓扩张(pinchout)操作的情况下,关联被解除,关联带图像F的显示结束。
另外,如该图的(b)所示,也可以在使光标A1贴合于重叠目标C1而触摸光标A1的状态下,进行拖曳操作来使其重叠于重叠目标C2的情况下,将各重叠目标关联。此外,用于将重叠目标彼此关联的操作没有特别限定,优选如图示的例子那样通过直观的操作进行关联。
基于图6和图7说明与重叠目标的画面捕捉和复制有关的操作。图6的(a)示出了对重叠目标C2进行图像捕捉操作的状态。
如图所示,在作为画面捕捉的对象的重叠目标C2上显示菜单G,选择其中包括的“画面捕捉”项目,由此捕捉重叠目标C2的图像。此外,用于对重叠目标进行操作的菜单G也可以通过例如对重叠目标持续触摸一定时间以上的长按操作来进行显示。
在此,对重叠目标C2关联了重叠目标C1。因此,如该图的(b)所示,重叠目标C1的图像和关联带图像也与重叠目标C2的图像一起被捕捉。此外,关联带图像的捕捉虽非必须,但是优选连同关联带图像一起捕捉,这能使用户识别出作为关联的效果而捕捉到重叠目标C1和C2的两者。
这样,能通过将重叠目标彼此关联来对多个目标一并进行处理。例如,也能一并进行对重叠目标中包括的字符串进行复制的处理。基于图7说明这一点。
图7(a)示出对重叠目标C2进行了复制操作的状态。在这种情况下,将重叠目标C1中包含的文本复制为如该图的(b)所示的文本数据,并且将重叠目标C2中包含的文本复制为如该图的(c)所示的文本数据。
基于图8说明优先级的设定。图8是与已关联的重叠目标的优先级设定相关的图。在该图的(a)的例子中,选择已关联的重叠目标C1~C4中的一个重叠目标,从菜单G选择优先级设定。由此,能对各重叠目标分别设定优先级值。
更详细地说,在该图的(a)中,选择重叠目标C3,显示菜单G。在该状态下用光标A选择菜单G的优先级设定的项目情况下,显示用于设定重叠目标C3的优先级值的设定窗口(未图示)。然后,从设定窗口选择或者输入所希望的优先级值,由此能设定重叠目标C3的优先级值。对各重叠目标进行该操作,由此如该图的(b)所示,设定已关联的重叠目标C2~C4的优先级值,所设定的优先级值显示为H1~H3。
接着,基于图9说明基于已关联的重叠目标的优先级值进行的排序。图9是示出已关联的重叠目标的排序的例子的图。
在该图的(a)中,选择重叠目标C3,显示菜单G。在该状态下用光标A选择了菜单G的排序的项目的情况下,已关联的重叠目标C1~C4基于分别设定的优先级值H1~H3被排序,成为该图的(b)所示的状态。在该图的(b)中,重叠目标C2~C4按优先级值的升序从左排列。另外,未设定优先级值的重叠目标C1不成为排序的对象,随着已关联的重叠目标C2的移动而改变显示位置。此外,在该图的(a)中,重叠目标C3和C4由关联带图像F3联接,在该图的(b)中,重叠目标C2和C4由关联带图像F3联接。这样,关联带图像只要显示为能使用户识别已关联的重叠目标即可,可以随着排序而在相互已关联的重叠目标的组内变更关联带图像的显示位置。
基于图10和图11说明重叠目标的关键字设定和关键字显示。图10(a)示出对重叠目标设定关键字,使设定的关键字显示的操作,该图的(b)示出处于关键字显示状态的重叠目标。
在该图的(a)中,在选择重叠目标C中显示的“人权宣言”的字符串而使其反色显示的状态下显示菜单G。在该状态下,在利用光标A选择了菜单G的“关键字显示/详细显示”的情况下,重叠目标C成为以所选择的字符串为关键字的关键字显示状态。具体地说,如该图的(b)所示,显示包含所选择的“人权宣言”的文字的重叠目标(以下称为关键字目标)J来代替显示重叠目标C。
关键字目标J与重叠目标C相比显示尺寸小,因此能利用的显示画面上的空间变大。另外,显示于关键字目标J的字符串是重叠目标C中包含的字符串,因此用户能容易地识别出关键字目标J与重叠目标C对应。
在图11(a)的例子中,重叠目标C1和关键字目标J1~J4分别由关联带图像F1~F4联接。另外,重叠目标C1和C2由关联带图像F5联接,重叠目标C2和C3由关联带图像F6联接,重叠目标C3和C4由关联带图像F7联接。也就是说,图示的重叠目标C1~C4和关键字目标J1~J4均被相互关联。
在该状态下,如图所示,在重叠目标C4中显示菜单G,选择作为用于切换关键字显示和详细显示的项目的“关键字显示/详细显示”。由此,如该图的(b)所示,重叠目标C4被置换为关键字目标J7。此时,如该图所示,也可以将关联到重叠目标C4的重叠目标C2和C3分别置换为关键字目标J5和J6。另外,也可以如重叠目标C1那样,即使是关联的重叠目标,也不置换为关键字目标。此外,也可以基于不将关联了关键字目标的重叠目标置换为关键字目标或者将已关联的多个重叠目标中的1个保留为重叠目标等的条件来判断可否进行置换。
另外,针对这样显示的关键字目标,与该图的(a)同样地显示菜单G,选择“关键字显示/详细显示”,由此能返回该图的(a)的显示状态。
〔装置构成〕
接着,基于图1说明信息处理装置1的构成。图1是示出信息处理装置1的主要部位构成的一个例子的框图。如图所示,信息处理装置1具备控制部100、存储部200、显示部300、输入部400和通信部500。
控制部100统一控制信息处理装置1的功能,包括:操作判断部10、页面显示处理部11、重叠显示处理部(重叠显示单元)12、触摸处理部13、滚动处理部14、变形部15、移动处理部16、倍率变更部17、显示控制部18、页面保存部19、复制部20、捕捉部21、书签控制部22、背景关联部(信息显示单元)23、图层间关联部24、关键字显示部(关键字显示单元,关键字设定单元)25以及优先显示处理部(排序单元)26。
操作判断部10响应于输入部400所接收的输入操作而接收输入信号,基于该输入信号的内容和显示于显示部300的图像的内容来确定用户进行的操作。然后,使控制部100的各部执行与所确定的操作相应的处理。
页面显示处理部11进行显示网页的处理。另外,重叠显示处理部12进行显示重叠目标的处理(参照图2)。后面详细说明这些处理。
触摸处理部13进行与触摸操作对应的处理。具体地说,触摸处理部13在进行了触摸操作的位置显示了网站的链接的情况下,将该位置的图像更新为链接目的地的图像。另外,在进行了触摸操作的位置显示按钮的情况下,对按钮进行已预先对应的处理(例如启动规定的程序等)。
滚动处理部14进行与滚动操作对应的处理。具体地说,滚动处理部14在进行滚动操作(例如拖曳操作、滑动(flick)操作等预定的操作)时,在进行该操作的位置使所显示的图像滚动显示。也就是说,在重叠目标上进行了滚动操作的情况下,使重叠目标的图像进行滚动显示,在背景显示的网页上进行了滚动操作的情况下,使该网页的图像进行滚动显示。
变形部15在进行使重叠目标变形的输入操作时,响应于该输入操作而使重叠目标变形。此外,通过使重叠目标变形来变更显示于重叠目标的图像的范围,因此也可以说变形部15变更了重叠目标的范围。
移动处理部16在进行了使重叠目标移动的输入操作时,使重叠目标移动到与输入操作相应的位置。另外,移动处理部16在进行了使重叠目标旋转的输入操作时,以与该输入操作相应的方向和旋转角度使重叠目标旋转,变更显示面上的重叠目标的方向。
倍率变更部17在进行了变更显示倍率的输入操作时,将在进行了该输入操作的位置显示的图像的显示倍率按该输入操作的内容进行变更。具体地说,在重叠目标上进行了变更显示倍率的输入操作时,变更重叠目标的图像的显示倍率,在背景所显示的网页上进行了变更显示倍率的输入操作时,变更该网页的显示倍率。
显示控制部18进行使图像显示于显示部300的控制。具体地说,显示控制部18将保存于后述的显示数据保存部35的数据发送到显示部300来进行显示。
页面保存部19进行将网页保存为文件的处理,复制部20进行存储重叠目标的文本的处理(参照图7(b)(c))。另外,捕捉部21进行将重叠目标存储为图像的处理(参照图6(b))。并且,书签控制部22进行与网页的书签有关的处理。这些处理例如通过对图6~图11所示的菜单G进行的操作来执行。
背景关联部23在重叠目标暂时为不显示的状态下,将表示作为该重叠目标的来源的图像在所显示的网页上的位置的通知信息重叠于内容来进行显示。具体地说,背景关联部23使重叠目标与显示于其背景的网页(作为该重叠目标的来源的网页)相对应。并且,在将重叠目标拖曳到画面端部时,显示将作为该重叠目标的来源的网页的部位(在显示重叠目标时指定了范围的位置)和该重叠目标最后显示的部位(为了使重叠目标暂时不显示而移动到的位置)进行联接的关联带图像(通知信息)来代替显示该重叠目标(参照图3(b))。
图层间关联部24在显示了多个重叠目标的情况下,使重叠目标彼此相对应,显示在相对应的重叠目标间进行联接的关联带图像作为表示进行了对应的信息(参照图4)。将这些处理称为重叠目标(重叠图层)间的关联。在对已关联的重叠目标中的1个进行特定的处理时,对与该重叠目标已关联的其它重叠目标也进行相同的特定处理。也就是说,对已关联的重叠目标的处理能一并进行。另外,已关联的重叠目标成为后述的排序处理的对象。
在此,说明对已关联的重叠目标的一并处理。如图6(a)所示,在进行了对已关联的重叠目标中的一方进行画面捕捉处理的意思的操作的情况下,捕捉部21确认是否存在与该重叠目标已关联的其它重叠目标。然后,在存在的情况下,将该其它重叠目标也设为捕捉的对象。另外,在这种情况下,也可以将这些重叠目标间显示的关联带图像也设为捕捉的对象。
同样,如图7(a)所示,在进行了对已关联的重叠目标中的一方进行复制处理的意思的操作的情况下,复制部20确认是否存在与该重叠目标已关联的其它重叠目标。然后,在存在的情况下,将该其它重叠目标也设为复制的对象,也可以分别复制各重叠目标中包含的字符串。
此外,作为一并处理的对象的处理不限于上述的例子,例如能将以下任意的处理作为一并处理的对象。
(1)书签控制部22进行的书签登记处理
(2)页面保存部19进行的将网页保存为文件的处理
(3)滚动处理部14进行的显示的滚动处理
(4)变形部15进行的变形处理
(5)移动处理部16进行的重叠目标的显示位置的移动处理
(6)倍率变更部17进行的倍率变更处理
也就是说,这些构成要素都能作为一并处理单元而发挥功能。
关键字显示部25进行对重叠目标设定关键字的处理(参照图10(a))。另外,进行将重叠目标切换为关键字显示状态(显示关键字目标来代替显示重叠目标)的处理(参照图10(b))。此外,当然也可以构成为用单独的块来执行关键字的设定和显示切换。
优先显示处理部26进行对重叠目标设定优先级值的处理(参照图8(a)(b))和基于优先级值对多个重叠目标进行排序的排序处理(参照图9(a)(b))。这些处理例如能通过对图6~图11所示的菜单G的操作来执行。此外,当然也可以构成为用单独的块执行优先级值的设定和排序。
存储部200是保存信息处理装置1所使用的各种数据的存储装置,包括:背景图层管理表30、重叠图层管理表31、映射32、页面数据保存部33、重叠数据保存部34、显示数据保存部35、复制文本保存部36、捕捉图像保存部37、书签表38以及优先级清单表39。
背景图层管理表30是用于使页面显示处理部11显示网页的信息,重叠图层管理表31是用于使重叠显示处理部12显示重叠目标的信息。此外,页面显示处理部11显示网页的图层与重叠显示处理部12显示重叠目标的图层是不同的。以下将页面显示处理部11进行处理的对象的图层称为背景图层,将重叠显示处理部12进行处理的对象的图层称为重叠图层。重叠目标是基于重叠图层而显示的,因此重叠目标的关联也能表现重叠图层的关联。
映射32是表示背景图层的数据和重叠图层的数据中的哪一个显示于显示部300的信息。映射32在后面详细说明。
页面数据保存部33保存显示于背景图层的图像数据,重叠数据保存部34保存显示于重叠图层的图像数据。并且,显示数据保存部35保存显示于显示部300的图像数据。根据映射32将保存于页面数据保存部33的数据和保存于重叠数据保存部34的数据保存于显示数据保存部35,由此使重叠目标重叠于网页进行显示。这些保存部例如也能由VRAM(VideoRAM:图像随机存取存储器)构成。
复制文本保存部36保存作为复制部20的复制对象的文本数据。另外,捕捉图像保存部37保存捕捉部21捕捉到的图像数据。并且,书签表38是书签控制部22用于管理书签的信息。
优先级清单表39是进行重叠目标的排序处理时指定显示顺序的信息。优先级清单表39在后面详细说明。
显示部300是根据控制部100控制显示图像的显示装置。另外,输入部400是接收信息处理装置1的用户的输入操作而将其输入到控制部100的输入装置。在此,说明以显示部300的显示面作为输入部400的输入面而构成显示部300和输入部400的例子。也就是说,在此,说明信息处理装置1具备触摸面板的例子。当然,显示部300只要具有显示图像的功能即可,另外,输入部400只要具有接收输入操作的功能即可,不限于该例子。而且,显示部300和输入部400也可以是外置于信息处理装置1的外部的装置。
通信部500是用于供信息处理装置1与外部的机器进行通信的通信装置。具体地说,信息处理装置1使用通信部500来经过互联网等网络接收网页等的内容。
〔表的具体例〕
图12是示出背景图层管理表30的具体例的图。图示的背景图层管理表30是使浏览器动作用参数、显示更新区域参数和数据保存目的地相对应的表。
浏览器动作用参数是用于将网页显示于背景图层,使该网页动作所需的参数。另外,显示更新区域参数是表示在显示画面上成为更新对象的区域的参数,在更新背景图层的显示时使用。在图示的例子中,成为更新对象的矩形区域用其左上角的坐标(x,y)以及宽度(1200像素)和高度(800像素)表示。并且,数据保存目的地示出显示于背景图层的网页在页面数据保存部33中的保存目的地地址。
图13是示出重叠图层管理表31的具体例的图。图示的重叠图层管理表31是浏览器动作用参数、外形数据、基准坐标、显示倍率、旋转角度、显示更新区域参数、数据保存目的地、与背景图层的关联、复原用显示更新参数、关联Gr(组)、已关联的图层、优先级值和显示关键字的对应表。
浏览器动作用参数是用于将网页显示于重叠图层并使该网页动作所需的参数。另外,外形数据是示出重叠目标的外形形状的数据。在图示的例子中,将构成指定重叠目标的范围的操作的轨迹的全部坐标保存为外形数据。并且,基准坐标是将显示画面上的触摸位置的坐标变换为重叠图层上的触摸位置的坐标时成为基准的坐标。基准坐标在后面详细说明。另外,显示倍率是示出将显示于重叠目标的图像相对于原网页的图像以几倍显示的参数。另外,旋转角度是示出将显示于重叠目标的图像相对于原网页的图像如何旋转显示的参数。并且,显示更新区域参数是示出在显示画面上成为更新对象的区域的参数,在更新重叠图层的显示时使用。在图示的例子中,成为更新对象的矩形区域用其左上角的坐标(x2,y2)以及宽度(300像素)和高度(400像素)表示。另外,数据保存目的地表示重叠图层所显示的内容在重叠数据保存部34中的保存目的地地址。
与背景图层的关联表示重叠图层与背景图层是否关联。在图示的例子中,该参数为“无”,表示该重叠图层未与背景图层关联。在此,在将重叠目标拖曳到画面外时,将该参数更新为“有”,显示关联带图像来代替显示该重叠目标。因此,能从该参数的值判断显示于该重叠图层的图像是重叠目标还是关联带图像。
复原用显示更新参数在再次显示重叠目标来代替显示关联带图像时使用。在图示的例子中,再次显示时成为更新对象的矩形区域用其左上角的坐标(x3,y3)以及宽度(300像素)和高度(400像素)表示。
关联组是用于将关联的多个重叠目标作为1个组进行识别的参数,对于相互已关联的重叠目标,使它们属于同一组,将关联组的参数设为相同。在图示的例子中,关联组为2,由此表示与关联组为2的其它重叠图层关联。另外,已关联的图层表示关联的其它重叠图层(重叠目标)。
优先级值是表示重叠目标的显示的优先顺序的参数,在对重叠目标排序时使用。另外,显示关键字示出使重叠目标进行关键字显示时所显示的关键字。
图14是示出优先级清单表39的具体例的图。图示的优先级清单表39是优先级清单NO.(编号)、状态和整理顺序的对应表。此外,将优先级清单编号、状态和整理顺序的组合称为优先级清单。
优先级清单编号是与重叠图层管理表31的关联组相关的值,能从关联组确定优先级清单编号。在此,将关联组和用于该关联组的排序的优先级清单的优先级清单编号设为相同的值。
也就是说,在对某个关联组进行排序时,根据用与该关联组相同的编号的优先级清单编号确定的优先级清单的整理顺序进行排序。例如,在对图13的重叠图层(1)进行排序的情况下,关联组为2,因此按照图14的编号2的优先级清单的整理顺序,按重叠图层(3)-(5)-(1)的顺序进行排序。
〔映射〕
基于图15说明映射32。图15是说明映射32的图,该图的(a)示出映射32的设定例,该图的(b)示出基于该图的(a)的映射32的图层显示的例子。另外,在该图的(a)中,用虚线示出在重叠数据保存部34中保存数据的像素的范围。
在映射32中,针对构成所显示的图像的各像素,设定作为所显示的背景图层的数据的属性的“透过”,或者作为要显示的重叠图层的数据的属性的“重叠”。更详细地说,将透过属性的像素的值设为“0”,将重叠属性的像素的值设为n(n为大于等于1的整数)。在该图的(a)的例子中,对各像素设定“0”、“1”或者“2”的值。然后,信息处理装置1使设定了相同值的像素显示同一图层的数据。
也就是说,通过使用该图的(a)的映射32,如该图的(b)所示,使设定了“0”的值的像素显示背景图层的图像L1。并且,基于在重叠数据保存部34中保存有数据的像素中的设定了“1”的值的像素的数据进行显示,其结果是显示重叠图层的图像L2。同样,使设定了“2”的值的像素显示其它重叠图层的图像L3。
如上所述,映射32示出要显示重叠图层的像素的数据的区域,因此能通过参照映射32来仅将重叠图层的网页的一部分重叠显示于背景图层的网页。也就是说,在信息处理装置1中,在进行指定网页范围的操作时,将该网页在新的图层(重叠图层)打开。然后,根据映射32而仅针对新打开的网页中的与指定的范围对应的部分进行画面显示,由此实现重叠目标的显示。
另外,除了上述属性以外,在映射32中还设定有作为显示关联带图像的属性的“关联带图像”和表示重叠图层彼此的重叠关系的“重叠的图层”。在后面说明这些属性的设定。
〔从基准坐标确定重叠图层上的触摸位置的方法〕
基于图16说明从基准坐标确定重叠图层上的触摸位置的方法。图16是示出从基准坐标确定重叠图层上的触摸位置的方法的图。在该图中,重叠图层用L4表示,背景图层用L5表示。
在重叠图层L4中将背景图层L5的网页放大显示,因此重叠图层L4变得比背景图层L5大。不过,重叠图层L4的图像中成为显示对象的图像仅为背景图层L5内侧的与映射32中的重叠属性的像素对应的部分的图像。也就是说,仅将重叠图层L4的图像中的与重叠属性的像素对应的部分显示为重叠目标。
在该图中,包含重叠目标的矩形区域用虚线表示。该矩形区域的左上角的坐标是基准坐标。也就是说,能通过从重叠目标的外形数据确定上述矩形区域来求出基准坐标。基准坐标在重叠图层L4中以重叠图层L4的左上角的原点为基准表示为(x1,y1),在背景图层L5中,以背景图层L5的左上角的原点为基准表示为(x2,y2)。
在此,对重叠目标上的点x进行触摸操作。设进行了该触摸操作的位置的坐标(以背景图层L5的左上角的原点为基准)为(x,y),则重叠图层上的触摸位置的坐标表示为(x1-x2+x,y1-y2+y)。能通过使用该坐标值来确定对重叠图层进行了何种操作(例如选择了哪个链接)。
〔目标显示处理〕
接着,基于图17说明作为显示重叠目标的处理的目标显示处理(显示控制方法)流程。图17是示出目标显示处理的一个例子的流程图。
首先,操作判断部10根据从输入部400通知的信息检测对显示中的网页进行的触摸操作(S1)。然后,操作判断部10判断触摸操作是否是长按(是否在相同的位置触摸规定时间以上)(S2)。
在此,在判断为触摸操作不是长按的情况下(S2为否),操作判断部10判断为进行了通常的触摸操作,对触摸处理部13通知触摸位置的坐标,进行通常触摸处理(S3)。在通常触摸处理中,触摸处理部13进行与所触摸的位置相应的处理。例如,在所触摸的位置显示了链接的情况下,进行显示该链接目的地的内容的处理,在显示了按钮的情况下进行与该按钮对应的处理。在进行了通常触摸处理的情况下,信息处理装置1结束目标显示处理。
另一方面,在判断为触摸操作是长按的情况下(S2为是),操作判断部10将该意思通知给重叠显示处理部12。接收到该通知的重叠显示处理部12转移到范围指定模式(S4)。转移到范围指定模式的重叠显示处理部12显示预先存储的范围指定模式用的光标来代替显示此前显示的光标。然后,重叠显示处理部12通过操作判断部10取得输入到输入部400的触摸位置的坐标值(S5,接收步骤)。接着,重叠显示处理部12从所取得的坐标值生成表示选择范围的外形(范围指定模式下的触摸位置的轨迹)的外形数据(S6),判断触摸操作是否结束(S7)。
在此,在判断为触摸操作未结束的情况下(S7为否),处理返回S5。另一方面,在判断为触摸操作结束的情况下(S7为是),重叠显示处理部12以生成的外形数据为基础设定基准坐标(S8)。然后,重叠显示处理部12解除范围指定模式(S9),进行重叠设定处理(S10,重叠显示步骤)。此后,显示控制部18进行显示更新处理(S11),由此显示重叠目标,目标显示处理结束。
此外,在进行S10的处理之前,预先已将指定了范围的背景图层的内容数据(构成网页的数据,例如HTML文件和图像数据)保存到页面数据保存部33,在重叠图层管理表31中设定了保存目的地地址。
〔重叠设定处理〕
接着,基于图18详细说明在图17的S10中进行的重叠设定处理。图18是示出重叠设定处理的一个例子的流程图。重叠设定处理是用于将重叠目标重叠于网页进行显示的处理。
首先,重叠显示处理部12将重叠图层管理表31的重叠图层浏览器动作用的参数初始化(S20)。另外,重叠显示处理部12对重叠图层管理表31包含的保存目的地地址所示的内容数据进行解码(或者解析)(S21)。然后,重叠显示处理部12以规定的放大率将通过解码得到的字符串和图像放大,布置到重叠数据保存部34(S22)。此外,在不需要放大的情况下,也可以将放大率设为1倍。
接着,重叠显示处理部12基于在图17的S6中生成的外形数据,在映射32中将指定了范围的坐标(构成指定范围的操作轨迹的坐标)设定为重叠属性(S23)。另外,重叠显示处理部12在映射32中将指定了范围的内侧(由指定范围的操作轨迹包围的区域)设定为重叠属性(S24)。然后,重叠显示处理部12设定表示更新显示的区域的显示更新区域参数(例如基准坐标以及包含外形数据的表示矩形区域的宽度和高度的参数)(S25),将其保存于重叠图层管理表31。另外,重叠显示处理部12将更新了显示更新区域参数的意思通知给显示控制部18,由此,重叠设定处理结束。
〔显示更新处理〕
接着,基于图19详细说明在图17的S11中进行的显示更新处理。图19是示出显示更新处理的一个例子的流程图。接收到更新了显示更新区域参数的意思的通知的显示控制部18对显示更新区域内的全部坐标进行LP1至LP2的处理。首先,显示控制部18根据显示更新区域参数决定更新的坐标(S30)。具体地说,显示控制部18从显示更新区域参数所示的区域内决定1个坐标。接着,显示控制部18参照映射32,判断所决定的坐标的属性是否是“透过”(S31)。
在此,在判断为是“透过”的情况下(S31为是),显示控制部18从页面数据保存部33读出与在S30中决定的坐标对应的像素的数据(S32),进入S35的处理。另一方面,在判断为不是“透过”的(为“重叠”)的情况下(S31为否),显示控制部18从重叠数据保存部34读出与在S30中决定的坐标对应的像素的数据(S33)。另外,显示控制部18以重叠图层的旋转角度和基准坐标为基础,将该坐标变换为旋转后的坐标(S34),进入S35的处理。
在S35中,显示控制部18算出与显示数据保存部35中的上述坐标(在S30中决定的坐标,或者在S34中进行了变换的情况下变换后的坐标)相应的写入目的地地址。然后,显示控制部18将在S32或者S33中读出的像素的数据设定到显示数据保存部35(S36)。针对显示更新区域参数所示的区域内的全部坐标进行了以上说明的S30至S36的处理后,显示控制部18将显示数据保存部35的数据传输给显示部300(S37)。由此,显示部300显示的图像被更新,显示更新处理结束。
〔触摸操作对应处理〕
接着,基于图20说明进行了触摸操作时执行的触摸操作对应处理。图20是示出触摸操作对应处理的一个例子的流程图。此外,触摸操作是指通过用一根手指接触显示面来进行的操作。
首先,操作判断部10当根据从输入部400通知的信息检测出对显示中的网页进行了触摸操作时,取得触摸位置的坐标(S40)。此后,操作判断部10参照映射32检索被触摸的重叠图层,重复进行LP3至LP4的处理直到重叠图层的检索结束为止。
在LP3至LP4的处理中,操作判断部10首先从重叠图层管理表31读出检测到的重叠图层的旋转角度和基准坐标,对在S40中取得的坐标进行坐标变换,以基准坐标为中心按上述旋转角度进行反向旋转(S41)。此外,在检测出的重叠图层未旋转的情况下,设旋转角度为0来进行S41的处理。在这种情况下,虽然在S41中坐标没有变化,但是能通过这种构成来与有无旋转无关地共用处理过程。
接下来,操作判断部10参照映射32判断通过S41的变换得到的坐标的属性是否是透过(S42)。在此,在判断为属性不是透过的(为重叠)的情况下(S42为否),操作判断部10将该意思通知给背景关联部23。接收到该通知的背景关联部23判断检测到的重叠图层是否是关联带显示状态(S49a)。具体地说,从重叠图层管理表31读出与检测出的重叠图层有关的信息,在与背景图层的关联为“有”的情况下,判断为该重叠图层是关联带显示状态。
在此,在判断为检测出的重叠图层是关联带显示状态的情况下(S49a为是),背景关联部23将该意思通知给重叠显示处理部12。重叠显示处理部12接收该通知,用重叠图层管理表31的复原用显示更新参数来更新显示更新区域参数(S49b),将显示更新区域参数的更新通知给显示控制部18。显示控制部18接收该通知,进行显示更新处理(S11),触摸操作对应处理结束。由此,使与检测出的重叠图层对应的重叠目标再次显示来代替所显示的关联带图像。此外,用于使重叠目标再次显示的操作可以是拖曳关联带图像的操作,也可以是其它操作。
另一方面,在判断为检测出的重叠图层不是关联带显示状态的情况下(S49a为否),背景关联部23对操作判断部10通知该意思。接收了该通知的操作判断部10判断是否触摸了重叠图层的边缘(外缘部)(S43)。具体地说,操作判断部10参照映射32,在S40中取得的坐标存在于规定上述重叠图层的外形的像素(最外侧的像素)上或者存在于离该像素为规定范围内的重叠图层的像素上的情况下,判断为触摸了边缘。
在此,在判断为触摸了边缘的情况下(S43为是),操作判断部10判断为进行变形处理,将该意思通知给变形部15。接收到该通知的变形部15响应于触摸操作进行变形处理而使重叠目标变形(S44),由此触摸操作对应处理结束。
另一方面,在判断为未触摸边缘(触摸了重叠目标外缘部的内侧的区域)的情况下(S43为否),对重叠图层进行触摸处理或者滚动处理(S45)。具体地说,在触摸位置不发生变化并且在规定时间以内触摸结束的情况下,操作判断部10将该触摸位置的坐标和成为操作对象的重叠图层通知给触摸处理部13,进行触摸处理。在触摸处理中,触摸处理部13在触摸位置有链接的情况下,下载该链接目的地的内容,解码,将该内容数据中包含的字符串、图像以规定的放大率布置到重叠数据保存部34。另外,在规定时间以内触摸位置发生了变化的情况下,操作判断部10将变化前后的触摸位置和作为操作对象的重叠图层通知给滚动处理部14,进行滚动处理。在滚动处理中,按照触摸位置的坐标值的变化大小来使保存于重叠数据保存部34的数据变化。然后,触摸处理部13或者滚动处理部14设定显示更新区域参数,上述显示更新区域参数表示包括成为操作对象的重叠图层的区域(S46),将显示更新区域参数的更新通知给显示控制部18。此后,显示控制部18进行上述显示更新处理(S11),由此显示于显示部300的图像被更新,触摸操作对应处理结束。
在此,在操作判断部10在S42中判断为坐标的属性为透过时(S42为是),在重叠图层的检索全部结束的情况下,对背景图层进行触摸处理或者滚动处理(S47)。此外,背景图层的触摸处理和滚动处理仅有成为处理对象的图层不同,处理的内容与S45是同样的,因此在此省略详细的说明。然后,触摸处理部13或者滚动处理部14设定表示背景图层的区域的显示更新区域参数(S48),将其通知给显示控制部18。此后,显示控制部18进行显示更新处理(S11),由此显示于显示部300的图像被更新,触摸操作对应处理结束。
〔两指触摸操作对应处理〕
接着,基于图21和图22说明两指触摸操作对应处理。图21和图22是示出两指触摸操作对应处理的一个例子的流程图,图21的A和图22的A是相连的。此外,上述两指触摸操作是指用两根手指同时触摸显示面而进行的操作。如上述那样,在一根手指进行的触摸操作中,进行触摸处理或者滚动处理。而在两指触摸操作中,进行目标的移动或者旋转。这样,在信息处理装置1中,根据操作所使用的手指个数来进行不同的处理。
首先,操作判断部10根据从输入部400通知的信息取得被触摸的两点的坐标,将这些坐标设定为“以前取得的坐标”(S60)。接下来,操作判断部10参照映射32判断是否两根手指触摸了同一个图层(S61)。
在此,在判断为未触摸同一图层的情况下(S61为否),操作判断部10参照背景图层管理表30判断用两根手指触摸的图层中的一个是否是背景图层(S75)。并且,在判断为一个是背景图层的情况下(S75为是),操作判断部10判断为进行通常的触摸操作,将触摸位置的坐标通知给触摸处理部13,进行上述的通常触摸处理(S3)。由此,两指触摸操作对应处理结束。另一方面,在判断为用两根手指触摸的图层中的一方不是背景图层的情况下(S75为否),即,用两根手指分别触摸了不同的重叠图层的情况下,操作判断部10将该意思通知给图层间关联部24。另外,在该通知之后,在两根手指分别触摸不同的重叠图层的状态持续的期间,将两点的触摸位置通知给图层间关联部24。由此,由图层间关联部24进行图层间关联处理(S76)。图层间关联处理在后面详细说明。
另一方面,在判断为触摸了同一图层的情况下(S61为是),操作判断部10判断触摸是否持续了规定时间(S62)。在此,在规定时间经过前触摸被解除的情况下(S62为否),操作判断部10将触摸被消除为止的触摸位置的坐标和成为操作对象的图层通知给倍率变更部17,进行倍率变更处理(S63)。在倍率变更处理中,倍率变更部17更新成为操作对象的图层的数据(页面数据保存部33或者重叠数据保存部34中保存的数据),以与所通知的上述坐标相应的显示倍率进行显示。具体地说,进行所谓捏合操作时进行更新使得显示图像缩小,在进行扩张操作时进行更新使其放大。然后,倍率变更部17设定包含更新后的区域的显示更新区域参数,将该意思通知给显示控制部18。此后,显示控制部18进行上述显示更新处理,由此显示于显示部300的图像被更新,两指触摸操作对应处理结束。
另一方面,在S62中,在判断为触摸持续了规定时间的情况下(S62为是),操作判断部10将该意思和在S60中设定的坐标通知给移动处理部16。接收到该通知的移动处理部16转移到旋转/移动模式(S64)。转移到旋转/移动模式的移动处理部16显示预先存储的用于旋转/移动模式的光标来代替此前显示的光标。
接着,移动处理部16经操作判断部10取得当前时点的触摸位置的坐标,将这些坐标设定为“新取得的坐标”(S65)。接下来,操作判断部10决定“新取得的坐标”的中点,即决定表示在当前时点触摸显示面的两根手指的位置的坐标的中点。接着,操作判断部10参照背景图层管理表,判断该中点是否到达背景图层的显示更新区域的外周及其内侧几个像素即背景图层的边缘区域(背景图层的外缘区域)。由此,操作判断部10判断重叠图层是否被拖曳到画面外(S66)。
在判断为重叠图层被拖曳到画面外的情况下(S66为是),操作判断部10将该意思通知给背景关联部23。背景关联部23接收该通知,执行画面外拖曳处理(S67)。画面外拖曳处理在后面详细说明。
另一方面,在判断为重叠图层未被拖曳到画面外的情况下(S66为否),移动处理部16根据从操作判断部10通知的“以前取得的坐标”和上述“新取得的坐标”求出使重叠目标旋转的角度(S68)。具体地说,移动处理部16在存在与“以前取得的坐标”和“新取得的坐标”为相同距离(也可以将值的差异在规定范围以内的坐标视为相同的坐标)的坐标的情况下,将该坐标确定为中心坐标。然后,求出将该中心坐标与作为“以前取得的坐标”的另一坐标相连而成的线段和将该中心坐标与作为“新取得的坐标”的另一坐标相连而成的线段所成的角度。另一方面,在不存在中心坐标的情况下,移动处理部16根据“以前取得的坐标”和“新取得的坐标”求出重叠目标的移动量(S69)。具体地说,移动处理部16算出2个“以前取得的坐标”的中间位置的坐标和2个“新取得的坐标”的中间位置的坐标,算出这些中间位置的坐标间的距离。然后,计算与所算出的距离相应的移动量,再从这些中间位置的坐标间的位置关系确定移动方向。例如,也可以确定移动量和移动方向,使得重叠目标随着触摸位置而移动。
接下来,移动处理部16基于求出的移动量执行属性变更处理,更新映射32的属性(S70)。属性变更处理在后面详细说明。然后,移动处理部16设定显示更新区域参数,该显示更新区域参数指定了包含移动前后的该重叠图层的区域(S71),将该意思通知给显示控制部18,执行上述显示更新处理(S11)。
在此,在触摸操作持续的情况下(S72为否),移动处理部16将此前的“新取得的坐标”设定为“以前取得的坐标”(S73),返回S65的处理。另一方面,在触摸操作结束的情况下(S72为是),移动处理部16解除旋转/移动模式,光标返回原样(S74)。由此,两指触摸操作对应处理结束。根据上述两指触摸操作对应处理,用户能使接触显示面的两根手指滑动,并且通过以一个手指为起点另一个手指画弧来同时进行移动和旋转。由此,能以直观的操作迅速并且顺畅地进行用于将重叠目标按所希望的方向显示在所希望的位置的输入。
此外,判断是否拖曳到画面外的判断方法不限于上述例子。例如,移动处理部16也可以在成为重叠目标的外形数据中包含的至少1个坐标不包含在背景图层的显示更新区域中的状态的情况(重叠目标的至少一部分为不显示的状态的情况)下,判断为被拖曳到画面外。
〔画面外拖曳处理〕
接下来基于图23说明在图22的S67中进行的画面外拖曳处理。图23是示出画面外拖曳处理的一个例子的流程图。此外,向画面外的拖曳是指使触摸位置到达显示画面的端部的拖曳操作,通过将重叠目标拖曳到画面外来将该重叠目标移动到显示画面的端部后,使其不显示。
首先,接收到重叠图层被拖曳到画面外的意思的通知的背景关联部23在重叠图层管理表31中将与被拖曳的重叠目标对应的重叠图层的背景图层的关联设定为有(S80)。接着,背景关联部23将该重叠图层的像素的映射属性变更为“透过”(S81)。进而,背景关联部23基于初始坐标设定关联带的形状来代替该重叠图层的外形数据的形状,将与该关联带的形状对应的像素的映射属性变更为“关联带图像”(S82)。“关联带图像”是重叠属性的一种,在该属性的像素中显示规定的颜色。此外,初始坐标是生成该重叠图层的时点的基准坐标,是预先存储的。另外,关联带的形状是以生成与上述重叠图层对应的重叠目标时指定范围的位置为一端,将重叠目标最后被显示的位置(画面端)设为另一端的形状。由此,从指定了范围的位置到重叠目标变得不显示的位置为止以上述规定的颜色进行显示,将其识别为关联带图像。
另外,背景关联部23将重叠目标最后被显示的位置的显示更新区域参数保存为复原用显示更新参数(S83)。而且,背景关联部23设定表示在S82中设定了关联带的形状的区域的显示更新区域参数(S84),将显示更新区域参数的更新通知给显示控制部18,进行显示更新处理(S11)。由此,显示关联带图像来代替显示重叠目标。另外,背景关联部23将处理的完成通知给移动处理部16,接收到该通知的移动处理部16解除旋转/移动模式,使光标返回原样(S85)。由此,画面外拖曳处理结束。
通过以上处理,表示被拖曳到画面外的重叠目标变为不显示的情况的关联带图像基于初始坐标被显示。另外,表示不显示紧前的重叠目标的位置的显示更新区域参数被记录为复原用显示更新参数。由此,能使重叠目标再次显示于该位置。此外,使重叠目标再显示的位置不限于不显示的紧前的位置。例如,也可以将进行使重叠目标不显示的操作(在该例子中为拖曳操作)紧前的显示更新区域参数记录为复原用显示更新参数。在这种情况下,能使重叠目标在进行拖曳操作紧前的位置再次显示。另外,例如也可以将重叠目标的初始显示位置(重叠目标被生成并显示的时点的显示位置)的显示更新区域参数记录为复原用显示更新参数。在这种情况下,能使重叠目标再次显示于初始显示位置。
〔属性变更处理〕
接着,基于图24说明在图22的S70中进行的属性变更处理。图24是示出属性变更处理的一个例子的流程图。
算出了重叠目标的移动量的移动处理部16针对成为该重叠目标的移动目的地的全部像素进行LP5至LP6的处理。首先,移动处理部16判断移动目的地的像素的映射属性是否是透过,或者是否是与移动中的重叠图层相同的重叠图层中包含的像素(S90)。在移动目的地的像素的映射属性为透过,或者是与移动中的重叠图层相同的重叠图层中包含的像素的情况下(S90为是),移动处理部16将该移动目的地的像素的映射属性变更为重叠属性(S91),对下一个像素进行处理。
另一方面,在移动目的地的像素的映射属性不是透过,并且是与移动中的重叠图层不同的重叠图层中包含的像素的情况下(S90为否),移动处理部16将该意思通知给图层间关联部24。接收到该通知的图层间关联部24将移动目的地的像素显示的重叠图层的映射属性设定为“重叠的图层”(S92)。
接着,图层间关联部24参照重叠图层管理表31,在判断移动中的重叠图层的“已关联的图层”中是否登记了重叠的图层(S93)。
在此,在移动中的重叠图层的“已关联的图层”中登记了重叠的图层的情况下(S93为是),将该意思通知给移动处理部16。接收了该通知的移动处理部16将其移动目的地的映射属性变更为与移动中的重叠图层对应的重叠属性(S91),对下一个像素进行处理。
另一方面,在移动中的重叠图层已关联的图层中未登记重叠的图层的情况下(S93为否),图层间关联部24将重叠的图层登记到重叠图层管理表31中包含的针对移动中的重叠图层的“已关联的图层”中(S94)。同样,图层间关联部24将移动中的重叠图层登记到重叠图层管理表31中包含的针对重叠的图层的“已关联的图层”中(S95),将该意思通知给移动处理部16。接收了该通知的移动处理部16将该移动目的地的像素的映射属性变更为与移动中的重叠图层对应的重叠属性(S91),对下一个像素进行处理。
通过以上处理,在重叠目标被移动而与其它重叠目标重叠的情况下,将这些重叠目标关联。即,如图5(b)所示,用户能通过进行使重叠目标彼此重叠的操作来使该重叠目标彼此关联。
〔图层间关联处理〕
接下来,基于图25说明在图21的S76中进行的图层间关联处理。图25是示出图层间关联处理的一个例子的流程图。
在从操作判断部10接收了两根手指分别触摸不同的重叠图层的意思的通知的图层间关联部24中,在操作判断部10判断为持续保持两根手指触摸不同的重叠图层的状态的期间,反复进行LP7至LP8的处理。此外,在此,设一个手指触摸的重叠图层为图层A,另一个手指触摸的重叠图层为图层B。
首先,图层间关联部24基于表示操作判断部10所输出的触摸位置的信息判断是否进行了所谓捏合动作(S100)。在判断为进行了捏合动作的情况下(S100为是),图层间关联部24判断图层A和B的关联组是否相等(S101)。在判断为关联组相等的情况下(S101为是),如果两根手指分别触摸不同的重叠图层的状态持续,则再次重复LP7至LP8的处理。
另一方面,在判断为关联组不同的情况下(S101为否),图层间关联部24将图层B设定于重叠图层管理表31中包含的图层A的“已关联的图层”(S102)。同样,图层间关联部24将图层A设定于重叠图层管理表31中包含的图层B的“已关联的图层”(S103)。
接着,图层间关联部24设定关联组(S104),进行关联带图像设定处理(S105)。设定关联组的顺序和关联带图像设定处理在后面说明。另外,在进行了S105的处理之后,如果两根手指分别触摸不同的重叠图层的状态持续,则再次重复LP7至LP8的处理。
在S100中判断为进行了捏合动作的情况下(S100为否),图层间关联部24基于操作判断部10输出的信息判断是否进行了所谓扩张动作(S106)。在判断为进行了扩张动作的情况下(S106为是),判断为图层A和B的关联组不同(S107)。
在此,在关联组不同的情况下(S107为是),如果两根手指分别触摸不同的重叠图层的状态持续,则再次重复LP7至LP8的处理。另一方面,在关联组相同的情况下(S107为否),图层间关联部24从重叠图层管理表31中包含的图层A的“已关联的图层”删除图层B(S108)。同样,图层间关联部24从重叠图层管理表31中包含的图层B的“已关联的图层”删除图层A(S109)。接着,图层间关联部24将重叠图层管理表31中包含的图层A和图层B的关联组设定为(值:0)(S110),然后进行关联带图像解除处理(S111)。在进行了S111的处理之后,如果两根手指分别触摸不同的重叠图层的状态持续,则再次重复LP7至LP8的处理。
在S106中未判断为进行了扩张动作的情况下(S106为否),如果两根手指分别触摸不同的重叠图层的状态持续,则再次重复LP7至LP8的处理。
通过以上处理,如图5(a)所示,在触摸未关联的两个重叠目标而进行捏合动作的情况下,该两个重叠目标被关联。另外,在保持触摸已关联的两个重叠目标而进行扩张动作的情况下,该两个重叠目标的关联被解除。
〔关联组的设定〕
以下说明在图25的S104中进行的关联组的设定过程。在对图层A和B双方设定了关联组的情况下,统一为较小的值的关联组。也就是说,将两个关联组中的值较大的关联组的值更新为较小的关联组的值。另外,与关联组的变更相应,优先级清单也发生更新。即,将与变为未被使用的关联组(值较大的关联组)对应的优先级清单的状态更新为未使用。
另一方面,在对图层A和B均未设定关联组的情况下,从优先级清单表39取得未使用的优先级清单编号。然后,将该编号作为针对图层A和B的关联组,设定于各自的重叠图层管理表31。
另外,在仅对图层A或者B中的一方设定了关联组的情况下,对未设定关联组的重叠图层的关联组设定已设定了关联组的重叠图层的关联组的值。
〔关联带图像设定、解除处理〕
基于图26说明在图25的S105、S111中进行的关联带图像设定处理和关联带图像解除处理。图26是示出关联带图像设定、解除处理的一个例子的流程图。
首先,图层间关联部24分别取得作为被两根手指分别触摸的重叠图层的图层A和B的中心坐标(S120)。此外,中心坐标是包围与重叠图层对应的重叠目标的矩形的中心坐标,能通过参照重叠图层管理表31的显示更新区域参数来确定。接着,图层间关联部24确定将所取得各个中心坐标相连的直线上的坐标(S121)。
接下来,图层间关联部24将确定的各坐标作为对象进行LP9至LP10的处理。首先,图层间关联部24判断成为处理对象的坐标的映射属性是否等于图层A或者B,即,判断其值是否是表示图层A或者B的值(S122)。在该映射属性与图层A或者B的属性一致的情况下(S122为是),针对下一个坐标进行LP9至LP10的处理。
另一方面,在该映射属性与图层A和B中的任一属性均不一致的情况下(S122为否),图层间关联部24判断是否是关联带图像的设定(S123)。即,判断是关联带图像设定处理还是关联带图像解除处理。在判断为是关联带图像的设定的情况下(S123为是),即,在是关联带图像设定处理的情况下,将成为处理对象的坐标的映射属性设定为“关联带图像”(S124),针对下一个坐标进行LP9至LP10的处理。
另一方面,在判断为不是关联带图像的设定的情况下(S123为否),即,在是关联带图像解除处理的情况下,将成为处理对象的坐标的映射属性设定为“透过”(S124),针对下一个坐标进行LP9至LP10的处理。
如上所述,根据关联带图像设定处理,以将图层A和B相连的方式显示关联带图像。另外,根据关联带图像解除处理,消除了将图层A和B相连的关联带图像。此外,通过S120、S121的处理决定的直线(表示显示关联带图像的坐标的直线)也可以置换为曲线。另外,该直线或者曲线的端点可以是图层A中包含的重叠目标和图层B中包含的重叠目标中分别包含的任一点。
〔关键字显示处理〕
基于图27说明显示关键字目标来代替显示重叠目标的处理即关键字显示处理。图27是示出关键字显示处理的一个例子的流程图。
操作判断部10在判断为进行了从特定的重叠目标的菜单选择关键字显示的操作的情况下(S130),将该意思通知给关键字显示部25,转移到关键字选择模式(S131)。在关键字选择模式中,关键字显示部25根据从操作判断部10发送的触摸位置的坐标取得触摸开始位置的坐标(S132),等待触摸的结束(S133)。
在判断为触摸结束的情况下(S133为是),关键字显示部25取得触摸结束位置的坐标(从操作判断部10最后接收的坐标)(S134)。接着,关键字显示部25基于取得的触摸开始位置和结束位置的坐标进行关键字取得处理(S135)。关键字取得处理在后面详细说明。
接下来,关键字显示部25针对作为关键字显示的对象的重叠目标,清除重叠数据保存部34中保存的数据(S136)。接着,关键字显示部25生成关键字显示窗口,描绘到重叠数据保存部34(S137),将在S135中取得的关键字描绘到上述关键字显示窗口内(S138)。而且,关键字显示部25将与该重叠图层的各像素对应的映射属性设定为“透过”(S139),接着,将与所描绘的关键字显示窗口对应的各像素所对应的映射属性设定为“重叠”(S140)。
另外,关键字显示部25在重叠图层管理表31中将该重叠图层的显示更新区域参数设定为复原用显示更新参数(S141),然后,将包含关键字显示窗口的矩形区域设定为显示更新区域参数(S142)。然后,关键字显示部25解除关键字选择模式(S143),将显示更新区域参数的更新通知给显示控制部18,显示控制部18进行显示更新处理(S11)。由此,关键字显示处理结束。
通过以上处理,用户能将重叠目标变更为关键字显示。另外,重叠目标的显示位置被保存为复原用显示更新参数,因此能参照该参数来使重叠目标再次显示在变更为关键字显示前的位置。
此外,在上述例子中,在进行了从菜单选择关键字显示的操作的情况下进行关键字取得处理,但是关键字取得处理也可以在进行这种操作之前进行。在这种情况下,省略S131~S135的处理。另外,可以使作为关键字显示的对象的重叠目标中仅包括显示了菜单的重叠目标,也可以还包括与该重叠目标已关联的其它重叠目标。
〔关键字取得处理〕
接着,基于图28说明在图27的S135中进行的关键字取得处理。图28是示出关键字取得处理的一个例子的流程图。在此,将坐标的x成分表示为坐标(x),将坐标的y成分表示为坐标(y)。
首先,关键字显示部25求出作为触摸开始位置的y坐标的触摸开始坐标(y)与作为触摸结束位置的y坐标的触摸结束坐标(y)的中点的坐标(S150)。然后,将求出的中点的坐标设定为作为复制的开始和结束的基准的y坐标(S151)。
另外,关键字显示部25将触摸开始位置的x坐标设定为复制开始坐标(x)(S152)。通过S151和S152的处理来决定复制开始位置的x和y坐标。然后,关键字显示部25判断该复制开始坐标的映射属性是否为重叠(S153)。在判断为复制开始坐标的映射属性不是重叠的情况下(S153为否),关键字显示部25使复制开始坐标(x)增加固定值(例如1)(S154),然后判断复制开始坐标的映射属性是否为重叠(S153)。
另一方面,在判断为复制开始坐标的映射属性为重叠的情况下(S153为是),关键字显示部25将当前的复制开始坐标(x)决定为复制开始坐标(x)(S155)。进而,关键字显示部25将该复制开始坐标(x)设定为复制结束坐标(x)的初始值。
接着,操作判断部10使复制结束坐标(x)增加固定值(例如1)(S156),判断复制结束坐标的映射属性是否为透过(S157)。在判断为复制结束坐标的映射属性不是透过的情况下(S157为否),返回S156的处理。
另一方面,在判断为复制结束坐标的映射属性是透过的情况下(S157为是),关键字显示部25判断复制结束坐标(x)是否为触摸结束坐标(x)以下(S158)。在复制结束坐标(x)为触摸结束坐标(x)以下的情况下(S158为是),返回S156的处理。
另一方面,在复制结束坐标(x)不为触摸结束坐标(x)以下的情况下,也就是说在复制结束坐标(x)与触摸结束坐标(x)一致的情况下(S158为否),关键字显示部25将当前的复制结束坐标(x)决定为最终的复制结束坐标(x)(S159)。
接着,关键字显示部25判断在从复制开始坐标到复制结束坐标为止的范围中是否有成为复制的对象的字符串(S160)。在有成为复制的对象的字符串的情况下(S160为是),在重叠图层管理表31中,将该字符串设定为显示关键字(S161),结束关键字取得处理。
另一方面,在复制开始坐标和复制结束坐标所示的范围中没有成为复制的对象的字符串的情况下(S160为否),关键字显示部25解除关键字选择模式(S162),结束关键字显示处理。
通过以上处理,在关键字选择模式中,将被夹在触摸开始位置和触摸结束位置之间的重叠目标上的字符串设定为关键字。另外,复制开始坐标(y)与复制结束坐标(y)相等,因此仅重叠目标上的字符串中的与该重叠目标上的指定的位置对应的一个行中包含的字符串成为关键字设定的对象。
〔详细显示处理〕
接下来,基于图29说明使处于关键字显示状态的重叠目标返回详细显示状态的处理即详细显示处理。图29是示出详细显示处理的一个例子的流程图。
首先,操作判断部10在判断为利用菜单进行了选择详细显示的操作(从关键字目标中显示的菜单选择“关键字显示/详细显示”的项目的操作)的情况下(S170),将该意思通知给关键字显示部25。接收了该通知的关键字显示部25清除与该关键字目标对应的重叠数据保存部34中保存的数据(S171)。接着,关键字显示部25基于显示更新区域参数将映射属性设定为“透过”(S172)。由此,关键字显示窗口变得不显示。另外,关键字显示部25通知重叠显示处理部12从而使与上述关键字目标对应的重叠目标再次显示。
此后,利用重叠显示处理部12进行上述重叠目标的重叠设定处理(S10),接着利用显示控制部18进行显示更新处理(S11)。由此,重叠目标被再次显示,详细显示处理结束。
〔优先级设定处理〕
基于图30说明设定用于对重叠目标进行排序的优先级的优先级设定处理。图30是示出优先级设定处理的一个例子的流程图。
操作判断部10在判断为从菜单选择了优先级设定的情况下(S180),将该意思通知给优先显示处理部26。接收了该通知的优先显示处理部26显示设定窗口(S181)。设定窗口是用于设定所选择的重叠图层(与显示了菜单的重叠目标对应的重叠图层)的优先级值的用户界面。接下来,优先显示处理部26尝试从重叠图层管理表31读出所选择的重叠图层的优先级值(S182),判断是否有优先级值的设定(S183)。
在此,在判断为没有优先级值的设定的情况下(S183为否),优先显示处理部26判断是否利用设定窗口设定了优先级值(S184)。在未设定优先级值的情况下(S184为否),使优先级设定处理结束。另一方面,在设定了优先级值的情况下(S184为是),优先显示处理部26从优先级清单表39取得与所选择的重叠图层的关联组对应的优先级清单(S185)。
接着,优先显示处理部26基于所设定的优先级值将所选择的重叠图层登记到所取得的优先级清单中(S186)。更详细地说,将所取得的优先级清单的整理顺序按优先级值的顺序登记。另外,优先显示处理部26将所设定的优先级值设定于重叠图层管理表31(S187),结束优先级设定处理。
在此,在S183中判断为有优先级值的设定的情况下(S183为是),优先显示处理部26判断是否利用设定窗口设定了优先级值(S188)。在未设定优先级值的情况下(S188为否),优先显示处理部26从优先级清单删除所选择的重叠图层(S189)。接着,执行从S187起的处理。
在S188中设定了优先级值的情况下(S188为是),优先显示处理部26判断设定的优先级值是否与当前的值(在S182中读出的值)相同(S190)。在判断为相同的情况下(S190为是),优先显示处理部26结束优先级设定处理。另一方面,在判断为不同的情况下(S190为否),优先显示处理部26基于设定的优先级值对优先级清单进行整理(S191)。此后执行S187以后的处理。
通过以上处理,将所设定的优先级值设定于重叠图层管理表31。另外,优先级清单表39中包含的整理顺序维持基于重叠图层管理表31的优先级值的顺序。
〔排序处理〕
基于图31说明根据优先级清单对重叠目标(重叠图层)进行排序的排序处理。图31是示出排序处理的一个例子的流程图。此外,排序处理是操作判断部10将在对所选择的重叠目标(重叠图层)的菜单中选择了排序的情况通知给优先显示处理部26时执行的。
首先,优先显示处理部26从优先级清单表39取得与所选择的重叠图层的关联组对应的优先级清单(S200),进行关联图层消除处理(S201)。关联图层消除处理在后面详细说明。
关联图层消除处理完成后,优先显示处理部26取得优先级清单的整理顺序中处于开头的重叠图层(S202)。接着,优先显示处理部26根据作为排序对象的重叠图层的基准坐标设定排序基准坐标(S203)。例如,也可以将优先级清单的整理顺序中包含的重叠图层中的x坐标和y坐标均最小的重叠图层(与离画面的左上角最近的重叠目标对应的重叠图层)的基准坐标设为排序基准坐标。
接着,优先显示处理部26按整理顺序取得优先级清单中包含的重叠图层,将所取得的重叠图层作为对象进行LP11至LP12的处理。首先,优先显示处理部26基于排序基准坐标更新成为对象的重叠图层的映射属性(S204)。具体地说,将排序基准坐标设为成为对象的重叠图层的基准坐标,更新以该基准坐标为基准的显示更新区域参数所示的区域的映射属性。另外,优先显示处理部26更新排序基准坐标(S205)。例如,也可以将优先级清单的整理顺序中包含的重叠图层中的与离画面的左上角第2近的重叠目标对应的重叠图层的基准坐标设为排序基准坐标。另外,例如也可以通过对排序基准坐标的x成分加上成为对象的重叠图层的宽度和预定的值来更新排序基准坐标,使得重叠目标从画面左端按顺序排列。然后,优先显示处理部26将优先级清单的下一顺位的重叠图层设为成为对象的重叠图层,进行LP11至LP12的处理。
通过以上的处理,已关联的重叠图层按所设定的优先级值的顺序排列。此外,排列的方向也可以适当地变更。另外,也可以如图9(b)的例子那样,对关联带图像的显示也进行更新,使得在接近的重叠目标间显示关联带图像。
〔关联图层消除处理〕
接着,基于图32说明在图31的S201中进行的关联图层消除处理。图32是示出关联图层消除处理的一个例子的流程图。
取得了优先级清单的优先显示处理部26将该优先级清单中包含的重叠图层作为对象,从整理顺序的开头起按顺序进行LP15至LP16的处理。首先,优先显示处理部26将与成为对象的重叠图层的外形数据中包含的坐标对应的像素的映射属性设为透过(S210)。
接着,优先显示处理部26从重叠图层管理表31读出与成为对象的重叠图层已关联的重叠图层,将读出的各重叠图层作为对象进行LP17至LP18的处理。即,优先显示处理部26针对读出的各个重叠图层进行处理,将与成为对象的重叠图层已关联的重叠图层的外形数据中包含的坐标所对应的像素的映射属性设为透过(S211)。然后,如果存在优先级清单中登记的其它重叠图层,则优先显示处理部26将该重叠图层作为对象进行从S210起的处理。
通过以上处理,所选择的重叠图层和与所选择的重叠图层直接或者间接地已关联的重叠图层全部不显示。
〔实施方式2〕
在上述实施方式中,示出了将表示不显示的重叠目标原来在背景图层上的位置作为通知信息而显示关联带图像的例子。然而,通知信息只要是能使用户识别该重叠目标原来在背景图层上的位置的信息即可,不限于该例子。例如,也可以利用文字、符号等表示不显示的重叠目标的存在和与该重叠目标对应的内容上的位置(指定范围上的位置)。其中,如果是关联带图像这种线状的图像,就能使用户一并识别重叠目标原来在内容(背景图层)上的位置和该重叠目标被拖曳到画面外的位置。另外,由于在显示画面上占有的面积小,不容易妨碍背景网页的阅览,因此优选通知信息是线状的图像。关于在重叠目标间进行了关联的信息也同样,优选如关联带图像那样的线状图像,但是不限于该例子。
在上述实施方式中,示出了在重叠目标被拖曳到画面外时将与该重叠目标对应的重叠图层管理表31的“与背景图层的关联”的参数更新为“有”的例子,但是更新的契机不限于该例子。例如,也可以在用户进行规定的操作(例如在同时触摸重叠目标和背景的网页的操作)时,将该参数更新为“有”。在这种情况下,也可以在重叠目标被拖曳到画面外等而不显示时,如果该参数为“有”则显示关联带图像,如果为“无”则不显示关联带图像而结束该重叠目标的显示。由此,能仅将用户想要再次确认的重叠目标作为对象切换成关联带图像的显示。
在信息处理装置1中,根据装置的形态等而决定如何规定输入操作即可,不限于上述的例子。例如,在上述的例子中用两根手指进行移动、旋转,但是也可以用一根手指进行的操作来进行这些处理。
另外,以上示出了在网页中显示重叠目标的例子,但是重叠目标中的作为显示对象的内容只要是以页面为单位显示的内容即可,不限于网页。例如,在信息处理装置1是电子词典的情况下,也可以基于XMDF等形式的数据显示图像,对所显示的图像中与指定的范围对应的重叠目标进行重叠显示。另外,在将信息处理装置1设为能显示电子书籍的装置的情况下,也可以基于EPUB等形式的数据显示图像,对所显示的图像中与指定的范围对应的重叠目标进行重叠显示。在这种数据中,与HTML的内容同样,包含有构成内容的各要素(文本、图像或者其参照目的地)和用于将这些要素配置在画面上的配置信息、表示链接的标签等。因此,能通过与上述实施方式同样的处理,与原页面独立地接收用户的输入操作,显示将该输入操作的结果反映于显示画面的重叠目标。
另外,针对网页以外的内容,也可以进行与上述书签处理同样的处理,将成为重叠目标的来源的内容中用于进行存取的信息与表示指定的范围的信息相对应地进行存储,由此能再现显示重叠目标的显示状态。例如,在显示电子书籍、电子词典的装置中,有的具有插入使从正在阅读的页面进行显示的“书签”的功能。在这种装置中,在显示了重叠目标的状态下进行插入“书签”的操作时,也可以将表示所显示的重叠目标的来源的页面的信息与表示该重叠目标的范围的信息相对应地存储。然后,可以在进行打开该“书签”的页面的操作时,使用存储的上述信息显示插入了“书签”的页面,并且将上述重叠目标重叠于该页面进行显示。
此外,在信息处理装置1中,基本上假定内容是供用户阅览而未假定进行编辑,因此所显示的内容也可以不是编辑的对象的内容(阅览专用的内容)。
并且,以上示出了显示通过通信网络取得的内容(网页)的例子,但是内容的取得处没有特别限定。例如,也可以显示保存于存储部200的内容,也可以将保存有内容的存储卡等记录介质连接到信息处理装置1,显示从该记录介质取得的内容。
〔实施方式3〕
信息处理装置1的控制块(特别是控制部100)可以由形成于集成电路(IC芯片)等的逻辑电路(硬件)实现,也可以使用CPU(CentralProcessingUnit:中央处理单元)由软件实现。
在后者的情况下,信息处理装置1具备:CPU,其执行作为实现各功能的软件的程序的命令;以计算机(或者CPU)可读取的方式记录有上述程序和各种数据的ROM(ReadOnlyMemory:只读存储器)或者存储装置(将它们称为“记录介质”);展开上述程序的RAM(RandomAccessMemory:随机存取存储器)等。并且,计算机(或者CPU)从上述记录介质读取并执行上述程序来实现本发明的目的。上述记录介质能使用“非暂时的有形介质”,例如带、碟、卡、半导体存储器、可编程逻辑电路等。另外,上述程序也可以通过能传输该程序的任意传输介质(通信网络、广播波等)提供给上述计算机。此外,本发明也能以通过电子传输上述程序而具现化的嵌入载波的数据信号的方式实现。
〔总结〕
本发明的实施方式1的信息处理装置(1)是显示内容的信息处理装置,具备:重叠显示单元(重叠显示处理部12),其将包含从所显示的上述内容指定的范围的图像的重叠目标重叠于该内容来进行显示;以及信息显示单元(背景关联部23),其在使上述重叠目标暂时不显示的状态下,显示表示上述内容上的上述范围的位置的通知信息。
根据上述构成,是重叠目标重叠于内容来进行显示。并且,在该重叠目标为不显示的状态下,将上述内容上的表示上述范围(该重叠目标所包含的图像所显示的范围)的位置的通知信息重叠于内容来进行显示。
因此,在使重叠目标为暂时不显示的状态下,用户也能识别与通知信息所示的位置对应的重叠目标的存在。由此,用户在不显示状态下也能想到存在与内容的哪一位置对应的重叠目标来阅览内容,也能在需要的时候使与需要的位置对应的重叠目标再次显示。
此外,在使重叠目标暂时不显示的状态下,不需要总是显示通知信息。例如,在由于画面的滚动等而上述重叠目标不显示的情况下,也可以例外地不显示通知信息。另外,在重叠目标暂时不显示的期间中,也不需要总是显示通知信息。并且,所谓暂时不显示的状态是虽然在该状态下不显示,但是能再次进行显示的状态。
本发明的方式2的信息处理装置属于上述方式1,其中也可以是,上述重叠显示单元响应于对上述通知信息的操作而使上述重叠目标再次显示。
根据上述构成,响应于对通知信息的操作而使重叠目标再次显示。由此,用户能通过通知信息识别重叠目标的存在,通过对该通知信息进行操作这种直观且顺畅的操作来使重叠目标再次显示。
本发明的方式3的信息处理装置属于上述方式1或者2,其中也可以是,上述重叠显示单元在上述重叠目标被移动到显示画面的端部时使该重叠目标暂时不显示,上述通知信息还表示上述重叠目标被移动到的上述端部的位置。
由此,用户能通过将重叠目标移动到显示画面的端部的直观操作来使该重叠目标暂时不显示。并且,通知信息还表示出为了使重叠目标暂时不显示而移动到的位置,因此容易使用户想起从显示该重叠目标到暂时不显示的一系列的操作。
另外,上述通知信息是将上述范围内的点与上述端部相连的线状的图像,使重叠目标再次显示的操作也可以是拖曳上述线状的图像的操作。由此,用户能通过将赶出画面外的重叠目标拉出的感觉而直观地使不显示的重叠目标再次显示。
本发明的方式4的信息处理装置属于上述方式1至3中的任一种,其中也可以是,具备一并处理单元(复制部20等),在上述重叠显示单元显示了多个上述重叠目标的情况下,在将一个上述重叠目标作为对象而执行特定的处理时,如果有与该重叠目标相对应的其它重叠目标,则对该其它重叠目标也执行该特定的处理。
根据上述构成,能使多个重叠目标相对应,将其中的1个重叠目标作为对象执行特定的处理,由此对与该重叠目标相对应的其它重叠目标也执行相同的特定的处理。也就是说,能对多个重叠目标一并执行特定的处理。上述特定的处理例如能举出显示位置的移动、书签的登记、图像的记录、文本的复制等。
此外,在上述特定的处理是图像的记录的情况下,优选与相对应的多个重叠目标的图像一起也记录表示这些重叠目标的对应情况的信息。由此,能根据所记录的图像识别重叠目标是分别相对应的。
本发明的方式5的信息处理装置属于上述方式1至4中的任一种,其中也可以是,具备关键字显示单元(关键字显示部25),其显示与上述重叠目标相对应的字符串来代替显示该重叠目标。
根据上述构成,代替显示重叠目标而显示字符串,因此能减少重叠于内容的信息量,能提高内容的阅览性。另外,所显示的字符串是与重叠目标相对应的字符串,因此也能根据该字符串使用户识别显示了何种重叠目标。
本发明的方式6的信息处理装置属于上述方式5,其中也可以是,具备关键字设定单元(关键字显示部25),其从在上述重叠目标上指定的一行取得与上述重叠目标相对应的字符串。
根据上述构成,从该重叠目标上的指定的一行取得与重叠目标相对应的字符串。在该构成中,不会跨越多个行取得字符串,因此即使在用户错误地跨越多个行指定了位置的情况下,也能从1个行取得字符串。这特别在对指定位置小的显示画面(小文字)进行触摸操作的情况下有用。
本发明的方式7的信息处理装置属于上述方式1至6中的任一种,其中也可以是,具备排序单元(优先显示处理部26),其在上述重叠显示单元显示多个上述重叠目标的情况下,将所显示的多个重叠目标中的相对应的2个以上的重叠目标按预定的优先顺序排序。根据该构成,按优先顺序对相对应的重叠目标排序,因此容易整理多个重叠目标的排列顺序。
本发明的各方式的信息处理装置也可以通过计算机实现,在这种情况下,使计算机作为上述信息处理装置所具备的各部分进行动作从而用计算机实现上述信息处理装置的信息处理装置的控制程序和记录有上述程序的计算机可读取的记录介质也落入本发明的范畴。
另外,本发明的信息处理装置的控制方法是显示内容的信息处理装置的控制方法,其特征在于,包括:重叠显示步骤(S10),将包括从所显示的上述内容指定的范围的图像的重叠目标重叠于该内容来进行显示;以及信息显示步骤(S67),在使上述重叠目标暂时不显示的状态下,显示表示上述内容上的上述范围的位置的通知信息。根据该构成,能起到与上述方式1的信息处理装置同样的作用效果。
本发明不限于上述各实施方式,能在权利要求所示的范围中进行各种变更,将在不同的实施方式中分别公开的技术手段适当组合得到的实施方式也包含于本发明的技术范围。而且,能通过将各实施方式中分别公开的技术手段组合而形成新的技术特征。
工业上的可利用性
本发明能特别适用于具备网络浏览器的智能电话、平板终端、PC(PersonalComputer:个人计算机)等。
附图标记说明:
1:信息处理装置
12:重叠显示处理部(重叠显示单元)
23:背景关联部(信息显示单元)
25:关键字显示部(关键字显示单元,关键字设定单元)
26:优先显示处理部(排序单元)
Claims (10)
1.一种显示内容的信息处理装置,其特征在于,具备:
重叠显示单元,其将包含从所显示的上述内容指定的范围的图像的重叠目标重叠于该内容来进行显示;以及
信息显示单元,其在使上述重叠目标暂时不显示的状态下,显示表示上述内容上的上述范围的位置的通知信息。
2.根据权利要求1所述的信息处理装置,其特征在于,
上述重叠显示单元响应于对上述通知信息的操作而使上述重叠目标再次显示。
3.根据权利要求1或者2所述的信息处理装置,其特征在于,
上述重叠显示单元在上述重叠目标被移动到显示画面的端部时使该重叠目标暂时不显示,
上述通知信息还表示上述重叠目标被移动到的上述端部的位置。
4.根据权利要求1至3中的任一项所述的信息处理装置,其特征在于,
具备一并处理单元,上述一并处理单元在上述重叠显示单元显示了多个上述重叠目标的情况下,在将一个上述重叠目标作为对象而执行特定的处理时,如果有与该重叠目标相对应的其它重叠目标,则对该其它重叠目标也执行该特定的处理。
5.根据权利要求1至4中的任一项所述的信息处理装置,其特征在于,
具备关键字显示单元,上述关键字显示单元显示与上述重叠目标相对应的字符串来代替显示该重叠目标。
6.根据权利要求5所述的信息处理装置,其特征在于,
具备关键字设定单元,上述关键字设定单元从在上述重叠目标上指定的一行取得与上述重叠目标相对应的字符串。
7.根据权利要求1至6中的任一项所述的信息处理装置,其特征在于,
具备排序单元,上述排序单元在上述重叠显示单元显示多个上述重叠目标的情况下,将所显示的多个重叠目标中的相对应的2个以上的重叠目标按预定的优先顺序排序。
8.一种显示内容的信息处理装置的控制方法,其特征在于,具备:
重叠显示步骤,其将包含从所显示的上述内容指定的范围的图像的重叠目标重叠于该内容来进行显示;以及
信息显示步骤,其在使上述重叠目标暂时不显示的状态下,显示表示上述内容上的上述范围的位置的通知信息。
9.一种计算机程序,其特征在于,用于使计算机执行权利要求8所述的信息处理装置的控制方法。
10.一种计算机可读取的记录介质,其特征在于,
记录有权利要求9所述的程序。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-183431 | 2013-09-04 | ||
JP2013183431A JP6018996B2 (ja) | 2013-09-04 | 2013-09-04 | 情報処理装置 |
PCT/JP2014/073089 WO2015033937A1 (ja) | 2013-09-04 | 2014-09-02 | 情報処理装置、情報処理装置の制御方法、プログラム、および記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105518600A true CN105518600A (zh) | 2016-04-20 |
Family
ID=52628411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480048485.XA Pending CN105518600A (zh) | 2013-09-04 | 2014-09-02 | 信息处理装置、信息处理装置的控制方法、程序和记录介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20160196049A1 (zh) |
JP (1) | JP6018996B2 (zh) |
CN (1) | CN105518600A (zh) |
WO (1) | WO2015033937A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014222439A (ja) | 2013-05-14 | 2014-11-27 | ソニー株式会社 | 情報処理装置、パーツ生成利用方法及びプログラム |
JP6696737B2 (ja) * | 2015-06-26 | 2020-05-20 | シャープ株式会社 | コンテンツ表示装置及びプログラム |
JP6723749B2 (ja) * | 2016-01-25 | 2020-07-15 | キヤノン株式会社 | 画像表示装置、画像表示方法、およびプログラム |
CN105912209B (zh) * | 2016-04-11 | 2019-04-12 | 珠海市魅族科技有限公司 | 图像显示方法及装置 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101404152A (zh) * | 2007-10-03 | 2009-04-08 | 夏普株式会社 | 信息显示装置 |
US20100125811A1 (en) * | 2008-11-19 | 2010-05-20 | Bradford Allen Moore | Portable Touch Screen Device, Method, and Graphical User Interface for Entering and Using Emoji Characters |
JP2011013861A (ja) * | 2009-06-30 | 2011-01-20 | Toshiba Corp | 情報処理装置およびタッチ操作支援プログラム |
US20120057792A1 (en) * | 2010-09-07 | 2012-03-08 | Sony Corporation | Information processing device and information processing method |
JP2012088807A (ja) * | 2010-10-15 | 2012-05-10 | Sharp Corp | 情報処理装置、情報処理装置の制御方法、プログラム、および記録媒体 |
CN102576285A (zh) * | 2009-09-30 | 2012-07-11 | 乐天株式会社 | 信息显示装置、信息显示方法、信息显示程序、记录介质及信息显示系统 |
CN102663056A (zh) * | 2012-03-29 | 2012-09-12 | 奇智软件(北京)有限公司 | 一种图片元素显示方法和装置 |
US20130017526A1 (en) * | 2011-07-11 | 2013-01-17 | Learning Center Of The Future, Inc. | Method and apparatus for sharing a tablet computer during a learning session |
KR20130016655A (ko) * | 2011-08-08 | 2013-02-18 | 삼성전자주식회사 | 휴대용 단말기에서 화면 캡쳐를 위한 장치 및 방법 |
JP2013054591A (ja) * | 2011-09-05 | 2013-03-21 | Toshiba Tec Corp | 棚割支援装置及び棚割支援プログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0863314A (ja) * | 1994-08-26 | 1996-03-08 | Canon Inc | 編集装置および方法 |
US8255830B2 (en) * | 2009-03-16 | 2012-08-28 | Apple Inc. | Methods and graphical user interfaces for editing on a multifunction device with a touch screen display |
JP2012073809A (ja) * | 2010-09-29 | 2012-04-12 | Brother Ind Ltd | 表示端末および制御プログラム |
-
2013
- 2013-09-04 JP JP2013183431A patent/JP6018996B2/ja active Active
-
2014
- 2014-09-02 WO PCT/JP2014/073089 patent/WO2015033937A1/ja active Application Filing
- 2014-09-02 US US14/915,701 patent/US20160196049A1/en not_active Abandoned
- 2014-09-02 CN CN201480048485.XA patent/CN105518600A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101404152A (zh) * | 2007-10-03 | 2009-04-08 | 夏普株式会社 | 信息显示装置 |
US20100125811A1 (en) * | 2008-11-19 | 2010-05-20 | Bradford Allen Moore | Portable Touch Screen Device, Method, and Graphical User Interface for Entering and Using Emoji Characters |
JP2011013861A (ja) * | 2009-06-30 | 2011-01-20 | Toshiba Corp | 情報処理装置およびタッチ操作支援プログラム |
CN102576285A (zh) * | 2009-09-30 | 2012-07-11 | 乐天株式会社 | 信息显示装置、信息显示方法、信息显示程序、记录介质及信息显示系统 |
US20120057792A1 (en) * | 2010-09-07 | 2012-03-08 | Sony Corporation | Information processing device and information processing method |
JP2012088807A (ja) * | 2010-10-15 | 2012-05-10 | Sharp Corp | 情報処理装置、情報処理装置の制御方法、プログラム、および記録媒体 |
US20130017526A1 (en) * | 2011-07-11 | 2013-01-17 | Learning Center Of The Future, Inc. | Method and apparatus for sharing a tablet computer during a learning session |
KR20130016655A (ko) * | 2011-08-08 | 2013-02-18 | 삼성전자주식회사 | 휴대용 단말기에서 화면 캡쳐를 위한 장치 및 방법 |
JP2013054591A (ja) * | 2011-09-05 | 2013-03-21 | Toshiba Tec Corp | 棚割支援装置及び棚割支援プログラム |
CN102663056A (zh) * | 2012-03-29 | 2012-09-12 | 奇智软件(北京)有限公司 | 一种图片元素显示方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2015049858A (ja) | 2015-03-16 |
US20160196049A1 (en) | 2016-07-07 |
JP6018996B2 (ja) | 2016-11-02 |
WO2015033937A1 (ja) | 2015-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7342208B2 (ja) | 画像処理装置、画像処理装置の制御方法及びプログラム | |
JP5752572B2 (ja) | 表示制御装置、表示方法、制御プログラム、および記録媒体 | |
CN106303740B (zh) | 智能电视的桌面导航系统及该系统的实现方法 | |
CN105518600A (zh) | 信息处理装置、信息处理装置的控制方法、程序和记录介质 | |
CN109844707A (zh) | 桌面启动器中的页面导航 | |
CN106662965A (zh) | 应用窗口的基于区的大小调整和定位 | |
CN104954610B (zh) | 显示输入装置和显示输入方法 | |
JP2014229224A (ja) | オブジェクト選択装置 | |
US20210181928A1 (en) | Method for enabling interaction using fingerprint on display and electronic device thereof | |
WO2014196639A1 (ja) | 情報処理装置および制御プログラム | |
WO2015005383A1 (ja) | 情報処理装置および制御プログラム | |
CN112579187A (zh) | 一种应用程序冷启动的优化方法及装置 | |
CN107257424A (zh) | 数据处理装置 | |
KR20160023394A (ko) | 디스플레이 장치 및 그 제어 방법 | |
WO2014008736A1 (zh) | 用于移动终端的网页显示方法及装置 | |
JP6131072B2 (ja) | 表示制御装置 | |
JP2003177848A (ja) | ソフトウェアキーボードのキー表示方法及び文字入力装置 | |
JP6206202B2 (ja) | 情報処理装置及び情報処理プログラム | |
CN112416236A (zh) | 基于web页面的手势封装、交互方法、设备和存储介质 | |
WO2021014945A1 (ja) | サーバ、プログラム、方法及びシステム | |
CN105760064A (zh) | 显示内容的方法和实现所述方法的电子设备 | |
US11243678B2 (en) | Method of panning image | |
JP2014186699A (ja) | 入力装置、入力装置の制御方法、制御プログラムおよび記録媒体 | |
CN108932054A (zh) | 显示装置、显示方法和非暂时性的记录介质 | |
CN105786320A (zh) | 图标显示方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160420 |
|
WD01 | Invention patent application deemed withdrawn after publication |