CN103038741A - 信息处理装置 - Google Patents

信息处理装置 Download PDF

Info

Publication number
CN103038741A
CN103038741A CN2011800369928A CN201180036992A CN103038741A CN 103038741 A CN103038741 A CN 103038741A CN 2011800369928 A CN2011800369928 A CN 2011800369928A CN 201180036992 A CN201180036992 A CN 201180036992A CN 103038741 A CN103038741 A CN 103038741A
Authority
CN
China
Prior art keywords
program
image
demonstration
information
application program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800369928A
Other languages
English (en)
Other versions
CN103038741B (zh
Inventor
守田彻
下村智则
畑田敬志
津田宗孝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment Inc filed Critical Sony Computer Entertainment Inc
Publication of CN103038741A publication Critical patent/CN103038741A/zh
Application granted granted Critical
Publication of CN103038741B publication Critical patent/CN103038741B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供一种信息处理装置,借助于该信息处理装置,甚至在应用程序不运行时也可以向用户表示与该应用程序要运行的内容有关的信息,当应用程序运行时,信息处理装置获得将要由所述应用程序输出的显示要素信息,并且存储显示要素信息在存储部件中。当所述应用程序不运行时,信息处理装置生成包含由在存储单元中存储的显示要素信息所表示的显示要素的图像作为表示与所述应用程序有关的信息的程序相关图像,并且在显示部件上显示该图像。

Description

信息处理装置
技术领域
本发明涉及用于在屏幕上显示有关于应用程序的信息的信息处理装置、信息处理方法以及信息存储介质。
背景技术
当计算机执行诸如游戏程序之类的应用程序时,计算机在屏幕上显示程序的处理结果。
发明内容
技术问题
本发明的一个目的是提供这样的信息处理装置、信息处理方法以及信息存储介质:甚至在不执行应用程序的时段期间也能够向用户表示关于应用程序的执行内容的信息。
解决方案
根据本发明,提供信息处理装置,包括:显示要素信息获取部件,用于获取在应用程序的执行期间由应用程序输出的显示要素信息并将显示要素信息存储在存储单元中;和程序相关图像显示控制部件,用于生成作为用于表示与所述应用程序有关的信息的程序相关图像的图像,其包括由在存储单元中存储的显示要素信息表示的显示要素,并控制显示单元在不执行应用程序的时段期间显示所生成的图像。
在上述信息处理装置中,显示要素信息获取部件可以连同显示要素信息一起获取指示由应用程序输出的显示要素信息的显示时间的信息,程序相关图像显示控制部件可以通过使用指示显示时间的信息来控制由显示要素信息表示的显示要素的显示定时。
进一步,应用程序可以是用于在预定处理执行时间执行预定处理的程序,并且显示要素信息获取部件可以连同有关于该预定处理的显示要素信息一起获取指示取决于预定处理执行时间确定的显示时间的信息。
进一步,在信息处理装置中,指示显示时间的信息可以包括指示用于显示要素的显示开始时间的信息,且程序相关图像显示控制部件可以在程序相关图像的显示定时在显示开始时间之前时,限制包括显示要素的程序相关图像的显示,而在显示定时在显示开始时间之后时,显示包括显示要素的程序相关图像。
进一步,在信息处理装置中,指示显示时间的信息可以包括指示用于显示要素的显示终止时间的信息,且程序相关图像显示控制部件可以在程序相关图像的显示定时在显示终止时间之前时,显示包括显示要素的程序相关图像,而在显示定时在显示终止时间之后时,限制包括显示要素的程序相关图像的显示。
进一步,在信息处理装置中,显示要素信息获取部件可以响应于应用程序的指令,删除在存储单元中存储的显示要素信息。
进一步,在信息处理装置中,显示要素信息获取部件可以响应于应用程序的指令,将在存储单元中存储的显示要素信息更新到由应用程序重新输出的显示要素信息。
进一步,应用程序可以是第一类型的应用程序,信息处理装置可以进一步包括用于控制显示单元来显示菜单图像的菜单图像显示控制部件,该菜单图像包括与第一类型的应用程序关联的菜单条目图像和与不同于第一类型的第二类型的应用程序关联的菜单条目图像,程序相关图像显示控制部件可以在用户在显示菜单图像的状态下选择与第一类型的应用程序关联的菜单条目图像时,生成用于表示与第一类型的应用程序有关的信息的程序相关图像,并且信息处理装置可以进一步包括应用执行部件,用于在用户在显示菜单图像的状态下选择与第二类型的应用程序关联的菜单条目图像时,激活第二类型的应用程序并开始由第二类型的应用程序输出的图像的显示,以及在用户在显示程序相关图像的状态下进行预定激活指令操作时,激活与程序相关图像对应的第一类型的应用程序并开始由第一类型的应用程序输出的图像的显示。
根据本发明,也提供信息处理方法,包括如下步骤:在应用程序的执行期间获取由应用程序输出的显示要素信息,并在存储单元中存储显示要素信息;以及在不执行应用程序的时段期间,显示由在存储单元中存储的显示要素信息表示的显示要素,作为用于表示与应用程序有关的程序相关图像。
根据本发明,进一步提供一种计算机可读信息存储介质,在其上记录了用于使得计算机作为以下部件工作的程序:显示要素信息获取部件,用于获取在应用程序的执行期间由应用程序输出的显示要素信息并将显示要素信息存储在存储单元中;和程序相关图像显示控制部件,用于生成包括由在存储单元中存储的显示要素信息表示的显示要素的图像,作为用于表示与应用程序有关的信息的程序相关图像,并控制显示单元在不执行应用程序的时段期间显示所生成的图像。
附图说明
[图1]图示根据本发明的实施例的信息处理装置的外观的示例的透视图。
[图2]图示根据本发明的实施例的信息处理装置的配置的配置框图。
[图3]图示由根据本发明的实施例的信息处理装置实现的功能的功能框图。
[图4]图示用于显示菜单图像的屏幕的示例的示图。
[图5]图示程序面板(board)的示例的示图。
[图6]图示用于显示程序相关图像的屏幕的示例的示图。
[图7]图示用于显示程序相关图像的屏幕的另一示例的示图。
[图8]图示在进行图像切换处理时在屏幕上显示的图像的示例的示图。
[图9]图示在进行图像切换处理时在屏幕上生成图像的方法的示图。
[图10]图示用于再现程序输出图像的定时的示图。
具体实施方式
以下参考附图详细描述本发明的实施例。
图1是图示根据本发明的实施例的信息处理装置10的外观的示例的透视图。进一步,图2是图示信息处理装置10的配置的配置框图。如图中所示,信息处理装置10包括控制单元11、存储单元12、图像处理单元13、显示单元14、触摸传感器15以及操作按钮16。
控制单元11是例如CPU等,并依据在存储单元12中存储的程序执行各类信息处理。稍后描述由在实施例中的控制单元11执行的处理的具体示例。
例如,存储单元12是诸如随机访问存储器(RAM)或只读存储器(ROM)、磁盘装置等的存储器元件,并且存储由控制单元11执行的程序以及各类数据。进一步,存储单元12也用作用于控制单元11的工作存储器。特别是在此实施例中,信息处理装置10意图执行诸如游戏应用之类的多个应用程序AP,并且存储单元12存储该应用程序AP。
图像处理单元13包括例如GPU和帧缓冲存储器,并依据由控制单元11输出的再现指令再现将要显示在显示单元14的屏幕S上的图像。作为具体示例,图像处理单元13包括与屏幕S对应的帧缓冲存储器,并且GPU依据来自控制单元11的指令每隔预定时间将图像写入帧缓冲存储器。然后,以预定定时将写入帧缓冲存储器的图像转换为视频信号,并显示在屏幕S上。
显示单元14可以是用于显示图像的各种装置,诸如液晶显示面板和有机电致发光(EL)显示面板。显示单元14包括具有如图1所示的基本上矩形的形状的屏幕S。以下,屏幕S的水平方向(即,沿着屏幕S的上侧和下侧的方向)称为X轴方向,且朝着右侧的方向称为正X轴方向。进一步,屏幕S的垂直方向(即,沿着屏幕S的右侧和左侧的方向)称为Y轴方向,且朝着上侧的方向称为正Y轴方向。
触摸传感器15包括具有与屏幕S对应的形状和尺寸的基本上矩形的检测表面,并且当物体接触检测表面时,检测物体的接触位置。提供触摸传感器15的检测表面以重叠屏幕S。注意,以下,出于描述的便利,用户使得他/她的手指接触触摸传感器15以输入操作。然而,本发明不限于此,且用户可以使得在他/她的手中所持有的触控笔(stylus)之类的物体接触检测表面。进一步,不必仅当物体接触检测表面时触摸传感器15才检测物体的位置,而是当物体靠近检测表面上的可检测范围时触摸传感器15就可以检测物体相对于检测表面的位置。触摸传感器15就可以是例如电容型、压力型、光学型等的任何类型,只要它是能够在检测表面上检测物体的位置的装置。
操作按钮16是用户结合触摸传感器15使用以向信息处理装置10输入操作的一类操作构件。用户按下操作按钮16以向信息处理装置10输入操作。注意,在图1中,仅示出一个操作按钮16,但是信息处理装置10可以包括多个操作按钮。信息处理装置10可以进一步包括开关、模拟摇杆或其他此类操作构件。
在此实施例中,为了从用户接收指令操作,控制单元11在屏幕S上显示诸如菜单图像和有关于应用程序AP的图像之类的各种图像。然后,控制单元11使用在显示所述图像的状态下获得的触摸传感器15检测结果来执行各类信息处理。具体地,控制单元11使用触摸传感器15检测用户手指的位置的结果来判断用户输入的操作的细节。然后,控制单元11执行与所判断的操作输入的细节对应的处理,并且在屏幕S上显示处理结果以向用户表示处理结果。
接着,描述将要由信息处理装置10执行的、在存储单元12中存储的应用程序AP。注意,以下,应用程序AP是在显示稍后描述的菜单图像Im或面板图像Ib的状态下响应于由用户进行的操作而激活的程序。信息处理装置10除了该应用程序AP之外还可以执行各种程序。
在此实施例中,将应用程序AP归类为以下两类:应用程序AP的第一类型是仅在完全模式中操作的完全模式程序FP;而应用程序AP的第二类型是可以以完全模式之外的模式操作的轻程序(light program)LP。在此情况下,完全模式指一个程序为了操作而占据整个屏幕S的模式。完全模式程序FP在其执行期间在完全模式的状态下操作,并且在整个屏幕S上显示处理结果。相反,轻程序LP在稍后描述的面板图像Ib中显示它们的处理结果。
现在给出由根据实施例的信息处理装置10实现的功能的描述。图3是图示由信息处理装置10实现的功能的功能框图。如此图中所示,信息处理装置10功能性地包括操作接收部分20、菜单图像显示控制部分21、面板图像显示控制部分22、应用执行部分23、显示要素信息获取部分24、图像切换部分25和再现定时控制部分26。通过控制单元11执行在存储单元12中存储的程序来实现这些功能。此程序可以在存储在诸如光盘之类的各种计算机可读信息存储介质中的同时,提供到信息处理装置10。此外,可以经由诸如因特网之类的通信网络向信息处理装置10提供程序。
操作接收部分20接收由用户在触摸传感器15或者操作按钮16上进行的指令操作。特别在此实施例中,例如,用户使得他/她的手指放在触摸传感器15的检测表面上或者在手指接触检测表面的状态下滑动手指,从而向信息处理装置10输入操作。具体地,以下,用户使得他/她的手指与检测表面上的一点短时段接触的操作称为轻敲(tap)操作。当进行轻敲操作时,操作接收部分20输出轻敲操作的位置(即,用户使得他/她的手指与检测表面接触的位置)。进一步,用户使得他/她的手指与检测表面上的一点接触并在释放手指之前以该点作为起点在检测表面的任何方向上线性地移动手指的操作称为滑动操作。当进行滑动操作时,信息处理装置10依据用户在操作中移动手指的方向而进行各类信息处理。换而言之,滑动操作是用户指定信息处理装置10上的方向的操作。当在显示稍后描述的菜单图像Im或面板图像Ib的状态下进行滑动操作时,操作接收部分20从起点和终点的位置确定用户指定的方向。在此情况下,所指定的方向例如可以是屏幕S上的四个方向的任一个:上;下;左;右。以下描述的功能部分依据由操作接收部分20接收的轻敲操作和滑动操作的细节来执行各类信息处理。
菜单图像显示控制部分21控制以预定定时(例如,以信息处理装置10的激活的时间,或以用户给出指令以显示菜单的时间)在屏幕S上显示菜单图像Im。菜单图像Im是被表示来提示用户选择应用程序AP的图像,该图像包括作为用于用户的选择的目标的多个菜单条目图像Ic。每一个菜单条目图像Ic与在存储单元12中存储的任何应用程序AP关联,并被存储在存储单元12中。注意,每一个菜单条目图像Ic可以是表示对应的应用程序AP等的图标图像。在此情形下,如上所述,根据此实施例,应用程序AP包括两类程序:完全模式程序FP和轻模式程序LP,并且菜单图像Im包括与完全模式程序FP关联的菜单条目图像Ic和与轻程序LP关联的菜单条目图像Ic两者。
图4是图示显示菜单图像Im的屏幕S的示例的示图。在此图中,菜单图像Im包括10个菜单条目图像Ic1到Ic10,分别与应用程序AP关联。进一步,在图4中,沿着屏幕S的上沿提供长矩形状态条显示区域As,并且在该状态条显示区域As中显示指示诸如当前时间和信息处理装置10的剩余电量之类的信息的状态条。进一步,显示菜单图像Im的屏幕S中的区域被称为面板显示区域Ab。在图4的示例中,面板显示区域Ab被图示为屏幕S除状态条显示区域As之外的区域。然而,在状态条不需要一直显示的情况下,面板显示区域Ab可以是整个屏幕S。
在显示菜单图像Im的状态下,用户轻敲显示菜单条目图像Ic的任一个的位置以在菜单上进行选择操作。换而言之,用户轻敲菜单条目图像Ic的任一个以选择与经历轻敲操作的菜单条目图像Ic关联的应用程序AP。具体地,当从用户接收轻敲操作时,菜单图像显示控制部分21识别在用户轻敲的屏幕S上的位置处显示的菜单条目图像Ic。然后,菜单图像显示控制部分21确定与菜单条目图像Ic关联的应用程序AP的类型。换而言之,菜单图像显示控制部分21确定应用程序AP是完全模式程序FP还是轻程序LP。当菜单图像显示控制部分21确定由用户选择的应用程序AP是轻程序LP时,菜单图像显示控制部分21立即指令应用执行部分23激活该轻程序LP。另一方面,当所选择的应用程序AP是完全模式程序FP时,菜单图像显示控制部分21指令面板图像显示控制部分22生成用于表示有关于所选择的完全模式程序FP的信息的图像(以下,称为程序相关图像Ip)。
当用户在菜单图像Im被显示在屏幕S上的状态下选择应用程序AP的任一个时,面板图像显示控制部分22进行在屏幕S上显示有关于所选择的应用程序AP的图像的控制。以下,与由面板图像显示控制部分22显示的应用程序AP对应的图像称为面板图像Ib。根据此实施例,在屏幕S的面板显示区域Ab(与由菜单图像显示控制部分21控制以显示菜单图像Im的屏幕S的面板显示区域Ab相同)中显示面板图像Ib。
具体地,当用户选择完全模式程序FP时,面板图像显示控制部分22生成与完全模式程序FP对应的程序相关图像Ip,并且在面板显示区域Ab中显示该程序相关图像Ip作为面板图像Ib。此外,当用户选择轻程序LP时,面板图像显示控制部分22显示由稍后描述的执行所选择的轻程序LP的应用执行部分23再现的图像作为面板图像Ib。以下,由应用程序AP的图像再现处理输出并表示应用程序AP的处理结果的图像称为程序输出图像Io。
现在给出当用户选择完全模式程序FP时生成的程序相关图像Ip的详细描述。根据此实施例,程序相关图像Ip是表示虚拟区域(以下,称为程序面板B)的一部分或整体的图像,在该虚拟区域上布置有关于对应应用程序的多个显示要素。由稍后描述的显示要素信息获取部分24获取在该程序面板B上布置的关于显示要素的信息。
程序面板B可以是适合于面板显示区域Ab的尺寸的区域。然而,以下,程序面板B是沿着预定滚动方向(在此情况下,Y轴方向)扩展的矩形区域,且其沿着Y轴方向扩展的边比相同方向上的面板显示区域Ab的边更长。因此,面板图像显示控制部分22不能在面板显示区域Ab中一次显示整个程序面板B,而是在面板显示区域Ab中仅显示程序面板B的部分范围作为程序相关图像Ip。在此情况下,实际显示在屏幕S上的程序面板B的范围(显示目标范围)依据用户的滚动指令而移动。具体地,通过用户沿着触摸传感器15的滚动方向进行滑动操作,面板图像显示控制部分22在程序面板B中移动显示目标范围。然后,在移动之后,面板图像显示控制部分22显示在显示目标范围中包含的程序面板B的一部分,作为面板显示区域Ab中的程序相关图像Ip。注意,显示目标范围的尺寸和形状与面板显示区域Ab的尺寸和形状对应。此外,当面板图像显示控制部分22第一次显示面板图像Ib时,在显示目标范围中可以包含预定位置,诸如程序面板B的最上端。
图5是图示与完全模式程序FP对应的程序面板B的示例的示图。如在此图中示范的,根据此实施例,由两个子区域构成程序面板B:程序信息区域P1和通信区域P2。程序信息区域P1是表示由完全模式程序FP的提供商等准备的信息的区域,而通信区域P2是用于表示关于完全模式程序FP的由多个用户发布(post)的消息的内容的区域。为了用户等之间的信息交换而使用通信区域P2。
图6是图示屏幕S的示例的示图,在该屏幕S上显示程序相关图像Ip作为面板图像Ib,并且当在图7中图示的程序面板B的程序信息区域P1包含在显示目标范围中时,图示程序相关图像Ip的示例。在此图中的示例中,通过将程序面板B中的显示要素重叠在预定背景图像上来生成程序相关图像Ip。该背景图像可以是对每一个完全模式程序FP而言特定的图像。
程序信息区域P1包括用于激活的图像,其经历当用户激活与程序面板B对应的完全模式程序FP时的操作。具体地,根据此实施例,在程序信息区域P1中布置激活按钮图像IL作为用于激活的图像。在包括激活按钮图像IL的程序相关图像Ip被显示在屏幕S中的状态下,用户通过轻敲激活按钮图像IL的显示位置来指令完全模式程序FP的激活。在此实施例中,假定,对每一个完全模式程序FP提前准备激活按钮图像IL。然而,可以存在对其未准备用于激活的图像的完全模式程序。在此情况下,面板图像显示控制部分22可以使用与在菜单图像Im中显示的完全模式程序FP对应的菜单条目图像Ic作为用于激活的图像,取代专用激活按钮图像IL。替代地,面板图像显示控制部分22可以接收其他预定操作(诸如按下预定按钮的操作和在触摸传感器15上轻敲预定位置的操作)作为用户的激活指令操作,取代用户在用于激活的图像上的轻敲操作。
当在显示与完全模式程序FP对应的程序相关图像Ip的状态下接收用户的激活指令操作时,应用执行部分23以完全模式激活完全模式程序FP。其结果是,在整个屏幕S上显示由程序生成的处理结果的图像。在完全模式程序FP的处理结果被显示在屏幕S上的状态下,由完全模式程序FP处理由用户在触摸传感器15上进行的操作的内容。此外,当在此状态下用户通过诸如按下操作按钮16之类的操作来指令完全模式的终止时,面板图像显示控制部分22结束完全模式中的图像的显示,并且再次显示与直到那时一直执行的完全模式程序FP对应的程序相关图像Ip。在此情形下,应用执行部分23不必终止直到那时一直执行的完全模式程序FP以释放存储器,并可以在临时挂起程序的执行的状态下显示程序相关图像Ip。以此配置,用户可以通过诸如再次轻敲激活按钮图像IL之类的方法来指令完全模式程序FP的再执行,因此应用执行部分23可以恢复临时挂起的程序的执行。
如上所述,在选择了与完全模式程序FP对应的菜单条目图像Ic的情况下,信息处理装置10可以首先通过显示包括激活按钮图像IL的程序相关图像Ip来向用户表示关于程序的各类信息,而非立即激活对应的程序。进一步,如下所述,在显示面板图像Ib的状态下,用户可以进行图像切换操作来发出指令以切换已经显示的面板图像Ib。然而,可以存在如下情况:在完全模式中操作的程序接收与图像切换操作对应的这种操作作为有关于程序处理的另一操作。因此,在用户选择与完全模式程序FP对应的菜单条目图像Ic情况下,信息处理装置10首先显示程序相关图像Ip,从而也包括完全模式程序FP(其在处理的执行期间占据整个屏幕)作为用于由图像切换操作切换的目标的图像中的一个图像。
另一方面,当在显示菜单图像Im的状态下由用户选择的应用程序AP不是完全模式程序FP而是轻程序LP时,由执行上述轻程序LP的应用执行部分23生成指示程序的处理结果的程序输出图像Io。面板图像显示控制部分22显示程序输出图像Io作为面板显示区域Ab中的面板图像Ib。程序输出图像Io也可以是稍后描述的图像切换部分25的图像切换操作的对象。根据此实施例,在菜单图像Im中,与完全模式程序FP对应的菜单条目图像Ic和与轻程序LP对应的菜单条目图像Ic存在于如上所述的混合状态中。因而,用户可以通过与在显示菜单图像Im的状态下共同的操作,来选择在完全模式程序FP的激活之前应当对其显示一次对应的程序相关图像Ip的完全模式程序FP和应当立即开始激活的轻程序LP两者。此外,用户可以通过预定操作切换显示与完全模式程序FP对应的程序相关图像Ip和由轻程序LP输出的程序输出图像Io,而不实现再现那些图像的程序的类型之间的差异。
应用执行部分23依据来自菜单图像显示控制部分21和面板图像显示控制部分22的激活指令,开始应用程序AP的执行,并开始用于指示程序的处理结果的程序输出图像Io的再现处理。具体地,当用户在显示菜单图像Im的状态下选择轻程序LP时,应用执行部分23激活轻程序LP。在屏幕S的面板显示区域Ab中显示由轻程序LP再现的程序输出图像Io,作为上述面板图像Ib。此外,当在显示程序相关图像Ip的状态下用户选择程序相关图像Ip中的激活按钮图像IL时,应用执行部分23激活与程序相关图像Ip对应的完全模式程序FP。完全模式程序FP仅在完全模式中操作,因此在整个屏幕S上显示指示完全模式程序FP的处理结果的程序输出图像Io。
显示要素信息获取部分24管理关于布置在由面板图像显示控制部分22生成的程序相关图像Ip中的显示要素的信息。具体地,显示要素信息获取部分24获取关于显示要素的信息(显示要素信息),该显示要素将布置在与在存储单元12中存储的每一个完全模式程序FP对应的程序面板B中。此外,当在菜单图像Im中选择完全模式程序FP且面板图像显示控制部分22重新生成程序相关图像Ip时,显示要素信息获取部分24向面板图像显示控制部分22提供关于将要包括在程序相关图像Ip中的显示要素的信息。面板图像显示控制部分22通过布置显示要素来生成程序相关图像Ip,该显示要素由程序面板B中的显示要素信息获取部分24提供的显示要素信息指示。
根据此实施例,提前准备用于显示要素在程序面板B中的布置方式的多个模板。每一个模板是用于定义显示要素在何位置、以何尺寸以及以何数据格式(诸如文本数据或图像数据)被布置在程序面板B中的信息。例如,在图5和图6中,大约在程序信息区域P1的中心布置激活按钮图像IL,且在该激活按钮图像IL上方的行中布置多个图标图像。此外,对于在该激活按钮图像IL周围布置显示要素提供总计五个空间。那些空间S1到S5是用于布置图像数据格式下的显示要素的空间。
图7是图示当对程序信息区域P1应用另一模板时的程序相关图像的显示示例的示图。在此图中的示例中,在程序信息区域P1中包括用于图像数据格式下的激活按钮图像IL和图标图像以及显示要素的空间S6和S7,以及用于文本数据格式下的显示要素的空间S8到S10。
信息处理装置10与每一个完全模式程序FP关联地存储用于识别模板的信息,该模板被用于生成与存储单元12中的完全模式程序FP对应的程序面板B。面板图像显示控制部分22通过基于由存储的信息所识别的模板在程序面板B中布置由显示要素信息获取部分24获取的显示要素,来生成程序相关图像Ip。
现在给出显示要素的具体示例的描述。
在程序信息区域P1中布置的一些显示要素可以是连同用于信息处理装置10的完全模式程序FP一起提前提供的静态信息(即,具有不改变的内容的信息)。例如,与每一个完全模式程序FP关联,可以将指示对完全模式程序FP的提供商(供应商)的网站的链接的图像以及诸如完全模式程序FP的宣传视频之类的运动图像存储在存储单元12中。显示要素信息获取部分24通过读出在存储单元12中存储的那些数据条目来获取显示要素信息。此外,甚至对于随时间改变的显示要素,如果提前确定改变的内容和定时,也可以连同完全模式程序FP一起提前向信息处理装置10提供显示要素信息。例如,如果需要在程序相关图像Ip中显示用于倒数预定时间和日期的到达的显示要素,则显示要素信息获取部分24可以基于当前时间和日期从多个图像中选择将要显示的图像,并且可以通过在存储单元12中存储将要随着时间切换的多个图像和用于表示切换定时的信息作为显示要素信息,向面板图像显示控制部分22提供作为显示对象的图像。
此外,显示要素信息获取部分24可以经由诸如因特网之类的网络来获取显示要素信息。显示要素信息的示例包括:关于有关于完全模式程序FP的事件的通知信息、关于相关网站的更新信息、关于相关产品的信息以及关于用于完全模式程序FP的补丁和额外程序的公开信息。对于那些信息条目,关于获取的来源的信息(诸如URL)与每一个完全模式程序FP关联,并且存储在存储单元12中。当面板图像显示控制部分22重新生成程序相关图像Ip时,显示要素信息获取部分24参考关于获取的来源的信息,并访问由完全模式程序FP等的提供商准备的内容传递服务器。因此,显示要素信息获取部分24获取由内容传递服务器提供的显示要素信息。
此外,显示要素信息获取部分24也经由网络从外部获取将要布置在通信区域P2中的显示要素。具体地,例如,信息处理装置10的用户可以经由诸如因特网之类的通信网络向预定通信服务器发布有关于完全模式程序FP的消息。为了实现用于发布的处理,信息处理装置10在存储单元12中与完全模式程序FP关联地存储用于识别用作发布消息的目的地的通信服务器的信息(诸如URL),并通过参考用于识别通信服务器的信息来将用户输入的消息发送到通信服务器。当显示要素信息获取部分24生成与完全模式程序FP关联的程序面板B时,显示要素信息获取部分24访问通信服务器,并为完全模式程序FP获取之前发布的消息信息。然后,面板图像显示控制部分22生成通信区域P2的图像,在该通信区域P2的图像中,将表示所获取的消息的内容以及发布该消息的人的显示要素布置为程序面板B的一部分。
此外,显示要素信息获取部分24可以获取在执行期间由完全模式程序FP输出的信息作为显示要素信息。在此情况下,显示要素信息获取部分24的功能的一部分被实现为由完全模式程序FP调用的应用编程接口(API)。完全模式程序FP通过依据其处理内容调用API来输出显示要素信息,并且存储该显示要素信息在存储单元12中。当面板图像显示控制部分22生成与完全模式程序FP对应的程序相关图像Ip时,使用在存储单元12中存储的显示要素信息。然后,甚至当不执行对应的完全模式程序FP时,重新生成和显示程序相关图像Ip。因此,如果在完全模式程序FP的执行期间,那么事先输出显示要素信息并存储在存储单元12中,甚至当完全模式程序FP不执行时,信息处理装置10也可以显示程序相关图像Ip,该程序相关图像Ip用于向用户表示反映完全模式程序FP的执行内容的信息。
现在给出完全模式程序FP是游戏程序的情况下,使用诸如API之类的显示要素信息的输出的具体示例的描述。例如,完全模式程序FP可以基于用户正在玩的游戏的进度状态,输出文本和图像作为显示要素信息。更具体地,对于用户可以在多个过程或多个阶段中玩的游戏,完全模式程序FP可以在用户开始在新过程或新阶段中玩的定时输出用户所玩的过程或阶段的映像图像作为显示要素信息。此外,在游戏结束或者用户做出具体指令的定时,用户当前操作的玩家角色的外观(化身)或用户正在操作的机器的图像可以作为显示要素信息输出。其结果是,随着用户的玩游戏取得进展,在程序相关图像Ip中包括基于在每一个时刻的玩游戏的状态的信息并向用户表示。
此外,如果完全模式程序FP具有经由网络获取外部信息的功能,则完全模式程序FP可以借助于来自外部服务器的功能输出信息(诸如关于玩家们正在玩的相同游戏的排名信息)作为显示要素信息。在此情况下,即使用于实现面板图像显示控制部分22和显示要素信息获取部分24的系统程序自身不具有访问提供用于提供外部信息的来源的服务器的功能,由提供来源的服务器提供的信息也可以被包括在程序相关图像Ip中并且可以被显示。
此外,当完全模式程序FP调用API并输出显示要素信息时,完全模式程序FP可以连同显示要素信息一起输出指示用于显示要素信息的显示时间的信息。面板图像显示控制部分22通过使用指示显示时间的信息来控制用于对应的显示要素的显示定时。换而言之,面板图像显示控制部分22取决于指示显示时间的信息的内容,确定对应的显示要素是否被包括在将要在特定显示定时显示的程序相关图像Ip中。例如,完全模式程序FP输出指示显示要素的显示开始时间和显示终止时间的信息,作为指示显示时间的信息。当关于显示开始时间的信息与显示要素信息关联,且用于程序相关图像Ip的显示定时在显示开始时间之前时,面板图像显示控制部分22限制包含显示要素的程序相关图像Ip的显示,而当显示定时在显示开始时间之后时,面板图像显示控制部分22显示包含显示要素的程序相关图像Ip。此外,当关于显示终止时间的信息与显示要素信息关联,且显示定时在显示终止时间之前时,面板图像显示控制部分22显示包含显示要素的程序相关图像Ip,而当显示定时在显示开始时间之后时,面板图像显示控制部分22限制包含显示要素的程序相关图像Ip的显示。其结果是,可以提供在直到特定时间到达之前用于在某个特定时段中显示显示要素或者用于限制显示要素的显示的控制。
特别地,如果完全模式程序FP是获取关于由信息处理装置10测量的当前时间和日期的信息并基于当前时间和日期进行处理的程序,则该完全模式程序FP在预定处理执行时间处输出有关于将要进行的处理的信息作为显示要素信息,并输出指示与处理执行时间对应的时间的信息作为指示显示时间的信息。作为示例,完全模式程序FP在时间t1处进行特定处理A,并在时间t1的预定时段T之后的时间t2=(t1+T)处进行处理B。在此情况下,在进行处理A的定时,完全模式程序FP调用API,并连同关于与时间t2对应的显示开始时间的信息一起输出关于处理B的显示要素信息(例如,时间t3是时间t2之前的预定时间段)。关于处理B的显示要素信息可以是表示例如用于进行处理B的时间即将到达的图像或字符串。在此情况下,在时间t3到达之后,当面板图像显示控制部分22显示与完全模式程序FP对应的程序相关图像Ip时,有关于处理B的显示要素将被包括在程序相关图像Ip中。其结果是,即使完全模式程序FP不被执行,用户也可以知道用于进行处理B的定时即将到达。
作为更加具体的示例,完全模式程序FP是用于照顾宠物的游戏的程序,并且在此游戏中用户需要周期性地进行喂养宠物的操作。在此情形下,用户应当喂养宠物的定时不基于游戏中的虚拟时间确定,而是基于实际流逝的时间。为了实现此控制,完全模式程序FP获取关于实际时间和日期的信息,并且基于该信息来确定在用户上次喂养宠物之后的预定时段内是否已经进行了下一喂养宠物的操作。当用户在预定时段内尚未激活完全模式程序FP并且尚未进行喂养的操作时,完全模式程序FP进行基于以上生成结果的处理(使得宠物变得不开心)。
在此示例中,当正在玩游戏的同时用户进行喂养宠物的操作时,完全模式程序FP通过获取关于当前时间和日期的信息并向所获取的当前时间和日期添加由游戏的内容确定的预定时段(在此情况下,是距喂养宠物的下一定时的时间间隔),确定用户接着应当喂养宠物的定时。然后,完全模式程序FP连同显示开始时间一起输出具有提示用户喂养宠物的内容的显示要素信息,该显示开始时间是比下一喂养定时早了预定时段的时间。以此方式,甚至当完全模式程序FP不执行时,信息处理装置10也可以通过显示包含显示要素的程序相关图像Ip吸引用户的注意力,该显示要素表示当用于进行喂养宠物的预定操作的定时变得更接近时的情况。
此外,甚至对于预定事件在玩游戏期间内从用户满足特定条件的时间起已经流逝特定时段之后发生的游戏,完全模式程序FP连同关于基于事件发生定时确定的显示开始时间的信息一起输出用于提醒用户事件的发生的显示要素信息,因此信息处理装置10可以显示包括一种显示要素的程序相关图像Ip,该显示要素示出在事件的发生的定时的事件的发生。在图7的空间S8和S9中,图示如上所述的显示要素的示例。
此外,显示要素信息获取部分24可以用作删除在存储单元12中存储的显示要素信息的API。此外,显示要素信息获取部分24也可以用作更新显示要素的内容的API,该显示要素由在存储单元12中存储的显示要素信息以及指示与该显示要素信息关联的显示时间的信息表示。例如,在玩游戏期间,每次用户进行操作时,用于显示用于提醒用户应当如上所述那样周期性进行的操作的显示要素信息的定时改变。然后,每当进行预定处理(诸如,用户指令的喂养处理),完全模式程序FP就调用用于更新显示要素信息的API,由此进行如下的更新处理:将之前在存储单元12中存储的显示要素信息的显示开始时间更新到基于用户应当进行喂养的下一定时所确定的时间。此外,当结束了在游戏中已经发生的事件时,完全模式程序FP可以删除用于提醒用户事件的发生的显示要素信息。此外,在用户操作的角色的外观被输出为显示要素信息的情况下,完全模式程序FP可以基于当角色的外观改变时所改变的外观更新之前输出的显示要素信息。注意,为了使能显示要素信息的更新和删除,完全模式程序FP可以在输出显示要素信息时添加识别信息,用于识别显示要素信息自身或者其类型。在此情况下,显示要素信息获取部分24在存储单元12中连同向显示要素信息添加的识别信息一起存储显示要素信息的每一个片段。其结果是,当完全模式程序FP更新或删除在存储单元12中存储的显示要素信息时,该完全模式程序FP可以通过指定识别信息来更新或删除具体显示要素信息。
注意,程序面板B可以包括具有对与其他完全模式程序FP对应的程序面板B共同的内容的显示要素以及对于与该程序面板B对应的完全模式程序FP独一的信息。例如,显示要素信息获取部分24获取从预定共同内容传递服务器传递的显示要素信息,并且向面板图像显示控制部分22连同其他显示要素信息一起提供所获取的显示要素信息。
此外,在程序相关图像Ip的显示期间,面板图像显示控制部分22可以以预定定时改变在程序面板B中布置的每一个空间中显示的显示要素。取决于由内容传递服务器提供的内容或者完全模式程序FP的处理的进展状态,显示要素信息获取部分24可以获取比可以在程序面板B中显示的显示要素更多的显示要素。在此情况下,例如,面板图像显示控制部分22在程序面板B中布置从多个显示要素的候选者中随机选择的显示要素,并且每次特定时段流逝时就切换在程序面板B中布置的显示要素。以此方式,通过对超出特定时段的时段显示程序相关图像Ip,用户可以浏览比可以在程序面板B中显示的显示要素更多的显示要素。
进一步,当改变在程序面板B中布置的显示要素时,在改变的定时获取关于当前时间和日期的信息,并且确定所获取的时间和日期是否满足关于与显示要素信息关联的显示开始时间和显示终止时间的条件。其结果是,例如,如果曾经变成显示对象的显示要素超出其显示终止时间而程序相关图像Ip的显示继续,则可以通过在显示要素的更新定时从程序相关图像Ip删除显示要素,来避免超时显示终止时间的显示要素保持显示的状态。
此外,除了指示显示时间的信息之外,指示由显示要素信息表示的显示要素的显示位置和显示形式的属性信息还可以与显示要素信息获取部分24所获取的显示要素信息关联。例如,如果指定预定显示位置(模板中的空间的任一个)的属性信息与显示要素信息关联,则面板图像显示控制部分22在程序面板B中在所指定的显示位置上布置显示要素。此外,指示显示形式的属性信息可以包括用于指定文本数据的字体和字符尺寸的信息。进一步,指示当用户操作由显示要素信息表示的显示要素时将要进行的处理的内容的信息可以与该显示要素信息关联。例如,指示处理的内容的信息是表示当用户确定显示要素为操作的对象时将要显示的信息的获取的目的地的信息(诸如URL)。在此示例中,当用户轻敲显示要素时,面板图像显示控制部分22显示通过参考关于与显示要素关联的获取目的地的信息获取的信息。
图像切换部分25根据用户的选择操作,在事先由面板图像显示控制部分22显示的多个面板图像Ib之间切换显示图像。例如,当用户第一次在显示菜单图像Im的状态下选择应用程序AP1时,面板图像显示控制部分22在屏幕S上显示与应用程序AP1对应的面板图像Ib1。在此状态下,用户可以通过进行菜单切换操作来再次显示菜单图像Im。进一步,当用户在再次显示菜单图像Im的状态下选择另一应用程序AP2时,面板图像显示控制部分22显示与应用程序AP2对应的面板图像Ib2。以此方式,用户可以在屏幕S的面板显示区域Ab中连续地显示与多个应用程序AP对应的多个面板图像Ib。图像切换部分25将在过去显示的多个面板图像Ib和菜单图像Im看作切换处理的对象,并且当用户进行图像切换操作时切换将要显示在面板显示区域Ab中的图像。注意,以下,将经历图像切换处理的多个面板图像Ib和菜单图像Im统称为切换对象图像。
根据此实施例,图像切换操作是相对于触摸传感器15在左向/右向(X轴方向)上的滑动操作。换而言之,当切换对象图像中的任一个被显示在屏幕S的面板显示区域Ab中时,用户可以通过进行朝向左向和右向的任一个的滑动操作来在面板显示区域Ab中显示另一切换对象图像。例如可以取决于切换对象图像的过去显示的顺序,确定当进行图像切换操作时将要显示多个切换对象图像之中的哪个切换对象图像。
特别根据此实施例,当用户进行图像切换操作时,图像切换部分25在面板显示区域Ab中显示切换显示图像的过程。作为具体示例,现在对如下情况给出显示内容的描述:通过用户朝向负X轴向进行滑动操作来将面板图像Ib1切换到面板图像Ib2。首先,当在显示面板图像Ib1的状态下用户用手指触摸触摸传感器15并开始滑动操作时,图像切换部分25取决于用户的手指的滑行距离,显示在用户移动手指的方向(负X轴向)上的面板图像Ib1的移动的状态。与此同时,图像切换部分25显示面板图像Ib2从平面的右侧(从前方观察)(X轴的正向侧)跟随移动的面板图像Ib1进行屏幕S的状态。换而言之,在图像切换操作期间,在面板显示区域Ab中显示在图像切换操作的指令方向上布置的面板图像Ib1和Ib2的各个部分。然后,当用户滑动手指经过预定距离或更长的距离并从触摸传感器15分离手指,从而结束图像切换操作时,图像切换部分25进一步移动面板图像Ib1和Ib2直到整个面板图像Ib2在面板显示区域Ab中移动。其结果是,图像切换处理完成,并且引起在面板显示区域Ab中仅显示面板图像Ib2的状态。
图8是图示当图像切换处理正在进行时在屏幕S上显示的图像的示例的图示。在图8中,虚线箭头指示用户的手指的移动的过程。此外,图9是概念性图示当图像切换处理正在进行时生成在屏幕S上显示的图像的方法的示图。在图9中,点划线矩形指示在面板显示区域Ab中显示的显示目标范围R,并且虚线箭头指示在图像切换处理的执行期间显示目标范围R的移动方向。如图9所示,在图像切换处理期间,在并排布置在切换之前显示的面板图像Ib1和将要在切换之后显示的面板图像Ib2的图像中,包括面板图像Ib1和面板图像Ib2的边缘部分(boarder portion)的范围经历屏幕S上的显示。
对如下情况给出图像切换处理的描述:在切换之前显示的面板图像Ib1是由轻程序LP1再现的程序输出图像Io1,而在切换之后显示的面板图像Ib2是由轻程序LP2再现的程序输出图像Io2。根据此实施例,即使程序输出图像Io实际上不显示在屏幕S上,曾经激活的轻程序LP仍然处于正在由应用程序执行部分23执行的状态下,同时其自身输出的图像输出图像Io保持为切换对象图像。然而,当程序输出图像Io不显示在屏幕S上时,仅需要在后台执行该轻程序LP且不需要用于程序输出图像Io的再现处理。然后,根据此实施例,除了正在进行图像切换处理的时段之外,在面板显示区域Ab中不同时显示多个面板图像Ib。其结果是,如果程序输出图像Io1和Io2两者都是切换对象图像,则尽管正在执行轻程序LP1和LP2两者,但是通常当在面板显示区域Ab中显示程序输出图像Io1时仅轻程序LP1进行再现处理,而当显示程序输出图像Io2时仅轻程序LP2进行再现处理。
基于上述配置,每一个轻程序LP不总是假定当该轻程序LP进行再现处理时,其他程序LP同时进行再现处理。因此,如果多个轻程序LP对程序输出图像Io同时进行再现处理,则CPU或GPU上的处理负载临时增加,且再现处理中的延迟问题可能出现。然而,如上所述,在图像切换处理的执行期间在面板显示区域Ab中同时显示两个程序输出图像Io。
为了避免此问题,例如,可以想象,图像切换部分25对于当前不显示在面板显示区域Ab上的每一个切换对象图像,在存储单元12中临时存储前一瞬间(immediately before)显示的切换对象图像的静态图像数据,且当进行图像切换操作时,通过使用静态图像数据显示图像切换的过程。通过使用此方法,在图像切换的过程中,可以避免多个轻程序LP同时进行再现处理的状态。然而,当上次显示对应的程序输出图像Io时,记录静态图像数据,并且极可能的是,作为之后轻程序LP在后台的处理的执行的结果,将要再次显示的程序输出图像Io可能不同于作为静态图像数据的所存储的图像。然后,紧接着经历显示的轻程序LP再次开始在图像切换处理之后的再现处理,从在图像切换期间显示的静态图像数据极大地改变了的程序输出图像Io可以被显示,这使得用户感受到不适。
因此,根据此实施例,当在屏幕S上同时显示多个程序输出图像Io(作为由多个轻程序LP独立进行的再现处理的结果而获取)时,再现定时控制部分26调整程序输出图像Io的再现定时以便于抑制处理负载。
再现定时控制部分26确定应用程序AP进行再现处理的定时,该应用程序AP用于再现将要在屏幕S上显示的程序输出图像Io。然后,再现定时控制部分26输出再现指令,其用于向应用程序AP指令所确定的定时以便应用程序AP在该定时进行再现处理。如果仅存在一个程序输出图像Io要被显示在屏幕S上,则再现定时控制部分26可以向用于再现程序输出图像Io的应用程序AP以预定频率(例如,每秒60次的频率)输出再现指令,以便应用程序AP简单地以预定频率进行再现处理。该应用程序AP根据再现指令以预定间隔进行用于程序输出图像Io的再现处理。作为再现处理的结果获得的程序输出图像Io被写入图像处理单元13的帧缓存中,并且显示在屏幕S上。因此,由再现定时控制部分26输出的再现指令的频率通常与屏幕S的显示的更新频率(帧速率)一致。以下,当将要显示在屏幕S上的程序输出图像Io的数量是一时,用于输出再现定时控制部分26的再现指令的频率用基准频率fr表示。
另一方面,如果在屏幕S上同时显示由多个轻程序LP再现的多个程序输出图像Io,则再现定时控制部分26向多个轻程序LP的至少一个以低于基准频率fr的频率提供再现指令,该基准频率fr是对于将要显示的程序输出图像Io的数量是一的情况。换而言之,对于多个轻程序LP的至少一个,以比以基准频率fr提供再现指令的时间间隔更长的时间间隔提供再现指令。作为具体示例,再现定时控制部分26将对每一个轻程序LP提供的再现指令的频率减少到基准频率fr之下,以便在预定时段内由多个轻程序LP进行的再现处理的总次数不超出基准频率fr。进一步,再现定时控制部分26一次仅向一个轻程序LP输出再现指令,以便于防止多个轻程序LP同时进行再现处理。其结果是,即使多个轻程序LP进行再现处理,再现处理的执行定时也将不彼此重叠。进一步,再现定时控制部分26可以以预定次序每次一个地向多个轻程序LP重复提供再现指令。其结果是,每一个轻程序LP可以以特定周期进行再现处理,该周期和其他轻程序LP的周期相同。
作为示例,当图像切换部分25正在进行从由轻程序LP1再现的程序输出图像Io1到由轻程序LP2再现的程序输出图像Io2的图像切换处理时,再现定时控制部分26以基准频率fr的一半的频率向轻程序LP1和LP2的每一个交替地输出再现指令。图10是图示基于再现定时控制部分26的指令对程序输出图像Io1和Io2的再现处理的执行定时的示图。在此图的示例中,基准频率fr是60次/秒,且时间t是流逝的时间,t=0对应于图像切换处理的开始时间点,而t=n对应于图像切换处理的终止时间点。此外,图中的矩形表示基于再现定时控制部分26的再现指令的各个轻程序LP1和LP2的再现处理的执行定时。在此图的示例中,再现定时控制部分26在图像切换处理开始之前1/60秒一次地向轻程序LP1提供再现指令,并在图像切换处理的开始之后,1/30秒一次且交替地向轻程序LP1和LP2的每一个提供再现指令。此外,在图像切换处理的终止之后,再现定时控制部分26以1/60秒一次地向轻程序LP2提供再现指令。作为此控制的结果,可以提供如下配置:无论是否进行图像切换处理,由轻程序LP进行的再现处理的频率作为整体不超出用于信息处理装置10的基准频率fr,且在任何时间点仅有任意一个轻程序LP进行再现处理。其结果是,可以避免由重叠再现处理引起的处理负载的增加。
在此情形下,根据此实施例,以与基准频率fr对应的帧速率进行在屏幕S上显示的图像的更新自身。其结果是,当在屏幕S上同时显示多个程序输出图像Io时,需要对程序输出图像Io的每一个以基准频率fr进行帧缓冲存储器的写入。然而,当在屏幕S上同时显示多个程序输出图像Io时,轻程序LP的每一个的再现处理自身的频率是低于如上所述的基准频率fr的。因此,将要在轻程序LP不进行再现处理的定时被写入帧缓冲存储器的程序输出图像Io是由紧接在轻程序LP之前生成的程序输出图像Io。
作为具体示例,在图10中,作为进行再现处理的轻程序LP1的结果,在t=0时生成程序输出图像Io1(0)。轻程序LP1不直接将程序输出图像Io1(0)写入帧缓冲存储器,而是将程序输出图像Io1(0)写入在存储单元12中保留的存储器区域M1中。图像切换部分25将程序输出图像Io1(0)复制到与面板显示区域Ab对应的帧缓冲存储器,并将要在状态条显示区域As中显示的图像写入与状态条显示区域As对应的帧缓冲存储器的区域中。其结果是,更新屏幕S的显示图像。然后,仅轻程序LP2在t=1/60秒的时间点进行再现处理,并且将作为其结果生成的程序输出图像Io2(1)写入不同于存储器区域M1的存储单元12的存储器区域M2中。然后,图像切换部分25剪切被写入在存储器区域M1中的程序输出图像Io1(0)的一部分并将所剪切的部分写入帧缓冲存储器,并且剪切被写入在存储器区域M2中程序输出图像Io2(1)的一部分并将所剪切的部分写入帧缓冲存储器。其结果是,将在屏幕S上显示的图像更新到包括程序输出图像Io1和Io2两者的图像。进一步,在t=2/60秒的时间点,轻程序LP1生成程序输出图像Io1(2)并将该程序输出图像Io1(2)写入存储器区域M1中,并且图像切换部分25通过将被写入在存储器区域M1中的程序输出图像Io1(2)的一部分和存储在存储器区域M2中的程序输出图像Io2(1)的一部分写入帧缓冲存储器,来更新在屏幕S上显示的图像。尽管每一个轻程序LP以低于基准频率fr的频率进行再现处理,但是信息处理装置10可以通过重复上述处理以基准频率fr更新包括多个程序输出图像Io的图像并在屏幕S上显示所更新的图像。
注意,在以上描述中,当在由多个轻程序LP再现的程序输出图像Io中进行图像切换处理时,再现定时控制部分26减少指向轻程序LP的每一个的再现指令的频率。然而,本发明的实施例不限于此,当在由轻程序LP再现的程序输出图像Io和由面板图像显示控制部分22生成的程序相关图像Ip之间进行图像切换处理时,再现定时控制部分26也可以进行简单控制。此外,在此情况下,假定,相比于用于程序相关图像Ip的再现处理的处理负载,用于程序输出图像Io的再现处理的处理负载相对高。因而,再现定时控制部分26可以不从基准频率fr改变用于程序相关图像Ip的再现处理的频率(即,再现定时控制部分26指令面板图像显示控制部分22进行用于程序相关图像Ip的再现处理的频率)并且可以仅减少指向轻程序LP的用于程序输出图像Io的再现指令的频率。根据此控制,尽管面板图像显示控制部分22也在轻程序LP进行用于程序输出图像Io的再现处理的定时进行用于程序相关图像Ip的再现处理,但是相比于不减少指向轻程序LP的再现指令的频率的情况,从长期看可以减少处理负载。特别在此情况下,面板图像显示控制部分22可以仅将程序相关图像Ip之中将要在屏幕S上显示的部分直接写入帧缓存。
本发明的实施例不限于上述。例如,取代在屏幕S上布置的触摸传感器15或者另外,信息处理装置10可以包括在信息处理装置10的外壳的后表面侧(布置屏幕S的表面的后侧)上的触摸传感器。在此情况下,在后表面侧上的触摸传感器也具有与屏幕S对应的检测表面,并且用户可以通过进行滑动操作(其中,用户在触摸传感器上移动手指等),进行滚动指令和图像切换指令。
此外,尽管用户通过使用上述描述中的触摸传感器进行用于菜单条目图像Ic的选择操作和图像切换操作,但是用户可以通过使用其他各种操作装置向信息处理装置10指令指引(direction)。
此外,可以不仅对图像切换处理也可以对多个程序互相独立地进行图像的再现处理并在屏幕上同时显示结果的多个图像的各种情形,进行再现定时控制部分26的再现定时的调整。例如,如果由n个程序互相独立地进行再现处理而获得的n个程序输出图像Io被同时显示在屏幕上,则再现定时控制部分26可以将指向每一个程序的再现指令的频率减少到基准频率fr的1/n,并且可以向每一个程序每次一个地顺序输出再现指令。

Claims (10)

1.一种信息处理装置,包括:
显示要素信息获取部件,用于获取在应用程序的执行期间由所述应用程序输出的显示要素信息,并将所述显示要素信息存储在存储单元中;和
程序相关图像显示控制部件,用于生成包括由在所述存储单元中存储的所述显示要素信息表示的显示要素的图像作为用于表示与所述应用程序有关的信息的程序相关图像,并控制显示单元在不执行所述应用程序的时段期间显示所生成的图像。
2.根据权利要求1的所述信息处理装置,其中:
所述显示要素信息获取部件连同所述显示要素信息一起,获取指示由所述应用程序输出的显示要素信息的显示时间的信息;且
所述程序相关图像显示控制部件通过使用指示所述显示时间的信息来控制由所述显示要素信息表示的显示要素的显示定时。
3.根据权利要求2的所述信息处理装置,其中:
所述应用程序是用于在预定处理执行时间执行预定处理的程序;并且
所述显示要素信息获取部件连同有关于所述预定处理的显示要素信息一起,获取指示取决于所述预定处理执行时间确定的显示时间的信息。
4.根据权利要求2的所述信息处理装置,其中:
指示所述显示时间的信息包括指示用于所述显示要素的显示开始时间的信息;且
所述程序相关图像显示控制部件在所述程序相关图像的显示定时在显示开始时间之前时,限制包括所述显示要素的程序相关图像的显示,而在所述显示定时在显示开始时间之后时,显示包括所述显示要素的程序相关图像。
5.根据权利要求2的所述信息处理装置,其中:
指示所述显示时间的信息包括指示用于所述显示要素的显示终止时间的信息;且
所述程序相关图像显示控制部件在所述程序相关图像的显示定时在所述显示终止时间之前时,显示包括所述显示要素的程序相关图像,而在所述显示定时在所述显示终止时间之后时,限制包括所述显示要素的程序相关图像的显示。
6.根据权利要求1的所述信息处理装置,其中:
所述显示要素信息获取部件响应于所述应用程序的指令,删除在所述存储单元中存储的所述显示要素信息。
7.根据权利要求1的所述信息处理装置,其中:所述显示要素信息获取部件响应于所述应用程序的指令,将在所述存储单元中存储的所述显示要素信息更新到由所述应用程序重新输出的显示要素信息。
8.根据权利要求1的所述信息处理装置,其中:
所述应用程序是第一类型的应用程序;
所述信息处理装置进一步包括菜单图像显示控制部件,用于控制所述显示单元来显示菜单图像,所述菜单图像包括与所述第一类型的应用程序关联的菜单条目图像和与不同于所述第一类型的第二类型的应用程序关联的菜单条目图像;
所述程序相关图像显示控制部件在用户在显示所述菜单图像的状态下选择与所述第一类型的应用程序关联的菜单条目图像时,生成用于表示与所述第一类型的应用程序有关的信息的程序相关图像;并且
所述信息处理装置进一步包括应用执行部件,用于在所述用户在显示菜单图像的状态下选择与所述第二类型的应用程序关联的菜单条目图像时,激活所述第二类型的应用程序并开始由所述第二类型的应用程序输出的图像的显示,以及在所述用户在显示所述程序相关图像的状态下进行预定激活指令操作时,激活与所述程序相关图像对应的第一类型的应用程序并开始由所述第一类型的应用程序输出的图像的显示。
9.一种信息处理方法,包括如下步骤:
在应用程序的执行期间获取由所述应用程序输出的显示要素信息,并在存储单元中存储所述显示要素信息;以及
在不执行所述应用程序的时段期间,显示由在所述存储单元中存储的所述显示要素信息表示的显示要素,作为用于表示与所述应用程序有关的信息的程序相关图像。
10.一种计算机可读信息存储介质,在其上记录了用于使得计算机作为以下部件工作的程序:
显示要素信息获取部件,用于获取在应用程序的执行期间由所述应用程序输出的显示要素信息,并将所述显示要素信息存储在存储单元中;和
程序相关图像显示控制部件,用于生成包括由在所述存储单元中存储的所述显示要素信息表示的显示要素的图像作为用于表示与所述应用程序有关的信息的程序相关图像,并控制显示单元在不执行所述应用程序的时段期间显示所生成的图像。
CN201180036992.8A 2010-07-28 2011-06-30 信息处理装置 Active CN103038741B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010168979A JP5541998B2 (ja) 2010-07-28 2010-07-28 情報処理装置
JP2010-168979 2010-07-28
PCT/JP2011/065073 WO2012014624A1 (ja) 2010-07-28 2011-06-30 情報処理装置

Publications (2)

Publication Number Publication Date
CN103038741A true CN103038741A (zh) 2013-04-10
CN103038741B CN103038741B (zh) 2015-11-25

Family

ID=45529843

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180036992.8A Active CN103038741B (zh) 2010-07-28 2011-06-30 信息处理装置

Country Status (5)

Country Link
US (1) US9678615B2 (zh)
EP (1) EP2600232B1 (zh)
JP (1) JP5541998B2 (zh)
CN (1) CN103038741B (zh)
WO (1) WO2012014624A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140044881A (ko) * 2011-08-05 2014-04-15 톰슨 라이센싱 비디오 피킹
US20130100042A1 (en) * 2011-10-21 2013-04-25 Robert H. Kincaid Touch screen implemented control panel
US9046917B2 (en) * 2012-05-17 2015-06-02 Sri International Device, method and system for monitoring, predicting, and accelerating interactions with a computing device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11161405A (ja) * 1993-12-02 1999-06-18 Casio Comput Co Ltd ウィンドウ表示制御装置
US7003735B2 (en) * 2001-03-29 2006-02-21 International Business Machines Corporation Calendar desktop graphical user interface (GUI) for computer workstations, personal computers, and personal digital assistants
CN101256463A (zh) * 2007-01-19 2008-09-03 Lg电子株式会社 通过触摸式输入设备输入信息
US20090113444A1 (en) * 2007-10-31 2009-04-30 Google Inc. Application Management

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5386360A (en) * 1989-05-09 1995-01-31 Ansan Industries Ltd. Peripheral data acquisition, monitor, and adaptive control system via personal computer
JP2967961B2 (ja) * 1991-12-16 1999-10-25 インターナショナル・ビジネス・マシーンズ・コーポレイション 月別の予定表表示の提示方法
JPH06342357A (ja) * 1993-06-01 1994-12-13 Mitsubishi Electric Corp ユーザインタフェース方式
US5602728A (en) * 1994-09-07 1997-02-11 Watermation Group Ltd. Three button programmable sprinkler controller
US5842177A (en) * 1994-12-29 1998-11-24 International Business Machines Corporation Management of calendar events in a data processing system
US5601432A (en) * 1995-01-20 1997-02-11 Mastery Rehabilitation Systems, Inc. Educational organizer
US5855006A (en) * 1996-03-01 1998-12-29 Humware Personal activity scheduling apparatus
JP3505320B2 (ja) * 1996-05-27 2004-03-08 シャープ株式会社 情報処理装置
US5899979A (en) * 1996-07-22 1999-05-04 International Business Machines Corporation Method and system for automatically integrating scheduled work items onto an electronic calendar
US6018343A (en) * 1996-09-27 2000-01-25 Timecruiser Computing Corp. Web calendar architecture and uses thereof
US5898431A (en) * 1996-12-31 1999-04-27 International Business Machines Corporation Database graphical user interface with calendar view
US6034683A (en) * 1997-03-26 2000-03-07 Netscape Communications Corporation Time line for desktop metaphor
US5910802A (en) * 1997-06-11 1999-06-08 Microsoft Corporation Operating system for handheld computing device having taskbar auto hide
US5970466A (en) * 1997-10-06 1999-10-19 Impromed, Inc. Graphical computer system and method for appointment scheduling
US6369840B1 (en) * 1999-03-10 2002-04-09 America Online, Inc. Multi-layered online calendaring and purchasing
JP2002259010A (ja) 2001-03-05 2002-09-13 Fujitsu Ltd ショートカットアイコンの自動作成・削除プログラム
US20040061714A1 (en) * 2002-09-30 2004-04-01 Microsoft Corporation Logical element tree and method
JP2005322135A (ja) * 2004-05-11 2005-11-17 Casio Comput Co Ltd 電子機器、表示管理プログラム
US7805676B2 (en) * 2005-12-21 2010-09-28 Vmware, Inc. Enhanced calendaring functionality in a collaboration suite
US7904818B2 (en) * 2007-10-15 2011-03-08 International Business Machines Corporation Summarizing portlet usage captured responsive to trigger events in a portal page
US20090295788A1 (en) * 2008-06-03 2009-12-03 Microsoft Corporation Visually emphasizing peripheral portions of a user interface
CN102135849B (zh) * 2010-01-23 2013-06-12 国基电子(上海)有限公司 一种电子装置及其图形化使用者接口控制方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11161405A (ja) * 1993-12-02 1999-06-18 Casio Comput Co Ltd ウィンドウ表示制御装置
US7003735B2 (en) * 2001-03-29 2006-02-21 International Business Machines Corporation Calendar desktop graphical user interface (GUI) for computer workstations, personal computers, and personal digital assistants
CN101256463A (zh) * 2007-01-19 2008-09-03 Lg电子株式会社 通过触摸式输入设备输入信息
US20090113444A1 (en) * 2007-10-31 2009-04-30 Google Inc. Application Management

Also Published As

Publication number Publication date
JP5541998B2 (ja) 2014-07-09
JP2012027876A (ja) 2012-02-09
WO2012014624A1 (ja) 2012-02-02
EP2600232A1 (en) 2013-06-05
US20130123023A1 (en) 2013-05-16
EP2600232A4 (en) 2014-12-10
EP2600232B1 (en) 2018-05-30
US9678615B2 (en) 2017-06-13
CN103038741B (zh) 2015-11-25

Similar Documents

Publication Publication Date Title
CN103562839B (zh) 多应用环境
CN102663002B (zh) 结构化文档的渲染方法及系统
CN107728905B (zh) 一种弹幕显示方法、装置及存储介质
CN103582863A (zh) 多应用环境
EP2762997A2 (en) Eye tracking user interface
CN112860148B (zh) 勋章图标的编辑方法、装置、设备及计算机可读存储介质
CN102857810A (zh) 信息处理设备、信息处理方法和程序
CN114095741B (zh) 页面显示方法、装置、电子设备及存储介质
CN102707866A (zh) 用于导航基于层级式菜单的用户界面的方法和装置
CN104461318A (zh) 基于增强现实技术的点读方法及系统
BR112012030176B1 (pt) aparelho e método de controle de exibição, e, mídia de gravação
CN104281360B (zh) 编辑处理装置以及编辑处理方法
CN111586464B (zh) 基于媒体信息流的内容展示方法、装置、设备及存储介质
CN103064735A (zh) 一种显示处理方法、装置及电子设备
CN110507992B (zh) 一种虚拟场景中的技术支持方法、装置、设备及存储介质
CN107925788A (zh) 基于数据结构化的直观的视频内容再生成方法及其用户界面装置
CN105900053A (zh) 用于指定链接目的地的界面装置和计算机程序、用于观看者的界面装置和计算机程序
CN112835478B (zh) 客户端中标签的显示处理方法、装置、设备及存储介质
CN106708478B (zh) 滚动视图显示方法及装置
CN112887794B (zh) 视频剪辑方法及装置
WO2024077909A1 (zh) 基于视频的交互方法、装置、计算机设备和存储介质
CN109947332A (zh) 一种页面元素突出显示方法、装置、设备及存储介质
CN111580903A (zh) 实时投票方法、装置、终端设备和存储介质
CN104350455A (zh) 使元素被显示
CN110297585A (zh) 电子白板实现方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant