CN105373331A - 信息处理装置及显示控制方法 - Google Patents

信息处理装置及显示控制方法 Download PDF

Info

Publication number
CN105373331A
CN105373331A CN201510486787.1A CN201510486787A CN105373331A CN 105373331 A CN105373331 A CN 105373331A CN 201510486787 A CN201510486787 A CN 201510486787A CN 105373331 A CN105373331 A CN 105373331A
Authority
CN
China
Prior art keywords
image
control unit
display
amplification
event
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510486787.1A
Other languages
English (en)
Inventor
一见日出志
山田雅章
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN105373331A publication Critical patent/CN105373331A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Abstract

本发明提供一种信息处理装置及显示控制方法。所述信息处理装置实现放大功能，而不进行系统级定制。所述信息处理装置包括应用单元、放大控制单元和画面控制单元。该应用单元在通常显示区域中生成并描绘图像。该放大控制单元放大在该通常显示区域中描绘的图像，并在放大显示区域中生成并描绘包括放大后的图像的一部分的放大图像。该画面控制单元在放大功能无效的情况下在显示器上显示在通常显示区域中描绘的图像，并且在放大功能有效的情况下在显示器上显示在放大显示区域中描绘的放大图像。

Description

信息处理装置及显示控制方法
技术领域
本发明涉及具有放大并显示在显示装置的显示画面上呈现的图像的放大功能的信息处理装置。
背景技术
包括显示装置的一些信息处理装置具有以期望放大率来放大并显示在显示装置上呈现的图像的放大功能。信息处理装置不仅可以放大诸如照片和字符等依赖应用软件(AP)的内容，而且还可以放大显示画面上显示的整个图像。这样，信息处理装置可以以适当大小为用户显示在显示画面上显示的包括诸如图标的对象的全部图像。用户可以基于放大的图像进行操作。因此，可用性得到增强，即使视力差的用户也可以无障碍地操作装置。日本特开第2012-252370号公报论述了捕获的显示画面的一部分可以被缩放的这种信息处理装置。
放大功能一般需要放大整个图像，同时不断更新显示画面，并且在诸如操作系统(OS)或视窗系统等的系统级才包括放大功能。因此，在信息处理装置不采用具有放大功能的OS或视窗系统的情况下，显示画面上显示的整个图像无法被放大和显示。另外，由于存在许可证颁发等的问题，导致放大功能难以在后来加进OS或视窗系统中。
另外，当前在市场上没有提供如下的信息处理装置，在所述信息处理装置中当通过放大功能放大并显示AP执行画面时，可以通过对放大图像的操作来操作AP。具体地，近来需要能够通过在放大功能处理中使用的诸如拖操作和捏(pinch)操作等的操作来操作AP的信息处理装置。
发明内容
本发明主要针对一种不进行系统级定制而实现了放大功能的信息处理装置。
信息处理装置包括被构造为生成第一图像的应用单元，被构造为放大所述第一图像并生成包括放大后的所述第一图像的一部分的第二图像的放大控制单元，以及被构造为在预定显示装置上显示所述第一图像和所述第二图像中的任一者的画面显示单元。
根据以下参照附图对示例性实施例的描述，本发明的其他特征将变得清楚。
附图说明
图1是信息处理装置的硬件结构图。
图2是控制单元的功能框图。
图3是显示区域切换处理的说明图。
图4是放大镜框的说明图。
图5是整体放大显示的说明图。
图6是图像切换处理的流程图。
图7A到图7C是事件处理的流程图。
图8是捕获图像描绘处理的流程图。
图9A和图9B是放大图像描绘处理的流程图。
图10是根据第二示例性实施例的用于放大镜的事件处理的流程图。
图11是根据第二示例性实施例的用于整体放大的事件处理的流程图。
图12是根据第三示例性实施例的控制单元的功能框图。
图13是根据第三示例性实施例的用于放大镜的事件处理的流程图。
图14是根据第三示例性实施例的用于整体放大的事件处理的流程图。
图15是例示由一般应用显示的示例性画面的图。
图16是例示根据第四示例性实施例的显示有对象的示例性图像的图。
图17是根据第四示例性实施例的事件处理的流程图。
图18是根据第四示例性实施例的用于整体放大的描绘处理的流程图。
图19是根据第五示例性实施例的通过自动清除将图像返回到原始大小的处理的流程图。
图20是根据第六示例性实施例的放大图像显示方法的说明图。
具体实施方式
以下将参照附图来详细描述示例性实施例。
<结构>
图1是根据本示例性实施例的信息处理装置的硬件结构图。信息处理装置101是诸如图像形成装置或智能电话等包括显示器119(显示装置)的计算机。信息处理装置101不具有诸如OS或视窗系统的系统级的放大功能。信息处理装置101除了显示器119外还包括控制单元110、触摸屏118以及外部存储器120。控制单元110包括中央处理单元(CPU)111、随机存取存储器(RAM)112以及只读存储器(ROM)113，并且控制整个信息处理装置101的操作。因此，控制单元110包括连接到触摸屏118的输入控制单元114、连接到显示器119的显示控制单元115，以及连接到外部存储器120的外部存储器接口(I/F)116。另外，控制单元110包括被构造为控制与诸如局域网(LAN)的网络102的通信的通信I/F控制器117。CPU111、RAM112、ROM113、输入控制单元114、显示控制单元115、外部存储器I/F116以及通信I/F控制器117以可通信方式经由系统总线B彼此连接。
CPU111读取ROM113或外部存储器120中存储的计算机程序并且通过利用RAM112作为工作区来执行所述程序，由此控制信息处理装置101中的各单元的操作。ROM113是非易失性存储器并且是被构造为除了计算机程序外还保持处理所需的各项数据的存储介质。RAM112是易失性存储器并且提供处理期间的临时存储区域。
输入控制单元114接收用户通过利用输入设备的操作，并且根据接收的操作向CPU111发送控制信号。在图1中，触摸屏118用作输入设备。输入设备除了触摸屏118外，还可以采用诸如键盘的字符输入设备或者诸如鼠标的指示设备。触摸屏118是被构造为检测通过用户手指或触笔触摸的位置的指示设备。触摸屏118可以采用诸如电阻膜型、电容型、表面声波型、红外型、电磁感应型、图像识别型、以及光学传感器型的各种类型。输入控制单元114将根据触摸屏118检测到的位置的控制信号发送给CPU111。CPU111基于该控制信号进行处理。CPU111对信息处理装置101进行对应于用户操作的处理。
显示控制单元115在CPU111的控制下在显示器119上显示图像。显示控制单元115例如在显示器119上显示包括与处理相关联的对象的图像。根据本示例性实施例的显示控制单元115可以在显示器119上以100％的放大率来显示图像并且可以以预定放大率来显示放大图像。
触摸屏118被整体配设在显示器119的显示画面上。触摸屏118以不妨碍显示器119上的显示的透射率的方式而被构造。CPU111基于显示器119上显示的对象的位置以及在触摸屏118上检测到的触摸位置来识别被用户操作(触摸)的对象，并进行与对象相关联的处理。以这种方式，能够由触摸屏118和显示器119构造成图形用户界面(GUI)，在该GUI中，用户直观操作显示器119上显示的图像，以进行输入。
诸如硬盘、软盘、光盘(CD)、数字通用盘(DVD)或存储卡的外部存储器120可安装至外部存储器I/F116。在CPU111的控制下，外部存储器I/F116从安装的外部存储器120读取数据并将数据写入外部存储器120。通信I/F控制器117经由网络102控制与连接到网络102的其他设备的通信。
CPU111可以检测触摸屏118上的以下操作或者状态。
触摸下：诸如手指的指示物与触摸屏118接触(触摸开始)
移动：指示物保持与触摸屏118接触(触摸继续)
触摸起：与触摸屏118接触的指示物被分离(触摸结束)
关于操作或者表示用户在触摸屏118上触摸的位置的位置坐标的信息经由输入控制单元114和系统总线B被通知给CPU111。CPU111基于通知的信息来确定在触摸屏118上进行了哪种操作。CPU111基于位置坐标的变化来确定在触摸屏118上每垂直分量和每水平分量的移动(Move)中手指或触笔的移动方向。例如，假设用户通过用手指触摸触摸屏118并且滑动手指来进行拖操作。在这种情况下，CPU111首先检测触摸下以及其位置坐标，然后以预定周期检测移动及其位置坐标。当移动距离是预定值或更大时，CPU111确定进行了拖操作。
触摸屏118可以进行用于同时检测触摸下和移动的多个位置的多触摸。用户可以从其中两个手指或触笔与触摸屏接触的状态开始沿连接两点的线段的方向来缩小或扩大这两点之间的距离。其中用户将两个手指彼此接近或远离地移动的操作看似通过手指夹紧或张开对象的行为，称为“捏操作”。一般地，在许多情况下，通过用户的拇指和食指来进行捏操作。当同时触摸两点并且移动触摸位置的一个或两者时，即，当同时检测两个移动并且移动的位置坐标被改变时，CPU111确定进行了捏操作。另外，CPU111可以计算连接针对捏操作的两点的线段的中心点坐标，以及这两点之间的距离。当两点之间的距离增加时，CPU111确定进行了捏大操作，当两点之间的距离减小时，CPU111确定进行了捏小操作。
图2是例示针对通过信息处理装置101中的控制单元110实现的显示控制的功能的功能框图。CPU111从诸如ROM113或外部存储器120等的存储介质读取并执行计算机程序，以形成各功能，但是各功能可以利用硬件设备来构造。在信息处理装置101中形成画面控制单元201、放大控制单元301、应用单元401以及设备控制单元501。通过利用这种功能，信息处理装置101实现放大显示器119上的图像显示的放大功能。信息处理装置101的放大功能包括两个功能，即“整体放大功能”以及“放大镜功能”。整体放大功能是在显示器119的整个显示画面上显示放大图像。放大镜功能是在显示器119的一部分上显示叠加在未放大图像上的放大图像的功能。放大图像在比显示器119的显示大小小的框内被显示，正如放大镜所引起的一样。在下文中，整体放大功能将简称为“整体放大”并且放大镜功能将简称为“放大镜”。
画面控制单元201管理包括放大功能的AP，并且进行传送关于要被显示给显示器119的图像的图像信息的处理、向AP通知与触摸屏118上的用户触摸操作对应的事件的处理等等。画面控制单元201包括画面信息控制单元202、画面信息存储单元203、画面显示单元204、输入信息控制单元205以及输入信息通知单元206。
画面信息控制单元202从设备控制单元501接收切换了放大模式(放大功能)的放大模式通知，并且将放大模式通知存储在画面信息存储单元203中。放大模式通知包括关于放大功能是否有效的信息、关于放大率的信息、以及是采用整体放大还是放大镜的信息。同时，画面信息控制单元202向放大控制单元301发送放大模式通知，并且响应于来自放大控制单元301的指令指示画面显示单元204切换显示区域。
画面显示单元204在显示区域中描绘要在显示器119上显示的图像。显示区域分别包括其中描绘有图像的具有相同显示大小的两个显示区域。画面显示单元204从画面信息控制单元202接收切换显示区域的指令，并且进行切换要在显示器119上显示的显示区域的处理。
图3是显示区域切换处理的说明图。图3例示了作为最终图像传送目的地的显示器119，以及其中描绘有要被传送到显示器119的图像的虚拟显示区域601。虚拟显示区域601例如被配设在RAM112中。虚拟显示区域601由具有相同显示大小(例如，具有1024像素的宽度以及600像素的高度)的通常显示区域602和放大显示区域603构成。显示器119在其上显示在通常显示区域602中描绘的图像以及在虚拟显示区域601的放大显示区域603中描绘的图像中的任意一者。
在通常显示区域602中，画面显示单元204以开始坐标604的X坐标“0”和Y坐标“0”作为开始点来描绘图像。通过应用单元401来生成在通常显示区域602中描绘的图像。在放大显示区域603中的，画面显示单元204以开始坐标605的X坐标“1024”和Y坐标“0”作为开始点来描绘图像。在放大显示控制单元307中生成在放大显示区域603中描绘的图像。即，在通常显示区域602中描绘通过执行应用单元401中的AP生成的AP执行图像，以及在放大显示区域603中描绘在放大控制单元301中生成的执行图像的放大图像。在图3的示例中，在通常显示区域602中描绘通过复印应用生成的复印设置画面。在放大显示区域603中显示其中复印设置画面的一部分被放大的放大图像。
画面显示单元204响应于来自画面信息控制单元202的显示区域切换指令，来将通常显示区域602中描绘的图像以及在放大显示区域603中描绘的图像的任意一者传送到显示器119。图3例示了放大功能有效并且放大显示区域603中的图像被传送到显示器119并在显示器119上被显示。
输入信息控制单元205根据触摸屏118上的用户操作来分析控制信号，将该控制信号变换为AP可处理的事件信息的形式，并且将该事件信息发送给输入信息通知单元206。事件信息表示触摸屏118上的操作或状态，并且包括关于触摸位置的坐标信息。
输入信息通知单元206从输入信息控制单元205接收事件信息。输入信息通知单元206参照画面信息存储单元203中存储的放大模式通知，由此在放大功能无效时将事件信息发送给应用单元401，或者在放大功能有效时将事件信息发送给放大控制单元301。另外，输入信息通知单元206在事件信息被接收时确定触摸屏118被操作，并且指示以下描述的定时器控制单元503来重设定时器。
放大控制单元301在通常显示区域602中捕获由应用单元401描绘的图像，并且在放大显示区域603中放大并描绘所捕获的图像。放大控制单元301包括放大信息控制单元302、图像捕获单元303、捕获图像存储单元304、放大输入控制单元305、放大输入信息存储单元306、放大显示控制单元307、以及放大显示信息存储单元308。
放大信息控制单元302从画面信息控制单元202接收放大模式通知，并且将接收的放大模式通知发送给放大显示控制单元307。放大信息控制单元302基于放大模式通知来确定放大功能是否有效，并且依据确定结果来指示画面信息控制单元202切换显示区域。
图像捕获单元303响应于来自放大显示控制单元307的指令来捕获由画面显示单元204在通常显示区域602中描绘的图像，并且将捕获的图像存储在捕获图像存储单元304中。
放大输入控制单元305从输入信息通知单元206接收事件信息并且将接收的事件信息存储在放大输入信息存储单元306中，并且将事件信息的接收通知给放大显示控制单元307。放大输入信息存储单元306中存储的事件信息包括诸如触摸下、触摸起或移动等事件的类型，以及表示触摸位置的位置坐标。关于事件信息，基于多个触摸位置的事件信息可以被存储作为一项事件信息。
放大显示控制单元307主要进行以下三个处理。
当从放大输入控制单元305接收到通知时，放大显示控制单元307获取存储在放大输入信息存储单元306中的事件信息以及放大显示信息存储单元308中存储的信息。放大显示信息存储单元308在其中存储诸如针对整体放大功能的放大率的放大显示信息、关于整个图像的显示位置坐标信息、针对放大镜的放大率、以及关于放大镜的显示位置坐标信息。放大显示控制单元307通过利用获取的放大显示信息来新计算放大率或显示位置坐标，并且更新放大显示信息存储单元308中的内容。以下将描述针对放大镜和整体放大的显示位置坐标。
放大显示控制单元307总是监视放大显示信息存储单元308。如果放大功能有效，则放大显示控制单元307指示图像捕获单元303捕获图像并且获取捕获图像存储单元304中存储的捕获图像。放大显示控制单元307基于放大显示信息存储单元308中存储的放大率来放大或缩小获取的捕获图像，并且根据关于放大镜的显示位置坐标信息对画面显示单元204给出描绘指令。如果放大功能无效，则放大显示控制单元307不进行画面显示控制。
放大显示控制单元307从放大信息控制单元302接收放大模式通知，并且依据放大功能是否有效来指示放大信息控制单元302切换显示区域。当确定放大功能无效时，放大显示控制单元307指示放大信息控制单元302切换到通常显示区域602。当确定放大功能有效时，放大显示控制单元307指示放大信息控制单元302切换到放大显示区域603。
应用单元401是被构造为生成要在显示器119上被显示并且在触摸屏118上被操作的图像的一组应用。应用单元401包括设备设置应用402和一般应用403。应用单元401向画面显示单元204发送描绘指令，使得在通常显示区域602中描绘图像。
设备设置应用402是被构造为主要通过作为用户的管理员根据使用环境来设置信息处理装置101主体的各种设置值的AP。例如，设备设置应用402用于诸如语言设置、省电设置、网络设置以及放大功能设置等的设置。根据设置值来确定信息处理装置101的操作。根据本示例性实施例，整体放大功能有效/无效、以及放大镜功能有效/无效被设置作为放大功能设置。整体放大功能和放大镜功能是排他关系，并且它们的仅一者可以被设置为有效。例如，当整体放大功能被设置为有效时，放大镜功能为无效。放大模式通知中包括的信息由设备设置应用402根据放大功能设置来设置。一般应用403是由一般用户使用并且对应于信息处理装置101的功能的AP。为了简化描述仅例示一个一般应用403，但是可以存在多个一般应用403。一般应用403可以采用诸如复印、扫描、发送扫描数据、存储(箱)扫描数据、以及打印的各种AP。
设备控制单元501监视并管理信息处理装置101的状态。设备控制单元501包括设备信息控制单元502、定时器控制单元503、以及设备信息存储单元504。
设备信息控制单元502总是监视设备信息存储单元504，并且在检测到设置值被设备设置应用402更新时将更新的内容发送给画面信息控制单元202。例如，当整体放大功能或放大镜功能被设备设置应用402设置为有效时，设备信息控制单元502生成放大模式通知并且将其发送给画面信息控制单元202。设备信息存储单元504存储由设备设置应用402设置的设置值，此外存储到省电模式的转变时间或自动清除时间。
定时器控制单元503管理当信息处理装置101在一定时间段内未被操作时信息处理装置101转变至的省电模式，或者管理将用户中途操作的图像返回至默认图像的自动清除。具体地，定时器控制单元503对时间计数，并且将其与设备信息存储单元504中存储的至省电模式的转变时间或自动清除时间进行比较。当作为比较结果经过了转变时间或者自动清除时间时，定时器控制单元503向设备信息控制单元502作出针对省电模式或自动清除的请求。当从定时器控制单元503接收到通知请求时，设备信息控制单元502向画面信息控制单元202通知处理已进入自动清除或省电模式。当从输入信息通知单元206被指示重设定时器时，定时器控制单元503重设自身的定时器，并且显示诸如省电模式或自动清除等的处理。
<放大镜>
图4是当放大镜功能被设置为有效时在显示器119上显示的放大镜框的说明图。放大显示区域603中的图像被呈现在显示器119上。放大镜框705小于放大显示区域603并且被显示在放大显示区域603内，并且其显示位置由中心坐标701(x1,y1)代表。放大镜框705根据用户的拖操作，在放大显示区域603内可移动。在图4中，放大镜框705被移动，以变为具有中心坐标702(x2,y2)的放大镜框706。
以放大显示区域603中的左上坐标(1024,0)为原点来描绘放大显示区域603中的图像。该图像与通常显示区域602中描绘的图像相同，并且不被放大。以放大镜框705中的左上坐标(0,0)作为原点来描绘放大镜框705内的放大镜图像。通过放大显示区域603中的左上坐标(1024,0)作为原点来表现放大镜框705的中心坐标701。在放大镜框705中描绘的放大镜图像是在放大显示区域603中在与放大镜框705的中心坐标701相同的坐标处描绘的图像，其根据放大镜的放大率来被放大并且放大图像的一部分被裁切。放大镜框705的中心坐标701、宽度707以及高度708作为关于放大镜框705的显示位置坐标信息被存储在放大显示信息存储单元308中。
用户在移动开始点703(xx1,yy1)进行触摸下，进行触摸移动，并且在移动结束点704(xx2,yy2)进行触摸起，从而将放大镜框705移动到显示器119上的放大镜框706。诸如触摸下、移动以及触摸起的一系列操作中的事件的坐标作为包括通常显示区域602的宽度的虚拟显示区域601的坐标从触摸屏118被通知给画面控制单元201。
移动后的放大镜框706的中心坐标702被获得，使得放大镜框706在其中显示放大镜图像，在该放大镜图像中，在放大显示区域603中在与中心坐标702相同的坐标处描绘的图像被放大并且该放大图像的一部分被裁切。例如可以按照如下来获得移动后的放大镜框706的中心坐标702(x2,y2)。新获得的显示位置坐标信息被存储在放大显示信息存储单元308中。
x2＝x1+(xx2–xx1)
y2＝y1+(yy2–yy1)
图4仅例示了在移动开始点的放大镜框705以及在移动结束点的放大镜框706，但是在移动开始点与移动结束点之间的移动事件期间实际存在多个移动点。移动事件期间的移动点类似地经历坐标计算和放大镜显示。通过放大显示控制单元307来进行用于放大镜的坐标计算的处理以及放大镜的显示。
<整体放大>
图5是整体放大显示的说明图。整体放大的图像在放大显示区域603中被描绘并且在显示器119上被显示。
其中在通常显示区域602中显示的图像以特定放大率被放大的放大图像801以显示器119上可显示的大小来被裁切并且在放大显示区域603中被描绘。例如，通常显示区域602中的图像在显示器119上被显示的同时经历捏大操作来获取放大图像801。
在图5的示例中，放大图像801的原点809是相对原始图像的原点的(-50,-30)。放大显示区域603的从相对放大图像801的原点809的位置(50,30)到1024像素宽度及600像素高度的范围中的图像被裁切。在放大显示区域603中描绘裁切的图像。
如下获得在图像通过捏大操作被放大的情况下放大图像801的放大率和原点809。在捏大操作中触摸触摸屏118上的两点。第一点的触摸位置从捏操作的开始处的捏开始坐标802移动到捏操作结束处的捏结束坐标803。第二点的触摸位置从捏操作开始处的捏开始坐标804移动到捏操作结束处的捏结束坐标805。所述坐标作为包括图3的通常显示区域602的宽度的信息从触摸屏118被输入给控制单元110。
在捏大操作中，捏结束坐标803与捏结束坐标805之间的距离D2长于捏开始坐标802与捏开始坐标804之间的距离D1。因此，控制单元110确定捏大操作给出了放大图像的指令。距离D1和D2在以下等式中被表达。其中捏开始坐标802为(xx11,yy11)，捏开始坐标804为(xx21,yy21)，捏结束坐标803为(xx12,yy12)，捏结束坐标805为(xx22,yy22)，
D1＝√((xx21–xx11)2+(yy21–yy11)2)
D2＝√((xx22–xx12)2+(yy22–yy12)2)
假设由以下等式表现通常显示区域602中显示的图像的当前放大率R1(通常100％)以及距离D1和D2、通过捏操作的图像的放大率R2。放大显示控制单元307以新放大率R2来放大图像。
R2＝R1×D2/D1
利用新放大率R2来获得放大图像801的原点809的坐标(x01,y01)。在当前情况下，以针对捏操作的两点的中心点坐标作为开始点来放大图像。当在捏的开始的中心点806与在捏的结束的中心点807为相同位置时，通过减去通常显示区域602的宽度的以下等式来表现中心点的坐标(x1,y1)。
x1＝(xx11–1024+xx21-1024)/2
y1＝(yy11+yy21)/2
通过以下等式来表现放大前的图像的原点808的坐标(x00,y00)与中心点之间的距离。
(放大图像的原点与中心点之间的距离)＝x1–x00
(放大图像的原点与中心点之间的距离)＝y1–y00
基于这些等式，放大图像801的原点809的坐标(x01,y01)用以下等式表现。
x01＝x1–(x1–x00)×R2
y01＝y1–(y1–y00)×R2
在捏开始的中心点很少与在捏结束的中心点相同，并且在它们之间实际发生轻微偏差。因此，计算中心点坐标的移动的量，并且考虑到移动的量来获得放大图像801的原点809的位置。在捏的开始的中心点806与在捏的结束的中心点807的中心点坐标(x1,y1)和(x2,y2)分别通过以下等式来表现。
x1＝(xx11-1024+xx21–1024)/2
y1＝(yy11+yy21)/2
x2＝(xx12–1024+xx22–1024)/2
y2＝(yy12+yy22)/2
从中心点806到中心点807的移动量(Xd,Yd)通过以下等式来表现。
Xd＝x2–x1
Yd＝y2–y1
根据以上内容，放大图像801的原点809的坐标(x01,y01)通过以下等式来表现。
x01＝x1–(x1–x00)×R2+Xd
y01＝y1–(y1–y00)×R2+Yd
图像不仅可以通过捏操作而且可以通过移动操作放大。在这种情况下，例如，中心点806是针对移动操作的开始点，中心点807是针对移动操作的结束点。中心点806与中心点807之间的移动量(Xd，Yd)是由移动操作引起的移动量，从而能够计算放大图像801的原点809的坐标，并且能够确定要在放大显示区域603中显示的图像的区域。
在捏操作和移动操作二者期间表示从操作的开始位置到其结束位置的坐标被从触摸屏118连续输入到控制单元110中。在该时间期间控制单元110连续进行坐标计算并且显示整个放大图像。放大显示控制单元307计算坐标位置信息并且显示整个放大图像，并且将包括放大率、放大图像的原点坐标、放大图像的宽度、以及放大图像的高度存储在放大显示信息存储单元308中。
在本示例性实施例在通常显示区域602的右侧提供放大显示区域603，但是可以在通常显示区域602之下提供放大显示区域603。在该情况下，在坐标(0,600)处提供放大显示区域603。另外，针对触摸事件中的操作，在Y方向增加了600像素的值作为表示操作位置的坐标，从触摸屏118被输入到控制单元110中。在本示例性实施例中可以采用使得能够以类似方式来获得坐标的任意其他计算等式。
将描述由信息处理装置101利用以上结构在显示器119上进行的图像显示处理。
<通过放大功能的图像的切换>
以下将描述第一示例性实施例。
图6是例示依据放大功能(整体放大或放大镜)是否有效来切换显示器119上显示的图像的处理的流程图。
当在步骤S101中从设备信息控制单元502接收到放大模式通知时，在步骤S102中，画面信息控制单元202将接收的放大模式通知存储到画面信息存储单元203中。在步骤S103中，画面信息控制单元202将接收的放大模式通知发送给放大信息控制单元302。
在步骤S104中，放大信息控制单元302接收到从画面信息控制单元202发送的放大模式通知，并且将接收的放大模式通知发送给放大显示控制单元307。在步骤S105中，放大显示控制单元307接收从放大信息控制单元302发送的放大模式通知并且将接收的放大模式通知存储到放大显示信息存储单元308中。
在步骤S106中，放大显示控制单元307通过放大模式通知来确定放大功能是否变得有效。当放大功能无效时(步骤S106中“否”)，在步骤S107中，放大显示控制单元307经由放大信息控制单元302来请求画面信息控制单元202将显示器119上显示的图像切换到通常显示区域602中的图像。当放大功能有效时(步骤S106中“是”)，在步骤S108中，放大显示控制单元307经由放大信息控制单元302来请求画面信息控制单元202将显示器119上显示的图像切换到放大显示区域603中的图像。
画面信息控制单元202在步骤S109中从放大信息控制单元302接收图像切换请求，并且在步骤S110中确定是否请求了切换到通常显示区域602中的图像。当请求切换到通常显示区域602中的图像时(步骤S110中“是”)，在步骤S111中，画面信息控制单元202经由画面显示单元204将显示器119上显示的图像切换到通常显示区域602中的图像。当请求切换到放大显示区域603中的图像时(步骤S110中“否”)，在步骤S111中，画面信息控制单元202经由画面显示单元204将显示器119上显示的图像切换到放大显示区域603中的图像。
如上所述，响应于从设备控制单元501的表示放大功能被切换的放大模式通知的接收，通常显示区域602中的图像与放大显示区域603中的图像被切换以确定要在显示器119上呈现的图像。
<至放大功能的事件的发送>
图7A到图7C是例示响应于通过用户操作来自触摸屏118的输入的事件处理的流程图。
输入信息控制单元205在步骤S201中根据触摸屏118上的用户操作来接收控制信号，并且在步骤S202中将接收的控制信号变换为事件信息并将该事件信息输入给输入信息通知单元206。输入信息通知单元206在步骤S203中获取存储在画面信息存储单元203中的放大模式通知，并且在步骤S204中根据放大模式通知确定放大功能是否有效。当放大功能无效时(步骤S204中“否”)，在步骤S205中，输入信息通知单元206向应用单元401发送事件信息。应用单元401根据事件信息进行处理，并终止处理。例如，当接收到表示在复印应用的复印设置画面上选择了纸张选择按钮的事件信息时，复印应用将画面切换到纸张选择画面(未例示)。当放大功能有效时(步骤S204中“是”)，在步骤S206中，输入信息通知单元206向放大输入控制单元305发送事件信息。
在步骤S207中，放大输入控制单元305从输入信息通知单元206接收事件信息。放大输入控制单元305在步骤S208中将接收的事件信息存储在放大输入信息存储单元306中，并且在步骤S209中向放大显示控制单元307通知事件信息被输入。
在步骤S210中，放大显示控制单元307响应于来自放大输入控制单元305的通知从放大输入信息存储单元306获取事件信息。在步骤S211中，放大显示控制单元307基于放大显示信息存储单元308中存储的放大模式通知来确定整体放大功能或放大镜功能是否有效。当放大镜功能有效时(步骤S211中的放大镜)，放大显示控制单元307进行针对放大镜的事件处理(参见图7B)。当整体放大功能有效时(步骤S211中的整体放大)，放大显示控制单元307进行针对图像的整体放大的事件处理(参见图7C)。
图7B是例示针对放大镜的事件处理的流程图。这里，将描述通过用户的拖操作将放大镜框移动到预定位置的处理。在步骤S301中，放大显示控制单元307从放大显示信息存储单元308获取关于放大镜的显示位置坐标信息。在步骤S302中，放大显示控制单元307确定从事件信息获取的触摸位置是否在从获取的显示位置坐标信息获得的放大镜框的显示区域内。当触摸位置不在放大镜框的显示区域内时(步骤S302中“否”)，放大控制单元301终止针对放大镜的事件处理。
当触摸位置在放大镜框的显示区域内时(步骤S302中“是”)，在步骤S303中，放大显示控制单元307确定事件信息是否表示移动。当事件信息表示移动时(步骤S303中“是”)，在步骤S304中，放大显示控制单元307确定事件标记是否为开。当在触摸屏118上进行触摸下时事件标记为开，当在触摸屏118上进行触摸起时事件标记为关。即，事件标记表示触摸屏118上的被触摸状态。事件标记在初始状态下被设置为关。当事件标记为关时(步骤S304中“否”)，放大控制单元301终止针对放大镜的事件处理。当事件标记为开时(步骤S304中“是”)，在步骤S305和S306中，放大显示控制单元307计算放大镜框的显示位置坐标，并且根据计算结果来更新放大显示信息存储单元308中的放大显示信息。
当事件信息不表示移动时(步骤S303中“否”)，在步骤S307中，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S307中“是”)，在步骤S308中，放大显示控制单元307将事件标记设置为关。当事件信息不表示触摸起时(步骤S307中“否”)，在步骤S309中，放大显示控制单元307确定事件信息是否表示触摸下。当事件信息表示触摸下时(步骤S309中“是”)，在步骤S310中，放大显示控制单元307将事件标记设置为开。当事件信息不表示触摸下时(步骤S309中“否”)，放大控制单元301终止针对放大镜的事件处理。
将通过具体示例的方式来描述图7B的流程图。当用户对放大镜框进行拖操作时，通过放大镜框上的首次触摸来检测触摸下(步骤S309中“是”)，并且在步骤S310中，事件标记被设置为开。接着，检测到移动(步骤S303中“是”)并且事件标记被设置为开(步骤S304中“是”)，从而在步骤S305和S306中，计算放大镜框的显示位置坐标并且更新放大显示信息。之后，当用户从放大镜框松开手指时，检测到触摸起(步骤S307中“是”)，并且在步骤S308中，事件标记被设置为关。
图7C是例示针对整体放大的事件处理的流程图。在当前情况下通过用户的捏操作来放大显示器119上显示的图像，然后通过后续的拖操作移动显示位置。在步骤S401中，放大显示控制单元307从放大显示信息存储单元308获取关于整体放大的显示位置坐标信息。在步骤S402中，已获取显示位置坐标信息的放大显示控制单元307确定事件信息是否仅包括关于一个点的坐标信息。
当事件信息不是关于一个点时(步骤S402中“否”)，在步骤S403中，放大显示控制单元307确定是否对两个以上的点进行了触摸操作，并且根据事件信息利用多条坐标信息来计算整体放大率。在步骤S404中，放大显示控制单元307利用多条坐标信息来计算显示位置坐标。在步骤S405中，放大显示控制单元307基于计算出的放大率和显示位置坐标来更新放大显示信息存储单元308中的放大显示信息。
当事件信息是关于一个点时(步骤S402中“是”)，在步骤S406中，放大显示控制单元307确定事件信息是否表示移动。当事件信息表示移动时(步骤S406中“是”)，在步骤S407中，放大显示控制单元307确定事件标记是否为开。当事件标记为关时(步骤S407中“否”)，放大控制单元301终止针对放大镜的事件处理。当事件标记为开时(步骤S407中“是”)，在步骤S408中，放大显示控制单元307计算针对整体放大的显示位置坐标。在步骤S409中，放大显示控制单元307基于计算出的显示位置坐标来更新放大显示信息存储单元308中的放大显示信息。
当事件信息不表示移动时(步骤S406中“否”)，在步骤S410中，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S410中“是”)，在步骤S411中，放大显示控制单元307将事件标记设置为关。当事件信息不表示触摸起时(步骤S410中“否”)，在步骤S412中，放大显示控制单元307确定事件信息是否表示触摸下。当事件信息表示触摸下时(步骤S412中“是”)，在步骤S413中，放大显示控制单元307将事件标记设置为开。当事件信息不表示触摸下时(步骤S412中“否”)，放大控制单元301终止针对整体放大的事件处理。
将通过具体示例的方式来描述图7C的流程图。由于用户首先进行用于进行整体放大的捏大操作，因此检测到包括关于两点的坐标信息的事件信息(步骤S402中“否”)。然后，在步骤S403中计算针对整体放大的放大率，在步骤S404中计算显示位置坐标，并且在步骤S405中更新放大显示信息。接着，当用户对放大画面进行拖操作以移动显示位置时，首先检测到触摸下(步骤S412中“是”)，并且在步骤S413中，将事件标记设置为开。接着，检测到移动(步骤S406中“是”)并且将事件标记设置为开(步骤S407中“是”)，从而在步骤S408和S409中，计算针对整体放大的显示位置坐标并且更新放大显示信息。之后，当用户从触摸屏118松开手指时，检测到触摸起(步骤S307中“是”)，并且在步骤S308中，将事件标记设置为关。
<捕获图像处理>
图8是例示当放大功能有效时获取捕获图像并且在放大显示区域603中进行描绘处理的流程图。该处理在放大功能有效时开始，并且以恒定时间间隔进行，直到信息处理装置101关机为止。
在步骤S501中，放大显示控制单元307获取放大显示信息存储单元308中存储的放大模式通知。在步骤S502中，放大显示控制单元307基于放大模式通知来确定放大功能是否有效。当放大功能无效时(步骤S502中“否”)，放大显示控制单元307再次获取放大模式通知。放大显示控制单元307重复进行处理直到放大功能有效为止。
当放大功能有效时(步骤S502中“是”)，放大显示控制单元307使图像捕获单元303捕获在通常显示区域602中描绘的图像。在步骤S503中，图像捕获单元303将捕获的图像存储在捕获图像存储单元304中。
在步骤S504中，放大显示控制单元307基于放大模式通知来确定整体放大功能还是放大镜功能有效。当放大镜功能有效时(步骤S504中“是”)，在步骤S505中，放大显示控制单元307进行针对放大镜的描绘处理。当整体放大功能有效时(步骤S504中“否”)，在步骤S506中，放大显示控制单元307进行针对整体放大的描绘处理。
<针对放大镜的描绘处理以及针对整体放大的描绘处理>
图9A是例示针对放大镜的描绘处理的流程图。
在步骤S601中，放大显示控制单元307获取并复制捕获图像存储单元304中存储的捕获图像。在步骤S602中，放大显示控制单元307获取存储在放大显示信息存储单元308中的放大率以及针对放大镜的显示位置坐标信息。在步骤S603中，放大显示控制单元307以获取的放大率来放大复制的捕获图像。在步骤S604中，放大显示控制单元307基于显示位置坐标信息，按照放大镜框的大小来裁切放大的捕获图像。
在步骤S605中，放大显示控制单元307在由未放大的捕获图像的显示位置坐标信息表示的位置，组合裁切并放大的捕获图像。在步骤S606中，放大显示控制单元307经由画面显示单元204在放大显示区域603中描绘组合图像。然后，画面控制单元201在图6所示的处理中将显示切换到放大显示区域603，从而在显示器119上显示其中放大的捕获图像的裁切部分被叠加在捕获图像上的图像。
图9B是例示针对整体放大的描绘处理的流程图。
在步骤S701中，放大显示控制单元307获取存储在捕获图像存储单元304中的捕获图像。在步骤S702中，放大显示控制单元307获取存储在放大显示信息存储单元308中的针对整体放大的放大率以及显示位置坐标信息。在步骤S703中，放大显示控制单元307根据获取的放大率来放大捕获图像。在步骤S704中，放大显示控制单元307基于显示位置坐标信息，按照显示器119的大小来裁切放大的捕获图像。在步骤S705中，放大显示控制单元307经由画面显示单元204在放大显示区域603中描绘裁切的图像。在图6所示的处理中，画面控制单元201将显示切换到放大显示区域603，从而放大的捕获图像的裁切部分被显示在显示器119上。
如上所述，根据本示例性实施例的信息处理装置101无需定制OS或系统而可以放大并显示由应用生成的整个图像。另外，信息处理装置101使得能够进行用于放大并显示由应用生成的图像的一部分的放大镜显示。当整体放大功能有效时，用户能够通过捏操作来放大和缩小整个画面，并且能够通过拖操作来将放大图像的显示位置改变到任意位置。当放大镜功能有效时，用户能够通过拖操作将放大镜框移动到任意位置。由此，甚至视力差的用户也能够无障碍地操作装置，可用性得到增强。
在以上描述中，当通过设备设置应用402改变放大功能设置时，设备控制单元501生成放大模式通知。生成的放大模式通知经由画面控制单元201被发送给放大控制单元301(图2和图6)。当基于放大模式通知确定放大功能有效时，放大控制单元301在通常显示区域中进行图像捕获处理并且在放大显示区域中描绘图像(图8以及图9A和图9B)，并且将显示切换到放大显示区域(图6)。因此，当整体放大功能从无效改变为有效时，甚至在用户进行捏大操作前，可以进行通常显示区域中的图像捕获处理、放大显示区域中的图像描绘处理、以及切换到放大显示区域的处理。因此，放大前的图像可以被捕获并且捕获的图像被呈现在显示器119上。
作为变型，可以在进行捏大操作时或者可以在通过捏大操作、放大率超出预定值(诸如100％)时进行图像捕获之后的处理，而在整体放大功能有效时不进行图像捕获之后的处理。在当前情况下，假设通过捏大操作、放大率超出100％来进行图像捕获之后的处理。
在这种情况下，当在图8中的步骤S502中确定放大功能有效时，放大控制单元301不进行步骤S503中的处理。放大控制单元301确定是整体放大功能还是放大镜功能有效，并且在放大镜功能有效时进行步骤S503之后的处理。当整体放大功能有效时，放大控制单元301确定是否由于捏操作而导致放大率超出100％，并且在放大率被确定为超出100％时进行步骤S503之后的处理。当在图6中的步骤S106中确定放大功能有效时，放大控制单元301不进行步骤S108中的处理。放大控制单元301确定是整体放大功能还是放大镜功能有效，并且在放大镜功能有效时进行步骤S108中的处理。当整体放大功能有效时，放大控制单元301确定是否由于捏操作导致放大率超出100％。放大控制单元301在确定放大率超出100％时进行步骤S108中的处理，并且请求画面控制单元201切换到放大显示区域中的图像。在图7C的步骤S403中，放大率可以采用由放大控制单元301基于从画面控制单元201中的输入信息通知单元206通知的事件信息而计算的值。根据本变型，图像捕获之后的处理不是在整体放大功能有效时进行，而是在进行捏大操作时进行。因此，即使在不进行针对画面放大的操作时由于图像捕获造成的处理负荷也能被抑制。
以下将描述第二示例性实施例。第一示例性实施例描述了针对由应用生成的画面的整体放大显示和放大镜显示的机构。然而，第一示例性实施例未考虑其中在放大显示区域603中描绘的图像在显示器119中被显示的同时、用户可能操作画面上的诸如按钮或列表的对象的情况。因此，例如，即使在整体放大功能有效并且整体画面正被放大并显示的同时用户进行选择放大按钮的触摸操作，应用也不对其进行反应。在第二示例性实施例中，放大图像上显示的诸如按钮或列表的对象如通常情况中一样可操作。
如第一示例性实施例中描述的，当放大镜功能有效时，可以通过拖操作来移动放大镜框，并且在整体放大功能有效时，可以通过拖操作来移动放大图像的显示位置。另外，可想到，可以进行用于选择放大镜框内显示的按钮的触摸操作以及用于滚动由整体放大功能放大并显示的图像中包括的列表的拖操作。这样，例如，在当整体放大功能有效时进行拖操作时，必须适当地确定是进行拖操作来移动放大图像的显示位置还是滚动放大图像中包括的列表。本示例性实施例描述了其中依据是否进行了在预定时间段持续触摸触摸屏118上的相同位置的长按操作来确定拖操作的意图的示例。根据第二示例性实施例的信息处理装置的硬件结构和功能块与根据第一示例性实施例的信息处理装置的相同(参见图1和图2)。以下将描述与第一示例性实施例的不同。
图10是例示针对放大镜的事件处理的流程图。替代图7B中的处理而进行图10中的处理。
在步骤S800中，放大显示控制单元307从放大显示信息存储单元308获取关于放大镜的显示位置坐标信息。在步骤S801中，放大显示控制单元307确定从事件信息获取的触摸位置是否在从获取的显示位置坐标信息获取的放大镜框的显示区域内。
当触摸位置在放大镜框的显示区域内时(步骤S801中“是”)，在步骤S802中，放大显示控制单元307确定事件信息是否仅包括关于一个点的坐标信息。当坐标信息是关于一个点的信息时(步骤S802中“是”)，在步骤S803中，放大显示控制单元307确定事件信息是否表示移动。当事件信息表示移动时(步骤S803中“是”)，在步骤S804中，放大显示控制单元307确定AP事件发送标记是否为开。当触摸事件正被发送给应用单元401时AP事件发送标记变为开。即，当AP事件发送标记为开时，由放大显示控制单元307从触摸屏118接收的全部事件被发送给通常显示区域中的AP，这样放大图像不被移动。另一方面，当AP事件发送标记为关时，没有事件被从触摸屏发送给通常显示区域中的AP，并且进行诸如移动放大图像等的操作放大图像的处理。AP事件发送标记在初始状态下被设置为关。
当AP事件发送标记为开时(步骤S804中“否”)，在步骤S805中，放大显示控制单元307确定处理是否正在等待触摸下之后的事件。如以下在步骤S814和S815中描述的，处理不立即向AP发送事件或是操作放大图像而是等待一定时间段，从而确定当首次检测到触摸下时是否进行了长按。在步骤S805的处理中，进行关于在待机时间期间是否接收到移动事件的确定。当处理处于待机状态中时(步骤S805中“是”)，在步骤S806中，放大显示控制单元307将在移动事件中接收的坐标与在触摸下事件中接收的坐标比较，并且确定触摸位置是否移动了阈值或更大。
当触摸位置被移动了阈值或更大时(步骤S806中“是”)，放大显示控制单元307在步骤S807中确定未进行长按，并终止待机状态，在步骤S809中类似地将长按标记设置为关。当确定触摸位置未移动阈值或更大时(步骤S806中“否”)，在步骤S808中，放大显示控制单元307将长按标记设置为开，并且终止处理。长按标记是用于确定用户的触摸操作是否是在预定时间段内持续触摸相同位置的长按操作。当在检测到触摸下后的待机状态期间触摸位置几乎不移动时，长按标记为开。当触摸位置被移动预定量以上时，长按标记为关。
当处理不处于待机状态时(步骤S805中“否”)或者在步骤S809中长按标记被设置为关时，在步骤S810中，放大显示控制单元307计算放大镜框的显示位置坐标。在步骤S811中，放大显示控制单元307根据计算结果更新放大显示信息存储单元308中的放大显示信息。步骤S810和S811中的处理与图7B中的步骤S305和S306中的处理相同。
当事件信息不表示移动时(步骤S803中“否”)，在步骤S812中，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S812中“是”)，在步骤S813中，放大显示控制单元307确定AP事件发送标记是否为开。当AP事件发送标记为关时(步骤S813中“否”)，放大显示控制单元307终止处理。当事件信息不表示触摸起时(步骤S812中“否”)，在步骤S814中，放大显示控制单元307确定事件信息是否表示触摸下。
当事件信息表示触摸下时(步骤S814中“是”)，在步骤S815中，放大显示控制单元307等待预定时间段。当经过预定时间段时，在步骤S816中，放大显示控制单元307确定长按标记是否为开。当长按标记为关时(步骤S816中“否”)，放大显示控制单元307终止处理。当事件信息不表示触摸下时(步骤S814中“否”)，放大显示控制单元307终止处理。
当长按标记为开时(步骤S816中“是”)并且当AP事件发送标记为开时(步骤S804中“是”或者步骤S813中“是”)，放大显示控制单元307确定要开始向AP发送事件。在步骤S817中，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。即，放大显示控制单元307将放大显示区域603中的坐标变换为通常显示区域602中的坐标，从而将全部触摸事件发送给应用单元401。将参照图4来描述坐标变换。
图4中的中心坐标701(x1,y1)表示放大镜框705的中心位置，移动开始点703(xx1,yy1)表示事件信息中包括的触摸位置。放大镜的放大率是R。利用放大显示区域603中的左上坐标(1024,0)，通过以下等式来表现在执行坐标变换后通常显示区域602中的坐标(x,y)。
x＝((xx1–1024)–x1)/R+x1
y＝((yy1–y1)/R+y1
在步骤S818中，放大显示控制单元307基于通过坐标变换计算的坐标来更新事件信息，并且经由画面控制单元201将事件信息发送给应用单元401。以这种方式，用户触摸在放大镜框内被放大并显示的图像，由此将通过触摸操作的事件信息变换为对通常显示区域602中的图像进行的事件信息。变换的事件信息被通知给在通常显示区域602中显示图像的AP。AP基于通知的事件信息进行预定操作。这样，用户可以在查看在放大镜框内放大并显示的图像的同时操作AP。
在发送事件信息后，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S819中“是”)，在步骤S820中，放大显示控制单元307将AP事件发送标记设置为关。当事件信息不是触摸起时(步骤S819中“否”)，在步骤S821中，放大显示控制单元307将AP事件发送标记设置为开。放大显示控制单元307设置AP事件发送标记，然后终止针对放大镜的事件处理。
当触摸位置在放大镜框的显示区域外时(步骤S801中“否”)，在步骤S822中，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换成通常显示区域602中的坐标。类似地，当事件信息不是关于一个点的坐标信息时(步骤S802中“否”)，放大显示控制单元307确定对两个点或更多点进行了触摸操作。在步骤S822中，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。参照图4，利用放大显示区域603中的左上坐标(1024,0)，通过以下等式来表现在执行坐标变换后通常显示区域602中的坐标(x,y)。
x＝xx1–1024
y＝yy1
在步骤S823中，放大显示控制单元307通过由坐标变换计算出的坐标来更新事件信息，并且经由画面控制单元201将更新的事件信息发送给应用单元401。以这种方式，当用户对放大镜框外显示的图像进行触摸操作或者对放大镜框内的图像进行捏操作时，将通过触摸操作的事件信息变换为对通常显示区域602中的图像进行的事件信息。变换的事件信息被通知给在通常显示区域602中显示图像的AP。AP基于通知的事件信息进行预定操作。不管是在放大镜框外还是放大镜框内，用户都可以如显示的一样精准地进行AP操作。
将通过具体示例的方式来描述图10的流程图。假设在信息处理装置101中启动用于发送扫描数据的发送应用。此外，假设显示地址簿画面以在发送应用中选择数据发送目的地。这里假设放大镜功能被设置为有效并且放大镜放大并显示地址簿的一部分。
首先，用户长按放大镜框内的地址簿中的列表，然后进行拖操作，从而滚动放大镜框内显示的地址簿中的列表部分。在这种情况下，首先在步骤S814中检测到触摸下，并且在步骤S815中，处理进入待机状态。接着，在步骤S803中，在待机状态期间检测到移动。然而，此时，AP事件发送标记为关并且手指不移动，这样处理从步骤S804、步骤S805进行到步骤S806，并且在步骤S808中，长按标记为开。移动事件保持被周期性地检测，直到经过待机时间为止，这样重复进行步骤S803到步骤S808中的处理。当经过待机时间时，处理进行到步骤S816。此时，长按标记为开，这样在步骤S817和S818中，进行坐标变换处理、以及在执行坐标变换后向发送应用发送事件的处理。事件信息不表示触摸起(步骤S819中“否”)，这样处理进行到步骤S821，其中AP事件发送标记为开。
当用户在长按后进行拖操作时，在步骤S803中再次检测到移动。此时，AP事件发送标记为开(步骤S804中“是”)，这样在步骤S817和S818中，进行坐标变换处理以及在坐标变换被执行后向发送应用发送事件的处理。以这种方式，在用户长按后正在进行拖操作的同时，基于触摸位置经历坐标变换的事件信息被发送给发送应用并且地址簿中的列表基于发送应用中的事件信息被滚动。正通过发送应用被滚动的图像在图8的处理中被放大控制单元301捕获，并且在图9B的处理中被显示在显示器119上。
接着，用户对放大镜框进行拖操作从而移动放大镜框。在这种情况下，在步骤S814中检测触摸下并且在步骤S815中处理进入待机状态，然后在步骤S803中，检测到移动。此时，AP事件发送标记为关(步骤S804中“否”)，并且在步骤S805中，处理处于待机状态，这样在步骤S806中，放大显示控制单元307基于在触摸下事件中接收的坐标以及在移动事件中接收的坐标来确定触摸位置是否移动了预定值或更多。由于在当前情况下触摸位置被移动阈值或更大(步骤S806中“是”)，因此在步骤S807中，待机状态结束，并且在步骤S809中，长按标记为关。在步骤S810和S811中，计算放大镜框的显示位置坐标并且更新放大显示信息。
如上所述，当用户紧接放大镜框内进行触摸下后开始拖操作时，放大控制单元处理事件以移动放大镜框。另一方面，当用户在放大镜框外进行拖操作时以及当用户在放大镜框内进行触摸下、然后等待预定时间段不移动手指、然后进行拖操作时，放大控制单元301考虑到放大率进行坐标变换并且向AP通知事件。因此，用户例如可以通过诸如滚动由AP显示的列表的拖操作来进行AP操作。在诸如捏事件的放大镜显示期间，未被放大控制单元301处理的事件在考虑到放大率的情况下经历坐标变换，并且被通知给AP。这样，用户例如可以进行诸如放大或缩小由AP显示的图像的AP操作。
图11是例示针对整体放大的事件处理的流程图。替代图7C中的处理而进行图11中的处理。
在步骤S900中，放大显示控制单元307从放大显示信息存储单元308获取关于整体放大的显示位置坐标信息。在步骤S901中，已获取显示位置坐标信息的放大显示控制单元307确定事件信息是否仅包括关于一个点的坐标信息。
当坐标信息不是关于一个点时(步骤S901中“否”)，放大显示控制单元307确定对两个或更多的点进行了触摸操作，并且在步骤S902中，确定AP事件发送标记是否为开。如上所述，在触摸事件正被发送给应用单元401的情况下，AP事件发送标记变为开。当AP事件发送标记为关时(步骤S902中“否”)，在步骤S903中，放大显示控制单元307根据事件信息通过利用多条坐标信息来计算整体放大率。在步骤S904中，放大显示控制单元307通过利用多条坐标信息来计算显示位置坐标。在步骤S905中，放大显示控制单元307基于计算出的放大率以及显示位置坐标来更新放大显示信息存储单元308中的放大显示信息。步骤S903到S905中的处理与图7C中的步骤S403到S405中的处理相同。
当事件信息仅包括关于一个点的坐标信息时(步骤S901中“是”)，在步骤S906中，放大显示控制单元307确定事件信息是否表示移动。当事件信息表示移动时(步骤S906中“是”)，在步骤S907中，放大显示控制单元307确定AP事件发送标记是否为开。当AP事件发送标记为关时(步骤S907中“否”)，在步骤S908中，放大显示控制单元307确定处理是否正在等待触摸下之后的事件。如以下在步骤S917和S918中的处理中所描述的，不立即进行向AP发送事件或者操作放大图像，并且处理等待一定时间段，从而在首次检测到触摸下时确定触摸下是否是长按。在步骤S908中，放大显示控制单元307确定在待机时间期间是否接收到移动事件。
当处理处于待机状态时(步骤S908中“是”)，在步骤S909中，放大显示控制单元307将在移动事件中接收的坐标与在触摸下事件中接收的坐标比较，并且确定触摸位置是否被移动了阈值或更大。当触摸位置被移动了阈值或更大时(步骤S909中“是”)，在步骤S910中，放大显示控制单元307确定触摸下不是长按，并且终止待机状态，在步骤S911中，将长按标记设置为开。在步骤S911中的处理后或者在步骤S908中处理不处于待机状态时(步骤S908中“否”)，在步骤S912中，放大显示控制单元307计算针对整体放大的显示位置坐标。在步骤S913中，放大显示控制单元307根据计算结果更新放大显示信息存储单元308中的放大显示信息。步骤S912和步骤S913中的处理与图7C中的步骤S408和S409中的处理相同。
当确定触摸位置不被移动阈值或更大时(步骤S909中“否”)，在步骤S914中，放大显示控制单元307将长按标记设置为开，并终止处理。如上所述，长按标记是用于确定用户的触摸操作是否是在预定时间段内保持触摸相同位置的长按操作的标记。
当在步骤S906中事件信息不表示移动时(步骤S906中“否”)，在步骤S915中，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S915中“是”)，在步骤S916中，放大显示控制单元307确定AP事件发送标记是否为开。
当事件信息不表示触摸起时(步骤S915中“否”)，在步骤S917中，放大显示控制单元307确定事件信息是否表示触摸下。当事件信息表示触摸下时(步骤S917中“是”)，在步骤S918中，放大显示控制单元307等待预定时间段。当经过预定时间段时，在步骤S919中，放大显示控制单元307确定长按标记是否为开。当长按标记为开时(步骤S919中“是”)，放大显示控制单元307确定要开始向AP发送事件，并且进行步骤S920之后的处理。当长按标记为关时(步骤S919中“否”)，放大显示控制单元307终止处理。当事件信息不表示触摸下时(步骤S917中“否”)，放大显示控制单元307终止处理。
当长按标记为开时(步骤S919中“是”)，在步骤S920中，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。另外，当AP事件发送标记为开时(步骤S902中“是”，步骤S907中“是”，或者步骤S916中“是”)，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。即，放大显示控制单元307将放大显示区域603中的坐标变换为通常显示区域602中的坐标，从而向应用单元401发送全部触摸事件。
按照如下来进行坐标变换。例如，放大图像的原点为(x01,y01)，放大率为R，表示事件信息中包括的触摸位置的坐标为(xx1,yy1)，利用放大显示区域603中的左上坐标(1024,0)由以下等式来表现坐标变换后的通常显示区域602中的坐标(x,y)。
x＝((xx1–1024)–x01/R
y＝(yy1–y01)/R
在步骤S921中，放大显示控制单元307通过由坐标变换计算出的坐标来更新事件信息，并且经由画面控制单元201将事件信息发送给应用单元401。以这种方式，当用户对放大图像进行触摸操作时，通过触摸操作的事件信息被变换为对通常显示区域602中的图像进行的事件信息。将变换的事件信息通知给在通常显示区域602中显示图像的AP，并且AP基于通知的事件信息进行预定操作。因此，用户可以在查看放大图像的同时操作AP。
在发送事件信息后，放大显示控制单元307确定事件信息是否表示触摸起。当事件信息表示触摸起时(步骤S922中“是”)，在步骤S923中，放大显示控制单元307将AP事件发送标记设置为关。当事件信息不表示触摸起时(步骤S922中“否”)，在步骤S924中，放大显示控制单元307将AP事件发送标记设置为开。放大显示控制单元307设置AP事件发送标记，然后终止针对整体放大的事件处理。
将通过具体示例的方式来描述图11的流程图。假设发送应用被启动并且用于选择数据发送目的地的地址簿画面被显示在信息处理装置101中。这里，整体放大功能被设置为有效并且地址簿中的列表部分被放大并显示。
假设用户首先对放大图像上的地址簿中的列表进行长按，然后进行拖操作，从而滚动地址簿中的放大列表部分。在这种情况下，首先在步骤S901中检测到触摸下，然后在步骤S918中，处理进入待机状态。接着，在步骤S906中，在待机状态期间检测到移动。由于AP事件发送标记为关并且用户此时不移动手指，因此进行从步骤S907、步骤S908到步骤S909的处理，并且在步骤S914中，长按标记被设置为开。移动事件继续被周期性地检测，直到经过待机时间为止，这样重复进行步骤S906到步骤S914中的处理。当经过了待机时间时，进行步骤S919中的处理。长按标记此时为开，这样在步骤S920和S921中，进行坐标变换处理以及在执行坐标变换后向发送应用发送事件的处理。事件信息不表示触摸起(步骤S922中“否”)，由此进行步骤S924中的处理并且AP事件发送标记被设置为开。
当用户在长按后进行拖操作时，在步骤S906中，再次检测到移动。此时AP事件发送标记为开(步骤S907中“是”)，由此在步骤S920和S921中，进行坐标变换处理以及在坐标变换后向发送应用发送事件的处理。以这种方式，在长按后用户正在进行拖操作时，具有基于触摸位置的变换坐标的事件信息被发送给发送应用，并且地址簿中的列表部分基于发送应用中的事件信息被滚动。正被发送应用滚动的图像在图8的处理中被捕获，并且在图9B的处理中被显示在显示器119上。
接着，假设用户对放大图像进行拖操作从而移动整体放大图像的显示位置。在这种情况下，在步骤S917中检测到触摸下，并且处理在步骤S918中进入待机状态，然后在步骤S906中，检测到移动。AP事件发送标记此时为关(步骤S907中“否”)，并且在步骤S908中，处理处于待机状态。由此在步骤S909中，放大显示控制单元307基于在触摸下事件中接收的坐标以及在移动事件中接收的坐标，来确定触摸位置是否被移动了阈值或更大。在当前情况下，触摸位置被移动了阈值或更大(步骤S909中“是”)，由此在步骤S910中，待机状态结束，并且在步骤S911中，长按标记被设为关。在步骤S912和S913中，计算针对整体放大的显示位置坐标并且更新放大显示信息。
如上所述，当用户紧接在触摸下之后进行拖操作时，放大控制单元301处理事件并移动放大显示位置。另一方面，如果用户等待预定时间段而不移动手指、然后在触摸下后进行拖操作，则放大控制单元301不进行移动放大显示位置的处理，并且考虑到放大率来进行坐标变换并将事件通知给AP。因此，用户可以通过诸如滚动由AP显示的列表的拖操作来进行AP操作。
当用户紧接在触摸下之后进行捏操作时，放大控制单元301处理事件并且改变针对整体放大的放大率。另一方面，如果在触摸下后用户等待预定时间段而不移动手指、然后进行拖操作，则放大控制单元301不改变针对整体放大的放大率，并且考虑到放大率来进行坐标变换并将坐标通知给AP。因此，用户可以通过诸如放大或缩小由AP显示的图像的拖操作来进行AP操作。
在以上示例中，依据是否首先进行长按操作来切换是向AP发送事件还是对放大图像进行操作。然而，可以通过其他方法来进行切换。例如，当用户以预定短间隔两次进行触摸下(双击)时，事件可以被发送给AP。可选地，可以显示用于指示向AP发送事件的专用按钮，并且当该按钮被按下时，之后进行的触摸事件可以被发送给AP。
以下将描述第三示例性实施例。第二示例性实施例已描述了其中当用户在正显示放大画面的同时进行诸如触摸下或移动的触摸操作时、考虑到放大率或显示位置来进行坐标变换、然后向运行的AP通知事件信息的示例。根据本示例性实施例，响应于来自运行的AP的、在AP中处理事件的坐标范围的通知，依据事件的坐标是否被包含在该坐标范围内来确定是否向AP通知事件信息。根据第三示例性实施例的信息处理装置的硬件结构与根据第一示例性实施例的信息处理装置的硬件结构(参见图1)类似。将主要描述与第二示例性实施例的不同。
图12是根据第三示例性实施例的信息处理装置101的功能框图。信息处理装置101除了图2所示的根据第一示例性实施例的部件外，还在放大控制单元301内包括AP事件发送请求接收单元309。其他部件相同。
AP事件发送请求接收单元309接收来自应用单元401的AP事件发送请求，并且将AP事件发送请求存储到放大显示信息存储单元308中。AP事件发送请求包括关于用于请求向AP发送事件的区域范围的信息。应用单元401中的应用(设备设置应用402或一般应用403)向画面显示单元204发送描绘指令。另外，应用单元401中的应用(设备设置应用402或一般应用403)根据显示画面向AP事件发送请求接收单元309作出AP事件发送请求。
当接收到事件信息时，放大显示控制单元307从放大显示信息存储单元308获取AP事件发送请求信息。然后，放大显示控制单元307确定从事件信息获取的触摸位置是否在从AP事件发送请求信息获取的区域范围内。如果触摸位置在区域范围内，则放大显示控制单元307根据确定结果进行坐标变换，并且进行经由画面控制单元201向应用单元401发送事件的处理。以下将详细描述处理。
图13和图14是例示响应于通过用户操作从触摸屏118的输入的事件处理的流程图。如果存在与通过用户操作从触摸屏118的输入对应的事件，则首先进行图7A中的处理。当在步骤S211中的确定处理中放大镜功能有效时(步骤S211中的“放大镜”)，放大显示控制单元307进行图13所示的针对放大镜的事件处理。当整体放大功能有效时(步骤S211中的“整体放大”)，放大显示控制单元307进行图14所示的针对整体放大的事件处理。
图13是例示针对放大镜的事件处理的流程图。
当进行针对放大镜的事件处理时，在步骤S1000中，放大显示控制单元307从放大显示信息存储单元308获取关于放大镜的显示位置坐标信息。在步骤S1001中，放大显示控制单元307确定从事件信息获取的触摸位置是否在从获取的显示位置坐标信息获取的放大镜框的显示区域内。
当触摸位置在放大镜框的显示区域内时(步骤S1001中“是”)，在步骤S1002中，放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。坐标变换与图10中的步骤S817中的处理相同。接着，在步骤S1003中，放大显示控制单元307从放大显示信息存储单元308获取AP事件发送请求信息。然后在步骤S1004中，放大显示控制单元307确定在步骤S1002中变换的坐标是否在AP事件发送请求信息中包括的区域范围内。当坐标在AP事件发送请求信息中包括的区域范围内时(步骤S1004中“是”)，在步骤S1006中，放大显示控制单元307通过由坐标变换计算出的坐标来更新事件信息，并且经由画面控制单元201将更新的事件信息发送到应用单元401。
当坐标在AP事件发送请求信息中包括的区域范围外时(步骤S1004中“否”)，在步骤S1005中，放大控制单元301进行事件处理。即，以与图10中的步骤S810和S811中描述的相同的方式来进行更新放大镜显示位置的处理。在放大控制单元301的处理后，放大显示控制单元307终止针对放大镜的事件处理。
当触摸位置在放大镜框的显示区域外时(步骤S1001中“否”)，在步骤S1007中，放大控制单元301将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。坐标变换与图10中的步骤S822中的处理相同。在步骤S1006中，放大显示控制单元307通过由坐标变换计算出的坐标来更新事件信息，并且经由画面控制单元201将更新的事件信息发送给应用单元401。在发送事件信息后，放大显示控制单元307终止针对放大镜的事件处理。
图14是例示针对整体放大的事件处理的流程图。在步骤S1100中，放大显示控制单元307从放大显示信息存储单元308获取关于整体放大的显示位置坐标信息。在步骤S1101中，获取了显示位置坐标信息的放大显示控制单元307将表示事件信息中包括的触摸位置的坐标变换为通常显示区域602中的坐标。坐标变换与图11中的步骤S920中的处理相同。接着，在步骤S1102中，放大显示控制单元307从放大显示信息存储单元308获取AP事件发送请求信息。然后在步骤S1103中，放大显示控制单元307确定在步骤S1101中变换的坐标是否在AP事件发送请求信息中包括的区域范围内。当坐标在AP事件发送请求信息中包括的区域范围内时(步骤S1103中“是”)，在步骤S1105中，放大显示控制单元307通过由坐标变换计算出的坐标来更新事件信息，并且经由画面控制单元201将更新的事件信息发送给应用单元401。
当坐标在AP事件发送请求信息中包括的区域范围外时(步骤S1103中“否”)，在步骤S1104中，放大控制单元301进行事件处理。即，改变放大率，或者进行显示位置坐标更新处理或描绘处理，如图11中的步骤S903、S904、S905、S912和S913中描述的一样。在放大控制单元进行事件处理后，放大显示控制单元307终止针对放大镜的事件处理。
图15是例示通过一般应用403显示的示例性画面的图。区域900在其中显示信息处理装置101中存储的地址簿中的列表部分。当检测到在区域900内进行了拖操作时，一般应用403对列表进行滚动处理。即使在利用放大镜功能进行的放大显示的情况下，在区域900内进行了拖操作的情况下，一般应用403也不更新放大显示位置坐标，而是进行作为一般应用403的处理的列表滚动。在这种情况下，一般应用403可以在向画面显示单元204发送描绘画面信息的指令的同时向AP事件发送请求接收单元309作出包括关于用于指定区域900的坐标901和902的坐标信息的AP事件发送请求。由此，即使在放大显示期间，在区域900内进行的操作经历坐标变换并且被通知给一般应用403。因此，在区域900内进行了拖操作的情况下，进行列表滚动处理。另一方面，在区域900外进行了拖操作的情况下，放大显示位置被改变。AP事件发送请求中包括的区域可以是整个通常显示区域。在这种情况下，全部事件被通知给应用单元401。
如上所述，根据本示例性实施例的信息处理装置101，即使在放大显示期间也能够通过从AP指示向AP发送预定区域内的事件来向用户提供AP要求的操作。
以下将描述第四示例性实施例。在第四示例性实施例中，被构造为将放大图像返回其原始大小的对象以及被构造为显示放大图像的隐藏部分的对象被显示，以叠加在放大图像上。图16是例示在其上显示对象的示例性图像的图。根据第四示例性实施例的信息处理装置的硬件结构和功能块与根据第一示例性实施例的信息处理装置的相同(参见图1和图2)。
在图16中，提供作为用于将图像返回其原始大小的对象的结束按钮1001。当结束按钮1001被触摸时，控制单元110终止放大功能并在显示器119上显示原始大小的图像。提供作为用于显示放大图像的隐藏部分的对象的四个箭头按钮1002。箭头按钮1002被配设在显示器119的四边上。当箭头按钮1002被触摸时，控制单元110沿由触摸的箭头按钮1002指示的方向来滚动图像。对箭头按钮1002的触摸提供与移动类似的可操作性。画面显示单元204将结束按钮1001和箭头按钮1002叠加在放大显示区域603中描绘的图像上并且在显示器119上显示叠加的图像。
当在滚动方向上不存在隐藏图像时不显示箭头按钮1002。控制单元110响应于来自放大显示控制单元307的指令，确定是显示还是隐藏箭头按钮1002。放大显示控制单元307获取显示位置坐标信息，并且基于原点坐标、放大图像的宽度和高度以及放大显示区域603的宽度和高度，来确定在上、下、左、右方向上隐藏图像的存在，由此确定是显示还是隐藏箭头按钮1002。
<结束按钮和箭头按钮的事件处理>
图17例示了图7C的流程图的变型，并且是例示在结束按钮1001和箭头按钮1002被触摸了的情况下的处理的流程图。图17中的步骤S1201到S1212中的处理与图7C中的步骤S401到S412中的处理相同，由此将省略其描述。
当事件信息表示触摸下并且事件标记被设置为开时，在步骤S1214中，放大显示控制单元307基于事件信息来确定是否对箭头按钮1002进行了触摸下。此时，放大显示控制单元307确定被触摸的箭头按钮1002。在对箭头按钮1002进行了触摸下的情况下(步骤S1214中“是”)，在步骤S1215中，放大显示控制单元307推测图像沿由箭头按钮1002指示的方向移动了一定坐标，并计算显示位置坐标信息。在步骤S1216中，放大显示控制单元307基于计算出的显示位置坐标来更新放大显示信息存储单元308中的放大显示信息。
在未对箭头按钮1002进行触摸下的情况下(步骤S1214中“否”)，在步骤S1217中，放大显示控制单元307基于事件信息来确定是否对结束按钮1001进行了触摸下。在对结束按钮1001进行了触摸下的情况下(步骤S1217中“是”)，放大显示控制单元307将针对整体放大的放大率返回到原始因子。在此，在步骤S1218中，放大率被返回到100％。在步骤S1219中，放大显示控制单元307基于放大率更新放大显示信息存储单元308中的放大显示信息。当未对结束按钮1001进行触摸下时(步骤S1217中“否”)或者当放大显示控制单元307结束放大显示信息存储单元308中的更新时，放大显示控制单元307终止处理。
图18是例示针对整体放大的描绘处理的流程图。图18中的处理是图9B中的处理的变型，并且图18中的步骤S1301到S1304中的处理与图9B中的步骤S701到S704中的处理相同，因此省略其描述。
在步骤S1305中，按照显示器119的大小来裁切捕获图像的放大显示控制单元307确定放大率是否高于100％。当放大率高于100％时(步骤S1305中“是”)，在步骤S1306中，放大显示控制单元307确定结束按钮1001的显示。另外，在步骤S1307中，放大显示控制单元307基于关于整体放大的图像的显示位置坐标信息来确定上、下、左、右按钮1002的显示。当放大率为100％或更小时(步骤S1305中“否”)，在步骤S1308和S1309中，放大显示控制单元307确定隐藏结束按钮1001和箭头按钮1002。以这种方式，在确定显示或隐藏结束按钮1001和箭头按钮1002后，在步骤S1310中，放大显示控制单元307在放大显示区域603中描绘图像。当显示结束按钮1001和箭头按钮1002时，画面显示单元204在显示器119上显示在放大显示区域603中描绘的图像。当不显示结束按钮1001和箭头按钮1002时，画面显示单元204可以在显示器119上显示在通常显示区域602或放大显示区域603的任意一者中描绘的图像。
如上描述的结束按钮1001和箭头按钮1002被显示，使得甚至不习惯的诸如智能电话的信息处理装置101也能够被容易操作。
以下将描述第五示例性实施例。当预定时间段内装置未被操作时，信息处理装置101可以进行诸如省电模式或用于重设画面的自动清除的处理。根据第五示例性实施例的信息处理装置的硬件结构和功能块与根据第一示例性实施例的信息处理装置的相同(参见图1和图2)。
信息处理装置101通过定时器控制单元503来测量用户的操作间隔。在从之前的操作经过了预定时间段的情况下，定时器控制单元503向设备信息控制单元502发送请求省电模式或自动清除的重设通知。设备信息控制单元502响应于来自定时器控制单元503的重设通知来向画面控制单元201通知省电模式或自动清除。画面控制单元201接收省电模式或自动清除通知，并且将通过放大功能放大和显示的图像返回到例如其原始大小。图19是例示通过自动清除处理将图像返回到其原始大小的处理的流程图。该流程图中的处理在画面控制单元201接收到省电模式或自动清除通知时进行。在诸如省电模式的其他处理中进行相同处理。
当在步骤S1401中从设备信息控制单元502接收到自动清除通知时，在步骤S1402中，画面信息控制单元202对应用单元401作出自动清除通知。在步骤S1403中，画面信息控制单元202基于画面信息存储单元203中存储的放大模式通知来确定放大功能是否有效。当放大功能无效时(步骤S1403中“否”)，画面信息控制单元202终止处理。当放大功能有效时(步骤S1403中“是”)，在步骤S1404中，画面信息控制单元202对放大信息控制单元302作出自动清除通知。
当从画面信息控制单元202接收到自动清除通知时，在步骤S1405中，放大信息控制单元302向放大显示控制单元307发送放大模式通知。在步骤S1406中，放大显示控制单元307接收放大模式通知，并且确定放大功能是否是放大镜。当放大功能是放大镜时(步骤S1406中“是”)，在步骤S1407中，放大显示控制单元307将放大镜设置在默认坐标。当放大功能是整体放大时(步骤S1406中“否”)，在步骤S1408和S1409中，放大显示控制单元307将针对整体放大的放大率设置为100％并且更新放大显示信息存储单元308中的放大显示信息。
如上所述，当预定时间段内不操作信息处理装置101并且发生了诸如省电模式或自动清除的事件时，整体放大的图像被返回到其原始大小。因此，在通过下一用户进行的操作开始时不显示放大图像。
以下将描述第六示例性实施例。根据第一示例性实施例，在图3中虚拟显示区域601被配设有通常显示区域602和放大显示区域603，并且显示区域的一者中的图像被呈现在显示器119上。相反，可以没有放大显示区域603而显示放大图像。图20是用于显示放大图像的方法的说明图。根据第六示例性实施例的信息处理装置的硬件结构和功能块与根据第一示例性实施例的信息处理装置的相同(参见图1和图2)。
在典型的视窗系统中，最高级的RootWindow处于要立即被输出到显示器的状态，并且由具有相同大小的多个组合窗口构造。例如，在图20中，RootWindow1101由用于显示放大图像的放大功能窗口1102、基本窗口1103以及应用窗口1104构成。基本窗口1103和应用窗口1104被相互组合，由此形成与图3中的通常显示区域602中类似的图像。
当仅在通常显示区域602中显示放大图像时，如果RootWindow1101中的图像被获取以获得捕获图像，则放大图像自身被捕获。在存在放大显示区域603的情况下，当RootWindow被获取时，仅放大图像不被捕获并且通常显示区域602中的图像可以按照原样被处置。捕获基本窗口1103中的图像和应用窗口1104中的图像以将其相互组合，从而仅在通常显示区域602中获得原始图像。在图20中，应用窗口1104中的捕获图像的左上原点1105与基本窗口1103中的捕获图像的坐标1106被相互组合，由此最终生成原始图像的捕获图像。由该组合获取的捕获图像在放大功能窗口1102中被放大并显示，这样与第一示例性实施例中等同的操作变为可能。
如上所述，即使在除了通常显示区域外无法提供放大显示区域的系统中，获取各个窗口以生成捕获图像，由此获得类似效果。
信息处理装置101包括各种装置。例如，信息处理装置101不限于个人计算机、PDA和蜂窝电话，而是包括打印机、扫描仪、传真机(FAX)、复印机、多功能外围设备、照相机、视频照相机以及其他图像取景器。
如上所述，根据各示例性实施例，未放大的第一图像以及作为放大的第一图像的第二图像的任意一者被显示在显示装置上，由此实现无系统级定制的放大功能。
其他实施例
还可以通过读出并执行记录在存储介质(也可更完整地称为“非临时性计算机可读存储介质”)上的计算机可执行指令(例如，一个或更多程序)以执行上述实施例中的一个或更多个的功能、和/或包括用于执行上述实施例中的一个或更多个的功能的一个或更多个电路(例如，专用集成电路(ASIC))的系统或装置的计算机，来实现本发明的实施例，并且，可以利用通过由所述系统或装置的所述计算机例如读出并执行来自所述存储介质的所述计算机可执行指令以执行上述实施例中的一个或更多个的功能、和/或控制所述一个或更多个电路执行上述实施例中的一个或更多个的功能的方法，来实现本发明的实施例。所述计算机可以包括一个或更多个处理器(例如，中央处理单元(CPU)、微处理单元(MPU))，并且可以包括分开的计算机或分开的处理器的网络，以读出并执行所述计算机可执行指令。所述计算机可执行指令可以例如从网络或所述存储介质被提供给计算机。所述存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)TM)、闪存设备以及存储卡等中的一者或更多。
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例对本发明进行了描述，但是应当理解，本发明并不限于所公开的示例性实施例。应当对所附权利要求的范围给予最宽的解释，以使其涵盖所有这些变型例以及等同的结构和功能。

Claims (11)

1.一种信息处理装置，所述信息处理装置包括：
应用单元，其被构造为生成第一图像；
放大控制单元，其被构造为放大所述第一图像，并且生成包括放大后的所述第一图像的一部分的第二图像；以及
显示控制单元，其被构造为进行控制以在显示装置上显示所述第一图像和所述第二图像中的任一者。
2.根据权利要求1所述的信息处理装置，所述信息处理装置包括：
存储单元，其具有描绘有所述第一图像的第一显示区域以及描绘有所述第二图像的第二显示区域，所述第二显示区域的显示大小与所述第一显示区域的显示大小相同，
其中，所述应用单元在所述第一显示区域中描绘生成的所述第一图像，
所述放大控制单元在所述第二显示区域中描绘生成的所述第二图像，并且
所述显示控制单元进行控制，以在所述显示装置上显示在所述存储单元中描绘的所述第一图像和所述第二图像中的任一者。
3.根据权利要求2所述的信息处理装置，所述信息处理装置包括：
确定单元，其被构造为确定放大功能是否有效，
其中，所述画面显示单元基于由所述确定单元作出的确定结果，进行控制，以在所述放大功能无效的情况下在所述显示装置上显示在所述第一显示区域中描绘的所述第一图像，以及在所述放大功能有效的情况下在所述显示装置上显示在所述第二显示区域中描绘的所述第二图像。
4.根据权利要求3所述的信息处理装置，所述信息处理装置包括：
设备控制单元，其被构造为根据用户的设置来生成表示所述放大功能是否有效的放大模式通知，并且向所述确定单元发送生成的所述放大模式通知。
5.根据权利要求1所述的信息处理装置，
其中，所述放大控制单元以预定放大率来放大捕获的第一图像，并且将放大后的捕获图像的一部分叠加在未放大的捕获图像上，由此生成所述第二图像。
6.根据权利要求5所述的信息处理装置，
其中，所述放大控制单元以小于所述显示大小的大小来裁切放大后的捕获图像，并且将裁切的图像叠加在未放大的捕获图像上，由此生成所述第二图像。
7.根据权利要求1所述的信息处理装置，
其中，所述放大控制单元以预定放大率来放大捕获的所述第一图像，并且以所述显示大小裁切放大后的捕获图像，由此生成所述第二图像。
8.根据权利要求3所述的信息处理装置，
其中，所述确定单元确定是在整个显示装置上显示放大图像，还是在所述显示装置的一部分上显示放大图像，
所述放大控制单元以预定放大率来放大捕获的所述第一图像，
在放大图像被显示在整个显示装置上的情况下，所述放大控制单元以所述显示大小裁切放大后的捕获图像，由此生成所述第二图像，以及
在放大图像被显示在所述显示装置的一部分上的情况下，所述放大控制单元以小于所述显示大小的大小来裁切放大后的捕获图像的一部分，并且将裁切的图像叠加在未放大的捕获图像上，由此生成所述第二图像。
9.根据权利要求8所述的信息处理装置，
其中，在放大图像被显示在整个显示装置上的情况下，所述显示控制单元在所述第二图像上显示第一对象和第二对象，所述第一对象被构造为将所述显示装置上显示的所述放大图像返回到原始大小，所述第二对象被构造为显示所述放大图像在所述显示装置上的隐藏部分。
10.根据权利要求9所述的信息处理装置，
其中，在所述第一对象被操作的情况下，所述画面显示单元在所述显示装置上显示所述第一图像。
11.一种由信息处理装置进行的显示控制方法，所述信息处理装置包括存储单元，该存储单元具有描绘有第一图像的第一显示区域以及描绘有第二图像的第二显示区域，所述第二显示区域的显示大小与所述第一显示区域的显示大小相同，所述显示控制方法包括以下步骤：
在所述第一显示区域中生成并描绘所述第一图像，放大所述第一图像，并且在所述第二显示区域中生成并描绘包括放大后的所述第一图像的一部分的所述第二图像；以及
在显示装置上显示所述第一图像和所述第二图像中的任一者。
CN201510486787.1A 2014-08-11 2015-08-10 信息处理装置及显示控制方法 Pending CN105373331A (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2014-163723 2014-08-11
JP2014163720 2014-08-11
JP2014-163720 2014-08-11
JP2014163723 2014-08-11
JP2015118437A JP6659090B2 (ja) 2014-08-11 2015-06-11 情報処理装置、情報処理装置の制御方法、及びコンピュータプログラム
JP2015-118437 2015-06-11

Publications (1)

Publication Number Publication Date
CN105373331A true CN105373331A (zh) 2016-03-02

Family

ID=55267770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510486787.1A Pending CN105373331A (zh) 2014-08-11 2015-08-10 信息处理装置及显示控制方法

Country Status (4)

Country Link
US (2) US20160042496A1 (zh)
JP (1) JP6659090B2 (zh)
KR (1) KR102113072B1 (zh)
CN (1) CN105373331A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107800910A (zh) * 2016-09-02 2018-03-13 京瓷办公信息系统株式会社 图像形成装置和图像形成装置的控制方法
CN110301136A (zh) * 2017-02-17 2019-10-01 Vid拓展公司 在流传输视频中进行选择性感兴趣对象缩放的系统和方法
CN110461208A (zh) * 2017-03-29 2019-11-15 索尼奥林巴斯医疗解决方案公司 控制装置、外部装置、医学观察系统、控制方法、显示方法和程序
US11272237B2 (en) 2017-03-07 2022-03-08 Interdigital Madison Patent Holdings, Sas Tailored video streaming for multi-device presentations
US11503314B2 (en) 2016-07-08 2022-11-15 Interdigital Madison Patent Holdings, Sas Systems and methods for region-of-interest tone remapping
US11765150B2 (en) 2013-07-25 2023-09-19 Convida Wireless, Llc End-to-end M2M service layer sessions
US11770821B2 (en) 2016-06-15 2023-09-26 Interdigital Patent Holdings, Inc. Grant-less uplink transmission for new radio
US11871451B2 (en) 2018-09-27 2024-01-09 Interdigital Patent Holdings, Inc. Sub-band operations in unlicensed spectrums of new radio
US11877308B2 (en) 2016-11-03 2024-01-16 Interdigital Patent Holdings, Inc. Frame structure in NR

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015200975A (ja) * 2014-04-04 2015-11-12 キヤノン株式会社 情報処理装置、コンピュータプログラムおよび記録媒体
KR102574183B1 (ko) 2016-08-19 2023-09-05 삼성전자주식회사 디스플레이를 제어하는 전자 장치 및 방법
US11494986B2 (en) * 2017-04-20 2022-11-08 Samsung Electronics Co., Ltd. System and method for two dimensional application usage in three dimensional virtual reality environment
JP6991754B2 (ja) * 2017-07-03 2022-01-13 株式会社ミツトヨ 端末装置およびプログラム
JP7195794B2 (ja) * 2018-07-12 2022-12-26 キヤノン株式会社 画像処理装置、画像処理装置の制御方法、及びプログラム
JP2020093503A (ja) * 2018-12-14 2020-06-18 シャープ株式会社 画像形成装置および画像形成装置システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100287493A1 (en) * 2009-05-06 2010-11-11 Cadence Design Systems, Inc. Method and system for viewing and editing an image in a magnified view
US20120268498A1 (en) * 2011-04-20 2012-10-25 Sony Corporation Image display control device, image display system, image display control method and computer program
CN103019537A (zh) * 2012-11-19 2013-04-03 广东欧珀移动通信有限公司 一种图像预览方法及装置
CN103197856A (zh) * 2011-10-21 2013-07-10 古野电气株式会社 图像显示装置、图像显示程序及图像显示方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06301757A (ja) * 1993-04-14 1994-10-28 Matsushita Electric Ind Co Ltd 画像処理装置
US6037939A (en) * 1995-09-27 2000-03-14 Sharp Kabushiki Kaisha Method for enabling interactive manipulation of data retained in computer system, and a computer system for implementing the method
JPH10312460A (ja) * 1997-05-12 1998-11-24 Japan Aviation Electron Ind Ltd 画像処理方法及び高精度画像処理装置
JP2002215281A (ja) * 2000-12-27 2002-07-31 Internatl Business Mach Corp <Ibm> コンピュータ装置、表示デバイス、出力デバイス、表示制御装置、コンピュータプログラム、記憶媒体、イメージの処理方法
JP2004110719A (ja) * 2002-09-20 2004-04-08 Cresys:Kk 画像表示システム及びコンピュータプログラム
JP2004258476A (ja) 2003-02-27 2004-09-16 Canon Inc 画像表示装置
JP4144555B2 (ja) 2003-06-09 2008-09-03 カシオ計算機株式会社 電子機器、表示制御方法及びプログラム
US7774712B2 (en) * 2004-12-31 2010-08-10 A Far Site Better, Llc Methods and systems for displaying an enlarged image
US7900158B2 (en) * 2005-08-04 2011-03-01 Microsoft Corporation Virtual magnifying glass with intuitive use enhancements
JP4931686B2 (ja) 2007-05-07 2012-05-16 アルパイン株式会社 ナビゲーション装置
JP5001182B2 (ja) * 2008-01-10 2012-08-15 パナソニック株式会社 表示制御装置、電子機器、表示制御方法、およびプログラム
US8468469B1 (en) * 2008-04-15 2013-06-18 Google Inc. Zooming user interface interactions
JP2011154555A (ja) * 2010-01-27 2011-08-11 Fujitsu Toshiba Mobile Communications Ltd 電子機器
JP2012033058A (ja) * 2010-07-30 2012-02-16 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
JP2012084040A (ja) * 2010-10-14 2012-04-26 Nec Casio Mobile Communications Ltd 携帯端末装置、拡大表示方法、及びプログラム
US9058098B2 (en) 2011-02-14 2015-06-16 Sony Corporation Display control device
JP5726706B2 (ja) 2011-10-14 2015-06-03 クラリオン株式会社 ナビゲーション装置
US10409366B2 (en) * 2014-04-28 2019-09-10 Adobe Inc. Method and apparatus for controlling display of digital content using eye movement

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100287493A1 (en) * 2009-05-06 2010-11-11 Cadence Design Systems, Inc. Method and system for viewing and editing an image in a magnified view
US20120268498A1 (en) * 2011-04-20 2012-10-25 Sony Corporation Image display control device, image display system, image display control method and computer program
CN103197856A (zh) * 2011-10-21 2013-07-10 古野电气株式会社 图像显示装置、图像显示程序及图像显示方法
CN103019537A (zh) * 2012-11-19 2013-04-03 广东欧珀移动通信有限公司 一种图像预览方法及装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11765150B2 (en) 2013-07-25 2023-09-19 Convida Wireless, Llc End-to-end M2M service layer sessions
US11770821B2 (en) 2016-06-15 2023-09-26 Interdigital Patent Holdings, Inc. Grant-less uplink transmission for new radio
US11503314B2 (en) 2016-07-08 2022-11-15 Interdigital Madison Patent Holdings, Sas Systems and methods for region-of-interest tone remapping
CN107800910A (zh) * 2016-09-02 2018-03-13 京瓷办公信息系统株式会社 图像形成装置和图像形成装置的控制方法
CN107800910B (zh) * 2016-09-02 2019-08-02 京瓷办公信息系统株式会社 图像形成装置和图像形成装置的控制方法
US11877308B2 (en) 2016-11-03 2024-01-16 Interdigital Patent Holdings, Inc. Frame structure in NR
CN110301136A (zh) * 2017-02-17 2019-10-01 Vid拓展公司 在流传输视频中进行选择性感兴趣对象缩放的系统和方法
US11765406B2 (en) 2017-02-17 2023-09-19 Interdigital Madison Patent Holdings, Sas Systems and methods for selective object-of-interest zooming in streaming video
US11272237B2 (en) 2017-03-07 2022-03-08 Interdigital Madison Patent Holdings, Sas Tailored video streaming for multi-device presentations
CN110461208A (zh) * 2017-03-29 2019-11-15 索尼奥林巴斯医疗解决方案公司 控制装置、外部装置、医学观察系统、控制方法、显示方法和程序
US11871451B2 (en) 2018-09-27 2024-01-09 Interdigital Patent Holdings, Inc. Sub-band operations in unlicensed spectrums of new radio

Also Published As

Publication number Publication date
US11276144B2 (en) 2022-03-15
KR102113072B1 (ko) 2020-05-20
US20200090302A1 (en) 2020-03-19
US20160042496A1 (en) 2016-02-11
KR20160019369A (ko) 2016-02-19
JP6659090B2 (ja) 2020-03-04
JP2016040709A (ja) 2016-03-24

Similar Documents

Publication Publication Date Title
CN105373331A (zh) 信息处理装置及显示控制方法
EP3049908B1 (en) Presentation of a control interface on a touch-enabled device based on a motion or absence thereof
EP2144147A2 (en) Systems and methods of touchless interaction
KR20150090840A (ko) 디스플레이 화면의 영역을 보호하는 디바이스 및 방법
US9298305B2 (en) Display control apparatus and method
US9880721B2 (en) Information processing device, non-transitory computer-readable recording medium storing an information processing program, and information processing method
KR102206355B1 (ko) 정보 처리장치, 정보 처리장치의 제어방법 및 기억매체
CN104243749A (zh) 图像形成装置及图像形成装置的控制方法
JP2014071724A (ja) 電子機器、制御方法及び制御プログラム
EP2728456A2 (en) Method and apparatus for controlling virtual screen
JP2017016314A (ja) 表示システム、情報処理装置、情報端末、及びプログラム
EP2538354A1 (en) Terminal and method for displaying data thereof
JP5839009B2 (ja) 表示装置、表示装置の制御方法、表示装置の制御プログラム、および表示システム
US20220035500A1 (en) Image processing apparatus, control method for image processing apparatus, and recording medium
JP6700749B2 (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP7130686B2 (ja) 情報処理装置、コンピュータプログラム、情報処理装置の制御方法
WO2020170461A1 (ja) 情報処理装置及び情報処理方法
JP6139068B2 (ja) 装置及び方法
US11009991B2 (en) Display control apparatus and control method for the display control apparatus
JP6971573B2 (ja) 電子機器、その制御方法およびプログラム
JP5968074B2 (ja) 通信端末装置及び制御方法
JP7030529B2 (ja) 電子機器、情報処理方法、プログラム及び記憶媒体
JP5943743B2 (ja) 表示制御装置、その制御方法及びプログラム
JP6801051B2 (ja) 情報処理装置、及びその制御方法、並びにプログラム
JP2019121312A (ja) 電子機器、情報処理方法、プログラム及び記憶媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160302